CN107862917A - 表格词汇测试在儿童及成人英语教学的应用系统及方法 - Google Patents

表格词汇测试在儿童及成人英语教学的应用系统及方法 Download PDF

Info

Publication number
CN107862917A
CN107862917A CN201711030386.0A CN201711030386A CN107862917A CN 107862917 A CN107862917 A CN 107862917A CN 201711030386 A CN201711030386 A CN 201711030386A CN 107862917 A CN107862917 A CN 107862917A
Authority
CN
China
Prior art keywords
matrix
frequency domain
module
english
frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711030386.0A
Other languages
English (en)
Inventor
欧亚美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan City University
Original Assignee
Hunan City University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan City University filed Critical Hunan City University
Priority to CN201711030386.0A priority Critical patent/CN107862917A/zh
Publication of CN107862917A publication Critical patent/CN107862917A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Signal Processing (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明属于英语教学技术领域，公开了一种表格词汇测试在儿童及成人英语教学的应用系统及方法，系统包括语音识别模块，语音处理模块，储存模块，对比模块，输出语音模块，显示模块。本发明采用多模态的教学材料可以调动学的各种感官，大大地提高学生学习的兴趣和效率；多模态教学方法能充分引导学生产生兴趣，从而全身心的投入到地道的英语语言氛围，提高对外英语教学效果；多模态教学要求培养学生的多元识读能力，让学生学会从语言文字、肢体动作、声音图像等多方面获取信息，从而能够全面提高自身的能力。

Description

表格词汇测试在儿童及成人英语教学的应用系统及方法
技术领域
本发明属于英语教学技术领域，尤其涉及一种表格词汇测试在儿童及成人英语教学的应用系统及方法。
背景技术
语言是民族文化的一部分，语言的创立是为了方便本地区或者本民族人民的交流，是珍贵的民族象征。现在，语言更是成为了提高民族凝聚力的武器，也是对外宣传民族文化的重要法宝，是提高一个国家国际地位，增加其软实力的一个有效途径。因此，各个国家都重视本民族语言的对外传播与教学。另一方面，教学理论、教学方法及时代的发展，使得传统的教学模式已经不能满足课堂教学需求。具体体现在教学材料、教学方法和能力培养这三方面。传统英语教学中，教师的备课主要是板书安排，只能让学生通过听和看去体会，而如果学生注意力不集中或者理解较慢可能会错过关键信息，而且这种单一的教学模式会让学生觉得枯燥无味，学习兴趣下降。在传统的教学中，教师起主导作用,课堂也是依靠教师讲解单词、语法、句式等知识，基本属于照本宣科的层面。而这种教学方法对于母语非英语的学生来讲是没有什么效果的。对外英语教学要培养学生的英语听、说、读、写能力。在传统的教学中，听力课程主要依靠录音训练，阅读课程教导学生分析语言，口语和写作也是依靠单一的模态来提高学生某一方面的水平，这使得学生能力的提高非常有限。
在英语宽带无线通信中，当通信的两个终端以较快的相对速度运动时，产生了多普勒效应，无线信道形成了快时变信道。快时变信道引起的子载波间干扰ICI和多径效应带来的符号间干扰ISI会造成SC-FDMA系统性能的迅速恶化。所以，在信号的接收端对信号进行解调和解码之前，对信道进行动态估计是十分必要的。
现有的信道估计方法大多是基于导频辅助的，在发送的数据中周期性的插入已知的导频信息，这类方法均是先估计得到导频位置上的信道响应，然后利用一定的处理方法得到数据位置上的信道响应。
现有的英语信息计算复杂度高，不易于实现，且P-BEM模型误差比复指数基扩展模型CE-BEM的误差大，影响快时变信道估计的精度。影响英语信息的对比准确性。
综上所述，现有技术存在的问题是：传统的教学存在单一教学模式会让学生觉得枯燥无味，学习兴趣下降，不利于提高学习成绩。
发明内容
针对现有技术存在的问题，本发明提供了一种表格词汇测试在儿童及成人英语教学的应用系统及方法。
本发明是这样实现的，一种表格词汇测试在儿童及成人英语教学的应用系统，所述表格词汇测试在儿童及成人英语教学的应用系统包括：
语音识别模块，用于拾取儿童及成人英语的发音信息，并进行识别；
所述语音识别模块的语音识别方法对于每一路声音信号，按照下述公式对所述声音信号中的每一帧声音信号进行噪声跟踪，获取每一帧声音信号的噪声谱N(w,n)：
其中，X(w,n)表示所述声音信号的短时傅里叶变换；αu、αd为预设系数且0<αd<αu<1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式对每一帧声音信号的短时傅里叶变换进行二值化处理得到二值谱Xb(w,n)：
Tb为预设第一阈值；
将其中一路声音信号对应的Ka个二值谱与另一路声音信号对应的Kb个二值谱进行两两间的相干性匹配得到所述第一匹配结果，所述第一匹配结果包括匹配度最高的一组二值谱对应的匹配位置和匹配度，Ka、Kb均为正整数；
对于每一路声音信号，按照下述公式计算所述声音信号中的每一帧声音信号的功率谱P(w,n)：
P(w，n)＝αpP(w，n-1)+(1-αp)|X(w，n)|2
其中，X(w,n)表示所述声音信号的短时傅里叶变换；
αp为预设系数且0＜αp＜1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式计算每一帧声音信号的功率谱的谱间相关性DP(w,n)：
DP(w,n)＝|P(w+1,n)-P(w,n)|
按照下述公式对所述谱间相关性DP(w,n)进行噪声跟踪，获取每一帧声音信号的噪声功率谱的谱间相关性NDP(w,n)：
其中，βu、βd为预设系数且0＜βd＜βu＜1；
语音处理模块，与语音识别模块连接，用于处理语音识别信息，并进行去噪处理；
储存模块，用于储存标注英语发音信息，并预嵌有不同场合下人际交流沟通中，模拟的多种对话情景；
对比模块，分别与语音处理模块、储存模块连接；用于对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断；
输出语音模块，与对比模块连接，用于输出标准的信息，并对错误的语音信息进行纠正；
显示模块，与对比模块连接，用于显示输入的儿童及成人英语的发音信息与储存模块预嵌的不同场合下人际交流沟通中，模拟的多种对话情景对比下；显示的对应的对话情景图像信息。
进一步，所述对比模块包括：频率分析单元、相位曲线计算单元、误差计算单元；
所述的频率分析单元，分析声音信号的频率信号；
所述的相位曲线计算单元，计算与所述频率信号的相位的时间变化进行近似的相位曲线；
所述的误差计算单元，对所述相位曲线与所述频率信号的相位之间的误差进行计算。
进一步，所述输出语音模块包括音频接口；所述音频接口设置有：
第一声道端子、第二声道端子和话筒端子；所述第一声道端子与显示模块连接；第二声道端子与外接移动终端无线连接；话筒端子与音响连接。
本发明的另一目的在于提供一种表格词汇测试在儿童及成人英语教学的应用方法，包括对比模块对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断的方法，具体包括：对接收信号进行快速傅立叶FFT变换，获得频域接收信号Y，从该频域接收信号Y中提取接收端接收到的块状导频符号其中pλ是接收到的块状导频符号的序号；
利用接收到的块状导频符号和频域矩阵采用最小二乘方法得到基系数向量的估计值其中，是矩阵的广义逆运算；
根据推导出的基系数和频域信道响应的数学关系式利用估计出的基系数直接得到频域信道响应矩阵其中是利用复指数基扩展模型，生成基函数矩阵导频符号处的基函数对应的频域矩阵及所有符号的基函数对应的频域矩阵其中，q＝0,…,Q，Q是基函数的个数，ns是每个单载波频分复用符号的序号中生成的频域矩阵。
进一步，所述的利用估计值直接得到频域信道响应矩阵按照如下步骤进行：
a)建立基系数与频域信道响应矩阵的关系式：
忽略一个符号内部的子载波间干扰，每个单载波频分复用符号的频域信道矩阵与时域信道矩阵的关系近似为：
其中，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作。
将基扩展模型表达式代入到上式中，得到：
由于Gq是托普利兹循环矩阵，Gq第一列为[gq,0,gq,1,…,gq,L-1,0,…,0]T，所以令gq＝[gq,0,…,gq,l,…,gq,L-1]T，FGqFH＝FLgq，其中，FL是矩阵F的前L列，上式可简化为：
其中，的基函数矩阵，
其中，是基函数矩阵的元素；是矩阵的前L列，的频域矩阵，可描述为：
其中，是第q个频域矩阵，q＝0,1,…,Q，Q是基函数的个数，是导频符号处的基函数矩阵，ps是导频符号的序号，是矩阵的前L列，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作；
Q是基函数的个数，ns是单载波频分复用符号的序号。至此，建立了基系数g与频域信道响应矩阵的数学关系式。
b)获得每个单载波频分复用符号的频域信道响应矩阵：
利用估计出的基系数按照立的基系数与频域信道响应矩阵的数学关系式，得到第ns个单载波频分复用符号的频域信道响应矩阵：
其中，是频域矩阵。
本发明的优点及积极效果为：采用多模态的教学材料可以调动学的各种感官，大大地提高学生学习的兴趣和效率；多模态教学方法能充分引导学生产生兴趣，从而全身心的投入到地道的英语语言氛围，提高对外英语教学效果；多模态教学要求培养学生的多元识读能力，让学生学会从语言文字、肢体动作、声音图像等多方面获取信息，从而能够全面提高自身的能力。
多模态语言教学模式的构建，对于“教”与“学”的实践都具有重要意义。实现单模态向多模态教学模式的转换与提升，对于广大教师和学生发挥全部感官的综合作用、充分而有效地接收、处理和运用各种信息，对于实现文字、声音和图像等各种模态的结合以提高教学与学习效率，对于充分运用视觉、听觉和言语的功能和作用，提高学习效果的持久性，对于充分利用各种教学资源，如课内教材与课外读物相结合、网络资源与图书资源相结合、校内资源与校外资源相结合以提高教学质量和人才培养质量都具有十分重要的实践意义。充分利用各种教学资源，实现课内教材与课外读物相结合、网络资源与图书资源相结合、校内资源与校外资源相结合，以提高学生学习的兴趣、主动性和学习效率与效果，从而提高教学质量和人才培养质量。
本发明的语音识别方法，提高了语音识别的效率和准确率。
本发明利用信道的时频域特性，推导出基系数与频域信道响应矩阵的数学关系式，避免了计算复杂度较高的信道时频域转换过程，便于接收机对接收信号进行频域均衡处理。
附图说明
图1是本发明实施例提供的表格词汇测试在儿童及成人英语教学的应用系统结构示意图；
图中：1、语音识别模块；2、语音处理模块；3、储存模块；4、对比模块；5、输出语音模块；6、显示模块。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
下面结合附图对本发明的应用原理作详细的描述。
如图1所示，本发明实施例提供的表格词汇测试在儿童及成人英语教学的应用系统包括：
语音识别模块1，用于拾取儿童及成人英语的发音信息，并进行识别；
所述语音识别模块的语音识别方法对于每一路声音信号，按照下述公式对所述声音信号中的每一帧声音信号进行噪声跟踪，获取每一帧声音信号的噪声谱N(w,n)：
其中，X(w,n)表示所述声音信号的短时傅里叶变换；αu、αd为预设系数且0<αd<αu<1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式对每一帧声音信号的短时傅里叶变换进行二值化处理得到二值谱Xb(w,n)：
Tb为预设第一阈值；
将其中一路声音信号对应的Ka个二值谱与另一路声音信号对应的Kb个二值谱进行两两间的相干性匹配得到所述第一匹配结果，所述第一匹配结果包括匹配度最高的一组二值谱对应的匹配位置和匹配度，Ka、Kb均为正整数；
对于每一路声音信号，按照下述公式计算所述声音信号中的每一帧声音信号的功率谱P(w,n)：
P(w，n)＝αpP(w，n-1)+(1-αp)|X(w，n)|2
其中，X(w,n)表示所述声音信号的短时傅里叶变换；
αp为预设系数且0＜αp＜1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式计算每一帧声音信号的功率谱的谱间相关性DP(w,n)：
DP(w,n)＝|P(w+1,n)-P(w,n)|
按照下述公式对所述谱间相关性DP(w,n)进行噪声跟踪，获取每一帧声音信号的噪声功率谱的谱间相关性NDP(w,n)：
其中，βu、βd为预设系数且0＜βd＜βu＜1；
语音处理模块2，与语音识别模块连接，用于处理语音识别信息，并进行去噪处理；
储存模块3，用于储存标注英语发音信息，并预嵌有不同场合下人际交流沟通中，模拟的多种对话情景；
对比模块4，分别与语音处理模块、储存模块连接；用于对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断；
输出语音模块5，与对比模块连接，用于输出标准的信息，并对错误的语音信息进行纠正；
显示模块6，与对比模块连接，用于显示输入的儿童及成人英语的发音信息与储存模块预嵌的不同场合下人际交流沟通中，模拟的多种对话情景对比下；显示的对应的对话情景图像信息。
所述对比模块包括：频率分析单元、相位曲线计算单元、误差计算单元；
所述的频率分析单元，分析声音信号的频率信号；
所述的相位曲线计算单元，计算与所述频率信号的相位的时间变化进行近似的相位曲线；
所述的误差计算单元，对所述相位曲线与所述频率信号的相位之间的误差进行计算。
所述输出语音模块包括音频接口；所述音频接口设置有：
第一声道端子、第二声道端子和话筒端子；所述第一声道端子与显示模块连接；第二声道端子与外接移动终端无线连接；话筒端子与音响连接。
本发明的一种表格词汇测试在儿童及成人英语教学的应用方法，包括对比模块对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断的方法，具体包括：对接收信号进行快速傅立叶FFT变换，获得频域接收信号Y，从该频域接收信号Y中提取接收端接收到的块状导频符号其中pλ是接收到的块状导频符号的序号；
利用接收到的块状导频符号和频域矩阵采用最小二乘方法得到基系数向量的估计值其中，是矩阵的广义逆运算；
根据推导出的基系数和频域信道响应的数学关系式利用估计出的基系数直接得到频域信道响应矩阵其中是利用复指数基扩展模型，生成基函数矩阵导频符号处的基函数对应的频域矩阵及所有符号的基函数对应的频域矩阵其中，q＝0,…,Q，Q是基函数的个数，ns是每个单载波频分复用符号的序号中生成的频域矩阵。
所述的利用估计值直接得到频域信道响应矩阵按照如下步骤进行：
a)建立基系数与频域信道响应矩阵的关系式：
忽略一个符号内部的子载波间干扰，每个单载波频分复用符号的频域信道矩阵与时域信道矩阵的关系近似为：
其中，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作。
将基扩展模型表达式代入到上式中，得到：
由于Gq是托普利兹循环矩阵，Gq第一列为[gq,0,gq,1,…,gq,L-1,0,…,0]T，所以令gq＝[gq,0,…,gq,l,…,gq,L-1]T，FGqFH＝FLgq，其中，FL是矩阵F的前L列，上式可简化为：
其中，的基函数矩阵；
其中，是基函数矩阵的元素；是矩阵的前L列，的频域矩阵，可描述为：
其中，是第q个频域矩阵，q＝0,1,…,Q，Q是基函数的个数，是导频符号处的基函数矩阵，ps是导频符号的序号，是矩阵的前L列，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作；
Q是基函数的个数，ns是单载波频分复用符号的序号。至此，建立了基系数g与频域信道响应矩阵的数学关系式。
b)获得每个单载波频分复用符号的频域信道响应矩阵：
利用估计出的基系数按照立的基系数与频域信道响应矩阵的数学关系式，得到第ns个单载波频分复用符号的频域信道响应矩阵：
其中，是频域矩阵。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种表格词汇测试在儿童及成人英语教学的应用系统，其特征在于，所述表格词汇测试在儿童及成人英语教学的应用系统包括：
语音识别模块，用于拾取儿童及成人英语的发音信息，并进行识别；
所述语音识别模块的语音识别方法对于每一路声音信号，按照下述公式对所述声音信号中的每一帧声音信号进行噪声跟踪，获取每一帧声音信号的噪声谱N(w,n)：
<mrow> <mi>N</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfenced open = "{" close = ""> <mtable> <mtr> <mtd> <mrow> <mo>(</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>&amp;alpha;</mi> <mi>u</mi> </msub> <mo>)</mo> <mo>|</mo> <mi>X</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> <mo>|</mo> <mo>+</mo> <msub> <mi>&amp;alpha;</mi> <mi>u</mi> </msub> <mi>N</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mo>|</mo> <mi>X</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>&amp;GreaterEqual;</mo> <mi>N</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mo>(</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>&amp;alpha;</mi> <mi>d</mi> </msub> <mo>)</mo> <mo>|</mo> <mi>X</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> <mo>|</mo> <mo>+</mo> <msub> <mi>&amp;alpha;</mi> <mi>d</mi> </msub> <mi>N</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mo>|</mo> <mi>X</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>&lt;</mo> <mi>N</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> </mtable> </mfenced> <mo>;</mo> </mrow>
其中，X(w,n)表示所述声音信号的短时傅里叶变换；αu、αd为预设系数且0<αd<αu<1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式对每一帧声音信号的短时傅里叶变换进行二值化处理得到二值谱Xb(w,n)：
<mrow> <mi>X</mi> <mi>b</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfenced open = "{" close = ""> <mtable> <mtr> <mtd> <mrow> <mn>1</mn> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mo>|</mo> <mi>X</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>-</mo> <mi>N</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>&gt;</mo> <msub> <mi>T</mi> <mi>b</mi> </msub> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mn>0</mn> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mo>|</mo> <mi>X</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>|</mo> <mo>-</mo> <mi>N</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>&amp;le;</mo> <msub> <mi>T</mi> <mi>b</mi> </msub> </mrow> </mtd> </mtr> </mtable> </mfenced> </mrow>
Tb为预设第一阈值；
将其中一路声音信号对应的Ka个二值谱与另一路声音信号对应的Kb个二值谱进行两两间的相干性匹配得到所述第一匹配结果，所述第一匹配结果包括匹配度最高的一组二值谱对应的匹配位置和匹配度，Ka、Kb均为正整数；
对于每一路声音信号，按照下述公式计算所述声音信号中的每一帧声音信号的功率谱P(w,n)：
P(w，n)＝αpP(w，n-1)+(1-αp)|X(w，n)|2
其中，X(w,n)表示所述声音信号的短时傅里叶变换；
αp为预设系数且0＜αp＜1；w表示频域上的频点序号；n表示时域上的帧序号；
按照下述公式计算每一帧声音信号的功率谱的谱间相关性DP(w,n)：
DP(w,n)＝|P(w+1,n)-P(w,n)|
按照下述公式对所述谱间相关性DP(w,n)进行噪声跟踪，获取每一帧声音信号的噪声功率谱的谱间相关性NDP(w,n)：
<mrow> <mi>N</mi> <mi>D</mi> <mi>P</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfenced open = "{" close = ""> <mtable> <mtr> <mtd> <mrow> <mo>(</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>&amp;beta;</mi> <mi>u</mi> </msub> <mo>)</mo> <mi>D</mi> <mi>P</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> <mo>+</mo> <msub> <mi>&amp;beta;</mi> <mi>u</mi> </msub> <mi>N</mi> <mi>D</mi> <mi>P</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mi>D</mi> <mi>P</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>&amp;GreaterEqual;</mo> <mi>N</mi> <mi>D</mi> <mi>P</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mo>(</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>&amp;beta;</mi> <mi>d</mi> </msub> <mo>)</mo> <mi>D</mi> <mi>P</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> <mo>+</mo> <msub> <mi>&amp;beta;</mi> <mi>d</mi> </msub> <mi>N</mi> <mi>D</mi> <mi>P</mi> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> <mo>,</mo> </mrow> </mtd> <mtd> <mrow> <mi>D</mi> <mi>P</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>)</mo> </mrow> <mo>&lt;</mo> <mi>N</mi> <mi>D</mi> <mi>P</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> </mtable> </mfenced> </mrow>
其中，βu、βd为预设系数且0＜βd＜βu＜1；
语音处理模块，与语音识别模块连接，用于处理语音识别信息，并进行去噪处理；
储存模块，用于储存标注英语发音信息，并预嵌有不同场合下人际交流沟通中，模拟的多种对话情景；
对比模块，分别与语音处理模块、储存模块连接；用于对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断；
输出语音模块，与对比模块连接，用于输出标准的信息，并对错误的语音信息进行纠正；
显示模块，与对比模块连接，用于显示输入的儿童及成人英语的发音信息与储存模块预嵌的不同场合下人际交流沟通中，模拟的多种对话情景对比下；显示的对应的对话情景图像信息。
2.如权利要求1所述表格词汇测试在儿童及成人英语教学的应用系统，其特征在于，所述对比模块包括：频率分析单元、相位曲线计算单元、误差计算单元；
所述的频率分析单元，分析声音信号的频率信号；
所述的相位曲线计算单元，计算与所述频率信号的相位的时间变化进行近似的相位曲线；
所述的误差计算单元，对所述相位曲线与所述频率信号的相位之间的误差进行计算。
3.如权利要求1所述表格词汇测试在儿童及成人英语教学的应用系统，其特征在于，所述输出语音模块包括音频接口；所述音频接口设置有：
第一声道端子、第二声道端子和话筒端子；所述第一声道端子与显示模块连接；第二声道端子与外接移动终端无线连接；话筒端子与音响连接。
4.一种如权利要求1所述表格词汇测试在儿童及成人英语教学的应用系统的表格词汇测试在儿童及成人英语教学的应用方法，其特征在于，所述表格词汇测试在儿童及成人英语教学的应用方法包括对比模块对输入的儿童及成人英语的发音信息与储存标注英语发音信息进行对比判断的方法，具体包括：对接收信号进行快速傅立叶FFT变换，获得频域接收信号Y，从该频域接收信号Y中提取接收端接收到的块状导频符号其中pλ是接收到的块状导频符号的序号；
利用接收到的块状导频符号和频域矩阵采用最小二乘方法得到基系数向量的估计值其中，是矩阵的广义逆运算；
根据推导出的基系数和频域信道响应的数学关系式利用估计出的基系数直接得到频域信道响应矩阵其中是利用复指数基扩展模型，生成基函数矩阵导频符号处的基函数对应的频域矩阵及所有符号的基函数对应的频域矩阵其中，q＝0,…,Q，Q是基函数的个数，ns是每个单载波频分复用符号的序号中生成的频域矩阵。
5.如权利要求4所述的应用系统的表格词汇测试在儿童及成人英语教学的应用方法，其特征在于，所述的利用估计值直接得到频域信道响应矩阵按照如下步骤进行：
a)建立基系数与频域信道响应矩阵的关系式：
忽略一个符号内部的子载波间干扰，每个单载波频分复用符号的频域信道矩阵与时域信道矩阵的关系近似为：
<mrow> <msup> <mi>H</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <mo>=</mo> <mi>d</mi> <mi>i</mi> <mi>a</mi> <mi>g</mi> <mrow> <mo>(</mo> <msup> <mi>Fh</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <msup> <mi>F</mi> <mi>H</mi> </msup> <mo>)</mo> </mrow> <mo>,</mo> </mrow>
其中，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作；
将基扩展模型表达式代入到上式中，得到：
<mrow> <mtable> <mtr> <mtd> <mrow> <msup> <mi>H</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <mo>=</mo> <mi>d</mi> <mi>i</mi> <mi>a</mi> <mi>g</mi> <mrow> <mo>(</mo> <mrow> <mi>F</mi> <mrow> <mo>(</mo> <mrow> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>q</mi> <mo>=</mo> <mn>0</mn> </mrow> <mi>Q</mi> </munderover> <msubsup> <mi>D</mi> <mi>q</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msubsup> <msub> <mi>G</mi> <mi>q</mi> </msub> </mrow> <mo>)</mo> </mrow> <msup> <mi>F</mi> <mi>H</mi> </msup> </mrow> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mo>=</mo> <mi>d</mi> <mi>i</mi> <mi>a</mi> <mi>g</mi> <mrow> <mo>(</mo> <mrow> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>q</mi> <mo>=</mo> <mn>0</mn> </mrow> <mi>Q</mi> </munderover> <msubsup> <mi>FD</mi> <mi>q</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msubsup> <msup> <mi>F</mi> <mi>H</mi> </msup> <msub> <mi>FG</mi> <mi>q</mi> </msub> <msup> <mi>F</mi> <mi>H</mi> </msup> </mrow> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> </mtable> <mo>,</mo> </mrow>
由于Gq是托普利兹循环矩阵，Gq第一列为[gq,0,gq,1,…,gq,L-1,0,…,0]T，所以令gq＝[gq,0,…,gq,l,…,gq,L-1]T，FGqFH＝FLgq，其中，FL是矩阵F的前L列，上式可简化为：
其中，的基函数矩阵；
其中，是基函数矩阵的元素；是矩阵的前L列，的频域矩阵，可描述为：
<mrow> <mtable> <mtr> <mtd> <mrow> <msup> <mi>&amp;Delta;</mi> <msub> <mi>p</mi> <mi>s</mi> </msub> </msup> <mo>=</mo> <mo>&amp;lsqb;</mo> <msubsup> <mi>&amp;Delta;</mi> <mn>0</mn> <msub> <mi>p</mi> <mi>s</mi> </msub> </msubsup> <mo>,</mo> <mo>...</mo> <mo>,</mo> <msubsup> <mi>&amp;Delta;</mi> <mi>q</mi> <msub> <mi>p</mi> <mi>s</mi> </msub> </msubsup> <mo>,</mo> <mo>...</mo> <mo>,</mo> <msubsup> <mi>&amp;Delta;</mi> <mi>Q</mi> <msub> <mi>p</mi> <mi>s</mi> </msub> </msubsup> <mo>&amp;rsqb;</mo> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <msup> <mi>&amp;Psi;</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <mo>=</mo> <mo>&amp;lsqb;</mo> <msubsup> <mi>FD</mi> <mn>0</mn> <msub> <mi>n</mi> <mi>s</mi> </msub> </msubsup> <mrow> <mo>(</mo> <mi>L</mi> <mo>)</mo> </mrow> <mo>,</mo> <msubsup> <mi>FD</mi> <mn>1</mn> <msub> <mi>n</mi> <mi>s</mi> </msub> </msubsup> <mrow> <mo>(</mo> <mi>L</mi> <mo>)</mo> </mrow> <mo>,</mo> <mn>...</mn> <mo>,</mo> <msubsup> <mi>FD</mi> <mi>Q</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msubsup> <mrow> <mo>(</mo> <mi>L</mi> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> </mtd> </mtr> </mtable> <mo>;</mo> </mrow>
其中，是第q个频域矩阵，q＝0,1,…,Q，Q是基函数的个数，是导频符号处的基函数矩阵，ps是导频符号的序号，是矩阵的前L列，F是N点快速傅里叶变换矩阵，(·)H是矩阵的共轭转置操作；
Q是基函数的个数，ns是单载波频分复用符号的序号；建立了基系数g与频域信道响应矩阵的数学关系式；
b)获得每个单载波频分复用符号的频域信道响应矩阵：
利用估计出的基系数按照立的基系数与频域信道响应矩阵的数学关系式，得到第ns个单载波频分复用符号的频域信道响应矩阵：
<mrow> <msup> <mover> <mi>H</mi> <mo>^</mo> </mover> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <mo>=</mo> <msup> <mi>&amp;Psi;</mi> <msub> <mi>n</mi> <mi>s</mi> </msub> </msup> <mover> <mi>g</mi> <mo>^</mo> </mover> <mo>,</mo> </mrow>
其中，是频域矩阵。
CN201711030386.0A 2017-10-27 2017-10-27 表格词汇测试在儿童及成人英语教学的应用系统及方法 Pending CN107862917A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711030386.0A CN107862917A (zh) 2017-10-27 2017-10-27 表格词汇测试在儿童及成人英语教学的应用系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711030386.0A CN107862917A (zh) 2017-10-27 2017-10-27 表格词汇测试在儿童及成人英语教学的应用系统及方法

Publications (1)

Publication Number Publication Date
CN107862917A true CN107862917A (zh) 2018-03-30

Family

ID=61696455

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711030386.0A Pending CN107862917A (zh) 2017-10-27 2017-10-27 表格词汇测试在儿童及成人英语教学的应用系统及方法

Country Status (1)

Country Link
CN (1) CN107862917A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109102824A (zh) * 2018-07-06 2018-12-28 北京比特智学科技有限公司 基于人机交互的语音纠错方法和装置
CN109147485A (zh) * 2018-08-23 2019-01-04 深圳点猫科技有限公司 一种基于游戏化教育的混合运算教学互动方法、电子设备
CN109191968A (zh) * 2018-10-25 2019-01-11 重庆鲁班机器人技术研究院有限公司 语言教育机器人及多教育机器人语言学习系统
CN109726300A (zh) * 2018-12-29 2019-05-07 北京金山安全软件有限公司 一种多媒体数据处理方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101042716A (zh) * 2006-07-13 2007-09-26 东莞市步步高教育电子产品有限公司 一种电子宠物娱乐学习系统及方法
CN104700842A (zh) * 2015-02-13 2015-06-10 广州市百果园网络科技有限公司 声音信号的时延估计方法和装置
CN107222438A (zh) * 2017-05-23 2017-09-29 西安电子科技大学 高速移动sc‑fdma系统的简化bem信道估计方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101042716A (zh) * 2006-07-13 2007-09-26 东莞市步步高教育电子产品有限公司 一种电子宠物娱乐学习系统及方法
CN104700842A (zh) * 2015-02-13 2015-06-10 广州市百果园网络科技有限公司 声音信号的时延估计方法和装置
CN107222438A (zh) * 2017-05-23 2017-09-29 西安电子科技大学 高速移动sc‑fdma系统的简化bem信道估计方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109102824A (zh) * 2018-07-06 2018-12-28 北京比特智学科技有限公司 基于人机交互的语音纠错方法和装置
CN109147485A (zh) * 2018-08-23 2019-01-04 深圳点猫科技有限公司 一种基于游戏化教育的混合运算教学互动方法、电子设备
CN109191968A (zh) * 2018-10-25 2019-01-11 重庆鲁班机器人技术研究院有限公司 语言教育机器人及多教育机器人语言学习系统
CN109726300A (zh) * 2018-12-29 2019-05-07 北京金山安全软件有限公司 一种多媒体数据处理方法及装置

Similar Documents

Publication Publication Date Title
CN107862917A (zh) 表格词汇测试在儿童及成人英语教学的应用系统及方法
CN102436809B (zh) 英语口语机考系统中网络语音识别方法
Darabkh et al. An efficient speech recognition system for arm‐disabled students based on isolated words
Daniels et al. The suitability of cloud-based speech recognition engines for language learning.
CN103761975A (zh) 一种口语评测方法及装置
CN109147763A (zh) 一种基于神经网络和逆熵加权的音视频关键词识别方法和装置
CN111522971A (zh) 一种直播教学中辅助用户听课的方法及装置
CN110427977A (zh) 一种课堂互动行为的检测方法
CN114841841A (zh) 一种用于教学互动的智慧教育平台交互系统及交互方法
CN111915940A (zh) 一种口语发音评测和教学方法、系统、终端及存储介质
CN111078010B (zh) 一种人机交互方法、装置、终端设备及可读存储介质
CN111554318A (zh) 一种手机端发音可视化系统的实现方法
CN108245886B (zh) 基于语音控制的游戏化语言学习方法及系统
Shufang Design of an automatic english pronunciation error correction system based on radio magnetic pronunciation recording devices
CN112767961B (zh) 一种基于云端计算的口音矫正方法
RU153322U1 (ru) Устройство для обучения разговорной(устной) речи с визуальной обратной связью
Castillejo Automatic speech recognition
CN111950472A (zh) 教师磨课测评方法及系统
JP7039637B2 (ja) 情報処理装置、情報処理方法、情報処理システム、情報処理プログラム
CN204720003U (zh) 一种大学英语双向译读听写练习装置
CN113314107B (zh) 训练语音增广模型的方法和装置
Jing Music Teaching Reform in Colleges and Universities under the Background of the Development of Contemporary Music Discipline
Hu Design and implementation of college English learning system based on Speech Recognition Technology
Teresa et al. Enhancing Children's Learning Experience: Interactive and Personalized Video Learning with AI Technology
Katsay et al. Analysis of Speech Samples as a Means of Intensification of Teaching Phonetics of a Foreign Language

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180330