CN110992739A - 学生在线听写系统 - Google Patents

学生在线听写系统 Download PDF

Info

Publication number
CN110992739A
CN110992739A CN201911363864.9A CN201911363864A CN110992739A CN 110992739 A CN110992739 A CN 110992739A CN 201911363864 A CN201911363864 A CN 201911363864A CN 110992739 A CN110992739 A CN 110992739A
Authority
CN
China
Prior art keywords
dictation
data
audio data
module
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911363864.9A
Other languages
English (en)
Other versions
CN110992739B (zh
Inventor
王鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Yixue Education Technology Co Ltd
Original Assignee
Shanghai Yixue Education Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Yixue Education Technology Co Ltd filed Critical Shanghai Yixue Education Technology Co Ltd
Priority to CN201911363864.9A priority Critical patent/CN110992739B/zh
Publication of CN110992739A publication Critical patent/CN110992739A/zh
Application granted granted Critical
Publication of CN110992739B publication Critical patent/CN110992739B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/04—Electrically-operated educational appliances with audible presentation of the material to be studied
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student

Abstract

本发明提供了一种学生在线听写系统，该学生在线听写系统通过设置听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端来存储若干不同的听写音频数据和听写文本数据，根据该听写音频数据，执行预定模式的听写音频数据播放操作，以及获取学生在听写音频数据播放操作过程中对应的听写撰写数据结果并进行评判处理，从而获得相应的评判结果，该学生在线听写系统能够实现对听写音频数据的自动播放、听写撰写数据结果的自动记录和评判，以便于学生能够根据自身需要随时随地进行相应的听写训练，从而提高听写训练的自动化程度和便捷性。

Description

学生在线听写系统
技术领域
本发明涉及智能教育的技术领域，特别涉及一种学生在线听写系统。
背景技术
在外语教学过程中，培养学生的听说读写能力是外语教学的重要方面。其中，词汇和语句的背诵和记忆显得尤为重要，为了增强学生对词汇和语句的记忆能力，通常都需要对学生进行相应的听写训练。目前，对学生的听写训练都是通过人工方式来实现，由于人工阅读和人工评判始终会存在相应的偏差，这对于提高学生的外语能力存在一定的影响，此外这种人工方式并不能使学生能够随时随地进行相应的听写训练，这存在相应的时间和地点的局限性。可见现有技术中的听写训练模式并不能有效地和便捷地帮助学生进行可靠的听写训练。
发明内容
针对现有技术存在的缺陷，本发明提供一种学生在线听写系统，该学生在线听写系统通过设置听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端来存储若干不同的听写音频数据和听写文本数据，根据该听写音频数据，执行预定模式的听写音频数据播放操作，以及获取学生在听写音频数据播放操作过程中对应的听写撰写数据结果并进行评判处理，从而获得相应的评判结果，该学生在线听写系统能够实现对听写音频数据的自动播放、听写撰写数据结果的自动记录和评判，以便于学生能够根据自身需要随时随地进行相应的听写训练，从而提高听写训练的自动化程度和便捷性。
本发明提供一种学生在线听写系统，其特征在于：
所述学生在线听写系统包括听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端；其中，
所述听写数据存储终端用于存储若干不同的听写音频数据和听写文本数据；
所述听写操作执行终端用于根据所述听写音频数据，执行预定模式的听写音频数据播放操作；
所述学生操作终端用于获取学生在所述听写音频数据播放操作过程中对应的听写撰写数据结果；
所述听写结果评判终端用于对所述听写撰写数据结果进行评判处理，以获得相应的评判结果；
进一步，所述听写数据存储终端包括听写数据核对模块、听写数据质量获取模块和听写数据更新模块；其中，
所述听写数据核对模块用于对所述听写音频数据与所述听写文本数据进行关于匹配性的核对处理；
所述听写数据质量获取模块用于获取所述听写音频数据的音频质量信息；
所述听写数据更新模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写音频数据和/或所述听写文本数据进行更新处理；
进一步，所述听写数据核对模块包括音频数据转换子模块、音频-文本匹配度计算子模块和匹配性核对子模块；其中，
所述音频数据转换子模块用于根据预设神经网络模型将所述听写音频数据对应转换为翻译文本数据；
所述音频-文本匹配度计算子模块用于根据预设学习计算模型计算所述翻译文本数据与所述听写文本数据之间的匹配度；
所述匹配性核对子模块用于根据所述匹配度，对所述听写音频数据与所述听写文本数据进行关于匹配性的核对处理，以确定所述听写音频数据与所述听写文本数据之间是否相匹配；
或者，
所述听写数据质量获取模块包括音频清晰度获取子模块、音频语速获取子模块和音频声纹获取子模块；其中，
所述音频清晰度获取子模块、所述音频语速获取子模块和所述音频声纹获取子模块用于分别获取关于所述听写音频数据的清晰度信息、语速信息和声纹信息，作为所述音频质量信息；
或者，
所述听写数据更新模块包括音频数据修复子模块和文本数据调整子模块；其中，
所述音频数据修复子模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写音频数据进行音质修复处理；
所述文本数据调整子模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写文本数据进行文本内容调整处理；
进一步，所述听写操作执行终端包括听写音频数据确定模块、听写音频数据播放模块、播放状态检测模块和播放状态调整模块；其中，
所述听写音频数据确定模块用于根据预设听写条件，从所述听写数据存储终端上确定待播放的听写音频数据；
所述听写音频数据播放模块用于根据预定音频播放模式，对所述待播放的听写音频数据进行播放操作；
所述播放状态检测模块用于检测所述待播放的听写音频数据的实时播放状态信息；
所述播放状态调整模块用于根据所述实时播放状态信息，调整所述播放操作对应的播放参数；
进一步，所述学生操作终端包括撰写交互模块、撰写状态获取模块、撰写状态分析模块和撰写数据结果寄存模块；其中，
所述撰写交互模块用于提供关于学生进行听写动作过程中对应的听写交互界面；
所述撰写状态获取模块用于获取所述学生在所述听写动作过程中对应的撰写动态图像信息；
所述撰写状态分析模块用于对所述撰写动态图像进行分析处理，以获得关于所述学生的听写专注度分析结果；
所述撰写数据结果寄存模块用于根据所述听写专注度分析结果，对所述学生在所述听写音频数据播放操作过程中对应的听写撰写数据结果进行适应性的寄存处理；
进一步，所述听写结果判断终端包括听写撰写数据转换模块、数据分析处理模块和评判结果生成模块；其中，
所述听写撰写数据转换模块用于将所述听写撰写数据结果转换成神经网络可识别数据；
所述数据分析处理模块用于根据预设神经网络模型对所述神经网络可识别数据进行神经网络学习处理，以获得与所述听写撰写数据结果对应的听写识别数据；
所述评判结果生成模块用于根据所述听写识别数据与预设标准答案数据，生成所述评判结果。
进一步，如权利要求1所述的学生在线听写系统，其特征在于：
所述听写结果判断终端包括听写撰写数据转换模块、数据分析处理模块和评判结果生成模块；其中，
所述听写撰写数据转换模块用于将所述听写撰写数据结果转换成神经网络可识别数据；
所述数据分析处理模块用于根据预设神经网络模型对所述神经网络可识别数据进行神经网络学习处理，以获得与所述听写撰写数据结果对应的听写识别数据；
所述评判结果生成模块用于根据所述听写识别数据与预设标准答案数据，生成所述评判结果。
如权利要求1所述的学生在线听写系统，其特征在于：
所述听写数据存储终端在存储若干不同的听写音频数据和听写文本数据的过程中，还包括：对所述听写音频数据进行特征辨识，并对特征辨识后的所述听写音频数据进行优化处理，根据优化处理结果确定是否需要更新所述听写音频数据，其步骤包括：
步骤A1、根据目标对象预设听写条件，提取所述听写音频数据中的近期音频数据；
步骤A2、根据预先建立的音频处理模型，对所述步骤A1提取的近期音频数据进行采样和编码处理，同时根据公式(1)确定所述近期音频数据经短时傅里叶变换展开后的近期音频数据输出值；
Figure BDA0002337893950000051
其中，v(t)是近期音频数据；
Figure BDA0002337893950000052
是在给定时间坐标t和时间坐标τ上进行的相位展开，其中e为自然常数，i为时间周期，w为频率坐标；OVS(t)为所述确定的近期音频数据经过短时傅里叶变换展开后的一系列时间坐标为t，振幅为A，频率为f的近期音频数据输出值；
步骤A3、根据公式(2)对所述步骤A2所获取的近期音频数据输出值OVS(t)进行数据处理，获得数据处理后的结果F(t)；
Figure BDA0002337893950000053
其中，G(OVS(t))表示在t时刻近期音频数据输出值OVS(t)经过泛函变分法处理后的值；(Amax-Amin)为所确认的近期音频数据输出值最大幅度与最小幅度的差值；
Figure BDA0002337893950000054
表示音频频率为fmin的近期音频数据输出值增强时引起过拟合的补偿值，
Figure BDA0002337893950000061
表示音频频率为fmax的近期音频数据输出值增强时引起过拟合的补偿值；F(t)为t时刻，通过公式(2)处理后的音频特征频率在fmin～fmax范围内的近期音频数据输出值，经泛函变分法处理并抑制过拟合后的近期音频数据优化值；
步骤A4：将所述步骤A3获取的近期音频数据优化值与所述目标对象预设条件一致的历史音频数据O(t)进行比对，通过公式(3)判断是否需要更新所述听写音频数据；
N＝N(μ,(F(t)/O(t))2) (3)
其中，N表示在所述期望值为μ，标准差为F(t)/O(t)条件下的正态分布结果，若N值大于99.74％，则表示无需更新所述听写音频数据，反之，则需要更新。
相比于现有技术，该学生在线听写系统通过设置听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端来存储若干不同的听写音频数据和听写文本数据，根据该听写音频数据，执行预定模式的听写音频数据播放操作，以及获取学生在听写音频数据播放操作过程中对应的听写撰写数据结果并进行评判处理，从而获得相应的评判结果，该学生在线听写系统能够实现对听写音频数据的自动播放、听写撰写数据结果的自动记录和评判，以便于学生能够根据自身需要随时随地进行相应的听写训练，从而提高听写训练的自动化程度和便捷性。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明提供的一种学生在线听写系统的结构示意图。
图2为本发明提供的一种学生在线听写系统中听写数据存储终端的结构示意图。
图3为本发明提供的一种学生在线听写系统中听写操作执行终端的结构示意图。
图4为本发明提供的一种学生在线听写系统中学生操作终端的结构示意图。
图5为本发明提供的一种学生在线听写系统中听写结果评判终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参阅图1，为本发明实施例提供的一种学生在线听写系统的结构示意图。该学生在线听写系统包括听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端；其中，
该听写数据存储终端用于存储若干不同的听写音频数据和听写文本数据；
该听写操作执行终端用于根据该听写音频数据，执行预定模式的听写音频数据播放操作；
该学生操作终端用于获取学生在该听写音频数据播放操作过程中对应的听写撰写数据结果；
该听写结果评判终端用于对该听写撰写数据结果进行评判处理，以获得相应的评判结果。
参阅图2，为本发明提供的一种学生在线听写系统中听写数据存储终端的结构示意图。该听写数据存储终端包括听写数据核对模块、听写数据质量获取模块和听写数据更新模块；其中，
该听写数据核对模块用于对该听写音频数据与该听写文本数据进行关于匹配性的核对处理；
该听写数据质量获取模块用于获取该听写音频数据的音频质量信息；
该听写数据更新模块用于根据该核对处理的结果和/或该音频质量信息，对该听写音频数据和/或该听写文本数据进行更新处理。
优选地，该听写数据核对模块包括音频数据转换子模块、音频-文本匹配度计算子模块和匹配性核对子模块；其中，
该音频数据转换子模块用于根据预设神经网络模型将该听写音频数据对应转换为翻译文本数据；
该音频-文本匹配度计算子模块用于根据预设学习计算模型计算该翻译文本数据与该听写文本数据之间的匹配度；
该匹配性核对子模块用于根据该匹配度，对该听写音频数据与该听写文本数据进行关于匹配性的核对处理，以确定该听写音频数据与该听写文本数据之间是否相匹配；
优选地，该听写数据质量获取模块包括音频清晰度获取子模块、音频语速获取子模块和音频声纹获取子模块；其中，
该音频清晰度获取子模块、该音频语速获取子模块和该音频声纹获取子模块用于分别获取关于该听写音频数据的清晰度信息、语速信息和声纹信息，作为该音频质量信息；
优选地，该听写数据更新模块包括音频数据修复子模块和文本数据调整子模块；其中，
该音频数据修复子模块用于根据该核对处理的结果和/或该音频质量信息，对该听写音频数据进行音质修复处理；
该文本数据调整子模块用于根据该核对处理的结果和/或该音频质量信息，对该听写文本数据进行文本内容调整处理。
参阅图3，为本发明提供的一种学生在线听写系统中听写操作执行终端的结构示意图。该听写操作执行终端包括听写音频数据确定模块、听写音频数据播放模块、播放状态检测模块和播放状态调整模块；其中，
该听写音频数据确定模块用于根据预设听写条件，从该听写数据存储终端上确定待播放的听写音频数据；
该听写音频数据播放模块用于根据预定音频播放模式，对该待播放的听写音频数据进行播放操作；
该播放状态检测模块用于检测该待播放的听写音频数据的实时播放状态信息；
该播放状态调整模块用于根据该实时播放状态信息，调整该播放操作对应的播放参数。
参阅图4，为本发明提供的一种学生在线听写系统中学生操作终端的结构示意图。该学生操作终端包括撰写交互模块、撰写状态获取模块、撰写状态分析模块和撰写数据结果寄存模块；其中，
该撰写交互模块用于提供关于学生进行听写动作过程中对应的听写交互界面；
该撰写状态获取模块用于获取该学生在该听写动作过程中对应的撰写动态图像信息；
该撰写状态分析模块用于对该撰写动态图像进行分析处理，以获得关于该学生的听写专注度分析结果；
该撰写数据结果寄存模块用于根据该听写专注度分析结果，对该学生在该听写音频数据播放操作过程中对应的听写撰写数据结果进行适应性的寄存处理。
参阅图5，为本发明提供的一种学生在线听写系统中听写结果评判终端的结构示意图。该学生操作终端包括撰写交互模块、撰写状态获取模块、撰写状态分析模块和撰写数据结果寄存模块；其中，
该撰写交互模块用于提供关于学生进行听写动作过程中对应的听写交互界面；
该撰写状态获取模块用于获取该学生在该听写动作过程中对应的撰写动态图像信息；
该撰写状态分析模块用于对该撰写动态图像进行分析处理，以获得关于该学生的听写专注度分析结果；
该撰写数据结果寄存模块用于根据该听写专注度分析结果，对该学生在该听写音频数据播放操作过程中对应的听写撰写数据结果进行适应性的寄存处理。
在一个实施例中，所述听写数据存储终端在存储若干不同的听写音频数据和听写文本数据的过程中，还包括：对所述听写音频数据进行特征辨识，并对特征辨识后的所述听写音频数据进行优化处理，根据优化处理结构确定是否需要更新所述听写音频数据，其步骤包括：
步骤A1、根据目标对象预设听写条件，提取所述听写音频数据中的近期音频数据；
步骤A2、根据预先建立的音频处理模型，对所述步骤A1提取的近期音频数据进行采样和编码处理，同时根据公式(1)确定所述近期音频数据经短时傅里叶变换展开后的近期音频数据输出值；
Figure BDA0002337893950000101
其中，v(t)是近期音频数据；
Figure BDA0002337893950000102
是在给定时间坐标t和时间坐标τ上进行的相位展开，其中e为自然常数，i为时间周期，w为频率坐标；OVS(t)为所述确定的近期音频数据经过短时傅里叶变换展开后的一系列时间坐标为t，振幅为A，频率为f的近期音频数据输出值；
其中，(A＝a/sin(2πft)，a为瞬时值)；
步骤A3、根据公式(2)对所述步骤A2所获取的近期音频数据输出值OVS(t)进行数据处理，获得数据处理后的结果F(t)；
Figure BDA0002337893950000111
其中，G(OVS(t))表示在t时刻近期音频数据输出值OVS(t)经过泛函变分法处理后的值；(Amax-Amin)为所确认的近期音频数据输出值最大幅度与最小幅度的差值；
Figure BDA0002337893950000112
表示音频频率为fmin的近期音频数据输出值增强时引起过拟合的补偿值，
Figure BDA0002337893950000113
表示音频频率为fmax的近期音频数据输出值增强时引起过拟合的补偿值；F(t)为t时刻，通过公式(2)处理后的音频特征频率在fmin～fmax范围内的近期音频数据输出值，经泛函变分法处理并抑制过拟合后的近期音频数据优化值；
步骤A4：将所述步骤A3获取的近期音频数据优化值与所述目标对象预设条件一致的历史音频数据O(t)进行比对，通过公式(3)判断是否需要更新所述听写音频数据；
N＝N(μ,(F(t)/O(t))2)(3)
其中，N表示在所述期望值为μ，标准差为F(t)/O(t)条件下的正态分布结果，若N值大于99.74％，则表示无需更新所述听写音频数据，反之，则需要更新。
上述技术方案的有益效果是：所述学生在线听写系统，根据目标对象预定条件在所述听写数据存储终端提取近期音频数据，并对近期音频数据进行特征辨识分析，并对特征辨识后的音频信息进行优化处理，将处理后的近期音频数据输出值与目标对象预设条件一致的历史音频数据进行比对判定，以确定所述学生在线听写系统近期音频数据与历史音频数据的偏差比例，进一步确定是否需要更新所述听写音频数据。通过该技术方案能有效节省存储数据终端运转负荷，提高所述学生在线听写系统运行效率；并且，通过所述音频数据的更新情况，可为评判目标对象听写训练进展及发展趋势提供数据支撑。
从上述实施例的内容可知，该学生在线听写系统通过设置听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端来存储若干不同的听写音频数据和听写文本数据，根据该听写音频数据，执行预定模式的听写音频数据播放操作，以及获取学生在听写音频数据播放操作过程中对应的听写撰写数据结果并进行评判处理，从而获得相应的评判结果，该学生在线听写系统能够实现对听写音频数据的自动播放、听写撰写数据结果的自动记录和评判，以便于学生能够根据自身需要随时随地进行相应的听写训练，从而提高听写训练的自动化程度和便捷性。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (7)

1.一种学生在线听写系统，其特征在于：
所述学生在线听写系统包括听写数据存储终端、听写操作执行终端、学生操作终端和听写结果评判终端；其中，
所述听写数据存储终端用于存储若干不同的听写音频数据和听写文本数据；
所述听写操作执行终端用于根据所述听写音频数据，执行预定模式的听写音频数据播放操作；
所述学生操作终端用于获取学生在所述听写音频数据播放操作过程中对应的听写撰写数据结果；
所述听写结果评判终端用于对所述听写撰写数据结果进行评判处理，以获得相应的评判结果。
2.如权利要求1所述的学生在线听写系统，其特征在于：
所述听写数据存储终端包括听写数据核对模块、听写数据质量获取模块和听写数据更新模块；其中，
所述听写数据核对模块用于对所述听写音频数据与所述听写文本数据进行关于匹配性的核对处理；
所述听写数据质量获取模块用于获取所述听写音频数据的音频质量信息；
所述听写数据更新模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写音频数据和/或所述听写文本数据进行更新处理。
3.如权利要求2所述的学生在线听写系统，其特征在于：
所述听写数据核对模块包括音频数据转换子模块、音频-文本匹配度计算子模块和匹配性核对子模块；其中，
所述音频数据转换子模块用于根据预设神经网络模型将所述听写音频数据对应转换为翻译文本数据；
所述音频-文本匹配度计算子模块用于根据预设学习计算模型计算所述翻译文本数据与所述听写文本数据之间的匹配度；
所述匹配性核对子模块用于根据所述匹配度，对所述听写音频数据与所述听写文本数据进行关于匹配性的核对处理，以确定所述听写音频数据与所述听写文本数据之间是否相匹配；
或者，
所述听写数据质量获取模块包括音频清晰度获取子模块、音频语速获取子模块和音频声纹获取子模块；其中，
所述音频清晰度获取子模块、所述音频语速获取子模块和所述音频声纹获取子模块用于分别获取关于所述听写音频数据的清晰度信息、语速信息和声纹信息，作为所述音频质量信息；
或者，
所述听写数据更新模块包括音频数据修复子模块和文本数据调整子模块；其中，
所述音频数据修复子模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写音频数据进行音质修复处理；
所述文本数据调整子模块用于根据所述核对处理的结果和/或所述音频质量信息，对所述听写文本数据进行文本内容调整处理。
4.如权利要求1所述的学生在线听写系统，其特征在于
所述听写操作执行终端包括听写音频数据确定模块、听写音频数据播放模块、播放状态检测模块和播放状态调整模块；其中，
所述听写音频数据确定模块用于根据预设听写条件，从所述听写数据存储终端上确定待播放的听写音频数据；
所述听写音频数据播放模块用于根据预定音频播放模式，对所述待播放的听写音频数据进行播放操作；
所述播放状态检测模块用于检测所述待播放的听写音频数据的实时播放状态信息；
所述播放状态调整模块用于根据所述实时播放状态信息，调整所述播放操作对应的播放参数。
5.如权利要求1所述的学生在线听写系统，其特征在于：
所述学生操作终端包括撰写交互模块、撰写状态获取模块、撰写状态分析模块和撰写数据结果寄存模块；其中，
所述撰写交互模块用于提供关于学生进行听写动作过程中对应的听写交互界面；
所述撰写状态获取模块用于获取所述学生在所述听写动作过程中对应的撰写动态图像信息；
所述撰写状态分析模块用于对所述撰写动态图像进行分析处理，以获得关于所述学生的听写专注度分析结果；
所述撰写数据结果寄存模块用于根据所述听写专注度分析结果，对所述学生在所述听写音频数据播放操作过程中对应的听写撰写数据结果进行适应性的寄存处理。
6.如权利要求1所述的学生在线听写系统，其特征在于：
所述听写结果判断终端包括听写撰写数据转换模块、数据分析处理模块和评判结果生成模块；其中，
所述听写撰写数据转换模块用于将所述听写撰写数据结果转换成神经网络可识别数据；
所述数据分析处理模块用于根据预设神经网络模型对所述神经网络可识别数据进行神经网络学习处理，以获得与所述听写撰写数据结果对应的听写识别数据；
所述评判结果生成模块用于根据所述听写识别数据与预设标准答案数据，生成所述评判结果。
7.如权利要求1所述的学生在线听写系统，其特征在于：
所述听写数据存储终端在存储若干不同的听写音频数据和听写文本数据的过程中，还包括：对所述听写音频数据进行特征辨识，并对特征辨识后的所述听写音频数据进行优化处理，根据优化处理结果确定是否需要更新所述听写音频数据，其步骤包括：
步骤A1、根据目标对象预设听写条件，提取所述听写音频数据中的近期音频数据；
步骤A2、根据预先建立的音频处理模型，对所述步骤A1提取的近期音频数据进行采样和编码处理，同时根据公式(1)确定所述近期音频数据经短时傅里叶变换展开后的近期音频数据输出值；
Figure FDA0002337893940000041
其中，v(t)是近期音频数据；
Figure FDA0002337893940000042
是在给定时间坐标t和时间坐标τ上进行的相位展开，其中e为自然常数，i为时间周期，w为频率坐标；OVS(t)为所述确定的近期音频数据经过短时傅里叶变换展开后的近期音频数据输出值；
步骤A3、根据公式(2)对所述步骤A2所获取的近期音频数据输出值OVS(t)进行数据处理，获得数据处理后的结果F(t)；
Figure FDA0002337893940000043
其中，G(OVS(t))表示在t时刻近期音频数据输出值OVS(t)经过泛函变分法处理后的值；(Amax-Amin)为所确认的近期音频数据输出值最大幅度与最小幅度的差值；
Figure FDA0002337893940000051
表示音频频率为fmin的近期音频数据输出值增强时引起过拟合的补偿值，
Figure FDA0002337893940000052
表示音频频率为fmax的近期音频数据输出值增强时引起过拟合的补偿值；F(t)为t时刻，通过公式(2)处理后的音频特征频率在fmin～fmax范围内的近期音频数据输出值，经泛函变分法处理并抑制过拟合后的近期音频数据优化值；
步骤A4：将所述步骤A3获取的近期音频数据优化值与所述目标对象预设条件一致的历史音频数据O(t)进行比对，通过公式(3)判断是否需要更新所述听写音频数据；
N＝N(μ,(F(t)/O(t))2) (3)
其中，N表示在所述期望值为μ，标准差为F(t)/O(t)条件下的正态分布结果，若N值大于99.74％，则表示无需更新所述听写音频数据，反之，则需要更新。
CN201911363864.9A 2019-12-26 2019-12-26 学生在线听写系统 Active CN110992739B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911363864.9A CN110992739B (zh) 2019-12-26 2019-12-26 学生在线听写系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911363864.9A CN110992739B (zh) 2019-12-26 2019-12-26 学生在线听写系统

Publications (2)

Publication Number Publication Date
CN110992739A true CN110992739A (zh) 2020-04-10
CN110992739B CN110992739B (zh) 2021-06-01

Family

ID=70077150

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911363864.9A Active CN110992739B (zh) 2019-12-26 2019-12-26 学生在线听写系统

Country Status (1)

Country Link
CN (1) CN110992739B (zh)

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000259181A (ja) * 1999-03-10 2000-09-22 Olympus Optical Co Ltd 音声情報認識装置、音声情報認識方法、音声情報の認識をするためのプログラムを記録した記録媒体
CN1424665A (zh) * 2003-01-08 2003-06-18 无敌科技(西安)有限公司 具有听写测验及自动评分功能的装置及其操作方法
CN101193090A (zh) * 2006-11-27 2008-06-04 华为技术有限公司 信号处理方法及其装置
CN101944362A (zh) * 2010-09-14 2011-01-12 北京大学 一种基于整形小波变换的音频无损压缩编码、解码方法
CN102194457A (zh) * 2010-03-02 2011-09-21 中兴通讯股份有限公司 音频编解码方法、系统及噪声水平估计方法
CN103531205A (zh) * 2013-10-09 2014-01-22 常州工学院 基于深层神经网络特征映射的非对称语音转换方法
CN104252800A (zh) * 2014-09-12 2014-12-31 广东小天才科技有限公司 一种单词播报评分的方法和装置
CN104320444A (zh) * 2014-10-11 2015-01-28 步步高教育电子有限公司 一种基于网络的模拟课堂听写的方法和系统
CN204204229U (zh) * 2014-11-26 2015-03-11 吴秀芝 移动式英语听写教学板
CN105404642A (zh) * 2015-10-23 2016-03-16 广东欧珀移动通信有限公司 一种音频播放方法及用户终端
CN106251874A (zh) * 2016-07-27 2016-12-21 深圳市鹰硕音频科技有限公司 一种语音门禁和安静环境监控方法及系统
CN107331403A (zh) * 2017-06-27 2017-11-07 深圳创维－Rgb电子有限公司 一种基于算法的音频优化方法、智能终端及存储装置
CN108597540A (zh) * 2018-04-11 2018-09-28 南京信息工程大学 一种基于变分模态分解和极限学习机的语音情感识别方法
CN109669661A (zh) * 2018-12-20 2019-04-23 广东小天才科技有限公司 一种听写进度的控制方法及电子设备
CN109887349A (zh) * 2019-04-12 2019-06-14 广东小天才科技有限公司 一种听写辅助方法及装置
CN110556122A (zh) * 2019-09-18 2019-12-10 腾讯科技（深圳）有限公司 频带扩展方法、装置、电子设备及计算机可读存储介质

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000259181A (ja) * 1999-03-10 2000-09-22 Olympus Optical Co Ltd 音声情報認識装置、音声情報認識方法、音声情報の認識をするためのプログラムを記録した記録媒体
CN1424665A (zh) * 2003-01-08 2003-06-18 无敌科技(西安)有限公司 具有听写测验及自动评分功能的装置及其操作方法
CN101193090A (zh) * 2006-11-27 2008-06-04 华为技术有限公司 信号处理方法及其装置
CN102194457A (zh) * 2010-03-02 2011-09-21 中兴通讯股份有限公司 音频编解码方法、系统及噪声水平估计方法
CN101944362A (zh) * 2010-09-14 2011-01-12 北京大学 一种基于整形小波变换的音频无损压缩编码、解码方法
CN103531205A (zh) * 2013-10-09 2014-01-22 常州工学院 基于深层神经网络特征映射的非对称语音转换方法
CN104252800A (zh) * 2014-09-12 2014-12-31 广东小天才科技有限公司 一种单词播报评分的方法和装置
CN104320444A (zh) * 2014-10-11 2015-01-28 步步高教育电子有限公司 一种基于网络的模拟课堂听写的方法和系统
CN204204229U (zh) * 2014-11-26 2015-03-11 吴秀芝 移动式英语听写教学板
CN105404642A (zh) * 2015-10-23 2016-03-16 广东欧珀移动通信有限公司 一种音频播放方法及用户终端
CN106251874A (zh) * 2016-07-27 2016-12-21 深圳市鹰硕音频科技有限公司 一种语音门禁和安静环境监控方法及系统
CN107331403A (zh) * 2017-06-27 2017-11-07 深圳创维－Rgb电子有限公司 一种基于算法的音频优化方法、智能终端及存储装置
CN108597540A (zh) * 2018-04-11 2018-09-28 南京信息工程大学 一种基于变分模态分解和极限学习机的语音情感识别方法
CN109669661A (zh) * 2018-12-20 2019-04-23 广东小天才科技有限公司 一种听写进度的控制方法及电子设备
CN109887349A (zh) * 2019-04-12 2019-06-14 广东小天才科技有限公司 一种听写辅助方法及装置
CN110556122A (zh) * 2019-09-18 2019-12-10 腾讯科技（深圳）有限公司 频带扩展方法、装置、电子设备及计算机可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王红旗: "基于音频包络比对的信号同步切换技术分析", 《西部广播电视》 *

Also Published As

Publication number Publication date
CN110992739B (zh) 2021-06-01

Similar Documents

Publication Publication Date Title
CN107818798B (zh) 客服服务质量评价方法、装置、设备及存储介质
Litman et al. ITSPOKE: An intelligent tutoring spoken dialogue system
CN109785698B (zh) 用于口语水平评测的方法、装置、电子设备以及介质
CN110544481B (zh) 一种基于声纹识别的s-t分类方法、装置及设备终端
CN101751919A (zh) 一种汉语口语重音自动检测方法
CN101510423B (zh) 一种分层次、交互式发音质量评估与诊断系统
CN111079714B (zh) 智能插入笔记的在线教学系统
CN112614489A (zh) 用户发音准确度评估方法、装置和电子设备
CN111311460A (zh) 面向儿童的开发型教学系统
CN110992739B (zh) 学生在线听写系统
CN116705060A (zh) 一种基于神经算法多源音频特征的智能仿真方法和系统
CN114302301B (zh) 频响校正方法及相关产品
CN112767961B (zh) 一种基于云端计算的口音矫正方法
CN109086387A (zh) 一种音频流评分方法、装置、设备及存储介质
Wang Detecting pronunciation errors in spoken English tests based on multifeature fusion algorithm
CN113178208A (zh) 智能化学生在线语音答题控制方法与系统
CN111261193B (zh) 发音训练与教学系统
CN112015883A (zh) 英文题目自动生成方法和系统
Litman et al. Spoken tutorial dialogue and the feeling of another’s knowing
CN112131889A (zh) 基于大数据的智能语文主观题评分方法和系统
CN110931020A (zh) 一种语音检测方法及装置
Islam et al. Exploring speech representations for proficiency assessment in language learning
CN114708642B (zh) 商务英语仿真实训装置、系统、方法及存储介质
CN111916106B (zh) 一种提高英语教学中发音质量的方法
CN117746839A (zh) 会议纪要的生成方法、装置和会议纪要生成系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 200237 9 / F and 10 / F, building 2, No. 188, Yizhou Road, Xuhui District, Shanghai

Applicant after: Shanghai squirrel classroom Artificial Intelligence Technology Co., Ltd

Address before: 200237 9 / F and 10 / F, building 2, No. 188, Yizhou Road, Xuhui District, Shanghai

Applicant before: SHANGHAI YIXUE EDUCATION TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant