CN113313982B - 一种基于5g网络的教育系统 - Google Patents
一种基于5g网络的教育系统 Download PDFInfo
- Publication number
- CN113313982B CN113313982B CN202110860707.XA CN202110860707A CN113313982B CN 113313982 B CN113313982 B CN 113313982B CN 202110860707 A CN202110860707 A CN 202110860707A CN 113313982 B CN113313982 B CN 113313982B
- Authority
- CN
- China
- Prior art keywords
- student
- network
- multimedia file
- teacher
- education
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000006399 behavior Effects 0.000 claims abstract description 44
- 238000004891 communication Methods 0.000 claims abstract description 28
- 230000002159 abnormal effect Effects 0.000 claims description 34
- 230000004424 eye movement Effects 0.000 claims description 23
- 238000000605 extraction Methods 0.000 claims description 21
- 230000001815 facial effect Effects 0.000 claims description 17
- 230000005236 sound signal Effects 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 11
- 230000002996 emotional effect Effects 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 7
- 230000001502 supplementing effect Effects 0.000 claims description 7
- 238000004806 packaging method and process Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 3
- 230000003993 interaction Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 12
- 230000009286 beneficial effect Effects 0.000 description 9
- 238000000034 method Methods 0.000 description 8
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000013589 supplement Substances 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000008909 emotion recognition Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 208000013403 hyperactivity Diseases 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
- G09B5/14—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Hospice & Palliative Care (AREA)
- Educational Administration (AREA)
- Theoretical Computer Science (AREA)
- Educational Technology (AREA)
- Child & Adolescent Psychology (AREA)
- General Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Psychiatry (AREA)
- Computational Linguistics (AREA)
- General Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electrically Operated Instructional Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于5G网络的教育系统，包括：设置在教师端的第一多媒体文件采集模块；设置在学生端的第二多媒体文件采集模块；通讯模块；后台服务器用于：对第一多媒体文件进行特征提取，提取教师行为，将教师行为输入预先训练好的第一评分模型中，输出第一评分；对第二多媒体文件进行特征提取，提取学生行为，将学生行为输入预先训练好的第二评分模型中，输出第二评分；将第一评分与第二评分基于显示模块显示出来。对教师的授课行为及学生的学习行为进行准确的评测，保证在线教育的效果。
Description
技术领域
本发明涉及教育技术领域，特别涉及一种基于5G网络的教育系统。
背景技术
近年来，随着移动互联网和各种智能设备的普及和高速发展，在线教育的授课方式已经变的越来越方便。现有技术中实现了教师与学生的在线教育，但是存在以下技术问题：1、人们对在线教育的效果存在一定的质疑，现有技术中并未对教师及学生的行为进行检测及评分，不能对教师的授课行为及学生的学习行为进行准确的评测，不能知道在线教育的效果；2、对教师的教育内容不能很好的进行补充提醒，不利于学生的在线学习，影响在线教育的效果。
发明内容
本发明旨在至少一定程度上解决上述技术中的技术问题之一。为此，本发明的目的在于提出一种基于5G网络的教育系统，对教师的授课行为及学生的学习行为进行准确的评测，保证在线教育的效果。
为达到上述目的，本发明实施例提出了一种基于5G网络的教育系统，包括：
设置在教师端的第一多媒体文件采集模块；
设置在学生端的第二多媒体文件采集模块；
通讯模块，分别与所述教师端、学生端连接；
后台服务器，与所述通讯模块连接，用于：
接收基于所述通讯模块传输的所述第一多媒体文件采集模块采集的第一多媒体文件，对所述第一多媒体文件进行特征提取，提取教师行为，将所述教师行为输入预先训练好的第一评分模型中，输出第一评分；
接收基于所述通讯模块传输的所述第二多媒体文件采集模块采集的第二多媒体文件，对所述第二多媒体文件进行特征提取，提取学生行为，将所述学生行为输入预先训练好的第二评分模型中，输出第二评分；
将所述第一评分与所述第二评分基于显示模块显示出来。
根据本发明的一些实施例，所述后台服务器，还用于：
对所述第一多媒体文件进行解析，得到教师端的教育内容；
对所述教育内容根据知识点类型进行分类，划分为若干个子教育内容，并分别对若干个子教育内容进行概括总结，为每一个子教育内容确定一个关键词；
以所述关键词为索引，查询预先建立的教育知识图谱，确定所述教育知识图谱中所述关键词对应的当前难度等级；
获取所述当前难度等级的上一难度等级对应的第一内容及下一难度等级对应的第二内容，将所述第一内容及所述第二内容作为补充内容；
获取每一个关键词对应的补充内容并进行打包处理转发至教师端。
根据本发明的一些实施例，所述后台服务器，还用于：
基于所述第二多媒体文件，确定学生端的第一音视频状态；
根据所述第一音视频状态判断学生的学习状态是否发生异常；
在确定学生的学习状态发生异常时，对学生进行标记并确定第一异常时间节点；
从第一异常时间节点开始，启动信息备份任务，将教育端发出的第一多媒体文件进行处理，得到目标图像及目标音频，将所述目标图像及所述目标音频进行备份，得到备份数据；
在确定学生的学习状态恢复正常时，将所述备份数据推送至学生端进行显示。
根据本发明的一些实施例，所述后台服务器，还用于：
基于所述第一多媒体文件，确定教师端的第二音视频状态；
根据所述第二音视频状态判断教师的教学状态是否发生异常；
在确定教师的教学状态发生异常时，标记第二异常时间节点；
从第二异常时间节点开始，获取学生的第一语音信号，对所述第一语音信号进行特征提取，获取第一语音特征，将所述第一语音特征进行处理，得到第一音素信息；
将所述第一音素信息输入预先训练好的声学模型中，得到第一语音识别结果，确定所述第一语音对应的目标领域；
获取所述目标领域的知识图谱，并确定所述第一语音在所述目标领域的知识图谱中与其他内容的关联关系；
获取学生的第二语音信号，对所述第二语音信号进行语音识别，得到第二语音识别结果，计算所述第二语音识别结果中的语义的完整度，在确定所述完整度小于预设完整度时，根据所述关联关系对所述第二语音识别结果中的语义进行补充。
根据本发明的一些实施例，还包括网络检测模块，分别与所述通讯模块、后台服务器连接，用于检测所述教师端与所述学生端之间的网络连接质量，并进行评分，在确定所述评分小于预设评分时，发出报警提示至后台服务器。
根据本发明的一些实施例，所述网络检测模块，还用于每隔单位时间检测所述教师端与所述学生端之间的网络的平均耗时并计算平均值，得到网络耗时，根据所述网络耗时与预设网络耗时，计算得到网络延迟值，在确定所述网络延迟值大于预设网络延迟值时，发送网络延迟预警提示至后台服务器。
根据本发明的一些实施例，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的面部图像及声音信号；
对所述面部图像进行特征提取，确定学生的面部特征；
对所述声音信号进行特征提取，确定学生的声音特征；
根据所述面部特征及声音特征，确定学生的情绪状态；
根据学生的情绪状态判断学生对当前的教学内容是否感兴趣，将判断结果作为学生行为。
根据本发明的一些实施例，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的眼动图像，对所述眼动图像进行特征提取，确定眼动轨迹；
计算所述眼动轨迹与预设眼动轨迹的匹配度，将所述匹配度与预设匹配度进行比较，根据比较结果确定学生对当前的教学内容是否感兴趣，将确定结果作为学生作为。
根据本发明的一些实施例，在对所述声音信号进行特征提取，确定学生的声音特征前，还包括：对所述声音信号进行滤波处理。
根据本发明的一些实施例，所述预设眼动轨迹为学生对当前的教学内容感兴趣时获取的。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1是根据本发明一个实施例的一种基于5G网络的教育系统的框图；
图2是根据本发明又一个实施例的一种基于5G网络的教育系统的框图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
如图1所示，本发明实施例提出了一种基于5G网络的教育系统，包括：
设置在教师端的第一多媒体文件采集模块；
设置在学生端的第二多媒体文件采集模块；
通讯模块，分别与所述教师端、学生端连接；
后台服务器，与所述通讯模块连接，用于：
接收基于所述通讯模块传输的所述第一多媒体文件采集模块采集的第一多媒体文件，对所述第一多媒体文件进行特征提取，提取教师行为，将所述教师行为输入预先训练好的第一评分模型中，输出第一评分；
接收基于所述通讯模块传输的所述第二多媒体文件采集模块采集的第二多媒体文件，对所述第二多媒体文件进行特征提取，提取学生行为，将所述学生行为输入预先训练好的第二评分模型中，输出第二评分；
将所述第一评分与所述第二评分基于显示模块显示出来。
上述技术方案的工作原理：设置在教师端的第一多媒体文件采集模块；第一多媒体文件采集模块用于采集多媒体文件，包括图像采集模块、视频采集模块、声音采集模块。多媒体文件包括图像数据、视频数据、声音数据。设置在学生端的第二多媒体文件采集模块。学生端或教师端可以为智能设备，包括手机、平板等。通讯模块包括无线通讯模块、5g通讯模块、4g通讯模块等。通讯模块可以包括设置在教师端的第一通讯模块及设置在学生端的第二通讯模块。教师端与学生端实现的在线教育为现有技术。还包括后台服务器，用于接收基于所述通讯模块传输的所述第一多媒体文件采集模块采集的第一多媒体文件，对所述第一多媒体文件进行特征提取，提取教师行为，将所述教师行为输入预先训练好的第一评分模型中，输出第一评分；接收基于所述通讯模块传输的所述第二多媒体文件采集模块采集的第二多媒体文件，对所述第二多媒体文件进行特征提取，提取学生行为，将所述学生行为输入预先训练好的第二评分模型中，输出第二评分；将所述第一评分与所述第二评分基于显示模块显示出来。第一评分模块为基于样本教师行为及样本教师评分训练得到的。第二评分模型为基于样本学生行为及样本学生评分训练得到的。教师行为包括教师对学生的教学方式、互动次数等。学生行为包括对教师的当前的教学内容是否感兴趣，是否认真听讲等。
上述技术方案的有益效果：设置后台服务器，在教师端与学生端的在线教育过程中，进行监控。并对在线教育过程中教师及学生进行评分，便于教师规范自身教学行为，更加反思自身教学，便于学生了解同学之间的学习评分，相互勉励，规范自身的学习行为，保证在线教育的教学效果。
根据本发明的一些实施例，所述后台服务器，还用于：
对所述第一多媒体文件进行解析，得到教师端的教育内容；
对所述教育内容根据知识点类型进行分类，划分为若干个子教育内容，并分别对若干个子教育内容进行概括总结，为每一个子教育内容确定一个关键词；
以所述关键词为索引，查询预先建立的教育知识图谱，确定所述教育知识图谱中所述关键词对应的当前难度等级；
获取所述当前难度等级的上一难度等级对应的第一内容及下一难度等级对应的第二内容，将所述第一内容及所述第二内容作为补充内容；
获取每一个关键词对应的补充内容并进行打包处理转发至教师端。
上述技术方案的工作原理：所述后台服务器，还用于对所述第一多媒体文件进行解析，得到教师端的教育内容；对所述教育内容根据知识点类型进行分类，划分为若干个子教育内容，并分别对若干个子教育内容进行概括总结，为每一个子教育内容确定一个关键词；具体的，将教育内容A根据知识点类型进行分类，得到子教育内容a、子教育内容b、子教育内容c，分别提取关键词e、关键词r、关键词t。以所述关键词为索引，查询预先建立的教育知识图谱，确定所述教育知识图谱中所述关键词对应的当前难度等级；获取所述当前难度等级的上一难度等级对应的第一内容及下一难度等级对应的第二内容，将所述第一内容及所述第二内容作为补充内容；获取每一个关键词对应的补充内容并进行打包处理转发至教师端。教师端对补充内容进行筛选并进行讲解。教育知识图谱的构建方法，包括：获取某一学科的教学课程框架，基于数据库确定教育知识点；基于相应的神经网络模型，确定各个教育知识点的难度等级，并基于难度等级进行排序，确定各个教育知识点之间的关联关系。进而确定教育知识图谱。
上述技术方案的有益效果：便于对教师端本身讲解的教育内容进行补充，便于学生学到更多的知识。在讲解过程中，将当前难度等级的上一难度等级对应的第一内容（相比当前内容简单），便于在在线教育过程中，对基础较差的学生补充讲解部分基础知识，便于其理解当前的教学内容，加深学生的认知。将当前难度等级的下一难度等级对应的第二内容（相比当前内容难），便于在在线教育过程中，对学生进行拓展教育，提高学生的知识素养，同时也便于基础较好的学生不断进行拔尖训练，得到提高。对教育内容进行补充，有利于保证在线教育的教学效果。
根据本发明的一些实施例，所述后台服务器，还用于：
基于所述第二多媒体文件，确定学生端的第一音视频状态；
根据所述第一音视频状态判断学生的学习状态是否发生异常；
在确定学生的学习状态发生异常时，对学生进行标记并确定第一异常时间节点；
从第一异常时间节点开始，启动信息备份任务，将教育端发出的第一多媒体文件进行处理，得到目标图像及目标音频，将所述目标图像及所述目标音频进行备份，得到备份数据；
在确定学生的学习状态恢复正常时，将所述备份数据推送至学生端进行显示。
上述技术方案的工作原理：基于所述第二多媒体文件，确定学生端的第一音视频状态；根据所述第一音视频状态判断学生的学习状态是否发生异常；在确定学生的学习状态发生异常时，对学生进行标记并确定第一异常时间节点；学习状态异常包括学生暂时有事离开学生端。从第一异常时间节点开始，启动信息备份任务，将教育端发出的第一多媒体文件进行处理，得到目标图像及目标音频，将所述目标图像及所述目标音频进行备份，得到备份数据；在确定学生的学习状态恢复正常时，将所述备份数据推送至学生端进行显示。
上述技术方案的有益效果：实现在线教育的灵活性，在学生暂时有事离开后，对教师端的教育内容进行备份，在学生回到学生端前后，将所述备份数据推送至学生端进行显示，学生可以快速连接教师之间讲过的知识点，便于快速联系，以避免耽误接下来的知识点的学习，加强了前后连贯性，更加方便学生，避免学生因有事暂时离开，导致落下没有学习的知识点，造成后面学习的困难。同时基于备份数据的形式进行呈现，便于学生在课后进行多次学习，加深印象。
根据本发明的一些实施例，所述后台服务器，还用于：
基于所述第一多媒体文件，确定教师端的第二音视频状态；
根据所述第二音视频状态判断教师的教学状态是否发生异常；
在确定教师的教学状态发生异常时，标记第二异常时间节点；
从第二异常时间节点开始，获取学生的第一语音信号，对所述第一语音信号进行特征提取，获取第一语音特征，将所述第一语音特征进行处理，得到第一音素信息；
将所述第一音素信息输入预先训练好的声学模型中，得到第一语音识别结果，确定所述第一语音对应的目标领域；
获取所述目标领域的知识图谱，并确定所述第一语音在所述目标领域的知识图谱中与其他内容的关联关系；
获取学生的第二语音信号，对所述第二语音信号进行语音识别，得到第二语音识别结果，计算所述第二语音识别结果中的语义的完整度，在确定所述完整度小于预设完整度时，根据所述关联关系对所述第二语音识别结果中的语义进行补充。
上述技术方案的工作原理：所述后台服务器，还用于：基于所述第一多媒体文件，确定教师端的第二音视频状态；根据所述第二音视频状态判断教师的教学状态是否发生异常；在确定教师的教学状态发生异常时，标记第二异常时间节点；教师的教学状态发生异常，包括教师有事暂时离开教师端。在教师离开教师端后，对教师之前讲的知识点有疑问的同学，可以自己进行思考或者基于后台服务器进行提问。从第二异常时间节点开始，获取学生的第一语音信号，对所述第一语音信号进行特征提取，获取第一语音特征，基于学习算法将所述第一语音特征进行处理，得到第一音素信息；将所述第一音素信息输入预先训练好的声学模型中，得到第一语音识别结果，确定所述第一语音对应的目标领域；获取所述目标领域的知识图谱，并确定所述第一语音在所述目标领域的知识图谱中与其他内容的关联关系；获取学生的第二语音信号，对所述第二语音信号进行语音识别，得到第二语音识别结果，计算所述第二语音识别结果中的语义的完整度，在确定所述完整度小于预设完整度时，根据所述关联关系对所述第二语音识别结果中的语义进行补充。
上述技术方案的有益效果：便于基于后台服务器在教师的教学状态发生异常时，为学生答疑解惑，提高学生的在线学习效果，避免学生因为等教师而白白浪费时间。在进行解答的过程中，考虑的领域知识的特定，以及历史关联关系，不依赖于分词等基础NLP(Neuro-Linguistic Programming，神经语言程序学)技术，提升了对所述第二语音识别结果中的语义进行补充的补充效率及补充效果，进而提高了系统回答学生提问的问题的准确性，便于学生学到有用的知识，实现为学生答疑解惑的效果，提高了学生的体验。
如图2所示，根据本发明的一些实施例，还包括网络检测模块，分别与所述通讯模块、后台服务器连接，用于检测所述教师端与所述学生端之间的网络连接质量，并进行评分，在确定所述评分小于预设评分时，发出报警提示至后台服务器。
上述技术方案的工作原理：还包括网络检测模块，分别与所述通讯模块、后台服务器连接，用于检测所述教师端与所述学生端之间的网络连接质量，并进行评分，在确定所述评分小于预设评分时，发出报警提示至后台服务器。
上述技术方案的有益效果：在教师端与所述学生端之间的网络连接质量较差时，进行报警提示，便于对网络连接质量进行提高或者采取其他措施，保证在线教育的效果。
根据本发明的一些实施例，所述网络检测模块，还用于每隔单位时间检测所述教师端与所述学生端之间的网络的平均耗时并计算平均值，得到网络耗时，根据所述网络耗时与预设网络耗时，计算得到网络延迟值，在确定所述网络延迟值大于预设网络延迟值时，发送网络延迟预警提示至后台服务器。
上述技术方案的工作原理：所述网络检测模块，还用于每隔单位时间检测所述教师端与所述学生端之间的网络的平均耗时并计算平均值，得到网络耗时，根据所述网络耗时与预设网络耗时，计算得到网络延迟值，在确定所述网络延迟值大于预设网络延迟值时，发送网络延迟预警提示至后台服务器。
上述技术方案的有益效果：对教师端与所述学生端之间的网络延时进行监控，在确定所述网络延迟值大于预设网络延迟值时，发送网络延迟预警提示至后台服务器，便于提高在线教育效果。
根据本发明的一些实施例，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的面部图像及声音信号；
对所述面部图像进行特征提取，确定学生的面部特征；
对所述声音信号进行特征提取，确定学生的声音特征；
根据所述面部特征及声音特征，确定学生的情绪状态；
根据学生的情绪状态判断学生对当前的教学内容是否感兴趣，将判断结果作为学生行为。
上述技术方案的工作原理：从所述第二多媒体文件中提取学生的面部图像及声音信号；对所述面部图像进行特征提取，确定学生的面部特征；对所述声音信号进行特征提取，确定学生的声音特征；根据所述面部特征及声音特征，确定学生的情绪状态；根据学生的情绪状态判断学生对当前的教学内容是否感兴趣，将判断结果作为学生行为。可以将面部特征及声音特征输入预先训练好的情绪识别模型中，进而确定学生的情绪状态。情绪状态包括亢奋、高兴、悲伤等。
上述技术方案的有益效果：便于准确确定学生对教育内容是否感兴趣，便于教师调整教学方式或者教育内容，同时也便于准确确定学生行为，便于进行准确评分。
根据本发明的一些实施例，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的眼动图像，对所述眼动图像进行特征提取，确定眼动轨迹；
计算所述眼动轨迹与预设眼动轨迹的匹配度，将所述匹配度与预设匹配度进行比较，根据比较结果确定学生对当前的教学内容是否感兴趣，将确定结果作为学生作为。
上述技术方案的工作原理：从所述第二多媒体文件中提取学生的眼动图像，对所述眼动图像进行特征提取，确定眼动轨迹；计算所述眼动轨迹与预设眼动轨迹的匹配度，将所述匹配度与预设匹配度进行比较，根据比较结果确定学生对当前的教学内容是否感兴趣，将确定结果作为学生作为。
上述技术方案的有益效果：便于准确确定学生对教育内容是否感兴趣，便于教师调整教学方式或者教育内容，同时也便于准确确定学生行为，便于进行准确评分。
根据本发明的一些实施例，在对所述声音信号进行特征提取，确定学生的声音特征前，还包括：对所述声音信号进行滤波处理。
便于保证提取出准确的声音特征，避免噪声的影响，便于确定准确的情绪状态。
根据本发明的一些实施例，所述预设眼动轨迹为学生对当前的教学内容感兴趣时获取的。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (9)
1.一种基于5G网络的教育系统，其特征在于，包括：
设置在教师端的第一多媒体文件采集模块；
设置在学生端的第二多媒体文件采集模块；
通讯模块，分别与所述教师端、学生端连接；
后台服务器，与所述通讯模块连接，用于：
接收基于所述通讯模块传输的所述第一多媒体文件采集模块采集的第一多媒体文件，对所述第一多媒体文件进行特征提取，提取教师行为，将所述教师行为输入预先训练好的第一评分模型中，输出第一评分；教师行为包括教师对学生的教学方式、互动次数；
接收基于所述通讯模块传输的所述第二多媒体文件采集模块采集的第二多媒体文件，对所述第二多媒体文件进行特征提取，提取学生行为，将所述学生行为输入预先训练好的第二评分模型中，输出第二评分；
将所述第一评分与所述第二评分基于显示模块显示出来；
所述后台服务器，还用于：
基于所述第一多媒体文件，确定教师端的第二音视频状态；
根据所述第二音视频状态判断教师的教学状态是否发生异常；
在确定教师的教学状态发生异常时，标记第二异常时间节点；
从第二异常时间节点开始，获取学生的第一语音信号，对所述第一语音信号进行特征提取，获取第一语音特征，将所述第一语音特征进行处理，得到第一音素信息；
将所述第一音素信息输入预先训练好的声学模型中，得到第一语音识别结果，确定所述第一语音信号对应的目标领域；
获取所述目标领域的知识图谱，并确定所述第一语音信号在所述目标领域的知识图谱中与其他内容的关联关系；
获取学生的第二语音信号，对所述第二语音信号进行语音识别，得到第二语音识别结果，计算所述第二语音识别结果中的语义的完整度，在确定所述完整度小于预设完整度时，根据所述关联关系对所述第二语音识别结果中的语义进行补充。
2.如权利要求1所述的基于5G网络的教育系统，其特征在于，所述后台服务器，还用于：
对所述第一多媒体文件进行解析，得到教师端的教育内容；
对所述教育内容根据知识点类型进行分类，划分为若干个子教育内容，并分别对若干个子教育内容进行概括总结，为每一个子教育内容确定一个关键词；
以所述关键词为索引，查询预先建立的教育知识图谱，确定所述教育知识图谱中所述关键词对应的当前难度等级；
获取所述当前难度等级的上一难度等级对应的第一内容及下一难度等级对应的第二内容，将所述第一内容及所述第二内容作为补充内容；
获取每一个关键词对应的补充内容并进行打包处理转发至教师端。
3.如权利要求1所述的基于5G网络的教育系统，其特征在于，所述后台服务器，还用于：
基于所述第二多媒体文件，确定学生端的第一音视频状态；
根据所述第一音视频状态判断学生的学习状态是否发生异常；
在确定学生的学习状态发生异常时，对学生进行标记并确定第一异常时间节点；
从第一异常时间节点开始，启动信息备份任务，将教育端发出的第一多媒体文件进行处理，得到目标图像及目标音频，将所述目标图像及所述目标音频进行备份，得到备份数据；
在确定学生的学习状态恢复正常时，将所述备份数据推送至学生端进行显示。
4.如权利要求1所述的基于5G网络的教育系统，其特征在于，还包括网络检测模块，分别与所述通讯模块、后台服务器连接，用于检测所述教师端与所述学生端之间的网络连接质量，并进行评分，在确定所述评分小于预设评分时，发出报警提示至后台服务器。
5.如权利要求4所述的基于5G网络的教育系统，其特征在于，所述网络检测模块，还用于每隔单位时间检测所述教师端与所述学生端之间的网络的平均耗时并计算平均值，得到网络耗时，根据所述网络耗时与预设网络耗时，计算得到网络延迟值，在确定所述网络延迟值大于预设网络延迟值时，发送网络延迟预警提示至后台服务器。
6.如权利要求1所述的基于5G网络的教育系统，其特征在于，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的面部图像及声音信号；
对所述面部图像进行特征提取，确定学生的面部特征；
对所述声音信号进行特征提取，确定学生的声音特征；
根据所述面部特征及声音特征，确定学生的情绪状态；
根据学生的情绪状态判断学生对当前的教学内容是否感兴趣，将判断结果作为学生行为。
7.如权利要求1所述的基于5G网络的教育系统，其特征在于，对所述第二多媒体文件进行特征提取，提取学生行为，包括：
从所述第二多媒体文件中提取学生的眼动图像，对所述眼动图像进行特征提取，确定眼动轨迹；
计算所述眼动轨迹与预设眼动轨迹的匹配度，将所述匹配度与预设匹配度进行比较，根据比较结果确定学生对当前的教学内容是否感兴趣，将确定结果作为学生作为。
8.如权利要求6所述的基于5G网络的教育系统，其特征在于，在对所述声音信号进行特征提取，确定学生的声音特征前，还包括：对所述声音信号进行滤波处理。
9.如权利要求7所述的基于5G网络的教育系统，其特征在于，所述预设眼动轨迹为学生对当前的教学内容感兴趣时获取的。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110860707.XA CN113313982B (zh) | 2021-07-29 | 2021-07-29 | 一种基于5g网络的教育系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110860707.XA CN113313982B (zh) | 2021-07-29 | 2021-07-29 | 一种基于5g网络的教育系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113313982A CN113313982A (zh) | 2021-08-27 |
| CN113313982B true CN113313982B (zh) | 2021-11-09 |
Family
ID=77381889
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110860707.XA Active CN113313982B (zh) | 2021-07-29 | 2021-07-29 | 一种基于5g网络的教育系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113313982B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114285966B (zh) * | 2021-12-07 | 2024-03-29 | 浙江东隆教育科技有限公司 | 一种劳动教育相关的监测数据处理方法及系统 |
Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102509007A (zh) * | 2011-11-01 | 2012-06-20 | 北京瑞信在线系统技术有限公司 | 多媒体教学评估方法及系统、装置以及多媒体教学系统 |
| CN103559812A (zh) * | 2013-11-07 | 2014-02-05 | 大连东方之星信息技术有限公司 | 一种教育督导评价报告生成系统 |
| CN107862970A (zh) * | 2017-11-20 | 2018-03-30 | 无锡开放大学 | 一种用于翻转课堂的教学质量评价模型 |
| CN107871413A (zh) * | 2017-11-23 | 2018-04-03 | 武汉英伦丰创软件有限公司 | 一种远程视频教学及评估系统 |
| CN108062880A (zh) * | 2017-03-16 | 2018-05-22 | 北京朗星耀世光学技术有限公司 | 一种智能翻转教育应用及数据基础平台 |
| CN108877336A (zh) * | 2018-03-26 | 2018-11-23 | 深圳市波心幻海科技有限公司 | 基于增强现实技术的教学方法、云服务平台和教学系统 |
| CN109919143A (zh) * | 2019-04-24 | 2019-06-21 | 郭钢 | 基于多感官交互体验和学习注意力评估的教育方法 |
| CN110992741A (zh) * | 2019-11-15 | 2020-04-10 | 深圳算子科技有限公司 | 一种基于课堂情绪和行为分析的学习辅助方法及系统 |
| CN111242515A (zh) * | 2020-03-05 | 2020-06-05 | 长沙师范学院 | 一种基于教育大数据的课堂教学质量测评系统及测评方法 |
| CN111402093A (zh) * | 2020-02-17 | 2020-07-10 | 浙江创课网络科技有限公司 | 基于大数据和人工智能的互联网精准化教学辅导管理系统 |
| CN111444354A (zh) * | 2020-04-09 | 2020-07-24 | 圆梦共享教育科技(深圳)有限公司 | 一种基于人工智能的知识点回溯学习评估方法 |
| CN111445365A (zh) * | 2020-04-13 | 2020-07-24 | 申珊珊 | 一种在线远程教育系统 |
| CN111681142A (zh) * | 2020-04-20 | 2020-09-18 | 威比网络科技(上海)有限公司 | 基于教育视频虚拟教学的方法、系统、设备及存储介质 |
| CN112634687A (zh) * | 2020-12-30 | 2021-04-09 | 重庆医科大学 | 一种数字化教育技术教学信息控制方法及系统 |
| CN112910961A (zh) * | 2021-01-15 | 2021-06-04 | 华中师范大学 | 一种网络课程视频质量自动评价方法及系统 |
| CN113129665A (zh) * | 2021-04-25 | 2021-07-16 | 上海松鼠课堂人工智能科技有限公司 | 人工智能在线教学互动方法、系统、存储介质及相关设备 |
-
2021
- 2021-07-29 CN CN202110860707.XA patent/CN113313982B/zh active Active
Patent Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102509007A (zh) * | 2011-11-01 | 2012-06-20 | 北京瑞信在线系统技术有限公司 | 多媒体教学评估方法及系统、装置以及多媒体教学系统 |
| CN103559812A (zh) * | 2013-11-07 | 2014-02-05 | 大连东方之星信息技术有限公司 | 一种教育督导评价报告生成系统 |
| CN108062880A (zh) * | 2017-03-16 | 2018-05-22 | 北京朗星耀世光学技术有限公司 | 一种智能翻转教育应用及数据基础平台 |
| CN107862970A (zh) * | 2017-11-20 | 2018-03-30 | 无锡开放大学 | 一种用于翻转课堂的教学质量评价模型 |
| CN107871413A (zh) * | 2017-11-23 | 2018-04-03 | 武汉英伦丰创软件有限公司 | 一种远程视频教学及评估系统 |
| CN108877336A (zh) * | 2018-03-26 | 2018-11-23 | 深圳市波心幻海科技有限公司 | 基于增强现实技术的教学方法、云服务平台和教学系统 |
| CN109919143A (zh) * | 2019-04-24 | 2019-06-21 | 郭钢 | 基于多感官交互体验和学习注意力评估的教育方法 |
| CN110992741A (zh) * | 2019-11-15 | 2020-04-10 | 深圳算子科技有限公司 | 一种基于课堂情绪和行为分析的学习辅助方法及系统 |
| CN111402093A (zh) * | 2020-02-17 | 2020-07-10 | 浙江创课网络科技有限公司 | 基于大数据和人工智能的互联网精准化教学辅导管理系统 |
| CN111242515A (zh) * | 2020-03-05 | 2020-06-05 | 长沙师范学院 | 一种基于教育大数据的课堂教学质量测评系统及测评方法 |
| CN111444354A (zh) * | 2020-04-09 | 2020-07-24 | 圆梦共享教育科技(深圳)有限公司 | 一种基于人工智能的知识点回溯学习评估方法 |
| CN111445365A (zh) * | 2020-04-13 | 2020-07-24 | 申珊珊 | 一种在线远程教育系统 |
| CN111681142A (zh) * | 2020-04-20 | 2020-09-18 | 威比网络科技(上海)有限公司 | 基于教育视频虚拟教学的方法、系统、设备及存储介质 |
| CN112634687A (zh) * | 2020-12-30 | 2021-04-09 | 重庆医科大学 | 一种数字化教育技术教学信息控制方法及系统 |
| CN112910961A (zh) * | 2021-01-15 | 2021-06-04 | 华中师范大学 | 一种网络课程视频质量自动评价方法及系统 |
| CN113129665A (zh) * | 2021-04-25 | 2021-07-16 | 上海松鼠课堂人工智能科技有限公司 | 人工智能在线教学互动方法、系统、存储介质及相关设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113313982A (zh) | 2021-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110992741B (zh) | 一种基于课堂情绪和行为分析的学习辅助方法及系统 | |
| CN108648757B (zh) | 一种基于多维度课堂信息的分析方法 | |
| CN109192204B (zh) | 一种基于智能设备摄像头的语音控制方法和智能设备 | |
| CN107203953A (zh) | 一种基于互联网、表情识别和语音识别的教学系统及其实现方法 | |
| CN111709358A (zh) | 基于课堂视频的师生行为分析系统 | |
| WO2020214316A1 (en) | Artificial intelligence-based generation of event evaluation report | |
| CN110427977B (zh) | 一种课堂互动行为的检测方法 | |
| CN114422820A (zh) | 一种教育互动直播系统及直播方法 | |
| CN110930781A (zh) | 录播系统 | |
| CN113313982B (zh) | 一种基于5g网络的教育系统 | |
| CN113505604B (zh) | 一种用于心理学教育的在线辅助实验方法、装置及设备 | |
| CN111915111A (zh) | 在线课堂的互动质量评价方法、装置及终端设备 | |
| CN113178208A (zh) | 智能化学生在线语音答题控制方法与系统 | |
| CN116825288A (zh) | 孤独症康复课程记录方法、装置、电子设备及存储介质 | |
| CN111563697A (zh) | 一种线上课堂学生情绪分析方法和系统 | |
| CN112464020B (zh) | 网络课堂信息处理方法及系统、计算机可读存储介质 | |
| CN108764757A (zh) | 基于大数据与人工智能的精准教学评价方法和机器人系统 | |
| CN111950472A (zh) | 教师磨课测评方法及系统 | |
| CN111081227B (zh) | 一种听写内容的识别方法及电子设备 | |
| CN114998968B (zh) | 一种基于音视频分析课堂交互行为的方法 | |
| CN117496580B (zh) | 一种基于多人同步交互式的面部表情智能识别机器人终端 | |
| CN116434625A (zh) | 一种用于英语教学的智能型英语教学系统 | |
| Dai et al. | In Search of Negative Moments: Multi-Modal Analysis of Teacher Negativity in Classroom Observation Videos. | |
| CN110808066B (zh) | 教学环境安全分析方法 | |
| CN115081923A (zh) | 一种智慧教学质量评测的方法与装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |