CN109272793A - 儿童交互式阅读学习系统 - Google Patents

儿童交互式阅读学习系统 Download PDF

Info

Publication number
CN109272793A
CN109272793A CN201811390611.6A CN201811390611A CN109272793A CN 109272793 A CN109272793 A CN 109272793A CN 201811390611 A CN201811390611 A CN 201811390611A CN 109272793 A CN109272793 A CN 109272793A
Authority
CN
China
Prior art keywords
information
interactive
module
identification
reading learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811390611.6A
Other languages
English (en)
Inventor
梅俊峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Hong Hui Technology Co Ltd
Original Assignee
Hefei Hong Hui Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Hong Hui Technology Co Ltd filed Critical Hefei Hong Hui Technology Co Ltd
Priority to CN201811390611.6A priority Critical patent/CN109272793A/zh
Publication of CN109272793A publication Critical patent/CN109272793A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/14Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B17/00Teaching reading
    • G09B17/003Teaching reading electrically operated apparatus or devices
    • G09B17/006Teaching reading electrically operated apparatus or devices with audible presentation of the material to be studied

Abstract

本发明提供了一种儿童交互式阅读学习系统,包括交互控制主体以及分别与所述交互控制主体电性连接的显示装置和识别装置,所述交互控制主体包括信息管理单元、语音检测单元以及时间控制单元,所述信息管理单元用于获取多媒体信息;所述语音检测单元用于接收所述识别装置获取的识别信息和/或交互信息中的语音信息;所述时间控制单元用于接收所述识别装置获取的识别信息和/或交互信息中的状态信息。本发明的儿童交互式阅读学习系统,可实时记录、反馈儿童阅读学习过程中的读写错误情况及阅读学习状态,并根据错误情况及学习状态及时调整播放的多媒体信息,以提升儿童对阅读学习的兴趣。

Description

儿童交互式阅读学习系统
技术领域
本发明涉及一种儿童交互式阅读学习系统,属于益智教育领域。
背景技术
阅读是儿童成长过程中的重要元素,儿童可在阅读过程中完成对现实社会的初步认知;近年来,随着计算机、多媒体、语音等技术的不断发展,越来越多的阅读系统辅助开发有语音功能,帮助儿童在阅读过程中完善语言的发展。
然而现有技术中带有语音功能的阅读系统,大多数仅提供了播放语音信息的功能,而忽略了儿童语言发展过程中读写的问题,特别是在第二语言的学习过程中,读写指导的缺失将导致儿童对单词/文字拼读的认知错误;同时,现有技术中阅读系统的阅读内容及模式多是固定的,单调的重复阅读将导致儿童对阅读学习失去兴趣,使得儿童阅读学习的过程仅是被动的接受,致使通过阅读系统学习的效率降低。
有鉴于此,确有必要提供一种新的儿童交互式阅读学习系统,以解决上述问题。
发明内容
本发明的目的在于提供一种儿童交互式阅读学习系统,以实时记录、反馈儿童阅读学习过程中的读写错误情况及阅读学习状态,并根据错误情况及学习状态及时调整播放的多媒体信息,以提升儿童对阅读学习的兴趣。
为实现上述发明目的,本发明提供了一种儿童交互式阅读学习系统,包括交互控制主体以及分别与所述交互控制主体电性连接的显示装置和识别装置,其中,所述交互控制主体包括信息管理单元、语音检测单元以及时间控制单元,所述信息管理单元用于获取多媒体信息,并根据所述识别装置采集的识别信息和/或交互信息匹配相应的多媒体信息;所述语音检测单元用于接收所述识别装置获取的识别信息和/或交互信息中的语音信息,并对所述语音信息进行分析处理,判断语音信息的准确性;所述时间控制单元用于接收所述识别装置获取的识别信息和/或交互信息中的状态信息,并根据所述状态信息调控多媒体信息的播放速度和/或内容。
作为本发明的进一步改进,所述语音检测单元包括发音检测模块,用于识别、分析所述识别装置传递的语音信息,提取语音信息中的特征参数;特征识别模块,用于获取所述多媒体信息中的音频信息,并提取音频信息中的标准参数;匹配对照模块,与所述发音检测模块和所述特征识别模块电性连接,以接收所述特征参数和所述标准参数,并将所述特征参数和所述标准参数进行拟合,获取带有差异标记点的音频波谱。
作为本发明的进一步改进,所述时间控制单元包括状态识别模块和时间曲线拟合模块,所述状态识别模块用于接收识别装置采集的识别信息和/或交互信息中的表情信息和身体姿态信息,以判断儿童的阅读学习状态;所述时间曲线拟合模块用于根据所述状态识别模块识别的状态信息进行注意力曲线的拟合和遗忘曲线的匹配、调用。
作为本发明的进一步改进,所述信息管理单元包括控制模块、数据存储模块以及数据统计模块,所述控制模块用于接收语音检测单元、时间控制单元和识别装置的识别信息和/或交互信息,并根据识别信息和/或交互信息匹配多媒体信息。
作为本发明的进一步改进,所述数据存储模块和所述数据统计模块分别与所述控制模块电性连接,所述数据存储模块为高速数据存储板,用于存储儿童阅读学习过程中的所有记录,所述数据统计模块用于统计儿童阅读学习过程中的错误记录,并将所述错误记录发送至所述控制模块进行处理,以通过所述控制模块推进多媒体信息的播放。
作为本发明的进一步改进,所述数据存储模块连接有数据交互接口,所述数据交互接口包括电源接口以及数字I/O接口、USB接口、以太网接口、OTG接口、HDMI接口中的一种或几种,所述数据交互接口设置在所述交互控制主体上。
作为本发明的进一步改进,所述显示装置的主体为触控显示屏,所述触控显示屏用于显示播放所述信息管理单元匹配的多媒体信息,并接收传递识别信息和/或交互信息中的触控信息。
作为本发明的进一步改进,所述识别装置包括信息采集单元和信息识别单元,所述信息采集单元用于采集识别信息和/或交互信息,所述信息识别单元用于接收所述信息采集单元采集到的识别信息和/或交互信息,并对所述识别信息和/或交互信息进行处理。
作为本发明的进一步改进,所述信息采集单元包括用于采集儿童状态信息的状态信息采集模块、用于采集儿童使用位置的位置信息采集模块、用于采集儿童交互动作/语音的交互信息采集模块以及用于采集图像/文字信息的图形信息采集模块。
作为本发明的进一步改进,所述信息采集单元至少包括红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种。
本发明的有益效果是:本发明的儿童交互式阅读学习系统通过设置语音检测单元和时间控制单元,可实时对儿童阅读学习过程中的读写情况进行判断和纠正,并可根据儿童的阅读学习状态调整多媒体信息的播放内容/时长,使得儿童可在阅读学习过程中逐步提高自己的语言水平。同时,显示装置和识别装置的设置可对儿童阅读学习过程中的识别信息/交互信息进行采集和识别,并在儿童阅读学习过程中实现真实场景和虚拟场景之间的交互,使得儿童在阅读学习过程中保持较高的热情。
附图说明
图1是本发明儿童交互式阅读学习系统的结构框图。
图2是图1中交互控制主体的结构框图。
图3是图1中识别装置的结构框图。
图4是本发明儿童交互式阅读学习系统一较佳实施例的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面结合附图和具体实施例对本发明进行详细描述。
请参阅图1所示,本发明揭示了一种儿童交互式阅读学习系统100。所述儿童交互式阅读学习系统100包括交互控制主体1以及分别与所述交互控制主体1电性连接的显示装置2和识别装置3。
请参阅图1并结合图2所示,所述交互控制主体1用于接收所述显示装置2和/或所述识别装置3发送的识别信息和/或交互信息,并通过所述识别信息和/或交互信息调整多媒体信息。在本发明中,所述交互控制主体1包括信息管理单元11、语音检测单元12以及时间控制单元13。
所述信息管理单元11用于获取多媒体信息,并根据所述识别装置3采集的识别信息和/或交互信息匹配相应的多媒体信息,在本发明中,所述信息管理单元11包括控制模块111、分别与所述控制模块111电性连接的数据存储模块112以及数据统计模块113。所述控制模块111用于接收语音检测单元12、时间控制单元13和/或识别装置3传递的识别信息和/或交互信息,并根据识别信息和/或交互信息匹配多媒体信息,控制多媒体信息与识别信息和/或交互信息之间的交互。进一步的,在本发明中所述控制模块111可根据识别信息建立识别信息和/或交互信息的节点信息表,且在本发明中,所述节点信息表中的各个节点为识别信息和/或交互信息中的实词信息点。
具体来讲,在本发明中所述识别信息和/或交互信息可为语音信息、图像信息、文字信息、动作信息、表情信息、状态信息、身体姿态信息等携带交互内容的信息,且当所述识别信息为文字信息时,所述控制模块111可直接提取文字内容,并根据文字内容中的实词信息点建立相应的节点信息表,同时,控制模块111将根据节点信息表中的节点内容在所述数据存储模块112中关联/匹配相应的多媒体信息,进一步通过显示装置2进行播放;而当所述识别信息为非文字信息时,则识别信息进入识别装置3和/或语音检测单元12和/或时间控制单元13中进行处理,并进一步由控制模块111对处理后的识别信息和/或交互信息进行识别,以关联/匹配数据存储模块112中相应的多媒体信息。
所述数据存储模块112用于存储儿童阅读学习过程中的所有记录以及与识别信息和/或交互信息匹配的多媒体信息,在本发明中所述数据存储模块112兼具本地存储和临时存储的功能,儿童阅读学习过程中的所有记录以本地存储的形式存储在数据存储模块112中,而与识别信息和/或交互信息匹配的多媒体信息则以本地存储/临时存储的形式存储在数据存储模块112中,且所述多媒体信息可为网址、视频链接等网络数据内容,如此设置,当所述控制模块111调用多媒体信息时,可直接通过网页进行显示播放,防止占用数据存储模块112的存储空间,以保证儿童交互式阅读学习系统100的快速运行。优选的,在本发明的一个实施例中,所述数据存储模块112为高速数据存储板,以进一步保证所述数据存储模块112的存储空间和读写速度。
进一步的,在本发明中,所述数据存储模块112还连接有数据交互接口1121,所述数据交互接口1121包括电源接口以及数字I/O接口、USB接口、以太网接口、OTG接口、HDMI接口中的一种或几种,且所述数据交互接口1121设置在所述交互控制主体1的壳体上。
所述数据统计模块113用于统计儿童阅读学习过程中的错误记录,错误记录至少包括错误内容、错误发生的频率等信息,控制模块111收集错误记录并进行统计,以匹配数据存储模块112中的多媒体信息,并进一步通过显示装置2进行显示播放。
所述语音检测单元12用于接收所述识别装置3获取到的识别信息和/或交互信息中的语音信息,并对所述语音信息进行分析处理,判断语音信息的准确性。具体来讲,所述语音检测单元12包括发音检测模块121、特征识别模块122以及匹配对照模块123。所述发音检测模块121用于识别、分析所述识别装置3传递的语音信息并提取语音信息中的特征参数;具体来讲,所述发音检测模块121采集的语音信息为儿童阅读时发出的声音信息,发音检测模块121接收到语音信息后合成儿童阅读的特征波谱,进一步的,发音检测模块121将识别并标记语音信息中的音素排列和音节重点作为特征参数,并标注在特征波谱中。
所述特征识别模块122用于获取所述多媒体信息中的音频信息,并提取音频信息中的标准参数;具体来讲,所述特征识别模块122可获取多媒体信息中的音频信号并拟合形成标准波谱,同样的,所述特征识别模块122将在所述标准波谱中标记音素排列和音节重点作为标准参数,继而作为判定儿童发音的标准参照。
所述匹配对照模块123分别与所述发音检测模块121和所述特征识别模块122电性连接,以接收包含特征参数的特征波谱和包含标准参数的标准波谱并进行拟合,以获取带有差异标记点的音频波谱,此时所述差异标记点即为儿童阅读发音时的问题位置,所述匹配对照模块123可将所述带有差异标记点的音频波谱传递至所述控制模块111,控制模块111接收音频波谱后,一方面通过所述显示装置2进行显示,提示儿童阅读学习时的发音问题位置;另一方面,将音频波谱中的差异标记点提取并发送至所述数据统计模块113作为错误记录进行统计存储。
所述时间控制单元13包括状态识别模块131和时间曲线拟合模块132,所述状态识别模块131用于接收并识别儿童阅读学习时的表情信息和身体姿态信息,以判断儿童的阅读学习状态;具体来讲,所述状态识别模块131中搭载有微表情识别芯片,所述微表情识别芯片可实时对识别装置3采集的表情信息进行识别,并判断儿童的阅读学习状态,当所述状态识别模块131识别到儿童处于疲累状态时,状态识别模块131将状态信息传递至控制模块111和时间曲线拟合模块132中,其中,控制模块111将根据状态信息控制多媒体信息的切换或暂停,时间曲线拟合模块132将记录状态信息产生的时间并对儿童出现疲累状态时的时长进行统计、拟合,形成儿童阅读学习的注意力曲线,以使得儿童在后续使用儿童交互式阅读学习系统100时,控制模块111可直接根据时间曲线拟合模块132拟合的注意力曲线调整多媒体信息的播放时间和内容,以提升儿童交互式阅读学习系统100的使用友好性。
进一步的,所述状态识别模块131识别到儿童处于疑惑/困惑状态时,状态识别模块131将状态信息传递至控制模块111和时间曲线拟合模块132中,其中,时间曲线拟合模块132将记录状态信息产生的时间并标记在多媒体信息中,控制模块111将根据标记位置处的节点信息匹配新的多媒体信息,并针对标记位置处的节点信息进行延展,加深儿童阅读学习的印象,提升使用儿童交互式阅读学习系统100时的阅读学习效率。
所述显示装置2用于显示播放控制模块111传递的多媒体信息。在本发明的实施例中,所述显示装置2的主体为触控显示屏,如此设置,可使得显示装置2既可用于显示多媒体信息,同时也可用于识别交互信息。在本发明中显示装置2识别的交互信息包括儿童的拼写信息,显示装置2识别到拼写信息后传递至控制模块111中,控制模块111将提取多媒体信息中的文字信息并将文字信息进行标准化处理,从而将拼写信息与标准化处理后的文字信息进行匹配,判断儿童的拼写是否正确,若正确,则匹配多媒体信息反馈结果,若错误,则标记拼写错误位置,通过显示装置2进行显示,并由所述数据统计模块113和时间曲线拟合模块132进行记录,其中,数据统计模块113记录错误内容,时间曲线拟合模块132用于记录错误首次发生的时间,并根据时间曲线拟合模块132存储的记忆曲线标记背诵提示时间,进一步由控制模块111控制显示装置2进行提示,保证儿童在阅读学习过程中的学习效果。
进一步的,在本发明的一个实施例中,所述显示装置2与所述交互控制主体1一体设置。当然在其他实施例中,所述显示装置2也可与所述交互控制主体1分体设置或可拆卸式连接,即在本发明中,所述显示装置2和所述交互控制主体1的连接形式可根据实际需要进行选择,于此不与限制。
请参阅图3所示,所述识别装置3用于采集交互信息和/或识别信息。在本发明中,所述识别装置3包括信息采集单元31和信息识别单元32,所述信息采集单元31用于采集交互信息和/或识别信息,所述信息识别单元32用于接收信息采集单元31采集到的交互信息和/或识别信息并对所述交互信息和/或识别信息进行处理。
事实上,所述信息采集单元31在采集交互信息和/或识别信息时,交互信息和/或识别信息中通常包括大量的环境信息,大量的环境信息的存在将导致控制模块111对交互信息和/或识别信息中的实际信息的识别不准确,造成多媒体信息的匹配错误,影响儿童交互式阅读学习系统100的使用效果。因此,在本发明中,采用信息识别单元32对交互信息和/或识别信息中的环境信息进行过滤,防止环境信息对实际信息的影响,进一步提升控制模块111识别和匹配多媒体信息的准确性。
在本实施例中,所述信息采集单元31至少包括用于采集儿童状态信息的状态信息采集模块311、位置信息采集模块312、交互信息采集模块313及图形信息采集模块314;且在本发明中,信息采集单元31为红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种,以实时对识别信息和/或交互信息进行识别。
具体来讲,状态信息采集模块311通过所述信息识别单元32与所述状态识别模块131电性连接,用于采集儿童阅读学习时识别信息和/或交互信息中包含的状态信息并由状态识别模块131进行儿童阅读学习状态的判断。位置信息采集模块312用于采集儿童阅读学习过程中的身体姿态信息,所述身体姿态信息包括儿童与所述显示装置2之间的相对位置信息和坐姿信息。
在本发明中,所述位置信息采集模块312可对儿童阅读学习时的相对位置进行多维监控,在本发明中所述位置信息采集模块312写有位置控制阈值,所述位置控制阈值包括最大阈值及最小阈值,以实时对儿童阅读学习时的相对位置信息进行监控。优选的,在本发明的一个实施例中,所述位置信息采集模块312为位置传动器。
当儿童的阅读学习位置与显示装置2之间的距离小于最小阈值或大于最大阈值时,所述位置信息采集模块312通过信息识别单元32向所述状态识别模块131发送提醒信息,此时状态识别模块131接收提醒信息,并计算儿童阅读学习位置和显示装置2之间的距离与所述最大阈值/最小阈值之间的距离差,并进一步传递至控制模块111中,控制模块111调用多媒体信息中的状态提示数据并通过显示装置2进行显示播放,提示儿童调整身体姿态,且在儿童调整身体姿态的过程中,所述位置信息采集模块312实时提取儿童阅读学习的相对位置信息并向所述状态识别模块131发送提醒信息,直至儿童阅读学习的位置处于位置控制阈值的范围内,停止发送提醒信息,控制模块111停止播放状态提示多媒体信息,推进多媒体信息重新/继续播放。
交互信息采集模块313用于采集儿童交互动作/交互语音等用于体现交互动作的信息,具体来讲,所述交互信息采集模块313采集的用于体现交互动作的信息,为儿童在阅读学习过程中根据多媒体信息做出的交互动作/交互语音信息,如,当控制模块111播放的多媒体信息中包含交互指令时,控制模块111将控制多媒体信息在交互指令位置处暂停播放,并进一步通过显示装置2提示交互指令,儿童在接收到交互指令后,根据交互指令作出/发出对应的交互动作/交互语音,且由控制模块111对交互动作/交互语音进行判断,若符合交互指令,则推进多媒体信息进一步进行;若不符合,则控制模块111调用与交互指令相关的新的多媒体信息对儿童进行提示,直至儿童发出符合交互指令的交互动作/交互语音。
图形信息采集模块314用于采集图像/文字信息,具体来讲,所述图形信息采集单元314主要用于对儿童阅读学习的绘本或书籍等阅读学习资料进行识别,并根据识别到的内容通过控制模块111进行多媒体信息的匹配。事实上,由于实体的绘本/书籍等阅读学习资料无法在绘本/书籍原有内容的基础上进行信息的拓展,致使儿童在枯燥的阅读学习过程中失去兴趣。
本发明的儿童交互式阅读学习系统100通过图形信息采集模块314对所述绘本/书籍的内容进行识别,并进一步通过显示装置2进行显示,使得儿童在阅读至感兴趣区域并对感兴趣点进行标注时,图形信息采集模块314可将标注点传递至控制模块111,并由控制模块111对标注点的信息进行识别,以匹配相应的多媒体信息;进一步的,当一个标注点同时对应多个多媒体信息时,所述多媒体信息可以以列表的形式通过显示装置2进行显示,并根据儿童发出交互信息对多媒体信息进行选择,继而控制多媒体信息的推进。
需要说明的是,在本发明中图像信息采集模块314采集的绘本/书籍的信息既可通过显示装置2进行全屏显示直接取代绘本/书籍,也可部分显示在显示装置2上,且只显示与标注点位置处的信息相关/相应的多媒体信息;当然,在本发明的其他实施例中,所述儿童交互式阅读学习系统100还可包括与图形信息采集模块314对应设置的图形信息投射单元(未图示),此时,标注点位置处的多媒体信息可直接通过图形信息投射单元投射在绘本/书籍上,实现虚拟场景和现实场景的结合。
请参阅图4所示,为本发明儿童交互式阅读学习系统100一较佳实施例的结构示意图。在本实施例中,所述交互控制主体1呈中部向下凹陷的凹槽状设置,所述信息管理单元11、语音检测单元12以及时间控制单元13均设置在所述交互控制主体1的底部,进一步的,所述数据交互接口1121设置在所述交互控制主体1的外壁上,如此设置,可有效提升数据交互接口1121连接外部装置的便捷性,方便儿童交互式阅读学习系统100的使用。
所述显示装置2连接在所述交互控制主体1上,使得所述显示装置2和所述交互控制主体1之间形成用于收容物品的收容空间,进一步的,在本实施例中,显示装置2与交互控制主体1转轴连接,且在本实施例中,所述显示装置1为电容式触摸屏,以使得本实施例中的显示装置2同时具有显示多媒体信息和接收识别信息和/或交互信息的功能,有效提升了儿童交互式阅读学习系统100的实用性。
所述识别装置3设置在所述交互控制主体1和/或显示装置2上,优选的,在本实施例中,所述交互控制主体1上设置有用于支撑绘本/书籍的书架110,所述识别装置3设置在所述书架110上,如此设置,可有效防止识别装置被其他物品遮挡,保证了识别装置3的识别效果。
进一步的,本实施例的儿童交互式阅读学习系统100还设置有用于支撑所述交互控制主体1的可调支架120,如此设置,可方便儿童根据身高需求调节交互控制主体1的高度,进一步提升了儿童交互式阅读学习系统100的实用性。
综上所述,本发明的儿童交互式阅读学习系统100通过设置语音检测单元12和时间控制单元13,可实时对儿童阅读学习过程中的发音情况进行判断和纠正,并可根据儿童的阅读状态调整多媒体信息的播放内容/时长,使得儿童可在阅读过程中逐步提高自己的语言水平。同时,显示装置2和识别装置3的设置可对儿童阅读过程中的识别信息/交互信息进行采集处理,一方面,实现了儿童阅读学习过程中虚拟信息和现实信息之间的交互,使得儿童在阅读学习过程中保持较高的热情,有效提升了使用儿童交互式阅读学习系统100进行阅读学习时的效率;另一方面,实时对儿童阅读学习时的姿态进行监控,帮助儿童养成良好的阅读学习习惯。
以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种儿童交互式阅读学习系统,包括交互控制主体以及分别与所述交互控制主体电性连接的显示装置和识别装置,其特征在于:所述交互控制主体包括信息管理单元、语音检测单元以及时间控制单元,所述信息管理单元用于获取多媒体信息,并根据所述识别装置采集的识别信息和/或交互信息匹配相应的多媒体信息;所述语音检测单元用于接收所述识别装置获取的识别信息和/或交互信息中的语音信息,并对所述语音信息进行分析处理,判断语音信息的准确性;所述时间控制单元用于接收所述识别装置获取的识别信息和/或交互信息中的状态信息,并根据所述状态信息调控多媒体信息的播放速度和/或内容。
2.根据权利要求1所述的儿童交互式阅读学习系统,其特征在于:所述语音检测单元包括发音检测模块,用于识别、分析所述识别装置传递的语音信息,提取语音信息中的特征参数;特征识别模块,用于获取所述多媒体信息中的音频信息,并提取音频信息中的标准参数;匹配对照模块,与所述发音检测模块和所述特征识别模块电性连接,以接收所述特征参数和所述标准参数,并将所述特征参数和所述标准参数进行拟合,获取带有差异标记点的音频波谱。
3.根据权利要求1所述的儿童交互式阅读学习系统,其特征在于:所述时间控制单元包括状态识别模块和时间曲线拟合模块,所述状态识别模块用于接收识别装置采集的识别信息和/或交互信息中的表情信息和身体姿态信息,以判断儿童的阅读学习状态;所述时间曲线拟合模块用于根据所述状态识别模块识别的状态信息进行注意力曲线的拟合和遗忘曲线的匹配、调用。
4.根据权利要求1所述的儿童交互式阅读学习系统,其特征在于:所述信息管理单元包括控制模块、数据存储模块以及数据统计模块,所述控制模块用于接收语音检测单元、时间控制单元和识别装置的识别信息和/或交互信息,并根据识别信息和/或交互信息匹配多媒体信息。
5.根据权利要求4所述的儿童交互式阅读学习系统,其特征在于:所述数据存储模块和所述数据统计模块分别与所述控制模块电性连接,所述数据存储模块为高速数据存储板,用于存储儿童阅读学习过程中的所有记录,所述数据统计模块用于统计儿童阅读学习过程中的错误记录,并将所述错误记录发送至所述控制模块进行处理,以通过所述控制模块推进多媒体信息的播放。
6.根据权利要求5所述的儿童交互式阅读学习系统,其特征在于:所述数据存储模块连接有数据交互接口,所述数据交互接口包括电源接口以及数字I/O接口、USB接口、以太网接口、OTG接口、HDMI接口中的一种或几种,所述数据交互接口设置在所述交互控制主体上。
7.根据权利要求1所述的儿童交互式阅读学习系统,其特征在于:所述显示装置的主体为触控显示屏,所述触控显示屏用于显示播放所述信息管理单元匹配的多媒体信息,并接收传递识别信息和/或交互信息中的触控信息。
8.根据权利要求1所述的儿童交互式阅读学习系统,其特征在于:所述识别装置包括信息采集单元和信息识别单元,所述信息采集单元用于采集识别信息和/或交互信息,所述信息识别单元用于接收所述信息采集单元采集到的识别信息和/或交互信息,并对所述识别信息和/或交互信息进行处理。
9.根据权利要求8所述的儿童交互式阅读学习系统,其特征在于:所述信息采集单元包括用于采集儿童状态信息的状态信息采集模块、用于采集儿童使用位置的位置信息采集模块、用于采集儿童交互动作/语音的交互信息采集模块以及用于采集图像/文字信息的图形信息采集模块。
10.根据权利要求8所述的儿童交互式阅读学习系统,其特征在于:所述信息采集单元至少包括红外摄像头、双目视觉传感器、激光散斑检测装置、深度摄像头及单目摄像头中的一种或几种。
CN201811390611.6A 2018-11-21 2018-11-21 儿童交互式阅读学习系统 Pending CN109272793A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811390611.6A CN109272793A (zh) 2018-11-21 2018-11-21 儿童交互式阅读学习系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811390611.6A CN109272793A (zh) 2018-11-21 2018-11-21 儿童交互式阅读学习系统

Publications (1)

Publication Number Publication Date
CN109272793A true CN109272793A (zh) 2019-01-25

Family

ID=65191205

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811390611.6A Pending CN109272793A (zh) 2018-11-21 2018-11-21 儿童交互式阅读学习系统

Country Status (1)

Country Link
CN (1) CN109272793A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109817039A (zh) * 2019-03-18 2019-05-28 淮阴工学院 外语学习辅助装置
CN110010157A (zh) * 2019-03-27 2019-07-12 广东小天才科技有限公司 测试方法、装置、设备及存储介质
CN110349461A (zh) * 2019-06-11 2019-10-18 北京光年无限科技有限公司 基于儿童专用智能设备的教育与娱乐结合方法及系统
CN110473436A (zh) * 2019-09-09 2019-11-19 邸心洋 一种阅读辅助学习设备
CN110766573A (zh) * 2019-07-06 2020-02-07 杨林 一种组织生活用交互式朗读系统及相应的组织生活活动室
CN111986530A (zh) * 2019-05-23 2020-11-24 深圳市希科普股份有限公司 一种基于学习状态检测的交互学习系统
CN113313998A (zh) * 2021-06-21 2021-08-27 日照职业技术学院 一种基于数字化音乐授课用的波谱辅助练习装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101739870A (zh) * 2009-12-03 2010-06-16 深圳先进技术研究院 交互式语言学习系统及交互式语言学习方法
CN103258450A (zh) * 2013-03-22 2013-08-21 华中师范大学 面向孤独症儿童的智能学习平台
US20140154659A1 (en) * 2012-11-21 2014-06-05 Laureate Education, Inc. Facial expression recognition in educational learning systems
CN107203953A (zh) * 2017-07-14 2017-09-26 深圳极速汉语网络教育有限公司 一种基于互联网、表情识别和语音识别的教学系统及其实现方法
CN107239138A (zh) * 2017-05-11 2017-10-10 哈尔滨工程大学 一种基于脑机接口移动终端的学习监控和测试方法
CN107959881A (zh) * 2017-12-06 2018-04-24 安徽省科普产品工程研究中心有限责任公司 一种基于儿童情绪的视频教学系统
CN108845786A (zh) * 2018-05-31 2018-11-20 北京智能管家科技有限公司 智能伴读方法、装置、设备和存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101739870A (zh) * 2009-12-03 2010-06-16 深圳先进技术研究院 交互式语言学习系统及交互式语言学习方法
US20140154659A1 (en) * 2012-11-21 2014-06-05 Laureate Education, Inc. Facial expression recognition in educational learning systems
CN103258450A (zh) * 2013-03-22 2013-08-21 华中师范大学 面向孤独症儿童的智能学习平台
CN107239138A (zh) * 2017-05-11 2017-10-10 哈尔滨工程大学 一种基于脑机接口移动终端的学习监控和测试方法
CN107203953A (zh) * 2017-07-14 2017-09-26 深圳极速汉语网络教育有限公司 一种基于互联网、表情识别和语音识别的教学系统及其实现方法
CN107959881A (zh) * 2017-12-06 2018-04-24 安徽省科普产品工程研究中心有限责任公司 一种基于儿童情绪的视频教学系统
CN108845786A (zh) * 2018-05-31 2018-11-20 北京智能管家科技有限公司 智能伴读方法、装置、设备和存储介质

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109817039A (zh) * 2019-03-18 2019-05-28 淮阴工学院 外语学习辅助装置
CN109817039B (zh) * 2019-03-18 2023-02-10 淮阴工学院 外语学习辅助装置
CN110010157A (zh) * 2019-03-27 2019-07-12 广东小天才科技有限公司 测试方法、装置、设备及存储介质
CN111986530A (zh) * 2019-05-23 2020-11-24 深圳市希科普股份有限公司 一种基于学习状态检测的交互学习系统
CN110349461A (zh) * 2019-06-11 2019-10-18 北京光年无限科技有限公司 基于儿童专用智能设备的教育与娱乐结合方法及系统
CN110766573A (zh) * 2019-07-06 2020-02-07 杨林 一种组织生活用交互式朗读系统及相应的组织生活活动室
CN110473436A (zh) * 2019-09-09 2019-11-19 邸心洋 一种阅读辅助学习设备
CN113313998A (zh) * 2021-06-21 2021-08-27 日照职业技术学院 一种基于数字化音乐授课用的波谱辅助练习装置
CN113313998B (zh) * 2021-06-21 2022-06-03 日照职业技术学院 一种基于数字化音乐授课用的波谱辅助练习装置

Similar Documents

Publication Publication Date Title
CN109272793A (zh) 儿童交互式阅读学习系统
Barr et al. Anchoring comprehension in linguistic precedents
CN108460707B (zh) 一种学生的作业智能监管方法及其系统
CN104290097A (zh) 一种学习型智能家庭社交机器人系统和方法
US20200019370A1 (en) Collaborative ai storytelling
CN103400512A (zh) 一种学习辅助装置及其运行方法
CN105159870A (zh) 一种精准完成连续自然语音文本化的处理系统及方法
JP2011516924A (ja) マルチモードの学習システム
JP2020160341A (ja) 動画出力システム
CN108806367A (zh) 一种英语口语语音纠正系统
JP2010204926A (ja) モニタリングシステム、モニタリング方法、およびプログラム
TW201314638A (zh) 具虛擬實境擴充功能的點讀裝置
KR101378362B1 (ko) 광학코드 식별 펜에 의하여 제어되는 어학학습기
KR101789057B1 (ko) 시각 장애인을 위한 자동 오디오 북 시스템 및 그 운영 방법
CN111638807A (zh) 一种基于智能手写笔的学习辅助系统
US9111463B2 (en) Interactive speech synthesizer for enabling people who cannot talk but who are familiar with use of anonym moveable picture communication to autonomously communicate using verbal language
CN106571087A (zh) 一种具有记忆功能的教学系统及教学方法
CN105916069A (zh) 一种可将语音实时转换成文字的智能话筒
CN108446641A (zh) 一种基于机器学习的口形图像识别系统及通过面纹识别发声的方法
CN210865164U (zh) 一种教育机器人
KR200425379Y1 (ko) 유아 교육용 학습기
KR20180012192A (ko) 유아동용 학습 장치 및 그 동작 방법
CN106098091A (zh) 一种具有同音字转化功能的语音速记装置
TWI570677B (zh) 虛擬情境之語言學習互動設備
CN111311713A (zh) 漫画处理方法、显示方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination