CN111083434A - 一种开启听写检测的方法及电子设备 - Google Patents

一种开启听写检测的方法及电子设备 Download PDF

Info

Publication number
CN111083434A
CN111083434A CN201910400719.7A CN201910400719A CN111083434A CN 111083434 A CN111083434 A CN 111083434A CN 201910400719 A CN201910400719 A CN 201910400719A CN 111083434 A CN111083434 A CN 111083434A
Authority
CN
China
Prior art keywords
dictation
content
image
combination
standard format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910400719.7A
Other languages
English (en)
Inventor
崔颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TCL China Star Optoelectronics Technology Co Ltd
Original Assignee
Shenzhen China Star Optoelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen China Star Optoelectronics Technology Co Ltd filed Critical Shenzhen China Star Optoelectronics Technology Co Ltd
Priority to CN201910400719.7A priority Critical patent/CN111083434A/zh
Publication of CN111083434A publication Critical patent/CN111083434A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例涉及教育技术领域,公开一种开启听写检测的方法及电子设备,该方法包括:控制拍摄模组监测目标区域,在监测到目标区域中存在标准格式听写本时控制拍摄模组拍摄听写图像,识别听写图像上的听写内容,并对听写内容进行听写检测。可见,本发明通过检测标准格式听写本自动开启听写检测功能,提高了听写效率;此外,听写检测过程无需人工介入,听写检测的准确率高。

Description

一种开启听写检测的方法及电子设备
技术领域
本发明涉及教育技术领域,具体涉及一种开启听写检测的方法及电子设备。
背景技术
如今,已有部分电子设备具备听写功能,可向用户播报听写内容以供用户完成听写作业。但是,现有的电子设备只能向用户播报听写内容,而无法对听写作业进行检测,用户在听写完成后需要将听写作业交由老师或者家长进行人工检测,使得听写效率低下,且人工检测的准确率难以保证。
发明内容
针对上述缺陷,本发明实施例公开了一种开启听写检测的方法及电子设备,可提高听写效率和听写检测的准确率。
本发明实施例第一方面公开了一种开启听写检测的方法,包括:
控制拍摄模组监测目标区域;
如果监测到所述目标区域中存在标准格式听写本,控制所述拍摄模组拍摄听写图像;所述标准格式听写本是指带有预设线条组合的听写本;
识别所述听写图像上的听写内容,并对所述听写内容进行听写检测。
作为一种可选的实施方式,在本发明实施例的第一方面中,在所述监测到所述目标区域中存在标准格式听写本之后,所述方法还包括:
检测所述标准格式听写本的顶端边缘相对所述目标区域的顶端边缘的摆放角度;
若所述摆放角度大于预设摆放角度,在电子设备的屏幕中输出所述拍摄模组拍摄到的所述目标区域的图像;
输出提示信息,以提示用户调整所述标准格式听写本在所述目标区域的位置,以使所述摆放角度小于所述预设摆放角度;其中,当所述摆放角度小于所述预设摆放角度时,所述拍摄模组拍摄得到完整的所述标准格式听写本。
作为一种可选的实施方式,在本发明实施例的第一方面中,所述识别所述听写图像上的听写内容,并对所述听写内容进行听写检测,包括:
滤除所述听写图像上的所述预设线条组合以获得目标听写图像;
识别所述目标听写图像上的听写内容;
将所述听写内容与所述听写内容对应的正确内容进行比较,以获得错误内容;并输出所述错误内容及所述错误内容对应的正确内容。
作为一种可选的实施方式,在本发明实施例的第一方面中,若所述听写内容包括汉字与汉语拼音,所述识别所述目标听写图像上的听写内容,包括:
在所述目标听写图像中切分出单元字符,所述单元字符为独立的汉字或者汉语拼音;
将字符之间的相对距离小于预设距离阈值的所述单元字符组合成听写组合,以使每个所述听写组合中包含一个独立的汉字以及与所述独立的汉字对应的汉语拼音;
以及,所述分析出所述听写内容中与正确内容不一致的错误内容,并输出所述错误内容及所述错误内容对应的正确内容,包括:
检测所述听写组合中包括的汉字是否匹配于所述正确内容;
若是,检测所述听写组合中包括的汉字与所述听写组合中的汉语拼音是否匹配;
若否,输出所述听写组合包括的汉字与汉语拼音,并输出所述听写组合对应的所述正确内容及所述正确内容对应的汉语拼音。
作为一种可选的实施方式,在本发明实施例的第一方面中,在所述滤除所述听写图像上的所述预设线条组合以获得目标听写图像之前,所述方法还包括:
判断所述标准格式听写本的格式是否为五线谱,如果是,识别所述听写图像上的乐谱内容,将所述乐谱内容与所述乐谱内容对应的正确内容进行比较,以获得所述乐谱内容中存在的错误内容;输出所述乐谱内容以及输出所述乐谱内容对应的音频,并对所述乐谱内容中存在的错误内容进行标注;
如果否,执行所述滤除所述听写图像上的所述预设线条组合以获得目标听写图像的步骤。
本发明实施例第二方面公开一种电子设备,包括:
监测单元,用于控制拍摄模组监测目标区域;
控制单元,用于在所述监测单元监测到所述目标区域中存在标准格式听写本时,控制所述拍摄模组拍摄听写图像;所述标准格式听写本是指带有预设线条组合的听写本;
识别检测单元,用于识别所述听写图像上的听写内容,并对所述听写内容进行听写检测。
作为一种可选的实施方式,在本发明实施例的第二方面中,所述电子设备还包括:
角度检测单元,用于在监测到所述目标区域中存在标准格式听写本之后,检测所述标准格式听写本的顶端边缘相对所述目标区域的顶端边缘的摆放角度;
图像输出单元,用于在所述摆放角度大于预设摆放角度时,在电子设备的屏幕中输出所述拍摄模组拍摄到的所述目标区域的图像;
信息提示单元,用于输出提示信息,以提示用户调整所述标准格式听写本在所述目标区域的位置,以使所述摆放角度小于所述预设摆放角度;其中,当所述摆放角度小于所述预设摆放角度时,所述拍摄模组拍摄得到完整的所述标准格式听写本。
作为一种可选的实施方式,在本发明实施例的第二方面中,所述识别检测单元包括:
线条滤除子单元,用于滤除所述听写图像上的所述预设线条组合以获得目标听写图像;
识别子单元,用于识别所述目标听写图像上的听写内容;
比较子单元,用于将所述听写内容与所述听写内容对应的正确内容进行比较,以获得错误内容;并输出所述错误内容及所述错误内容对应的正确内容。
作为一种可选的实施方式,在本发明实施例的第二方面中,若所述听写内容包括汉字与汉语拼音,所述识别子单元包括:
切分模块,用于在所述目标听写图像中切分出单元字符,所述单元字符为独立的汉字或者汉语拼音;
组合模块,用于将字符之间的相对距离小于预设距离阈值的所述单元字符组合成听写组合,以使每个所述听写组合中包含一个独立的汉字以及与所述独立的汉字对应的汉语拼音;
以及,所述比较子单元包括:
第一检测模块,用于检测所述听写组合中包括的汉字是否匹配于所述正确内容;
第二检测模块,用于所述第一检测模块检测出所述听写组合中包括的汉字匹配于所述正确内容时,检测所述听写组合中包括的汉字与所述听写组合中的汉语拼音是否匹配;
输出模块,用于在所述第二检测模块检测出所述听写组合中包括的汉字与所述听写组合中的汉语拼音不匹配时,输出所述听写组合包括的汉字与汉语拼音,并输出所述听写组合对应的所述正确内容及所述正确内容对应的汉语拼音。
作为一种可选的实施方式,在本发明实施例的第二方面中,所述识别检测单元还包括:
类型判断子单元,用于在所述线条滤除子单元滤除所述听写图像上的所述预设线条组合以获得目标听写图像之前,判断所述标准格式听写本的格式是否为五线谱;
以及,所述识别子单元,还用于在判断出所述标准格式听写本的格式为五线谱时,识别所述听写图像上的乐谱内容;
此外,所述比较子单元,还用于将所述乐谱内容与所述乐谱内容对应的正确内容进行比较,以获得所述乐谱内容中存在的错误内容;输出所述乐谱内容以及输出所述乐谱内容对应的音频,并对所述乐谱内容中存在的错误内容进行标注。
本发明实施例第三方面公开一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种开启听写检测的方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种开启听写检测的方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,可见,本发明实施例中,通过控制拍摄模组监测目标区域,在监测到目标区域中存在标准格式听写本时控制拍摄模组拍摄听写图像,从而无须人工介入即可自动开启听写检测功能,提高了听写效率;此外,通过识别听写图像上的听写内容,可对听写内容进行听写检测,听写检测的准确率高。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种开启听写检测的方法的流程示意图;
图2为本发明实施例提供的另一种开启听写检测的方法的流程示意图;
图3为本发明实施例提供的一种电子设备的结构示意图;
图4是本发明实施例提供的另一种电子设备的结构示意图;
图5是本发明实施例提供的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种开启听写检测的方法及电子设备,可以提高对题目图像的科目识别准确率,提升用户使用体验。以下从电子设备角度出发,结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种开启听写检测的方法的流程示意图。其中,图1所描述的开启听写检测的方法适用于家教机、智能手机、平板电脑及个人电脑等电子设备。本发明实施例以电子设备为例描述开启听写检测的方法,不应构成对该方法的限定。如图1所示,该开启听写检测的方法可以包括以下步骤。
101、控制拍摄模组监测目标区域。
本发明实施例中,电子设备配置有拍摄模组,由于拍摄模组的拍摄角度与拍摄视角有限,因此将拍摄模组所能拍摄得到清晰图像的区域设为目标区域,电子设备根据拍摄模组所拍摄到的目标区域的图像监测目标区域。
102、如果监测到目标区域中存在标准格式听写本,控制拍摄模组拍摄听写图像。
本发明实施例中,标准格式听写本是指带有预设线条组合的听写本,以引导用户在预设线条组合所指示的位置上书写听写内容,例如用于听写汉字及汉语拼音的听写本,其上的预设线条组合为田字格及四线三格的组合,其中,田字格用于书写汉字,四线三格用于书写汉语拼音。
作为一种可选的实施方式,如果监测到目标区域中存在标准格式听写本,控制拍摄模组拍摄听写图像。具体地,在步骤101中,电子设备间隔固定时长控制拍摄模组拍摄目标区域的图像,并根据预设线条组合的轮廓特征对图像进行检测,在检测到图像上存在匹配于预设线条组合的轮廓特征的图形时,则确定用户完成听写后将该预设线条组合对应的标准格式听写本放置在目标区域中,此时控制拍摄模组拍摄目标区域得到听写图像。可见,可通过监测目标区域中的预设线条组合,实现对目标区域中标准格式听写本进行监测。
作为另一种可选的实施方式,由于用户的书写习惯不同,标准格式听写本上预设线条组合的部分区域可能被字迹所覆盖,从而电子设备无法识别得到标准格式听写本,因此,可在标准格式听写本上预设线条组合之外的区域印刷特定图形,由于用户不会在预设线条组合之外的区域进行书写,可确保特定图形不受字迹影响,从而电子设备可通过识别标准格式听写本上的特定图形实现对目标区域上标准格式听写本的监测,且准确率较高。
可以理解的是,标准格式听写本包括有多种格式,不同标准格式听写本其上的预设线条组合也不同,例如用于听写句子的听写本其上的预设线条组合为方框,用于记录乐谱的听写本其上的预设线条组合为五线谱,本发明实施例以田字格及四线三格的组合为例对预设线条组合进行论述,不会构成对本发明的限定。
103、识别听写图像上的听写内容,并对听写内容进行听写检测。
本发明实施例中,电子设备将对听写图像上用户所书写的听写内容进行识别,对听写内容进行听写检测,并向用户输出听写内容中的错误内容。
作为一种可选的实施方式,滤除听写图像上的预设线条组合以获得目标听写图像,识别目标听写图像上的听写内容,将听写内容与听写内容对应的正确内容进行比较,以获得错误内容,并输出错误内容及错误内容对应的正确内容。具体地,电子设备在根据预设线条组合识别得到标准格式听写本并拍摄得到听写图像之后,需要对听写图像上的听写内容进行识别,为了减少识别过程中的数据处理量,可先将听写图像上存在的预设线条组合进行滤除,得到只存在听写内容的目标听写图像,进而识别目标听写图像得到听写内容;用户在使用电子设备进行听写检测之前,已在电子设备上选择了本次听写内容对应的正确内容并由电子设备播放正确内容进行听写,因此在识别得到听写内容之后,将对听写内容与本次听写所选择的正确内容进行比较,从而获得听写内容中与正确内容不一致的错误内容,并输出错误内容及错误内容对应的正确内容,从而用户针对听写中存在的错误内容进行学习,学习效果较好。
进一步可选地,电子设备将在完成听写检测之后存储用户的听写记录,听写记录至少包括用户每次听写的错误内容及错误内容对应的正确内容,此外,电子设备还可进一步分析错误内容的错误类型,假设用户在听写“日”时将其书写为“曰”,则分析得到该错误内容的错误类型为书写不规范;再假设用户在听写“只”时将其书写为“资”,则分析得到该错误内容的错误类型为读音区分不清,从而根据错误类型及用户对应于不同错误类型的错误内容,向用户推送在听写不同错误类型的听写内容时的注意事项,以帮助用户掌握听写内容,避免再次犯错。
可见,本发明实施例中,通过控制拍摄模组监测目标区域,在监测到目标区域中存在标准格式听写本时控制拍摄模组拍摄听写图像,从而无须人工介入即可自动开启听写检测功能,提高了听写效率;此外,通过识别听写图像上的听写内容,可对听写内容进行听写检测,听写检测的准确率高。
实施例二
请参阅图2,图2为本发明另一实施例提供的开启听写检测的方法的流程示意图。如图2所示,该开启听写检测的方法可以包括以下步骤。
201、控制拍摄模组监测目标区域。
202、如果监测到目标区域中存在标准格式听写本,控制拍摄模组拍摄听写图像。
本发明实施例中,若标准格式听写本在目标区域中摆放不正,可能使得一部分标准格式听写本处于目标区域之外,电子设备将无法获取到完整的听写内容,因此,在拍摄听写图像之前,有必要对标准格式听写本的摆放状况进行检测。
作为一种可选的实施方式,在监测到目标区域中存在标准格式听写本之后,检测标准格式听写本的顶端边缘相对目标区域的顶端边缘的摆放角度;若摆放角度大于预设摆放角度,在电子设备的屏幕中输出拍摄模组拍摄到的目标区域的图像;输出提示信息,以提示用户调整标准格式听写本在目标区域的位置,以使摆放角度小于预设摆放角度;其中,当摆放角度小于预设摆放角度时,拍摄模组拍摄得到完整的标准格式听写本。具体地,在监测得到标准格式听写本之后,即可根据其上的预设线条组合获知标准格式听写本的顶端边缘,此时可检测标准格式听写本的顶端边缘相对目标区域的顶端边缘的摆放角度,若摆放角度大于预设摆放角度,则标准格式听写本将有部分区域无法被拍摄模组拍摄得到,此时在电子设备的屏幕中将拍摄模组拍摄到的目标区域的图像进行输出,以使用户直观地获知拍摄模组所能拍摄到的目标区域,以及标准格式听写本相对目标区域中的摆放位置,电子设备在屏幕上输出提示信息,以提示用户将标准格式听写本更为准确地摆放至目标区域中,从而确保了标准格式听写本上的听写内容可被完整地拍摄到。
203、识别标准格式听写本的格式,根据标准格式听写本的格式识别听写图像上的内容并进行听写检测。
本发明实施例中,由于不同格式的标准格式听写本所书写的内容格式也不相同,因此需要根据标准格式听写本的格式采用不同的方法对其上的内容进行听写检测,例如在听写汉字及汉字对应的汉语拼音时,除了需要检测汉字是否书写正确,还需检测汉字对应的汉语拼音是否拼写正确。
作为一种可选的实施方式,若听写内容包括汉字与汉语拼音,在目标听写图像中切分出单元字符,单元字符为独立的汉字或者汉语拼音;将字符之间的相对距离小于预设距离阈值的单元字符组合成听写组合,以使每个听写组合中包含一个独立的汉字以及与独立的汉字对应的汉语拼音。具体地,在听写汉字及汉字对应的汉语拼音时,标准格式听写本上的预设线条组合为田字格及四线三格的组合,汉字书写在田字格中,汉字对应的汉语拼音则在汉字所处田字格上方的四线三格中进行拼写,在预设线条组合已被滤除的情况下,先将听写图像上存在的独立的汉字以及由多个汉语拼音字母组成的汉语拼音切分成独立的单元字符,再计算每两个单元字符之间的相对距离,将相对距离小于预设距离阈值的两个单元字符组合成听写组合,从而每个汉字及其对应的汉语拼音被组合在同一个听写组合之中,避免了对不对应的汉字与汉语拼音进行听写检测。
进一步可选地,检测听写组合中包括的汉字是否匹配于正确内容;若是,检测听写组合中包括的汉字与听写组合中的汉语拼音是否匹配;若否,输出听写组合包括的汉字与汉语拼音,并输出听写组合对应的正确内容及正确内容对应的汉语拼音。具体地,在将听写图像中每个汉字及其对应的汉语拼音进行组合后,先检测听写组合中包括的汉字是否匹配于正确内容,在汉字匹配时,再检测汉字与对应的汉语拼音是否匹配,从而可分别检测出本次听写中错误的汉字及错误的汉语拼音,并在检测到错误的汉字或汉语拼音时,输出该存在错误的听写组合所对应的正确内容及正确内容对应的汉语拼音,便于用户改看听写错误。
本发明实施例中,除了可对汉字或者汉语拼音进行听写,还可采用播放乐谱对应的音频,由用户在五线谱格式的标准格式听写本上书写乐谱的方式来对乐谱进行听写,而在对乐谱进行听写时,需要根据音符等符号在五线谱上的位置来判断是否听写正确,此时五线谱为听写检测的重要参照物,不需要对五线谱进行滤除。
作为一种可选的实施方式,在滤除听写图像上的预设线条组合以获得目标听写图像之前,判断标准格式听写本的格式是否为五线谱,如果是,识别听写图像上的乐谱内容,将乐谱内容与乐谱内容对应的正确内容进行比较,以获得乐谱内容中存在的错误内容;输出乐谱内容以及输出所述乐谱内容对应的音频,并对乐谱内容中存在的错误内容进行标注;如果否,执行滤除听写图像上的预设线条组合以获得目标听写图像的步骤。具体地,在识别得到标准格式听写本的格式是否为五线谱时,则根据听写图像上音符等符号相对五线谱的位置及先后顺序,生成本次听写的乐谱内容,通过对比对应的正确内容得到乐谱内容中存在的错误内容,并播放根据乐谱内容生成的音频,在播放音频的同时在屏幕上输出输出乐谱内容,对乐谱内容上的错误内容将以不同颜色进行标注,从而用户通过乐谱内容上的标注以及播放的音频,可直观地获知本次听写的错误,听写检测及学习的效果良好。
可见,本发明实施例中,电子设备将引导用户摆正标准格式听写本,以确保拍摄得到完整的听写图像;此外,电子设备还将根据听写内容的类型采取不同的方法进行听写检测,使得听写检测的应用场景更为广泛。
实施例三
请参阅图3,图3为本发明实施例公开的一种电子设备的结构示意图。如图3所示,该电子设备可以包括:
监测单元301,用于控制拍摄模组监测目标区域;
控制单元302,用于在监测单元301监测到目标区域中存在标准格式听写本时,控制拍摄模组拍摄听写图像;标准格式听写本是指带有预设线条组合的听写本;
识别检测单元303,用于识别听写图像上的听写内容,并对听写内容进行听写检测;
其中,识别检测单元303包括:
线条滤除子单元3031,用于滤除听写图像上的预设线条组合以获得目标听写图像;
识别子单元3032,用于识别目标听写图像上的听写内容;
比较子单元3033,用于将听写内容与听写内容对应的正确内容进行比较,以获得错误内容;并输出错误内容及错误内容对应的正确内容。
本发明实施例中,控制单元302在监测单元301监测到目标区域中存在标准格式听写本时控制拍摄模组拍摄听写图像,并由识别检测单元303识别听写图像上的听写内容,进行听写检测。
作为一种可选的实施方式,如果监测单元301监测到目标区域中存在标准格式听写本,控制单元302控制拍摄模组拍摄听写图像。具体地,监测单元301间隔固定时长控制拍摄模组拍摄目标区域的图像,并根据预设线条组合的轮廓特征对图像进行检测,在监测单元301检测到图像上存在匹配于预设线条组合的轮廓特征的图形时,则确定用户完成听写后将该预设线条组合对应的标准格式听写本放置在目标区域中,此时控制单元302控制拍摄模组拍摄目标区域得到听写图像。可见,可通过监测单元301监测目标区域中的预设线条组合,实现对目标区域中标准格式听写本进行监测。
作为另一种可选的实施方式,由于用户的书写习惯不同,标准格式听写本上预设线条组合的部分区域可能被字迹所覆盖,从而监测单元301无法识别得到标准格式听写本,因此,可在标准格式听写本上预设线条组合之外的区域印刷特定图形,由于用户不会在预设线条组合之外的区域进行书写,可确保特定图形不受字迹影响,从而监测单元301可通过识别标准格式听写本上的特定图形实现对目标区域上标准格式听写本的监测,且准确率较高。
作为一种可选的实施方式,线条滤除子单元3031滤除听写图像上的预设线条组合以获得目标听写图像,识别子单元3032识别目标听写图像上的听写内容,比较子单元3033将听写内容与听写内容对应的正确内容进行比较,以获得错误内容,并输出错误内容及错误内容对应的正确内容。具体地,在监测单元301根据预设线条组合识别得到标准格式听写本并由控制单元302拍摄得到听写图像之后,识别检测单元303需要对听写图像上的听写内容进行识别,为了减少识别过程中的数据处理量,线条滤除子单元3031可先将听写图像上存在的预设线条组合进行滤除,得到只存在听写内容的目标听写图像,进而识别子单元3032识别目标听写图像得到听写内容;用户在使用电子设备进行听写检测之前,已在电子设备上选择了本次听写内容对应的正确内容并由电子设备播放正确内容进行听写,因此在识别子单元3032识别得到听写内容之后,比较子单元3033将对听写内容与本次听写所选择的正确内容进行比较,从而获得听写内容中与正确内容不一致的错误内容,并输出错误内容及错误内容对应的正确内容,从而用户针对听写中存在的错误内容进行学习,学习效果较好。
进一步可选地,比较子单元3033将在完成听写检测之后存储用户的听写记录,听写记录至少包括用户每次听写的错误内容及错误内容对应的正确内容,此外,比较子单元3033还可进一步分析错误内容的错误类型,假设用户在听写“日”时将其书写为“曰”,则分析得到该错误内容的错误类型为书写不规范;再假设用户在听写“只”时将其书写为“资”,则分析得到该错误内容的错误类型为读音区分不清,从而根据错误类型及用户对应于不同错误类型的错误内容,向用户推送在听写不同错误类型的听写内容时的注意事项,以帮助用户掌握听写内容,避免再次犯错。
可见,本发明实施例中,通过控制拍摄模组监测目标区域,在监测单元301监测到目标区域中存在标准格式听写本时控制单元302控制拍摄模组拍摄听写图像,从而无须人工介入即可自动开启听写检测功能,提高了听写效率;此外,通过识别检测单元303识别听写图像上的听写内容,可对听写内容进行听写检测,听写检测的准确率高。
实施例四
请参阅图4,图4为本发明另一实施例提供的一种电子设备的结构示意图;图4所示的电子设备是在图3所示的电子设备的基础上进行优化得到的,图4所示的电子设备还可以包括:
角度检测单元304,用于在监测到目标区域中存在标准格式听写本之后,检测标准格式听写本的顶端边缘相对目标区域的顶端边缘的摆放角度;
图像输出单元305,用于在摆放角度大于预设摆放角度时,在电子设备的屏幕中输出拍摄模组拍摄到的目标区域的图像;
信息提示单元306,用于输出提示信息,以提示用户调整标准格式听写本在目标区域的位置,以使摆放角度小于预设摆放角度;其中,当摆放角度小于预设摆放角度时,拍摄模组拍摄得到完整的标准格式听写本;
以及,识别子单元3032包括:
切分模块3021,用于在目标听写图像中切分出单元字符,单元字符为独立的汉字或者汉语拼音;
组合模块30322,用于将字符之间的相对距离小于预设距离阈值的单元字符组合成听写组合,以使每个听写组合中包含一个独立的汉字以及与独立的汉字对应的汉语拼音;
以及,比较子单元3033包括:
第一检测模块30331,用于检测听写组合中包括的汉字是否匹配于正确内容;
第二检测模块30332,用于第一检测模块30331检测出听写组合中包括的汉字匹配于所述正确内容时,检测听写组合中包括的汉字与听写组合中的汉语拼音是否匹配;
输出模块30333,用于在第二检测模块30332检测出听写组合中包括的汉字与听写组合中的汉语拼音不匹配时,输出听写组合包括的汉字与汉语拼音,并输出听写组合对应的正确内容及正确内容对应的汉语拼音;
此外,识别检测单元303还包括:
类型判断子单元3034,用于在线条滤除子单元3031滤除听写图像上的预设线条组合以获得目标听写图像之前,判断标准格式听写本的格式是否为五线谱;
以及,识别子单元3032,还用于在类型判断子单元3034判断出标准格式听写本的格式为五线谱时,识别听写图像上的乐谱内容;
以及,比较子单元3033,还用于将乐谱内容与乐谱内容对应的正确内容进行比较,以获得乐谱内容中存在的错误内容;输出乐谱内容以及输出乐谱内容对应的音频,并对乐谱内容中存在的错误内容进行标注。
本发明实施例中,在角度检测单元304检测出标准格式听写本在目标区域中的摆放角度过大时,图像输出单元305与信息提示单元306将引导用户摆正标准格式听写本;类型判断子单元3034将判断听写内容的类型,并根据类型采取不同的听写检测方法。
作为一种可选的实施方式,在监测单元301监测到目标区域中存在标准格式听写本之后,角度检测单元304检测标准格式听写本的顶端边缘相对目标区域的顶端边缘的摆放角度;若摆放角度大于预设摆放角度,图像输出单元305在电子设备的屏幕中输出拍摄模组拍摄到的目标区域的图像;信息提示单元306输出提示信息,以提示用户调整标准格式听写本在目标区域的位置,以使摆放角度小于预设摆放角度;其中,当摆放角度小于预设摆放角度时,拍摄模组拍摄得到完整的标准格式听写本。具体地,在监测单元301监测得到标准格式听写本之后,即可根据其上的预设线条组合获知标准格式听写本的顶端边缘,此时角度检测单元304可检测标准格式听写本的顶端边缘相对目标区域的顶端边缘的摆放角度,若摆放角度大于预设摆放角度,则标准格式听写本将有部分区域无法被拍摄模组拍摄得到,此时图像输出单元305在电子设备的屏幕中将拍摄模组拍摄到的目标区域的图像进行输出,以使用户直观地获知拍摄模组所能拍摄到的目标区域,以及标准格式听写本相对目标区域中的摆放位置,信息提示单元306在屏幕上输出提示信息,以提示用户将标准格式听写本更为准确地摆放至目标区域中,从而确保了标准格式听写本上的听写内容可被完整地拍摄到。
作为一种可选的实施方式,若听写内容包括汉字与汉语拼音,切分模块30321在目标听写图像中切分出单元字符,单元字符为独立的汉字或者汉语拼音;组合模块30322将字符之间的相对距离小于预设距离阈值的单元字符组合成听写组合,以使每个听写组合中包含一个独立的汉字以及与独立的汉字对应的汉语拼音。具体地,在听写汉字及汉字对应的汉语拼音时,标准格式听写本上的预设线条组合为田字格及四线三格的组合,汉字书写在田字格中,汉字对应的汉语拼音则在汉字所处田字格上方的四线三格中进行拼写,在预设线条组合已被滤除的情况下,切分模块30321先将听写图像上存在的独立的汉字以及由多个汉语拼音字母组成的汉语拼音切分成独立的单元字符,再计算每两个单元字符之间的相对距离,组合模块30322将相对距离小于预设距离阈值的两个单元字符组合成听写组合,从而每个汉字及其对应的汉语拼音被组合在同一个听写组合之中,避免了对不对应的汉字与汉语拼音进行听写检测。
进一步可选地,第一检测模块30331检测听写组合中包括的汉字是否匹配于正确内容;若是,第二检测模块30332检测听写组合中包括的汉字与听写组合中的汉语拼音是否匹配;若否,输出模块30333输出听写组合包括的汉字与汉语拼音,并输出听写组合对应的正确内容及正确内容对应的汉语拼音。具体地,在组合模块30322将听写图像中每个汉字及其对应的汉语拼音进行组合后,第一检测模块30331先检测听写组合中包括的汉字是否匹配于正确内容,在汉字匹配时,第二检测模块30332再检测汉字与对应的汉语拼音是否匹配,从而可分别检测出本次听写中错误的汉字及错误的汉语拼音,并在检测到错误的汉字或汉语拼音时,输出模块30333输出该存在错误的听写组合所对应的正确内容及正确内容对应的汉语拼音,便于用户改看听写错误。
作为一种可选的实施方式,在线条滤除子单元3031滤除听写图像上的预设线条组合以获得目标听写图像之前,类型判断子单元3034判断标准格式听写本的格式是否为五线谱,如果是,识别子单元3032识别听写图像上的乐谱内容,比较子单元3033将乐谱内容与乐谱内容对应的正确内容进行比较,以获得乐谱内容中存在的错误内容;输出乐谱内容以及输出所述乐谱内容对应的音频,并对乐谱内容中存在的错误内容进行标注;如果否,则转向线条滤除子单元3031。具体地,在类型判断子单元3034识别得到标准格式听写本的格式是否为五线谱时,则识别子单元3032根据听写图像上音符等符号相对五线谱的位置及先后顺序,生成本次听写的乐谱内容,比较子单元3033通过对比对应的正确内容得到乐谱内容中存在的错误内容,并播放根据乐谱内容生成的音频,在播放音频的同时在屏幕上输出输出乐谱内容,对乐谱内容上的错误内容将以不同颜色进行标注,从而用户通过乐谱内容上的标注以及播放的音频,可直观地获知本次听写的错误,听写检测及学习的效果良好。
可见,本发明实施例中,信息提示单元306将引导用户摆正标准格式听写本,以确保拍摄得到完整的听写图像;此外,识别检测单元303还将根据听写内容的类型采取不同的方法进行听写检测,使得听写检测的应用场景更为广泛。
实施例五
请参阅图5,图5是本发明另一实施例公开的另一种电子设备的结构示意图。如图5所示,该可电子设备可以包括:
存储有可执行程序代码的存储器401;
与存储器401耦合的处理器402;
其中,处理器402调用存储器401中存储的可执行程序代码,执行图1和图2任意一种开启听写检测的方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1和图2任意一种开启听写检测的方法。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种开启听写检测的方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种开启听写检测的方法,其特征在于,包括:
控制拍摄模组监测目标区域;
如果监测到所述目标区域中存在标准格式听写本,控制所述拍摄模组拍摄听写图像;所述标准格式听写本是指带有预设线条组合的听写本;
识别所述听写图像上的听写内容,并对所述听写内容进行听写检测。
2.根据权利要求1所述的方法,其特征在于,在所述监测到所述目标区域中存在标准格式听写本之后,所述方法还包括:
检测所述标准格式听写本的顶端边缘相对所述目标区域的顶端边缘的摆放角度;
若所述摆放角度大于预设摆放角度,在电子设备的屏幕中输出所述拍摄模组拍摄到的所述目标区域的图像;
输出提示信息,以提示用户调整所述标准格式听写本在所述目标区域的位置,以使所述摆放角度小于所述预设摆放角度;其中,当所述摆放角度小于所述预设摆放角度时,所述拍摄模组拍摄得到完整的所述标准格式听写本。
3.根据权利要求1所述的方法,其特征在于,所述识别所述听写图像上的听写内容,并对所述听写内容进行听写检测,包括:
滤除所述听写图像上的所述预设线条组合以获得目标听写图像;
识别所述目标听写图像上的听写内容;
将所述听写内容与所述听写内容对应的正确内容进行比较,以获得错误内容;并输出所述错误内容及所述错误内容对应的正确内容。
4.根据权利要求3所述的方法,其特征在于,若所述听写内容包括汉字与汉语拼音,所述识别所述目标听写图像上的听写内容,包括:
在所述目标听写图像中切分出单元字符,所述单元字符为独立的汉字或者汉语拼音;
将字符之间的相对距离小于预设距离阈值的所述单元字符组合成听写组合,以使每个所述听写组合中包含一个独立的汉字以及与所述独立的汉字对应的汉语拼音;
以及,所述分析出所述听写内容中与正确内容不一致的错误内容,并输出所述错误内容及所述错误内容对应的正确内容,包括:
检测所述听写组合中包括的汉字是否匹配于所述正确内容;
若是,检测所述听写组合中包括的汉字与所述听写组合中的汉语拼音是否匹配;
若否,输出所述听写组合包括的汉字与汉语拼音,并输出所述听写组合对应的所述正确内容及所述正确内容对应的汉语拼音。
5.根据权利要求3所述的方法,其特征在于,在所述滤除所述听写图像上的所述预设线条组合以获得目标听写图像之前,所述方法还包括:
判断所述标准格式听写本的格式是否为五线谱,如果是,识别所述听写图像上的乐谱内容,将所述乐谱内容与所述乐谱内容对应的正确内容进行比较,以获得所述乐谱内容中存在的错误内容;输出所述乐谱内容以及输出所述乐谱内容对应的音频,并对所述乐谱内容中存在的错误内容进行标注;
如果否,执行所述滤除所述听写图像上的所述预设线条组合以获得目标听写图像的步骤。
6.一种电子设备,其特征在于,包括:
监测单元,用于控制拍摄模组监测目标区域;
控制单元,用于在所述监测单元监测到所述目标区域中存在标准格式听写本时,控制所述拍摄模组拍摄听写图像;所述标准格式听写本是指带有预设线条组合的听写本;
识别检测单元,用于识别所述听写图像上的听写内容,并对所述听写内容进行听写检测。
7.根据权利要求6所述的电子设备,其特征在于,所述电子设备还包括:
角度检测单元,用于在监测到所述目标区域中存在标准格式听写本之后,检测所述标准格式听写本的顶端边缘相对所述目标区域的顶端边缘的摆放角度;
图像输出单元,用于在所述摆放角度大于预设摆放角度时,在电子设备的屏幕中输出所述拍摄模组拍摄到的所述目标区域的图像;
信息提示单元,用于输出提示信息,以提示用户调整所述标准格式听写本在所述目标区域的位置,以使所述摆放角度小于所述预设摆放角度;其中,当所述摆放角度小于所述预设摆放角度时,所述拍摄模组拍摄得到完整的所述标准格式听写本。
8.根据权利要求6所述的电子设备,其特征在于,所述识别检测单元包括:
线条滤除子单元,用于滤除所述听写图像上的所述预设线条组合以获得目标听写图像;
识别子单元,用于识别所述目标听写图像上的听写内容;
比较子单元,用于将所述听写内容与所述听写内容对应的正确内容进行比较,以获得错误内容;并输出所述错误内容及所述错误内容对应的正确内容。
9.根据权利要求8所述的电子设备,其特征在于,若所述听写内容包括汉字与汉语拼音,所述识别子单元包括:
切分模块,用于在所述目标听写图像中切分出单元字符,所述单元字符为独立的汉字或者汉语拼音;
组合模块,用于将字符之间的相对距离小于预设距离阈值的所述单元字符组合成听写组合,以使每个所述听写组合中包含一个独立的汉字以及与所述独立的汉字对应的汉语拼音;
以及,所述比较子单元包括:
第一检测模块,用于检测所述听写组合中包括的汉字是否匹配于所述正确内容;
第二检测模块,用于所述第一检测模块检测出所述听写组合中包括的汉字匹配于所述正确内容时,检测所述听写组合中包括的汉字与所述听写组合中的汉语拼音是否匹配;
输出模块,用于在所述第二检测模块检测出所述听写组合中包括的汉字与所述听写组合中的汉语拼音不匹配时,输出所述听写组合包括的汉字与汉语拼音,并输出所述听写组合对应的所述正确内容及所述正确内容对应的汉语拼音。
10.根据权利要求8所述的电子设备,其特征在于,所述识别检测单元还包括:
类型判断子单元,用于在所述线条滤除子单元滤除所述听写图像上的所述预设线条组合以获得目标听写图像之前,判断所述标准格式听写本的格式是否为五线谱;
以及,所述识别子单元,还用于在判断出所述标准格式听写本的格式为五线谱时,识别所述听写图像上的乐谱内容;
此外,所述比较子单元,还用于将所述乐谱内容与所述乐谱内容对应的正确内容进行比较,以获得所述乐谱内容中存在的错误内容;输出所述乐谱内容以及输出所述乐谱内容对应的音频,并对所述乐谱内容中存在的错误内容进行标注。
CN201910400719.7A 2019-05-15 2019-05-15 一种开启听写检测的方法及电子设备 Pending CN111083434A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910400719.7A CN111083434A (zh) 2019-05-15 2019-05-15 一种开启听写检测的方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910400719.7A CN111083434A (zh) 2019-05-15 2019-05-15 一种开启听写检测的方法及电子设备

Publications (1)

Publication Number Publication Date
CN111083434A true CN111083434A (zh) 2020-04-28

Family

ID=70310290

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910400719.7A Pending CN111083434A (zh) 2019-05-15 2019-05-15 一种开启听写检测的方法及电子设备

Country Status (1)

Country Link
CN (1) CN111083434A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101685482A (zh) * 2009-08-04 2010-03-31 上海心意答电子科技有限公司 一种自动识别处理批阅结果的电子阅卷系统及方法
CN102012975A (zh) * 2010-12-19 2011-04-13 孙玮泽 自动批改作业的装置
CN105869085A (zh) * 2016-03-29 2016-08-17 河北师范大学 一种成绩录入系统及图像处理的方法
CN107219914A (zh) * 2017-05-31 2017-09-29 广东小天才科技有限公司 一种节省电量的方法及装置
CN107393356A (zh) * 2017-04-07 2017-11-24 深圳市友悦机器人科技有限公司 控制方法、控制装置和早教机
CN207993034U (zh) * 2018-04-02 2018-10-19 河南心智耦合科技有限公司 一种基于计算机视觉技术的课堂作业本识别系统
CN108769846A (zh) * 2018-05-15 2018-11-06 广东小天才科技有限公司 一种识别乐谱的方法及麦克风
CN109271945A (zh) * 2018-09-27 2019-01-25 广东小天才科技有限公司 一种在线实现作业批改的方法和系统
CN109635772A (zh) * 2018-12-20 2019-04-16 广东小天才科技有限公司 一种听写内容的批改方法及电子设备
CN109670559A (zh) * 2018-12-07 2019-04-23 北京锐安科技有限公司 手写汉字的识别方法、装置、设备和存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101685482A (zh) * 2009-08-04 2010-03-31 上海心意答电子科技有限公司 一种自动识别处理批阅结果的电子阅卷系统及方法
CN102012975A (zh) * 2010-12-19 2011-04-13 孙玮泽 自动批改作业的装置
CN105869085A (zh) * 2016-03-29 2016-08-17 河北师范大学 一种成绩录入系统及图像处理的方法
CN107393356A (zh) * 2017-04-07 2017-11-24 深圳市友悦机器人科技有限公司 控制方法、控制装置和早教机
CN107219914A (zh) * 2017-05-31 2017-09-29 广东小天才科技有限公司 一种节省电量的方法及装置
CN207993034U (zh) * 2018-04-02 2018-10-19 河南心智耦合科技有限公司 一种基于计算机视觉技术的课堂作业本识别系统
CN108769846A (zh) * 2018-05-15 2018-11-06 广东小天才科技有限公司 一种识别乐谱的方法及麦克风
CN109271945A (zh) * 2018-09-27 2019-01-25 广东小天才科技有限公司 一种在线实现作业批改的方法和系统
CN109670559A (zh) * 2018-12-07 2019-04-23 北京锐安科技有限公司 手写汉字的识别方法、装置、设备和存储介质
CN109635772A (zh) * 2018-12-20 2019-04-16 广东小天才科技有限公司 一种听写内容的批改方法及电子设备

Similar Documents

Publication Publication Date Title
CN110085261B (zh) 一种发音纠正方法、装置、设备以及计算机可读存储介质
CN109446315B (zh) 一种解题辅助方法及解题辅助客户端
CN111081080B (zh) 一种语音检测方法及学习设备
CN109410984B (zh) 一种朗读评分的方法及电子设备
CN111901665B (zh) 教学资源播放方法、设备及存储介质
CN111077996A (zh) 一种基于点读的信息推荐方法及学习设备
CN111081103B (zh) 一种听写答案获取方法、家教设备及存储介质
CN111078179A (zh) 一种听写报读进度的控制方法及电子设备
CN111079736B (zh) 一种听写内容识别方法及电子设备
CN111026786A (zh) 一种听写列表生成方法及家教设备
CN111081093B (zh) 一种听写内容辨别方法及电子设备
CN110046354B (zh) 诵读引导方法、装置、设备及存储介质
CN111083434A (zh) 一种开启听写检测的方法及电子设备
CN111079504A (zh) 一种文字识别方法及电子设备
CN111028590B (zh) 一种听写过程中引导用户书写的方法及学习设备
CN111079486B (zh) 一种开启听写检测的方法及电子设备
CN111081227B (zh) 一种听写内容的识别方法及电子设备
CN111091120B (zh) 一种听写批改方法及电子设备
CN111090989B (zh) 一种基于文字识别的提示方法及电子设备
JP6710893B2 (ja) 電子機器およびプログラム
CN111077990B (zh) 一种待点读内容的确定方法及学习设备
CN109783679B (zh) 一种学习辅助方法及学习设备
CN111026839B (zh) 一种听写字掌握程度的检测方法及电子设备
CN111081083A (zh) 一种听写报读的方法及电子设备
CN111027364A (zh) 一种带印刷体干扰的听写内容识别方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200428