CN109635772B - 一种听写内容的批改方法及电子设备 - Google Patents

一种听写内容的批改方法及电子设备 Download PDF

Info

Publication number
CN109635772B
CN109635772B CN201811567451.8A CN201811567451A CN109635772B CN 109635772 B CN109635772 B CN 109635772B CN 201811567451 A CN201811567451 A CN 201811567451A CN 109635772 B CN109635772 B CN 109635772B
Authority
CN
China
Prior art keywords
motion
stroke
characteristic points
track
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811567451.8A
Other languages
English (en)
Other versions
CN109635772A (zh
Inventor
韦肖莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Genius Technology Co Ltd
Original Assignee
Guangdong Genius Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Genius Technology Co Ltd filed Critical Guangdong Genius Technology Co Ltd
Priority to CN201811567451.8A priority Critical patent/CN109635772B/zh
Publication of CN109635772A publication Critical patent/CN109635772A/zh
Application granted granted Critical
Publication of CN109635772B publication Critical patent/CN109635772B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/333Preprocessing; Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/36Matching; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及电子设备技术领域,公开一种听写内容的批改方法及电子设备,包括:当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,运动轨迹与用户的书写内容对应;识别运动轨迹的运动特征点,并获取听写内容对应的文字轨迹特征点;根据运动特征点与文字轨迹特征点,计算得到书写内容与听写内容的匹配度。实施本发明实施例,能够识别出用户书写的书写内容的运动特征点,并将识别出的运动特征点与听写内容的文字轨迹特征点进行比对,从而确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。

Description

一种听写内容的批改方法及电子设备
技术领域
本发明涉及电子设备技术领域,具体涉及一种听写内容的批改方法及电子设备。
背景技术
学生在学习生字的过程中,通常需要通过听写的方式检验学生是否掌握了生字的写法。目前,对于听写内容的批改方法通常为:学生根据老师或家长读出的字或词语写出对应的听写内容,在听写过程结束之后,学生可以将写出的听写内容与课本或者字典上对应的正确的字或词语进行比对,以得到最终的批改结果。可见,上述听写内容的批改方法需要在听写结束之后人为的进行比对,从而导致批改听写内容的效率较低。
发明内容
本发明实施例公开一种听写内容的批改方法及电子设备,能够提高听写内容的批改效率。
本发明实施例第一方面公开一种听写内容的批改方法,所述方法包括:
当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,所述运动轨迹与所述用户的书写内容对应;
识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点;
根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度。
作为一种可选的实施方式,在本发明实施例第一方面中,所述当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,包括:
当检测到电子设备输出听写内容时,通过所述电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息;
通过图像识别技术从所述运动视频信息中识别所述用户手部的运动轨迹。
作为一种可选的实施方式,在本发明实施例第一方面中,所述识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点,包括:
识别所述运动轨迹的运动特征点,并确定所述听写内容包含的目标文字;
识别所述目标文字包含的笔顺信息,所述笔顺信息包括所述目标文字对应的笔画以及所述笔画的目标顺序;
获取预存储的所述笔画对应的笔画特征点;
将所述笔画特征点以所述目标顺序进行排序,生成所述听写内容对应的文字轨迹特征点。
作为一种可选的实施方式,在本发明实施例第一方面中,所述获取预存储的所述笔画对应的笔画特征点之前,所述方法还包括:
采集手写笔画轨迹以及所述手写笔画轨迹对应的目标笔画;
对所述手写笔画轨迹进行分析,得到所述目标笔画对应的笔画特征点;
将所述目标笔画与所述笔画特征点关联存储。
作为一种可选的实施方式,在本发明实施例第一方面中,所述根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度,包括:
获取所述运动特征点包含的目标运动特征点以及所述目标运动特征点的运动顺序信息;
检测所述运动顺序信息与所述文字轨迹特征点中包含的所述目标顺序的第一相似度;
检测所述目标运动特征点与所述文字轨迹特征点中包含的所述笔画特征点的第二相似度;
计算所述第一相似度和所述第二相似度的平均相似度,并将所述平均相似度确定为所述书写内容与所述听写内容的匹配度。
本发明实施例第二方面公开一种电子设备,包括:
识别单元,用于当检测到所述电子设备输出听写内容时,识别用户手部的运动轨迹,所述运动轨迹与所述用户的书写内容对应;
获取单元,用于识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点;
计算单元,用于根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度。
作为一种可选的实施方式,在本发明实施例第二方面中,所述识别单元包括:
拍摄子单元,用于当检测到所述电子设备输出听写内容时,通过所述电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息;
第一识别子单元,用于通过图像识别技术从所述运动视频信息中识别所述用户手部的运动轨迹。
作为一种可选的实施方式,在本发明实施例第二方面中,所述获取单元包括:
确定子单元,用于识别所述运动轨迹的运动特征点,并确定所述听写内容包含的目标文字;
第二识别子单元,用于识别所述目标文字包含的笔顺信息,所述笔顺信息包括所述目标文字对应的笔画以及所述笔画的目标顺序;
第一获取子单元,用于获取预存储的所述笔画对应的笔画特征点;
生成子单元,用于将所述笔画特征点以所述目标顺序进行排序,生成所述听写内容对应的文字轨迹特征点。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
采集单元,用于在所述第一获取子单元获取预存储的所述笔画对应的笔画特征点之前,采集手写笔画轨迹以及所述手写笔画轨迹对应的目标笔画;
分析单元,用于对所述手写笔画轨迹进行分析,得到所述目标笔画对应的笔画特征点;
存储单元,用于将所述目标笔画与所述笔画特征点关联存储。
作为一种可选的实施方式,在本发明实施例第二方面中,所述计算单元包括:
第二获取子单元,用于获取所述运动特征点包含的目标运动特征点以及所述目标运动特征点的运动顺序信息;
第一检测子单元,用于检测所述运动顺序信息与所述文字轨迹特征点中包含的所述目标顺序的第一相似度;
第二检测子单元,用于检测所述目标运动特征点与所述文字轨迹特征点中包含的所述笔画特征点的第二相似度;
计算子单元,用于计算所述第一相似度和所述第二相似度的平均相似度,并将所述平均相似度确定为所述书写内容与所述听写内容的匹配度。
本发明实施例第三方面公开另一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第四方面公开一种计算机可读存储介质,所述计算机可读存储介质存储了程序代码,其中,所述程序代码包括用于执行第一方面的任意一种方法的部分或全部步骤的指令。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,运动轨迹与用户的书写内容对应;识别运动轨迹的运动特征点,并获取听写内容对应的文字轨迹特征点;根据运动特征点与文字轨迹特征点,计算得到书写内容与听写内容的匹配度。可见,实施本发明实施例,能够识别出用户书写的书写内容的运动特征点,并将识别出的运动特征点与听写内容的文字轨迹特征点进行比对,从而确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种听写内容的批改方法的流程示意图;
图2是本发明实施例公开的另一种听写内容的批改方法的流程示意图;
图3是本发明实施例公开的另一种听写内容的批改方法的流程示意图;
图4是本发明实施例公开的一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图;
图7是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开一种听写内容的批改方法及电子设备,能够确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。以下分别进行详细说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种听写内容的批改方法的流程示意图。如图1所示,该听写内容的批改方法可以包括以下步骤:
101、当检测到电子设备输出听写内容时,电子设备识别用户手部的运动轨迹,该运动轨迹与用户的书写内容对应。
本发明实施例中,电子设备可以为家教机、学习平板、智能手机等,对此,本发明实施例不做限定。
本发明实施例中,电子设备可以通过摄像头采集用户的手部的运动轨迹,还可以通过红外感应设备检测用户手部的运动轨迹,对此,本发明实施例不做限定。运动轨迹可以为用户在书写听写内容时手部的运动轨迹,因此该运动轨迹与用户书写的内容匹配。
本发明实施例中,听写内容可以为电子设备通过扬声器输出的用户需要掌握的字词等内容,电子设备可以通过扬声器播放该字词等内容的读音,以使用户根据读音确定需要书写的内容。
102、电子设备识别运动轨迹的运动特征点,并获取听写内容对应的文字轨迹特征点。
本发明实施例中,运动特征点可以为用户在书写文字的过程中因为笔画的变化而使手部的运动轨迹产生的变化,例如运动特征点可以为用户手部出现转折、停顿、弯曲等运动状态。文字轨迹特征点可以为用户在书写该听写内容时可能因听写内容对应的笔画的书写轨迹中较为特殊的书写轨迹。
103、电子设备根据运动特征点与文字轨迹特征点,计算得到书写内容与听写内容的匹配度。
作为一种可选的实施方式,电子设备执行步骤103之后,还可以执行以下步骤:
电子设备检测该匹配度是否大于预设匹配度;
如果是,电子设备通过扬声器输出正确提示信息,该正确提示信息用于提示用户当前书写的书写内容与听写内容匹配;
如果否,电子设备输出笔画提示信息,并通过电子设备的图像采集设备再次采集包含用户手部的当前运动轨迹,其中,笔画提示信息用于提示听写内容对应的文字的部分笔画信息;
电子设备识别当前运动轨迹的当前运动特征点;
电子设备根据当前运动特征点与文字轨迹特征点计算得到书写内容与听写内容的当前匹配度;
当检测到当前匹配度小于预设匹配度时,电子设备通过显示屏输出显示听写内容对应的标准文字信息,并将该听写内容标记为未掌握听写内容;
当检测到当前匹配度大于等于预设匹配度时,电子设备通过扬声器输出正确提示信息。
其中,实施这种实施方式,可以根据计算得到的匹配度检测用户书写的书写内容是否正确,如果正确,电子设备可以输出正确提示信息,以提示用户听写内容书写正确;如果不正确,电子设备可以向用户输出笔画提示信息,以提示用户正确的书写内容,并再次识别用户书写内容与听写内容的匹配度,如果本次匹配度还是低于预设匹配度,则可以认为用户未掌握该听写内容的书写方式,还需要再次记忆,因此可以在显示器上输出正确的听写内容,以加深用户对于该听写内容的记忆,从而根据匹配度的大小确定电子设备后续操作,以使电子设备的操作更加多样化。
在图1所描述的方法中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,实施图1所描述的方法,可以使电子设备的操作更加多样化。
实施例二
请参阅图2,图2是本发明实施例公开的另一种听写内容的批改方法的流程示意图。如图2所示,该听写内容的批改方法可以包括以下步骤:
201、当检测到电子设备输出听写内容时,电子设备通过电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息。
本发明实施例中,图像采集设备可以为设置在电子设备上的摄像头等设备。图像采集设备可以设置固定的图像采集区域,用户在书写过程中需要在图像采集区域内书写听写内容,以保证电子设备可以完整的采集到用户手部的运动状态。
本发明实施例中,电子设备可以拍摄包含用户手部的运动视频信息,
作为一种可选的实施方式,电子设备通过电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息的方式可以包含以下步骤:
电子设备通过电子设备上设置的图像采集设备识别图像采集设备的采集区域中是否存在用户的手部图像;
如果存在,电子设备开启拍摄模式,以拍摄包含用户手部的运动视屏信息。
其中,实施这种实施方式,可以在检测到用户的手部图像出现在图像采集设备的采集区域中时开启拍摄模式,以避免电子设备拍摄不包含用户手部的视频信息,从而缩短了拍摄到的视频的长度,提高了电子设备后续识别视频中手部的运动轨迹的效率。
202、电子设备通过图像识别技术从运动视频信息中识别用户手部的运动轨迹,该运动轨迹与用户的书写内容对应。
本发明实施例中,实施上述的步骤201~步骤202,可以通过拍摄包含用户手部的视频,从该视频中识别用户手部的运动轨迹,以使电子设备识别到的手部的运动轨迹更加准确。
203、电子设备识别运动轨迹的运动特征点,并确定听写内容包含的目标文字。
本发明实施例中,听写内容包含的目标文字的数量可以为一个或多个;如果目标文字为多个时,电子设备可以分别对每个文字进行批改,也可以同时对多个文字进行批改。
204、电子设备识别目标文字包含的笔顺信息,该笔顺信息包括目标文字对应的笔画以及笔画的目标顺序。
本发明实例中,由于每个文字都存在固定的书写笔顺,因此,电子设备可以根据预先存储的文字信息确定每个目标文字的笔顺信息,从而确定目标文字从开始书写至结束的过程中各个笔画之间的顺序关系以及位置关系等。
205、电子设备获取预存储的笔画对应的笔画特征点。
本发明实施例中,每个笔画都可以确定唯一的笔画特征点,如对于笔画“撇”对应的笔画特征点可以为弯曲,对于笔画“横折”对应的笔画特征点可以为从横线至竖线的转折等。
206、电子设备将笔画特征点以目标顺序进行排序,生成听写内容对应的文字轨迹特征点。
本发明实施例中,实施上述的步骤203~步骤206,可以获取听写内容对应的目标文字,并获取该目标文字对应的笔画以及笔画顺序,还可以获取笔画对应的笔画特征点,进而根据笔画顺序对笔画特征点继续排序,得到目标文字对应的文字轨迹特征点,以使文字轨迹特征点包含的特征点与目标文字更加匹配。
207、电子设备根据运动特征点与文字轨迹特征点,计算得到书写内容与听写内容的匹配度。
在图2所描述的方法中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,实施图2所描述的方法,提高了电子设备后续识别视频中手部的运动轨迹的效率。此外,实施图2所描述的方法,可以使电子设备识别到的手部的运动轨迹更加准确。此外,实施图2所描述的方法,可以使文字轨迹特征点包含的特征点与目标文字更加匹配。
实施例三
请参阅图3,图3是本发明实施例公开的另一种听写内容的批改方法的流程示意图。如图3所示,该听写内容的批改方法可以包括以下步骤:
301、电子设备采集手写笔画轨迹以及手写笔画轨迹对应的目标笔画。
本发明实施例中,电子设备可以采集到用户手写过程中的手写笔画轨迹,由于在书写面部文字的过程中通常各个笔画之间的停顿较短,因此,电子设备通常需要对采集到的手写笔画轨迹进行识别,以将手写笔画轨迹分割成若干个笔画对应的手写笔画轨迹片段,并识别各个手写笔画轨迹片段对应的目标笔画。
302、电子设备对手写笔画轨迹进行分析,得到目标笔画对应的笔画特征点。
303、电子设备将目标笔画与笔画特征点关联存储。
本发明实施例中,实施上述的步骤301~步骤303,可以采集得到手写每种笔画时的手写笔画轨迹,并从手写笔画轨迹中分析得到每种笔画的笔画特征点,以使采集到的每种笔画的笔画特征点更加贴近实际书写的轨迹。
304、当检测到电子设备输出听写内容时,电子设备识别用户手部的运动轨迹,该运动轨迹与用户的书写内容对应。
305、电子设备识别运动轨迹的运动特征点,并确定听写内容包含的目标文字。
306、电子设备识别目标文字包含的笔顺信息,该笔顺信息包括目标文字对应的笔画以及笔画的目标顺序。
307、电子设备获取预存储的笔画对应的笔画特征点。
308、电子设备将笔画特征点以目标顺序进行排序,生成听写内容对应的文字轨迹特征点。
309、电子设备获取运动特征点包含的目标运动特征点以及目标运动特征点的运动顺序信息。
本发明实施例中,电子设备可以识别出运动特征点对应的若干个笔画信息,并确定每个笔画对应的目标运动特征点,电子设备还可以根据笔画信息的顺序对目标运动特征点进行排序,得到目标运动特征点的运动顺序信息。
310、电子设备检测运动顺序信息与文字轨迹特征点中包含的目标顺序的第一相似度。
本发明实施例中,电子设备可以根据运动顺序信息确定运动信息中包含的若干个笔画,并记录每个笔画之前和之后连接的笔画,并根据运动信息中包含的若干个笔画之间的连接关系比对文字轨迹特征点对应的目标顺序,确定运动信息中包含的若干个笔画之间的连接关系与文字轨迹特征点对应的目标顺序的第一相似度。
311、电子设备检测目标运动特征点与文字轨迹特征点中包含的笔画特征点的第二相似度。
本发明实施例中,电子设备可以检测目标运动特征点与其对应的标准笔画特征点的相似性,从而计算各个目标运动特征点的相似性,进而根据所有目标运动特征点的相似性计算得到第二相似度。
312、电子设备计算第一相似度和第二相似度的平均相似度,并将平均相似度确定为书写内容与听写内容的匹配度。
本发明实施例中,实施上述的步骤309~步骤312,可以获取用户书写的内容的运动特征点,并识别出运动特征点的顺序,通过检测得到运动特征点的顺序与目标文字的笔画顺序的相似度以及运动特征点与文字轨迹特征点的相似度,计算得到书写内容与听写内容的匹配度,从而更加准确的确定书写内容与听写内容的匹配度。
作为一种可选的实施方式,电子设备计算第一相似度和第二相似度的平均相似度的方式可以包括以下步骤:
电子设备计算运动顺序信息与目标顺序匹配的目标运动顺序信息的数量占目标顺序的数量的百分比,并将该百分比确定为第一相似度的第一权重值;
电子设备通过预设数值减去该第一权重值得到第二相似度的第二权重值;
电子设备计算第一相似度乘以第一权重值的第一目标相似度,并计算第二相似度乘以第二权重值的第二目标相似度;
电子设备将第一目标相似度与第二目标相似度之和确定为平均相似度。
其中,实施这种实施方式,可以根据第一相似度和第二相似度对应的不同权重值计算得到第一相似度和第二相似度的平均相似度,以使平均相似度在计算过程中参考的数据更加多样化,从而使得平均相似度计算过程更加准确。
在图3所描述的方法中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,实施图3所描述的方法,可以使采集到的每种笔画的笔画特征点更加贴近实际书写的轨迹。此外,实施图3所描述的方法,可以更加准确的确定书写内容与听写内容的匹配度。此外,实施图3所描述的方法,可以使得平均相似度计算过程更加准确。
实施例四
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括:
识别单元401,用于当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,该运动轨迹与用户的书写内容对应。
获取单元402,用于识别识别单元401识别的运动轨迹的运动特征点,并获取听写内容对应的文字轨迹特征点。
计算单元403,用于根据获取单元402获取的运动特征点与文字轨迹特征点,计算得到书写内容与听写内容的匹配度。
作为一种可选的实施方式,计算单元403还可以用于:
检测该匹配度是否大于预设匹配度;
如果是,通过扬声器输出正确提示信息,该正确提示信息用于提示用户当前书写的书写内容与听写内容匹配;
如果否,输出笔画提示信息,并通过电子设备的图像采集设备再次采集包含用户手部的当前运动轨迹,其中,笔画提示信息用于提示听写内容对应的文字的部分笔画信息;
识别当前运动轨迹的当前运动特征点;
根据当前运动特征点与文字轨迹特征点计算得到书写内容与听写内容的当前匹配度;
当检测到当前匹配度小于预设匹配度时,通过显示屏输出显示听写内容对应的标准文字信息,并将该听写内容标记为未掌握听写内容;
当检测到当前匹配度大于等于预设匹配度时,通过扬声器输出正确提示信息。
其中,实施这种实施方式,可以根据计算得到的匹配度检测用户书写的书写内容是否正确,如果正确,电子设备可以输出正确提示信息,以提示用户听写内容书写正确;如果不正确,电子设备可以向用户输出笔画提示信息,以提示用户正确的书写内容,并再次识别用户书写内容与听写内容的匹配度,如果本次匹配度还是低于预设匹配度,则可以认为用户未掌握该听写内容的书写方式,还需要再次记忆,因此可以在显示器上输出正确的听写内容,以加深用户对于该听写内容的记忆,从而根据匹配度的大小确定电子设备后续操作,以使电子设备的操作更加多样化。
可见,在图4所描述的电子设备中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,在图4所描述的电子设备中,可以使电子设备的操作更加多样化。
实施例五
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比,图5所示的电子设备的识别单元401可以包括:
拍摄子单元4011,用于当检测到电子设备输出听写内容时,通过电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息。
作为一种可选的实施方式,拍摄子单元4011通过电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息的方式具体可以为:
通过电子设备上设置的图像采集设备识别图像采集设备的采集区域中是否存在用户的手部图像;
如果存在,开启拍摄模式,以拍摄包含用户手部的运动视屏信息。
其中,实施这种实施方式,可以在检测到用户的手部图像出现在图像采集设备的采集区域中时开启拍摄模式,以避免电子设备拍摄不包含用户手部的视频信息,从而缩短了拍摄到的视频的长度,提高了电子设备后续识别视频中手部的运动轨迹的效率。
第一识别子单元4012,用于通过图像识别技术从拍摄子单元4011拍摄的运动视频信息中识别用户手部的运动轨迹。
本发明实施例中,可以通过拍摄包含用户手部的视频,从该视频中识别用户手部的运动轨迹,以使电子设备识别到的手部的运动轨迹更加准确。
作为一种可选的实施方式,图5所示的电子设备的获取单元402可以包括:
确定子单元4021,用于识别运动轨迹的运动特征点,并确定听写内容包含的目标文字;
第二识别子单元4022,用于识别确定子单元4021确定的目标文字包含的笔顺信息,该笔顺信息包括目标文字对应的笔画以及笔画的目标顺序;
第一获取子单元4023,用于获取预存储的第二识别子单元4022识别的笔画对应的笔画特征点;
生成子单元4024,用于将第一获取子单元4023获取的笔画特征点以目标顺序进行排序,生成听写内容对应的文字轨迹特征点。
其中,实施这种实施方式,可以获取听写内容对应的目标文字,并获取该目标文字对应的笔画以及笔画顺序,还可以获取笔画对应的笔画特征点,进而根据笔画顺序对笔画特征点继续排序,得到目标文字对应的文字轨迹特征点,以使文字轨迹特征点包含的特征点与目标文字更加匹配。
可见,在图5所描述的电子设备中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,在图5所描述的电子设备中,提高了电子设备后续识别视频中手部的运动轨迹的效率。此外,在图5所描述的电子设备中,可以使电子设备识别到的手部的运动轨迹更加准确。此外,在图5所描述的电子设备中,可以使文字轨迹特征点包含的特征点与目标文字更加匹配。
实施例六
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。其中,图6所示的电子设备是由图5所示的电子设备进行优化得到的。与图5所示的电子设备相比,图6所示的电子设备还可以包括:
采集单元404,用于在第一获取子单元4023获取预存储的笔画对应的笔画特征点之前,采集手写笔画轨迹以及手写笔画轨迹对应的目标笔画。
分析单元405,用于对采集单元404采集的手写笔画轨迹进行分析,得到目标笔画对应的笔画特征点。
存储单元406,用于将采集单元404采集的目标笔画与分析单元405得到的笔画特征点关联存储。
本发明实施例中,可以采集得到手写每种笔画时的手写笔画轨迹,并从手写笔画轨迹中分析得到每种笔画的笔画特征点,以使采集到的每种笔画的笔画特征点更加贴近实际书写的轨迹。
作为一种可选的实施方式,图6所示的电子设备的计算单元403可以包括:
第二获取子单元4031,用于获取运动特征点包含的目标运动特征点以及目标运动特征点的运动顺序信息;
第一检测子单元4032,用于检测第二获取子单元4031获取的运动顺序信息与文字轨迹特征点中包含的目标顺序的第一相似度;
第二检测子单元4033,用于检测第二获取子单元4031获取的目标运动特征点与文字轨迹特征点中包含的笔画特征点的第二相似度;
计算子单元4034,用于计算第一检测子单元4032得到的第一相似度和第二检测子单元4033得到的第二相似度的平均相似度,并将平均相似度确定为书写内容与听写内容的匹配度。
其中,实施这种实施方式,可以获取用户书写的内容的运动特征点,并识别出运动特征点的顺序,通过检测得到运动特征点的顺序与目标文字的笔画顺序的相似度以及运动特征点与文字轨迹特征点的相似度,计算得到书写内容与听写内容的匹配度,从而更加准确的确定书写内容与听写内容的匹配度。
作为一种可选的实施方式,计算子单元4034计算第一相似度和第二相似度的平均相似度的方式具体可以为:
计算运动顺序信息与目标顺序匹配的目标运动顺序信息的数量占目标顺序的数量的百分比,并将该百分比确定为第一相似度的第一权重值;
通过预设数值减去该第一权重值得到第二相似度的第二权重值;
计算第一相似度乘以第一权重值的第一目标相似度,并计算第二相似度乘以第二权重值的第二目标相似度;
将第一目标相似度与第二目标相似度之和确定为平均相似度。
其中,实施这种实施方式,可以根据第一相似度和第二相似度对应的不同权重值计算得到第一相似度和第二相似度的平均相似度,以使平均相似度在计算过程中参考的数据更加多样化,从而使得平均相似度计算过程更加准确。
可见,在图6所描述的电子设备中,可以确定书写内容与听写内容的匹配度,以使电子设备可以根据确定的匹配度确定用户书写的内容是否准确,从而提高了听写内容的批改效率。此外,在图6所描述的电子设备中,可以使采集到的每种笔画的笔画特征点更加贴近实际书写的轨迹。此外,在图6所描述的电子设备中,可以更加准确的确定书写内容与听写内容的匹配度。此外,在图6所描述的电子设备中,可以使得平均相似度计算过程更加准确。
实施例七
请参阅图7,图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示,该电子设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种计算机可读存储介质,其中,计算机可读存储介质存储了程序代码,其中,程序代码包括用于执行以上各方法实施例中的方法的部分或全部步骤的指令。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
应理解,说明书通篇中提到的“本发明实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在本发明实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
另外,本文中术语“系统”和“网络”在本文中常可互换使用。应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
在本发明所提供的实施例中,应理解,“与A对应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
以上对本发明实施例公开的一种听写内容的批改方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种听写内容的批改方法,其特征在于,所述方法包括:
当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,所述运动轨迹与所述用户的书写内容对应;
识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点;所述运动特征点为用户手部出现的运动状态;
根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度。
2.根据权利要求1所述的方法,其特征在于,所述当检测到电子设备输出听写内容时,识别用户手部的运动轨迹,包括:
当检测到电子设备输出听写内容时,通过所述电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息;
通过图像识别技术从所述运动视频信息中识别所述用户手部的运动轨迹。
3.根据权利要求1或2所述的方法,其特征在于,所述识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点,包括:
识别所述运动轨迹的运动特征点,并确定所述听写内容包含的目标文字;
识别所述目标文字包含的笔顺信息,所述笔顺信息包括所述目标文字对应的笔画以及所述笔画的目标顺序;
获取预存储的所述笔画对应的笔画特征点;
将所述笔画特征点以所述目标顺序进行排序,生成所述听写内容对应的文字轨迹特征点。
4.根据权利要求3所述的方法,其特征在于,所述获取预存储的所述笔画对应的笔画特征点之前,所述方法还包括:
采集手写笔画轨迹以及所述手写笔画轨迹对应的目标笔画;
对所述手写笔画轨迹进行分析,得到所述目标笔画对应的笔画特征点;
将所述目标笔画与所述笔画特征点关联存储。
5.根据权利要求3所述的方法,其特征在于,所述根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度,包括:
获取所述运动特征点包含的目标运动特征点以及所述目标运动特征点的运动顺序信息;
检测所述运动顺序信息与所述文字轨迹特征点中包含的所述目标顺序的第一相似度;
检测所述目标运动特征点与所述文字轨迹特征点中包含的所述笔画特征点的第二相似度;
计算所述第一相似度和所述第二相似度的平均相似度,并将所述平均相似度确定为所述书写内容与所述听写内容的匹配度。
6.一种电子设备,其特征在于,包括:
识别单元,用于当检测到所述电子设备输出听写内容时,识别用户手部的运动轨迹,所述运动轨迹与所述用户的书写内容对应;
获取单元,用于识别所述运动轨迹的运动特征点,并获取所述听写内容对应的文字轨迹特征点;所述运动特征点为用户手部出现的运动状态;
计算单元,用于根据所述运动特征点与所述文字轨迹特征点,计算得到所述书写内容与所述听写内容的匹配度。
7.根据权利要求6所述的电子设备,其特征在于,所述识别单元包括:
拍摄子单元,用于当检测到所述电子设备输出听写内容时,通过所述电子设备上设置的图像采集设备拍摄包含用户手部的运动视频信息;
第一识别子单元,用于通过图像识别技术从所述运动视频信息中识别所述用户手部的运动轨迹。
8.根据权利要求6或7所述的电子设备,其特征在于,所述获取单元包括:
确定子单元,用于识别所述运动轨迹的运动特征点,并确定所述听写内容包含的目标文字;
第二识别子单元,用于识别所述目标文字包含的笔顺信息,所述笔顺信息包括所述目标文字对应的笔画以及所述笔画的目标顺序;
第一获取子单元,用于获取预存储的所述笔画对应的笔画特征点;
生成子单元,用于将所述笔画特征点以所述目标顺序进行排序,生成所述听写内容对应的文字轨迹特征点。
9.根据权利要求8所述的电子设备,其特征在于,所述电子设备还包括:
采集单元,用于在所述第一获取子单元获取预存储的所述笔画对应的笔画特征点之前,采集手写笔画轨迹以及所述手写笔画轨迹对应的目标笔画;
分析单元,用于对所述手写笔画轨迹进行分析,得到所述目标笔画对应的笔画特征点;
存储单元,用于将所述目标笔画与所述笔画特征点关联存储。
10.根据权利要求8所述的电子设备,其特征在于,所述计算单元包括:
第二获取子单元,用于获取所述运动特征点包含的目标运动特征点以及所述目标运动特征点的运动顺序信息;
第一检测子单元,用于检测所述运动顺序信息与所述文字轨迹特征点中包含的所述目标顺序的第一相似度;
第二检测子单元,用于检测所述目标运动特征点与所述文字轨迹特征点中包含的所述笔画特征点的第二相似度;
计算子单元,用于计算所述第一相似度和所述第二相似度的平均相似度,并将所述平均相似度确定为所述书写内容与所述听写内容的匹配度。
CN201811567451.8A 2018-12-20 2018-12-20 一种听写内容的批改方法及电子设备 Active CN109635772B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811567451.8A CN109635772B (zh) 2018-12-20 2018-12-20 一种听写内容的批改方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811567451.8A CN109635772B (zh) 2018-12-20 2018-12-20 一种听写内容的批改方法及电子设备

Publications (2)

Publication Number Publication Date
CN109635772A CN109635772A (zh) 2019-04-16
CN109635772B true CN109635772B (zh) 2020-12-01

Family

ID=66076160

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811567451.8A Active CN109635772B (zh) 2018-12-20 2018-12-20 一种听写内容的批改方法及电子设备

Country Status (1)

Country Link
CN (1) CN109635772B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111027358B (zh) * 2019-04-19 2023-06-30 广东小天才科技有限公司 一种基于书写进度的听写报读方法及电子设备
CN111026864B (zh) * 2019-04-24 2024-02-20 广东小天才科技有限公司 一种听写内容的确定方法及装置
CN111078098B (zh) * 2019-05-10 2021-11-05 广东小天才科技有限公司 一种听写控制方法及装置
CN111078179B (zh) * 2019-05-10 2024-03-19 广东小天才科技有限公司 一种听写报读进度的控制方法及电子设备
CN111081117A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种书写检测方法及电子设备
CN111079413A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种听写检测方法及电子设备
CN111083434A (zh) * 2019-05-15 2020-04-28 广东小天才科技有限公司 一种开启听写检测的方法及电子设备
CN111081103B (zh) * 2019-05-17 2022-03-01 广东小天才科技有限公司 一种听写答案获取方法、家教设备及存储介质
CN111079484B (zh) * 2019-05-17 2023-11-24 广东小天才科技有限公司 一种书写内容的识别方法及电子设备
CN111079737B (zh) * 2019-07-02 2023-09-26 广东小天才科技有限公司 一种文字倾斜矫正方法及电子设备
CN111079414A (zh) * 2019-07-02 2020-04-28 广东小天才科技有限公司 一种听写检测方法、电子设备及存储介质
CN111079499B (zh) * 2019-07-02 2023-08-25 广东小天才科技有限公司 一种学习环境中的书写内容识别方法及系统
CN111079758B (zh) * 2019-07-11 2023-10-31 广东小天才科技有限公司 一种确定听写过程中书写顺序的方法及终端设备
CN111079500B (zh) * 2019-07-11 2023-10-27 广东小天才科技有限公司 一种听写内容的批改方法及系统
CN111081083A (zh) * 2019-07-11 2020-04-28 广东小天才科技有限公司 一种听写报读的方法及电子设备
CN111753607A (zh) * 2019-07-29 2020-10-09 广东小天才科技有限公司 一种书写轨迹检测方法及电子设备
CN111079769B (zh) * 2019-08-02 2024-03-22 广东小天才科技有限公司 一种书写内容的识别方法及电子设备
CN111079504A (zh) * 2019-08-14 2020-04-28 广东小天才科技有限公司 一种文字识别方法及电子设备
CN111178348B (zh) * 2019-12-09 2024-03-22 广东小天才科技有限公司 一种跟踪目标对象的方法以及音箱设备
CN111369998B (zh) * 2020-02-28 2023-07-21 联想(北京)有限公司 一种数据处理方法及电子设备
CN113011412B (zh) * 2021-04-15 2024-07-16 深圳市鹰硕云科技有限公司 基于笔顺及ocr文字识别方法、装置、设备及存储介质
CN117058688B (zh) * 2023-08-14 2024-04-05 北京东舟技术股份有限公司 一种书写轨迹相似度评估方法及处理设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103632169A (zh) * 2013-12-10 2014-03-12 步步高教育电子有限公司 一种文字书写自动纠错方法和设备
EP2757455A1 (en) * 2013-01-18 2014-07-23 BlackBerry Limited Method and apparatus pertaining to predicted stylus movements
CN105095830A (zh) * 2014-04-28 2015-11-25 佳能株式会社 手写轨迹识别方法、手写轨迹识别设备及手写输入设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9881610B2 (en) * 2014-11-13 2018-01-30 International Business Machines Corporation Speech recognition system adaptation based on non-acoustic attributes and face selection based on mouth motion using pixel intensities
JP6043334B2 (ja) * 2014-12-22 2016-12-14 京セラドキュメントソリューションズ株式会社 表示装置、画像形成装置、及び、表示方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2757455A1 (en) * 2013-01-18 2014-07-23 BlackBerry Limited Method and apparatus pertaining to predicted stylus movements
CN103632169A (zh) * 2013-12-10 2014-03-12 步步高教育电子有限公司 一种文字书写自动纠错方法和设备
CN105095830A (zh) * 2014-04-28 2015-11-25 佳能株式会社 手写轨迹识别方法、手写轨迹识别设备及手写输入设备

Also Published As

Publication number Publication date
CN109635772A (zh) 2019-04-16

Similar Documents

Publication Publication Date Title
CN109635772B (zh) 一种听写内容的批改方法及电子设备
CN109410984B (zh) 一种朗读评分的方法及电子设备
CN111078083A (zh) 一种点读内容的确定方法及电子设备
CN111026949A (zh) 一种基于电子设备的搜题方法及系统
CN111079483A (zh) 一种书写规范判断方法及电子设备
CN109086431B (zh) 一种知识点巩固学习方法及电子设备
CN111027537A (zh) 一种搜题方法及电子设备
CN111079501B (zh) 一种文字识别方法及电子设备
CN111739534B (zh) 一种辅助语音识别的处理方法、装置、电子设备及存储介质
CN111753715B (zh) 点读场景下试题拍摄的方法、装置、电子设备和存储介质
KR101840014B1 (ko) 음악 매칭 댄싱 동작 인식 장치 및 매칭 방법
CN111081103B (zh) 一种听写答案获取方法、家教设备及存储介质
CN111079499B (zh) 一种学习环境中的书写内容识别方法及系统
CN111026924A (zh) 一种待搜索内容的获取方法及电子设备
CN111079486B (zh) 一种开启听写检测的方法及电子设备
CN111079504A (zh) 一种文字识别方法及电子设备
CN111027353A (zh) 一种搜索内容的提取方法及电子设备
CN111722711A (zh) 增强现实场景输出方法及电子设备、计算机可读存储介质
CN111077997A (zh) 一种点读模式下的点读控制方法及电子设备
CN111077993A (zh) 一种学习场景的切换方法、电子设备及存储介质
CN111078921A (zh) 一种科目识别方法及电子设备
CN111090989B (zh) 一种基于文字识别的提示方法及电子设备
CN111079414A (zh) 一种听写检测方法、电子设备及存储介质
CN111077989A (zh) 一种基于电子设备的屏幕控制方法及电子设备
CN111553356A (zh) 字符识别方法及装置、学习设备、计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant