CN111079485A - 一种听写内容的获取方法及学习设备 - Google Patents
一种听写内容的获取方法及学习设备 Download PDFInfo
- Publication number
- CN111079485A CN111079485A CN201910410913.3A CN201910410913A CN111079485A CN 111079485 A CN111079485 A CN 111079485A CN 201910410913 A CN201910410913 A CN 201910410913A CN 111079485 A CN111079485 A CN 111079485A
- Authority
- CN
- China
- Prior art keywords
- dictation
- learning
- shooting
- target information
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 238000001514 detection method Methods 0.000 claims description 7
- 239000007787 solid Substances 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 8
- 230000004044 response Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 241000220324 Pyrus Species 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 244000144730 Amygdalus persica Species 0.000 description 1
- 241000282465 Canis Species 0.000 description 1
- 244000141359 Malus pumila Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 235000006040 Prunus persica var persica Nutrition 0.000 description 1
- 235000014443 Pyrus communis Nutrition 0.000 description 1
- 235000021016 apples Nutrition 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 235000021017 pears Nutrition 0.000 description 1
- 230000009182 swimming Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/413—Classification of content, e.g. text, photographs or tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/418—Document matching, e.g. of document images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Abstract
一种听写内容的获取方法及学习设备,该方法包括:识别摄像模组拍摄到的物体,以获得所述物体的目标信息;所述目标信息至少包括所述物体的名称;将所述目标信息作为听写内容保存至听写列表中;在检测到进入听写模式时,对所述听写列表中的听写内容进行报读。实施本发明实施例,能够自动将用户拍摄到的图像中包含的物体的目标信息加入至听写列表中,无需用户手动输入,从而可以简化添加听写内容的操作步骤。
Description
技术领域
本发明涉及教育技术领域,具体涉及一种听写内容的获取方法及学习设备。
背景技术
听写是语言学习中常用的练习手段。听写时,一般由家长或者老师报读需要听写的内容,学生根据听到的读音写下对应的字词。目前,部分学习应用开发出听写功能,能够代替家长或老师进行听写内容的报读。然而,在实践中发现,这些学习应用只能报读应用内置的听写内容,如果需要增加新的听写内容,则需要用户手动输入需要添加的字词。可见,如果通过这种方式添加听写内容,操作十分麻烦。
发明内容
本发明实施例公开了一种听写内容的获取方法及学习设备,能够简化添加听写内容的操作步骤。
本发明实施例第一方面公开一种听写内容的获取方法,所述方法包括:
识别摄像模组拍摄到的物体,以获得所述物体的目标信息;所述目标信息至少包括所述物体的名称;
将所述目标信息作为听写内容保存至听写列表中;
在检测到进入听写模式时,对所述听写列表中的听写内容进行报读。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述识别摄像模组拍摄到的物体,以获得所述物体的目标信息之后,所述方法还包括:
按照预设的语言报读所述目标信息;
以及,所述识别摄像模组拍摄到的物体,以获得所述物体的目标信息,包括:
获取需要识别的物体类型;
识别摄像模组拍摄到的物体中属于所述物体类型的目标物体;
查询所述目标物体的目标信息。
作为一种可选的实施方式,在本发明实施例第一方面中,所述获取需要识别的物体类型,包括:
检测学习设备的第一即时位置;
根据所述第一即时位置查询所述学习设备所在的第一场景;
根据预设的对应规则,确定在所述第一场景下存在的物体类型;
以所述第一场景下存在的物体类型作为需要识别的物体类型。
作为一种可选的实施方式,在本发明实施例第一方面中,在检测到进入听写模式之后,所述方法还包括:
检测学习设备的第二即时位置;
根据所述第二即时位置查询所述学习设备所在的第二场景;
从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象;
生成并输出针对所述拍摄对象的实体拍摄任务;所述实体拍摄任务用于指示用户拍摄所述拍摄对象;
获取用户针对所述实体拍摄任务拍摄到的图像;
判断所述图像中的物体与所述拍摄对象对应的物体是否匹配;
如果是,判定用户针对所述听写内容的回答正确。
作为一种可选的实施方式,在本发明实施例第一方面中,所述从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象,包括:
识别所述拍摄模组拍摄到的,用户根据所述听写列表中的听写内容写下的书写答案;
针对所述听写列表中的任一听写内容,判断对应的所述书写答案是否与所述听写内容相匹配;
如果是,判断所述听写内容对应的物体类型是否在所述第二场景下存在;
如果存在,将所述听写内容确定为拍摄对象。
本发明实施例第二方面公开一种学习设备,包括:
识别单元,用于识别摄像模组拍摄到的物体,以获得所述物体的目标信息;所述目标信息至少包括所述物体的名称;
存储单元,将所述目标信息作为听写内容保存至听写列表中;
报读单元,用于在检测到进入听写模式时,对所述听写列表中的听写内容进行报读。
作为一种可选的实施方式,在本发明实施例第二方面中:所述报读单元,还用于在所述识别单元识别摄像模组拍摄到的物体,以获得所述物体的目标信息之后,按照预设的语言报读所述目标信息;
以及,所述识别单元,包括:
获取子单元,用于获取需要识别的物体类型;
第一识别子单元,用于识别摄像模组拍摄到的物体中属于所述物体类型的目标物体;
查询子单元,用于查询所述目标物体的目标信息。
作为一种可选的实施方式,在本发明实施例第二方面中,所述获取子单元,包括:
检测模块,用于检测学习设备的第一即时位置;以及根据所述第一即时位置查询所述学习设备所在的第一场景;
确定模块,用于根据预设的对应规则,确定在所述第一场景下存在的物体类型;以及,以所述第一场景下存在的物体类型作为需要识别的物体类型。
作为一种可选的实施方式,在本发明实施例第二方面中,所述学习设备还包括:
检测单元,用于在检测到进入听写模式时,检测学习设备的第二即时位置;以及,根据所述第二即时位置查询所述学习设备所在的第二场景;
查找单元,用于从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象;
输出单元,用于生成并输出针对所述拍摄对象的实体拍摄任务;所述实体拍摄任务用于指示用户拍摄所述拍摄对象;
获取单元,用于获取用户针对所述实体拍摄任务拍摄到的图像;
判断单元,用于判断所述图像中的物体与所述拍摄对象对应的物体是否匹配;如果是,判定用户针对所述听写内容的回答正确。
作为一种可选的实施方式,在本发明实施例第二方面中,所述查找单元,包括:
第二识别子单元,用于识别所述拍摄模组拍摄到的,用户根据所述听写列表中的听写内容写下的书写答案;
判断子单元,用于针对所述听写列表中的任一听写内容,判断对应的所述书写答案是否与所述听写内容相匹配;以及,判断所述听写内容对应的物体类型是否在所述第二场景下存在;
确定子单元,用于在所述判断子单元判断出听写列表中的任一听写内容对应的所述书写答案与所述听写内容相匹配,并且所述听写内容对应的物体类型在所述第二场景下存在时,将所述听写内容确定为拍摄对象。
本发明实施例第三方面公开一种学习设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的任一项方法。
本发明第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的任一项方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行本发明实施例第一方面公开的任一项方法。
与现有技术相比,本发明实施例具有以下有益效果:
在本发明实施例中,通过识别摄像模组拍摄到的物体,可以获得物体的目标信息;其中,目标信息至少包括物体的名称;将目标信息作为听写内容保存至听写列表中;在检测到进入听写模式时,对所听写列表中的听写内容进行报读。可见,在本发明实施例中,如果用户需要添加新的听写内容,只要拍摄相应的物体图像即可,无需逐字输入字词,从而可以简化添加听写内容的操作步骤。此外,对于无法完整拼写某一字词的用户而言,通过本发明实施例公开的方法添加听写内容,有利于提高学习效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种听写内容的获取方法的流程示意图;
图2是本发明实施例公开的另一种听写内容的获取方法的流程示意图;
图3是本发明实施例公开的又一种听写内容的获取方法的流程示意图;
图4是本发明实施例公开的一种学习设备在进入听写模式时拍摄图像的拍摄过程示例图;
图5是本发明实施例公开的一种学习设备的结构示意图;
图6是本发明实施例公开的另一种学习设备的结构示意图;
图7是本发明实施例公开的又一种学习设备的结构示意图;
图8是本发明实施例公开的再一种学习设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种听写内容的获取方法及学习设备,能够简化添加听写内容的操作步骤。以下分别进行详细说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种听写内容的获取方法的流程示意图。其中,图1所描述的听写内容的获取方法适用于手机、平板电脑、家教机、智能台灯等学习设备,本发明实施例不做限定。其中,上述的学习设备的操作系统可包括但不限于Android操作系统、IOS操作系统、Symbian(塞班)操作系统、Black Berry(黑莓)操作系统、WindowsPhone8操作系统等等,本发明实施例不做限定。如图1所示,该听写内容的获取方法可以包括以下步骤:
101、学习设备识别摄像模组拍摄到的物体,以获得物体的目标信息。
在本发明实施例中,拍摄模组可以设置在学习设备上,学习设备控制拍摄模组拍摄图像,并通过图像识别技术识别图像中的物体。具体地,可以通过特征匹配或者深度学习等物体分类算法对图像中的物体进行检测,本发明实施例不做限定。
对图像中的物体识别成功之后,学习设备可以获取到物体的名称作为物体对应的目标信息。也就是说,目标信息至少可以包括物体的名称。进一步可选的,学习设备在识别出图像中的物体之后,还可以查询该物体的相关说明资料作为目标信息。举例来说,假设拍摄到的物体为小狗;学习设备通过图像识别技术识别出小狗,进一步地还识别出小狗为金毛猎犬,那么图像中的物体对应的目标信息可以为“名称:金毛猎犬;说明:世界犬类智商排名第四名”。
在本发明实施例中,如果拍摄模组拍摄到的图像中存在多个物体,相应地,学习设备也可以通过图像识别技术识别出多个物体,并获取各个物体的目标信息。
102、学习设备将目标信息作为听写内容保存至听写列表中。
103、学习设备在检测到进入听写模式时,对听写列表中的听写内容进行报读。
在本发明实施例中,听写列表可以为存储有听写内容的数据库。学习设备在进入听写模式时,可以调取听写列表中的听写内容进行报读,以帮助用户进行听写练习。其中,学习设备进入听写模式指学习设备按照一定的时间间隔报读内容。
作为一种可选的实施方式,在本发明实施例中,在执行步骤101获取到物体的目标信息之后,还可以执行以下步骤:
按照预设的语言报读物体的目标信息。其中,预设的语音可以为中文、英文、日文等任意一种语言。播报时,可以只使用一种语言播报,也可以使用多种语音播报(如中英双语播报),本发明实施例不做限定。
也就是说,用户可以通过学习设备进行拍摄识物。在识别出图像中的物体之后,学习设备会播报该物体的目标信息,以帮助用户学习与该物体相关的知识。
进一步可选的,学习设备按照预设的语音报读物体的目标信息的实施方式具体可以为:
识别用户身份以确定用户的年龄;
如果用户的年龄低于预设的年龄阈值,获取学习设备的默认使用语言;
按照学习设备的默认使用语言播报该物体的目标信息。
其中,上述的年龄阈值可以参考婴儿学习说话的平均年龄设置。
实施上述的实施方式,当通过拍照识别的功能学习语言的用户为婴儿时,学习设备的实际操纵者一般为婴儿的父母等成年人,学习设备的默认使用语言一般为这些成年人的母语,也是婴儿需要学习的语言。因此,学习设备直接按照默认使用语言播报目标信息,从而可以自动识别婴儿需要学习的语言是何种语言,从而可以帮助家长对婴儿进行语言训练,减轻家长的负担。
更进一步可选的,如果学习设备按照预设的语言报读物体的目标信息时使用的语言数量大于一,那么学习设备执行步骤103的具体实施方式可以为:
获取学习设备报读物体的目标信息时所使用的播报语言;
从上述的播报语言中选取出与学习设备的默认使用语言不同的语言作为听写报读时所使用的听写报读语言;
按照上述的听写报读语言对听写列表中的听写内容进行报读。
举例来说,假设在拍照识物成功时学习设备使用中英双语播报物体的目标信息,并且学习设备的默认使用语言为中文。那么,可以判断学习设备的用户正在学习英文。其中,在拍照识物成功时采用中文(即默认使用语言)报读的目的在于方便用于确认识别结果是否正确。由于用户正在学习英文,所以在听写检测时,只报读英文才能更好地帮助用户熟悉相应的英文单词。可见,实施上述的实施方式,可以智能判断用户正在学习的语言,从而在听写训练时以用户正在学习的语言报读听写内容。
综上所述,在图1所描述的方法中,通过识别用户拍摄的图像,学习设备可以自动将图像中包含的物体的目标信息作为听写内容加入至听写列表中,从而无需用户手动输入,可以简化添加步骤。进一步地,在学习语言地过程中,通过身边的物品入手是拓展词汇量的有效方法。因此,图1所描述地方法可以帮助用户快速学习身边的物品名称,从而可以提高拓展词汇量的效率。
实施例二
请参阅图2,图2是本发明实施例公开的另一种听写内容的获取方法的流程示意图。如图2所示,该听写内容的获取方法可以包括以下步骤:
201、学习设备获取需要识别的物体类型。
在本发明实施例中,物体类型指物体所属的分类。比如说,汽车、单车、公交车等物体所属的分类为交通工具;苹果、梨子、桃等物体所属的分类为水果;小猫、小狗等物体所属的分类为动物或者宠物。
作为一种可选的实施方式,学习设备执行步骤201的方式具体可以为:
学习设备可以获取用户在该学习设备上的语言学习进度,将语言学习进度所指示的用户正在学习的物体类型确定为需要识别的物体类型。
在上述的实施方式中,用户可以通过学习设备上的应用程序进行语言学习,这些应用程序中可能内置有语言学习计划,并且该语言学习计划按照物体类型划分具体的学习内容。
作为另一种可选的实施方式,学习设备执行步骤201的方式具体也可以为:
学习设备检测自身所在的第一即时位置;具体的,学习设备可以通过卫星定位导航系统(Global Positioning System,GPS)检测第一即时位置。
学习设备根据第一即时位置查询学习设备所在的第一场景;具体的,学习设备可以将常见的场景划分为:教室、卧室、操场、路边、医院等。
学习设备根据预设的对应规则,确定在第一场景下存在的物体类型;具体的,在单个场景下,某一类型的物体出现频率较高。比如说,在教室的场景下,笔、尺子等文具的出现频率较高;在路边的场景下,公交车、汽车等交通工具的出现频率较高。因此,可以预先建立出现频率较高的物体类型与具体场景之间的对应关系。
学习设备以第一场景下存在的物体类型作为需要识别的物体类型。也就是说,当确定出学习设备所在的具体场景(即第一场景)之后,只将该场景下出现频率较高的物体类型确定为需要识别的物体类型。
202、学习设备识别摄像模组拍摄到的物体中属于上述的物体类型的目标物体。
在本发明实施例中,如果拍摄模组拍摄到的物体中存在多种类型的物体,那么执行步骤202时,学习设备只识别其中的某一种或者几种特定类型的物体,需要识别的物体类型通过上述的步骤201确定。通过减少需要识别的物体类型的数量,可以减少图像识别时所需的计算量。尤其是在拍摄环境较为杂乱时,可以有效地加快学习设备的物体识别速度,缩短用户感知到的响应时间。
此外,如果需要识别的物体类型根据用户的语言学习进度确定,学习设备可以根据用户的学习计划有针对性地确定需要识别的物体类型,从而可以帮助用户完成学习计划;如果需要识别的物体类型根据学习设备所处的具体场景确定,可以提高拍照识物能够识别到有效物体的概率,可以减少用户拍摄图像后无法识别出任何物体的问题发生。
203、学习设备查询目标物体的目标信息。
执行上述的步骤201~步骤203,可以识别摄像模组拍摄到的物体,以获得物体的目标信息。
204、学习设备按照预设的语言报读目标信息,并且将目标信息作为听写内容保存至听写列表中。
205、学习设备在检测到进入听写模式时,对听写列表中的听写内容进行报读。
可见,在图2所描述的方法中,学习设备可以通过拍照识物的方式,自动将识别出的物体的目标信息添加为听写内容,既可以简化添加听写内容的操作步骤,也可以有效辅助用户拓展词汇量。进一步地,在图2所描述地方法中,学习设备通过减少需要识别的物体类型的数量,可以有效地加快学习设备的物体识别速度,缩短用户感知到的响应时间。更进一步地,学习设备还可以根据用户的学习计划有针对性地确定需要识别的物体类型,从而可以帮助用户完成学习计划;或者,通过学习设备所处的具体场景确定需要识别的物体类型,可以提高拍照识物能够识别到有效物体的概率。
实施例三
请参阅图3,图3是本发明实施例公开的另一种听写内容的获取方法的流程示意图。如图3所示,该听写内容的获取方法可以包括以下步骤:
301、学习设备获取需要识别的物体类型。
302、学习设备识别摄像模组拍摄到的物体中属于上述的物体类型的目标物体,并查询目标物体的目标信息。
303、学习设备按照预设的语言报读目标信息,并且将目标信息作为听写内容保存至听写列表中。
304、学习设备在检测到进入听写模式时,对听写列表中的听写内容进行报读,并检测学习设备的第二即时位置。
305、学习设备根据第二即时位置查询学习设备所在的第二场景。
可以理解的是,上述的第二场景指用户通过学习设备进行听写训练时所在的具体场景。第二即时位置也可以通过学习设备的GPS进行检测。
306、学习设备从听写列表中查找出对应的物体类型在第二场景下存在的听写内容作为拍摄对象。
在本发明实施例中,听写列表中的听写内容可能是通过多次拍摄获取到的。部分听写内容对应的物体被拍摄到时所在的具体场景可能与学习设备当前所处的第二场景不同。因此,先对听写列表中的听写内容进行校验,选取出对应的物体类型可能在第二场景下存在听写内容作为拍摄对象。
举例来说,听写列表中的听写内容可能包括:公交车、尺子、梨子、游泳池。学习设备所在的第二场景为路边,那么选取出听写列表中的“公交车”作为拍摄对象。
307、学习设备生成并输出针对拍摄对象的实体拍摄任务。
在本发明实施例中,实体拍摄任务用于指示用户拍摄上述的拍摄对象。
308、学习设备获取用户针对实体拍摄任务拍摄到的图像。
309、学习设备判断图像中的物体与拍摄对象对应的物体是否匹配;如果是,执行步骤310;如果否,执行步骤311。
310、学习设备判定用户针对听写内容的回答正确。
在本发明实施例中,用户针对某一听写内容进行回答的形式不限于拼写该听写内容,还可以是拍摄该听写内容对应的物体的图像。可以理解的是,学习生词时不但需要熟悉生词的拼写方法,还需要了解该生词的实际含义。将图像作为考核用户是否掌握某一听写内容的形式,可以更好地判断用户是否已经掌握其实际含义。
举例来说,假设听写内容为“bus”,并且学习设备当前所在的第二场景为路边,那么学习设备生成并输出针对公交车的实体拍摄任务。如果用户针对该实体拍摄任务拍摄的图像中包含公交车,那么可以判定用户已经掌握“bus”的实际含义为公交车,用户针对听写内容“bus”的回答正确;否则,可以判定用户未掌握“bus”的实际含义,回答不正确。
此外,将图像作为用户针对听写内容的回答形式可以帮助不要求掌握拼写的语言学习者(如学龄前儿童)进行听写训练,从而可以拓展听写训练的适用人群。
311、学习设备判定用户针对听写内容的回答不正确。
作为一种可选的实施方式,在本发明实施例中,学习设备执行步骤306的具体实施方式可以为:
学习设备识别拍摄模组拍摄到的,用户根据听写列表中的听写内容写下的书写答案;其中,学习设备可以通过光学字符识别(Optical Character Recognition,OCR)技术识别用户的书写答案。
学习设备针对听写列表中的任一听写内容,判断对应的书写答案是否与听写内容相匹配;如果是,判断该听写内容对应的物体类型是否在第二场景下存在;如果存在,将该听写内容确定为拍摄对象。
在实践中发现,英语、韩语等语言在文字书写与发音之间存在一定的规则。如果熟悉上述的规则,在听到某个生词的发音时,即使并不了解该生词的实际含义,也可以正确地拼写出该生词。因此,实施上述的实施方式,针对用户拼写正确的听写内容,可以通过实体拍摄任务进一步验证用户是否掌握该生词的实际含义,从而更准确地判断用户是否已经掌握该生词。
进一步可选的,学习设备识别拍摄模组拍摄到的,用户根据听写列表中的听写内容写下的书写答案的具体实施方式可以为:
学习设备控制拍摄模组拍摄反光装置中的镜像;其中,反光装置装设在学习设备上,并且反光装置的镜面与拍摄模组的镜头面成预设的角度;
学习设备识别上述的镜像中的字符,以得到用户根据听写列表中的听写内容写下的书写答案。
请一并参阅图4,图4是一种学习设备在进入听写模式时拍摄图像的拍摄过程示例图。如图4所示,图中的学习设备10可以设置有拍摄模组20,拍摄模组20用于拍摄以获得图像;在拍摄模组20正前方还可以设置有反光装置30(例如,反光镜、棱镜或凸透镜等),反光装置30用于改变拍摄模组的光路,进而使得拍摄模组20拍摄到载体图40。通过使学习设备10的拍摄模组20拍摄到载体图40在反光装置30中的成像,而不用手动改变学习设备10的放置方式,能够简化拍摄过程,提高拍摄效率。其中,载体图40具体可以为放置在桌面上的练习本、试卷等,本发明实施例不做限定。
可见,在图3所描述的方法中,既可以简化添加听写内容的操作步骤,还可以将图像作为考核用户是否掌握某一听写内容的形式,从而可以更好地判断用户是否已经掌握其实际含义。进一步地,针对用户拼写正确的听写内容生成实体拍摄任务,可以更准确地判断用户是否已经掌握该生词。
实施例四
请参阅图5,图5是本发明实施例公开的一种学习设备的结构示意图。如图5所示,该学习设备可以包括:
识别单元501,用于识别摄像模组拍摄到的物体,以获得物体的目标信息;其中,目标信息至少包括物体的名称;
需要说明的是,如果拍摄模组拍摄到的图像中存在多个物体,识别单元501也可以通过图像识别技术识别出多个物体,并获取各个物体的目标信息。
存储单元502,将目标信息作为听写内容保存至听写列表中;
报读单元503,用于在检测到进入听写模式时,对听写列表中的听写内容进行报读。
作为一种可选的实施方式,在本发明实施例中,报读单元503,还可以用于在识别单元501识别摄像模组拍摄到的物体,以获得物体的目标信息之后,按照预设的语言报读目标信息,从而可以帮助用户学习与该物体相关的知识。
进一步可选的,报读单元503按照预设的语音报读物体的目标信息的实施方式具体可以为:
报读单元503,用于识别用户身份以确定用户的年龄;如果用户的年龄低于预设的年龄阈值,获取学习设备的默认使用语言;以及,按照学习设备的默认使用语言播报该物体的目标信息。
其中,上述的年龄阈值可以参考婴儿学习说话的平均年龄设置。也就是说,报读单元503可以自动识别婴儿需要学习的语言是何种语言,从而可以帮助家长对婴儿进行语言训练,以减轻家长的负担。
更进一步可选的,如果报读单元503按照预设的语言报读物体的目标信息时使用的语言数量大于一,那么报读单元503在检测到进入听写模式时,对听写列表中的听写内容进行报读的方式具体可以为:
报读单元503,用于获取报读物体的目标信息时所使用的播报语言;以及,从上述的播报语言中选取出与学习设备的默认使用语言不同的语言作为听写报读时所使用的听写报读语言;以及,按照上述的听写报读语言对听写列表中的听写内容进行报读。
也就是说,报读单元503可以智能判断用户正在学习的语言,从而在听写训练时以用户正在学习的语言报读听写内容。
可见,实施如图5所示的学习设备,可以自动将用户拍摄到的图像中包含的物体的目标信息作为听写内容加入至听写列表中,从而无需用户手动输入,可以简化添加步骤。进一步地,在学习语言地过程中,通过身边的物品入手是拓展词汇量的有效方法。因此,实施如图5所示的学习设备,可以帮助用户快速学习身边的物品名称,从而可以提高拓展词汇量的效率。
实施例五
请参阅图6,图6是本发明实施例公开的另一种学习设备的结构示意图。其中,图6所示的学习设备是由图5所示的学习设备进行优化得到的。如图6所示,在该学习设备中,上述的识别单元501,可以包括:
获取子单元5011,用于获取需要识别的物体类型;
第一识别子单元5012,用于识别摄像模组拍摄到的物体中属于上述的物体类型的目标物体;
查询子单元5013,用于查询目标物体的目标信息。
也就是说,识别单元501只识别某一种或者几种特定类型的物体,以减少需要识别的物体类型的数量。
进一步可选的,上述的获取子单元5011,可以包括:
检测模块50111,用于检测学习设备的第一即时位置;以及根据第一即时位置查询学习设备所在的第一场景;
确定模块50112,用于根据预设的对应规则,确定在第一场景下存在的物体类型;以及,以第一场景下存在的物体类型作为需要识别的物体类型。
作为另一种可选的实施方式,上述的检测单元50111,也可以用于获取用户在该学习设备上的语言学习进度;相应地,上述的确定模块50112,也可以用于将语言学习进度所指示的用户正在学习的物体类型确定为需要识别的物体类型。
也就是说,在本发明实施例中,获取子单元5011可以根据用户的学习计划有针对性地确定需要识别的物体类型,也可以通过学习设备所处的具体场景确定需要识别的物体类型。
可见,实施如图6所示的学习设备,可以通过拍照识物的方式,自动将识别出的物体的目标信息添加为听写内容,既可以简化添加听写内容的操作步骤,也可以有效辅助用户拓展词汇量。进一步地,学习设备通过减少需要识别的物体类型的数量,可以有效地加快学习设备的物体识别速度,缩短用户感知到的响应时间。更进一步地,学习设备还可以根据用户的学习计划有针对性地确定需要识别的物体类型,从而可以帮助用户完成学习计划;或者,通过学习设备所处的具体场景确定需要识别的物体类型,可以提高拍照识物能够识别到有效物体的概率。
实施例六
请参阅图7,图7是本发明实施例公开的又一种学习设备的结构示意图。其中,图7所示的学习设备是由图6所示的学习设备进行优化得到的。如图6所示,该学习设备还可以包括:
检测单元504,用于在检测到进入听写模式时,检测学习设备的第二即时位置;以及,根据第二即时位置查询学习设备所在的第二场景;
作为一种可选的实施方式,上述的报读单元503开始对听写列表中的听写内容进行报读时,可以同步触发检测单元504执行上述的操作。
查找单元505,用于从听写列表中查找出对应的物体类型在第二场景下存在的听写内容作为拍摄对象;
输出单元506,用于生成并输出针对拍摄对象的实体拍摄任务;其中,实体拍摄任务用于指示用户拍摄上述的拍摄对象;
获取单元507,用于获取用户针对实体拍摄任务拍摄到的图像;
判断单元508,用于判断图像中的物体与拍摄对象对应的物体是否匹配;如果是,判定用户针对听写内容的回答正确。
也就是说,在本发明实施例中,用户针对某一听写内容进行回答的形式不限于拼写该听写内容,还可以是拍摄该听写内容对应的物体的图像。学习设备通过检测用户拍摄到的图像中的物体,可以更好地判断用户是否已经掌握对应的听写内容的实际含义。进一步地,还可以帮助不要求掌握拼写的语言学习者(如学龄前儿童)进行听写训练,从而可以拓展听写训练的适用人群。
作为一种可选的实施方式,上述的查找单元505,可以包括:
第二识别子单元5051,用于识别拍摄模组拍摄到的,用户根据听写列表中的听写内容写下的书写答案;
判断子单元5052,用于针对听写列表中的任一听写内容,判断对应的书写答案是否与该听写内容相匹配;以及,判断该听写内容对应的物体类型是否在第二场景下存在;
确定子单元5053,用于在判断子单元5052判断出听写列表中的任一听写内容对应的书写答案与该听写内容相匹配,并且该听写内容对应的物体类型在第二场景下存在时,将该听写内容确定为拍摄对象。
在实践中发现,英语、韩语等语言在文字书写与发音之间存在一定的规则。如果熟悉上述的规则,在听到某个生词的发音时,即使并不了解该生词的实际含义,也可以正确地拼写出该生词。因此,查找单元505执行上述各个子单元对应的操作,可以针对用户拼写正确的听写内容,通过实体拍摄任务进一步验证用户是否掌握该生词的实际含义,从而更准确地判断用户是否已经掌握该生词。
更进一步可选的,上述的第二识别子单元5051用于识别拍摄模组拍摄到的,用户根据听写列表中的听写内容写下的书写答案的方式具体可以为:
第二识别子单元5051,用于控制拍摄模组拍摄反光装置中的镜像;其中,反光装置装设在学习设备上,并且反光装置的镜面与拍摄模组的镜头面成预设的角度;以及,识别上述的镜像中的字符,以得到用户根据听写列表中的听写内容写下的书写答案。
可见,实施如图7所示的学习设备,既可以简化添加听写内容的操作步骤,还可以将图像作为考核用户是否掌握某一听写内容的形式,从而可以更好地判断用户是否已经掌握其实际含义。进一步地,实施如图7所示的学习设备,还可以针对用户拼写正确的听写内容生成实体拍摄任务,从而可以更准确地判断用户是否已经掌握该生词。
实施例七
请参阅图8,图8是本发明实施例公开的再一种学习设备的结构示意图。如图8所示,该学习设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行图1~图3任一种所示的听写内容的获取方法。
需要说明的是,图8所示的学习设备还可以包括电源、输入按键、摄像头、扬声器、屏幕、RF电路、Wi-Fi模块、蓝牙模块、传感器等未显示的组件,本实施例不作赘述。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图3任一种所示的听写内容的获取方法。
本发明实施例公开一种计算机程序产品,该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,且该计算机程序可操作来使计算机执行图1~图3任一种所示的听写内容的获取方法。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种听写内容的获取方法及学习设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种听写内容的获取方法,其特征在于,包括:
识别摄像模组拍摄到的物体,以获得所述物体的目标信息;所述目标信息至少包括所述物体的名称;
将所述目标信息作为听写内容保存至听写列表中;
在检测到进入听写模式时,对所述听写列表中的听写内容进行报读。
2.根据权利要求1所述的方法,其特征在于,在所述识别摄像模组拍摄到的物体,以获得所述物体的目标信息之后,所述方法还包括:
按照预设的语言报读所述目标信息;
以及,所述识别摄像模组拍摄到的物体,以获得所述物体的目标信息,包括:
获取需要识别的物体类型;
识别摄像模组拍摄到的物体中属于所述物体类型的目标物体;
查询所述目标物体的目标信息。
3.根据权利要求2所述的方法,其特征在于,所述获取需要识别的物体类型,包括:
检测学习设备的第一即时位置;
根据所述第一即时位置查询所述学习设备所在的第一场景;
根据预设的对应规则,确定在所述第一场景下存在的物体类型;
以所述第一场景下存在的物体类型作为需要识别的物体类型。
4.根据权利要求1~3任一项所述的方法,其特征在于,在检测到进入听写模式之后,所述方法还包括:
检测学习设备的第二即时位置;
根据所述第二即时位置查询所述学习设备所在的第二场景;
从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象;
生成并输出针对所述拍摄对象的实体拍摄任务;所述实体拍摄任务用于指示用户拍摄所述拍摄对象;
获取用户针对所述实体拍摄任务拍摄到的图像;
判断所述图像中的物体与所述拍摄对象对应的物体是否匹配;
如果是,判定用户针对所述听写内容的回答正确。
5.根据权利要求4所述的方法,其特征在于,所述从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象,包括:
识别所述拍摄模组拍摄到的,用户根据所述听写列表中的听写内容写下的书写答案;
针对所述听写列表中的任一听写内容,判断对应的所述书写答案是否与所述听写内容相匹配;
如果是,判断所述听写内容对应的物体类型是否在所述第二场景下存在;
如果存在,将所述听写内容确定为拍摄对象。
6.一种学习设备,其特征在于,包括:
识别单元,用于识别摄像模组拍摄到的物体,以获得所述物体的目标信息;所述目标信息至少包括所述物体的名称;
存储单元,将所述目标信息作为听写内容保存至听写列表中;
报读单元,用于在检测到进入听写模式时,对所述听写列表中的听写内容进行报读。
7.根据权利要求6所述的学习设备,其特征在于:
所述报读单元,还用于在所述识别单元识别摄像模组拍摄到的物体,以获得所述物体的目标信息之后,按照预设的语言报读所述目标信息;
以及,所述识别单元,包括:
获取子单元,用于获取需要识别的物体类型;
第一识别子单元,用于识别摄像模组拍摄到的物体中属于所述物体类型的目标物体;
查询子单元,用于查询所述目标物体的目标信息。
8.根据权利要求7所述的学习设备,其特征在于,所述获取子单元,包括:
检测模块,用于检测学习设备的第一即时位置;以及根据所述第一即时位置查询所述学习设备所在的第一场景;
确定模块,用于根据预设的对应规则,确定在所述第一场景下存在的物体类型;以及,以所述第一场景下存在的物体类型作为需要识别的物体类型。
9.根据权利要求6~8任一项所述的学习设备,其特征在于,所述学习设备还包括:
检测单元,用于在检测到进入听写模式时,检测学习设备的第二即时位置;以及,根据所述第二即时位置查询所述学习设备所在的第二场景;
查找单元,用于从所述听写列表中查找出对应的物体类型在所述第二场景下存在的听写内容作为拍摄对象;
输出单元,用于生成并输出针对所述拍摄对象的实体拍摄任务;所述实体拍摄任务用于指示用户拍摄所述拍摄对象;
获取单元,用于获取用户针对所述实体拍摄任务拍摄到的图像;
判断单元,用于判断所述图像中的物体与所述拍摄对象对应的物体是否匹配;如果是,判定用户针对所述听写内容的回答正确。
10.根据权利要求9所述的学习设备,其特征在于,所述查找单元,包括:
第二识别子单元,用于识别所述拍摄模组拍摄到的,用户根据所述听写列表中的听写内容写下的书写答案;
判断子单元,用于针对所述听写列表中的任一听写内容,判断对应的所述书写答案是否与所述听写内容相匹配;以及,判断所述听写内容对应的物体类型是否在所述第二场景下存在;
确定子单元,用于在所述判断子单元判断出听写列表中的任一听写内容对应的所述书写答案与所述听写内容相匹配,并且所述听写内容对应的物体类型在所述第二场景下存在时,将所述听写内容确定为拍摄对象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910410913.3A CN111079485B (zh) | 2019-05-17 | 2019-05-17 | 一种听写内容的获取方法及学习设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910410913.3A CN111079485B (zh) | 2019-05-17 | 2019-05-17 | 一种听写内容的获取方法及学习设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111079485A true CN111079485A (zh) | 2020-04-28 |
CN111079485B CN111079485B (zh) | 2024-03-22 |
Family
ID=70310305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910410913.3A Active CN111079485B (zh) | 2019-05-17 | 2019-05-17 | 一种听写内容的获取方法及学习设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111079485B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030193582A1 (en) * | 2002-03-29 | 2003-10-16 | Fuji Photo Film Co., Ltd. | Method for storing an image, method and system for retrieving a registered image and method for performing image processing on a registered image |
JP2010205121A (ja) * | 2009-03-05 | 2010-09-16 | Sony Ericsson Mobile Communications Ab | 情報処理装置および携帯端末 |
CN101945217A (zh) * | 2009-07-07 | 2011-01-12 | 三星电子株式会社 | 拍摄设备和方法 |
JP2015049372A (ja) * | 2013-09-02 | 2015-03-16 | 有限会社Bruce Interface | 外国語学習支援装置及び外国語学習支援プログラム |
CN105679119A (zh) * | 2016-01-20 | 2016-06-15 | 潘爱松 | 一种扫描听写法 |
CN109033237A (zh) * | 2018-07-04 | 2018-12-18 | 奇酷互联网络科技(深圳)有限公司 | 图片搜索方法、装置、可读存储介质及终端 |
CN109300347A (zh) * | 2018-12-12 | 2019-02-01 | 广东小天才科技有限公司 | 一种基于图像识别的听写辅助方法及家教设备 |
CN109446891A (zh) * | 2018-09-11 | 2019-03-08 | 广东智媒云图科技股份有限公司 | 一种基于图像识别的语言学习方法、电子设备及存储介质 |
-
2019
- 2019-05-17 CN CN201910410913.3A patent/CN111079485B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030193582A1 (en) * | 2002-03-29 | 2003-10-16 | Fuji Photo Film Co., Ltd. | Method for storing an image, method and system for retrieving a registered image and method for performing image processing on a registered image |
JP2010205121A (ja) * | 2009-03-05 | 2010-09-16 | Sony Ericsson Mobile Communications Ab | 情報処理装置および携帯端末 |
CN101945217A (zh) * | 2009-07-07 | 2011-01-12 | 三星电子株式会社 | 拍摄设备和方法 |
JP2015049372A (ja) * | 2013-09-02 | 2015-03-16 | 有限会社Bruce Interface | 外国語学習支援装置及び外国語学習支援プログラム |
CN105679119A (zh) * | 2016-01-20 | 2016-06-15 | 潘爱松 | 一种扫描听写法 |
CN109033237A (zh) * | 2018-07-04 | 2018-12-18 | 奇酷互联网络科技(深圳)有限公司 | 图片搜索方法、装置、可读存储介质及终端 |
CN109446891A (zh) * | 2018-09-11 | 2019-03-08 | 广东智媒云图科技股份有限公司 | 一种基于图像识别的语言学习方法、电子设备及存储介质 |
CN109300347A (zh) * | 2018-12-12 | 2019-02-01 | 广东小天才科技有限公司 | 一种基于图像识别的听写辅助方法及家教设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111079485B (zh) | 2024-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109817046B (zh) | 一种基于家教设备的学习辅助方法及家教设备 | |
CN109960809B (zh) | 一种听写内容的生成方法及电子设备 | |
CN109446315B (zh) | 一种解题辅助方法及解题辅助客户端 | |
CN109766412B (zh) | 一种基于图像识别的学习内容获取方法及电子设备 | |
CN111081103B (zh) | 一种听写答案获取方法、家教设备及存储介质 | |
CN109410984B (zh) | 一种朗读评分的方法及电子设备 | |
CN111026949A (zh) | 一种基于电子设备的搜题方法及系统 | |
CN111711757B (zh) | 防手指遮挡的试题拍摄方法、装置、电子设备和存储介质 | |
CN111081117A (zh) | 一种书写检测方法及电子设备 | |
CN111026786B (zh) | 一种听写列表生成方法及家教设备 | |
CN111079501B (zh) | 一种文字识别方法及电子设备 | |
CN111739534A (zh) | 一种辅助语音识别的处理方法、装置、电子设备及存储介质 | |
CN111078982B (zh) | 一种电子页面的检索方法、电子设备及存储介质 | |
CN111079504A (zh) | 一种文字识别方法及电子设备 | |
CN111079485B (zh) | 一种听写内容的获取方法及学习设备 | |
CN117496984A (zh) | 目标对象的交互方法、装置、设备及可读存储介质 | |
CN109783679B (zh) | 一种学习辅助方法及学习设备 | |
CN111081227B (zh) | 一种听写内容的识别方法及电子设备 | |
CN111027794B (zh) | 一种听写作业的批改方法及学习设备 | |
CN111078080B (zh) | 一种点读控制方法及电子设备 | |
CN111159433B (zh) | 一种内容定位方法及电子设备 | |
CN111091008B (zh) | 一种听写提示内容的确定方法及电子设备 | |
CN109582971B (zh) | 一种基于句法分析的批改方法及批改系统 | |
CN111079414A (zh) | 一种听写检测方法、电子设备及存储介质 | |
CN111079486A (zh) | 一种开启听写检测的方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |