CN111027537B - 一种搜题方法及电子设备 - Google Patents
一种搜题方法及电子设备 Download PDFInfo
- Publication number
- CN111027537B CN111027537B CN201910367761.3A CN201910367761A CN111027537B CN 111027537 B CN111027537 B CN 111027537B CN 201910367761 A CN201910367761 A CN 201910367761A CN 111027537 B CN111027537 B CN 111027537B
- Authority
- CN
- China
- Prior art keywords
- questions
- searched
- question
- module
- indicator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000013507 mapping Methods 0.000 claims description 10
- 238000001228 spectrum Methods 0.000 claims description 8
- 238000007781 pre-processing Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 230000001502 supplementing effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/335—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/36—Creation of semantic tools, e.g. ontology or thesauri
- G06F16/367—Ontology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/24—Character recognition characterised by the processing or recognition method
- G06V30/242—Division of the character sequences into groups prior to recognition; Selection of dictionaries
- G06V30/244—Division of the character sequences into groups prior to recognition; Selection of dictionaries using graphical properties, e.g. alphabet type or font
- G06V30/2455—Discrimination between machine-print, hand-print and cursive writing
Abstract
本发明实施例涉及教育技术领域,公开了一种搜题方法及电子设备,该方法包括:若在取景范围内检测到指示物指向学习页面,连续拍摄多张学习页面图像;识别每一张学习页面图像中的指示物坐标位置;根据多张学习页面图像中的指示物坐标位置,生成指示物的移动轨迹;根据移动轨迹,从学习页面图像中确定框题范围,并获取框题范围对应的框题内容;从框题内容中识别出待搜索题目;搜索并输出待搜索题目的答案内容。实施本发明实施例,能够在图像搜题时确定符合用户搜题意图的框题范围,从而提高搜题的准确性。
Description
技术领域
本发明涉及教育技术领域,具体涉及一种搜题方法及电子设备。
背景技术
如今,市面上很多智能设备都设置有搜题软件,以辅助学生们解决学习过程中的作业难题。学生们在利用智能设备的搜题软件进行搜题时,需要拍摄学习页面图像(比如练习册的某一页),从而使得搜索软件从学习页面图像中识别出待搜索题目,并搜索待搜索题目的参考答案。实践中发现,这种搜题方式只能对整个学习页面图像进行识别,无法在学习页面图像中确定符合用户搜题意图的框题范围,进而降低了搜题的准确性。
发明内容
本发明实施例公开了一种搜题方法及电子设备,能够在图像搜题时确定符合用户搜题意图的框题范围,从而提高搜题的准确性。
本发明实施例第一方面公开一种搜题方法,所述方法包括:
若在取景范围内检测到指示物指向学习页面,连续拍摄多张学习页面图像;
识别每一张所述学习页面图像中的指示物坐标位置;
根据多张所述学习页面图像中的指示物坐标位置,生成所述指示物的移动轨迹;
根据所述移动轨迹,从所述学习页面图像中确定框题范围,并获取所述框题范围对应的框题内容;
从所述框题内容中识别出待搜索题目;
搜索并输出所述待搜索题目的答案内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述若在取景范围内检测到指示物指向学习页面,连续拍摄多张学习页面图像,包括:
若在取景范围内检测到指定物指向学习页面中用于触发框题模式的指定区域,判断所述指示物在所述指定区域停留的时长是否大于或等于预设触发时长;
若是,则连续拍摄多张学习页面图像。
作为一种可选的实施方式,在本发明实施例第一方面中,所述框题内容包括题目文本和关键词,所述获取所述框题范围对应的框题内容,包括:
对所述框题范围进行印刷体识别,以获得所述框题范围对应的题目文本以及所述题目文本的坐标位置信息;
对所述框题范围进行手写笔迹识别,以获得所述框题范围对应的笔迹信息;
对所述笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取所述目标笔迹的坐标位置信息;
根据所述目标笔迹的坐标位置信息以及所述题目文本的坐标位置信息,对所述目标笔迹和所述题目文本建立位置映射关系,以从所述题目文本中提取出所述目标笔迹指示的关键词;
所述从所述框题内容中识别出待搜索题目,包括:
根据所述题目文本,识别出待搜索题目;
所述搜索并输出所述待搜索题目的答案内容,包括:
搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述根据所述题目文本,识别出待搜索题目之后,以及所述搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容之前,所述方法还包括:
获取当前学习任务所指定的答题时间段;
判断当前时刻是否位于所述答题时间段内;
若否,执行所述搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容的步骤;
若是,将所述待搜索题目和所述关键词关联存储至待解决问题集,以在检测到所述当前学习任务所指定的答题时间结束之后,从所述待解决问题集中调出所述待搜索题目和所述关键词,并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
对所述待搜索题目进行知识点分析,获得所述待搜索题目对应的知识点;
获取当前用户的知识图谱;
判断所述待搜索题目对应的知识点是否存在于所述知识图谱中;
若不存在,则将所述待搜索题目对应的知识点添加至所述知识图谱,以对所述知识图谱进行更新,并基于更新后的知识图谱向所述当前用户推送学习内容。
本发明实施例第二方面公开一种电子设备,所述电子设备包括:
拍摄模块,用于在取景范围内检测到指示物指向学习页面时,连续拍摄多张学习页面图像;
位置识别模块,用于识别每一张所述学习页面图像中的指示物坐标位置;
轨迹生成模块,用于根据多张所述学习页面图像中的指示物坐标位置,生成所述指示物的移动轨迹;
范围确定模块,用于根据所述移动轨迹,从所述学习页面图像中确定框题范围;
第一获取模块,用于获取所述框题范围对应的框题内容;
题目识别模块,用于从所述框题内容中识别出待搜索题目;
输出模块,用于搜索并输出所述待搜索题目的答案内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述拍摄模块,包括:
判断子模块,用于在取景范围内检测到指定物指向学习页面中用于触发框题模式的指定区域时,判断所述指示物在所述指定区域停留的时长是否大于或等于预设触发时长;
拍摄子模块,用于在所述判断子模块判定出所述指示物在所述指定区域停留的时长大于或等于所述预设触发时长时,连续拍摄多张学习页面图像。
作为一种可选的实施方式,在本发明实施例第二方面中,所述框题内容包括题目文本和关键词,所述第一获取模块,包括:
第一识别子模块,用于对所述框题范围进行印刷体识别,以获得所述框题范围对应的题目文本以及所述题目文本的坐标位置信息;
第二识别子模块,用于对所述框题范围进行手写笔迹识别,以获得所述框题范围对应的笔迹信息;
位置获取子模块,用于对所述笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取所述目标笔迹的坐标位置信息;
映射子模块,用于根据所述目标笔迹的坐标位置信息以及所述题目文本的坐标位置信息,对所述目标笔迹和所述题目文本建立位置映射关系,以从所述题目文本中提取出所述目标笔迹指示的关键词;
所述题目识别模块,具体用于根据所述题目文本,识别出待搜索题目;
所述输出模块用于搜索并输出所述待搜索题目的答案内容的方式具体为:
所述输出模块,用于搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
第二获取模块,用于在所述题目识别模块根据所述题目文本,识别出待搜索题目之后,以及在所述输出模块搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容之前,获取当前学习任务所指定的答题时间段;
第一判断模块,用于判断当前时刻是否位于所述答题时间段内;
存储模块,用于在所述第一判断模块判定出当前时刻没有位于所述答题时间段内时,将所述待搜索题目和所述关键词关联存储至待解决问题集,以在检测到所述当前学习任务所指定的答题时间结束之后,从所述待解决问题集中调出所述待搜索题目和所述关键词,并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容;
所述输出模块用于搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容的方式具体为:
所述输出模块,用于在所述第一判断模块判定出当前时刻位于所述答题时间段内时,搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
分析模块,用于对所述待搜索题目进行知识点分析,获得所述待搜索题目对应的知识点;
第三获取模块,用于获取当前用户的知识图谱;
第二判断模块,用于判断所述待搜索题目对应的知识点是否存在于所述知识图谱中;
添加模块,用于在所述第二判断模块判定出所述待搜索题目对应的知识点未存在于所述知识图谱时,将所述待搜索题目对应的知识点添加至所述知识图谱,以对所述知识图谱进行更新,并基于更新后的知识图谱向所述当前用户推送学习内容。
本发明实施例第三方面公开一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种搜题方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种搜题方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种搜题方法的流程示意图;
图2是本发明实施例公开的另一种搜题方法的流程示意图;
图3是本发明实施例公开的另一种搜题方法的流程示意图;
图4是本发明实施例公开的一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图;
图7是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种搜题方法及电子设备,能够在图像搜题时确定符合用户搜题意图的框题范围,从而提高搜题的准确性。以下结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种搜题方法的流程示意图。如图1所示,该搜题方法可以包括以下步骤。
101、电子设备在取景范围内检测到指示物指向学习页面时,连续拍摄多张学习页面图像。
本发明实施例公开的搜题方法适用于供用户使用的学习平板、学习手机、学习机、家教机、点读机等电子设备中,具体地,还适用于上述电子设备内的Web应用、APP或者专用软件。
本发明实施例中,电子设备可以在配有显示屏的一面设置有拍摄模组,该拍摄模组用于在其取景范围内检测指示物,以及拍摄学习页面图像,其中,指示物可以为手指、触控笔等,学习页面可以是纸质学习资料的页面(比如课文或者练习册的某一页)。可以理解,在检测到指示物,并触发拍摄图像之后,通过连续拍摄多张学习页面图像,能够在不同的学习页面图像中记录下不同的指示物坐标位置,以基于多个不同的指示物坐标位置获得用户通过移动指示物在学习页面中选择的框题范围。
102、电子设备识别每一张学习页面图像中的指示物坐标位置。
通常来说,指示物坐标位置可以为当前学习页面图像中手指的指尖坐标,或者触控笔的笔尖坐标等。
103、电子设备根据多张学习页面图像中的指示物坐标位置,生成指示物的移动轨迹。
104、电子设备根据指示物的移动轨迹,从学习页面图像中确定框题范围,并获取框题范围对应的框题内容。
105、电子设备从框题内容中识别出待搜索题目。
106、电子设备搜索并输出待搜索题目的答案内容。
可见,实施图1所描述的方法,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性。
实施例二
请参阅图2,图2是本发明实施例公开的另一种搜题方法的流程示意图。在图2所示的搜题方法中,框题内容包括题目文本和关键词。如图2所示,该搜题方法可以包括以下步骤。
201、电子设备在取景范围内检测到指定物指向学习页面中用于触发框题模式的指定区域时,判断指示物在指定区域停留的时长是否大于或等于预设触发时长,若是,执行步骤202。
本发明实施例中,若指示物在指定区域停留的时长小于预设触发时长,则默认检测到误触操作,不启用框题模式。
举例来说,假设将用于触发框题模式的指定区域设定于学习页面的右上角,当电子设备在取景范围内检测到用户的手指指向课本右上角的时间大于或者等于预设触发时长时,则触发框题模式。可选的,在触发框题模式之后,电子设备判断指示物是否指向学习页面中非指定区域的任一位置;以及,电子设备在检测到指示物指向学习页面中非指定区域的任一位置时,执行连续拍摄多张学习页面图像的步骤,这样能够避免在用户未执行框题操作时拍摄多张无效图像,减少了不必要的资源消耗,提高后续的识别效率。
202、电子设备连续拍摄多张学习页面图像。
可见,实施上述步骤201和步骤202,通过预先设定学习页面中用于触发框题模式的指定区域,并且在指示物停留在指定区域的时长大于或者等于预设触发时长时,才触发框题模式,能够辨别用户的误触操作,避免因误触操作降低用户的搜题体验。
203、电子设备识别每一张学习页面图像中的指示物坐标位置。
204、电子设备根据多张学习页面图像中的指示物坐标位置,生成指示物的移动轨迹。
205、电子设备根据移动轨迹,从学习页面图像中确定框题范围。
206、电子设备对框题范围进行印刷体识别,以获得框题范围对应的题目文本以及题目文本的坐标位置信息。
207、电子设备对框题范围进行手写笔迹识别,以获得框题范围对应的笔迹信息。
208、电子设备对笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取目标笔迹的坐标位置信息。
本发明实施例中,可以理解,由于题目文本通常为印刷体,而用户在题目文本处书写的笔迹为手写体,因此步骤206和步骤207可以分别用于从框题范围提取出题目文本和笔迹信息。预设标记格式可以为单横线、双横线、波浪线、圆框、矩形框、圆点、五角星符号等。
209、电子设备根据目标笔迹的坐标位置信息以及题目文本的坐标位置信息,对目标笔迹和题目文本建立位置映射关系,以从题目文本中提取出目标笔迹指示的关键词。
本发明实施例中,举例来说,若题目文本为“利用勾股定理求解直角三角形的斜边长”,且用户在书写时,利用矩形框对“勾股定理”四个字进行了标注,那么,电子设备可以从框题范围内识别出符合矩形框格式的用户书写笔迹,并且,由于矩形框的位置与题目文本中“勾股定理”四字所在位置相对应,因此根据二者的位置映射关系,能够从题目文本中提取出“勾股定理”四个字,以作为用户书写笔迹所指示的关键词。
210、电子设备根据题目文本,识别出待搜索题目。
211、电子设备搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容。
可见,实施上述步骤206~步骤211,通过区分框题范围内的题目文本以及书写笔迹信息,对符合预设标记格式的目标笔迹与题目文本建立位置映射关系,能够获取用户对题目文本手写标记的关键词,既适应了用户在利用纸质学习资料进行答题时的书写习惯,又减少了手动指示关键词的多余步骤,提高了搜题的效率。
可见,实施图2所描述的方法,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性;进一步地,能够辨别用户的误触操作,避免因误触操作降低用户的搜题体验;再进一步地,还能够获取用户对题目文本手写标记的关键词,既适应了用户在利用纸质学习资料进行答题时的书写习惯,又减少了手动指示关键词的多余步骤,提高了搜题的效率。
实施例三
请参阅图3,图3是本发明实施例公开的另一种搜题方法的流程示意图。如图3所示,该搜题方法可以包括以下步骤。
步骤301~步骤310;其中,针对步骤301~步骤310的描述,请参照实施例二中针对步骤201~步骤210的详细描述,本发明实施例不再赘述。
311、电子设备获取当前学习任务所指定的答题时间段。
312、电子设备判断当前时刻是否位于答题时间段内,若否,执行步骤313;若是,执行步骤314。
313、电子设备搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容。
314、电子设备将待搜索题目和关键词关联存储至待解决问题集,以在检测到当前学习任务所指定的答题时间结束之后,从待解决问题集中调出待搜索题目和关键词,并输出待搜索题目的答案内容以及与关键词相关的详解内容。
可以理解,学生们在做题时,一般会有指定的答题时间,比如,半个小时内完成15道选择题,并且,为了保证学生独立自主地完成答题,可以在指定的答题时间结束后,才输出搜题结果。举例来说,假设当前学习任务所指定的答题时间段为周六下午13时~15时,而当前时刻为周六下午13时30分,则电子设备判断出当前时刻不位于答题时间段内,并且将根据用户的搜题操作获取到的待搜索题目和关键词暂时存储在待解决问题集中,以在答题时间段结束后(比如周六下午15时之后)推送相应的答案和详解内容。可见,实施上述步骤311~步骤314,既能够保证用户在答题时间段内正常进行独立答题,又能对用户在答题过程中遇到的疑难问题进行记录,以在答题时间段结束后统一推送搜题结果,有利于进一步改善搜题以及辅助用户学习的效果。
作为一种可选的实施方式,电子设备可以通过与该电子设备建立绑定关系的目标终端获取当前学习任务所指定的答题时间段。其中,电子设备可以作为学生端,目标终端可以为家长端或者教师端。以教师端为例,任课老师可以在教师端向本班级中每个学生对应的学生端发布一个远程学习任务,该远程学习任务用于指定本班级学生在指定的答题时间段内完成指定的答题内容,比如,在周六下午13时~15时这一时间段,完成数学课本第一单元的单元练习题。学生端在接收到该学习任务之后,在指定的答题时间段内检测用户的搜题情况,并在答题时间段结束之后,将搜题情况进行汇总以发送至教师端。因此,教师端能够根据各个学生端发送的搜题情况,为任课教师进行后续的题目讲解提供参考信息。
作为一种可选的实施方式,本方案还可以包括以下步骤:
电子设备对待搜索题目进行知识点分析,获得待搜索题目对应的知识点;
电子设备获取当前用户的知识图谱;
电子设备判断待搜索题目对应的知识点是否存在于知识图谱中;
若不存在,则电子设备将待搜索题目对应的知识点添加至知识图谱,以对知识图谱进行更新,并基于更新后的知识图谱向当前用户推送学习内容。
可见,实施可选的实施方式,基于用户的搜题记录,能够将待搜题题目对应的知识点添加至用户的知识图谱中,通过不断补充与丰富用户的知识图谱,从而推送更加符合用户的学习进度与需求的学习内容。
可见,实施图3所描述的方法,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性;进一步地,既能够保证用户在答题时间段内正常进行独立答题,又能对用户在答题过程中遇到的疑难问题进行记录,以在答题时间段结束后统一推送搜题结果,有利于进一步改善搜题以及辅助用户学习的效果;再进一步地,能够将待搜题题目对应的知识点添加至用户的知识图谱中,通过不断补充与丰富用户的知识图谱,从而推送更加符合用户的学习进度与需求的学习内容。
实施例四
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括:
拍摄模块401,用于在取景范围内检测到指示物指向学习页面时,连续拍摄多张学习页面图像;
位置识别模块402,用于识别每一张学习页面图像中的指示物坐标位置;
轨迹生成模块403,用于根据多张学习页面图像中的指示物坐标位置,生成指示物的移动轨迹;
范围确定模块404,用于根据指示物的移动轨迹,从学习页面图像中确定框题范围;
第一获取模块405,用于获取框题范围对应的框题内容;
题目识别模块406,用于从框题内容中识别出待搜索题目;
输出模块407,用于搜索并输出待搜索题目的答案内容。
可见,实施图4所描述的电子设备,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性。
实施例五
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较,在图5所示的电子设备中:
拍摄模块401,包括:
判断子模块4011,用于在取景范围内检测到指定物指向学习页面中用于触发框题模式的指定区域时,判断指示物在指定区域停留的时长是否大于或等于预设触发时长;
拍摄子模块4012,用于在判断子模块4011判定出指示物在指定区域停留的时长大于或等于预设触发时长时,连续拍摄多张学习页面图像。
可选的,判断子模块4011还可以用于在触发框题模式之后,判断指示物是否指向学习页面中非指定区域的任一位置;相应地,拍摄子模块4012,具体用于在检测到指示物指向学习页面中非指定区域的任一位置时,连续拍摄多张学习页面图像。这样能够避免在用户未执行框题操作时拍摄多张无效图像,减少了不必要的资源消耗,提高后续的识别效率。
以及,本发明实施例中,框题内容包括题目文本和关键词,第一获取模块405,包括:
第一识别子模块4051,用于对框题范围进行印刷体识别,以获得框题范围对应的题目文本以及题目文本的坐标位置信息;
第二识别子模块4052,用于对框题范围进行手写笔迹识别,以获得框题范围对应的笔迹信息;
位置获取子模块4053,用于对笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取目标笔迹的坐标位置信息;
映射子模块4054,用于根据目标笔迹的坐标位置信息以及题目文本的坐标位置信息,对目标笔迹和题目文本建立位置映射关系,以从题目文本中提取出目标笔迹指示的关键词;
题目识别模块406,具体用于根据题目文本,识别出待搜索题目;
输出模块407用于搜索并输出待搜索题目的答案内容的方式具体为:
输出模块407,用于搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容。
可见,实施图5所描述的电子设备,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性;进一步地,能够辨别用户的误触操作,避免因误触操作降低用户的搜题体验;再进一步地,还能够获取用户对题目文本手写标记的关键词,既适应了用户在利用纸质学习资料进行答题时的书写习惯,又减少了手动指示关键词的多余步骤,提高了搜题的效率。
实施例六
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。其中,图6所示的电子设备是由图5所示的电子设备进行优化得到的。与图5所示的电子设备相比较,图6所示的电子设备还可以包括第二获取模块408、第一判断模块409以及存储模块410,其中:
第二获取模块408,用于在题目识别模块406根据题目文本,识别出待搜索题目之后,以及在输出模块407搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容之前,获取当前学习任务所指定的答题时间段;
第一判断模块409,用于判断当前时刻是否位于答题时间段内;
存储模块410,用于在第一判断模块409判定出当前时刻没有位于答题时间段内时,将待搜索题目和关键词关联存储至待解决问题集,以在检测到当前学习任务所指定的答题时间结束之后,从待解决问题集中调出待搜索题目和关键词,并输出待搜索题目的答案内容以及与关键词相关的详解内容;
输出模块407用于搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容的方式具体为:
输出模块407,用于在第一判断模块409判定出当前时刻位于答题时间段内时,搜索并输出待搜索题目的答案内容以及与关键词相关的详解内容。
作为一种可选的实施方式,该电子设备还可以包括:
分析模块411,用于对待搜索题目进行知识点分析,获得待搜索题目对应的知识点;
第三获取模块412,用于获取当前用户的知识图谱;
第二判断模块413,用于判断待搜索题目对应的知识点是否存在于知识图谱中;
添加模块414,用于在第二判断模块413判定出待搜索题目对应的知识点未存在于知识图谱时,将待搜索题目对应的知识点添加至知识图谱,以对知识图谱进行更新,并基于更新后的知识图谱向当前用户推送学习内容。
作为一种可选的实施方式,第二获取模块408,具体可以用于通过与该电子设备建立绑定关系的目标终端获取当前学习任务所指定的答题时间段。其中,电子设备可以作为学生端,目标终端可以为家长端或者教师端。以教师端为例,任课老师可以在教师端向本班级中每个学生对应的学生端发布一个远程学习任务,该远程学习任务用于指定本班级学生在指定的答题时间段内完成指定的答题内容,比如,在周六下午13时~15时这一时间段,完成数学课本第一单元的单元练习题。学生端在接收到该学习任务之后,在指定的答题时间段内检测用户的搜题情况,并在答题时间段结束之后,将搜题情况进行汇总以发送至教师端。因此,教师端能够根据各个学生端发送的搜题情况,为任课教师进行后续的题目讲解提供参考信息。
可见,实施图6所描述的电子设备,若在取景范围内检测到指示物指向学习页面,通过连续拍摄多张学习页面图像,并识别出多张学习页面图像中的指示物坐标位置,能够生成指示物的移动轨迹,从而获取用户在学习页面指定的框选区域,操作简单且灵活性强;此外,根据指示物的移动轨迹,通过从学习页面图像中确定框题范围,并获取框题范围对应的框题内容,能够缩小搜题的范围,进而从框题内容中识别出待搜索题目,提高了搜题的准确性;进一步地,既能够保证用户在答题时间段内正常进行独立答题,又能对用户在答题过程中遇到的疑难问题进行记录,以在答题时间段结束后统一推送搜题结果,有利于进一步改善搜题以及辅助用户学习的效果;再进一步地,能够将待搜题题目对应的知识点添加至用户的知识图谱中,通过不断补充与丰富用户的知识图谱,从而推送更加符合用户的学习进度与需求的学习内容。
实施例七
请参阅图7,图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示,该电子设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行图1~图3所示的任意一种搜题方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图3任意一种搜题方法。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种应用发布平台,该应用发布平台用于发布计算机程序产品,其中,当上述计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种搜题方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (6)
1.一种搜题方法,其特征在于,所述方法包括:
若在取景范围内检测到指示物指向学习页面中用于触发框题模式的指定区域,则判断所述指示物在所述指定区域停留的时长是否大于或等于预设触发时长;
若是,则连续拍摄多张学习页面图像;
识别每一张所述学习页面图像中的指示物坐标位置;
根据多张所述学习页面图像中的指示物坐标位置,生成所述指示物的移动轨迹;
根据所述移动轨迹,从所述学习页面图像中确定框题范围;
对所述框题范围进行印刷体识别,以获得所述框题范围对应的题目文本以及所述题目文本的坐标位置信息;
对所述框题范围进行手写笔迹识别,以获得所述框题范围对应的笔迹信息;
对所述笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取所述目标笔迹的坐标位置信息;
根据所述目标笔迹的坐标位置信息以及所述题目文本的坐标位置信息,对所述目标笔迹和所述题目文本建立位置映射关系,以从所述题目文本中提取出所述目标笔迹指示的关键词;
根据所述题目文本,识别出待搜索题目;
搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
2.根据权利要求1所述的方法,其特征在于,所述根据所述题目文本,识别出待搜索题目之后,以及所述搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容之前,所述方法还包括:
获取当前学习任务所指定的答题时间段;
判断当前时刻是否位于所述答题时间段内;
若否,执行所述搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容的步骤;
若是,将所述待搜索题目和所述关键词关联存储至待解决问题集,以在检测到所述当前学习任务所指定的答题时间结束之后,从所述待解决问题集中调出所述待搜索题目和所述关键词,并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
3.根据权利要求1~2任一项所述的方法,其特征在于,所述方法还包括:
对所述待搜索题目进行知识点分析,获得所述待搜索题目对应的知识点;
获取当前用户的知识图谱;
判断所述待搜索题目对应的知识点是否存在于所述知识图谱中;
若不存在,则将所述待搜索题目对应的知识点添加至所述知识图谱,以对所述知识图谱进行更新,并基于更新后的知识图谱向所述当前用户推送学习内容。
4.一种电子设备,其特征在于,所述电子设备包括:
判断子模块,用于在取景范围内检测到指示物指向学习页面中用于触发框题模式的指定区域时,判断所述指示物在所述指定区域停留的时长是否大于或等于预设触发时长;
拍摄子模块,用于在所述判断子模块判定出所述指示物在所述指定区域停留的时长大于或等于所述预设触发时长时,连续拍摄多张学习页面图像;
位置识别模块,用于识别每一张所述学习页面图像中的指示物坐标位置;
轨迹生成模块,用于根据多张所述学习页面图像中的指示物坐标位置,生成所述指示物的移动轨迹;
范围确定模块,用于根据所述移动轨迹,从所述学习页面图像中确定框题范围;
第一获取模块,用于对所述框题范围进行印刷体识别,以获得所述框题范围对应的题目文本以及所述题目文本的坐标位置信息;以及对所述框题范围进行手写笔迹识别,以获得所述框题范围对应的笔迹信息;以及,对所述笔迹信息进行预处理,以识别出符合预设标记格式的目标笔迹,并获取所述目标笔迹的坐标位置信息;以及,根据所述目标笔迹的坐标位置信息以及所述题目文本的坐标位置信息,对所述目标笔迹和所述题目文本建立位置映射关系,以从所述题目文本中提取出所述目标笔迹指示的关键词;
题目识别模块,用于根据所述题目文本,识别出待搜索题目;
输出模块,用于搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
5.根据权利要求4所述的电子设备,其特征在于,所述电子设备还包括:
第二获取模块,用于在所述题目识别模块根据所述题目文本,识别出待搜索题目之后,以及在所述输出模块搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容之前,获取当前学习任务所指定的答题时间段;
第一判断模块,用于判断当前时刻是否位于所述答题时间段内;
存储模块,用于在所述第一判断模块判定出当前时刻没有位于所述答题时间段内时,将所述待搜索题目和所述关键词关联存储至待解决问题集,以在检测到所述当前学习任务所指定的答题时间结束之后,从所述待解决问题集中调出所述待搜索题目和所述关键词,并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容;
所述输出模块用于搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容的方式具体为:
所述输出模块,用于在所述第一判断模块判定出当前时刻位于所述答题时间段内时,搜索并输出所述待搜索题目的答案内容以及与所述关键词相关的详解内容。
6.根据权利要求4~5任一项所述的电子设备,其特征在于,所述电子设备还包括:
分析模块,用于对所述待搜索题目进行知识点分析,获得所述待搜索题目对应的知识点;
第三获取模块,用于获取当前用户的知识图谱;
第二判断模块,用于判断所述待搜索题目对应的知识点是否存在于所述知识图谱中;
添加模块,用于在所述第二判断模块判定出所述待搜索题目对应的知识点未存在于所述知识图谱时,将所述待搜索题目对应的知识点添加至所述知识图谱,以对所述知识图谱进行更新,并基于更新后的知识图谱向所述当前用户推送学习内容。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910367761.3A CN111027537B (zh) | 2019-05-05 | 2019-05-05 | 一种搜题方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910367761.3A CN111027537B (zh) | 2019-05-05 | 2019-05-05 | 一种搜题方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111027537A CN111027537A (zh) | 2020-04-17 |
CN111027537B true CN111027537B (zh) | 2024-03-22 |
Family
ID=70199556
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910367761.3A Active CN111027537B (zh) | 2019-05-05 | 2019-05-05 | 一种搜题方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111027537B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111553366B (zh) * | 2020-04-30 | 2023-05-16 | 广东小天才科技有限公司 | 一种题目匹配的方法和系统 |
CN111639154B (zh) * | 2020-05-11 | 2023-07-25 | 广东小天才科技有限公司 | 直播搜题方法、装置、终端设备和存储介质 |
CN111552367B (zh) * | 2020-05-25 | 2023-09-26 | 广东小天才科技有限公司 | 一种点击操作的识别方法及电子设备、存储介质 |
CN111695555B (zh) * | 2020-06-12 | 2023-05-23 | 广东小天才科技有限公司 | 一种基于题号的精准框题方法、装置、设备和介质 |
CN111898595A (zh) * | 2020-07-22 | 2020-11-06 | 北京字节跳动网络技术有限公司 | 一种信息展示方法、装置、电子设备和存储介质 |
CN113420176A (zh) * | 2021-06-22 | 2021-09-21 | 百度在线网络技术(北京)有限公司 | 搜题方法、题目框绘制方法和装置、设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105956079A (zh) * | 2016-04-29 | 2016-09-21 | 广东小天才科技有限公司 | 一种应用于电子终端的试题搜索方法和装置 |
CN107085711A (zh) * | 2017-04-26 | 2017-08-22 | 广东小天才科技有限公司 | 一种基于终端设备的搜题控制方法及终端设备 |
CN107741980A (zh) * | 2017-10-17 | 2018-02-27 | 广东小天才科技有限公司 | 题目搜索方法、题目搜索装置及电子终端 |
CN108021320A (zh) * | 2017-12-25 | 2018-05-11 | 广东小天才科技有限公司 | 一种电子设备题目搜索方法及电子设备 |
CN108090135A (zh) * | 2017-11-28 | 2018-05-29 | 广东小天才科技有限公司 | 拍照搜题方法、装置、服务器及存储介质 |
CN108197300A (zh) * | 2018-01-25 | 2018-06-22 | 广东小天才科技有限公司 | 一种搜题方法及系统 |
CN109241244A (zh) * | 2018-08-31 | 2019-01-18 | 广东小天才科技有限公司 | 一种协助用户解决问题的交互方法、智能装置及系统 |
CN109583401A (zh) * | 2018-12-05 | 2019-04-05 | 广东小天才科技有限公司 | 一种自动生成答案的搜题方法及用户设备 |
-
2019
- 2019-05-05 CN CN201910367761.3A patent/CN111027537B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105956079A (zh) * | 2016-04-29 | 2016-09-21 | 广东小天才科技有限公司 | 一种应用于电子终端的试题搜索方法和装置 |
CN107085711A (zh) * | 2017-04-26 | 2017-08-22 | 广东小天才科技有限公司 | 一种基于终端设备的搜题控制方法及终端设备 |
CN107741980A (zh) * | 2017-10-17 | 2018-02-27 | 广东小天才科技有限公司 | 题目搜索方法、题目搜索装置及电子终端 |
CN108090135A (zh) * | 2017-11-28 | 2018-05-29 | 广东小天才科技有限公司 | 拍照搜题方法、装置、服务器及存储介质 |
CN108021320A (zh) * | 2017-12-25 | 2018-05-11 | 广东小天才科技有限公司 | 一种电子设备题目搜索方法及电子设备 |
CN108197300A (zh) * | 2018-01-25 | 2018-06-22 | 广东小天才科技有限公司 | 一种搜题方法及系统 |
CN109241244A (zh) * | 2018-08-31 | 2019-01-18 | 广东小天才科技有限公司 | 一种协助用户解决问题的交互方法、智能装置及系统 |
CN109583401A (zh) * | 2018-12-05 | 2019-04-05 | 广东小天才科技有限公司 | 一种自动生成答案的搜题方法及用户设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111027537A (zh) | 2020-04-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111027537B (zh) | 一种搜题方法及电子设备 | |
CN109817046B (zh) | 一种基于家教设备的学习辅助方法及家教设备 | |
CN108021320B (zh) | 一种电子设备题目搜索方法及电子设备 | |
CN109656465B (zh) | 一种应用于家教设备的内容获取方法及家教设备 | |
CN111077996B (zh) | 一种基于点读的信息推荐方法及学习设备 | |
CN109255989B (zh) | 一种智能点读方法及点读设备 | |
CN109710750A (zh) | 一种搜题方法及学习设备 | |
CN109783613B (zh) | 一种搜题方法及系统 | |
CN111026949A (zh) | 一种基于电子设备的搜题方法及系统 | |
CN110704499A (zh) | 作业内容反馈方法、装置、存储介质及电子设备 | |
CN111077993B (zh) | 一种学习场景的切换方法、电子设备及存储介质 | |
CN111027536B (zh) | 一种基于电子设备的搜题方法及电子设备 | |
CN112396897A (zh) | 一种教学系统 | |
CN112381689A (zh) | 一种在线批改作业的方法及装置 | |
CN111077988A (zh) | 一种基于用户行为的听写内容获取方法及电子设备 | |
CN111079501A (zh) | 一种文字识别方法及电子设备 | |
CN111563497B (zh) | 基于移动轨迹的框题方法、装置、电子设备及存储介质 | |
CN111078983B (zh) | 一种待识别页面的确定方法及学习设备 | |
CN111159433B (zh) | 一种内容定位方法及电子设备 | |
CN109783679B (zh) | 一种学习辅助方法及学习设备 | |
CN111081104B (zh) | 一种基于课堂表现的听写内容选择方法及学习设备 | |
CN114296564A (zh) | 电子白板的板书删除方法、系统、电子白板及存储介质 | |
CN111079486A (zh) | 一种开启听写检测的方法及电子设备 | |
CN111753715A (zh) | 点读场景下试题拍摄的方法、装置、电子设备和存储介质 | |
CN111652182B (zh) | 一种悬空手势识别的方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |