CN109725732B - 一种知识点的查询方法及家教设备 - Google Patents
一种知识点的查询方法及家教设备 Download PDFInfo
- Publication number
- CN109725732B CN109725732B CN201910061402.5A CN201910061402A CN109725732B CN 109725732 B CN109725732 B CN 109725732B CN 201910061402 A CN201910061402 A CN 201910061402A CN 109725732 B CN109725732 B CN 109725732B
- Authority
- CN
- China
- Prior art keywords
- user
- information
- book page
- content
- finger
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 238000004590 computer program Methods 0.000 claims description 11
- 238000005516 engineering process Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 235000013559 Schnittsellerie Nutrition 0.000 description 3
- 244000169997 Schnittsellerie Species 0.000 description 3
- 241000219095 Vitis Species 0.000 description 3
- 235000009754 Vitis X bourquina Nutrition 0.000 description 3
- 235000012333 Vitis X labruscana Nutrition 0.000 description 3
- 235000014787 Vitis vinifera Nutrition 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 238000003058 natural language processing Methods 0.000 description 3
- 238000012015 optical character recognition Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例涉及智能设备技术领域,公开了一种知识点的查询方法及家教设备,该方法包括:通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;若检测到,控制拍摄模组拍摄书本页面以获得书本页面的图像信息;识别书本页面的图像信息,以在书本页面的图像信息中确定出用户点击书本页面的动作信息所指示的手指坐标信息;获取用户输入的语音信息,以根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围;搜索与查询范围中的内容相匹配的知识内容并输出。实施上述方法,能够提高用户对知识点的查询效率。
Description
技术领域
本发明涉及智能设备技术领域,具体涉及一种知识点的查询方法及家教设备。
背景技术
随着家教设备技术的发展,家教设备的功能越来越丰富,其中包括对用户输入的字、词或者成语进行分析,并将相应的解释内容输出供用户参考,以辅助用户进行学习。
在实践中发现,在遇到不懂的字、词或者成语时,年龄较小的用户可能对该字、词或者成语的拼写都不会,导致其无法将不懂的字、词或者成语输入到家教设备中以获得解释内容;而且,用户每次都要将不懂的字、词或者成语逐个输入到家教设备中以获得解释内容,若用户在学习过程中遇到的不懂的字、词或者成语的数量过多,那么往家教设备中输入不懂的知识点的操作将耗费大量的学习时间,从而不利于提高用户对知识点的查询效率。
发明内容
本发明实施例公开了一种知识点的查询方法及家教设备,能够提高用户对知识点的查询效率。
本发明实施例第一方面公开一种知识点的查询方法,包括:
通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;
若检测到,控制拍摄模组拍摄所述书本页面以获得所述书本页面的图像信息;
识别所述书本页面的图像信息,以在所述书本页面的图像信息中确定出所述动作信息所指示的手指坐标信息;
获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围;
搜索与所述查询范围中的内容相匹配的知识内容并输出。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
将所述手指坐标信息存储至缓存中;
当通过所述红外线检测装置在预设的时长内未检测到所述用户点击书本页面的动作信息时,输出提示信息,所述提示信息用于询问所述用户是否结束学习;
当检测到所述用户输入的用于指示结束学习的指令时,从所述缓存中获取所述手指坐标信息,以根据所述手指坐标信息确定出所述手指坐标的数量;
当所述手指坐标的数量大于预设的数量阈值时,搜索与所述书本页面中的内容相匹配的教学资料并输出。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
在输出与所述书本页面中的内容相匹配的教学资料之后,在所述缓存中删除所述手指坐标信息。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围之后,以及所述搜索与所述查询范围中的内容相匹配的知识内容并输出之前,所述方法还包括:
获取所述用户输入的身份信息,所述身份信息至少包括所述用户的年龄信息;
判断所述用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;
若是,根据所述查询范围中的内容在预设的提问例子中,确定出至少一个与所述查询范围中的内容相匹配的目标提问例子并输出,所述提问例子用于引导所述用户如何提问;
获取所述用户根据至少一个所述目标提问例子输入的提问信息;
以及,所述搜索与所述查询范围中的内容相匹配的知识内容并输出,包括:
根据所述提问信息以及所述查询范围中的内容搜索出相应的知识内容并输出。
作为一种可选的实施方式,在本发明实施例第一方面中,所述获取所述用户输入的语音信息,根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围,包括:
获取所述用户输入的语音信息,判断所述语音信息所指示的第一内容信息与所述手指坐标信息所指示的第二内容信息是否相匹配;
若匹配,根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围。
本发明实施例第二方面公开一种家教设备,包括:
第一判断单元,用于通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;
控制单元,用于在所述第一判断单元通过红外检测装置检测到用户点击书本页面的动作信息时,控制拍摄模组拍摄所述书本页面以获得所述书本页面的图像信息;
识别单元,用于识别所述书本页面的图像信息,以在所述书本页面的图像信息中确定出所述动作信息所指示的手指坐标信息;
第一确定单元,用于获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围;
第一搜索单元,用于搜索与所述查询范围中的内容相匹配的知识内容并输出。
作为一种可选的实施方式,在本发明实施例第二方面中,所述家教设备还包括:
存储单元,用于将所述手指坐标信息存储至缓存中;
输出单元,用于在所述第一判断单元通过所述红外线检测装置在预设的时长内未检测到所述用户点击书本页面的动作信息时,输出提示信息,所述提示信息用于询问所述用户是否结束学习;
第一获取单元,用于在检测到所述用户输入的用于指示结束学习的指令时,从所述缓存中获取所述手指坐标信息,以根据所述手指坐标信息确定出所述手指坐标的数量;
第二搜索单元,用于在所述手指坐标的数量大于预设的数量阈值时,搜索与所述书本页面中的内容相匹配的教学资料并输出。
作为一种可选的实施方式,在本发明实施例第二方面中,所述家教设备还包括:
删除单元,用于在所述第二搜索单元输出与所述书本页面中的内容相匹配的教学资料之后,在所述缓存中删除所述手指坐标信息。
作为一种可选的实施方式,在本发明实施例第二方面中,所述家教设备还包括:
第二获取单元,用于在所述第一确定单元根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围之后,以及所述第一搜索单元搜索与所述查询范围中的内容相匹配的知识内容并输出之前,获取所述用户输入的身份信息,所述身份信息至少包括所述用户的年龄信息;
第二判断单元,用于判断所述用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;
第二确定单元,用于在所述第二判断单元判断出所述用户的年龄信息对应的数值小于或者等于预设的年龄阈值时,根据所述查询范围中的内容在预设的提问例子中,确定出至少一个与所述查询范围中的内容相匹配的目标提问例子并输出,所述提问例子用于引导所述用户如何提问;
第三获取单元,用于获取所述用户根据至少一个所述目标提问例子输入的提问信息;
以及,所述第一搜索单元,具体用于根据所述提问信息以及所述查询范围中的内容搜索出相应的知识内容并输出。
作为一种可选的实施方式,在本发明实施例第二方面中,所述第一确定单元用于获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围的方式具体为:
所述第一确定单元,用于获取所述用户输入的语音信息,判断所述语音信息所指示的第一内容信息与所述手指坐标信息所指示的第二内容信息是否相匹配;以及,若匹配,根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围。
本发明实施例第三方面公开一种家教设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种知识点的查询方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种知识点的查询方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行本发明实施例第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行本发明实施例第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,家教设备可以通过红外线检测装置判断是否检测到用户点击书面的动作信息;若检测到,控制拍摄模组获取书面的图像信息;识别书面的图像信息,以在书本页面的图像信息中确定出用户点击书本页面的动作信息所指示的手指坐标信息;获取用户输入的语音信息,并根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围;搜索与查询范围相匹配的知识内容并输出。实施上述方法,家教设备可以拍摄用户在书本页面的点击动作的图像,并通过图像分析技术获取用户的手指坐标,进而可以结合用户的语音信息自动获取用户不懂的知识点;即若用户想要通过家教设备来查询不懂的知识点时,不再需要用户手动输入不懂的知识点,进而解决了年龄较小的用户无法自行输入不懂知识点的情况,而且结合用户的语音信息以及用户的手指坐标可以更加快速、准确地确定出用户不懂的知识点,并针对用户不懂的知识点搜索出相应的解释内容输出,提高用户对知识点的查询效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种知识点的查询方法的流程示意图;
图2是本发明实施例公开的另一种知识点的查询方法的流程示意图;
图3是本发明实施例公开的一种家教设备的结构示意图;
图4是本发明实施例公开的另一种家教设备的结构示意图;
图5是本发明实施例公开的又一种家教设备的结构示意图;
图6是本发明实施例公开的一种拍摄模组拍摄书本页面以获得书本页面的图像信息的实现方式示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”和“第三”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种知识点的查询方法及家教设备,能够提高用户对知识点的查询效率。
下面将结合具体实施例对本发明技术方案进行详细说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种知识点的查询方法的流程示意图。如图1所示,该知识点的查询方法可以包括以下步骤:
101、家教设备通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;若检测到,执行步骤102;若未检测到,结束本流程。
本发明实施例中,家教设备可以包括:学习平板、学习机、学习手机、点读机、家教机、移动平板、个人数字助理(Personal Digital Assistant,PDA)、移动互联网设备(Mobile Internet Device,MID)或电视机等设备,本发明实施例不作限定。
本发明实施例中,红外线检测装置可以包括:红外线探测器、主动式红外线传感器或者被动式红外线传感器等,本发明实施例以红外线探测器为例进行说明,不应构成对该方法的限定。
红外线探测器中内置有热电元件检测,可以用于检测人体的存在或移动,而且热电元件还可以将检测到的模拟信号转换成电压信号,以对电压信号进行波形分析,并可以在根据波形分析结果判定为检测到人体的信号时向家教设备反馈检测到人体的信息,即当红外线探测器检测到用户点击书本页面的动作信息时,家教设备可以执行步骤102。
102、家教设备控制拍摄模组拍摄书本页面以获得书本页面的图像信息。
本发明实施例中,家教设备可以设置有显示屏,与显示屏同侧还可以设置有拍摄模组用于拍摄书本页面以获得书本页面的图像信息,该拍摄模组可以是弹出式的摄像头、可旋转的摄像头、凸出式摄像头等,本发明实施例不作限定;
作为一种可选的实施方式,家教设备控制拍摄模组拍摄书本页面以获得书本页面的图像信息的方式还可以如图6所示,图中家教设备10可以设置有拍摄模组20,用于拍摄图像;在拍摄模组20正前方还可以设置有反光装置(例如,反光镜、棱镜或凸透镜等),用于改变拍摄模组的光路,进而使得拍摄模组可以拍摄到书本页面40;其中虚线表示拍摄模组的光路。
103、家教设备识别书本页面的图像信息,以在书本页面的图像信息中确定出用户点击书本页面的动作信息所指示的手指坐标信息。
本发明实施例中,家教设备可以通过光学字符识别(Optical CharacterRecognition,OCR)技术识别书本页面的图像信息,以根据识别结果在书本页面的图像中确定出用户点击书本页面的动作信息所指示的手指坐标信息。
其中,OCR技术是通过扫描等光学输入方式将各种票据、报刊、书籍、文稿及其它印刷品的文字转化为图像信息,再利用文字识别技术将图像信息转化为可以使用的计算机输入技术。
作为一种可选的实施方式,家教设备还可以将用户的手指坐标信息存储至缓存中;当通过红外线检测装置在预设的时长内未检测到用户点击书本页面的动作信息时,输出提示信息,该提示信息用于询问用户是否结束学习;当检测到用户输入的用于指示结束学习的指令时,从缓存中获取用户的手指坐标信息,以根据用户的手指坐标信息确定出手指坐标的数量;当手指坐标的数量大于预设的数量阈值时,搜索与该书本页面中的内容相匹配的教学资料并输出。
举例来说,当检测到用户确定要结束学习时,根据缓存中的手指坐标信息确定出用户在此次学习过程中总共在书本页面上留下了8个手指坐标,假设预设的数量阈值是6个,即用户的手指坐标数量大于预设的数量阈值,说明用户对该书本页面对应的内容可能掌握程度较低,进而可以搜索与该书本页面中的内容相匹配的教学资料并输出。
需要说明的是,预设的时长可以是由开发人员根据大量的实验结果设定的;同理,预设的数量阈值也可以是由开发人员根据大量的实验结果设定的;家教设备可以与云端数据库通过网络进行交互,该云端数据库可以存储有大量的学习资料,进而家教设备可以在云端数据库的学习资料中搜索与该书本页面中的内容相匹配的教学资料并输出,输出教学资料的方式可以是:通过悬浮窗口显示、分屏显示或者发送邮件的形式输出搜索到的教学资料,本发明实施例不作限定。
实施上述方法,能够通过用户在书本页面中留下的手指坐标数量判断出用户对书本页面中的内容的掌握程度,进而可以在用户对书本页面中的内容掌握程度较低时,输出相应的教学资料以辅助用户学习,提高了用户的使用体验度。
作为另一种可选的实施方式,家教设备在输出与上述书本页面中的内容相匹配的教学资料之后,可以将缓存中手指坐标信息删除,以节约缓存中的存储空间。
104、家教设备获取用户输入的语音信息,以根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围。
本发明实施例中,家教设备可以内置有麦克风装置,用于采集用户输入的语音信息,进而可以利用自然语言处理(Natural Language Processing,NLP)技术识别用户输入的语音信息的语义以确定出用户意图;其中,NLP技术是人工智能的一个子领域,是一种处理人与计算机交互语言问题的技术。
进一步,家教设备可以根据用户意图以及用户的手指坐标确定出查询范围。在实践中发现,用户的手指坐标只是一个点,根据一个点坐标可能无法确定出用户所想要指定的内容信息,所以可以结合用户意图来确定查询范围(查询范围中可以包括用户所想要指定的内容信息)。举例来说,若用户指着书本页面上的某一点问:“这个字是什么意思”,则可以确定出距离该点坐标最近的一个字作为查询范围;又举例来说,若用户指着书本页面上的某一点问:“这个词是什么意思”,则可以确定出距离该点坐标最近的一个词作为查询范围;再举例来说,若用户指着书本页面上的某一点问:“这道题怎么做”,则可以确定出距离该点坐标最近的一道题作为查询范围。即可以结合用户输入的语音信息以及手指坐标确定出用户想要问的是一个字、一个词还是一道题。
在实践中发现,用户在使用家教设备进行知识点查询时,难免会出现手指所指的内容与其语音所问的内容不一致的情况,进而导致家教设备无法准确确定出查询范围,也无法为用户输出相应的知识内容。
作为一种可选的实施方式,家教设备执行步骤104:“获取用户输入的语音信息,以根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围”的方式可以是:家教设备获取用户输入的语音信息,判断语音信息所指示的第一内容信息与手指坐标信息所指示的第二内容信息是否相匹配;若匹配,根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围。
作为另一种可选的实施方式,若家教设备判断出用户输入的语音信息所指示的第一内容信息与手指坐标信息所指示的第二内容信息不匹配,则可以输出提醒信息以提醒用户重新输入语音信息或者重新点击书本页面。
举例来说,书本页面中有“新年快乐”这个词,用户的手指坐标所指示的内容为“新年”,而用户输入的语音信息却为“快乐的英文怎么读”,显然,用户的手指坐标所指示的内容与用户输入的语音所指示的内容不一致,则可以输出提醒信息,例如“请重新提问,或者请调整手指位置”,以提醒用户重新输入语音信息或者重新点击书本页面。
实施上述方法,可以在用户手指所指的内容与其语音所问的内容不一致时,输出提醒信息提醒用户重新提问或调整手指位置,进而保证家教设备可以确定出查询范围,以为用户输出相应的知识内容,提高了用户的使用体验度。
在实践中发现,用户在阅读书本页面中的一段话时,一般都是从一段话的第一个字开始阅读,在阅读过程中遇到不懂的字或词时,就会停下来向家教设备提问,若一段话中用户不懂的字或词有多个时,那么用户在阅读一段话时,就需要多次停下来向家教设备提问,进而不利提高用户的阅读效率以及使用体验度。
作为一种可选的实施方式,家教设备在获取用户输入的语音信息,以根据用户输入的语音信息和用户的手指坐标信息确定出查询范围之后,家教设备还可以以查询范围为中心确定出第二查询范围,其中,第二查询范围所包括的书本页面内容比查询范围所包括的多,进而后续在搜索与查询范围中的内容相匹配的知识内容时,同时还可以搜索与第二查询范围中除了查询范围以外的内容相匹配的第二知识内容,并在输出与查询范围中的内容相匹配的知识内容时,将第二知识内容作为候选项输出供用户参考。
举例来说,家教设备根据用户输入的语音信息和用户的手指坐标信息确定出查询范围为“葡萄美酒夜光杯”中的“酒”字,并且用户问的为“这个字的拼音怎样拼写”;则家教设备还可以以“酒”为中心,将“酒”的前后三个字确定为第二查询范围(即“葡萄美酒夜光杯”),进而后续可以搜索“葡萄美酒夜光杯”对应的拼音拼写信息一起输出供用户参考。
实施上述方法,家教设备可以确定出比用户所指定的查询范围更大的第二查询范围,并将与第二查询范围内的内容相匹配的知识内容输出供用户参考,即家教设备可以预先将用户可能问到的内容对应的知识内容提前输出给用户,避免用户在学习过程中需要多次停下来向家教设备提问,提高了用户的阅读效率以及使用体验度。
105、家教设备搜索与查询范围中的内容相匹配的知识内容并输出。
本发明实施例中,家教设备可以与云端数据库通过网络进行交互,该云端数据库可以存储有大量的学习资料,进而家教设备可以根据查询范围中的内容在云端数据库的学习资料中搜索出相应的知识内容并输出。
本发明实施例中,家教设备可以通过悬浮窗口显示、分屏显示或者发送邮件的形式输出知识内容,本发明实施例不作限定。
可见,实施图1所描述的方法,家教设备可以拍摄用户在书本页面的点击动作的图像,并通过图像分析技术获取用户的手指坐标,进而可以结合用户的语音信息自动获取用户不懂的知识点;即若用户想要通过家教设备来查询不懂的知识点时,不再需要用户手动输入不懂的知识点,进而解决了年龄较小的用户无法自行输入不懂知识点的情况,而且结合用户的语音信息以及用户的手指坐标可以更加快速、准确地确定出用户不懂的知识点,并针对用户不懂的知识点搜索出相应的解释内容输出,提高用户对知识点的查询效率。
实施例二
请参阅图2,图2是本发明实施例公开的另一种知识点的查询方法的流程示意图。如图2所示,该知识点的查询方法可以包括以下步骤:
201-204;其中,步骤201-步骤204与实施例一中的步骤101-步骤104相同,在此不再赘述。
205、家教设备获取用户输入的身份信息,该身份信息至少包括用户的年龄信息。
本发明实施例中,家教设备可以在用户输入指示开始学习的指令时,通过输出对话框、悬浮窗口等方式获取用户输入的身份信息,用户的身份可以包括用户的年龄信息、年级信息、学习成绩信息等,本发明实施例不作限定。
206、家教设备判断用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;若是,执行步骤207;若不是,结束本流程。
本发明实施例中,预设的年龄阈值可以是由开发人员根据大量的开发数据设定的。
举例来说,家教设备获得用户的年龄信息为5岁,小于预设的年龄阈值(6岁),则家教机可以执行步骤207。
207、家教设备根据查询范围中的内容在预设的提问例子中,确定出至少一个与查询范围中的内容相匹配的目标提问例子并输出,该提问例子用于引导用户如何提问。
本发明实施例中,预设的提问例子可以是由开发人员根据大量的开发数据设定的,其用于引导用户如何向家教设备提问。
举例来说,家教设备确定出查询范围中的内容为“广州”后,可以在预设的提问例子确定出至少一个与“广州”相匹配的目标提问例子并输出,例如:(1)你可以这样问我“广州属于哪个省”;(2)你可以这样问我“广州的拼音怎样拼写”等。
作为一种可选的实施方式,“预设的提问例子”的生成方式可以是:家教设备获取用户的年龄信息,进而可以在云端服务器中匹配出与用户年龄相仿的其他用户的历史提问记录,进而可以根据其他用户的历史提问记录,筛选出提问概率大于预设的概率阈值的提问信息生成预设的提问例子。
举例来说,家教设备确定出用户的年龄为5岁,则可以在云端服务器中确定出其他5岁的用户的历史提问记录,并在历史提问记录中确定出其他5岁的用户都喜欢提什么问题(即筛选出提问概率大于预设的概率阈值的提问信息),并根据提问概率大于预设的概率阈值的提问信息生成预设的提问例子。
实施上述方法,可以基于大数据筛选出与用户年龄相仿的用户都喜欢提什么问题,进而可以确定出更适合用户以及被用户选取概率更高的提问信息作为预设的提问例子。
208、家教设备获取用户根据至少一个上述目标提问例子输入的提问信息。
209、家教设备根据提问信息以及查询范围中的内容搜索出相应的知识内容并输出。
举例来说,用户输入的提问信息为“广州属于哪个省”,则家教设备可以结合“广州”以及“广州属于哪个省”搜索出答案“广东省”并输出供用户参考。
可见,与实施图1所描述的方法相比较,实施图2所描述的方法,家教设备还可以通过获取用户的身份信息以判断用户的年龄是否小于或者等于预设的年龄阈值,如果是,则说明用户为低年级的用户,自主学习能力弱,所以家教设备可以根据确定出的查询范围中的内容确定出若干目标提问例子并输出,以引导的用户向家教设备提问,进而可以辅助用户学习,提高用户的学习效率。
实施例三
请参阅图3,图3是本发明实施例公开的一种家教设备的结构示意图。如图3所示,该家教设备可以包括:
第一判断单元301,用于通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;
控制单元302,用于在第一判断单元301通过红外检测装置检测到用户点击书本页面的动作信息时,控制拍摄模组拍摄书本页面以获得书本页面的图像信息;
识别单元303,用于识别书本页面的图像信息,以在书本页面的图像信息中确定出用户点击书本页面的动作信息所指示的手指坐标信息;
第一确定单元304,用于获取用户输入的语音信息,以根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围;
第一搜索单元305,用于搜索与查询范围中的内容相匹配的知识内容并输出。
作为一种可选的实施方式,第一确定单元304在获取用户输入的语音信息,以根据用户输入的语音信息和用户的手指坐标信息确定出查询范围之后,还可以用于以查询范围为中心确定出第二查询范围,其中,第二查询范围所包括的书本页面内容比查询范围所包括的书本页面的内容多,进而后续在搜索与查询范围中的内容相匹配的知识内容时,同时还可以搜索与第二查询范围中除了查询范围以外的内容相匹配的第二知识内容,并在输出与查询范围中的内容相匹配的知识内容时,将第二知识内容作为候选项输出供用户参考。
实施上述方法,可以确定出比用户所指定的查询范围更大的第二查询范围,并将与第二查询范围内的内容相匹配的知识内容输出供用户参考,即家教设备可以预先将用户可能问到的内容对应的知识内容提前输出给用户,避免用户在学习过程中需要多次停下来向家教设备提问,提高了用户的阅读效率以及使用体验度。
可见,实施图3所述的家教设备,可以拍摄用户在书本页面的点击动作的图像,并通过图像分析技术获取用户的手指坐标,进而可以结合用户的语音信息自动获取用户不懂的知识点;即若用户想要通过家教设备来查询不懂的知识点时,不再需要用户手动输入不懂的知识点,进而解决了年龄较小的用户无法自行输入不懂知识点的情况,而且结合用户的语音信息以及用户的手指坐标可以更加快速、准确地确定出用户不懂的知识点,并针对用户不懂的知识点搜索出相应的解释内容输出,提高用户对知识点的查询效率。
实施例四
请参阅图4,图4是本发明实施例公开的另一种家教设备的结构示意图。其中,图4所示的家教设备是由图3所示的家教设备进行优化得到的。与图3所示的家教设备相比较,图4所示的家教设备还可以包括:
存储单元306,用于将用户的手指坐标信息存储至缓存中;
输出单元307,用于在第一判断单元301通过红外线检测装置在预设的时长内未检测到用户点击书本页面的动作信息时,输出提示信息,该提示信息用于询问用户是否结束学习;
第一获取单元308,用于在检测到用户输入的用于指示结束学习的指令时,从缓存中获取手指坐标信息,以根据用户的手指坐标信息确定出用户的手指坐标的数量;
第二搜索单元309,用于在用户的手指坐标的数量大于预设的数量阈值时,搜索与书本页面中的内容相匹配的教学资料并输出。
作为一种可选的实施方式,该家教设备还可以包括:
删除单元310,用于在第二搜索单元309输出与书本页面中的内容相匹配的教学资料之后,在缓存中删除用户的手指坐标信息。
实施上述方法,可以将缓存中手指坐标信息删除,以节约缓存中的存储空间。
作为一种可选的实施方式,该家教设备还可以包括:
第二获取单元311,用于在第一确定单元304根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围之后,以及第一搜索单元305搜索与查询范围中的内容相匹配的知识内容并输出之前,获取用户输入的身份信息,该身份信息至少包括用户的年龄信息;
第二判断单元312,用于判断用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;
第二确定单元313,用于在第二判断单元312判断出用户的年龄信息对应的数值小于或者等于预设的年龄阈值时,根据查询范围中的内容在预设的提问例子中,确定出至少一个与查询范围中的内容相匹配的目标提问例子并输出,该提问例子用于引导用户如何提问;
第三获取单元314,用于获取用户根据至少一个上述目标提问例子输入的提问信息;
以及,第一搜索单元305,具体用于根据用户输入的提问信息以及查询范围中的内容搜索出相应的知识内容并输出。
实施上述方法,可以通过获取用户的身份信息以判断用户的年龄是否小于或者等于预设的年龄阈值,如果是,则说明用户为低年级的用户,自主学习能力弱,所以家教设备可以根据确定出的查询范围中的内容确定出若干目标提问例子并输出,以引导的用户向家教设备提问,进而可以辅助用户学习,提高用户的学习效率。
作为另一种可选的实施方式,该家教设备生成预设的提问例子的方式可以是:家教设备获取用户的年龄信息,进而可以在云端服务器中匹配出与用户年龄相仿的其他用户的历史提问记录,进而可以根据其他用户的历史提问记录,筛选出提问概率大于预设的概率阈值的提问信息生成预设的提问例子。
实施上述方法,可以基于大数据筛选出与用户年龄相仿的用户都喜欢提什么问题,进而可以确定出更适合用户以及被用户选取概率更高的提问信息作为预设的提问例子。
作为一种可选的实施方式,第一确定单元304用于获取用户输入的语音信息,以根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围的方式具体为:
第一确定单元304,用于获取用户输入的语音信息,判断该语音信息所指示的第一内容信息与用户的手指坐标信息所指示的第二内容信息是否相匹配;以及,若匹配,根据用户输入的语音信息以及用户的手指坐标信息确定出查询范围。
作为另一种可选的实施方式,若第一确定单元304判断出用户输入的语音信息所指示的第一内容信息与手指坐标信息所指示的第二内容信息不匹配,则可以输出提醒信息以提醒用户重新输入语音信息或者重新点击书本页面。
实施上述方法,可以在用户手指所指的内容与其语音所问的内容不一致时,输出提醒信息提醒用户重新提问或调整手指位置,进而保证家教设备可以确定出查询范围,以为用户输出相应的知识内容,提高了用户的使用体验度。
可见,与实施图3所描述的家教设备相比较,实施图4所描述的家教设备还能够通过用户在书本页面中留下的手指坐标数量判断出用户对书本页面中的内容的掌握程度,进而可以在用户对书本页面中的内容掌握程度较低时,输出相应的教学资料以辅助用户学习,提高了用户的使用体验度。
实施例五
请参阅图5,图5是本发明实施例公开的又一种家教设备的结构示意图。如图5所示,该家教设备可以包括:
存储有可执行程序代码的存储器501;
与存储器501耦合的处理器502;
其中,处理器502调用存储器501中存储的可执行程序代码,执行图1~图2任意一种知识点的查询方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图2任意一种知识点的查询方法。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种知识点的查询方法及家教设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种知识点的查询方法,其特征在于,所述方法包括:
通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;
若检测到,控制拍摄模组拍摄所述书本页面以获得所述书本页面的图像信息;
识别所述书本页面的图像信息,以在所述书本页面的图像信息中确定出所述动作信息所指示的手指坐标信息;
获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围;
获取所述用户输入的身份信息,所述身份信息至少包括所述用户的年龄信息;判断所述用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;
若是,根据所述查询范围中的内容在预设的提问例子中,确定出至少一个与所述查询范围中的内容相匹配的目标提问例子并输出,所述提问例子用于引导所述用户如何提问;
获取所述用户根据至少一个所述目标提问例子输入的提问信息;
根据所述提问信息以及所述查询范围中的内容搜索出相应的知识内容并输出。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述手指坐标信息存储至缓存中;
当通过所述红外线检测装置在预设的时长内未检测到所述用户点击书本页面的动作信息时,输出提示信息,所述提示信息用于询问所述用户是否结束学习;
当检测到所述用户输入的用于指示结束学习的指令时,从所述缓存中获取所述手指坐标信息,以根据所述手指坐标信息确定出所述手指坐标的数量;
当所述手指坐标的数量大于预设的数量阈值时,搜索与所述书本页面中的内容相匹配的教学资料并输出。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
在输出与所述书本页面中的内容相匹配的教学资料之后,在所述缓存中删除所述手指坐标信息。
4.根据权利要求1所述的方法,其特征在于,所述获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围,包括:
获取所述用户输入的语音信息,判断所述语音信息所指示的第一内容信息与所述手指坐标信息所指示的第二内容信息是否相匹配;
若匹配,根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围。
5.一种家教设备,其特征在于,所述家教设备包括:
第一判断单元,用于通过红外线检测装置判断是否检测到用户点击书本页面的动作信息;
控制单元,用于在所述第一判断单元通过红外检测装置检测到用户点击书本页面的动作信息时,控制拍摄模组拍摄所述书本页面以获得所述书本页面的图像信息;
识别单元,用于识别所述书本页面的图像信息,以在所述书本页面的图像信息中确定出所述动作信息所指示的手指坐标信息;
第一确定单元,用于获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围;
第二获取单元,用于获取所述用户输入的身份信息,所述身份信息至少包括所述用户的年龄信息;
第二判断单元,用于判断所述用户的年龄信息对应的数值是否小于或者等于预设的年龄阈值;
第二确定单元,用于在所述第二判断单元判断出所述用户的年龄信息对应的数值小于或者等于预设的年龄阈值时,根据所述查询范围中的内容在预设的提问例子中,确定出至少一个与所述查询范围中的内容相匹配的目标提问例子并输出,所述提问例子用于引导所述用户如何提问;
第三获取单元,用于获取所述用户根据至少一个所述目标提问例子输入的提问信息;
第一搜索单元,用于根据所述提问信息以及所述查询范围中的内容搜索出相应的知识内容并输出。
6.根据权利要求5所述的家教设备,其特征在于,所述家教设备还包括:
存储单元,用于将所述手指坐标信息存储至缓存中;
输出单元,用于在所述第一判断单元通过所述红外线检测装置在预设的时长内未检测到所述用户点击书本页面的动作信息时,输出提示信息,所述提示信息用于询问所述用户是否结束学习;
第一获取单元,用于在检测到所述用户输入的用于指示结束学习的指令时,从所述缓存中获取所述手指坐标信息,以根据所述手指坐标信息确定出所述手指坐标的数量;
第二搜索单元,用于在所述手指坐标的数量大于预设的数量阈值时,搜索与所述书本页面中的内容相匹配的教学资料并输出。
7.根据权利要求6所述的家教设备,其特征在于,所述家教设备还包括:
删除单元,用于在所述第二搜索单元输出与所述书本页面中的内容相匹配的教学资料之后,在所述缓存中删除所述手指坐标信息。
8.根据权利要求5所述的家教设备,其特征在于,所述第一确定单元用于获取所述用户输入的语音信息,以根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围的方式具体为:
所述第一确定单元,用于获取所述用户输入的语音信息,判断所述语音信息所指示的第一内容信息与所述手指坐标信息所指示的第二内容信息是否相匹配;以及,若匹配,根据所述用户输入的语音信息以及所述用户的手指坐标信息确定出查询范围。
9.一种家教设备,其特征在于,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,用于执行权利要求1-4任一项所述的一种知识点的查询方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储计算机程序,其中,所述计算机程序使得计算机执行权利要求1-4任一项所述的一种知识点的查询方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910061402.5A CN109725732B (zh) | 2019-01-23 | 2019-01-23 | 一种知识点的查询方法及家教设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910061402.5A CN109725732B (zh) | 2019-01-23 | 2019-01-23 | 一种知识点的查询方法及家教设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109725732A CN109725732A (zh) | 2019-05-07 |
CN109725732B true CN109725732B (zh) | 2022-03-25 |
Family
ID=66298441
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910061402.5A Active CN109725732B (zh) | 2019-01-23 | 2019-01-23 | 一种知识点的查询方法及家教设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109725732B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110109576A (zh) * | 2019-05-09 | 2019-08-09 | 北京一数科技有限公司 | 一种内容查询方法、装置、智能投影设备及存储介质 |
CN111077988A (zh) * | 2019-05-10 | 2020-04-28 | 广东小天才科技有限公司 | 一种基于用户行为的听写内容获取方法及电子设备 |
CN111078082A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种基于图像识别的点读方法及电子设备 |
CN111079727B (zh) * | 2019-06-09 | 2023-12-22 | 广东小天才科技有限公司 | 一种点读控制方法及电子设备 |
CN110363161B (zh) * | 2019-07-18 | 2023-11-14 | 广东小天才科技有限公司 | 一种辅助阅读的方法及系统 |
CN111311624B (zh) * | 2020-03-20 | 2023-08-18 | 广东小天才科技有限公司 | 一种点读设备的书本检测方法及装置 |
CN111722711B (zh) * | 2020-06-02 | 2023-05-23 | 广东小天才科技有限公司 | 增强现实场景输出方法及电子设备、计算机可读存储介质 |
CN111898595A (zh) * | 2020-07-22 | 2020-11-06 | 北京字节跳动网络技术有限公司 | 一种信息展示方法、装置、电子设备和存储介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1083769B1 (en) * | 1999-02-16 | 2010-06-09 | Yugen Kaisha GM & M | Speech converting device and method |
JP2001256235A (ja) * | 2000-03-09 | 2001-09-21 | Nippon Telegr & Teleph Corp <Ntt> | マルチメディア情報記録管理方法及びシステム |
CN107742446A (zh) * | 2013-01-25 | 2018-02-27 | 陈旭 | 图书阅读器 |
CN108563627B (zh) * | 2018-03-02 | 2021-09-03 | 云知声智能科技股份有限公司 | 启发式语音交互方法及装置 |
CN108647354A (zh) * | 2018-05-16 | 2018-10-12 | 广东小天才科技有限公司 | 一种辅导学习的方法及照明设备 |
CN108959483B (zh) * | 2018-06-21 | 2021-06-01 | 广东小天才科技有限公司 | 一种基于搜索的学习辅助方法及电子设备 |
CN109192204B (zh) * | 2018-08-31 | 2021-05-11 | 广东小天才科技有限公司 | 一种基于智能设备摄像头的语音控制方法和智能设备 |
-
2019
- 2019-01-23 CN CN201910061402.5A patent/CN109725732B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN109725732A (zh) | 2019-05-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109725732B (zh) | 一种知识点的查询方法及家教设备 | |
CN110196901B (zh) | 对话系统的构建方法、装置、计算机设备和存储介质 | |
CN110427463B (zh) | 搜索语句响应方法、装置及服务器和存储介质 | |
US20200335096A1 (en) | Pinyin-based method and apparatus for semantic recognition, and system for human-machine dialog | |
US10783877B2 (en) | Word clustering and categorization | |
CN105930452A (zh) | 一种识别自然语言的智能应答方法 | |
CN108920450B (zh) | 一种基于电子设备的知识点复习方法及电子设备 | |
CN109583401A (zh) | 一种自动生成答案的搜题方法及用户设备 | |
CN108766431B (zh) | 一种基于语音识别的自动唤醒方法及电子设备 | |
CN108345612B (zh) | 一种问题处理方法和装置、一种用于问题处理的装置 | |
CN108710653B (zh) | 一种绘本朗读点播方法、装置及系统 | |
CN110245606B (zh) | 一种文本识别方法、装置、设备及存储介质 | |
CN110473543B (zh) | 一种语音识别方法、装置 | |
CN112528004B (zh) | 语音交互方法、装置、电子设备、介质和计算机程序产品 | |
CN114625855A (zh) | 用于生成对话信息的方法及装置、设备和介质 | |
CN112632242A (zh) | 智能对话方法及装置、电子设备 | |
CN111026949A (zh) | 一种基于电子设备的搜题方法及系统 | |
CN111079494A (zh) | 一种学习内容推送方法及电子设备 | |
Celikyilmaz et al. | Resolving referring expressions in conversational dialogs for natural user interfaces | |
CN111026786B (zh) | 一种听写列表生成方法及家教设备 | |
CN111708870A (zh) | 基于深度神经网络的问答方法、装置及存储介质 | |
CN113743102B (zh) | 识别字符的方法、装置以及电子设备 | |
CN112861510A (zh) | 纪要处理方法、装置、设备和存储介质 | |
CN111091034A (zh) | 一种基于多手指识别的搜题方法及家教设备 | |
CN109684357B (zh) | 信息处理方法及装置、存储介质、终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |