CN109753583A - 一种搜题方法及电子设备 - Google Patents

Abstract

本发明实施例涉及教育技术领域，公开了一种搜题方法，该方法包括：获取用户输入的第一语音信息与摄像头拍摄的拍摄图像；对第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，方位描述信息为用户在拍摄图像中所指示的搜索范围的方向信息和位置信息；根据方位描述信息，从拍摄图像中确定搜索范围；识别搜索范围内的搜索内容；搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。实施本发明实施例，能够准确的识别出用户指定的搜索内容，提高搜题的准确性。

Description

一种搜题方法及电子设备

技术领域

本发明涉及教育技术领域，具体涉及一种搜题方法及电子设备。

背景技术

当前，市面上很多智能设备都设置有搜题软件，以辅助学生们解决学习过程中的作业难题。目前，学生们在利用智能设备的搜题软件进行搜题时，需要完整地向智能设备输入待搜索题目，以使得智能设备搜索出待搜索题目的参考答案。在实践中发现，若用户未能向智能设备输入完整的待搜索题目，则智能设备无法准确地识别出用户的搜索意图，从而降低了搜题的准确性。

发明内容

本发明实施例公开了一种搜题方法及电子设备，能够准确的识别出用户指定的搜索内容，提高搜题的准确性。

本发明实施例第一方面公开一种搜题方法，所述方法包括：

获取用户输入的第一语音信息与摄像头拍摄的拍摄图像；

对所述第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，所述方位描述信息为用户在所述拍摄图像中所指示的搜索范围的方向信息和位置信息；

根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围；

识别所述搜索范围内的搜索内容；

搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

作为一种可选的实施方式，在本发明实施例第一方面中，所述根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围，包括：

在显示屏上输出所述拍摄图像，并根据所述方位描述信息，在所述拍摄图像中显示第一选择框；

获取用户输入的第二语音信息；

若从所述第二语音信息中识别出确认指令，基于所述第一选择框确定所述搜索范围；

若从所述第二语音信息中识别出方位调整信息，根据所述方位调整信息，调整所述第一选择框的位置，直至检测到用户输入的所述确认指令时基于调整所述第一选择框的位置后获得的第二选择框确定所述搜索范围。

作为一种可选的实施方式，在本发明实施例第一方面中，在所述识别出所述搜索范围内的搜索内容之后，所述方法还包括：

在所述搜索范围内识别与所述搜索内容对应的答题区域；

判断能否从所述答题区域中识别出用户针对所述搜索内容填入的有效答题内容；

若能够识别出所述有效答题内容，执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容的步骤；以及，获取与所述搜索内容相匹配的答案信息，并根据所述答案信息对所述有效答题内容进行批改，以获得批改结果；输出所述批改结果。

作为一种可选的实施方式，在本发明实施例第一方面中，所述方法还包括：

若无法识别出所述有效答题内容，获取用户的历史搜题集；

判断所述用户的历史搜题集中是否存在与所述搜索内容匹配的历史搜索记录；

若存在所述历史搜索记录，输出所述历史搜索记录对应的答题提示信息；

检测用户输入的第三语音信息，若从所述第三语音信息中识别出搜题指令，执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容的步骤。

作为一种可选的实施方式，在本发明实施例第一方面中，所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容，包括：

判断所述搜索内容中是否包括所述若干搜索关键词中任一搜索关键词；

若否，搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；其中，所述推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题；

若是，从所述若干搜索关键词中提取出与所述搜索内容匹配的所有搜索关键词，以生成用户针对所述搜索内容的疑问关键词集合；搜索与所述疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容；搜索与所述搜索内容以及所述若干搜索关键词中其它搜索关键词相匹配的推送内容；其中，所述其它搜索关键词为所述若干搜索关键词中除去所述疑问关键词集合中所有搜索关键词的其余搜索关键词；输出所述知识点讲解内容以及所述推送内容。

本发明实施例第二方面公开一种电子设备，所述电子设备包括：

第一获取单元，用于获取用户输入的第一语音信息与摄像头拍摄的拍摄图像；

语音识别单元，用于对所述第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，所述方位描述信息为用户在所述拍摄图像中所指示的搜索范围的方向信息和位置信息；

定位单元，用于根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围；

内容识别单元，用于识别所述搜索范围内的搜索内容；

推送单元，用于搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述定位单元包括：

输出子单元，用于在显示屏上输出所述拍摄图像，并根据所述方位描述信息，在所述拍摄图像中显示第一选择框；

获取子单元，用于获取用户输入的第二语音信息；

第一定位子单元，用于在从所述第二语音信息中识别出确认指令时，基于所述第一选择框确定所述搜索范围；

第二定位子单元，用于在从所述第二语音信息中识别出方位调整信息时，根据所述方位调整信息，调整所述第一选择框的位置，直至检测到用户输入的所述确认指令时基于调整所述第一选择框的位置后获得的第二选择框确定所述搜索范围。

作为一种可选的实施方式，在本发明实施例第二方面中，所述电子设备还包括：

图像识别单元，用于在所述内容识别单元识别出所述搜索范围内的搜索内容之后，在所述搜索范围内识别与所述搜索内容对应的答题区域；

第一判断单元，用于判断能否从所述答题区域中识别出用户针对所述搜索内容填入的有效答题内容；若能够识别出所述有效答题内容，触发所述推送单元执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；

批改单元，用于获取与所述搜索内容相匹配的答案信息，并根据所述答案信息对所述有效答题内容进行批改，以获得批改结果；以及，输出所述批改单元获得的批改结果。

作为一种可选的实施方式，在本发明实施例第二方面中，所述电子设备还包括：

第二获取单元，用于在所述第一判断单元判定出无法识别出所述有效答题内容时，获取用户的历史搜题集；

第二判断单元，用于判断所述用户的历史搜题集中是否存在与所述搜索内容匹配的历史搜索记录；

输出单元，用于在所述第二判断单元判定出所述用户的历史搜题集中存在与所述搜索内容匹配的历史搜索记录时，输出所述历史搜索记录对应的答题提示信息；

检测单元，用于检测用户输入的第三语音信息；若从所述第三语音信息中识别出搜题指令，触发所述推送单元执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述推送单元包括：

判断子单元，用于判断所述搜索内容中是否包括所述若干搜索关键词中任一搜索关键词；

第一搜索输出子单元，用于在所述判断子单元的判断结果为否时，搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；其中，所述推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题；

第二搜索输出子单元，用于在所述判断子单元的判断结果为是时，从所述若干搜索关键词中提取出与所述搜索内容匹配的所有搜索关键词，以生成用户针对所述搜索内容的疑问关键词集合；以及，搜索与所述疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容；以及，搜索与所述搜索内容以及所述若干搜索关键词中其它搜索关键词相匹配的推送内容；其中，所述其它搜索关键词为所述若干搜索关键词中除去所述疑问关键词集合中所有搜索关键词的其余搜索关键词；以及，输出所述知识点讲解内容以及所述推送内容。

本发明实施例第三方面公开一种电子设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的一种搜题方法。

本发明实施例第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的一种搜题方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

本发明实施例中，通过获取用户输入的语音信息与摄像头拍摄的拍摄图像，根据语音信息中包括的方位描述信息，确定出拍摄图像中的搜索范围，能够采用语音控制与图像识别相结合的方式快速地识别出用户语音指定的搜索内容，大大提高了搜题的准确性，并且，通过搜索并输出与搜索关键词以及搜索内容相匹配的推送内容，能够基于用户的搜题意图，提供符合用户搜题需求的推送内容。此外，无需用户语音复述搜索内容来使得输入的语音信息与搜索内容相匹配，能够在搜索内容中包含数学公式、外文符号等难以语音复述的文本内容时，减少不必要的搜题和口误纠正的步骤，提高了搜题效率，进而改善了用户体验。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种搜题方法的流程示意图；

图2是本发明实施例公开的另一种搜题方法的流程示意图；

图3是本发明实施例公开的另一种搜题方法的流程示意图；

图4是本发明实施例公开的一种电子设备的结构示意图；

图5是本发明实施例公开的另一种电子设备的结构示意图；

图6是本发明实施例公开的另一种电子设备的结构示意图；

图7是本发明实施例公开的另一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象，而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种搜题方法及电子设备，能够准确的识别出用户指定的搜索内容，提高搜题的准确性。以下结合附图进行详细描述。

实施例一

请参阅图1，图1是本发明实施例公开的一种搜题方法的流程示意图。如图1所示，该搜题方法可以包括以下步骤。

101、电子设备获取用户输入的第一语音信息与摄像头拍摄的拍摄图像。

本发明实施例公开的搜题方法适用于智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑、UMPC(Ultra-mobile Personal Computer，超级移动个人计算机)、上网本以及移动互联网设备、PAD等包括触摸屏的电子设备中，具体地，还适用于上述电子设备内的Web应用、APP或者专用软件。本发明实施例中用于拍摄图像的摄像头可设置于电子设备配有显示屏的一面。

102、电子设备对第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词。

本发明实施例中，方位描述信息为用户在拍摄图像中所指示的搜索范围的方向信息和位置信息。比如，方位描述信息可以为“图像中间”、“左边”、或者“右边”等。

103、电子设备根据方位描述信息，从拍摄图像中确定搜索范围。

104、电子设备识别搜索范围内的搜索内容。

105、电子设备搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。

本发明实施例中，举例来说，若用户输入的语音信息为“左边的题目怎么做”，则电子设备可以识别出方位描述信息为“左边”，搜索关键词为“怎么做”。根据方位描述信息，电子设备在拍摄图像的左边区域确定搜索范围，并识别出搜索范围内的待搜索题目；根据搜索关键词，电子设备可以获知用户的搜题意图为获取答案信息，因此，电子设备最终将搜索并输出与待搜索题目匹配的答案信息，从而结合拍摄图像和用户的语音信息来确定用户完整的搜题意图，并输出相应的推送内容。

作为一种可选的实施方式，在步骤101之前，还可以包括以下步骤：

电子设备在处于待机模式时，检测电子设备的显示屏面板所在平面与垂直平面之间的夹角；电子设备判断显示屏面板所在平面与垂直平面之间的夹角是否位于对应于搜题模式的预设夹角范围内；若是，电子设备输出用于请求开启搜题模式的语音询问信息；电子设备在检测到用户针对语音询问信息输入的语音确认信息时，触发搜题模式，并开启摄像头。

可见，实施可选的实施方式，通过检测电子设备的显示屏面板所在平面与垂直平面之间的夹角，在电子设备处于垂直摆放的状态(比如显示屏面板所在平面与垂直平面之间的夹角为90°)时，询问用户是否进入搜题模式，并在获得确认信息时开启摄像头，能够在用户无需搜题时保持摄像头的关闭状态，并根据电子设备的摆放状态主动唤醒搜题模式，降低了电子设备的功耗。

可见，实施图1所描述的方法，通过获取用户输入的语音信息与摄像头拍摄的拍摄图像，根据语音信息中包括的方位描述信息，确定出拍摄图像中的搜索范围，能够采用语音控制与图像识别相结合的方式快速地识别出用户语音指定的搜索内容，大大提高了搜题的准确性，并且，通过搜索并输出与搜索关键词以及搜索内容相匹配的推送内容，能够基于用户的搜题意图，提供符合用户搜题需求的推送内容。此外，无需用户语音复述搜索内容来使得输入的语音信息与搜索内容相匹配，能够在搜索内容中包含数学公式、外文符号等难以语音复述的文本内容时，减少不必要的搜题和口误纠正的步骤，提高了搜题效率，进而改善了用户体验。

实施例二

请参阅图2，图2是本发明实施例公开的另一种搜题方法的流程示意图。如图2所示，该搜题方法可以包括以下步骤。

201、电子设备获取用户输入的第一语音信息与摄像头拍摄的拍摄图像。

202、电子设备对第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词。

203、电子设备在显示屏上输出拍摄图像，并根据方位描述信息，在拍摄图像中显示第一选择框。

204、电子设备获取用户输入的第二语音信息。

205、电子设备在从第二语音信息中识别出确认指令时，基于第一选择框确定搜索范围。

可见，实施上述步骤203～步骤205，通过在显示屏上以选择框的形式显示根据用户语音指定的方位描述信息所初步定位的搜索范围，以供用户进行搜索范围确认，能够保证定位出的搜索范围的准确性，避免对不符合用户搜索需求的搜索内容进行检索。

作为一种可选的实施方式，电子设备在从第二语音信息中识别出方位调整信息时，根据方位调整信息，调整第一选择框的位置，直至检测到用户输入的确认指令时基于调整第一选择框的位置后获得的第二选择框确定搜索范围。其中，方位调整信息与上述的方位描述信息类似，用于指示第一选择框的位置调整方向，比如，“向上”、“向下”等。

可见，实施可选的实施方式，在根据用户语音指定的方位描述信息初步定位出搜索范围之后，通过识别出用户再次语音输入的方位调整信息，对初步定位的搜索范围进行位置调整，直至检测到用户输入的确认指令后确定最终的搜索范围，能够协助用户基于自身的搜索需求调整搜索范围，并且，基于语音交互控制选择框位置的方式，提高了调整搜索范围的灵活性和可操作性。

作为另一种可选的实施方式，还可以基于显示屏的触控功能，在步骤203之后，包括以下步骤：

电子设备在检测到手指在显示屏上的滑动操作时，获取手指滑动轨迹信息；根据手指滑动轨迹信息，电子设备判断手指在显示屏上的滑动步长值是否大于或者等于预设步长值；若是，根据手指滑动轨迹信息，电子设备识别出手指滑动方向以及手指滑动距离；电子设备控制第一选择框沿着手指滑动方向移动与手指滑动距离对应的选择框位移；在检测到确认指令时，电子设备根据调整第一选择框的位置后获得的第二选择框，确定搜索范围，其中，确认指令可以在检测到手指的双击操作时触发，也可以通过识别用户输入的语音信息所获得。

其中，可选的，确定与手指滑动距离对应的选择框位移的方式具体可以为：根据手指滑动轨迹信息，获取手指在显示屏上的滑动起点坐标以及滑动终点坐标；根据滑动起点坐标和滑动终点坐标之间对应的直线距离值，基于预设转化系数推算出与上述直线距离值成正比相关的选择框位移。可见，还通过检测用户在显示屏上的手指滑动操作来调整第一选择框的位置，进一步提高了调整搜索范围的灵活性和可操作性。

还可选的，电子设备还可以在检测到手指对第一选择框上的多个触控点中任一触控点的拖动操作时，根据拖动操作指示的拖动方向以及拖动时长对应的调整位移，调整第一选择框的大小，从而调整第一选择框所截取的搜索范围，其中，拖动时长为从开始检测到对上述任一触控点的压力值大于或等于预设压力阈值的时间点到检测到对上述任一触控点的压力值小于预设压力阈值的时间点之间对应的时长。

206、电子设备识别搜索范围内的搜索内容。

207、电子设备在搜索范围内识别与搜索内容对应的答题区域。

208、电子设备判断能否从答题区域中识别出用户针对搜索内容填入的有效答题内容，若是，执行步骤209～步骤211。

作为一种可选的实施方式，电子设备在无法从答题区域中识别出用户针对搜索内容填入的有效答题内容时，获取用户的历史搜题集；电子设备判断用户的历史搜题集中是否存在与搜索内容匹配的历史搜索记录；若存在上述历史搜索记录，电子设备输出与上述历史搜索记录对应的答题提示信息；电子设备检测用户输入的第三语音信息，若从第三语音信息中识别出搜题指令，执行步骤211。

可见，实施可选的实施方式，若用户未在搜索内容对应的答题区域进行作答，则基于用户的搜题历史判断用户是否搜索过当前搜索内容，若是，能够在输出推送内容之前，输出答题提示信息以供用户参考解答思路，有利于提高用户的学习效果；此外，由于答题提示信息可以是用户针对相应的搜索内容所记录的笔记，还能够基于不同用户的思考习惯与知识储备，来满足不同用户的个性化学习需求。

209、电子设备获取与搜索内容相匹配的答案信息，并根据答案信息对有效答题内容进行批改，以获得批改结果。

210、电子设备输出批改结果。

可见，实施上述步骤207～步骤210，通过在搜索范围内识别出搜索内容对应的答题区域，并对用户在答题区域填入的答题信息进行批改，以输出批改结果，能够辅助用户根据自身的答题信息和批改结果针对性地参考与学习推送内容，有利于提高用户的学习效果。

211、电子设备搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。

可见，实施图2所描述的方法，能够基于语音交互控制选择框位置的方式，保证定位出的搜索范围的准确性，避免对不符合用户搜索需求的搜索内容进行检索，提高了调整搜索范围的灵活性和可操作性；进一步地，能够在输出推送内容之前，基于不同用户的思考习惯与知识储备，输出答题提示信息以供用户参考解答思路，满足了不同用户的个性化学习需求，还能够辅助用户根据自身的答题信息和批改结果针对性地参考与学习推送内容，有利于提高用户的学习效果。

实施例三

请参阅图3，图3是本发明实施例公开的另一种搜题方法的流程示意图。如图3所示，该搜题方法可以包括以下步骤。

步骤301～步骤310；其中，针对步骤301～步骤310的描述，请参照实施例二中针对步骤201～步骤210的详细描述，本发明实施例不再赘述。

311、电子设备判断搜索内容中是否包括若干搜索关键词中任一搜索关键词，若是，执行步骤313～步骤315；若否，执行步骤312。

312、电子设备搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。

本发明实施例中，推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题。

312、电子设备从上述若干搜索关键词中提取出与搜索内容匹配的所有搜索关键词，以生成用户针对搜索内容的疑问关键词集合。

313、电子设备搜索与疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容，以及，搜索与搜索内容以及上述若干搜索关键词中其它搜索关键词相匹配的推送内容。

本发明实施例中，搜索关键词可以为用户针对搜索内容所指定的疑问内容，比如，对于搜索题目“利用勾股定理求线段的长度”中，用户指定的搜索关键词可以为“勾股定理”；或者，对于搜索题目“求解学生成绩的平方差和标准差”中，用户指定的搜索内容可以为“平方差”和“标准差”。因此，通过生成一个疑问关键词集合，可以基于用户在搜索内容中指定的具体疑难知识点提供针对性的知识点讲解内容。

本发明实施例中，其它搜索关键词为上述若干搜索关键词中除去疑问关键词集合中所有搜索关键词的其余搜索关键词。可以理解，其它搜索关键词还可以用于指定用户的其它搜索意图，比如，若用户想要获得更多关于搜索内容的学习资源，搜索关键词可以包括“练习题”、“学习视频”、或者“关联知识点”等。

314、电子设备输出上述知识点讲解内容以及推送内容。

本发明实施例中，举例来说，若电子设备识别出用户输入的第一语音信息为“我想查图里最上面一道题目的答案，还有勾股定理是什么意思？”，相应地，可以获得方位描述信息“最上面一道题目”，搜索关键词“勾股定理”和“答案”；进一步假设电子设备根据方位描述信息，识别出搜索内容“已知直角三角形俩直角边长度分别为A和B，利用勾股定理求解该直角三角形的斜边长度”，那么电子设备最终输出的推送内容将会包括对“勾股定理“的知识点讲解内容和搜索内容的答案信息。

可见，实施上述步骤311～步骤314，通过对用户输入的语音信息所包括的若干搜索关键词进行分析，能够在从若干搜索关键词中获知用户在搜索内容中指定的具体疑难知识点时，为用户提供针对性的知识点讲解内容；还能够在从若干搜索关键词中获知用户的资源搜索意图时，为用户提供相应的学习资源，大大丰富推送给用户的学习内容。

可见，实施图3所描述的方法，能够在从若干搜索关键词中获知用户在搜索内容中指定的具体疑难知识点时，为用户提供针对性的知识点讲解内容；还能够在从若干搜索关键词中获知用户的资源搜索意图时，为用户提供相应的学习资源，大大丰富了推送给用户的学习内容。

实施例四

请参阅图4，图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示，该电子设备可以包括：

第一获取单元401，用于获取用户输入的第一语音信息与摄像头拍摄的拍摄图像。

语音识别单元402，用于对第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，方位描述信息为用户在拍摄图像中所指示的搜索范围的方向信息和位置信息。

定位单元403，用于根据方位描述信息，从拍摄图像中确定搜索范围。

内容识别单元404，用于识别搜索范围内的搜索内容。

推送单元405，用于搜索并输出与若干搜索关键词以及搜索内容相匹配的推送内容。

作为一种可选的实施方式，电子设备还可以包括唤醒单元，用于在电子设备处于待机模式时，检测电子设备的显示屏面板所在平面与垂直平面之间的夹角；判断显示屏面板所在平面与垂直平面之间的夹角是否位于对应于搜题模式的预设夹角范围内；若是，输出用于请求开启搜题模式的语音询问信息；在检测到用户针对语音询问信息输入的语音确认信息时，触发搜题模式，并开启摄像头。

可见，实施可选的实施方式，通过检测电子设备的显示屏面板所在平面与垂直平面之间的夹角，在电子设备处于垂直摆放的状态(比如显示屏面板所在平面与垂直平面之间的夹角为90°)时，询问用户是否进入搜题模式，并在获得确认信息时开启摄像头，能够在用户无需搜题时保持摄像头的关闭状态，并根据电子设备的摆放状态主动唤醒搜题模式，降低了电子设备的功耗。

可见，实施图4所描述的电子设备，通过获取用户输入的语音信息与摄像头拍摄的拍摄图像，根据语音信息中包括的方位描述信息，确定出拍摄图像中的搜索范围，能够采用语音控制与图像识别相结合的方式快速地识别出用户语音指定的搜索内容，大大提高了搜题的准确性，并且，通过搜索并输出与搜索关键词以及搜索内容相匹配的推送内容，能够基于用户的搜题意图，提供符合用户搜题需求的推送内容。此外，无需用户语音复述搜索内容来使得输入的语音信息与搜索内容相匹配，能够在搜索内容中包含数学公式、外文符号等难以语音复述的文本内容时，减少不必要的搜题和口误纠正的步骤，提高了搜题效率，进而改善了用户体验。

实施例五

请参阅图5，图5是本发明实施例公开的另一种电子设备的结构示意图。其中，图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较，图5所示的电子设备还可以包括图像识别单元406、第一判断单元407以及批改单元408，其中：

定位单元403，包括：

输出子单元4031，用于在显示屏上输出拍摄图像，并根据方位描述信息，在拍摄图像中显示第一选择框。

获取子单元4032，用于获取用户输入的第二语音信息。

第一定位子单元4033，用于在从第二语音信息中识别出确认指令时，基于第一选择框确定搜索范围。

第二定位子单元4034，用于在从第二语音信息中识别出方位调整信息时，根据方位调整信息，调整第一选择框的位置，直至检测到用户输入的确认指令时基于调整第一选择框的位置后获得的第二选择框确定搜索范围。

作为另一种可选的实施方式，基于显示屏的触控功能，定位单元403，还可以用于：

当检测到手指在显示屏上的滑动操作时，获取手指滑动轨迹信息；根据手指滑动轨迹信息，判断手指在显示屏上的滑动步长值是否大于或者等于预设步长值；若是，根据手指滑动轨迹信息，识别出手指滑动方向以及手指滑动距离；控制第一选择框沿着手指滑动方向移动与手指滑动距离对应的选择框位移；在检测到确认指令时，根据调整第一选择框的位置后获得的第二选择框，确定搜索范围，其中，确认指令可以在检测到手指的双击操作时触发，也可以通过识别用户输入的语音信息所获得。

其中，可选的，确定与手指滑动距离对应的选择框位移的方式具体可以为：根据手指滑动轨迹信息，获取手指在显示屏上的滑动起点坐标以及滑动终点坐标；根据滑动起点坐标和滑动终点坐标之间对应的直线距离值，基于预设转化系数推算出与上述直线距离值成正比相关的选择框位移。可见，还通过检测用户在显示屏上的手指滑动操作来调整第一选择框的位置，进一步提高了调整搜索范围的灵活性和可操作性。

还可选的，定位单元403还可以用于在检测到手指对第一选择框上的多个触控点中任一触控点的拖动操作时，根据拖动操作指示的拖动方向以及拖动时长对应的调整位移，调整第一选择框的大小，从而调整第一选择框所截取的搜索范围，其中，拖动时长为从开始检测到对上述任一触控点的压力值大于或等于预设压力阈值的时间点到检测到对上述任一触控点的压力值小于预设压力阈值的时间点之间对应的时长。

图像识别单元406，用于在内容识别单元404识别出搜索范围内的搜索内容之后，在搜索范围内识别与搜索内容对应的答题区域。

第一判断单元407，用于判断能否从答题区域中识别出用户针对搜索内容填入的有效答题内容；若能够识别出有效答题内容，触发推送单元405执行搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。

批改单元408，用于获取与搜索内容相匹配的答案信息，并根据答案信息对有效答题内容进行批改，以获得批改结果；以及，输出批改单元获得的批改结果。

作为一种可选的实施方式，电子设备还可以包括：

第二获取单元，用于在第一判断单元407判定出无法识别出有效答题内容时，获取用户的历史搜题集。

第二判断单元，用于判断用户的历史搜题集中是否存在与搜索内容匹配的历史搜索记录。

输出单元，用于在第二判断单元判定出用户的历史搜题集中存在与搜索内容匹配的历史搜索记录时，输出历史搜索记录对应的答题提示信息。

检测单元，用于检测用户输入的第三语音信息；若从第三语音信息中识别出搜题指令，触发推送单元405执行搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容。

可见，实施图5所描述的电子设备，能够基于语音交互控制选择框位置的方式，保证定位出的搜索范围的准确性，避免对不符合用户搜索需求的搜索内容进行检索，提高了调整搜索范围的灵活性和可操作性；进一步地，能够在输出推送内容之前，基于不同用户的思考习惯与知识储备，输出答题提示信息以供用户参考解答思路，满足了不同用户的个性化学习需求，还能够辅助用户根据自身的答题信息和批改结果针对性地参考与学习推送内容，有利于提高用户的学习效果。

实施例六

请参阅图6，图6是本发明实施例公开的另一种电子设备的结构示意图。其中，图6所示的电子设备是由图5所示的电子设备进行优化得到的。与图5所示的电子设备相比较，图6所示的电子设备中：

推送单元405，包括：

判断子单元4051，用于判断搜索内容中是否包括上述若干搜索关键词中任一搜索关键词；

第一搜索输出子单元4052，用于在判断子单元4051的判断结果为否时，搜索并输出与上述若干搜索关键词以及搜索内容相匹配的推送内容；其中，推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题；

第二搜索输出子单元4053，用于在判断子单元4051的判断结果为是时，从上述若干搜索关键词中提取出与搜索内容匹配的所有搜索关键词，以生成用户针对搜索内容的疑问关键词集合；以及，搜索与疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容；以及，搜索与搜索内容以及上述若干搜索关键词中其它搜索关键词相匹配的推送内容；其中，其它搜索关键词为上述若干搜索关键词中除去疑问关键词集合中所有搜索关键词的其余搜索关键词；以及，输出上述知识点讲解内容以及推送内容。

可见，实施图6所描述的电子设备，能够在从若干搜索关键词中获知用户在搜索内容中指定的具体疑难知识点时，为用户提供针对性的知识点讲解内容；还能够在从若干搜索关键词中获知用户的资源搜索意图时，为用户提供相应的学习资源，大大丰富了推送给用户的学习内容。

实施例七

请参阅图7，图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示，该电子设备可以包括：

存储有可执行程序代码的存储器701；

与存储器701耦合的处理器702；

其中，处理器702调用存储器701中存储的可执行程序代码，执行图1～图3所示的任意一种搜题方法。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1～图3任意一种搜题方法。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台，该应用发布平台用于发布计算机程序产品，其中，当上述计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种搜题方法及电子设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (12)

1.一种搜题方法，其特征在于，所述方法包括：

获取用户输入的第一语音信息与摄像头拍摄的拍摄图像；

对所述第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，所述方位描述信息为用户在所述拍摄图像中所指示的搜索范围的方向信息和位置信息；

根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围；

识别所述搜索范围内的搜索内容；

搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

2.根据权利要求1所述的方法，其特征在于，所述根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围，包括：

在显示屏上输出所述拍摄图像，并根据所述方位描述信息，在所述拍摄图像中显示第一选择框；

获取用户输入的第二语音信息；

若从所述第二语音信息中识别出确认指令，基于所述第一选择框确定所述搜索范围；

若从所述第二语音信息中识别出方位调整信息，根据所述方位调整信息，调整所述第一选择框的位置，直至检测到用户输入的所述确认指令时基于调整所述第一选择框的位置后获得的第二选择框确定所述搜索范围。

3.根据权利要求1或2所述的方法，其特征在于，在所述识别出所述搜索范围内的搜索内容之后，所述方法还包括：

在所述搜索范围内识别与所述搜索内容对应的答题区域；

判断能否从所述答题区域中识别出用户针对所述搜索内容填入的有效答题内容；

若能够识别出所述有效答题内容，执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容的步骤；以及，获取与所述搜索内容相匹配的答案信息，并根据所述答案信息对所述有效答题内容进行批改，以获得批改结果；输出所述批改结果。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

若无法识别出所述有效答题内容，获取用户的历史搜题集；

判断所述用户的历史搜题集中是否存在与所述搜索内容匹配的历史搜索记录；

若存在所述历史搜索记录，输出所述历史搜索记录对应的答题提示信息；

检测用户输入的第三语音信息，若从所述第三语音信息中识别出搜题指令，执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容的步骤。

5.根据权利要求1～4任一项所述的方法，其特征在于，所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容，包括：

判断所述搜索内容中是否包括所述若干搜索关键词中任一搜索关键词；

若否，搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；其中，所述推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题；

若是，从所述若干搜索关键词中提取出与所述搜索内容匹配的所有搜索关键词，以生成用户针对所述搜索内容的疑问关键词集合；搜索与所述疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容；搜索与所述搜索内容以及所述若干搜索关键词中其它搜索关键词相匹配的推送内容；其中，所述其它搜索关键词为所述若干搜索关键词中除去所述疑问关键词集合中所有搜索关键词的其余搜索关键词；输出所述知识点讲解内容以及所述推送内容。

6.一种电子设备，其特征在于，所述电子设备包括：

第一获取单元，用于获取用户输入的第一语音信息与摄像头拍摄的拍摄图像；

语音识别单元，用于对所述第一语音信息进行语义识别处理，获得方位描述信息和用于描述用户的搜题意图的若干搜索关键词；其中，所述方位描述信息为用户在所述拍摄图像中所指示的搜索范围的方向信息和位置信息；

定位单元，用于根据所述方位描述信息，从所述拍摄图像中确定所述搜索范围；

内容识别单元，用于识别所述搜索范围内的搜索内容；

推送单元，用于搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

7.根据权利要求6所述的电子设备，其特征在于，所述定位单元包括：

输出子单元，用于在显示屏上输出所述拍摄图像，并根据所述方位描述信息，在所述拍摄图像中显示第一选择框；

获取子单元，用于获取用户输入的第二语音信息；

第一定位子单元，用于在从所述第二语音信息中识别出确认指令时，基于所述第一选择框确定所述搜索范围；

第二定位子单元，用于在从所述第二语音信息中识别出方位调整信息时，根据所述方位调整信息，调整所述第一选择框的位置，直至检测到用户输入的所述确认指令时基于调整所述第一选择框的位置后获得的第二选择框确定所述搜索范围。

8.根据权利要求6或7所述的电子设备，其特征在于，所述电子设备还包括：

图像识别单元，用于在所述内容识别单元识别出所述搜索范围内的搜索内容之后，在所述搜索范围内识别与所述搜索内容对应的答题区域；

第一判断单元，用于判断能否从所述答题区域中识别出用户针对所述搜索内容填入的有效答题内容；若能够识别出所述有效答题内容，触发所述推送单元执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；

批改单元，用于获取与所述搜索内容相匹配的答案信息，并根据所述答案信息对所述有效答题内容进行批改，以获得批改结果；以及，输出所述批改单元获得的批改结果。

9.根据权利要求8所述的电子设备，其特征在于，所述电子设备还包括：

第二获取单元，用于在所述第一判断单元判定出无法识别出所述有效答题内容时，获取用户的历史搜题集；

第二判断单元，用于判断所述用户的历史搜题集中是否存在与所述搜索内容匹配的历史搜索记录；

输出单元，用于在所述第二判断单元判定出所述用户的历史搜题集中存在与所述搜索内容匹配的历史搜索记录时，输出所述历史搜索记录对应的答题提示信息；

检测单元，用于检测用户输入的第三语音信息；若从所述第三语音信息中识别出搜题指令，触发所述推送单元执行所述搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容。

10.根据权利要求6～9任一项所述的电子设备，其特征在于，所述推送单元包括：

判断子单元，用于判断所述搜索内容中是否包括所述若干搜索关键词中任一搜索关键词；

第一搜索输出子单元，用于在所述判断子单元的判断结果为否时，搜索并输出与所述若干搜索关键词以及所述搜索内容相匹配的推送内容；其中，所述推送内容的类型至少包括答案解析、教学视频、关联知识点、易错点分析和关联练习题；

第二搜索输出子单元，用于在所述判断子单元的判断结果为是时，从所述若干搜索关键词中提取出与所述搜索内容匹配的所有搜索关键词，以生成用户针对所述搜索内容的疑问关键词集合；以及，搜索与所述疑问关键词集合中每一个搜索关键词匹配的知识点讲解内容；以及，搜索与所述搜索内容以及所述若干搜索关键词中其它搜索关键词相匹配的推送内容；其中，所述其它搜索关键词为所述若干搜索关键词中除去所述疑问关键词集合中所有搜索关键词的其余搜索关键词；以及，输出所述知识点讲解内容以及所述推送内容。

11.一种电子设备，其特征在于，所述电子设备包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，用于执行权利要求1～5任一项所述的一种搜题方法。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储计算机程序，其中，所述计算机程序使得计算机执行权利要求1～5任一项所述的一种搜题方法。