CN111182255B - 一种基于音箱的学习辅助方法及音箱 - Google Patents

Abstract

一种基于音箱的学习辅助方法，该方法包括：搜索与目标问题对应的解答内容；目标问题是由音箱的使用者输入的；若搜索不到解答内容，则向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接；或者，若搜索到解答内容，且接收到的反馈信息指示解答内容与目标问题不符，则向与音箱绑定的移动终端发起视频通话请求，以视频通话请求建立音箱与终端设备的视频通信连接；反馈信息是由音箱的使用者针对解答内容输入的；通过视频通信连接向终端设备发送目标问题。实施本发明实施例，能够在音箱无法解答用户的疑问时，使得与音箱绑定的终端设备的使用者可以通过视频通话连接直接对疑问进行解答。

Description

一种基于音箱的学习辅助方法及音箱

技术领域

本发明涉及学习辅助技术领域，具体涉及一种基于音箱的学习辅助方法及音箱。

背景技术

智能音箱由于具有语音交互功能，通常被用作智能个人助手、智能家居入口或者学习辅助工具。以用作学习辅助工具为例，智能音箱可以接收学生在碰到疑问时输入的语音信息。通过语音识别，智能音箱可以识别出该语音信息中包含的问题，从而搜索该问题的答案，最后将答案通过语音、文字或者视频等形式输出。

然而，在实践中发现，由于实际应用中可能存在的各种干扰，语音识别的结果可能存在一定的误差，若误差较大，则会影响搜索的准确性，使得智能音箱无法搜索出能够解答学生疑问的答案，导致学生无法充分利用智能音箱的学习辅助功能，用户体验较差。

发明内容

本发明实施例公开了一种基于音箱的学习辅助方法及音箱，能够在音箱无法解答用户的疑问时，使得与音箱绑定的终端设备的使用者可以通过视频通话连接直接对疑问进行解答。

本发明实施例第一方面公开一种基于音箱的学习辅助方法，所述方法包括：

搜索与目标问题对应的解答内容；所述目标问题是由所述音箱的使用者输入的；

若搜索不到所述解答内容，则向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，

若搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符，则向与音箱绑定的移动终端发起视频通话请求，以所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的；

通过所述视频通信连接向所述终端设备发送所述目标问题。

作为一种可选的实施方式，在本发明实施例第一方面中，在所述搜索与获取到的目标问题对应的解答内容之前，所述方法还包括：

控制所述音箱的摄像装置翻转至第一预设姿态；当所述摄像装置处于所述第一预设姿态时，所述摄像装置的摄像孔朝向所述音箱的放置面；

控制所述摄像装置以所述第一预设姿态拍摄置于所述放置面上的书本，以获得书本图像；

从所述书本图像中识别出所述目标问题。

作为一种可选的实施方式，在本发明实施例第一方面中，在所述根据所述视频通话请求建立所述视频通信连接之后，以及在所述通过所述视频通信连接向所述终端设备发送所述目标问题之前，所述方法还包括：

控制所述音箱的摄像装置从所述第一预设姿态翻转至第二预设姿态；当所述摄像装置处于所述第二预设姿态时，所述摄像装置的摄像孔朝向所述音箱的显示屏幕前方；

控制所述摄像装置以所述第二预设姿态拍摄所述音箱的使用者的用户图像；

通过所述视频通信连接向所述终端设备发送所述用户图像；

以及，所述通过所述视频通信连接向所述终端设备发送所述目标问题，包括：

检测所述音箱的麦克风是否采集到包含预设关键词的语音信号；

若是，则控制所述音箱的摄像装置从所述第二预设姿态翻转至所述第一预设姿态；

将所述摄像装置处于所述第一预设姿态时拍摄到的所述书本图像通过所述视频通信连接发送至所述终端设备。

作为一种可选的实施方式，在本发明实施例第一方面中，所述方法还包括：

判断所述音箱与所述终端设备是否接入同一无线网络；

若否，执行所述向与音箱绑定的移动终端发起视频通话请求，以所述视频通话请求建立所述音箱与所述终端设备的视频通信连接的步骤。

作为一种可选的实施方式，在本发明实施例第一方面中，所述方法还包括：

若所述音箱与所述终端设备接入同一无线网络，则保存所述目标问题；

在检测到结束指令时，向所述终端设备发送通知信息；所述通知信息用于指示所述终端设备的使用者前往所述音箱的放置地点；

在检测到所述终端设备与所述音箱之间的距离小于预设距离阈值时，调取并输出所述目标问题。

本发明实施例第二方面公开一种音箱，包括：搜索单元，用于搜索与目标问题对应的解答内容；所述目标问题是由所述音箱的使用者输入的；

请求单元，用于在所述搜索单元搜索不到所述解答内容时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，在所述搜索单元搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的；

通信单元，用于通过所述视频通信连接向所述终端设备发送所述目标问题。

作为一种可选的实施方式，在本发明实施例第二方面中，所述音箱还包括：

控制单元，用于在所述搜索单元搜索与目标问题对应的解答内容之前，控制所述音箱的摄像装置翻转至第一预设姿态；当所述摄像装置处于所述第一预设姿态时，所述摄像装置的摄像孔朝向所述音箱的放置面；以及，控制所述摄像装置以所述第一预设姿态拍摄置于所述放置面上的书本，以获得书本图像；

识别单元，用于从所述书本图像中识别出所述目标问题。

作为一种可选的实施方式，在本发明实施例第二方面中：

所述控制单元，还用于在所述请求单元根据所述视频通话请求建立所述视频通信连接之后，以及在所述通信单元通过所述视频通信连接向所述终端设备发送所述目标问题之前，控制所述音箱的摄像装置从所述第一预设姿态翻转至第二预设姿态；当所述摄像装置处于所述第二预设姿态时，所述摄像装置的摄像孔朝向所述音箱的显示屏幕前方；

以及，还用于控制所述摄像装置以所述第二预设姿态拍摄所述音箱的使用者的用户图像；

所述通信单元，还用于在所述请求单元根据所述视频通话请求建立所述视频通信连接之后，以及在所述通信单元通过所述视频通信连接向所述终端设备发送所述目标问题之前，通过所述视频通信连接向所述终端设备发送所述用户图像；

以及，所述通信单元，用于通过所述视频通信连接向所述终端设备发送所述用户图像的方式具体为：

所述通信单元，用于检测所述音箱的麦克风是否采集到包含预设关键词的语音信号；若是，则触发所述控制单元控制所述音箱的摄像装置从所述第二预设姿态翻转至所述第一预设姿态；以及，将所述摄像装置处于所述第一预设姿态时拍摄到的所述书本图像通过所述视频通信连接发送至所述终端设备。

作为一种可选的实施方式，在本发明实施例第二方面中，所述音箱还包括：

判断单元，用于判断所述音箱与所述终端设备是否接入同一无线网络；

所述请求单元，具体用于在搜索不到所述解答内容且所述判断单元判断出所述音箱与所述终端设备并非接入同一无线网络时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，在搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符以及所述判断单元判断出所述音箱与所述终端设备并非接入同一无线网络时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的。

作为一种可选的实施方式，在本发明实施例第二方面中，所述音箱还包括：

保存单元，用于在所述判断单元判断出所述音箱与所述终端设备接入同一无线网络时，保存所述目标问题；

所述通信单元，还用于在检测到结束指令时，向所述终端设备发送通知信息；所述通知信息用于指示所述终端设备的使用者前往所述音箱的放置地点；

输出单元，用于在检测到在检测到所述终端设备与所述音箱之间的距离小于预设距离阈值时，调取并输出所述目标问题。

本发明实施例第三方面公开一种音箱，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的任一项方法。

本发明第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的任一项方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行本发明实施例第一方面公开的任一项方法。

与现有技术相比，本发明实施例具有以下有益效果：

音箱可以先对目标问题进行搜索；并且，在搜索不到目标问题对应的解答内容，或者搜索出的解答内容与目标问题不符时，发起与预先绑定的终端设备之间的视频通信连接，使得终端设备的使用者可以直接与音箱的使用者进行视频通话，以解答音箱的使用者对目标问题的疑问。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种音箱的示例图；

图2是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图；

图3是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图；

图4是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图；

图5是本发明实施例公开的一种音箱的结构示意图；

图6是本发明实施例公开的另一种音箱的示意图；

图7是本发明实施例公开的另一种音箱的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种基于音箱的学习辅助方法，能够在音箱无法解答用户的疑问时，使得绑定的终端设备的使用者可以通过视频通话连接直接对疑问进行解答。以下分别进行详细说明。

为了更好地对本发明实施例公开的基于音箱的学习辅助方法进行介绍，下面先对本方法适用的音箱进行描述。请一并参阅图1，图1是本发明实施例公开的一种音箱的示例图。如图1所示，音箱主体10的一个侧面上可以设置有显示屏幕11。音箱还可以包括摄像装置20，摄像装置20可以升降，并且在摄像装置20升起后，摄像装置20还可以转动，从而改变摄像装置20的取景范围。例如，摄像装置20可以设置在主体10的顶部，摄像装置20可以绕平行于主体10顶部的转轴翻转，使得摄像装置20的取景范围至少可以从朝向音箱的放置平面(如图1所示)变换至朝向显示屏幕11前方。或者，摄像装置20也可以绕垂直于主体10顶部的转轴旋转，使得摄像装置20的取景范围包括以音箱为中心的一周。当摄像装置20降下时，可以将摄像装置20隐藏在主体10的凹槽内，使得音箱的造型更加美观。

实施例一

请参阅图2，图2是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图。如图2所示，该基于音箱的学习辅助方法可以包括以下步骤：

201、音箱搜索与目标问题对应的解答内容；若搜索到解答内容，执行步骤202；若搜索不到解答内容，执行步骤203。

在本发明实施例中，目标问题是由音箱的使用者输入的。音箱获取使用者输入的目标问题的方式具体可以包括但不限于：

方式一：音箱控制麦克风采集音箱的使用者输入的语音信息；对语音信息进行语音识别，以获得语音信息中包括的目标问题。

方式二：音箱控制摄像装置20拍摄书本图像；对书本图像进行图像识别，以获得书本图像中包括的目标问题。其中，上述的书本可以包括但不限于：课本、练习册、试卷、绘本等纸质学习材料。

方式三：音箱获取音箱的使用者通过显示屏幕11输入的目标问题。其中，显示屏幕11可以为触控屏幕，音箱的使用者可以直接通过触控屏幕输入目标问题。

音箱在获取到目标问题之后，可以在互联网、服务器、本地数据库等对目标问题进行搜索。搜索时，音箱可以进一步将目标问题拆分为的若干个关键词，在数据库中对关键词进行检索，并查找是否存在与上述的关键词对应的解答内容。若目标问题识别错误，则音箱搜索不到解答内容；或者，若目标问题对应的解答内容未收录进数据库，则音箱也可能搜索不到解答内容。

202、音箱输出解答内容，并接收音箱的使用者针对解答内容输入的反馈信息；若反馈信息指示解答内容与目标问题不符，执行步骤203；若反馈信息指示解答内容与目标问题相符，结束本流程。

在本发明实施例中，若查找到解答内容，则向音箱的使用者输出解答内容。其中，音箱输出解答内容的具体形式可以包括但不限于：语音、文字、图像、视频。

在本发明实施例中，音箱搜索出的解答内容可能与目标问题不符。例如，由于目标问题为包含数学表达式的数学题目时，搜索出的解答内容可能为物理、化学等其他学科的题目答案。因此，可以接收音箱的使用者针对解答内容输入的反馈信息，以进一步通过反馈信息确认搜索出的解答内容是否与目标问题相符。

音箱接收使用者针对解答内容输入的反馈信息的方式可以包括但不限于：

音箱通过显示屏幕11输出选择框，选择框中可以包含“解答内容符合目标问题”和“解答内容不符合目标内容”两个选项；音箱检测使用者按压显示屏幕11的触控操作，并确定该触控操作从上述两个选项中选定的选项。

或者，音箱也可以控制麦克风采集使用者通过语音输入的反馈信息；若识别出反馈信息中包含与符合目标问题相关的预设关键词，如“不对”，则确定反馈信息指示解答内容与目标问题相符；若识别出反馈信息中包含与不符合目标问题相关的关键词，如“对的”，则确定反馈信息指示解答内容与目标问题相符。

203、音箱向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接。

在本发明实施例中，与音箱绑定的终端设备可以包括但不限于：个人电脑、智能手机、平板电脑、另一智能音箱等。音箱与终端设备可以通过视频通信连接进行实时的语音和图像数据传输。

204、音箱通过视频通信连接向终端设备发送目标问题。

在本发明实施例中，终端设备的使用者(如家长)可以直接与音箱的使用者(如孩子)进行视频通话。音箱的麦克风可以采集孩子读出目标问题的语音信号，音箱将该包含目标问题的语音信号通过视频通讯连接发送至终端设备；或者，音箱的摄像装置20也可以拍摄记载有目标问题的书本页面，音箱将拍摄到的包含目标问题的图像通过视频通讯连接发送至终端设备。终端设备可以对接收到的包含目标问题的语音或者图像数据中的一种或者多种进行输出，使得终端设备的使用者可以针对输出的目标问题进行解答。

可见，在图2所描述的方法中，音箱可以通过图像、语音、触控屏直接输入等多种方式获取到待搜索的目标问题；并且，在搜索不到目标问题对应的解答内容，或者搜索出的解答内容与目标问题不符时，发起与预先绑定的终端设备之间的视频通信连接，使得终端设备的使用者可以直接与音箱的使用者进行视频通话，以解答音箱的使用者对目标问题的疑问。

实施例二

请参阅图3，图3是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图。如图3所示，该方法可以包括以下步骤：

301、音箱控制摄像装置翻转至第一预设姿态，并以第一预设姿态拍摄置于音箱的放置面上的书本，以获得书本图像。

在本发明实施例中，当摄像装置20处于第一预设姿态时，摄像装置20的摄像孔朝向音箱的放置面，使得摄像装置20可以拍摄到置于放置面上的书本，书本页面上可以记载有目标问题。例如，当音箱放置在桌面上时，音箱的前方还可以放置有一练习册，练习册上包含需要完成的作业题目。摄像装置20可以翻转至摄像装置20的主体与桌面平行的姿态(即第一预设姿态)，从而可以拍摄到练习册上的作业题目，使得音箱的使用者无需手动转动音箱主体或者翻转练习册。

302、音箱从书本图像中识别出目标问题。

在本发明实施例中，通过光学字符识别(Optical Character Recognition，OCR)等图像识别算法，可以从书本图像中识别出记载在书本页面上的文字内容，从而识别出目标问题。

作为一种可选的实施方式，当书本图像中包括两道或以上的题目时，从书本图像中识别出目标问题的方式可以包括但不限于：

方式一：音箱从书本图像中识别出手指或笔等预设的指定物，并确定该指定物在书本图像中指定的位置的图像坐标；

音箱根据书本图像中文字的行间距，对书本图像中的文字进行题目划分，得到若干个题目单元；其中，每个题目单元中包括若干个字符行，被划分至同一题目单元的若干个字符行之间的行间距均小于预设的行间距阈值；每个题目单元对应一道题目；

音箱根据各个题目单元在书本图像中的图像位置以及上述的图像坐标，将若干个题目单元中指定物指定的题目单元确定为目标题目。

方式二：音箱根据书本图像中文字的行间距，对书本图像中的文字进行题目划分，得到若干个题目单元，并根据各个题目单元在书本图像中的图像位置，对若干个题目单元进行排序；其中，每个题目单元中包括若干个字符行，被划分至同一题目单元的若干个字符行之间的行间距均小于预设的行间距阈值；每个题目单元对应一道题目；

音箱接收可穿戴设备发送的甩动信号；其中，可穿戴设备可以是智能手表、智能手环等，具体不做限定；甩动信号是由可穿戴设备在检测到第一甩动动作和第二甩动动作时向音箱发送的；第一甩动动作和第二甩动动作的甩动幅度超过预设的幅度阈值，且第一甩动动作的甩动方向与第二甩动动作的甩动方向相反；

音箱将若干个题目单元中排序序号与接收到的甩动信号的数量相对应的题目单元确定为目标图像。

示例性的，假设音箱放置在桌面上，音箱的显示屏幕11朝向用户。书桌上还放置有书本，音箱的摄像装置20处于第一预设姿态，可以拍摄到桌面上的书本。用户坐在书桌前写作业，作业为记载在书本上的题目，用户的手背上还可以佩戴有智能手表。音箱在接收到搜题指令时，控制摄像装置20拍摄书本，以得到书本图像。书本图像中包含三道题目，则音箱可以先根据行间距将三道题目识别为三个题目单元，并按照三个题目单元在书本图像中的图像位置，从上至下对三个题目单元进行排序，得到第一题目单元、第二题目单元和第三题目单元。用户可以通过上下甩动手臂进行题目选择，甩动N次表示选择书本图像中的第N道题，N为正整数。

303、音箱搜索与目标问题对应的解答内容；若搜索到解答内容，执行步骤304；若搜索不到解答内容，执行步骤305。

304、输出解答内容，并接收音箱的使用者针对解答内容输入的反馈信息；若反馈信息指示解答内容与目标问题不符，执行步骤305；若反馈信息指示解答内容与目标问题相符，结束本流程。

305、音箱向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接。

306、音箱控制摄像装置从所述第一预设姿态翻转至第二预设姿态，并控制摄像装置以第二预设姿态拍摄音箱的使用者的用户图像。

在本发明实施例中，当摄像装置20处于第二预设姿态时，摄像装置20的摄像孔朝向音箱的显示屏幕11前方。即，在建立视频通信连接之后，以及在通过视频连接发送目标问题之前，摄像装置20先拍摄音箱的使用者，以得到用户图像；并通过执行下述的步骤307，将用户图像发送至终端设备，使得终端设备的使用者可以先看到音箱的使用者，互相进行对话。

307、音箱通过视频通信连接终端设备发送用户图像。

308、音箱检测音箱的麦克风是否采集到包含预设关键词的语音信号；若是，执行步骤309；若否，继续执行步骤308。

在本发明实施例中，在执行步骤306～步骤307的过程中，音箱可以保持麦克风开启，并采集音箱的使用者输入的语音信号。音箱可以通过视频通信连接将采集到的语音信号与用户图像一同发送至终端设备；同时，还可以识别语音信号中是否包含预设关键词。其中，预设关键词可以为表示提问的关键词，如“怎么做”“不会”等。

若在语音信号中识别出预设关键词，确定音箱的使用者针对某一问题提出了疑问，因此执行下述的步骤309，控制摄像装置20翻转，使得摄像装置20可以拍摄到书本，从而拍摄到记载在书本上的目标问题。

309、音箱控制音箱的摄像装置从第二预设姿态翻转至第一预设姿态，并将摄像装置处于第一预设姿态时拍摄到所述书本图像通过视频通信连接发送至终端设备。

在本发明实施例中，目标问题是从摄像装置20处于第一预设姿态时拍摄到的书本图像中识别得出的。可以理解的是，在步骤309中，拍摄到的书本的图像也可以包含上述的目标问题。

可见，在图3所描述的方法中，音箱设备可以先控制摄像装置翻转至第一预设姿态并拍摄书本图像，从书本图像中识别出目标问题。并且在搜索不到解答内容或者解答内容与目标问题不符时，建立视频通信连接。在建立视频通信连接之后，先控制摄像装置翻转至第一预设姿态，使得终端设备的使用者可以通过视频通信连接先看到音箱的使用者，双方可以先进行打招呼等社交行为。在检测到音箱的使用者输入的语音信号中包含预设关键词时，再控制摄像装置从第二预设姿态翻转至第一预设姿态，从而可以再次拍摄到书本图像，并将包含在书本图像中的目标问题通过视频通信连接发送至终端设备。

实施例三

请参阅图4，图4是本发明实施例公开的一种基于音箱的学习辅助方法的流程示意图。如图4所示，该方法可以包括以下步骤：

401、音箱控制摄像装置翻转至第一预设姿态，并以第一预设姿态拍摄置于音箱的放置面上的书本，以获得书本图像。

402、音箱从书本图像中识别出目标问题。

403、音箱搜索与目标问题对应的解答内容；若搜索到解答内容，执行步骤404；若搜索不到解答内容，执行步骤405。

404、音箱输出解答内容，并接收音箱的使用者针对解答内容输入的反馈信息；若反馈信息指示解答内容与目标问题不符，执行步骤405；若反馈信息指示解答内容与目标问题相符，结束本流程。

405、音箱判断音箱与终端设备是否接入同一无线网络；若是，执行步骤406～步骤407；若否，执行步骤408～步骤412。

在本发明实施例中，音箱可以通过接入无线路由器搭建的无线网络，从而接入互联网。若音箱接入互联网，上述的步骤402从书本图像中识别出目标问题的实现方式可以为：音箱将书本图像上传至服务器；服务器对书本图像进行识别，将识别出的文字内容反馈至音箱；音箱从该文字内容中识别出目标问题。

无线路由器可以对通过该无线路由器接入互联网的设备进行管理，可以记录各个接入该无线路由器的设备的媒体存取控制位址(Media Access Control Address，MAC)。作为一种可选的实施方式，音箱可以向无线路由器发送终端设备的MAC位址，由无线路由器根据终端设备的MAC位址判断终端设备当前是否接入无线路由器，并且向音箱返回判断结果；若判断结果指示终端设备当前已接入无线路由器，则可以确定音箱与终端设备接入同一无线网络；若判断结果指示终端设备当前未接入无线路由器，则可以确定音箱与终端设备并非接入同一无线网络。

406、音箱保存目标问题，并在检测到结束指令时，向终端设备发送通知信息。

在本发明实施例中，结束指令可以由音箱的使用者通过语音输入，例如可以将“做完啦”等语句设置为结束指令。或者，结束指令也可以为计时结束时自动触发的指令，音箱在计时时长内可以执行上述的步骤401～步骤405，对目标问题进行搜索；其中，计时时长可以参考完成一道题目所需的时间进行设置，如设置为5分钟，也可以参考注意力保持集中的最长时间进行设置，如设置为25分钟。

通知信息用于指示终端设备的使用者前往音箱的放置地点。在执行上述的步骤405时，若判断出音箱与终端设备接入同一无线网络，则可以确定音箱与终端设备均位于无线路由器的覆盖范围之内，音箱与终端设备之间的距离一般不超过100米。此时，音箱与终端设备之间的距离较近，终端设备的使用者可以直接前往音箱的放置地点，对音箱的使用者进行指导。

407、音箱在检测到终端设备与音箱之间的距离小于预设距离阈值时，调取并输出目标问题。

在本发明实施例中，音箱可以扫描周边具有蓝牙功能的蓝牙设备，当扫描到的蓝牙设备中包括上述的终端设备时，可以确定终端设备与音箱之间的距离小于预设距离阈值；上述的预设距离阈值可以参考音箱的蓝牙模块能够支持的最远传输距离设置，如5米。其中，音箱可以通过调整蓝牙模块的输出功率，去调整蓝牙模块能够支持的最远传输距离，蓝牙模块的输出功率越大，蓝牙模块能够支持的最远传输距离越远。

执行上述的步骤406～步骤407，若音箱与终端设备接入同一无线网络，则在检测到结束指令，并且终端设备的使用者走近音箱之后，再输出音箱的使用者曾经搜索过的目标问题，使得终端设备的使用者可以直接对这些目标问题进行解答，无需进行视频通话，更加方便快捷。同时，在检测到结束指令之后再发送通知消息，可以在积攒了一定数量的目标问题之后再通知终端设备的使用者，可以减少向终端设备发送通知消息的次数，以免终端设备的使用者产生厌烦情绪。

408、音箱向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接。

步骤409～步骤412如实施例三中的步骤306～步骤309所示，以下内容不再赘述。

可见，在图4所描述的方法中，音箱可以在搜索不到解答内容或者解答内容与目标问题不符时，建立音箱与终端设备之间的视频通信连接，使得终端设备的使用者可以直接通过视频通信连接进行教学指导。此外，音箱在发起视频通话请求之前，先判断音箱与终端设备是否接入同一无线网络；若是，音箱与终端设备之间的距离较近，不发起视频通话请求，而是在接收到结束指令之后，通过通知信息指示终端设备的使用者前往音箱的放置地点；并且，在检测到终端设备的使用者走近音箱之后，输出预先保存的目标问题，以使终端设备的使用者针对目标问题进行当面解答，既可以解答音箱的使用者的疑问，也可以减轻终端设备的使用者的厌烦情绪。

实施例四

请参阅图5，图5是本发明实施例公开的一种音箱的结构示意图。如图5所示，该音箱可以包括：

搜索单元501，用于搜索与目标问题对应的解答内容；目标问题是由所述音箱的使用者输入的；其中，搜索单元501获取使用者输入的目标问题的方式具体可以包括但不限于：控制麦克风采集音箱的使用者输入的语音信息；对语音信息进行语音识别，以获得语音信息中包括的目标问题；或者，

控制摄像装置20拍摄书本图像；对书本图像进行图像识别，以获得书本图像中包括的目标问题；或者，

获取音箱的使用者通过显示屏幕11输入的目标问题。其中，显示屏幕11可以为触控屏幕，音箱的使用者可以直接通过触控屏幕输入目标问题。

请求单元502，用于在搜索单元501搜索不到解答内容时，向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接；或者，在搜索单元501搜索到解答内容，且接收到的反馈信息指示解答内容与目标问题不符时，向与所音箱定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接；

其中，反馈信息是由音箱的使用者针对解答内容输入的；可选的，可以输出两个分别对应于“符合”和“不符”的选项，检测音箱的使用者按压显示屏幕11的触控操作，并确定该触控操作从上述两个选项中选定的选项；或者，可以检测音箱的使用者通过语音输入的反馈信息。

通信单元503，用于通过视频通信连接向终端设备发送目标问题；其中，通信单元503可以对包含目标问题的语音或者图像数据中的一种或者多种进行输出，使得终端设备的使用者可以针对输出的目标问题进行解答。

实施如图5所示的音箱，可以通过图像、语音、触控屏直接输入等多种方式获取到待搜索的目标问题；并且，在搜索不到目标问题对应的解答内容，或者搜索出的解答内容与目标问题不符时，发起与预先绑定的终端设备之间的视频通信连接，使得终端设备的使用者可以直接与音箱的使用者进行视频通话，以解答音箱的使用者对目标问题的疑问。

实施例五

请参阅图6，图6是本发明实施例公开的另一种音箱的示意图。其中，图6所示的音箱是由图5所示的音箱进行优化得到的。如图6所示，该音箱包括：

控制单元504，用于在搜索单元501搜索与目标问题对应的解答内容之前，控制音箱的摄像装置20翻转至第一预设姿态；当摄像装置20处于第一预设姿态时，摄像装置20的摄像孔朝向音箱的放置面；以及，控制摄像装置20以第一预设姿态拍摄置于放置面上的书本，以获得书本图像。

识别单元505，用于从控制单元504拍摄到的书本图像中识别出目标问题，并触发搜索单元501执行搜索与目标问题对应的解答内容的操作。

在本发明实施例中，识别单元505从书本图像中识别出目标问题的方式可以包括但不限于：

识别单元505，用于从书本图像中识别出手指或笔等预设的指定物，并确定该指定物在书本图像中指定的位置的图像坐标；以及，根据书本图像中文字的行间距，对书本图像中的文字进行题目划分，得到若干个题目单元；其中，每个题目单元中包括若干个字符行，被划分至同一题目单元的若干个字符行之间的行间距均小于预设的行间距阈值；每个题目单元对应一道题目；以及，根据各个题目单元在书本图像中的图像位置以及上述的图像坐标，将若干个题目单元中指定物指定的题目单元确定为目标题目。

或者，识别单元505，用于根据书本图像中文字的行间距，对书本图像中的文字进行题目划分，得到若干个题目单元，并根据各个题目单元在书本图像中的图像位置，对若干个题目单元进行排序；其中，每个题目单元中包括若干个字符行，被划分至同一题目单元的若干个字符行之间的行间距均小于预设的行间距阈值；每个题目单元对应一道题目；以及，接收可穿戴设备发送的甩动信号；其中，可穿戴设备可以是智能手表、智能手环等，具体不做限定；甩动信号是由可穿戴设备在检测到第一甩动动作和第二甩动动作时向音箱发送的；第一甩动动作和第二甩动动作的甩动幅度超过预设的幅度阈值，且第一甩动动作的甩动方向与第二甩动动作的甩动方向相反；以及，将若干个题目单元中排序序号与接收到的甩动信号的数量相对应的题目单元确定为目标图像。

可选的，上述的控制单元504，还可以用于在请求单元502根据视频通话请求建立视频通信连接之后，以及在通信单元503通过视频通信连接向终端设备发送目标问题之前，控制音箱的摄像装置20从第一预设姿态翻转至第二预设姿态；当摄像装置20处于第二预设姿态时，摄像装置20的摄像孔朝向音箱的显示屏幕11前方；

以及，还用于控制摄像装置20以第二预设姿态拍摄音箱的使用者的用户图像。

上述的通信单元503，还用于在请求单元502根据视频通话请求建立视频通信连接之后，以及在通信单元503通过视频通信连接向终端设备发送目标问题之前，通过视频通信连接向终端设备发送用户图像；

以及，通信单元503用于通过视频通信连接向终端设备发送用户图像的方式具体为：

通信单元503，用于检测音箱的麦克风是否采集到包含预设关键词的语音信号；若是，则触发控制单元504控制音箱的摄像装置20从第二预设姿态翻转至第一预设姿态；以及，将摄像装置20处于第一预设姿态时拍摄到的书本图像通过视频通信连接发送至终端设备。

其中，上述的预设关键词可以为表示提问的关键词，如“怎么做”“不会”等。

进一步可选的，图6所示的音箱还可以包括：

判断单元506，用于判断音箱与终端设备是否接入同一无线网络；其中，判断音箱于终端设备是否接入同一无线网络的方式可以为：判断单元506向无线路由器发送终端设备的MAC位址，由无线路由器根据终端设备的MAC位址判断终端设备当前是否接入无线路由器，并且向判断单元506返回判断结果；若判断结果指示终端设备当前已接入无线路由器，则可以确定音箱与终端设备接入同一无线网络；若判断结果指示终端设备当前未接入无线路由器，则可以确定音箱与终端设备并非接入同一无线网络。

上述的请求单元502，具体用于在搜索不到解答内容且判断单元判断出所述音箱与终端设备并非接入同一无线网络时，向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接；或者，在搜索到解答内容，且接收到的反馈信息指示解答内容与目标问题不符以及判断单元判断出音箱与终端设备并非接入同一无线网络时，向与音箱绑定的终端设备发起视频通话请求，以根据视频通话请求建立音箱与终端设备的视频通信连接；反馈信息是由音箱的使用者针对解答内容输入的。

保存单元507，用于在判断单元506判断出音箱与终端设备接入同一无线网络时，保存目标问题；

上述的通信单元503，还用于在检测到结束指令时，向终端设备发送通知信息；通知信息用于指示终端设备的使用者前往所述音箱的放置地点；

输出单元508，用于在检测到终端设备与音箱之间的距离小于预设距离阈值时，从保存单元507中调取目标问题，并输出目标问题。

其中，输出单元508可以扫描周边具有蓝牙功能的蓝牙设备，当扫描到的蓝牙设备中包括上述的终端设备时，可以确定终端设备与音箱之间的距离小于预设距离阈值；上述的预设距离阈值可以参考音箱的蓝牙模块能够支持的最远传输距离设置。其中，可以通过调整蓝牙模块的输出功率，去调整蓝牙模块能够支持的最远传输距离，蓝牙模块的输出功率越大，蓝牙模块能够支持的最远传输距离越远。

综上所示，实施如图6所示的音箱，可以通过翻转至第一预设姿态的摄像装置拍摄书本图像，并从书本图像中识别出目标问题，无需翻转音箱主体或者翻转书本。在搜索不到解答内容或者解答内容与目标问题不符时，建立视频通信连接，使得终端设备的使用者可以直接通过视频通信连接进行教学指导。进一步地，在通过视频通信连接发送目标问题之前，可以先发送摄像装置处于第二预设姿态时拍摄到地用户图像，使得终端设备的使用者与音箱的使用者可以先进行打招呼等社交行为。在检测到音箱的使用者输入的语音信号中包含预设关键词时，再发送摄像装置处于第一预设姿态时拍摄到的包含目标问题的书本图像。更进一步地，在发起视频通话请求之前，可以先判断音箱与终端设备是否接入同一无线网络；若是，不发起视频通话请求，而是通过发送通知信息指示终端设备的使用者直接前往音箱的放置地点对目标问题进行当面解答，既可以解答音箱的使用者的疑问，也可以减轻终端设备的使用者由于多次接收到视频通话请求或者通知信息而产生的厌烦情绪。

实施例七

请参阅图7，图7是本发明实施例公开的另一种音箱的结构示意图。如图7所示，该音箱可以包括：

存储有可执行程序代码的存储器701；

与存储器701耦合的处理器702；

其中，处理器702调用存储器701中存储的可执行程序代码，执行图1～图3任一种基于音箱的学习辅助方法。

需要说明的是，图7所示的音箱还可以包括电源、摄像装置、扬声器、麦克风、显示屏幕、RF电路、Wi-Fi模块、蓝牙模块、传感器等未显示的组件，本实施例不作赘述。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图2～图4任一种基于音箱的学习辅助方法。

本发明实施例公开一种计算机程序产品，该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，且该计算机程序可操作来使计算机执行图2～图4任一种基于音箱的学习辅助方法。

应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本发明所必须的。

在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物单元，即可位于一个地方，或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种基于音箱的学习辅助方法及音箱进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种基于音箱的学习辅助方法，其特征在于，包括：

搜索与目标问题对应的解答内容；所述目标问题是由所述音箱的使用者输入的；

若搜索不到所述解答内容，则向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，

若搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符，则向与音箱绑定的终端设备发起视频通话请求，以所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的；

通过所述视频通信连接向所述终端设备发送所述目标问题；

所述方法还包括：

判断所述音箱与所述终端设备是否接入同一无线网络；

若否，执行所述向与音箱绑定的移动终端发起视频通话请求，以所述视频通话请求建立所述音箱与所述终端设备的视频通信连接的步骤；

所述方法还包括：

若所述音箱与所述终端设备接入同一无线网络，则保存所述目标问题；

在检测到结束指令时，向所述终端设备发送通知信息；所述通知信息用于指示所述终端设备的使用者前往所述音箱的放置地点；

在检测到所述终端设备与所述音箱之间的距离小于预设距离阈值时，调取并输出所述目标问题。

2.根据权利要求1所述的方法，其特征在于，在所述搜索与获取到的目标问题对应的解答内容之前，所述方法还包括：

控制所述音箱的摄像装置翻转至第一预设姿态；当所述摄像装置处于所述第一预设姿态时，所述摄像装置的摄像孔朝向所述音箱的放置面；

控制所述摄像装置以所述第一预设姿态拍摄置于所述放置面上的书本，以获得书本图像；

从所述书本图像中识别出所述目标问题。

3.根据权利要求2所述的方法，其特征在于，在所述根据所述视频通话请求建立所述视频通信连接之后，以及在所述通过所述视频通信连接向所述终端设备发送所述目标问题之前，所述方法还包括：

控制所述音箱的摄像装置从所述第一预设姿态翻转至第二预设姿态；当所述摄像装置处于所述第二预设姿态时，所述摄像装置的摄像孔朝向所述音箱的显示屏幕前方；

控制所述摄像装置以所述第二预设姿态拍摄所述音箱的使用者的用户图像；

通过所述视频通信连接向所述终端设备发送所述用户图像；

以及，所述通过所述视频通信连接向所述终端设备发送所述目标问题，包括：

检测所述音箱的麦克风是否采集到包含预设关键词的语音信号；

若是，则控制所述音箱的摄像装置从所述第二预设姿态翻转至所述第一预设姿态；

将所述摄像装置处于所述第一预设姿态时拍摄到的所述书本图像通过所述视频通信连接发送至所述终端设备。

4.一种音箱，其特征在于，包括：

搜索单元，用于搜索与目标问题对应的解答内容；所述目标问题是由所述音箱的使用者输入的；

请求单元，用于在所述搜索单元搜索不到所述解答内容时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，在所述搜索单元搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的；

通信单元，用于通过所述视频通信连接向所述终端设备发送所述目标问题；

所述音箱还包括：

判断单元，用于判断所述音箱与所述终端设备是否接入同一无线网络；

所述请求单元，具体用于在搜索不到所述解答内容且所述判断单元判断出所述音箱与所述终端设备并非接入同一无线网络时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；或者，在搜索到所述解答内容，且接收到的反馈信息指示所述解答内容与所述目标问题不符以及所述判断单元判断出所述音箱与所述终端设备并非接入同一无线网络时，向与所述音箱绑定的终端设备发起视频通话请求，以根据所述视频通话请求建立所述音箱与所述终端设备的视频通信连接；所述反馈信息是由所述音箱的使用者针对所述解答内容输入的；

所述音箱还包括：

保存单元，用于在所述判断单元判断出所述音箱与所述终端设备接入同一无线网络时，保存所述目标问题；

所述通信单元，还用于在检测到结束指令时，向所述终端设备发送通知信息；所述通知信息用于指示所述终端设备的使用者前往所述音箱的放置地点；

输出单元，用于在检测到在检测到所述终端设备与所述音箱之间的距离小于预设距离阈值时，调取并输出所述目标问题。

5.根据权利要求4所述的音箱，其特征在于，所述音箱还包括：

控制单元，用于在所述搜索单元搜索与目标问题对应的解答内容之前，控制所述音箱的摄像装置翻转至第一预设姿态；当所述摄像装置处于所述第一预设姿态时，所述摄像装置的摄像孔朝向所述音箱的放置面；以及，控制所述摄像装置以所述第一预设姿态拍摄置于所述放置面上的书本，以获得书本图像；

识别单元，用于从所述书本图像中识别出所述目标问题。

6.根据权利要求5所述的音箱，其特征在于：

所述控制单元，还用于在所述请求单元根据所述视频通话请求建立所述视频通信连接之后，以及在所述通信单元通过所述视频通信连接向所述终端设备发送所述目标问题之前，控制所述音箱的摄像装置从所述第一预设姿态翻转至第二预设姿态；当所述摄像装置处于所述第二预设姿态时，所述摄像装置的摄像孔朝向所述音箱的显示屏幕前方；

以及，还用于控制所述摄像装置以所述第二预设姿态拍摄所述音箱的使用者的用户图像；

所述通信单元，还用于在所述请求单元根据所述视频通话请求建立所述视频通信连接之后，以及在所述通信单元通过所述视频通信连接向所述终端设备发送所述目标问题之前，通过所述视频通信连接向所述终端设备发送所述用户图像；

以及，所述通信单元，用于通过所述视频通信连接向所述终端设备发送所述用户图像的方式具体为：

所述通信单元，用于检测所述音箱的麦克风是否采集到包含预设关键词的语音信号；若是，则触发所述控制单元控制所述音箱的摄像装置从所述第二预设姿态翻转至所述第一预设姿态；以及，将所述摄像装置处于所述第一预设姿态时拍摄到的所述书本图像通过所述视频通信连接发送至所述终端设备。

7.一种音箱，其特征在于，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行权利要求1-3任一项所述的学习辅助方法。

8.一种计算机可读存储介质，其存储计算机程序，其特征在于，所述计算机程序使得计算机运行时执行权利要求1-3任一项所述的学习辅助方法。

Images