CN109255989A - 一种智能点读方法及点读设备 - Google Patents

Abstract

一种智能点读方法及点读设备，包括：利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用摄像头确定目标物体的姿态信息；待点读信息载体至少包括书本或者练习册；姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息；获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息；当判断出目标运动轨迹信息与预设运动轨迹信息相匹配时，以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息；语音输出目标内容信息对应的目标语音信息。实施本发明实施例，能够适用于各类文本内容的点读、操作方便且以书本为主点读设备为辅来实现辅助学习，可以提高学习效率。

Description

一种智能点读方法及点读设备

技术领域

本发明涉及点读技术领域，尤其涉及一种智能点读方法及点读设备。

背景技术

目前，市面上常用的点读方式有两种：第一种点读方式为利用传统的点读机对适用于该点读机的课本进行点读；第二种点读方式为利用学习设备(如家教机)上的点读类应用对存储于学习设备中的电子教材进行点读。

上述第一种点读方式只能适用于固定的适用于该点读机的课本，并不具有普适性，并且，传统的点读机在点读之前需要用户手动配置需要存储的资料，这一过程十分繁琐。与此同时，上述第二种点读方式虽然可以对存储于学习设备中的海量电子教材进行点读，但是，这一方式需要用户长时间注视学习设备的电子显示屏，从而损害用户视力，并且，用户在使用学习设备点读时容易受到学习设备中安装的娱乐应用的诱惑，导致学习注意力不集中。

可见，开发一种具有普适性、操作方便且不依赖于学习设备的点读设备成为了一个亟需解决的问题。

发明内容

本发明实施例公开一种智能点读方法及点读设备，能够适用于各类文本内容的点读、操作方便且以书本为主点读设备为辅来实现辅助学习，可以提高学习效率。

本发明实施例第一方面公开一种智能点读方法，包括：

利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；

获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；

判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；

当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；

语音输出所述目标内容信息对应的目标语音信息。

作为一种可选的实施方式，在本发明实施例第一方面中，所述利用所述摄像头确定目标物体的姿态信息，包括：

利用所述摄像头捕捉目标物体的实时图像信息；

提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。

作为一种可选的实施方式，在本发明实施例第一方面中，所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：

判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；

所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：

当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。

作为一种可选的实施方式，在本发明实施例第一方面中，在所述获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，所述方法还包括：

利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；

所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：

判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；

所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：

当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。

作为一种可选的实施方式，在本发明实施例第一方面中，所述语音输出所述目标内容信息对应的目标语音信息，包括：

当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；

当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；

在所述语音输出所述目标语音信息之后，所述方法还包括：

获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。

本发明实施例第二方面公开一种点读设备，所述点读设备包括：

确定单元，用于利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；

获取单元，用于获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；

判断单元，用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；

所述确定单元，还用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；

输出单元，用于语音输出所述目标内容信息对应的目标语音信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述确定单元用于利用所述摄像头确定目标物体的姿态信息的方式具体为：

所述确定单元，用于利用所述摄像头捕捉目标物体的实时图像信息；并提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

所述判断单元，用于判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；

所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息的方式具体为：

所述确定单元，用于当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述点读设备还包括：

投影单元，用于在所述获取单元获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；

所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

所述判断单元，用于判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；

所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息的方式具体为：

所述确定单元，用于当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述输出单元包括：

第一输出子单元，用于当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；

第二输出子单元，用于当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；

所述获取单元，还用于在所述语音输出所述目标语音信息之后，获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。

本发明实施例第三方面公开一种点读设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的一种智能点读方法。

本发明实施例第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的一种智能点读方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

本发明实施例中，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。点读设备只需根据用户的手的指向信息或者用户握持的笔的指向信息、以及用户的手的运动轨迹信息或者用户握持的笔的运动轨迹信息即可确定需要点读的目标内容信息，并语音输出该目标内容信息对应的目标语音信息，实现点读功能。例如，当用户在待点读信息载体(如书本)上用手指圈选了某一生字词，点读设备即可对该某一生字词进行点读，操作更加方便。此外，这种点读方法是以待点读信息载体为主点读设备为辅，检测用户在待点读信息载体上所指向的位置以及用户朝向待点读载体所产生的手或笔的运动轨迹来实现点读，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种智能点读方法的流程示意图；

图2是本发明实施例公开的另一种智能点读方法的流程示意图；

图3是本发明实施例公开的另一种智能点读方法的流程示意图；

图4是本发明实施例公开的一种点读设备的结构示意图；

图5是本发明实施例公开的另一种点读设备的结构示意图；

图6是本发明实施例公开的另一种点读设备的结构示意图；

图7是本发明实施例公开的另一种点读设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开一种智能点读方法及点读设备，能够适用于各类文本内容的点读、操作方便且以书本为主点读设备为辅来实现辅助学习，可以提高学习效率。以下分别进行详细说明。

实施例一

请参阅图1，图1是本发明实施例公开的一种智能点读方法的流程示意图。如图1所示，该智能点读方法可以包括以下步骤：

101、点读设备利用摄像头确定待点读信息载体的位置信息，以及利用摄像头确定目标物体的姿态信息。

本发明实施例中，待点读信息载体至少包括书本或者练习册；目标物体至少包括用户的手或者用户握持的笔；姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息。可选的，待点读信息载体也可以为其他辅助学习的电子设备，如家教机或者学习平板等，本发明实施例中不做限定。并且，本发明中的点读设备的形状可以为普通点读机的形状，当课本平铺于点读设备上时，开启点读设备的摄像头来确定待点读信息载体的位置信息，以及利用摄像头确定目标物体的姿态信息；优选的，本发明中的点读设备的形状可以为小型电子设备的形状，使用时不必与待点读信息载体直接进行接触，例如，可以将该点读设备立置于课本附近来使用该点读设备；本发明中的点读设备的形状也可以为其它形状，本发明实施例中不做限定。

102、点读设备获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息。

103、点读设备判断目标运动轨迹信息是否与预设运动轨迹信息相匹配，如果是，执行步骤104至步骤105，如果否，结束本次流程。

本发明实施例中，预设运动轨迹信息可以为画圈形式的运动轨迹信息，也可以为按压形式的运动轨迹信息，也可以为覆盖形式的运动轨迹信息等，本发明实施例中不做限定。

104、点读设备以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息。

作为一种可选的实施方式，点读设备判断目标运动轨迹信息是否与预设运动轨迹信息相匹配可以包括：

点读设备判断目标运动轨迹信息是否与覆盖形式的预设运动轨迹信息相匹配；

作为另一种可选的实施方式，当判断出目标运动轨迹信息与覆盖形式的预设运动轨迹信息相匹配时，点读设备以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息可以包括：

点读设备获取与覆盖形式的预设运动轨迹信息相匹配的覆盖内容识别方式；

点读设备根据上述覆盖内容识别方式以目标位置信息为起点获取目标运动轨迹信息对应的覆盖内容信息，其中，覆盖内容信息至少包括目标位置信息对应的内容信息；

点读设备将覆盖内容信息确定为目标内容信息。

通过实施这种可选的实施方式，当用户涂抹待点读信息载体上的需要选取的目标内容信息所在的区域时，确定用户进行涂抹时的目标运动轨迹信息与覆盖形式的预设运动轨迹信息相匹配，点读设备以用户开始涂抹的位置作为起点来获取用户涂抹的目标运动轨迹信息对应的覆盖内容信息，并将该覆盖内容信息确定为目标内容信息。这一过程增加了识别用户涂抹区域获取目标内容信息的功能，提高了获取目标内容信息的功能多样性，能够满足用户的多种使用需求。

105、点读设备语音输出目标内容信息对应的目标语音信息。

作为一种可选的实施方式，在点读设备获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息之前，还可以执行以下步骤：

点读设备判断目标指向信息对应指向的位置信息是否位于待点读信息载体的位置信息对应的范围内；

当判断出目标指向信息对应指向的位置信息位于待点读信息载体的位置信息对应的范围内时，点读设备执行上述的获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息；

当判断出目标指向信息对应指向的位置信息不位于待点读信息载体的位置信息对应的范围内时，点读设备判断目标运动轨迹信息是否与用于指示全选的运动轨迹信息相匹配；

当判断出目标运动轨迹信息与用于指示全选的运动轨迹信息相匹配时，点读设备将待点读信息载体上的全部内容信息作为目标内容信息，并执行上述的语音输出目标内容信息对应的目标语音信息。

通过实施这种可选的实施方式，点读设备的用户如果需要对待点读信息载体上的全部内容进行点读，可以直接发出用于指示全选的手势来将待点读信息载体上的全部内容信息作为目标内容信息，并语音输出目标内容信息对应的目标语音信息。这一过程增加了全选来确定目标内容信息的功能，使得用户可以实现快速全选，从而提高用户体验。

可见，通过实施图1所描述的智能点读方法，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

实施例二

请参阅图2，图2是本发明实施例公开的另一种智能点读方法的流程示意图。如图2所示，该智能点读方法可以包括以下步骤：

201、点读设备利用摄像头确定待点读信息载体的位置信息，并利用摄像头捕捉目标物体的实时图像信息。

本发明实施例中，待点读信息载体至少包括书本或者练习册；目标物体至少包括用户的手或者用户握持的笔；

202、点读设备提取实时图像信息的图像特征，并根据图像特征确定目标物体的姿态信息。

本发明实施例中，姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息。

203、点读设备获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息。

204、点读设备判断目标运动轨迹信息是否与第一预设运动轨迹信息相匹配，如果是，执行步骤205至步骤206以及步骤208、或者步骤205以及步骤207至步骤208，如果否，结束本次流程。

本发明实施例中，第一预设运动轨迹信息为画圈形式的运动轨迹信息。

205、点读设备以第一预设运动轨迹信息对应的内容识别方式为依据，将以目标位置信息对应的位置为起点进行画圈得到的目标运动轨迹信息所圈选的内容信息确定为目标内容信息

206、当预设数据库中存储目标内容信息对应的第一语音信息时，点读设备将第一语音信息确定为目标语音信息，并语音输出目标语音信息。

207、当预设数据库中未存储目标内容信息对应的第一语音信息时，点读设备利用从文本到语音技术获取目标内容信息对应的第二语音信息，并将第二语音信息确定为目标语音信息，以及语音输出目标语音信息。

208、点读设备获取用户根据目标语音信息输入的语音问题信息，并输出与语音问题信息相匹配的语音问题答案。

作为一种可选的实施方式，点读设备输出与语音问题信息相匹配的语音问题答案可以包括：

点读设备获取与语音问题信息相匹配的语音问题答案，并确定该语音问题答案的答案形式；

当该语音问题答案的答案形式为语音形式时，点读设备语音输出该语音形式的语音问题答案；

当该语音问题答案的答案形式为文字形式时，点读设备在预先与点读设备建立连接的电子设备上输出该文字形式的语音问题答案；

当该语音问题答案的答案形式为视频形式时，点读设备在预先与点读设备建立连接的电子设备上输出该视频形式的语音问题答案。

通过实施这种可选的实施方式，点读设备可以输出多种形式的语音问题答案来实现与用户的交互，可选的，在输出语音问题答案之后，还能够以用户根据该语音问题答案输入的另一语音问题信息为依据重新搜索与该另一语音问题信息相匹配的语音问题答案，实现连环发问以及多重对话，提高用户的学习体验。

可见，通过实施图2所描述的智能点读方法，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

此外，通过实施图2所描述的智能点读方法，还可以利用目标物体的实时图像所包括的图像特征来确定目标物体的姿态信息，从而获得更加精准的目标物体的姿态信息。

此外，通过实施图2所描述的智能点读方法，可以利用画圈的方式来圈选需要点读的目标内容信息，操作便捷。

此外，通过实施图2所描述的智能点读方法，还可以当预设数据库中存储目标内容信息对应的第一语音信息时，将其作为目标语音信息，当预设数据库中未存储目标内容信息对应的第一语音信息时，利用从文本到语音技术获取目标内容信息对应的第二语音信息，并将其作为目标语音信息。这一过程使得在预设数据库存在或者不存在第一语音信息时都可以语音输出目标语音信息，从而提高用户体验。并且，在语音输出目标语音信息之后，还可以接收用户根据目标语音信息输入的语音问题信息并输出相应的语音问题答案，实现了语音搜题的功能，功能更加丰富。

实施例三

请参阅图3，图3是本发明实施例公开的另一种智能点读方法的流程示意图。如图3所示，该智能点读方法可以包括以下步骤：

301、点读设备利用摄像头确定待点读信息载体的位置信息，并利用摄像头捕捉目标物体的实时图像信息。

本发明实施例中，待点读信息载体至少包括书本或者练习册；目标物体至少包括用户的手或者用户握持的笔。

302、点读设备提取实时图像信息的图像特征，并根据图像特征确定目标物体的姿态信息。

本发明实施例中，姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息。

303、点读设备获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息。

304、点读设备利用点读设备的投影装置向目标位置信息对应的位置投影光点。

305、点读设备判断目标运动轨迹信息是否与第二预设运动轨迹信息相匹配，如果是，执行步骤306至步骤307以及步骤309、或者步骤306以及步骤308至步骤309，如果否，结束本次流程。

本发明实施例中，第二预设运动轨迹为按压形式的运动轨迹。

306、点读设备以第二预设运动轨迹信息对应的内容识别方式和目标运动轨迹信息为依据，将光点对应的位置的内容信息确定为目标内容信息。

307、当预设数据库中存储目标内容信息对应的第一语音信息时，点读设备将第一语音信息确定为目标语音信息，并语音输出目标语音信息。

308、当预设数据库中未存储目标内容信息对应的第一语音信息时，点读设备利用从文本到语音技术获取目标内容信息对应的第二语音信息，并将第二语音信息确定为目标语音信息，以及语音输出目标语音信息。

309、点读设备获取用户根据目标语音信息输入的语音问题信息，并输出与语音问题信息相匹配的语音问题答案。

作为一种可选的实施方式，点读设备输出与语音问题信息相匹配的语音问题答案可以包括：

点读设备获取与语音问题信息相匹配的语音问题答案，并确定该语音问题答案的答案形式；

当该语音问题答案的答案形式为语音形式时，点读设备语音输出该语音形式的语音问题答案；

当该语音问题答案的答案形式为文字形式时，点读设备利用投影装置在目标区域投影该文字形式的语音问题答案；目标区域为位于待点读信息载体附近适合投影的区域；

当该语音问题答案的答案形式为视频形式时，点读设备利用投影装置在目标区域投影该视频形式的语音问题答案。

通过实施这种可选的实施方式，点读设备可以输出多种形式的语音问题答案来实现与用户的交互，可选的，在输出语音问题答案之后，还能够以用户根据该语音问题答案输入的另一语音问题信息为依据重新搜索与该另一语音问题信息相匹配的语音问题答案，实现连环发问以及多重对话，提高用户的学习体验。

可见，通过实施图3所描述的智能点读方法，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

此外，通过实施图3所描述的智能点读方法，还可以利用目标物体的实时图像所包括的图像特征来确定目标物体的姿态信息，从而获得更加精准的目标物体的姿态信息。

此外，通过实施图3所描述的智能点读方法，可以利用投影装置投影光点，以使用户直观地观察光点所在位置进行按压选择操作，将用户按压的光点对应的位置的内容信息确定为目标内容信息，操作便捷，并且更加直观、生动。

此外，通过实施图3所描述的智能点读方法，使得在预设数据库存在或者不存在第一语音信息时都可以语音输出目标语音信息，从而提高用户体验。并且，在语音输出目标语音信息之后，还可以接收用户根据目标语音信息输入的语音问题信息并输出相应的语音问题答案，实现了语音搜题的功能，功能更加丰富。

实施例四

请参阅图4，图4是本发明实施例公开的一种点读设备的结构示意图。如图4所示，该点读设备400可以包括确定单元401、获取单元402、判断单元403以及输出单元404，其中：

确定单元401，用于利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用摄像头确定目标物体的姿态信息；待点读信息载体至少包括书本或者练习册；目标物体至少包括用户的手或者用户握持的笔；姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息。

获取单元402，用于获取确定单元401确定的目标指向信息在待点读信息载体的位置信息中指向的目标位置信息。

判断单元403，用于判断目标运动轨迹信息是否与预设运动轨迹信息相匹配。

确定单元401，还用于当判断单元403判断出目标运动轨迹信息与预设运动轨迹信息相匹配时，以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息。

作为一种可选的实施方式，判断单元403判断目标运动轨迹信息是否与预设运动轨迹信息相匹配可以包括：

判断单元403判断目标运动轨迹信息是否与覆盖形式的预设运动轨迹信息相匹配；

作为另一种可选的实施方式，当判断单元403判断出目标运动轨迹信息与覆盖形式的预设运动轨迹信息相匹配时，确定单元401以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息可以包括：

确定单元401获取与覆盖形式的预设运动轨迹信息相匹配的覆盖内容识别方式；

确定单元401根据上述覆盖内容识别方式以目标位置信息为起点获取目标运动轨迹信息对应的覆盖内容信息，其中，覆盖内容信息至少包括目标位置信息对应的内容信息；

确定单元401将覆盖内容信息确定为目标内容信息。

通过实施这种可选的实施方式，当用户涂抹待点读信息载体上的需要选取的目标内容信息所在的区域时，确定用户进行涂抹时的目标运动轨迹信息与覆盖形式的预设运动轨迹信息相匹配，点读设备以用户开始涂抹的位置作为起点来获取用户涂抹的目标运动轨迹信息对应的覆盖内容信息，并将该覆盖内容信息确定为目标内容信息。这一过程增加了识别用户涂抹区域获取目标内容信息的功能，提高了获取目标内容信息的功能多样性，能够满足用户的多种使用需求。

输出单元404，用于语音输出确定单元401确定的目标内容信息对应的目标语音信息。

作为一种可选的实施方式，在获取单元402获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息之前，获取单元402还可以用于：

判断目标指向信息对应指向的位置信息是否位于待点读信息载体的位置信息对应的范围内；

当判断出目标指向信息对应指向的位置信息位于待点读信息载体的位置信息对应的范围内时，执行上述的获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息；

当判断出目标指向信息对应指向的位置信息不位于待点读信息载体的位置信息对应的范围内时，判断目标运动轨迹信息是否与用于指示全选的运动轨迹信息相匹配；

当判断出目标运动轨迹信息与用于指示全选的运动轨迹信息相匹配时，将待点读信息载体上的全部内容信息作为目标内容信息，并触发输出单元404执行上述的语音输出目标内容信息对应的目标语音信息。

通过实施这种可选的实施方式，点读设备的用户如果需要对待点读信息载体上的全部内容进行点读，可以直接发出用于指示全选的手势来将待点读信息载体上的全部内容信息作为目标内容信息，并语音输出目标内容信息对应的目标语音信息。这一过程增加了全选来确定目标内容信息的功能，使得用户可以实现快速全选，从而提高用户体验。

可见，通过实施图4所描述的点读设备，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

实施例五

请参阅图5，图5是本发明实施例公开的另一种点读设备的结构示意图。其中，图5所示的点读设备400是由图4所示的点读设备400优化得到的，与图4所示的点读设备400相比，在图5所示的点读设备400中，确定单元401用于利用摄像头确定目标物体的姿态信息的方式具体为：

确定单元401，用于利用摄像头捕捉目标物体的实时图像信息；并提取实时图像信息的图像特征，并根据图像特征确定目标物体的姿态信息。

可选的，判断单元403用于判断目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

判断单元403，用于判断目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；第一预设运动轨迹信息为画圈形式的运动轨迹信息。

进一步可选的，确定单元401用于当判断出目标运动轨迹信息与预设运动轨迹信息相匹配时，以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息的方式具体为：

确定单元401，用于当判断出目标运动轨迹信息与第一预设运动轨迹信息相匹配时，以第一预设运动轨迹信息对应的内容识别方式为依据，将以目标位置信息对应的位置为起点进行画圈得到的目标运动轨迹信息所圈选的内容信息确定为目标内容信息。

进一步可选的，输出单元404包括：

第一输出子单元4041，用于当预设数据库中存储目标内容信息对应的第一语音信息时，将第一语音信息确定为目标语音信息，并语音输出目标语音信息。

第二输出子单元4042，用于当预设数据库中未存储目标内容信息对应的第一语音信息时，利用从文本到语音技术获取目标内容信息对应的第二语音信息，并将第二语音信息确定为目标语音信息，以及语音输出目标语音信息。

获取单元402，还用于在语音输出目标语音信息之后，获取用户根据目标语音信息输入的语音问题信息，并输出与语音问题信息相匹配的语音问题答案。

作为一种可选的实施方式，获取单元402输出与语音问题信息相匹配的语音问题答案可以包括：

获取单元402获取与语音问题信息相匹配的语音问题答案，并确定该语音问题答案的答案形式；

当该语音问题答案的答案形式为语音形式时，获取单元402语音输出该语音形式的语音问题答案；

当该语音问题答案的答案形式为文字形式时，获取单元402在预先与点读设备建立连接的电子设备上输出该文字形式的语音问题答案；

当该语音问题答案的答案形式为视频形式时，获取单元402在预先与点读设备建立连接的电子设备上输出该视频形式的语音问题答案。

通过实施这种可选的实施方式，点读设备可以输出多种形式的语音问题答案来实现与用户的交互，可选的，在输出语音问题答案之后，还能够以用户根据该语音问题答案输入的另一语音问题信息为依据重新搜索与该另一语音问题信息相匹配的语音问题答案，实现连环发问以及多重对话，提高用户的学习体验。

可见，通过实施图5所描述的点读设备，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

此外，通过实施图5所描述的点读设备，还可以利用目标物体的实时图像所包括的图像特征来确定目标物体的姿态信息，从而获得更加精准的目标物体的姿态信息。

此外，通过实施图5所描述的点读设备，可以利用画圈的方式来圈选需要点读的目标内容信息，操作便捷。

此外，通过实施图5所描述的点读设备，使得在预设数据库存在或者不存在第一语音信息时都可以语音输出目标语音信息，从而提高用户体验。并且，在语音输出目标语音信息之后，还可以接收用户根据目标语音信息输入的语音问题信息并输出相应的语音问题答案，实现了语音搜题的功能，功能更加丰富。

实施例六

请参阅图6，图6是本发明实施例公开的另一种点读设备的结构示意图。其中，图6所示的点读设备400是由图4所示的点读设备400优化得到的，与图4所示的点读设备400相比，图6所示的点读设备400还可以包括：

投影单元405，用于在获取单元401获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息之后，利用点读设备的投影装置向目标位置信息对应的位置投影光点。

具体的，在获取单元401获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息之后，获取单元401向投影单元405发送触发信号，以触发投影单元405利用点读设备的投影装置向目标位置信息对应的位置投影光点。

判断单元403用于判断目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

判断单元403，用于判断目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；第二预设运动轨迹为按压形式的运动轨迹。

确定单元401用于当判断出目标运动轨迹信息与预设运动轨迹信息相匹配时，以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息的方式具体为：

确定单元401，用于当判断出目标运动轨迹信息与第二预设运动轨迹信息相匹配时，以第二预设运动轨迹信息对应的内容识别方式和目标运动轨迹信息为依据，将光点对应的位置的内容信息确定为目标内容信息。

进一步可选的，输出单元404包括：

第一输出子单元4041，用于当预设数据库中存储目标内容信息对应的第一语音信息时，将第一语音信息确定为目标语音信息，并语音输出目标语音信息。

第二输出子单元4042，用于当预设数据库中未存储目标内容信息对应的第一语音信息时，利用从文本到语音技术获取目标内容信息对应的第二语音信息，并将第二语音信息确定为目标语音信息，以及语音输出目标语音信息。

获取单元402，还用于在语音输出目标语音信息之后，获取用户根据目标语音信息输入的语音问题信息，并输出与语音问题信息相匹配的语音问题答案。

作为一种可选的实施方式，获取单元402输出与语音问题信息相匹配的语音问题答案可以包括：

获取单元402获取与语音问题信息相匹配的语音问题答案，并确定该语音问题答案的答案形式；

当该语音问题答案的答案形式为语音形式时，获取单元402语音输出该语音形式的语音问题答案；

当该语音问题答案的答案形式为文字形式时，获取单元402利用投影装置在目标区域投影该文字形式的语音问题答案；目标区域为位于待点读信息载体附近适合投影的区域；

当该语音问题答案的答案形式为视频形式时，获取单元402利用投影装置在目标区域投影该视频形式的语音问题答案。

通过实施这种可选的实施方式，点读设备可以输出多种形式的语音问题答案来实现与用户的交互，可选的，在输出语音问题答案之后，还能够以用户根据该语音问题答案输入的另一语音问题信息为依据重新搜索与该另一语音问题信息相匹配的语音问题答案，实现连环发问以及多重对话，提高用户的学习体验。

可见，通过实施图6所描述的点读设备，点读设备可以对待点读信息载体所包括的任意文本内容进行点读，并且，点读设备对于待点读信息载体无特殊要求，从而可以适用于各类待点读信息载体，进而可以适用于各类文本内容的点读。并且，相较于使用家教机等电子设备来点读的方式，这一过程不易被电子设备中的娱乐应用干扰，从而提高了学习效率，另外，这一过程也不必长时间面对电子设备的显示屏来学习，保护了用户的视力。

此外，通过实施图6所描述的点读设备，还可以利用目标物体的实时图像所包括的图像特征来确定目标物体的姿态信息，从而获得更加精准的目标物体的姿态信息。

此外，通过实施图6所描述的点读设备，可以利用投影装置投影光点，以使用户直观地观察光点所在位置进行按压选择操作，将用户按压的光点对应的位置的内容信息确定为目标内容信息，操作便捷，并且更加直观、生动。

此外，通过实施图6所描述的点读设备，使得在预设数据库存在或者不存在第一语音信息时都可以语音输出目标语音信息，从而提高用户体验。并且，在语音输出目标语音信息之后，还可以接收用户根据目标语音信息输入的语音问题信息并输出相应的语音问题答案，实现了语音搜题的功能，功能更加丰富。

实施例七

请参阅图7，图7是本发明实施例公开的另一种点读设备的结构示意图。如图7所示，该点读设备可以包括：

存储有可执行程序代码的存储器701；

与存储器701耦合的处理器702；

其中，处理器702调用存储器701中存储的可执行程序代码，执行图1～图3任意一种智能点读方法。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1～图3任意一种智能点读方法。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台，其中，应用发布平台用于发布计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

在本发明所提供的实施例中，应理解，“与A相应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。

另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种智能点读方法及点读设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种智能点读方法，其特征在于，包括：

利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；

获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；

判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；

当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；

语音输出所述目标内容信息对应的目标语音信息。

2.根据权利要求1所述的方法，其特征在于，所述利用所述摄像头确定目标物体的姿态信息，包括：

利用所述摄像头捕捉目标物体的实时图像信息；

提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。

3.根据权利要求2所述的方法，其特征在于，所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：

判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；

所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：

当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。

4.根据权利要求1所述的方法，其特征在于，在所述获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，所述方法还包括：

利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；

所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：

判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；

所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：

当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述语音输出所述目标内容信息对应的目标语音信息，包括：

当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；

当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；

在所述语音输出所述目标语音信息之后，所述方法还包括：

获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。

6.一种点读设备，其特征在于，所述点读设备包括：

确定单元，用于利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；

获取单元，用于获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；

判断单元，用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；

所述确定单元，还用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；

输出单元，用于语音输出所述目标内容信息对应的目标语音信息。

7.根据权利要求6所述的点读设备，其特征在于，所述确定单元用于利用所述摄像头确定目标物体的姿态信息的方式具体为：

所述确定单元，用于利用所述摄像头捕捉目标物体的实时图像信息；并提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。

8.根据权利要求7所述的点读设备，其特征在于，所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

所述判断单元，用于判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；

所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息的方式具体为：

所述确定单元，用于当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。

9.根据权利要求6所述的点读设备，其特征在于，所述点读设备还包括：

投影单元，用于在所述获取单元获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；

所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：

所述判断单元，用于判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；

所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息的方式具体为：

所述确定单元，用于当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。

10.根据权利要求6至9任一项所述的点读设备，其特征在于，所述输出单元包括：

第一输出子单元，用于当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；

第二输出子单元，用于当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；

所述获取单元，还用于在所述语音输出所述目标语音信息之后，获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。