CN111077988A - 一种基于用户行为的听写内容获取方法及电子设备 - Google Patents

Abstract

本发明实施例涉及教育技术领域，公开了一种基于用户行为的听写内容获取方法及电子设备，该方法包括：控制电子设备的拍摄模组监测用户的手势动作，在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，进而识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，并在检测到结束选取的指令时，输出听写内容。可见，用户只需通过手势动作在课本上对听写内容进行选取，电子设备即可根据手势动作识别出用户选取的听写内容并对用户进行听写，实现了听写内容的智能化获取，提升了用户操作的便捷性。

Description

一种基于用户行为的听写内容获取方法及电子设备

技术领域

本发明涉及教育技术领域，具体涉及一种基于用户行为的听写内容获取方法及电子设备。

背景技术

当前，以家教机为代表的电子设备已广泛具备内容识别与听写的功能，用户可以从家教机提供的学习内容中选取出需要听写的内容。然而，当需要听写的内容较多时，用户需在显示屏所显示的大量内容中逐一手动点选听写内容，从而导致用户操作便捷性不足，听写内容的获取方式不够智能。

发明内容

针对上述缺陷，本发明实施例公开了一种基于用户行为的听写内容获取方法及电子设备，可更为智能地获取听写内容，提升用户操作的便捷性。

本发明实施例第一方面公开了一种基于用户行为的听写内容获取方法，包括：

控制电子设备的拍摄模组监测用户的手势动作；

在监测到用户指示获取听写内容的获取手势动作时，控制所述拍摄模组拍摄目标图像，并识别所述获取手势动作在所述目标图像上指示的位置信息；

识别并记录所述位置信息所对应的文字信息，设为用户选取的听写内容；

在检测到结束选取的指令时，输出所述听写内容。

作为一种可选的实施方式，在本发明实施例的第一方面中，在所述输出所述听写内容之后，所述方法还包括：

将所述听写内容作为历史听写内容添加至用户对应的听写数据库；所述听写数据库用于记录用户选取的所述历史听写内容及每一所述历史听写内容被用户选取的听写次数；

若所述电子设备的屏幕当前输出显示的内容中存在与任一所述历史听写内容相匹配的第一听写内容，则对所述第一听写内容进行标注；

在检测到用户点击所述第一听写内容时，输出所述第一听写内容的读音。

作为一种可选的实施方式，在本发明实施例的第一方面中，在将所述听写内容作为历史听写内容添加至用户对应的听写数据库之后，所述方法还包括：

若检测到所述用户选取的听写内容匹配于所述听写数据库中任一听写次数达到预设次数的历史听写内容，将所述听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；

若所述生疏听写内容为汉字，则在所述听写数据库中获取若干与所述生疏听写内容的字体结构相同且与所述生疏听写内容存在相同偏旁部首的历史听写内容，设为所述生疏听写内容的参考内容；

若所述生疏听写内容为英文单词，则获取若干与所述生疏听写内容的中文含义相同的英文单词并设为所述生疏听写内容的参考内容；

根据所述参考内容生成所述生疏听写内容对应的听写辅导资料，以供用户掌握所述生疏听写内容。

作为一种可选的实施方式，在本发明实施例的第一方面中，所述方法还包括：

当检测到用户在预设时长内未对所述电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于所述电子设备周边；

若是，输出所述生疏听写内容的读音及笔画顺序供用户进行学习；

在检测到用户指示已掌握所述生疏听写内容的指令时，停止输出所述生疏听写内容。

作为一种可选的实施方式，在本发明实施例的第一方面中，在所述根据所述参考内容生成所述生疏听写内容对应的听写辅导资料之后，所述方法还包括：

获取用户预设的学习周期，在达到所述学习周期时根据所述生疏听写内容对应的听写辅导资料生成若干听写测试习题供所述用户进行测试，以通过所述听写测试习题验证所述用户对所述生疏听写内容的掌握程度。

本发明实施例第二方面公开一种电子设备，包括：

监测单元，用于控制电子设备的拍摄模组监测用户的手势动作；

定位单元，用于在所述检测单元监测到用户指示获取听写内容的获取手势动作时，控制所述拍摄模组拍摄目标图像，并识别所述获取手势动作在所述目标图像上指示的位置信息；

识别单元，用于识别并记录所述位置信息所对应的文字信息，设为用户选取的听写内容；

听写单元，用于在检测到结束选取的指令时，输出所述听写内容。

作为一种可选的实施方式，在本发明实施例的第二方面中，所述电子设备还包括：

记录单元，用于在所述听写单元输出所述听写内容之后，将所述听写内容作为历史听写内容添加至用户对应的听写数据库；所述听写数据库用于记录用户选取的所述历史听写内容及每一所述历史听写内容被用户选取的听写次数；

标注单元，用于在所述电子设备的屏幕当前输出显示的内容中存在与任一所述历史听写内容相匹配的第一听写内容，则对所述第一听写内容进行标注；

提示单元，用于在检测到用户点击所述第一听写内容时，输出所述第一听写内容的读音。

作为一种可选的实施方式，在本发明实施例的第二方面中，所述电子设备还包括：

生疏检测单元，用于在所述记录单元将所述听写内容作为历史听写内容添加至用户对应的听写数据库之后，若检测到所述用户选取的听写内容匹配于所述听写数据库中任一听写次数达到预设次数的历史听写内容，将所述听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；

参考内容单元，用于在所述生疏听写内容为汉字时，在所述听写数据库中获取若干与所述生疏听写内容的字体结构相同且与所述生疏听写内容存在相同偏旁部首的历史听写内容，设为所述生疏听写内容的参考内容；

所述参考内容单元，还用于在所述生疏听写内容为英文单词时，获取若干与所述生疏听写内容的中文含义相同的英文单词并设为所述生疏听写内容的参考内容；

辅导单元，用于根据所述参考内容生成所述生疏听写内容对应的听写辅导资料，以供用户掌握所述生疏听写内容。

作为一种可选的实施方式，在本发明实施例的第二方面中，所述电子设备还包括：

用户检测单元，用于当检测到用户在预设时长内未对所述电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于所述电子设备周边；

学习单元，用于在所述用户检测单元检测到所述用户位于所述电子设备周边时，输出所述生疏听写内容的读音及笔画顺序供用户进行学习；

停止单元，用于在检测到用户指示已掌握所述生疏听写内容的指令时，停止输出所述生疏听写内容。

作为一种可选的实施方式，在本发明实施例的第二方面中，所述电子设备还包括：

测试单元，用于在所述辅导单元根据所述参考内容生成所述生疏听写内容对应的听写辅导资料之后，获取用户预设的学习周期，在达到所述学习周期时根据所述生疏听写内容对应的听写辅导资料生成若干听写测试习题供所述用户进行测试，以通过所述听写测试习题验证所述用户对所述生疏听写内容的掌握程度。

本发明实施例第三方面公开一种电子设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的一种基于用户行为的听写内容获取方法。

本发明实施例第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的一种基于用户行为的听写内容获取方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

本发明实施例中，通过控制电子设备的拍摄模组监测用户的手势动作，在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，在检测到结束选取的指令时，输出听写内容。可见，本发明可在获取听写内容的过程中监测用户的手势动作，通过手势动作获取用户所指示的听写内容，从而更为智能地获取听写内容，提升了用户操作的便捷性。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种基于用户行为的听写内容获取方法的流程示意图；

图2为本发明实施例提供的另一种基于用户行为的听写内容获取方法的流程示意图；

图3为本发明实施例提供的一种电子设备的结构示意图；

图4是本发明实施例提供的另一种电子设备的结构示意图；

图5是本发明实施例提供的另一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种基于用户行为的听写内容获取方法及电子设备，可以提高对题目图像的科目识别准确率，提升用户使用体验。以下从电子设备角度出发，结合附图进行详细描述。

实施例一

请参阅图1，图1是本发明实施例公开的一种基于用户行为的听写内容获取方法的流程示意图。其中，图1所描述基于用户行为的听写内容获取方法适用于家教机、智能手机、平板电脑及个人电脑等电子设备。本发明实施例以电子设备为例描述基于用户行为的听写内容获取方法，不应构成对该方法的限定。如图1所示，该基于用户行为的听写内容获取方法可以包括以下步骤。

101、控制电子设备的拍摄模组监测用户的手势动作。

本发明实施例中，电子设备可通过拍摄模组所拍摄的连续多帧画面对用户的手势动作进行监测，且用户特定的手势动作可触发电子设备中对应的功能。

作为一种可选的实施方式，电子设备在开启了获取听写内容的功能之后，可弹出位于显示屏上方的拍摄模组，从而弹出后的拍摄模组其拍摄方向朝向课本、作业本等所放置的学习区域，电子设备每隔固定时长控制拍摄模组拍摄学习区域，从而获得学习区域的多帧连续图像，通过识别多帧连续图像上用户的手指姿态及手指位置，可构造得到用户的手势动作，从而实现对用户的手势动作进行监测。

作为另一种可选的实施方式，由于不同用户所作出的手势动作差异较大且手势动作的准确性难以保证，因此，电子设备除了可识别用户的手势动作，还可识别目标特征明显的触控笔等设备，从而用户在使用触控笔作出动作时，电子设备可通过识别触控笔的运动轨迹获知用户的操作指令，且识别效果更为准确。

102、在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息。

本发明实施例中，电子设备可存储多个手势动作，并为每个不同的手势动作关联设置不同的指令，从而电子设备可根据监测到的手势动作触发对应的指令。

作为一种可选的实施方式，在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，可以通过以下方式实现：假设电子设备存储的获取手势动作为：用户的手指尖端在目标图像上的某一坐标点开始滑动，且手指尖端最终滑动回到该坐标点上；则电子设备在监测到用户做出上述获取手势动作时，控制拍摄模组拍摄学习区域的目标图像，在目标图像上构建坐标系，并根据监测用户手势动作时所记录到用户手指尖端所处的坐标点构建用户手指尖端的运动轨迹，则运动轨迹所框选出的区域在坐标系中对应的位置信息，既是获取手势动作在目标图像上指示的位置信息。可见，通过监测用户手势动作，即可方便快捷地得知用户在目标图像上指示的位置及所要执行的指令。

103、识别并记录位置信息所对应的文字信息，设为用户选取的听写内容。

本发明实施例中，在步骤102监测得到用户在目标图像上指示的位置信息之后，即可对其上的内容进行识别。

作为一种可选的实施方式，识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，可以通过以下方式实现：电子设备根据步骤102中得到的位置信息，对目标图像上该位置信息所指示的区域进行光学字符识别，从而得到该位置信息对应的文字信息，并将文字信息如汉字词汇或英文单词等设为用户选取的听写内容。

作为另一种可选的实施方式，若用户所选取的听写内容所占面积较小，且因拍摄模组的视角有限，用户在选取该听写内容时可能遮蔽了该听写内容的部分区域，或者将其它无关内容与该听写内容一起框选，因此，可在识别得到用户指定位置信息对应的文字信息时，将识别到的文字信息输出在显示屏上以询问用户该文字信息是否被正确识别，假设用户发现电子设备所识别得到的汉字词汇中误加入了其它汉字，或者所识别得到的英文单词部分英文字母缺失，则可点击屏幕上的撤销按钮对所识别到的文字信息进行撤销，以重新框选文字信息，从而避免了在批量选取的听写内容中存在选取错误的内容，优化了用户使用体验。

104、在检测到结束选取的指令时，输出听写内容。

本发明实施例中，用户在完成听写内容选取时，需向电子设备发送结束选取的指令，从而电子设备根据用户选取的若干听写内容对用户进行听写。

作为一种可选的实施方式，在检测到结束选取的指令时，输出听写内容。具体地，在开启获取听写内容的功能时，电子设备的屏幕上设置有结束选取按钮，用户在完成听写内容选取时点击结束选取按钮，从而电子设备检测到用户结束选取的指令，关闭获取听写内容的功能，并通过语音播报的方式输出用户本次选取的听写内容以对用户进行听写。可见，电子设备可通过用户的手势动作便捷地选取听写内容，实现智能化听写。

作为另一种可选的实施方式，电子设备除了可监测用户的获取手势动作，也可以监测用户的其它手势动作，如设定用户翻转手掌的手势动作为关闭获取听写内容功能的指令，则用户可在完成听写内容选取时通过翻转手掌来关闭听写内容获取功能，从而使用户获取听写内容的操作更为便捷。

可见，本发明实施例中，控制电子设备的拍摄模组监测用户的手势动作，在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，进而识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，并在检测到结束选取的指令时，输出听写内容。可见，用户只需在课本上通过手势动作对听写内容进行选取，电子设备即可根据手势动作识别出用户选取的听写内容并对用户进行听写，实现了听写内容的智能化获取，提升了用户操作的便捷性。

实施例二

请参阅图2，图2为本发明另一实施例提供的基于用户行为的听写内容获取方法的流程示意图。如图2所示，该基于用户行为的听写内容获取方法可以包括以下步骤。

201、控制电子设备的拍摄模组监测用户的手势动作。

202、在监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息。

203、识别并记录位置信息所对应的文字信息，设为用户选取的听写内容。

204、在检测到结束选取的指令时，输出听写内容。

205、记录用户对应的历史听写内容及生疏听写内容。

本发明实施例中，电子设备将记录用户的历史听写内容以生成用户对应的听写数据库，从而可根据听写数据库分析用户对听写内容的掌握程度。

作为一种可选的实施方式，在步骤204输出听写内容之后，将听写内容作为历史听写内容添加至用户对应的听写数据库；听写数据库用于记录用户选取的历史听写内容及每一历史听写内容被用户选取的听写次数；若电子设备的屏幕当前输出显示的内容中存在与任一历史听写内容相匹配的第一听写内容，则对第一听写内容进行标注；在检测到用户点击第一听写内容时，输出第一听写内容的读音。具体地，电子设备将为每一用户构建听写数据库，记录用户所选取过的听写内容作为历史听写记录以及每一历史听写记录被用户选取为听写内容的次数，从而在用户使用电子设备浏览网页或者阅读文字时，电子设备可根据听写数据库中的内容对屏幕上输出的内容进行检索，若屏幕上输出的内容存在用户所选取的历史听写内容相匹配的第一听写内容，则在屏幕上对第一听写内容进行标注，对第一听写内容进行标注可以是指对第一听写内容的底色、字体颜色或者字体格式进行修改，也可以是指采用方框、下划线等标志符号对第一听写内容进行标注，从而使用户获知该内容为历史听写内容；此外，用户还可以点击被标注的第一听写内容，电子设备在检测到用户点击第一听写内容时，输出第一听写内容的读音供用户复习；此外，电子设备还可输出第一听写内容的笔画顺序或者包括第一听写内容的例句等内容，用户可自行设置点击第一听写内容时所触发输出的内容。可见，通过构建听写数据库并检索用户所浏览的内容，可使用户在使用电子设备的过程中巩固历史听写内容，帮助用户学习。

206、根据历史听写内容及生疏听写内容为用户提供辅导。

本发明实施例中，听写数据库中的历史听写内容对应记录了其被用户选取的次数，根据听写次数可分析出用户未掌握的历史听写内容。

作为一种可选的实施方式，在将听写内容作为历史听写内容添加至用户对应的听写数据库之后，若检测到用户选取的听写内容匹配于听写数据库中任一听写次数达到预设次数的历史听写内容，将听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；若生疏听写内容为汉字，则在听写数据库中获取若干与生疏听写内容的字体结构相同且与生疏听写内容存在相同偏旁部首的历史听写内容，设为生疏听写内容的参考内容；若生疏听写内容为英文单词，则获取若干与生疏听写内容的中文含义相同的英文单词并设为生疏听写内容的参考内容；根据参考内容生成生疏听写内容对应的听写辅导资料，以供用户掌握生疏听写内容。具体地，假设汉字“霜”累计有3次被用户选取为听写内容，已达到预设次数3次，则认为用户未掌握汉字“霜”，此时将汉字“霜”设为该用户的生疏听写内容；在获知汉字“霜”为用户的生疏听写内容之后，在听写数据库中查找出与汉字“霜”的字体结构相同且存在相同字体结构的汉字“雷”、“雪”和“雾”作为汉字“霜”参考内容；若用户的生疏听写内容为英文单词，则查找中文含义与生疏听写内容相同的英文单词设为参考内容；在获取到用户的生疏听写内容及对应的参考内容之后，可根据参考内容生成生疏听写内容对应的听写辅导资料，如生成的汉字“霜”的听写辅导资料包括了汉字“雷”、“雪”和“雾”的读音、释义与笔画顺序，用户可根据听写辅导资料对与汉字“霜”形似的汉字进行学习和区分，从而尽快掌握生疏听写内容。

作为另一种可选的实施方式，当检测到用户在预设时长内未对电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于电子设备周边；若是，输出生疏听写内容的读音及笔画顺序供用户进行学习；在检测到用户指示已掌握生疏听写内容的指令时，停止输出生疏听写内容。具体地，由于用户并非时刻都在使用电子设备进行学习，用户可能使用电子设备观看视频或者将电子设备闲置，此时用户已较长时间未对电子设备执行任意操作，则电子设备可通过拍摄模组拍摄其前方的环境图像，以判断用户是否处于电子设备周边，若是，则可在屏幕上以滚动播放的方式输出用户的生疏听写内容，以及生疏听写内容的读音和笔画顺序，从而用户可利用碎片化的时间对生疏听写内容进行浏览学习，帮助用户掌握生疏听写内容；若用户已多次浏览某个生疏听写内容且已掌握该生疏听写内容，则可在该生疏听写内容输出时点击停止按钮，从而电子设备停止输出该生疏听写内容。可见，通过利用用户碎片化的时间向用户推送生疏听写内容，可提高用户掌握生疏听写内容的效率。

本发明实施例中，随着用户多次选取听写内容，生疏听写内容的数量将越来越多，且部分生疏听写内容用户在学习过程中已经掌握，因此，需要检测用户对生疏听写内容的掌握程度，以更新用户对应的生疏听写内容。

作为一种可选的实施方式，在根据参考内容生成生疏听写内容对应的听写辅导资料之后，获取用户预设的学习周期，在达到学习周期时根据生疏听写内容对应的听写辅导资料生成若干听写测试习题供用户进行测试，以通过听写测试习题验证用户对生疏听写内容的掌握程度。具体地，假设用户在电子设备上预设自己的学习周期为一星期，则每隔一星期，电子设备将根据用户当前的生疏听写内容对应的辅导资料生成对应于生疏听写内容的测试习题，测试习题可以是根据读音与释义书写汉字等题型，从而在用户正确完成了测试习题时，可认为用户已掌握了该测试习题对应的生疏听写内容，此时将该生疏听写内容进行移除，若用户未能准确完成测试习题，则对应的生疏听写内容将继续累积供用户进行学习，并在下一学习周期再生成测试习题对用户进行测试。可见，根据生疏学习内容生成测试习题对用户进行测试，可及时掌握用户的学习情况，并更新生疏听写内容。

可见，本发明实施例中，通过构建听写数据库记录用户的历史听写内容，可在用户使用电子设备的过程中向用户提示并推送与历史听写内容相关的内容；此外，电子设备还可利用用户碎片化的时间向用户展示生疏听写内容的相关知识，帮助用户学习；还通过生疏听写内容生成测试习题，及时了解用户对生疏听写内容的掌握程度，更新用户的生疏听写内容，人机交互性良好。

实施例三

请参阅图3，图3为本发明实施例公开的一种电子设备的结构示意图。如图3所示，该电子设备可以包括：

监测单元301，用于控制电子设备的拍摄模组监测用户的手势动作；

定位单元302，用于在检测单元监测到用户指示获取听写内容的获取手势动作时，控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息；

识别单元303，用于识别并记录位置信息所对应的文字信息，设为用户选取的听写内容；

听写单元304，用于在检测到结束选取的指令时，输出听写内容。

本发明实施例中，定位单元302在监测单元301监测到用户的获取手势动作时，识别获取手势动作在目标图像上指示的位置信息，识别单元303根据位置信息识别目标图像上的文字信息以作为听写内容，听写单元304在听写内容选取结束时输出听写内容进行听写。

作为一种可选的实施方式，监测单元301在开启了获取听写内容的功能之后，可弹出位于显示屏上方的拍摄模组，从而弹出后的拍摄模组其拍摄方向朝向课本、作业本等所放置的学习区域，监测单元301每隔固定时长控制拍摄模组拍摄学习区域，从而获得学习区域的多帧连续图像，通过识别多帧连续图像上用户的手指姿态及手指位置，可构造得到用户的手势动作，从而实现对用户的手势动作进行监测。

作为另一种可选的实施方式，由于不同用户所作出的手势动作差异较大且手势动作的准确性难以保证，因此，监测单元301除了可识别用户的手势动作，还可识别目标特征明显的触控笔等设备，从而用户在使用触控笔作出动作时，监测单元301可通过识别触控笔的运动轨迹获知用户的操作指令，且识别效果更为准确。

作为一种可选的实施方式，在监测单元301监测到用户指示获取听写内容的获取手势动作时，定位单元302控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，可以通过以下方式实现：假设定位单元302存储的获取手势动作为：用户的手指尖端在目标图像上的某一坐标点开始滑动，且手指尖端最终滑动回到该坐标点上；则在监测单元301监测到用户做出上述获取手势动作时，定位单元302控制拍摄模组拍摄学习区域的目标图像，在目标图像上构建坐标系，并根据监测用户手势动作时所记录到用户手指尖端所处的坐标点构建用户手指尖端的运动轨迹，则运动轨迹所框选出的区域在坐标系中对应的位置信息，既是获取手势动作在目标图像上指示的位置信息。可见，通过监测用户手势动作，即可方便快捷地得知用户在目标图像上指示的位置及所要执行的指令。

作为一种可选的实施方式，识别单元303识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，可以通过以下方式实现：识别单元303根据定位单元302中得到的位置信息，对目标图像上该位置信息所指示的区域进行光学字符识别，从而得到该位置信息对应的文字信息，并将文字信息如汉字词汇或英文单词等设为用户选取的听写内容。

作为另一种可选的实施方式，若用户所选取的听写内容所占面积较小，且因拍摄模组的视角有限，用户在选取该听写内容时可能遮蔽了该听写内容的部分区域，或者将其它无关内容与该听写内容一起框选，因此，识别单元303可在识别得到用户指定位置信息对应的文字信息时，将识别到的文字信息输出在显示屏上以询问用户该文字信息是否被正确识别，假设用户发现电子设备所识别得到的汉字词汇中误加入了其它汉字，或者所识别得到的英文单词部分英文字母缺失，则可点击屏幕上的撤销按钮对所识别到的文字信息进行撤销，以重新框选文字信息，从而避免了在批量选取的听写内容中存在选取错误的内容，优化了用户使用体验。

作为一种可选的实施方式，听写单元304在检测到结束选取的指令时，输出听写内容。具体地，在开启获取听写内容的功能时，电子设备的屏幕上设置有结束选取按钮，用户在完成听写内容选取时点击结束选取按钮，从而听写单元304检测到用户结束选取的指令，关闭获取听写内容的功能，并通过语音播报的方式输出用户本次选取的听写内容以对用户进行听写。从而可通过用户的手势动作便捷地选取听写内容，实现智能化听写。

作为另一种可选的实施方式，监测单元301除了可监测用户的获取手势动作，也可以监测用户的其它手势动作，如设定用户翻转手掌的手势动作为关闭获取听写内容功能的指令，则用户可在完成听写内容选取时通过翻转手掌来关闭听写内容获取功能，从而使用户获取听写内容的操作更为便捷。

可见，本发明实施例中，监测单元301可控制电子设备的拍摄模组监测用户的手势动作，在监测到用户指示获取听写内容的获取手势动作时，定位单元302控制拍摄模组拍摄目标图像，并识别获取手势动作在目标图像上指示的位置信息，进而识别单元303识别并记录位置信息所对应的文字信息，设为用户选取的听写内容，听写单元304在检测到结束选取的指令时，输出听写内容。可见，只需用户在课本上通过手势动作对听写内容进行选取，即可根据手势动作识别出用户选取的听写内容并对用户进行听写，实现了听写内容的智能化获取，提升了用户操作的便捷性。

实施例四

请参阅图4，图4为本发明另一实施例提供的一种电子设备的结构示意图；图4所示的电子设备是在图3所示的电子设备的基础上进行优化得到的，图4所示的电子设备还可以包括：

记录单元305，用于在听写单元304输出听写内容之后，将听写内容作为历史听写内容添加至用户对应的听写数据库；听写数据库用于记录用户选取的历史听写内容及每一历史听写内容被用户选取的听写次数；

标注单元306，用于在电子设备的屏幕当前输出显示的内容中存在与任一历史听写内容相匹配的第一听写内容，则对第一听写内容进行标注；

提示单元307，用于在检测到用户点击第一听写内容时，输出第一听写内容的读音；

生疏检测单元308，用于在记录单元305将听写内容作为历史听写内容添加至用户对应的听写数据库之后，若检测到用户选取的听写内容匹配于听写数据库中任一听写次数达到预设次数的历史听写内容，将听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；

参考内容单元309，用于在生疏听写内容为汉字时，在听写数据库中获取若干与生疏听写内容的字体结构相同且与生疏听写内容存在相同偏旁部首的历史听写内容，设为生疏听写内容的参考内容；

参考内容单元309，还用于在生疏听写内容为英文单词时，获取若干与生疏听写内容的中文含义相同的英文单词并设为生疏听写内容的参考内容；

辅导单元310，用于根据参考内容生成生疏听写内容对应的听写辅导资料，以供用户掌握生疏听写内容；

用户检测单元311，用于当检测到用户在预设时长内未对所述电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于电子设备周边；

学习单元312，用于在用户检测单元检测到用户位于电子设备周边时，输出生疏听写内容的读音及笔画顺序供用户进行学习；

停止单元313，用于在检测到用户指示已掌握生疏听写内容的指令时，停止输出生疏听写内容；

测试单元314，用于在辅导单元根据参考内容生成生疏听写内容对应的听写辅导资料之后，获取用户预设的学习周期，在达到学习周期时根据生疏听写内容对应的听写辅导资料生成若干听写测试习题供用户进行测试，以通过听写测试习题验证用户对生疏听写内容的掌握程度。

本发明实施例中，记录单元305将构建用户的听写数据库，从而标注单元306和提示单元307可根据听写数据库为用户提供标注与提示；生疏检测单元308则检测出用户未掌握的生疏听写内容，并由参考单元309和辅导单元310为用户提供辅导；学习单元312则会在用户的碎片化时间段为用户提供生疏听写内容；测试单元314测试用户对生疏听写内容的掌握情况并更新生疏听写内容。

作为一种可选的实施方式，在听写单元304输出听写内容之后，记录单元305将听写内容作为历史听写内容添加至用户对应的听写数据库；听写数据库用于记录用户选取的历史听写内容及每一历史听写内容被用户选取的听写次数；若电子设备的屏幕当前输出显示的内容中存在与任一历史听写内容相匹配的第一听写内容，则标注单元306对第一听写内容进行标注；在检测到用户点击第一听写内容时，提示单元307输出第一听写内容的读音。具体地，记录单元305将为每一用户构建听写数据库，记录用户所选取过的听写内容作为历史听写记录以及每一历史听写记录被用户选取为听写内容的次数，从而在用户使用电子设备浏览网页或者阅读文字时，标注单元306可根据听写数据库中的内容对屏幕上输出的内容进行检索，若屏幕上输出的内容存在用户所选取的历史听写内容相匹配的第一听写内容，则在屏幕上对第一听写内容进行标注，对第一听写内容进行标注可以是指对第一听写内容的底色、字体颜色或者字体格式进行修改，也可以是指采用方框、下划线等标志符号对第一听写内容进行标注，从而使用户获知该内容为历史听写内容；此外，用户还可以点击被标注的第一听写内容，提示单元307在检测到用户点击第一听写内容时，输出第一听写内容的读音供用户复习；此外，提示单元307还可输出第一听写内容的笔画顺序或者包括第一听写内容的例句等内容，用户可自行设置点击第一听写内容时所触发输出的内容。可见，通过构建听写数据库并检索用户所浏览的内容，可使用户在使用电子设备的过程中巩固历史听写内容，帮助用户学习。

作为一种可选的实施方式，在记录单元305将听写内容作为历史听写内容添加至用户对应的听写数据库之后，若生疏检测单元308检测到用户选取的听写内容匹配于听写数据库中任一听写次数达到预设次数的历史听写内容，将听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；若生疏听写内容为汉字，则参考内容单元309在听写数据库中获取若干与生疏听写内容的字体结构相同且与生疏听写内容存在相同偏旁部首的历史听写内容，设为生疏听写内容的参考内容；若生疏听写内容为英文单词，则则参考内容单元309获取若干与生疏听写内容的中文含义相同的英文单词并设为生疏听写内容的参考内容；辅导单元310根据参考内容生成生疏听写内容对应的听写辅导资料，以供用户掌握生疏听写内容。具体地，假设汉字“霜”累计有3次被用户选取为听写内容，已达到预设次数3次，则生疏检测单元308认为用户未掌握汉字“霜”，此时生疏检测单元308将汉字“霜”设为该用户的生疏听写内容；在获知汉字“霜”为用户的生疏听写内容之后，参考内容单元309在听写数据库中查找出与汉字“霜”的字体结构相同且存在相同字体结构的汉字“雷”、“雪”和“雾”作为汉字“霜”参考内容；若用户的生疏听写内容为英文单词，则参考内容单元309查找中文含义与生疏听写内容相同的英文单词设为参考内容；在获取到用户的生疏听写内容及对应的参考内容之后，辅导单元310可根据参考内容生成生疏听写内容对应的听写辅导资料，如生成的汉字“霜”的听写辅导资料包括了汉字“雷”、“雪”和“雾”的读音、释义与笔画顺序，用户可根据听写辅导资料对与汉字“霜”形似的汉字进行学习和区分，从而尽快掌握生疏听写内容。

作为另一种可选的实施方式，当用户检测单元311检测到用户在预设时长内未对电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于电子设备周边；若是，学习单元312输出生疏听写内容的读音及笔画顺序供用户进行学习；在停止学习单元313检测到用户指示已掌握生疏听写内容的指令时，停止输出生疏听写内容。具体地，由于用户并非时刻都在使用电子设备进行学习，用户可能使用电子设备观看视频或者将电子设备闲置，此时用户已较长时间未对电子设备执行任意操作，则检测单元311可通过拍摄模组拍摄其前方的环境图像，以判断用户是否处于电子设备周边，若是，则学习单元312可在屏幕上以滚动播放的方式输出用户的生疏听写内容，以及生疏听写内容的读音和笔画顺序，从而用户可利用碎片化的时间对生疏听写内容进行浏览学习，帮助用户掌握生疏听写内容；若用户已多次浏览某个生疏听写内容且已掌握该生疏听写内容，则可在该生疏听写内容输出时点击停止按钮，从而停止学习单元313停止输出该生疏听写内容。可见，通过利用用户碎片化的时间向用户推送生疏听写内容，可提高用户掌握生疏听写内容的效率。

作为一种可选的实施方式，在辅导单元310根据参考内容生成生疏听写内容对应的听写辅导资料之后，测试单元314获取用户预设的学习周期，在达到学习周期时根据生疏听写内容对应的听写辅导资料生成若干听写测试习题供用户进行测试，以通过听写测试习题验证用户对生疏听写内容的掌握程度。具体地，假设用户在电子设备上预设自己的学习周期为一星期，则每隔一星期，测试单元314将根据用户当前的生疏听写内容对应的辅导资料生成对应于生疏听写内容的测试习题，测试习题可以是根据读音与释义书写汉字等题型，从而在用户正确完成了测试习题时，可认为用户已掌握了该测试习题对应的生疏听写内容，此时测试单元314将该生疏听写内容进行移除，若用户未能准确完成测试习题，则对应的生疏听写内容将继续累积供用户进行学习，并在下一学习周期测试单元314再生成测试习题对用户进行测试。可见，根据生疏学习内容生成测试习题对用户进行测试，可及时掌握用户的学习情况，并更新生疏听写内容。

可见，本发明实施例中，通过记录单元305构建听写数据库记录用户的历史听写内容，标注单元306和提示单元307可在用户使用电子设备的过程中向用户提示并推送与历史听写内容相关的内容；此外，学习单元312还可利用用户碎片化的时间向用户展示生疏听写内容的相关知识，帮助用户学习；测试单元314还通过生疏听写内容生成测试习题，及时了解用户对生疏听写内容的掌握程度，更新用户的生疏听写内容，人机交互性良好。

实施例五

请参阅图5，图5是本发明另一实施例公开的另一种电子设备的结构示意图。如图5所示，该可电子设备可以包括：

存储有可执行程序代码的存储器401；

与存储器401耦合的处理器402；

其中，处理器402调用存储器401中存储的可执行程序代码，执行图1和图2任意一种基于用户行为的听写内容获取方法。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1和图2任意一种基于用户行为的听写内容获取方法。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(RandomAccess Memory，RAM)、可编程只读存储器(Programmable Read-onlyMemory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-timeProgrammable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种基于用户行为的听写内容获取方法及电子设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于用户行为的听写内容获取方法，其特征在于，包括：

控制电子设备的拍摄模组监测用户的手势动作；

在监测到用户指示获取听写内容的获取手势动作时，控制所述拍摄模组拍摄目标图像，并识别所述获取手势动作在所述目标图像上指示的位置信息；

识别并记录所述位置信息所对应的文字信息，设为用户选取的听写内容；

在检测到结束选取的指令时，输出所述听写内容。

2.根据权利要求1所述的方法，其特征在于，在所述输出所述听写内容之后，所述方法还包括：

将所述听写内容作为历史听写内容添加至用户对应的听写数据库；所述听写数据库用于记录用户选取的所述历史听写内容及每一所述历史听写内容被用户选取的听写次数；

若所述电子设备的屏幕当前输出显示的内容中存在与任一所述历史听写内容相匹配的第一听写内容，则对所述第一听写内容进行标注；

在检测到用户点击所述第一听写内容时，输出所述第一听写内容的读音。

3.根据权利要求2所述的方法，其特征在于，在将所述听写内容作为历史听写内容添加至用户对应的听写数据库之后，所述方法还包括：

若检测到所述用户选取的听写内容匹配于所述听写数据库中任一听写次数达到预设次数的历史听写内容，将所述听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；

若所述生疏听写内容为汉字，则在所述听写数据库中获取若干与所述生疏听写内容的字体结构相同且与所述生疏听写内容存在相同偏旁部首的历史听写内容，设为所述生疏听写内容的参考内容；

若所述生疏听写内容为英文单词，则获取若干与所述生疏听写内容的中文含义相同的英文单词并设为所述生疏听写内容的参考内容；

根据所述参考内容生成所述生疏听写内容对应的听写辅导资料，以供用户掌握所述生疏听写内容。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

当检测到用户在预设时长内未对所述电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于所述电子设备周边；

若是，输出所述生疏听写内容的读音及笔画顺序供用户进行学习；

在检测到用户指示已掌握所述生疏听写内容的指令时，停止输出所述生疏听写内容。

5.根据权利要求3所述的方法，其特征在于，在所述根据所述参考内容生成所述生疏听写内容对应的听写辅导资料之后，所述方法还包括：

获取用户预设的学习周期，在达到所述学习周期时根据所述生疏听写内容对应的听写辅导资料生成若干听写测试习题供所述用户进行测试，以通过所述听写测试习题验证所述用户对所述生疏听写内容的掌握程度。

6.一种电子设备，其特征在于，包括：

监测单元，用于控制电子设备的拍摄模组监测用户的手势动作；

定位单元，用于在所述检测单元监测到用户指示获取听写内容的获取手势动作时，控制所述拍摄模组拍摄目标图像，并识别所述获取手势动作在所述目标图像上指示的位置信息；

识别单元，用于识别并记录所述位置信息所对应的文字信息，设为用户选取的听写内容；

听写单元，用于在检测到结束选取的指令时，输出所述听写内容。

7.根据权利要求6所述的电子设备，其特征在于，所述电子设备还包括：

记录单元，用于在所述听写单元输出所述听写内容之后，将所述听写内容作为历史听写内容添加至用户对应的听写数据库；所述听写数据库用于记录用户选取的所述历史听写内容及每一所述历史听写内容被用户选取的听写次数；

标注单元，用于在所述电子设备的屏幕当前输出显示的内容中存在与任一所述历史听写内容相匹配的第一听写内容，则对所述第一听写内容进行标注；

提示单元，用于在检测到用户点击所述第一听写内容时，输出所述第一听写内容的读音。

8.根据权利要求7所述的电子设备，其特征在于，所述电子设备还包括：

生疏检测单元，用于在所述记录单元将所述听写内容作为历史听写内容添加至用户对应的听写数据库之后，若检测到所述用户选取的听写内容匹配于所述听写数据库中任一听写次数达到预设次数的历史听写内容，将所述听写次数达到预设次数的历史听写内容设为用户对应的生疏听写内容；

参考内容单元，用于在所述生疏听写内容为汉字时，在所述听写数据库中获取若干与所述生疏听写内容的字体结构相同且与所述生疏听写内容存在相同偏旁部首的历史听写内容，设为所述生疏听写内容的参考内容；

所述参考内容单元，还用于在所述生疏听写内容为英文单词时，获取若干与所述生疏听写内容的中文含义相同的英文单词并设为所述生疏听写内容的参考内容；

辅导单元，用于根据所述参考内容生成所述生疏听写内容对应的听写辅导资料，以供用户掌握所述生疏听写内容。

9.根据权利要求8所述的电子设备，其特征在于，所述电子设备还包括：

用户检测单元，用于当检测到用户在预设时长内未对所述电子设备执行任意操作时，通过电子设备的拍摄模组检测用户是否位于所述电子设备周边；

学习单元，用于在所述用户检测单元检测到所述用户位于所述电子设备周边时，输出所述生疏听写内容的读音及笔画顺序供用户进行学习；

停止单元，用于在检测到用户指示已掌握所述生疏听写内容的指令时，停止输出所述生疏听写内容。

10.根据权利要求8所述的电子设备，其特征在于，所述电子设备还包括：

测试单元，用于在所述辅导单元根据所述参考内容生成所述生疏听写内容对应的听写辅导资料之后，获取用户预设的学习周期，在达到所述学习周期时根据所述生疏听写内容对应的听写辅导资料生成若干听写测试习题供所述用户进行测试，以通过所述听写测试习题验证所述用户对所述生疏听写内容的掌握程度。

Images