CN104253904A - 一种实现点读学习的方法及智能手机 - Google Patents
一种实现点读学习的方法及智能手机 Download PDFInfo
- Publication number
- CN104253904A CN104253904A CN201410449034.9A CN201410449034A CN104253904A CN 104253904 A CN104253904 A CN 104253904A CN 201410449034 A CN201410449034 A CN 201410449034A CN 104253904 A CN104253904 A CN 104253904A
- Authority
- CN
- China
- Prior art keywords
- learning
- smart mobile
- mode
- mobile phone
- attribute
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明公开了一种实现点读学习的方法及智能手机。所述方法包括：预先在智能手机的端部设置摄像头，开启所述摄像头获取用户欲点读的书本内容的图像；查询预置的书本数据库中是否存在与该图像匹配的数据；若存在，确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。通过本发明的技术方案，实现了通过智能手机实现点读书本内容的目的，克服了现有手机摄像头拍摄范围无法精确聚焦点读书本的内容、使用过程点读动作不顺畅的缺陷，为用户点读学习提供方便。
Description
技术领域
本发明涉及智能终端领域，尤其涉及一种实现点读学习的方法及智能手机。
背景技术
随着智能手机的普及，手机的附加功能越来越多，这些附加功能给人们生活带来很多便利。例如通过手机摄像头记录日常生活的点滴，不仅省去了用户随身携带相机的不便，同时，现有智能手机的大屏特征也为用户后期修饰、处理照片提供了便利，并且，还方便用户随时随地的将拍摄的照片或视频上传到网络与朋友和家人分享。
OCR(Optical Character Recognition，光学字符识别)是一种通过电子设备(例如扫描仪或数码相机)检查纸上打印的字符，通过检测暗、亮的模式确定其形状，然后用字符识别方法将形状翻译成计算机文字的过程；即对文本资料进行扫描，然后对图像文件进行分析处理，获取文字及版面信息的一个过程。
为了辅助学生的学习，市面上推出了多种扫描笔及配合同步学习系统，通过扫描笔对学习资料进行扫描，通过同步学习系统给学生相应的讲解以辅导，便捷的克服学生学习时遇到的疑难点。然而，用户通常不会随身携带扫描笔，无法满足用户随时随地的学习需求；另一方面，用户通常会随身携带的智能手机，由于其摄像头拍摄范围无法精确聚焦到纸张上的某一个字符，因此借助手机实现点读学习的效果不如人意。
发明内容
本发明的目的在于提出一种实现点读学习的方法及智能手机，能够解决现有手机无法精确聚焦书本内容的缺陷，实现了通过手机实现点读书本内容的目的，为用户点读学习提供方便。
为达此目的，本发明采用以下技术方案：
本发明一方面提供了一种实现点读学习的方法，预先在智能手机的端部设置摄像头，基于所述智能手机实现点读学习的步骤包括：
开启所述摄像头获取用户欲点读的书本内容的图像；
查询预置的书本数据库中是否存在与该图像匹配的数据；
若存在，确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。
其中，所述查询预置的书本数据库中是否存在与该图像匹配的数据，包括：
提取该图像中的图像特征信息和/或字符串特征信息；
查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据。
其中，所述确定所述数据对应的学习模式，包括：
根据该图像中的图像特征信息和/或字符串特征信息获取所述数据的位置信息；
确定该位置信息对应的学习模式；
其中，所述位置信息包括页码、以及在页面中的XY坐标信息。
其中，所述确定该位置信息对应的学习模式，包括：
确定该位置信息对应的属性；
获取与该属性对应的学习模式；
其中，所述属性为课文标题、字词、句子、段落或练习题的一种，所述学习模式包括课文朗读、字词朗读、翻译、语法讲解、习题解答中的至少一种。
其中，所述确定该位置信息对应的学习模式之前，包括：
建立不同位置与对应属性之间的第一关联，保存该第一关联；
建立不同属性与对应学习模式的第二关联，保存该第二关联；
所述确定该位置信息对应的属性具体为：
查询所述第一关联，获取与该位置信息对应的属性；
所述获取与该属性对应的学习模式具体为：
查询所述第二关联，获取与该属性对应的学习模式。
其中，所述数据库、第一关联、第二关联设于所述智能手机中；
或者，
所述数据库、第一关联、第二关联设于云端中。
其中，所述通过所述智能手机向用户输出对应的学习模式包括：
通过所述智能手机的显示屏显示该属性对应的学习模式菜单或学习内容；
通过所述智能手机的发声装置输出对应的语音讲解。
其中，所述通过所述智能手机的显示屏显示该属性对应的学习模式菜单之后，包括：
当检测到用户选择学习模式菜单的触屏操作指令时，获取对应的学习内容和/或语音讲解信息。
其中，所述查询预置的书本数据库中是否存在与该图像匹配的数据之后，还包括：
若不存在，根据提取所述图像包含的图像特征信息和/或字符串特征信息，识别用户欲点读的书本内容是否为字词或短语；
若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则获取与用户欲点读的书本内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
其中，所述预先在智能手机的端部设置摄像头，具体为：
预先在智能手机的底部设置摄像头。
本发明另一方面还提供了一种实现点读学习的智能手机，包括：
扫描模块，用于开启设置在智能手机端部的摄像头获取用户欲点读的书本内容的图像；
匹配模块，用于查询预置的书本数据库中是否存在与该图像匹配的数据；
点读模块，用于若所述匹配模块的查询结果为存在，确定所述数据对应的学习模式，向用户输出对应的学习模式。
其中，所述查询预置的书本数据库中是否存在与该图像匹配的数据，包括：
提取该图像中的图像特征信息和/或字符串特征信息；
查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据。
其中，所述点读模块，包括：
位置确定单元，用于若所述匹配模块的查询结果为存在，获取所述数据的位置信息；
模式确定单元，用于确定该位置信息对应的学习模式；
其中，所述位置信息包括：页码、以及在页面中的XY坐标信息。
其中，所述确定该位置信息对应的学习模式具体为：
确定该位置信息对应的属性，获取与该属性对应的学习模式；
其中，所述属性为课文标题、字词、句子、段落或练习题的一种，所述学习模式包括课文朗读、字词朗读、翻译、语法讲解、习题解答中的至少一种。
其中，还包括设置模块，
所述设置模块用于在确定该位置信息对应的学习模式之前，建立不同位置与对应属性之间的第一关联，保存该第一关联；以及建立不同属性与对应学习模式的第二关联，保存该第二关联。
其中，还包括存储模块，
所述存储模块设于所述智能手机中或者设于云端，用于存储所述数据库、第一关联、第二关联。
其中，所述点读模块还包括：
显示单元，用于通过所述智能手机的显示屏显示该属性对应的学习模式菜单或学习内容；
语音单元，用于通过所述智能手机的发声装置输出对应的语音讲解。
其中，所述点读模块还用于：在通过所述智能手机的显示屏显示该属性对应的学习模式菜单之后，当检测到用户选择学习模式的触屏操作指令时，获取对应的学习内容和/或语音讲解信息。
其中，所述点读模块还用于：若所述匹配模块的查询结果为不存在，根据提取所述图像包含的图像特征信息和/或字符串特征信息，识别用户欲点读的书本内容是否为字词或短语；若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则获取与用户欲点读的书本内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
其中，所述摄像头设置在所述智能手机的底部。
实施本发明实施例，具有如下有益效果：
本发明实施例通过预先在智能手机的端部设置摄像头，开启所述摄像头获取用户欲点读的书本内容的图像；查询预置的书本数据库中是否存在与该图像匹配的数据；若存在，确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。基于本发明的方案，实现了通过智能手机实现点读书本内容的目的，克服了现有手机摄像头拍摄范围无法精确聚焦点读书本的内容、使用过程中点读动作不顺畅的缺陷，为用户点读学习提供方便。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明第一实施例的一种实现点读学习的方法的流程示意图。
图2是本发明第二实施例的一种实现点读学习的方法流程示意图。
图3是本发明第三实施例的一种实现点读学习的智能手机的结构示意图。
具体实施方式
下面结合本发明的附图对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
结合图1对本发明的第一实施例进行说明。
图1是本发明第一实施例的一种实现点读学习的方法流程图，详述如下：
步骤101，预先在智能手机的端部设置摄像头。
现有的智能手机为了拍照方便，大都将摄像头设置在手机前面和或背面，然而这种手机摄像头无法准确对焦到想要书本中具体某一行或某一字词内容，尤其是当书本内容密度高时，无法精确扫描获取到书本中的某一行字符的图像。
有鉴于此，在在第一实施例中，可选择在智能手机的上/下/左/右端部设置摄像头。优选的，在手机底部(下端部)的中央或角落设置摄像头，扫描获取书本内容的图像时，只需要将所述智能手机底部的摄像头对准用户欲点读的书本内容，例如某一个字词，或者将可为智能手机底部沿着某一行字符内容平移进行扫描，以获取该书本内容所在区域的图像。
步骤102，开启所述摄像头获取用户欲点读的书本内容的图像。
在第一实施例中，通过所述智能手机端部的摄像头可扫描或者拍照获取用户欲点读的内容的图像。例如，当用户希望点读学习书本中的某一行，可手持智能手机将其竖立置于书本该行的上方并沿该行字符平移，便可扫描获取该行字符在书本中的图片；又或者当用户希望点读学习书本中的某一段落，可手持智能手机将其竖立置于该段落的上方拍摄获取该段落在书本中的图片，或者手持智能手机将其在该段落的区域进行平移，扫描获取该段落在书本中的图片。获取的图片范围精确，操作使用也更人性化。
步骤103，查询预置的书本数据库中是否存在与该图像匹配的数据。
在第一实施例中，该步骤可通过提取该图像中的图像特征信息和/或字符串特征信息，通过查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据来实现。
在第一实施例中，通过智能手机端部的摄像头扫描或者拍摄获取到需点读内容的图像，该图像中包含有对应书本内容的图像特征信息和/或字符串特征信息，其中的字符串特征信息既包括字符串本身信息，还可包括字符的排版信息，以区别在同一书本中(或者不同书本中)有相同字符串信息但排版可能不一样的情况。
在第一实施例中，分析摄像头获取的图像，提取出其中图像特征信息和/或字符串特征信息，以该图像特征信息和/或字符串特征信息查与预先预置的书本数据库进行匹配，确定书本数据库中是否存在对应的数据。其中该书本数据库中预先存储了若干书本内容信息。
步骤104，若书本数据库中存在对应的数据，则确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。
在第一实施例中，若书本数据库中存在对应的数据，则根据该图像中的图像特征与字符串特征信息，确定出其在书本中所在的页码，以及页码内的具体XY坐标区域。具体可通过图像算法与预置的书本数据库中的数据图像进行对比，找到与所述图像匹配的页码，确定出页码，然后根据图像信息表现的图像区域，确定在页面中所在的具体位置，得出具体XY坐标信息。
进一步的，得出对应的位置信息后，再基于该位置信息确定对应的学习模式。本实施例中，需要提前设置关联信息，将不同坐标位置对应的属性提前预置好，用户点读时，可根据不同坐标位置对应的属性，确定出给用户提供哪些学习模式。具体过程可为根据书本数据库中与图像匹配的数据的位置信息，通过制定的关联读取该位置对应的属性，进一步的根据不同属性提供给用户对应的学习模式(学习内容)。现有的一般扫描笔只能搜素出用户需点读的书本内容，以语音或者文本展示出来，相比之下，本发明实施例可根据书本内容的属性个性化输出对应的学习模式(学习内容)，有利于提高学习效果。
在本实施例中，属性-学习模式的对应关系如：单词属性-背单词功能、句子属性-点读/句子语法讲解/口语学习/翻译等功能、儿歌-学儿歌功能、标题-根据标题类型分别提供对应功能，如标题是“听录音选图片”，功能可为放录音然后判断用户选择图片的正误。
需要说明的是，若书本数据库中不存在对应的数据，则根据所述图像的图像特征信息和/或字符串特征信息识别用户欲点读的内容是否为字词或短语；若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则可请求获取与用户欲点读的内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
需要说明的是，本实施例中的书本数据库、位置信息、属性信息、学习模式信息以及位置与属性之间的关联信息、属性与学习模式之间的关联信息等都通过提前针对不同的书本数据进行设置，设置好之后可存储在智能手机的存储空间或云端。
通过本发明第一实施例，预先在智能手机的端部设置摄像头，然后通过摄像头获取欲点读学习内容的图像，通过图像算法确定出其在书本中的页码，结合OCR识别图像中字符串/字符信息和排版信息，辅助定位出欲点读学习内容在书本中的位置坐标，进而确定出对应的学习模式并通过所述智能手机向用户输出对应的学习模式。实现了通过智能手机实现点读书本内容的目的，克服了现有手机摄像头无法精确聚焦点读书本的内容、使用过程点读动作不顺畅的缺陷，为用户点读学习提供方便。
结合图2对本发明的第二实施例进行说明，在第二实施例中增加了对确定所述数据对应的学习模式的详细说明。
图2是本发明第二实施例的一种实现点读学习的方法流程图，详述如下：
步骤201，在智能手机的底部设置摄像头。
在第二实施例中，在智能手机的底部中央或者底部的角落设置摄像头，以方便用户手持智能手机并精确对准对书本内容进行图像获取。
步骤202，预置书本数据库。
在第二实施例中，所述书本数据库中可保存若干书本信息。在此基础上，还需建立不同位置与对应属性之间的第一关联，保存该第一关联；以及建立不同属性与对应学习模式的第二关联，保存该第二关联。其中的属性指的是课文标题、字词、句子、段落、练习题等。学习模式指的是课文朗读、字词朗读、翻译、语法讲解、习题解答等选项菜单。
需要说明的是，所述书本数据库、第一关联、第二关联既可设于所述智能手机中，也可设于云端中。
步骤203，开启所述摄像头，获取用户欲点读的书本内容的图像。参见第一实施例所述。
步骤204，提取该图像中的图像特征信息和/或字符串特征信息，将其与书本数据库中的数据进行匹配。
在第二实施例中，匹配可基于图像对比算法结合OCR技术实现。
步骤205，书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据？若是，执行下一步骤，若否，执行步骤220。
步骤206，确定该数据在书本中的位置。
第二实施例中包括在书本中的页码信息、以及在页面中的XY坐标信息。具体实现方式参考第一实施例所述。
步骤207，确定该位置信息对应的属性。
在第二实施例中，可通过查询智能手机本地存储的第一关联(或者通过联网查询云端的所述第一关联)，获取与该位置信息对应的属性。所述属性可为课文标题、字词、句子、段落或练习题的一种等，可根据不同的书本信息进行设定。
步骤208，获取与该属性对应的学习模式。
在第二实施例中，可通过查询智能手机本地存储的第二关联(或者通过联网查询云端的所述第二关联)，获取与该属性对应的学习模式。所述学习模式可包括课文朗读、字词朗读、翻译、语法讲解、习题解答中的至少一种等，可根据不同的书本信息进行设定。
步骤209，通过所述智能手机的显示屏显示对应的学习模式的菜单。
比如用户欲点读的书本内容对应的属性是“课文标题”，则在智能手机的显示屏显示“听课文”、“翻译”、“重点知识点讲解”等选项菜单。如对应的属性是“单词”，则在智能手机的显示屏输出显示“背单词”、“听写单词”、“翻译”、“应用”等选项菜单；再比如对应的属性是“课后习题”，则在智能手机的显示屏输出显示“习题解析”、“知识点”等选项菜单。当然还包括其他属性及对应的学习模式，在此不一一列举。
步骤210，检测到用户选择学习模式的菜单的触屏操作指令时，获取对应的学习内容和或语音讲解信息。
在第二实施例中，用户可通过智能手机触摸屏选择具体的选项菜单，以获取希望得到的学习资料或辅导。
步骤211，通过所述智能手机的显示屏显示具体的学习内容，和/或通过所述智能手机的发声装置输出对应的语音讲解。由此根据用户选择的书本内容针对性的给出点读学习的辅导，本次点读结束。
步骤220，判断用户欲点读的内容是否为字词或短语？若是，执行下一步骤，若否，执行步骤222。
在第二实施例中，当书本数据库中没有找到与摄像头获取的图像匹配的数据时，可根据该图像包含的图像特征信息和/或字符串特征信息确定用户学习的内容是否为一个字词或短语。若是，执行下一步骤，若否，执行步骤222。
步骤221，查询预置的字典数据库，获取所述字词或短语对应的字典内容；通过所述智能手机向用户输出该字典内容。本次点读结束。
在第二实施例中，如果欲点读内容并非预置的书本数据库的内容，且确定用户欲点读内容为英文单词/短语/中文汉字/词语,则启动词典查询功能，给出具体字词的查询信息。
需要说明的是，在本实施例中需在智能手机中或者云端预置英文字典数据库、中文字典数据库和/或其他语种的字典数据库。
步骤222，请求获取与用户欲点读的内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。本次点读结束。
在第二实施例中，如果用户欲点读内容非预置的书本数据库内容，且确定出目标字符串内容不是英文单词/短语/中文汉字/词语等非词典内容，则可连接网络服务器，获取互联网资源，然后根据搜索内容匹配，推荐出对应内容。比如练习册数学题等解题思路等传统学习推荐方法。
需要说明的是，本发明实施例中的属性及对应的学习模式并不限于上述举例，用户还可根据实际情况设置其他属性及学习模式。
另外，还可通过点读或扫描行为方式结合属性信息，输出更有针对性学习内容与学习模式。比如“点读为双击”行为方式结合“句子”属性，可直接输出进行翻译、语法讲解该句子的学习模式；“扫描轨迹为圆形/椭圆形”的行为方式结合扫描区域内有一个“课文自然段”的属性，则可直接输出播放该自然段课文的学习模式。当然，还有很多其他行为方式和属性的结合，对应以输出对应学习模式的方案，在此不一一列举。但均应当属于本发明保护的范围。
除上述实施例所述之外，本发明的点读学习方法还可基于智能手机的语音输入功能，根据用户输入的语音进一步针对点读书本区域智能的进行学习模式选择，以输出给用户需要查询的内容或者学习方法。
以下为本发明实施例提供的一种实现点读学习的智能手机的实施例。所述装置的实施例与上述的方法实施例属于同一构思，装置的实施例中未详尽描述的细节内容，可以参考上述方法实施例。
图3示出了本发明第三实施例的一种实现点读学习的智能手机的结构示意图，下面进行详细说明。
请参见图3，所述装置包括：扫描模块310、匹配模块320以及点读模块330。各模块详述如下：
所述的扫描模块310，用于开启设置在智能手机端部的摄像头获取用户欲点读的书本内容的图像。
在第三实施例中，优选的，所述摄像头可设置在所述智能手机的底部，将所述智能手机底部的摄像头对准用户欲点读的书本内容，开启所述摄像头便可获取所述书本内容所在区域的图像。
所述的匹配模块320，用于查询预置的书本数据库中是否存在与该图像匹配的数据。
优选的，本实施例中查询预置的书本数据库中是否存在与该图像匹配的数据的方式可为：提取该图像中的图像特征信息和/或字符串特征信息；查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据。
所述的点读模块330，用于若书本数据库存在匹配的数据，确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。
优选的，本实施例中所述点读模块330还具体包括：
位置确定单元，用于若书本数据库存在匹配的数据，获取所述数据的位置信息；其中，所述位置信息包括页码、以及在页面中的XY坐标信息；
模式确定单元，用于确定该位置信息对应的学习模式。具体实现方式参见上述方法实施例所述。
进一步的，本实施例中所述点读模块230还具体包括：
显示单元，用于通过所述智能手机的显示屏显示该属性对应的学习模式菜单或学习内容。参见上述方法实施例所述。
语音单元，用于通过所述智能手机的发声装置输出对应的语音讲解。对应的，所述点读模块230还用于在通过所述智能手机的显示屏显示该属性对应的学习模式菜单之后，当检测到用户选择学习模式的触屏操作指令时，获取对应的语音讲解信息。
较佳的，本实施例中所述确定该位置信息对应的学习模式的方式可为：确定该位置信息对应的属性，所述属性指的是课文标题、字词、句子、段落或练习题等；然后获取与该属性对应的学习模式；所述学习模式指的是课文朗读、字词朗读、翻译、语法讲解、习题解答等中的至少一种。
较佳的，本实施例的装置还包括设置模块340，所述设置模块340用于在确定该位置信息对应的学习模式之前，建立不同位置与对应属性之间的第一关联，保存该第一关联；以及建立不同属性与对应学习模式的第二关联，保存该第二关联。
对应的，本实施例上述的确定该位置信息对应的属性的方式可为：查询所述第一关联，获取与该位置信息对应的属性；上述的获取与该属性对应的学习模式的方式可为：查询所述第二关联，获取与该属性对应的学习模式。
进一步的，本实施例的装置还包括有存储模块350，所述存储模块350设于所述智能手机中或者设于云端，用于存储所述书本数据库、第一关联、第二关联。
较佳的，本实施例中，所述点读模块230还用于：若书本数据库不存在与摄像头获取的图像对应的数据，根据所述图像包含的图像特征信息和/或字符串特征信息，识别用户欲点读的书本内容是否为字词或短语；若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则请求获取与用户欲点读的书本内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
通过上述第三实施例，扫描模块获取用户欲点读的书本内容的图像，匹配模块查询预置的书本数据库中是否存在与该图像匹配的数据；若存在，点读模块确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。基于本发明的方案，实现了通过智能手机实现点读书本内容的目的，克服了现有手机摄像头拍摄范围无法精确聚焦点读书本的内容、使用过程点读动作不顺畅的缺陷，为用户点读学习提供方便。
以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利要求范围，因此，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，仍属本发明所涵盖的范围。
Claims (20)
1.一种实现点读学习的方法，其特征在于，预先在智能手机的端部设置摄像头，基于所述智能手机实现点读学习的步骤包括：
开启所述摄像头获取用户欲点读的书本内容的图像；
查询预置的书本数据库中是否存在与该图像匹配的数据；
若存在，确定所述数据对应的学习模式，通过所述智能手机向用户输出对应的学习模式。
2.根据权利要求1所述的实现点读学习的方法，其特征在于，所述查询预置的书本数据库中是否存在与该图像匹配的数据，包括：
提取该图像中的图像特征信息和/或字符串特征信息；
查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据。
3.根据权利要求2所述的实现点读学习的方法，其特征在于，所述确定所述数据对应的学习模式，包括：
根据该图像中的图像特征信息和/或字符串特征信息获取所述数据的位置信息；
确定该位置信息对应的学习模式；
其中，所述位置信息包括页码、以及在页面中的XY坐标信息。
4.根据权利要求3所述的实现点读学习的方法，其特征在于，所述确定该位置信息对应的学习模式，包括：
确定该位置信息对应的属性；
获取与该属性对应的学习模式；
其中，所述属性为课文标题、字词、句子、段落或练习题的一种，所述学习模式包括课文朗读、字词朗读、翻译、语法讲解、习题解答中的至少一种。
5.根据权利要求4所述的实现点读学习的方法，其特征在于，所述确定该位置信息对应的学习模式之前，包括：
建立不同位置与对应属性之间的第一关联，保存该第一关联；
建立不同属性与对应学习模式的第二关联，保存该第二关联；
所述确定该位置信息对应的属性具体为：
查询所述第一关联，获取与该位置信息对应的属性；
所述获取与该属性对应的学习模式具体为：
查询所述第二关联，获取与该属性对应的学习模式。
6.根据权利要求4所述的实现点读学习的方法，其特征在于，所述数据库、第一关联、第二关联设于所述智能手机中；
或者，
所述数据库、第一关联、第二关联设于云端中。
7.根据权利要求1所述的实现点读学习的方法，其特征在于，所述通过所述智能手机向用户输出对应的学习模式包括：
通过所述智能手机的显示屏显示该属性对应的学习模式菜单或学习内容；
通过所述智能手机的发声装置输出对应的语音讲解。
8.根据权利要求7所述的实现点读学习的方法，其特征在于，所述通过所述智能手机的显示屏显示该属性对应的学习模式菜单之后，包括：
当检测到用户选择学习模式菜单的触屏操作指令时，获取对应的学习内容和/或语音讲解信息。
9.根据权利要求1所述的实现点读学习的方法，其特征在于，所述查询预置的书本数据库中是否存在与该图像匹配的数据之后，还包括：
若不存在，根据提取所述图像包含的图像特征信息和/或字符串特征信息，识别用户欲点读的书本内容是否为字词或短语；
若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则获取与用户欲点读的书本内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
10.根据权利要求1所述的实现点读学习的方法，其特征在于，所述预先在智能手机的端部设置摄像头，具体为：
预先在智能手机的底部设置摄像头。
11.一种实现点读学习的智能手机，其特征在于，包括：
扫描模块，用于开启设置在智能手机端部的摄像头获取用户欲点读的书本内容的图像；
匹配模块，用于查询预置的书本数据库中是否存在与该图像匹配的数据；
点读模块，用于若所述匹配模块的查询结果为存在，确定所述数据对应的学习模式，向用户输出对应的学习模式。
12.根据权利要求11所述的实现点读学习的智能手机，其特征在于，所述查询预置的书本数据库中是否存在与该图像匹配的数据，包括：
提取该图像中的图像特征信息和/或字符串特征信息；
查询预置的书本数据库中是否存在与所述图像特征信息和/或字符串特征信息匹配的数据。
13.根据权利要求12所述的实现点读学习的智能手机，其特征在于，所述点读模块，包括：
位置确定单元，用于若所述匹配模块的查询结果为存在，获取所述数据的位置信息；
模式确定单元，用于确定该位置信息对应的学习模式；
其中，所述位置信息包括：页码、以及在页面中的XY坐标信息。
14.根据权利要求13所述的实现点读学习的智能手机，其特征在于，所述确定该位置信息对应的学习模式具体为：
确定该位置信息对应的属性，获取与该属性对应的学习模式；
其中，所述属性为课文标题、字词、句子、段落或练习题的一种，所述学习模式包括课文朗读、字词朗读、翻译、语法讲解、习题解答中的至少一种。
15.根据权利要求14所述的实现点读学习的智能手机，其特征在于，还包括设置模块，
所述设置模块用于在确定该位置信息对应的学习模式之前，建立不同位置与对应属性之间的第一关联，保存该第一关联；以及建立不同属性与对应学习模式的第二关联，保存该第二关联。
16.根据权利要求14所述的实现点读学习的智能手机，其特征在于，还包括存储模块，
所述存储模块设于所述智能手机中或者设于云端，用于存储所述数据库、第一关联、第二关联。
17.根据权利要求11所述的实现点读学习的智能手机，其特征在于，所述点读模块还包括：
显示单元，用于通过所述智能手机的显示屏显示该属性对应的学习模式菜单或学习内容；
语音单元，用于通过所述智能手机的发声装置输出对应的语音讲解。
18.根据权利要求17所述的实现点读学习的智能手机，其特征在于，所述点读模块还用于：在通过所述智能手机的显示屏显示该属性对应的学习模式菜单之后，当检测到用户选择学习模式的触屏操作指令时，获取对应的学习内容和/或语音讲解信息。
19.根据权利要求11所述的实现点读学习的智能手机，其特征在于，所述点读模块还用于：若所述匹配模块的查询结果为不存在，根据提取所述图像包含的图像特征信息和/或字符串特征信息，识别用户欲点读的书本内容是否为字词或短语；若是字词或短语，则查询预置的字典数据库，获取所述字词或短语对应的字典内容，通过所述智能手机向用户输出该字典内容；若不是字词或短语，则获取与用户欲点读的书本内容匹配的网络内容，通过所述智能手机向用户输出所述网络内容。
20.根据权利要求11所述的实现点读学习的智能手机，其特征在于，所述摄像头设置在所述智能手机的底部。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410449034.9A CN104253904A (zh) | 2014-09-04 | 2014-09-04 | 一种实现点读学习的方法及智能手机 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410449034.9A CN104253904A (zh) | 2014-09-04 | 2014-09-04 | 一种实现点读学习的方法及智能手机 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104253904A true CN104253904A (zh) | 2014-12-31 |
Family
ID=52188421
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410449034.9A Pending CN104253904A (zh) | 2014-09-04 | 2014-09-04 | 一种实现点读学习的方法及智能手机 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104253904A (zh) |
Cited By (35)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104778864A (zh) * | 2015-04-30 | 2015-07-15 | 陈伟 | 一种内容可扩展的基于智能设备的点读系统及其实现方法 |
| CN104881828A (zh) * | 2015-06-11 | 2015-09-02 | 西安博创软件有限公司 | 一种教辅材料中通过编码查询题目辅导信息的系统与方法 |
| CN105243885A (zh) * | 2015-10-26 | 2016-01-13 | 广东佳学信息科技有限公司 | 一种基于智能设备的点读方法、系统 |
| CN105447499A (zh) * | 2015-10-23 | 2016-03-30 | 北京爱乐宝机器人科技有限公司 | 一种图书互动方法、装置和设备 |
| WO2016165358A1 (zh) * | 2015-09-29 | 2016-10-20 | 中兴通讯股份有限公司 | 一种终端点读方法和装置、以及终端 |
| CN106097793A (zh) * | 2016-07-21 | 2016-11-09 | 北京光年无限科技有限公司 | 一种面向智能机器人的儿童教学方法和装置 |
| CN106816054A (zh) * | 2017-03-29 | 2017-06-09 | 北京光年无限科技有限公司 | 用于智能机器人的交互教学方法及终端 |
| CN107015977A (zh) * | 2016-01-27 | 2017-08-04 | 肖翩 | 一种智能辅导系统 |
| CN107590204A (zh) * | 2017-08-22 | 2018-01-16 | 广东小天才科技有限公司 | 一种学习内容的定位方法及电子设备 |
| CN107731020A (zh) * | 2017-11-07 | 2018-02-23 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107729894A (zh) * | 2017-10-23 | 2018-02-23 | 青岛罗博数码科技有限公司 | 智能页码检测方法及检测装置 |
| CN107748615A (zh) * | 2017-11-07 | 2018-03-02 | 广东欧珀移动通信有限公司 | 屏幕的控制方法、装置、存储介质及电子设备 |
| CN107767712A (zh) * | 2017-11-07 | 2018-03-06 | 广东欧珀移动通信有限公司 | 调整匹配度的方法、装置、存储介质及电子设备 |
| CN107835366A (zh) * | 2017-11-07 | 2018-03-23 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107870999A (zh) * | 2017-11-07 | 2018-04-03 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107885827A (zh) * | 2017-11-07 | 2018-04-06 | 广东欧珀移动通信有限公司 | 文件获取方法、装置、存储介质及电子设备 |
| CN107967110A (zh) * | 2017-11-30 | 2018-04-27 | 广东小天才科技有限公司 | 播放方法、播放装置、电子设备及计算机可读存储介质 |
| CN108038485A (zh) * | 2017-11-30 | 2018-05-15 | 广东小天才科技有限公司 | 一种学习内容的查找方法及电子设备 |
| CN108052525A (zh) * | 2017-11-07 | 2018-05-18 | 广东欧珀移动通信有限公司 | 获取音频信息的方法、装置、存储介质及电子设备 |
| CN108831230A (zh) * | 2018-07-09 | 2018-11-16 | 广东小天才科技有限公司 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
| CN109063583A (zh) * | 2018-07-10 | 2018-12-21 | 广东小天才科技有限公司 | 一种基于点读操作的学习方法及电子设备 |
| CN109191940A (zh) * | 2018-08-31 | 2019-01-11 | 广东小天才科技有限公司 | 一种基于智能设备的交互方法及智能设备 |
| CN109240582A (zh) * | 2018-08-30 | 2019-01-18 | 广东小天才科技有限公司 | 一种点读控制方法及智能设备 |
| CN109859544A (zh) * | 2019-01-31 | 2019-06-07 | 北京翰舟信息科技有限公司 | 一种智能学习方法、设备及存储介质 |
| CN111026837A (zh) * | 2019-02-18 | 2020-04-17 | 广东小天才科技有限公司 | 一种学习内容搜索方法及家教设备 |
| CN111078180A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种点读模式下的报读速度控制方法及电子设备 |
| CN111081092A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种学习内容输出方法及学习设备 |
| CN111079493A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种基于电子设备的人机互动方法及电子设备 |
| CN111182387A (zh) * | 2019-12-03 | 2020-05-19 | 广东小天才科技有限公司 | 一种学习互动方法及智能音箱 |
| CN111243353A (zh) * | 2020-02-10 | 2020-06-05 | 南通大学 | 一种智能阅读方法 |
| CN111638783A (zh) * | 2020-05-18 | 2020-09-08 | 广东小天才科技有限公司 | 一种人机交互方法及电子设备 |
| CN111898595A (zh) * | 2020-07-22 | 2020-11-06 | 北京字节跳动网络技术有限公司 | 一种信息展示方法、装置、电子设备和存储介质 |
| CN112230876A (zh) * | 2020-10-13 | 2021-01-15 | 华南师范大学 | 人工智能伴读方法和伴读机器人 |
| CN112306449A (zh) * | 2020-03-02 | 2021-02-02 | 北京字节跳动网络技术有限公司 | 用于输出信息的方法和装置 |
| CN113658463A (zh) * | 2021-08-19 | 2021-11-16 | 安徽淘云科技股份有限公司 | 英语语法显示方法、装置和设备 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20010035880A1 (en) * | 2000-03-06 | 2001-11-01 | Igor Musatov | Interactive touch screen map device |
| CN101600006A (zh) * | 2008-06-02 | 2009-12-09 | 郑阿奇 | 一种用手机点读印刷品的方法 |
-
2014
- 2014-09-04 CN CN201410449034.9A patent/CN104253904A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20010035880A1 (en) * | 2000-03-06 | 2001-11-01 | Igor Musatov | Interactive touch screen map device |
| CN101600006A (zh) * | 2008-06-02 | 2009-12-09 | 郑阿奇 | 一种用手机点读印刷品的方法 |
Cited By (48)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104778864A (zh) * | 2015-04-30 | 2015-07-15 | 陈伟 | 一种内容可扩展的基于智能设备的点读系统及其实现方法 |
| CN104881828A (zh) * | 2015-06-11 | 2015-09-02 | 西安博创软件有限公司 | 一种教辅材料中通过编码查询题目辅导信息的系统与方法 |
| WO2016165358A1 (zh) * | 2015-09-29 | 2016-10-20 | 中兴通讯股份有限公司 | 一种终端点读方法和装置、以及终端 |
| CN105447499A (zh) * | 2015-10-23 | 2016-03-30 | 北京爱乐宝机器人科技有限公司 | 一种图书互动方法、装置和设备 |
| CN105447499B (zh) * | 2015-10-23 | 2018-09-04 | 北京爱乐宝机器人科技有限公司 | 一种图书互动方法、装置和设备 |
| CN105243885A (zh) * | 2015-10-26 | 2016-01-13 | 广东佳学信息科技有限公司 | 一种基于智能设备的点读方法、系统 |
| CN107015977A (zh) * | 2016-01-27 | 2017-08-04 | 肖翩 | 一种智能辅导系统 |
| CN106097793A (zh) * | 2016-07-21 | 2016-11-09 | 北京光年无限科技有限公司 | 一种面向智能机器人的儿童教学方法和装置 |
| CN106816054A (zh) * | 2017-03-29 | 2017-06-09 | 北京光年无限科技有限公司 | 用于智能机器人的交互教学方法及终端 |
| CN107590204B (zh) * | 2017-08-22 | 2020-10-16 | 广东小天才科技有限公司 | 一种学习内容的定位方法及电子设备 |
| CN107590204A (zh) * | 2017-08-22 | 2018-01-16 | 广东小天才科技有限公司 | 一种学习内容的定位方法及电子设备 |
| CN107729894B (zh) * | 2017-10-23 | 2021-08-03 | 青岛罗博数码科技有限公司 | 智能页码检测方法及检测装置 |
| CN107729894A (zh) * | 2017-10-23 | 2018-02-23 | 青岛罗博数码科技有限公司 | 智能页码检测方法及检测装置 |
| CN107767712A (zh) * | 2017-11-07 | 2018-03-06 | 广东欧珀移动通信有限公司 | 调整匹配度的方法、装置、存储介质及电子设备 |
| CN107870999A (zh) * | 2017-11-07 | 2018-04-03 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107885827A (zh) * | 2017-11-07 | 2018-04-06 | 广东欧珀移动通信有限公司 | 文件获取方法、装置、存储介质及电子设备 |
| CN107731020B (zh) * | 2017-11-07 | 2020-05-12 | Oppo广东移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN108052525B (zh) * | 2017-11-07 | 2020-10-09 | Oppo广东移动通信有限公司 | 获取音频信息的方法、装置、存储介质及电子设备 |
| CN108052525A (zh) * | 2017-11-07 | 2018-05-18 | 广东欧珀移动通信有限公司 | 获取音频信息的方法、装置、存储介质及电子设备 |
| CN107835366A (zh) * | 2017-11-07 | 2018-03-23 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107748615A (zh) * | 2017-11-07 | 2018-03-02 | 广东欧珀移动通信有限公司 | 屏幕的控制方法、装置、存储介质及电子设备 |
| CN107885827B (zh) * | 2017-11-07 | 2021-06-01 | Oppo广东移动通信有限公司 | 文件获取方法、装置、存储介质及电子设备 |
| CN107870999B (zh) * | 2017-11-07 | 2020-09-08 | Oppo广东移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107835366B (zh) * | 2017-11-07 | 2019-12-10 | Oppo广东移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN107731020A (zh) * | 2017-11-07 | 2018-02-23 | 广东欧珀移动通信有限公司 | 多媒体播放方法、装置、存储介质及电子设备 |
| CN108038485A (zh) * | 2017-11-30 | 2018-05-15 | 广东小天才科技有限公司 | 一种学习内容的查找方法及电子设备 |
| CN107967110A (zh) * | 2017-11-30 | 2018-04-27 | 广东小天才科技有限公司 | 播放方法、播放装置、电子设备及计算机可读存储介质 |
| CN108831230B (zh) * | 2018-07-09 | 2020-11-06 | 广东小天才科技有限公司 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
| CN108831230A (zh) * | 2018-07-09 | 2018-11-16 | 广东小天才科技有限公司 | 一种自动跟踪学习内容的学习互动方法及智慧台灯 |
| CN109063583A (zh) * | 2018-07-10 | 2018-12-21 | 广东小天才科技有限公司 | 一种基于点读操作的学习方法及电子设备 |
| CN109240582A (zh) * | 2018-08-30 | 2019-01-18 | 广东小天才科技有限公司 | 一种点读控制方法及智能设备 |
| CN109191940A (zh) * | 2018-08-31 | 2019-01-11 | 广东小天才科技有限公司 | 一种基于智能设备的交互方法及智能设备 |
| CN109859544A (zh) * | 2019-01-31 | 2019-06-07 | 北京翰舟信息科技有限公司 | 一种智能学习方法、设备及存储介质 |
| CN111026837A (zh) * | 2019-02-18 | 2020-04-17 | 广东小天才科技有限公司 | 一种学习内容搜索方法及家教设备 |
| CN111026837B (zh) * | 2019-02-18 | 2022-08-26 | 广东小天才科技有限公司 | 一种学习内容搜索方法及家教设备 |
| CN111081092B (zh) * | 2019-06-09 | 2022-03-25 | 广东小天才科技有限公司 | 一种学习内容输出方法及学习设备 |
| CN111081092A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种学习内容输出方法及学习设备 |
| CN111078180A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种点读模式下的报读速度控制方法及电子设备 |
| CN111079493A (zh) * | 2019-06-09 | 2020-04-28 | 广东小天才科技有限公司 | 一种基于电子设备的人机互动方法及电子设备 |
| CN111078180B (zh) * | 2019-06-09 | 2024-02-23 | 广东小天才科技有限公司 | 一种点读模式下的报读速度控制方法及电子设备 |
| CN111079493B (zh) * | 2019-06-09 | 2024-03-22 | 广东小天才科技有限公司 | 一种基于电子设备的人机互动方法及电子设备 |
| CN111182387A (zh) * | 2019-12-03 | 2020-05-19 | 广东小天才科技有限公司 | 一种学习互动方法及智能音箱 |
| CN111243353A (zh) * | 2020-02-10 | 2020-06-05 | 南通大学 | 一种智能阅读方法 |
| CN112306449A (zh) * | 2020-03-02 | 2021-02-02 | 北京字节跳动网络技术有限公司 | 用于输出信息的方法和装置 |
| CN111638783A (zh) * | 2020-05-18 | 2020-09-08 | 广东小天才科技有限公司 | 一种人机交互方法及电子设备 |
| CN111898595A (zh) * | 2020-07-22 | 2020-11-06 | 北京字节跳动网络技术有限公司 | 一种信息展示方法、装置、电子设备和存储介质 |
| CN112230876A (zh) * | 2020-10-13 | 2021-01-15 | 华南师范大学 | 人工智能伴读方法和伴读机器人 |
| CN113658463A (zh) * | 2021-08-19 | 2021-11-16 | 安徽淘云科技股份有限公司 | 英语语法显示方法、装置和设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104253904A (zh) | 一种实现点读学习的方法及智能手机 | |
| US20240031688A1 (en) | Enhancing tangible content on physical activity surface | |
| US7277845B2 (en) | Communication support apparatus and method | |
| CN103050025B (zh) | 一种移动终端的学习方法及其学习系统 | |
| CN105279152B (zh) | 一种取词翻译的方法和装置 | |
| CN109243215B (zh) | 一种基于智能装置的交互方法、智能装置及系统 | |
| CN102346731B (zh) | 一种文件处理方法及文件处理装置 | |
| CN106384108A (zh) | 文字内容检索方法及词语解读装置和移动终端 | |
| EP2144189A3 (en) | Method for recognizing and translating characters in camera-based image | |
| US20200387276A1 (en) | Virtualization of physical activity surface | |
| CN111160333A (zh) | Ar眼镜及其文本翻译方法、装置和计算机可读存储介质 | |
| CN106527945A (zh) | 文本信息提取方法及装置 | |
| CN111610901B (zh) | 一种基于ai视觉下的英语课文辅助教学方法及系统 | |
| CN111753120A (zh) | 一种搜题的方法、装置、电子设备和存储介质 | |
| CN111680177A (zh) | 数据搜索方法及电子设备、计算机可读存储介质 | |
| CN104090968A (zh) | 一种智能信息推送的方法和装置 | |
| CN201251767Y (zh) | 智能电子词典 | |
| EP2793458A1 (en) | Apparatus and method for auto-focusing in device having camera | |
| TWI420404B (zh) | 圖文辨識系統及其使用的圖文辨識方法 | |
| CN111078982A (zh) | 一种电子页面的检索方法、电子设备及存储介质 | |
| CN115168534A (zh) | 智能检索方法及装置 | |
| US11010978B2 (en) | Method and system for generating augmented reality interactive content | |
| CN111563497A (zh) | 基于移动轨迹的框题方法、装置、电子设备及存储介质 | |
| CN103700289A (zh) | 一种扫描查询方法及其装置 | |
| CN103678290A (zh) | 电子外文阅读器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20141231 |