CN111078915A - 一种点读模式下的点读内容获取方法及电子设备 - Google Patents

一种点读模式下的点读内容获取方法及电子设备 Download PDF

Info

Publication number
CN111078915A
CN111078915A CN201910494265.4A CN201910494265A CN111078915A CN 111078915 A CN111078915 A CN 111078915A CN 201910494265 A CN201910494265 A CN 201910494265A CN 111078915 A CN111078915 A CN 111078915A
Authority
CN
China
Prior art keywords
page
electronic
click
book
pages
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910494265.4A
Other languages
English (en)
Other versions
CN111078915B (zh
Inventor
彭婕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TCL China Star Optoelectronics Technology Co Ltd
Original Assignee
Shenzhen China Star Optoelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen China Star Optoelectronics Technology Co Ltd filed Critical Shenzhen China Star Optoelectronics Technology Co Ltd
Priority to CN201910494265.4A priority Critical patent/CN111078915B/zh
Publication of CN111078915A publication Critical patent/CN111078915A/zh
Application granted granted Critical
Publication of CN111078915B publication Critical patent/CN111078915B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/04Electrically-operated educational appliances with audible presentation of the material to be studied

Abstract

本发明实施例涉及教育技术领域,公开了一种点读模式下的点读内容获取方法及电子设备,该方法包括:在点读模式下,获取用户手指触及的书本页面对应的页面图片;在检索到与页面图片匹配的多个电子页面时,获取多个电子页面各自对应的书本信息;根据多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有多个电子页面中的任一目标电子页面对应的书本信息;若历史点读记录中记录有多个电子页面中的任一目标电子页面对应的书本信息,从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。实施本发明实施例,能够提高获取点读内容的准确性。

Description

一种点读模式下的点读内容获取方法及电子设备
技术领域
本发明涉及教育技术领域,具体涉及一种点读模式下的点读内容获取方法及电子设备。
背景技术
目前,市面上配置有点读功能的电子设备并不少见。在点读场景下,现有的电子设备主要通过拍摄用户手指触及(如点击)的书本页面,获得书本页面图片,并从云端数据库中搜索与书本页面图片匹配的电子页面,从而从电子页面中确定出与用户手指在书本页面上的触及位置相对应的内容作为点读内容进行播报。然而,实践中发现,由于云端数据库通常会存储有多种书籍版本,而不同的书籍版本之间难免存在多张相似的页面图片,这些相似的页面图片将对识别出准确的电子页面图片造成干扰,进而降低了获取点读内容的准确性。
发明内容
本发明实施例公开了一种点读模式下的点读内容获取方法及电子设备,能够提高获取点读内容的准确性。
本发明实施例第一方面公开一种点读模式下的点读内容获取方法,所述方法包括:
在点读模式下,获取用户手指触及的书本页面对应的页面图片;
在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息;
根据所述多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有所述多个电子页面中的任一目标电子页面对应的书本信息;
若所述历史点读记录中记录有所述多个电子页面中的任一目标电子页面对应的书本信息,从所述目标电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息,包括:
获取当前用户的学习数据,其中,所述学习数据至少包括所述当前用户的年级以及所述当前用户的学习进度;
结合所述学习数据以及所述页面图片的版面信息,在云端数据库中对所述页面图片进行图片检索,以获得检索结果;其中,所述版面信息至少包括书本单元信息、标题信息、页码信息以及插页图片信息;
若所述检索结果包括与所述页面图片匹配的多个电子页面,获取所述多个电子页面各自对应的书本信息。
作为一种可选的实施方式,在本发明实施例第一方面中,所述历史点读记录包括所述当前用户的第一历史点读内容以及目标用户的第二历史点读内容,所述目标用户满足以下一项或者多项的组合:
与所述当前用户所属年级相同的用户;
与所述当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与所述当前用户点读过相同内容的用户;其中,所述预设时间段的起始时刻距当前时刻的时长为预设时长。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
若所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息,获取所述多个电子页面中每个电子页面与所述页面图片之间的匹配度;
根据所述多个电子页面中每个电子页面与所述页面图片之间的匹配度,从所述多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面;
从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
若所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息,获取所述多个电子页面各自对应的版本号;
从所述多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
将所述目标版本号对应的电子页面确定为优选电子页面;
从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
本发明实施例第二方面公开一种电子设备,所述电子设备包括:
第一获取单元,用于在点读模式下,获取用户手指触及的书本页面对应的页面图片;
第二获取单元,用于在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息;
判断单元,用于根据所述多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有所述多个电子页面中的任一目标电子页面对应的书本信息;
第三获取单元,用于在所述判断单元判定出所述历史点读记录中记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,从所述目标电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述第二获取单元,包括:
第一获取子单元,用于获取当前用户的学习数据,其中,所述学习数据至少包括所述当前用户的年级以及所述当前用户的学习进度;
检索子单元,用于结合所述学习数据以及所述页面图片的版面信息,在云端数据库中对所述页面图片进行图片检索,以获得检索结果;其中,所述版面信息至少包括书本单元信息、标题信息、页码信息以及插页图片信息;
第二获取子单元,用于在所述检索结果包括与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息。
作为一种可选的实施方式,在本发明实施例第二方面中,所述历史点读记录包括所述当前用户的第一历史点读内容以及目标用户的第二历史点读内容,所述目标用户满足以下一项或者多项的组合:
与所述当前用户所属年级相同的用户;
与所述当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与所述当前用户点读过相同内容的用户;其中,所述预设时间段的起始时刻距当前时刻的时长为预设时长。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
第四获取单元,用于在所述判断单元判定出所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,获取所述多个电子页面中每个电子页面与所述页面图片之间的匹配度;
筛选单元,用于根据所述多个电子页面中每个电子页面与所述页面图片之间的匹配度,从所述多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面;
第五获取单元,用于从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
第六获取单元,用于在所述判断单元判定出所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,获取所述多个电子页面各自对应的版本号;
选取单元,用于从所述多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
确定单元,用于将所述目标版本号对应的电子页面确定为优选电子页面;
第七获取单元,用于从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
本发明实施例第三方面公开一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种点读模式下的点读内容获取方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种点读模式下的点读内容获取方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,通过获取用户手指触及的书本页面对应的页面图片,在根据页面图片检索出多个电子页面时,基于每个电子页面对应的书本信息,若判定出任一目标电子页面对应的书本信息被记录在历史点读记录中,则从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容,能够基于调用过的书本信息直接从多张相似的电子页面中筛选出最为匹配的电子页面,提高了页面匹配的效率以及准确率,进而提高获取点读内容的准确性,为用户提供更好的点读体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种点读模式下的点读内容获取方法的流程示意图;
图2是本发明实施例公开的一种书本页面检测的场景示意图;
图3是本发明实施例公开的另一种点读模式下的点读内容获取方法的流程示意图;
图4是本发明实施例公开的另一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种点读模式下的点读内容获取方法及电子设备,能够提高获取点读内容的准确性。本发明实施例公开的点读内容获取方法适用于供用户使用的学习平板、学习手机、学习机、家教机、点读机等电子设备中,具体地,还适用于上述电子设备内的Web应用、APP或者专用软件。以下结合附图进行详细描述。以下结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种点读模式下的点读内容获取方法的流程示意图。如图1所示,该点读内容获取方法可以包括以下步骤。
101、电子设备在点读模式下,获取用户手指触及的书本页面对应的页面图片。
本发明实施例中,电子设备利用拍摄装置获取用户手指触及的书本页面对应的页面图片,其中,拍摄装置可以包括设置于电子设备的显示屏一面的前置摄像头以及设置于非显示屏一面的后置摄像头。电子设备可以利用前置摄像头获取页面图片,也可以利用后置摄像头获取页面图片,对此不作具体限定。
请参阅图2,图2是本发明实施例公开的一种书本页面检测的场景示意图。在图2中,电子设备与水平面(比如桌面)呈一定角度摆放,电子设备设置有拍摄装置以及反光装置,反光装置用于改变拍摄装置的光路,进而使得拍摄装置拍摄到摆放在水平面上的书本页面(比如教材、绘本等)的页面图片。
102、电子设备在检索到与页面图片匹配的多个电子页面时,获取多个电子页面各自对应的书本信息。
本发明实施例中,电子页面是由纸质的书本页面中所包含的文字、图片等讯息内容数字化的出版物,通常被存储于电子设备的存储器或者与电子设备关联的云端数据库中,并且,每个电子页面对应的书本信息包括该电子页面所属书籍的书本名称、版本号、出版社、出版时间、作者以及编者等。可以理解,随着书籍版本的更新,电子设备的存储器或者云端数据库中会存储有多种书籍版本,而不同的书籍版本之间存在多个在内容以及排版上相似的电子页面,使得电子设备在初步检索用户输入的某一页面图片时输出多种结果。
103、电子设备根据多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有多个电子页面中的任一目标电子页面对应的书本信息,若是,执行步骤104;若否,结束本流程。
本发明实施例中,历史点读记录可以包括当前用户的历史点读内容,比如当前用户点读过的若干电子页面及其对应的书本信息。或者,可选的,历史点读记录包括当前用户的第一历史点读内容以及目标用户的第二历史点读内容,目标用户满足以下一项或者多项的组合:
与当前用户所属年级相同的用户;
与当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与当前用户点读过相同内容的用户,预设时间段的起始时刻距当前时刻的时长为预设时长。
举例来说,若上述多个电子页面中任一目标电子页面对应的书本信息为一年级语文上册(2016部编版),且第一历史点读内容/或第二历史点读内容中记录有当前用户/或目标用户点读过一年级语文上册(2016部编版)中某一电子页面,则该目标电子页面可被确定为与用户手指触及书本页面最为匹配的电子页面。可见,通过确定与当前用户之间学习情况相似(比如年级相同、知识图谱匹配度高)的目标用户,能够结合当前用户以及目标用户的历史点读内容,在不脱离当前用户的实际学习需求的基础上提高匹配出目标电子页面的成功率。
进一步可选的,基于多个电子页面所属的学科类型(比如语文、英语或者数学),当前用户的第一历史点读内容可以包括与该学科类型对应的历史点读内容;目标用户还可以为与当前用户之间针对该学科类型的知识图谱匹配度大于或等于预设匹配值(比如80%)的用户,或者,与当前用户关联且任课科目与该学科类型相匹配的教师用户。
104、电子设备从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在步骤104之后,本方案还可以包括:
电子设备根据用户的学习行为信息,生成推送策略;其中,学习行为信息用于记录用户偏好的推送模式、单次点读的平均学习时长等,对此不作具体限定;用户偏好的推送模式由用户自行设置,可包括音频模式、动画模式、文本模式以及动画文本结合模式等;
电子设备以推送策略搜索并推送与点读内容对应的学习内容,学习内容可以包括点读内容的报读音频、内容讲解、知识点剖析、衍生知识等,对此不作具体限定。
可见,实施可选的实施方式,还能够基于用户自身的学习习惯生成最优的推送策略,从而向用户推送高质量的学习内容,保证用户的学习效率。
可见,实施图1所描述的方法,通过获取用户手指触及的书本页面对应的页面图片,在根据页面图片检索出多个电子页面时,基于每个电子页面对应的书本信息,若判定出任一目标电子页面对应的书本信息被记录在历史点读记录中,则从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容,能够基于调用过的书本信息直接从多张相似的电子页面中筛选出最为匹配的电子页面,提高了页面匹配的效率以及准确率,进而提高获取点读内容的准确性,为用户提供更好的点读体验。
实施例二
请参阅图3,图3是本发明实施例公开的另一种点读模式下的点读内容获取方法的流程示意图。如图3所示,该点读内容获取方法可以包括以下步骤。
301、电子设备在点读模式下,获取用户手指触及的书本页面对应的页面图片。
302、电子设备获取当前用户的学习数据。
本发明实施例中,用户的学习数据至少包括用户的年级、用户的学习进度以及用户的学习日程信息(比如,周四下午13:00~14:00期间的学习任务被设定为语文教材第三课的课文学习,周五早上8:30~9:00期间的学习任务被设定为英语教材第一单元的单词跟读)等。
303、电子设备结合学习数据以及页面图片的版面信息,在云端数据库中对页面图片进行图片检索,以获得检索结果。
本发明实施例中,版面信息至少包括书本单元信息、标题信息、页码信息(比如位于页眉、页脚等各个位置处的页码)、插页图片信息(比如人像图片、二维码图片等)、出版社信息以及册数信息等。
304、电子设备在检索结果包括与页面图片匹配的多个电子页面时,获取多个电子页面各自对应的书本信息。
可见,实施上述步骤302~步骤304,能够结合用户的个人学习情况以及页面图片所包含的版面信息为页面图片匹配对应的电子页面,提高了匹配的效率以及准确性。
305、电子设备根据多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有多个电子页面中的任一目标电子页面对应的书本信息,若是,执行步骤306;若否,执行步骤307~步骤309。
306、电子设备从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,在步骤305之后,本方案还可以包括:
电子设备在历史点读记录中未记录有多个电子页面中的任一目标电子页面对应的书本信息时,获取多个电子页面各自对应的版本号;
电子设备从多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
电子设备将目标版本号对应的电子页面确定为优选电子页面;
电子设备从优选电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
可见,实施可选的实施方式,能够基于每个电子页面对应的版本号,从多个相似的电子页面中选择版本时间距当前时间最近的一版电子页面,以作为优选电子页面,从而在历史点读记录中未记录有任一页面对应的书本信息的情况下,提高匹配电子页面的准确性。
307、电子设备获取多个电子页面中每个电子页面与页面图片之间的匹配度。
本发明实施例中,步骤307具体可以包括:
电子设备对页面图片进行预处理,并提取出页面图片的特征数据(比如,页面图片中关键点的特征向量);
电子设备通过图片匹配算法计算多个页面中每个电子页面的特征数据与页面图片的特征数据之间的相似度,以作为每个电子页面与页面图片之间的匹配度。
其中,图片匹配算法可以为SIFT(Scale-Invariant Feature Transform,尺度不变特征变换)算法、ORB算法或者FAST算法,对此不作限定。
308、电子设备根据多个电子页面中每个电子页面与页面图片之间的匹配度,从多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面。
309、电子设备从优选电子页面中获取与用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
可见,实施上述步骤307~步骤309,能够通过求得每个电子页面与页面图片之间的匹配度,从多个相似的电子页面中选择匹配度最高的电子页面,以作为优选电子页面,从而在历史点读记录中未记录有任一页面对应的书本信息的情况下,提高匹配电子页面的准确性。
可见,实施图3所描述的方法,能够基于调用过的书本信息直接从多张相似的电子页面中筛选出最为匹配的电子页面,提高了页面匹配的效率以及准确率,进而提高获取点读内容的准确性,为用户提供更好的点读体验;此外,能够结合用户的个人学习情况以及页面图片所包含的版面信息为页面图片匹配对应的电子页面,提高了匹配的效率以及准确性;进一步地,能够从多个相似的电子页面中选择版本时间距当前时间最近的一版电子页面,或者从多个相似的电子页面中选择匹配度最高的电子页面,以作为优选电子页面,从而在历史点读记录中未记录有任一页面对应的书本信息的情况下,提高匹配电子页面的准确性。
实施例三
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括第一获取单元401、第二获取单元402、判断单元403以及第三获取单元404,其中:
第一获取单元401,用于在点读模式下,获取用户手指触及的书本页面对应的页面图片。
第二获取单元402,用于在检索到与页面图片匹配的多个电子页面时,获取多个电子页面各自对应的书本信息。
判断单元403,用于根据多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有多个电子页面中的任一目标电子页面对应的书本信息。
本发明实施例中,可选的,历史点读记录包括当前用户的第一历史点读内容以及目标用户的第二历史点读内容,目标用户满足以下一项或者多项的组合:
与当前用户所属年级相同的用户;
与当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与当前用户点读过相同内容的用户;其中,预设时间段的起始时刻距当前时刻的时长为预设时长。
进一步可选的,基于多个电子页面所属的学科类型(比如语文、英语或者数学),当前用户的第一历史点读内容可以包括与该学科类型对应的历史点读内容;目标用户还可以为与当前用户之间针对该学科类型的知识图谱匹配度大于或等于预设匹配值(比如80%)的用户,或者,与当前用户关联且任课科目与该学科类型相匹配的教师用户。
第三获取单元404,用于在判断单元403判定出历史点读记录中记录有多个电子页面中的任一目标电子页面对应的书本信息时,从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
作为一种可选的实施方式,该电子设备还可以包括:
生成单元,用于在第三获取单元404从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容之后,根据用户的学习行为信息,生成推送策略;其中,学习行为信息用于记录用户偏好的推送模式、单次点读的平均学习时长等,对此不作具体限定;用户偏好的推送模式由用户自行设置,可包括音频模式、动画模式、文本模式以及动画文本结合模式等;
推送单元,用于以推送策略搜索并推送与点读内容对应的学习内容,学习内容可以包括点读内容的报读音频、内容讲解、知识点剖析、衍生知识等,对此不作具体限定。
可见,实施可选的实施方式,还能够基于用户自身的学习习惯生成最优的推送策略,从而向用户推送高质量的学习内容,保证用户的学习效率。
可见,实施图4所描述的电子设备,通过获取用户手指触及的书本页面对应的页面图片,在根据页面图片检索出多个电子页面时,基于每个电子页面对应的书本信息,若判定出任一目标电子页面对应的书本信息被记录在历史点读记录中,则从目标电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容,能够基于调用过的书本信息直接从多张相似的电子页面中筛选出最为匹配的电子页面,提高了页面匹配的效率以及准确率,进而提高获取点读内容的准确性,为用户提供更好的点读体验。
实施例四
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较,图5所示的电子设备还包括第四获取单元405、筛选单元406以及第五获取单元407,其中:
第二获取单元402,包括:
第一获取子单元4021,用于获取当前用户的学习数据,其中,学习数据至少包括当前用户的年级以及当前用户的学习进度;
检索子单元4022,用于结合学习数据以及页面图片的版面信息,在云端数据库中对页面图片进行图片检索,以获得检索结果;其中,版面信息至少包括书本单元信息、标题信息、页码信息以及插页图片信息;
第二获取子单元4023,用于在检索结果包括与页面图片匹配的多个电子页面时,获取多个电子页面各自对应的书本信息。
第四获取单元405,用于在判断单元403判定出历史点读记录中未记录有多个电子页面中的任一目标电子页面对应的书本信息时,获取多个电子页面中每个电子页面与页面图片之间的匹配度;
筛选单元406,用于根据多个电子页面中每个电子页面与页面图片之间的匹配度,从多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面;
第五获取单元407,用于从优选电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
本发明实施例中,第四获取单元405,可以包括:
提取子单元,用于对页面图片进行预处理,并提取出页面图片的特征数据(比如,页面图片中关键点的特征向量);
计算子单元,用于通过图片匹配算法计算多个页面中每个电子页面的特征数据与页面图片的特征数据之间的相似度,以作为每个电子页面与页面图片之间的匹配度。
其中,图片匹配算法可以为SIFT(Scale-Invariant Feature Transform,尺度不变特征变换)算法、ORB算法或者FAST算法,对此不作限定。
作为一种可选的实施方式,该电子设备还可以包括:
第六获取单元,用于在判断单元403判定出历史点读记录中未记录有多个电子页面中的任一目标电子页面对应的书本信息时,获取多个电子页面各自对应的版本号;
选取单元,用于从多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
确定单元,用于将目标版本号对应的电子页面确定为优选电子页面;
第七获取单元,用于从优选电子页面中获取与用户手指触及书本页面时的触及位置相对应的内容,作为点读内容。
可见,实施图5所描述的电子设备,能够基于调用过的书本信息直接从多张相似的电子页面中筛选出最为匹配的电子页面,提高了页面匹配的效率以及准确率,进而提高获取点读内容的准确性,为用户提供更好的点读体验;此外,能够结合用户的个人学习情况以及页面图片所包含的版面信息为页面图片匹配对应的电子页面,提高了匹配的效率以及准确性;进一步地,能够从多个相似的电子页面中选择版本时间距当前时间最近的一版电子页面,或者从多个相似的电子页面中选择匹配度最高的电子页面,以作为优选电子页面,从而在历史点读记录中未记录有任一页面对应的书本信息的情况下,提高匹配电子页面的准确性。
实施例五
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。如图6所示,该电子设备可以包括:
存储有可执行程序代码的存储器601;
与存储器601耦合的处理器602;
其中,处理器602调用存储器601中存储的可执行程序代码,执行图1或图3所示的一种点读模式下的点读内容获取方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1或图3所示的一种点读模式下的点读内容获取方法。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种应用发布平台,该应用发布平台用于发布计算机程序产品,其中,当上述计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种点读模式下的点读内容获取方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种点读模式下的点读内容获取方法,其特征在于,所述方法包括:
在点读模式下,获取用户手指触及的书本页面对应的页面图片;
在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息;
根据所述多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有所述多个电子页面中的任一目标电子页面对应的书本信息;
若所述历史点读记录中记录有所述多个电子页面中的任一目标电子页面对应的书本信息,从所述目标电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
2.根据权利要求1所述的方法,其特征在于,所述在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息,包括:
获取当前用户的学习数据,其中,所述学习数据至少包括所述当前用户的年级以及所述当前用户的学习进度;
结合所述学习数据以及所述页面图片的版面信息,在云端数据库中对所述页面图片进行图片检索,以获得检索结果;其中,所述版面信息至少包括书本单元信息、标题信息、页码信息以及插页图片信息;
若所述检索结果包括与所述页面图片匹配的多个电子页面,获取所述多个电子页面各自对应的书本信息。
3.根据权利要求2所述的方法,其特征在于,所述历史点读记录包括所述当前用户的第一历史点读内容以及目标用户的第二历史点读内容,所述目标用户满足以下一项或者多项的组合:
与所述当前用户所属年级相同的用户;
与所述当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与所述当前用户点读过相同内容的用户;其中,所述预设时间段的起始时刻距当前时刻的时长为预设时长。
4.根据权利要求1~3任一项所述的方法,其特征在于,所述方法还包括:
若所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息,获取所述多个电子页面中每个电子页面与所述页面图片之间的匹配度;
根据所述多个电子页面中每个电子页面与所述页面图片之间的匹配度,从所述多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面;
从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
5.根据权利要求1~3任一项所述的方法,其特征在于,所述方法还包括:
若所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息,获取所述多个电子页面各自对应的版本号;
从所述多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
将所述目标版本号对应的电子页面确定为优选电子页面;
从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
6.一种电子设备,其特征在于,所述电子设备包括:
第一获取单元,用于在点读模式下,获取用户手指触及的书本页面对应的页面图片;
第二获取单元,用于在检索到与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息;
判断单元,用于根据所述多个电子页面各自对应的书本信息,判断历史点读记录中是否记录有所述多个电子页面中的任一目标电子页面对应的书本信息;
第三获取单元,用于在所述判断单元判定出所述历史点读记录中记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,从所述目标电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
7.根据权利要求6所述的电子设备,其特征在于,所述第二获取单元,包括:
第一获取子单元,用于获取当前用户的学习数据,其中,所述学习数据至少包括所述当前用户的年级以及所述当前用户的学习进度;
检索子单元,用于结合所述学习数据以及所述页面图片的版面信息,在云端数据库中对所述页面图片进行图片检索,以获得检索结果;其中,所述版面信息至少包括书本单元信息、标题信息、页码信息以及插页图片信息;
第二获取子单元,用于在所述检索结果包括与所述页面图片匹配的多个电子页面时,获取所述多个电子页面各自对应的书本信息。
8.根据权利要求7所述的电子设备,其特征在于,所述历史点读记录包括所述当前用户的第一历史点读内容以及目标用户的第二历史点读内容,所述目标用户满足以下一项或者多项的组合:
与所述当前用户所属年级相同的用户;
与所述当前用户之间的知识图谱匹配度大于或者等于预设匹配值的用户;
在预设时间段内与所述当前用户点读过相同内容的用户;其中,所述预设时间段的起始时刻距当前时刻的时长为预设时长。
9.根据权利要求6~8任一项所述的电子设备,其特征在于,所述电子设备还包括:
第四获取单元,用于在所述判断单元判定出所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,获取所述多个电子页面中每个电子页面与所述页面图片之间的匹配度;
筛选单元,用于根据所述多个电子页面中每个电子页面与所述页面图片之间的匹配度,从所述多个电子页面中筛选出匹配度最高的电子页面,以作为优选电子页面;
第五获取单元,用于从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
10.根据权利要求6~8任一项所述的电子设备,其特征在于,所述电子设备还包括:
第六获取单元,用于在所述判断单元判定出所述历史点读记录中未记录有所述多个电子页面中的任一目标电子页面对应的书本信息时,获取所述多个电子页面各自对应的版本号;
选取单元,用于从所述多个电子页面各自对应的版本号中选取版本时间距当前时刻最短的目标版本号;
确定单元,用于将所述目标版本号对应的电子页面确定为优选电子页面;
第七获取单元,用于从所述优选电子页面中获取与所述用户手指触及所述书本页面时的触及位置相对应的内容,作为点读内容。
CN201910494265.4A 2019-06-09 2019-06-09 一种点读模式下的点读内容获取方法及电子设备 Active CN111078915B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910494265.4A CN111078915B (zh) 2019-06-09 2019-06-09 一种点读模式下的点读内容获取方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910494265.4A CN111078915B (zh) 2019-06-09 2019-06-09 一种点读模式下的点读内容获取方法及电子设备

Publications (2)

Publication Number Publication Date
CN111078915A true CN111078915A (zh) 2020-04-28
CN111078915B CN111078915B (zh) 2024-02-23

Family

ID=70310056

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910494265.4A Active CN111078915B (zh) 2019-06-09 2019-06-09 一种点读模式下的点读内容获取方法及电子设备

Country Status (1)

Country Link
CN (1) CN111078915B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639209A (zh) * 2020-05-20 2020-09-08 广东小天才科技有限公司 一种书本内容的搜索方法、终端设备及存储介质
CN111711757A (zh) * 2020-06-29 2020-09-25 广东小天才科技有限公司 防手指遮挡的试题拍摄方法、装置、电子设备和存储介质
CN113449720A (zh) * 2021-06-30 2021-09-28 东莞市小精灵教育软件有限公司 一种准确定位课本页码的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107885827A (zh) * 2017-11-07 2018-04-06 广东欧珀移动通信有限公司 文件获取方法、装置、存储介质及电子设备
CN109063583A (zh) * 2018-07-10 2018-12-21 广东小天才科技有限公司 一种基于点读操作的学习方法及电子设备
CN109064787A (zh) * 2018-07-17 2018-12-21 广东小天才科技有限公司 一种点读设备
CN109522343A (zh) * 2018-11-27 2019-03-26 广东小天才科技有限公司 一种学习进度的智能检测方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107885827A (zh) * 2017-11-07 2018-04-06 广东欧珀移动通信有限公司 文件获取方法、装置、存储介质及电子设备
CN109063583A (zh) * 2018-07-10 2018-12-21 广东小天才科技有限公司 一种基于点读操作的学习方法及电子设备
CN109064787A (zh) * 2018-07-17 2018-12-21 广东小天才科技有限公司 一种点读设备
CN109522343A (zh) * 2018-11-27 2019-03-26 广东小天才科技有限公司 一种学习进度的智能检测方法及电子设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639209A (zh) * 2020-05-20 2020-09-08 广东小天才科技有限公司 一种书本内容的搜索方法、终端设备及存储介质
CN111639209B (zh) * 2020-05-20 2023-12-22 广东小天才科技有限公司 一种书本内容的搜索方法、终端设备及存储介质
CN111711757A (zh) * 2020-06-29 2020-09-25 广东小天才科技有限公司 防手指遮挡的试题拍摄方法、装置、电子设备和存储介质
CN111711757B (zh) * 2020-06-29 2022-03-08 广东小天才科技有限公司 防手指遮挡的试题拍摄方法、装置、电子设备和存储介质
CN113449720A (zh) * 2021-06-30 2021-09-28 东莞市小精灵教育软件有限公司 一种准确定位课本页码的方法

Also Published As

Publication number Publication date
CN111078915B (zh) 2024-02-23

Similar Documents

Publication Publication Date Title
US20210192202A1 (en) Recognizing text in image data
CN104685501B (zh) 响应于可视化查询标识文本词汇
CN108416028B (zh) 一种搜索内容资源的方法、装置及服务器
JP4337064B2 (ja) 情報処理装置、情報処理方法、およびプログラム
US7912829B1 (en) Content reference page
CN103562911A (zh) 基于姿势的视觉搜索
CN103988202A (zh) 基于索引和搜索的图像吸引力
JP5658986B2 (ja) 電子書籍表示装置、方法およびプログラム
WO2016091095A1 (zh) 基于终端界面触控操作进行搜索的方法及系统
CN111078915B (zh) 一种点读模式下的点读内容获取方法及电子设备
JP2010073114A6 (ja) 画像情報検索装置、画像情報検索方法およびそのコンピュータプログラム
US10769196B2 (en) Method and apparatus for displaying electronic photo, and mobile device
EP2806336A1 (en) Text prediction in a text input associated with an image
CN106611065B (zh) 搜索方法和装置
CN111079494A (zh) 一种学习内容推送方法及电子设备
CN111723235B (zh) 音乐内容识别方法、装置及设备
US20180089150A1 (en) Providing location-based font recommendations
WO2015140922A1 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
CN111079777B (zh) 一种基于书页定位的点读方法及电子设备
CN111091034A (zh) 一种基于多手指识别的搜题方法及家教设备
US11699174B2 (en) Media processing techniques for enhancing content
US20180189602A1 (en) Method of and system for determining and selecting media representing event diversity
CN109992697B (zh) 一种信息处理方法和电子设备
US10217015B2 (en) Physical and digital bookmark syncing
US10970910B2 (en) Animation of concepts in printed materials

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant