CN111078080B - 一种点读控制方法及电子设备 - Google Patents

一种点读控制方法及电子设备 Download PDF

Info

Publication number
CN111078080B
CN111078080B CN201910494070.XA CN201910494070A CN111078080B CN 111078080 B CN111078080 B CN 111078080B CN 201910494070 A CN201910494070 A CN 201910494070A CN 111078080 B CN111078080 B CN 111078080B
Authority
CN
China
Prior art keywords
user
text content
electronic device
outlined
electronic equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910494070.XA
Other languages
English (en)
Other versions
CN111078080A (zh
Inventor
彭婕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Genius Technology Co Ltd
Original Assignee
Guangdong Genius Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Genius Technology Co Ltd filed Critical Guangdong Genius Technology Co Ltd
Priority to CN201910494070.XA priority Critical patent/CN111078080B/zh
Publication of CN111078080A publication Critical patent/CN111078080A/zh
Application granted granted Critical
Publication of CN111078080B publication Critical patent/CN111078080B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/04Electrically-operated educational appliances with audible presentation of the material to be studied

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例涉及教育技术领域,公开了一种点读控制方法及电子设备,该方法包括:在检测到电子设备处于纸上点读状态时,控制电子设备执行拍摄操作,以获得拍摄图像;从拍摄图像中识别出被点读的书本页面中的被指定位置,以及获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量;根据指定面积区域内的文本数量,确定指定面积区域的密集程度;判断指定面积区域的密集程度是否大于指定阈值,若是,提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容;在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容。本发明实施例,能够提高识别学习内容的准确性。

Description

一种点读控制方法及电子设备
技术领域
本发明涉及教育技术领域,尤其涉及一种点读控制方法及电子设备。
背景技术
在学习过程中,学生用户可以利用电子设备(如家教机)的纸上点读功能来进行学习。例如,当学生用户手动点取书本页面上某一位置时,电子设备会利用勾勒框来勾勒出该位置对应的学习内容作为学生用户所选的学习内容,并对该学习内容进行播报。
在实践中发现,当书本页面的文本内容较密集时,电子设备的勾勒框会容易勾勒出学生用户不需要的学习内容,进而会降低识别学习内容的准确性。
发明内容
本发明实施例公开一种点读控制方法及电子设备,能够提高识别学习内容的准确性。
本发明实施例第一方面公开一种点读控制方法,所述方法包括:
在检测到电子设备处于纸上点读状态时,控制所述电子设备执行拍摄操作,以获得拍摄图像;其中,所述拍摄图像中至少包含被点读的书本页面;
从所述拍摄图像中识别出所述被点读的书本页面中的被指定位置;
从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量;
根据所述指定面积区域内的文本数量,确定所述指定面积区域的密集程度;
判断所述指定面积区域的密集程度是否大于指定阈值,若是,提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容;
在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容。
本发明实施例第二方面公开一种电子设备,所述电子设备包括:
第一控制单元,用于在检测到电子设备处于纸上点读状态时,控制所述电子设备执行拍摄操作,以获得拍摄图像;其中,所述拍摄图像中至少包含被点读的书本页面;
识别单元,用于从所述拍摄图像中识别出所述被点读的书本页面中的被指定位置;
第一获取单元,用于从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量;
确定单元,用于根据所述指定面积区域内的文本数量,确定所述指定面积区域的密集程度;
判断单元,用于判断所述指定面积区域的密集程度是否大于指定阈值;
提示单元,用于在所述判断单元判断出所述指定面积区域的密集程度大于指定阈值时,提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容;
播报单元,用于在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容。
本发明实施例第三方面公开一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种点读控制方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种点读控制方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,当电子设备处于纸上点读状态时,电子设备可以执行拍摄操作,以获得拍摄图像,并从该拍摄图像中识别出被点读的书本页面中的被指定位置,以及获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量,然后根据该指定面积区域内的文本数量,确定该指定面积区域的密集程度,并判断该指定面积区域的密集程度是否大于指定阈值,当电子设备判断出该指定面积区域的密集程度大于指定阈值时,便可提示被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容,且当用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,电子设备可以播报该勾勒框中所勾勒的文本内容。可见,本发明实施例,能够在书本页面的文本内容较密集时,向用户提示被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容,让用户选择勾勒出需要的学习内容,有效的提高识别学习内容的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种点读控制方法的流程示意图;
图2是本发明实施例公开的另一种点读控制方法的流程示意图;
图3是本发明实施例公开的另一种点读控制方法的流程示意图;
图4是本发明实施例公开的一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图;
图7是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种点读控制方法及电子设备,能够提高识别学习内容的准确性。以下结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种点读控制方法的流程示意图。如图1所示,该点读控制方法可以包括以下步骤。
101、电子设备在检测到电子设备处于纸上点读状态时,控制电子设备执行拍摄操作,以获得拍摄图像;其中,该拍摄图像中至少包含被点读的书本页面。
本发明实施例中,电子设备可以是供学生使用的学习平板、学习机、家教机、点读机等电子设备,本发明实施例中不做限定。
作为一种可选的实施方式,本发明实施例中,在家教设备当前已进入学习模式之后,用户可以通过语音方式唤醒电子设备的纸上点读功能,和/或用户可以通过触屏方式手动唤醒电子设备的纸上点读功能,和/或用户可以通过手动开启设置在家教设备上的物理按键开关唤醒电子设备的纸上点读功能。
作为一种可选的实施方式,本发明实施例中,用户可以向电子设备输入被点读的书本的名称,电子设备可以直接查找与该名称对应的点读资源,无需对被点读的书本进行格外的识别处理,从而提高了点读资源下载的速度。
作为一种可选的实施方式,本发明实施例中,电子设备在执行拍摄操作时,可以拍摄至少三张图片发送至服务器,而通过对至少三张图片进行处理得到的多媒体数据的准确性更高,从而能够提高识别的准确性。
102、电子设备从上述拍摄图像中识别出被点读的书本页面中的被指定位置。
作为一种可选的实施方式,本发明实施例中,被指定位置可以由棍状物体(如手指、笔)在拍摄图像中指定。电子设备可以先从拍摄到的图像中识别出棍状物物体的轮廓,并将该棍状物体的轮廓作为识别被指定位置的依据。在电子设备从拍摄得到的图像中确定出该图像中的被指定位置时,电子设备可以根据拍摄图像中棍状物体的轮廓分别出该拍摄图像中棍状物体的轮廓的指向性,并根据该轮廓的指向性确定出该轮廓指向的位置,并将该轮廓指向的位置作为从该拍摄图像中确定出被点读的书本页面中的被指定位置。
103、电子设备从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量。
作为一种可选的实施方式,本发明实施例中,上述指定面积区域的大小可以由电子设备的系统默认设定的,也可以由用户自行设定。
作为一种可选的实施方式,本发明实施例中,电子设备可以先从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本内容,再根据该文本内容得到在上述定面积区域内的文本数量。
104、电子设备根据指定面积区域内的文本数量,确定该指定面积区域的密集程度。
作为一种可选的实施方式,本发明实施例中,在电子设备获取得到上述指定面积区域内的文本数量之后,电子设备可以根据一定的公式(例如:指定面积区域内的文本数量÷指定面积区域的面积)计算得到在该指定面积区域内的密集程度。
105、电子设备判断上述指定面积区域的密集程度是否大于指定阈值,若是,执行步骤106~步骤107,若否,则结束本次流程。
本发明实施例中,在电子设备确定了上述指定面积区域的密集程度之后,可以将上述指定面积区域的密集程度与系统中的指定阈值进行对比,当电子设备判断出上述指定面积区域的密集程度大于系统中的指定阈值之后,执行步骤106~步骤107。
作为一种可选的实施方式,本发明实施例中,该指定阈值的大小可以由电子设备的系统默认设定的,也可以由用户自行设定。
106、电子设备提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容。
作为一种可选的实施方式,本发明实施例中,电子设备可以将被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容显示在电子设备的显示屏上,并向用户发送提示信息,以提示用户是否需要将勾勒框中所勾勒出的文本内容作为学习内容进行播报。
107、电子设备在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容。
作为一种可选的实施方式,本发明实施例中,电子设备可以向电子设备的显示屏输出上述勾勒框中所勾勒的文本内容的播报方式;
以及,电子设备可以预先存储家长或老师的语音特征以及卡通人物形象,用户可以选择以家长或老师的语音特征进行播报上述勾勒框中所勾勒的文本内容;
和/或,电子设备可以预先存储用户所喜爱的卡通人物形象以及与该指定卡通人物形象相关联的语音特征,用户可以选择所喜爱的卡通人物形象进行播报上述勾勒框中所勾勒的文本内容;
以及,在用户选择以何种方式播报勾勒框中所勾勒的文本内容之后,电子设备可以获取与该播报方式相匹配的指定卡通人物形象以及语音特征,且该指定卡通人物形象可以伴随着其经典的出场方式显示在电子设备显示屏上。
作为一种可选的实施方式,本发明实施例中,在电子设备将勾勒框中所勾勒的文本内容进行播报之后,还可以将勾勒框中所勾勒的文本内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。其中,电子设备可以向用户提供用户用于登陆电子设备的账号的关系用户链,以便于用户可以从该关系用户链中选择好友账号。
可见,实施图1所描述的点读控制方法,能够高识别学习内容的准确性。
此外,实施图1所描述的点读控制方法,能够让用户选择喜欢的播报方式来播报勾勒框中所勾勒的文本内容,提高了用户学习的积极性和学习效率。
此外,实施图1所描述的点读控制方法,能够让增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
实施例二
请参阅图2,图2是本发明实施例公开的另一种点读控制方法的流程示意图。如图2所示,该点读控制方法可以包括以下步骤。
201、电子设备在检测到电子设备处于纸上点读状态时,控制设置于电子设备的摄像设备上方的反光镜弹出。
作为一种可选的实施方式,本发明实施例中,电子设备可以设定一定的时间间隔进行拍摄,并对在该时间间隔内拍摄的图片进行检测,若出现电子设备对在连续时间间隔内拍摄的照片皆识别不到被点读的书本页面时,则电子设备可以控制设置于摄像设备上方的反光镜弹出。
作为一种可选的实施方式,本发明实施例中,电子设备的摄像设备可以为旋转式的摄像设备,在检测到电子设备处于纸上点读状态时,电子设备可以控制摄像设备进行转动,直至摄像设备的拍摄图像中存在被点读的书本页面。
202、电子设备在调节反光镜与摄像设备的相对角度之后,控制摄像设备对反光镜中的镜像进行拍摄,获得拍摄图像;其中,上述镜像是位于电子设备前方的被点读的书本页面在反光镜中的镜像。
作为一种可选的实施方式,本发明实施例中,电子设备可以通过调节反光镜相对于摄像设备的镜头面的角度,使用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有电子设备前方的被点读的书本页面。
203、电子设备从上述拍摄图像中识别出被点读的书本页面中的被指定位置。
204、电子设备从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量。
本发明实施例中,从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量,包括:
从上述拍摄图像中确定出在被点读的书本页面上的、以指定位置为圆心以及以预设数量的文本排列时所占的区域长度为半径的圆形区域,作为指定面积区域;
识别出上述指定面积区域内的文本数量;
或者,从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量,包括:
从上述拍摄图像中确定出在被点读的书本页面上的、以指定位置为对角线交叉点以及以预设数量的文本排列时所占的区域长度为对角线长度的矩形区域,作为指定面积区域;
识别出上述指定面积区域内的文本数量。
作为一种可选的实施方式,本发明实施例中,电子设备可以先从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本内容,再根据该文本内容进而得到上述定面积区域内的文本数量。
205、电子设备根据指定面积区域内的文本数量,确定该指定面积区域的密集程度。
206、电子设备判断上述指定面积区域的密集程度是否大于指定阈值,若是,执行步骤207~步骤208,若否,则结束本次流程。
207、电子设备提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容。
208、电子设备在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容。
可见,实施图2所描述的点读控制方法,能够高识别学习内容的准确性。
此外,实施图2所描述的点读控制方法,能够让用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有电子设备前方的被点读的书本页面。
此外,实施图2所描述的点读控制方法,能够让用户选择喜欢的播报方式来播报勾勒框中所勾勒的文本内容,提高了用户学习的积极性和学习效率。
实施例三
请参阅图3,图3是本发明实施例公开的另一种点读控制方法的流程示意图。如图3所示,该点读控制方法可以包括以下步骤。
301、电子设备在检测到电子设备处于纸上点读状态时,控制设置于电子设备的摄像设备上方的反光镜弹出。
302、电子设备在调节反光镜与摄像设备的相对角度之后,控制摄像设备对反光镜中的镜像进行拍摄,获得拍摄图像;其中,上述镜像是位于电子设备前方的被点读的书本页面在反光镜中的镜像。
303、电子设备从上述拍摄图像中识别出被点读的书本页面中的被指定位置。
304、电子设备从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量。
305、电子设备根据指定面积区域内的文本数量,确定该指定面积区域的密集程度。
306、电子设备判断上述指定面积区域的密集程度是否大于指定阈值,若是,执行步骤307~步骤308,若否,则结束本次流程。
307、电子设备提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容。
308、电子设备向电子设备的显示屏输出第一询问信息,询问用户是否确定勾勒框中所勾勒出的文本内容为学习内容,若用户确定勾勒框中所勾勒出的文本内容为学习内容,执行步骤309;若用户确定勾勒框中所勾勒出的文本内容不为学习内容,执行步骤310~步骤318。
作为一种可选的实施方式,本发明实施例中,电子设备输出的选择第一询问信息包括:
电子设备显示屏的显示信息询问;
和/或,家教设备发出的语音信息询问。
309、电子设备在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容,并结束本流程。
作为一种可选的实施方式,本发明实施例中,在电子设备接收到用户确定勾勒框中所勾勒出的文本内容为学习内容的确认信息之后,以及播报勾勒框中所勾勒的文本内容之前,电子设备可以向电子设备的显示屏输出上述勾勒框中所勾勒的文本内容的播报方式;
以及,电子设备可以预先存储家长或老师的语音特征以及卡通人物形象,用户可以选择以家长或老师的语音特征进行播报上述勾勒框中所勾勒的文本内容;
和/或,电子设备可以预先存储用户所喜爱的卡通人物形象以及与该指定卡通人物形象相关联的语音特征,用户可以选择所喜爱的卡通人物形象进行播报上述勾勒框中所勾勒的文本内容;
以及,在用户选择以何种方式播报勾勒框中所勾勒的文本内容之后,电子设备可以获取与该播报方式相匹配的指定卡通人物形象以及语音特征,且该指定卡通人物形象可以伴随着其经典的出场方式显示在电子设备显示屏上。
310、电子设备获取用户输入的用于调整勾勒框大小的指令。
作为一种可选的实施方式,本发明实施例中,在电子设备接收到用户确定勾勒框中所勾勒出的文本内容不为学习内容之后,电子设备可以向电子设备的显示屏发送询问信息,以询问用户是否需要进入调整勾勒框界面;
以及,电子设备发送询问信息包括:家教设备显示屏的显示信息提示;和/或,家教设备发出的语音信息提示;
以及,用户可以通过语音方式向电子设备输入需要调整勾勒框大小的确认信息,和/或用户可以通过触屏方式手动向电子设备输入需要调整勾勒框大小的确认信息,和/或用户可以通过手动开启设置在家教设备上的物理按键开关向电子设备输入需要调整勾勒框大小的确认信息。
311、电子设备根据用户输入的用于调整勾勒框大小的指令,调整勾勒框,以获得调整后的勾勒框。
作为一种可选的实施方式,本发明实施例中,电子设备可以向电子设备的显示屏输出调整勾勒框大小的指示框,用户可以向该指示框输入需要调整的范围大小;
和/或,电子设备可以将勾勒框的边框以虚拟边框的形式显示在显示屏上,用户可以手动触控电子设备的显示屏以调整勾勒框大小。
312、电子设备向电子设备的显示屏输出第二询问信息,询问用户是否确定将调整后的勾勒框中所勾勒出的文本内容设为学习内容。
作为一种可选的实施方式,本发明实施例中,电子设备输出的选择第二询问信息包括:
电子设备显示屏的显示信息询问;
和/或,家教设备发出的语音信息询问。
313、电子设备在检测到用户确定调整后的勾勒框中所勾勒出的文本内容为学习内容时,播报调整后的勾勒框中所勾勒的文本内容。
作为一种可选的实施方式,本发明实施例中,电子设备可以将调整后的勾勒框中所勾勒的文本内容以指定的颜色随着电子设备的播报进行标记,例如,当勾勒框中所勾勒的文本内容为“家人”时,而电子设备此时正在播报“家”字,因此“家”便会以指定的颜色进行标记(如红色),而“人”字不作任何的变化,直至电子设备对“人”字进行播报时,“人”字才会再以同样指定的颜色进行标记。
314、电子设备对用户进行拍摄,以获得用户的面部图像。
作为一种可选的实施方式,本发明实施例中,电子设备可以设定一定的时间间隔进行拍摄,并对在该时间间隔内拍摄的图片进行人脸识别,若出现电子设备对在连续时间间隔内拍摄的照片皆识别不到人脸,则电子设备可以控制设置于摄像设备上方的反光镜进行调整,直至反光镜的镜像中存在人脸为止。
315、电子设备根据用户的面部图像,获取用户的身份标识。
本发明实施例中,电子设备可以预先将用户的面部图像以及与面部图像所对应的身份标识信息存储在设备的服务器中;
以及,在电子设备获取得到用户的面部图像时,电子设备可以对该面部图像进行特征提取,以得到对应的人脸器官的特征值,例如眉间距、眼间距、眼宽、眼长、鼻长、鼻翼宽、唇宽、唇厚等数值化的特征值,在得到对应的人脸器官的特征值之后,电子设备可以从服务器中匹配与上述特征值相吻合的面部图像以及身份标志。
316、电子设备根据用户的身份标识,获取用户当前的学习进度。
本发明实施例中,存储在电子设备中的用户的身份标识至少包括用户的年级信息以及用户当前的学习进度;
以及,电子设备可以判断用户是否超过预设时长未使用电子设备,若是,电子设备可以向与该用户对应的教师终端发送获取用户在目标课程中的当前学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向与该用户输出提示信息,以提示该用户及时更新在目标课程中的当前学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以通过对用户当前的学习数据以及该目标课程的难易程度进行分析,进而得到一个参考的学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向该用户对应的教师终端或家长端发送提示信息,以提示教师或家长去监督用户使用电子设备进行学习。
317、电子设备根据用户当前的学习进度,搜索与调整后的勾勒框中所勾勒的文本内容相关的推荐内容。
作为一种可选的实施方式,本发明实施例中,在电子设备搜索与调整后的勾勒框中所勾勒的文本内容相关的推荐内容之后,电子设备的显示屏上将会出现与该调整后的勾勒框中所勾勒的文本内容相关的推荐内容的选项,用户可以根据自身需求选择推荐内容。
318、电子设备向电子设备的显示屏输出上述推荐内容。
作为一种可选的实施方式,本发明实施例中,在电子设备向用户输出上述推荐内容之前,电子设备可以检测搜索到的与调整后的勾勒框中所勾勒的文本内容相关的推荐内容中是否存在不完整的知识点内容,若是,电子设备可以将推荐内容中不完整的知识点补充完整之后再向用户输出。
作为一种可选的实施方式,本发明实施例中,与上述勾勒框中所勾勒的文本内容相关的推荐内容可以包括:
上述勾勒框中所勾勒的文本内容的拼音、偏旁部首、笔画和意思解释;
和/或,上述勾勒框中所勾勒的文本内容的近义词、反义词、同义词、例句和用法;
和/或,上述勾勒框中所勾勒的文本内容所对应的英文翻译、例句和用法;
和/或上述勾勒框中所勾勒的文本内容所对应的练习题。
作为一种可选的实施方式,本发明实施例中,在电子设备输出上述推荐内容之后,电子设备可以将上述勾勒框中所勾勒的文本内容、与上述勾勒框中所勾勒的文本内容相关的推荐内容以及用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些内容对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
可见,实施图3所描述的点读控制方法,能够高识别学习内容的准确性。
此外,实施图3所描述的点读控制方法,能够在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向该用户对应的教师终端或家长端发送提示信息,能够使教师或家长及时去监督用户使用电子设备进行学习,提高用户的学习效率。
此外,实施图3所描述的点读控制方法,能够让用户的老师获悉哪一些内容对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
此外,实施图3所描述的点读控制方法,能够根据用户当前的学习进度搜索与勾勒框中所勾勒的文本内容相关的推荐内容推送给学生,有效的避免了超纲的情况发生,以及影响用户的学习效率。
实施例四
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括:
第一控制单元401,用于在检测到电子设备处于纸上点读状态时,控制电子设备执行拍摄操作,以获得拍摄图像;其中,该拍摄图像中至少包含被点读的书本页面。
识别单元402,用于从上述拍摄图像中识别出被点读的书本页面中的被指定位置。
第一获取单元403,用于从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本数量。
确定单元404,用于根据指定面积区域内的文本数量,确定指定面积区域的密集程度。
判断单元405,用于判断指定面积区域的密集程度是否大于指定阈值。
提示单元406,用于在判断单元405判断出指定面积区域的密集程度大于指定阈值时,提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容。
播报单元407,用于在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容。
本发明实施例中,电子设备可以是供学生使用的学习平板、学习机、家教机、点读机等电子设备,本发明实施例中不做限定。
作为一种可选的实施方式,本发明实施例中,在家教设备当前已进入学习模式之后,用户可以通过语音方式唤醒电子设备的纸上点读功能,和/或用户可以通过触屏方式手动唤醒电子设备的纸上点读功能,和/或用户可以通过手动开启设置在家教设备上的物理按键开关唤醒电子设备的纸上点读功能。
作为一种可选的实施方式,本发明实施例中,用户可以向电子设备输入被点读的书本的名称,电子设备可以直接查找与该名称对应的点读资源,无需对被点读的书本进行格外的识别处理,从而提高了点读资源下载的速度。
作为一种可选的实施方式,本发明实施例中,电子设备在执行拍摄操作时,可以拍摄至少三张图片发送至服务器,而通过对至少三张图片进行处理得到的多媒体数据的准确性更高,从而能够提高识别的准确性
作为一种可选的实施方式,本发明实施例中,被指定位置可以由棍状物体(如手指、笔)在拍摄图像中指定。识别单元402可以先从拍摄到的图像中识别出棍状物物体的轮廓,并将该棍状物体的轮廓作为识别被指定位置的依据。在识别单元402从拍摄得到的图像中确定出该图像中的被指定位置时,识别单元402可以根据拍摄图像中棍状物体的轮廓分别出该拍摄图像中棍状物体的轮廓的指向性,并根据该轮廓的指向性确定出该轮廓指向的位置,并将该轮廓指向的位置作为从该拍摄图像中确定出被点读的书本页面中的被指定位置。
作为一种可选的实施方式,本发明实施例中,上述指定面积区域的大小可以由电子设备的系统默认设定的,也可以由用户自行设定。
作为一种可选的实施方式,本发明实施例中,第一获取单元403可以先从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本内容,再根据该文本内容得到在上述定面积区域内的文本数量。
作为一种可选的实施方式,本发明实施例中,在第一获取单元403获取得到上述指定面积区域内的文本数量之后,确定单元404可以根据一定的公式(例如:指定面积区域内的文本数量÷指定面积区域的面积)计算得到在该指定面积区域内的密集程度。
本发明实施例中,在确定单元404确定了上述指定面积区域的密集程度之后,判断单元405可以将上述指定面积区域的密集程度与系统中的指定阈值进行对比。
作为一种可选的实施方式,本发明实施例中,该指定阈值的大小可以由电子设备的系统默认设定的,也可以由用户自行设定。
作为一种可选的实施方式,本发明实施例中,提示单元406可以将被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容显示在电子设备的显示屏上,并向用户发送提示信息,以提示用户是否需要将勾勒框中所勾勒出的文本内容作为学习内容进行播报。
作为一种可选的实施方式,本发明实施例中,播报单元407可以向电子设备的显示屏输出上述勾勒框中所勾勒的文本内容的播报方式;
以及,电子设备可以预先存储家长或老师的语音特征以及卡通人物形象,用户可以选择以家长或老师的语音特征进行播报上述勾勒框中所勾勒的文本内容;
和/或,电子设备可以预先存储用户所喜爱的卡通人物形象以及与该指定卡通人物形象相关联的语音特征,用户可以选择所喜爱的卡通人物形象进行播报上述勾勒框中所勾勒的文本内容;
以及,在用户选择以何种方式播报勾勒框中所勾勒的文本内容之后,电子设备可以获取与该播报方式相匹配的指定卡通人物形象以及语音特征,且该指定卡通人物形象可以伴随着其经典的出场方式显示在电子设备显示屏上。
作为一种可选的实施方式,本发明实施例中,在播报单元407将勾勒框中所勾勒的文本内容进行播报之后,电子设备还可以将勾勒框中所勾勒的文本内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。其中,电子设备可以向用户提供用户用于登陆电子设备的账号的关系用户链,以便于用户可以从该关系用户链中选择好友账号。
可见,实施图4所描述的电子设备,能够高识别学习内容的准确性。
此外,实施图4所描述的电子设备,能够让用户选择喜欢的播报方式来播报勾勒框中所勾勒的文本内容,提高了用户学习的积极性和学习效率。
此外,实施图4所描述的电子设备,能够让增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
实施例五
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较,在图5所示的电子设备中,第一控制单元401包括:
第一控制子单元4011,用于在检测到电子设备处于纸上点读状态时,控制设置于电子设备的摄像设备上方的反光镜弹出。
作为一种可选的实施方式,本发明实施例中,电子设备可以设定一定的时间间隔进行拍摄,并对在该时间间隔内拍摄的图片进行检测,若出现电子设备对在连续时间间隔内拍摄的照片皆识别不到被点读的书本页面时,则第一控制子单元4011可以控制设置于摄像设备上方的反光镜弹出。
作为一种可选的实施方式,本发明实施例中,电子设备的摄像设备可以为旋转式的摄像设备,在检测到电子设备处于纸上点读状态时,第一控制子单元4011可以控制摄像设备进行转动,直至摄像设备的拍摄图像中存在被点读的书本页面。
第二控制子单元4012,用于在调节反光镜与摄像设备的相对角度之后,控制摄像设备对反光镜中的镜像进行拍摄,获得拍摄图像;其中,上述镜像是位于电子设备前方的被点读的书本页面在反光镜中的镜像。
作为一种可选的实施方式,本发明实施例中,电子设备可以通过调节反光镜相对于摄像设备的镜头面的角度,使用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有电子设备前方的被点读的书本页面。
作为一种可选的实施方式,在图5所示的电子设备中,第一获取单元403包括:
确定子单元4031,用于从上述拍摄图像中确定出在被点读的书本页面上的、以指定位置为圆心以及以预设数量的文本排列时所占的区域长度为半径的圆形区域,作为指定面积区域。
相应的,确定子单元4031,还用于从上述拍摄图像中确定出在被点读的书本页面上的、以指定位置为对角线交叉点以及以预设数量的文本排列时所占的区域长度为对角线长度的矩形区域,作为指定面积区域。
识别子单元4032,用于识别出指定面积区域内的文本数量。
作为一种可选的实施方式,本发明实施例中,第一获取单元403可以先从上述拍摄图像中获取被点读的书本页面上的、以被指定位置为中心的指定面积区域内的文本内容,再根据该文本内容进而得到上述定面积区域内的文本数量。
可见,实施图5所描述的电子设备,能够高识别学习内容的准确性。
此外,实施图5所描述的电子设备,能够让用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有电子设备前方的被点读的书本页面。
此外,实施图5所描述的电子设备,能够让用户选择喜欢的播报方式来播报勾勒框中所勾勒的文本内容,提高了用户学习的积极性和学习效率。
实施例六
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。其中,图6所示的电子设备是由图5所示的电子设备进行优化得到的。与图5所示的电子设备相比较,图6所示的电子设备还可以包括:
交互单元408,用于在提示单元406提示被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容之后,向电子设备的显示屏输出第一询问信息,询问用户是否确定勾勒框中所勾勒出的文本内容为学习内容,若用户确定勾勒框中所勾勒出的文本内容为学习内容,触发播报单元407执行在检测到用户确定勾勒框中所勾勒出的文本内容为学习内容时,播报勾勒框中所勾勒的文本内容。
作为一种可选的实施方式,本发明实施例中,电子设备输出的选择第一询问信息包括:
电子设备显示屏的显示信息询问;
和/或,家教设备发出的语音信息询问。
第二获取单元409,用于在用户确定勾勒框中所勾勒出的文本内容不为学习内容时,则获取用户输入的用于调整勾勒框大小的指令。
作为一种可选的实施方式,本发明实施例中,在电子设备接收到用户确定勾勒框中所勾勒出的文本内容不为学习内容之后,电子设备可以向电子设备的显示屏发送询问信息,以询问用户是否需要进入调整勾勒框界面;
以及,电子设备发送询问信息包括:家教设备显示屏的显示信息提示;和/或,家教设备发出的语音信息提示;
以及,用户可以通过语音方式向电子设备输入需要调整勾勒框大小的确认信息,和/或用户可以通过触屏方式手动向电子设备输入需要调整勾勒框大小的确认信息,和/或用户可以通过手动开启设置在家教设备上的物理按键开关向电子设备输入需要调整勾勒框大小的确认信息。
调整单元410,用于根据用户输入的用于调整勾勒框大小的指令,调整勾勒框,以获得调整后的勾勒框。
作为一种可选的实施方式,本发明实施例中,调整单元410可以向电子设备的显示屏输出调整勾勒框大小的指示框,用户可以向该指示框输入需要调整的范围大小;
和/或,调整单元410可以将勾勒框的边框以虚拟边框的形式显示在显示屏上,用户可以手动触控电子设备的显示屏以调整勾勒框大小。
相应的,交互单元408,还用于向电子设备的显示屏输出第二询问信息,询问用户是否确定将调整后的勾勒框中所勾勒出的文本内容设为学习内容。
作为一种可选的实施方式,本发明实施例中,电子设备输出的选择第二询问信息包括:
电子设备显示屏的显示信息询问;
和/或,家教设备发出的语音信息询问。
相应的,播报单元407,还用于在检测到用户确定调整后的勾勒框中所勾勒出的文本内容为学习内容时,播报调整后的勾勒框中所勾勒的文本内容。
作为一种可选的实施方式,本发明实施例中,电子设备可以将调整后的勾勒框中所勾勒的文本内容以指定的颜色随着电子设备的播报进行标记,例如,当勾勒框中所勾勒的文本内容为“家人”时,而电子设备此时正在播报“家”字,因此“家”便会以指定的颜色进行标记(如红色),而“人”字不作任何的变化,直至电子设备对“人”字进行播报时,“人”字才会再以同样指定的颜色进行标记。
作为一种可选的实施方式,图6所示的电子设备还可以包括:
拍摄单元411,用于在播报单元407播报调整后的勾勒框中所勾勒的文本内容之后,对用户进行拍摄,以获得用户的面部图像。
作为一种可选的实施方式,本发明实施例中,拍摄单元411可以设定一定的时间间隔进行拍摄,并对在该时间间隔内拍摄的图片进行人脸识别,若出现电子设备对在连续时间间隔内拍摄的照片皆识别不到人脸,则电子设备可以控制设置于摄像设备上方的反光镜进行调整,直至反光镜的镜像中存在人脸为止。
第三获取单元412,用于根据用户的面部图像,获取用户的身份标识。
本发明实施例中,电子设备可以预先将用户的面部图像以及与面部图像所对应的身份标识信息存储在设备的服务器中;
以及,在拍摄单元411获取得到用户的面部图像时,第三获取单元412可以对该面部图像进行特征提取,以得到对应的人脸器官的特征值,例如眉间距、眼间距、眼宽、眼长、鼻长、鼻翼宽、唇宽、唇厚等数值化的特征值,在得到对应的人脸器官的特征值之后,第三获取单元412可以从服务器中匹配与上述特征值相吻合的面部图像以及身份标志。
相应的,第三获取单元412,还用于根据用户的身份标识,获取用户当前的学习进度。
本发明实施例中,存储在电子设备中的用户的身份标识至少包括用户的年级信息以及用户当前的学习进度;
以及,电子设备可以判断用户是否超过预设时长未使用电子设备,若是,电子设备可以向与该用户对应的教师终端发送获取用户在目标课程中的当前学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向与该用户输出提示信息,以提示该用户及时更新在目标课程中的当前学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以通过对用户当前的学习数据以及该目标课程的难易程度进行分析,进而得到一个参考的学习进度;
和/或,在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向该用户对应的教师终端或家长端发送提示信息,以提示教师或家长去监督用户使用电子设备进行学习。
搜索单元413,用于根据用户当前的学习进度,搜索与调整后的勾勒框中所勾勒的文本内容相关的推荐内容。
作为一种可选的实施方式,本发明实施例中,在搜索单元413搜索与调整后的勾勒框中所勾勒的文本内容相关的推荐内容之后,电子设备的显示屏上将会出现与该调整后的勾勒框中所勾勒的文本内容相关的推荐内容的选项,用户可以根据自身需求选择推荐内容。
输出单元414,用于向电子设备的显示屏输出上述推荐内容。
作为一种可选的实施方式,本发明实施例中,在输出单元414向用户输出上述推荐内容之前,电子设备可以检测搜索到的与调整后的勾勒框中所勾勒的文本内容相关的推荐内容中是否存在不完整的知识点内容,若是,电子设备可以将推荐内容中不完整的知识点补充完整之后再向用户输出。
作为一种可选的实施方式,本发明实施例中,与上述勾勒框中所勾勒的文本内容相关的推荐内容可以包括:
上述勾勒框中所勾勒的文本内容的拼音、偏旁部首、笔画和意思解释;
和/或,上述勾勒框中所勾勒的文本内容的近义词、反义词、同义词、例句和用法;
和/或,上述勾勒框中所勾勒的文本内容所对应的英文翻译、例句和用法;
和/或上述勾勒框中所勾勒的文本内容所对应的练习题。
作为一种可选的实施方式,本发明实施例中,在输出单元414输出上述推荐内容之后,电子设备可以将上述勾勒框中所勾勒的文本内容、与上述勾勒框中所勾勒的文本内容相关的推荐内容以及用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些内容对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
可见,实施图6所描述的电子设备,能够高识别学习内容的准确性。
此外,实施图6所描述的电子设备,能够在电子设备判断出用户超过预设时长未使用电子设备时,电子设备可以向该用户对应的教师终端或家长端发送提示信息,能够使教师或家长及时去监督用户使用电子设备进行学习,提高用户的学习效率。
此外,实施图6所描述的电子设备,能够让用户的老师获悉哪一些内容对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
此外,实施图6所描述的电子设备,能够根据用户当前的学习进度搜索与勾勒框中所勾勒的文本内容相关的推荐内容推送给学生,有效的避免了超纲的情况发生,以及影响用户的学习效率。
实施例七
请参阅图7,图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示,该电子设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行图1~图3任意一种点读控制方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图3任意一种点读控制方法。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种点读控制方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种点读控制方法,其特征在于,所述方法包括:
在检测到电子设备处于纸上点读状态时,控制所述电子设备执行拍摄操作,以获得拍摄图像;其中,所述拍摄图像中至少包含被点读的书本页面;
从所述拍摄图像中识别出所述被点读的书本页面中的被指定位置;
从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量;
根据所述指定面积区域内的文本数量,确定所述指定面积区域的密集程度;
判断所述指定面积区域的密集程度是否大于指定阈值,若是,提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容;
在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容;
所述提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容,包括:将被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容显示在电子设备的显示屏上,并向用户发送提示信息。
2.根据权利要求1所述的方法,其特征在于,所述在检测到电子设备处于纸上点读状态时,控制所述电子设备执行拍摄操作,以获得拍摄图像,包括:
在检测到电子设备处于纸上点读状态时,控制设置于所述电子设备的摄像设备上方的反光镜弹出;
在调节所述反光镜与所述摄像设备的相对角度之后,控制所述摄像设备对所述反光镜中的镜像进行拍摄,获得拍摄图像;其中,所述镜像是位于所述电子设备前方的所述被点读的书本页面在所述反光镜中的镜像。
3.根据权利要求1或2所述的方法,其特征在于,所述从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量,包括:
从所述拍摄图像中确定出在所述被点读的书本页面上的、以所述指定位置为圆心以及以预设数量的文本排列时所占的区域长度为半径的圆形区域,作为指定面积区域;
识别出所述指定面积区域内的文本数量;
或者,所述从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量,包括:
从所述拍摄图像中确定出在所述被点读的书本页面上的、以所述指定位置为对角线交叉点以及以预设数量的文本排列时所占的区域长度为对角线长度的矩形区域,作为指定面积区域;
识别出所述指定面积区域内的文本数量。
4.根据权利要求3所述的方法,其特征在于,在所述提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容之后,以及所述在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容之前,所述方法还包括:
向所述电子设备的显示屏输出第一询问信息,询问所述用户是否确定所述勾勒框中所勾勒出的文本内容为学习内容;
若所述用户确定所述勾勒框中所勾勒出的文本内容为学习内容,执行所述的在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容的步骤;
若所述用户确定所述勾勒框中所勾勒出的文本内容不为学习内容,获取所述用户输入的用于调整所述勾勒框大小的指令;
根据所述用户输入的用于调整所述勾勒框大小的指令,调整所述勾勒框,以获得调整后的勾勒框;
向所述电子设备的显示屏输出第二询问信息,询问所述用户是否确定将所述调整后的勾勒框中所勾勒出的文本内容设为学习内容;
在检测到用户确定所述调整后的勾勒框中所勾勒出的文本内容为学习内容时,播报所述调整后的勾勒框中所勾勒的文本内容。
5.根据权利要求4所述的方法,其特征在于,在所述播报所述调整后的勾勒框中所勾勒的文本内容之后,所述方法还包括:
对所述用户进行拍摄,以获得所述用户的面部图像;
根据所述用户的面部图像,获取所述用户的身份标识;
根据所述用户的身份标识,获取所述用户当前的学习进度;
根据所述用户当前的学习进度,搜索与所述调整后的勾勒框中所勾勒的文本内容相关的推荐内容;
向所述电子设备的显示屏输出所述推荐内容。
6.一种电子设备,其特征在于,所述电子设备包括:
第一控制单元,用于在检测到电子设备处于纸上点读状态时,控制所述电子设备执行拍摄操作,以获得拍摄图像;其中,所述拍摄图像中至少包含被点读的书本页面;
识别单元,用于从所述拍摄图像中识别出所述被点读的书本页面中的被指定位置;
第一获取单元,用于从所述拍摄图像中获取所述被点读的书本页面上的、以所述被指定位置为中心的指定面积区域内的文本数量;
确定单元,用于根据所述指定面积区域内的文本数量,确定所述指定面积区域的密集程度;
判断单元,用于判断所述指定面积区域的密集程度是否大于指定阈值;
提示单元,用于在所述判断单元判断出所述指定面积区域的密集程度大于指定阈值时,提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容;
播报单元,用于在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容;
所述提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容,包括:将被指定位置对应的勾勒框以及勾勒框中所勾勒出的文本内容显示在电子设备的显示屏上,并向用户发送提示信息。
7.根据权利要求6所述的电子设备,其特征在于,所述第一控制单元包括:
第一控制子单元,用于在检测到所述电子设备处于纸上点读状态时,控制设置于所述电子设备的摄像设备上方的反光镜弹出;
第二控制子单元,用于在调节所述反光镜与所述摄像设备的相对角度之后,控制所述摄像设备对所述反光镜中的镜像进行拍摄,获得拍摄图像;其中,所述镜像是位于所述电子设备前方的所述被点读的书本页面在所述反光镜中的镜像。
8.根据权利要求6或7所述的电子设备,其特征在于,所述第一获取单元包括确定子单元和识别子单元:
所述确定子单元,用于从所述拍摄图像中确定出在所述被点读的书本页面上的、以所述指定位置为圆心以及以预设数量的文本排列时所占的区域长度为半径的圆形区域,作为指定面积区域;或者,用于从所述拍摄图像中确定出在所述被点读的书本页面上的、以所述指定位置为对角线交叉点以及以预设数量的文本排列时所占的区域长度为对角线长度的矩形区域,作为指定面积区域;
所述识别子单元,用于识别出所述指定面积区域内的文本数量。
9.根据权利要求8所述的电子设备,其特征在于,所述电子设备还包括:
交互单元,用于在所述提示单元提示所述被指定位置对应的勾勒框以及所述勾勒框中所勾勒出的文本内容之后,向所述电子设备的显示屏输出第一询问信息,询问所述用户是否确定所述勾勒框中所勾勒出的文本内容为学习内容,若所述用户确定所述勾勒框中所勾勒出的文本内容为学习内容,触发所述播报单元执行所述的在检测到用户确定所述勾勒框中所勾勒出的文本内容为学习内容时,播报所述勾勒框中所勾勒的文本内容;
第二获取单元,用于在所述用户确定所述勾勒框中所勾勒出的文本内容不为学习内容时,则获取所述用户输入的用于调整所述勾勒框大小的指令;
调整单元,用于根据所述用户输入的用于调整所述勾勒框大小的指令,调整所述勾勒框,以获得调整后的勾勒框;
所述交互单元,还用于向所述电子设备的显示屏输出第二询问信息,询问所述用户是否确定将所述调整后的勾勒框中所勾勒出的文本内容设为学习内容;
所述播报单元,还用于在检测到用户确定所述调整后的勾勒框中所勾勒出的文本内容为学习内容时,播报所述调整后的勾勒框中所勾勒的文本内容。
10.根据权利要求9所述的电子设备,其特征在于,所述电子设备还包括:
拍摄单元,用于在所述播报单元播报所述调整后的勾勒框中所勾勒的文本内容之后,对所述用户进行拍摄,以获得所述用户的面部图像;
第三获取单元,用于根据所述用户的面部图像,获取所述用户的身份标识;
所述第三获取单元,还用于根据所述用户的身份标识,获取所述用户当前的学习进度;
搜索单元,用于根据所述用户当前的学习进度,搜索与所述调整后的勾勒框中所勾勒的文本内容相关的推荐内容;
输出单元,用于向所述电子设备的显示屏输出所述推荐内容。
CN201910494070.XA 2019-06-09 2019-06-09 一种点读控制方法及电子设备 Active CN111078080B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910494070.XA CN111078080B (zh) 2019-06-09 2019-06-09 一种点读控制方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910494070.XA CN111078080B (zh) 2019-06-09 2019-06-09 一种点读控制方法及电子设备

Publications (2)

Publication Number Publication Date
CN111078080A CN111078080A (zh) 2020-04-28
CN111078080B true CN111078080B (zh) 2021-06-25

Family

ID=70310048

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910494070.XA Active CN111078080B (zh) 2019-06-09 2019-06-09 一种点读控制方法及电子设备

Country Status (1)

Country Link
CN (1) CN111078080B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527183A (zh) * 2020-12-23 2021-03-19 北京华宇信息技术有限公司 手绘删除文本方法及装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050195159A1 (en) * 2004-02-23 2005-09-08 Hunleth Frank A. Keyboardless text entry
JP6136568B2 (ja) * 2013-05-23 2017-05-31 富士通株式会社 情報処理装置および入力制御プログラム
CN105988984A (zh) * 2015-02-12 2016-10-05 阿里巴巴集团控股有限公司 一种文字编辑方法及装置
CN106843525B (zh) * 2016-12-26 2019-06-21 北京五八信息技术有限公司 一种文字输入方法及装置
CN107741816A (zh) * 2017-10-27 2018-02-27 咪咕动漫有限公司 一种图像信息的处理方法、装置及存储介质
CN107748642B (zh) * 2017-11-07 2020-04-10 Oppo广东移动通信有限公司 调整图片的方法、装置、存储介质及电子设备
CN107885430B (zh) * 2017-11-07 2020-07-24 Oppo广东移动通信有限公司 一种音频播放方法、装置、存储介质及电子设备
CN108843994A (zh) * 2018-07-10 2018-11-20 广东小天才科技有限公司 一种基于智能台灯的学习互动方法及智能台灯

Also Published As

Publication number Publication date
CN111078080A (zh) 2020-04-28

Similar Documents

Publication Publication Date Title
CN109766412B (zh) 一种基于图像识别的学习内容获取方法及电子设备
CN111078083A (zh) 一种点读内容的确定方法及电子设备
CN109639952B (zh) 一种拍照搜题方法及电子设备
CN108197300B (zh) 一种搜题方法及系统
CN111077996B (zh) 一种基于点读的信息推荐方法及学习设备
CN109783613B (zh) 一种搜题方法及系统
CN111079494B (zh) 一种学习内容推送方法及电子设备
CN111027537A (zh) 一种搜题方法及电子设备
CN111026949A (zh) 一种基于电子设备的搜题方法及系统
CN111723213A (zh) 学习数据获取方法及电子设备、计算机可读存储介质
CN111078080B (zh) 一种点读控制方法及电子设备
CN109064795B (zh) 一种投影交互的方法及照明设备
CN111639158B (zh) 一种学习内容的显示方法及电子设备
CN111078179A (zh) 一种听写报读进度的控制方法及电子设备
CN111078915A (zh) 一种点读模式下的点读内容获取方法及电子设备
CN111026924A (zh) 一种待搜索内容的获取方法及电子设备
CN111078982B (zh) 一种电子页面的检索方法、电子设备及存储介质
CN111079726B (zh) 一种图像处理方法及电子设备
CN111079777B (zh) 一种基于书页定位的点读方法及电子设备
CN111027353A (zh) 一种搜索内容的提取方法及电子设备
CN111091034A (zh) 一种基于多手指识别的搜题方法及家教设备
CN111077993A (zh) 一种学习场景的切换方法、电子设备及存储介质
CN111028558A (zh) 一种听写检测方法及电子设备
CN111753715B (zh) 点读场景下试题拍摄的方法、装置、电子设备和存储介质
CN111027556B (zh) 一种基于图像预处理的搜题方法及学习设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant