CN110019757A

CN110019757A - 书本点读互动设备及其控制方法、计算机可读存储介质

Info

Publication number: CN110019757A
Application number: CN201910264238.8A
Authority: CN
Inventors: 张震; 张大刚; 胡峰
Original assignee: Cereal Technology (shenzhen) Co Ltd
Current assignee: Cereal Technology (shenzhen) Co Ltd
Priority date: 2019-04-02
Filing date: 2019-04-02
Publication date: 2019-07-16
Also published as: WO2020199318A1

Abstract

本发明公开了一种书本点读互动设备的控制方法，书本点读互动设备的控制方法包括步骤：在检测到输入信息时，根据所述输入信息生成所述输入信息的反馈信息，其中，所述输入信息包括语音输入信息、点击输入信息、手写输入信息、手势输入信息以及环境信息中的至少一个；控制书本点读互动设备输出所述反馈信息；本发明还公开了一种书本点读互动设备及计算机可读存储介质。本发明通过在用户使用书本点读互动设备进行点读的过程中，获取多种方式输入的信息，并根据输入的信息进行反馈，引导用户学习，实现用户与书本点读互动设备之间的信息交互，提高用户的学习效率。

Description

书本点读互动设备及其控制方法、计算机可读存储介质

技术领域

本发明涉及点读技术领域，尤其涉及书本点读互动设备及其控制方法、计算机可读存储介质。

背景技术

目前，以智能手机、pad(portable android device平板电脑)以及学习机为终端的学习类app(Application应用程序)应运而生，在互动性方面大大提高了使用者的学习兴趣。但在学习过程中，用手点击屏幕的方式成为学生学习过程中的主要交互方式，即使用户脱离了书本，导致学生长时间盯着屏幕，使得学生的视力下降，且不利于学生专注力的培养。

而传统的点读笔体积小巧，方便携带，是突破传统思维的高科技学习工具。它通过点到哪里读到哪里的方式，提高孩子的学习兴趣。相比于带屏幕的产品而言，点读笔对孩子的视力没有任何影响，几乎没有近视的风险。

但是，市面上的点读笔的点读形式单一，学生只能被动地接收点读笔发出的内容，即学生以“点”内容和图片为主，点读笔以“读”内容和播放图片相关声音或音效为主，导致学生学习效果较差。

因此，本领域的技术人员亟需提供一种基于设备上面的相关学习类app且可以不依赖大屏幕的交互方式，使得学生能够对书本保持比较大的关注度，以提高学生的学习效果。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供一种书本点读互动设备及其控制方法、计算机可读存储介质，旨在通过在用户使用书本点读互动设备进行点读的过程中，获取多种方式输入的信息，并根据输入的信息进行反馈，引导用户学习，实现用户与书本点读互动设备之间的学习交互，保障了用户的学习效果。

为实现上述目的，本发明提供一种书本点读互动设备的控制方法，所述书本点读互动设备的控制方法包括步骤：

在检测到输入信息时，根据所述输入信息生成所述输入信息的反馈信息，其中，所述输入信息包括语音输入信息、点击输入信息、手写输入信息、手势输入信息以及环境信息中的至少一个；

控制书本点读互动设备输出所述反馈信息。

可选地，所述书本点读互动设备输出所述反馈信息的形式包括语音输出、震动输出以及文字输出中的至少一个。

可选地，所述检测到输入信息的步骤之前，还包括：

在接收到任务指令时，控制所述书本点读互动设备输出提示信息。

可选地，所述在接收到任务指令时，控制所述书本点读互动设备输出任务提示信息的步骤包括：

在接收到所述任务指令时，控制所述书本点读互动设备读取与所述书本点读互动设备对应的点读书中的编码；

根据所述编码获取与所述任务指令对应的提示信息；

输出所述提示信息。

可选地，所述根据所述输入信息生成所述输入信息的反馈信息包括：

根据所述输入信息生成所述输入信息的评分信息；

根据所述评分信息生成所述反馈信息。

可选地，所述控制书本点读互动设备输出所述反馈信息的步骤之后，还包括：

根据所述输入信息和所述反馈信息生成学习记录信息；

将所述学习记录信息发送至服务器。

可选地，所述书本点读互动设备的控制方法还包括：

在所述书本点读互动设备开启时，接收所述服务器发送的学习记录信息；

输出所述学习记录信息。

可选地，所述书本点读互动设备的控制方法还包括：

在所述书本点读互动设备开启时，记录所述书本点读互动设备的工作时长；

在所述工作时长大于预设时长时，输出提示休息的语音信息。

为实现上述目的，本发明还提供一种书本点读互动设备，所述书本点读互动设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被所述处理器执行时实现如上所述任一项所述的书本点读互动设备的控制方法的步骤。

此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被处理器执行时实现如上所述中任一项所述的书本点读互动设备的控制方法的步骤。

本发明实施例提出的书本点读互动设备及其控制方法、计算机可读存储介质，在检测到输入信息时，根据所述输入信息生成所述输入信息的反馈信息，并控制书本点读互动设备输出所述反馈信息，通过在用户使用书本点读互动设备进行点读的过程中，获取多种方式输入的信息，并根据输入的信息进行反馈，引导用户学习，实现用户与书本点读互动设备之间的信息交互，提高用户的学习效率。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图；

图2为本发明书本点读互动设备的控制方法的一实施例的流程示意图；

图3为本发明书本点读互动设备的控制方法另一实施例的流程示意图；

图4为本发明书本点读互动设备的控制方法再一实施例的流程示意图；

图5为本发明书本点读互动设备的控制方法又一实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例的主要解决方案是：

控制书本点读互动设备输出所述反馈信息。

由于现有技术中，点读笔的点读形式单一，用户只能被动地接收点读笔的发出的内容，即用户以“点”内容和图片为主，点读笔以“读”内容和播放图片相关声音或音效为主，导致用户学习效果较差。

本发明提供一种解决方案，在检测到输入信息时，根据所述输入信息生成所述输入信息的反馈信息，并控制书本点读互动设备输出所述反馈信息，通过在用户使用书本点读互动设备进行点读的过程中，获取多种方式输入的信息，并根据输入的信息进行反馈，引导用户学习，实现用户与书本点读互动设备之间的信息交互，提高用户的学习效率。

如图1所示，图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。

本发明实施例终端为书本点读互动设备，可包括笔状设备等，或是具有语音、手写和点读功能、用户可在纸质媒介上进行点读互动以引导用户学习的智能设备。

需要说明的是，本发明不仅可以应用在笔状设备上，还可以应用在目前市场比较常见的故事机器人、绘本阅读机器人等相关设备中。这些设备一般通过摄像头感知纸质媒介上记载的信息，或是直接识别纸质媒介上用户指定位置的特定信息，并且采用语音、点击屏幕、识别图像等信息输入方式，以及语音、屏幕显示等信息输出方式进行反馈，均可作为本发明的实施例终端。

可选地，本实施例所述点读设备为书本点读互动设备。如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。可选地，终端还可以包括摄像头、RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块、LED、显示屏、震动部件等等。其中，传感器比如运动传感器以及其他传感器。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态的应用(比如摇动、挥击、翻转)、振动识别相关功能(比如计步器、敲击)等。

本领域技术人员可以理解，图1中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及书本点读互动设备的控制程序。在图1所示的终端中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的书本点读互动设备的控制程序，并执行以下操作：

控制书本点读互动设备输出所述反馈信息。

进一步地，处理器1001可以调用存储器1005中存储的书本点读互动设备的控制程序，还执行以下操作：

控制所述书本点读互动设备以语音输出、震动输出以及文字输出中的至少一种形式输出所述反馈信息。

根据所述编码获取与所述任务指令对应的提示信息；

输出所述提示信息。

根据所述输入信息生成所述输入信息的评分信息；

根据所述评分信息生成所述反馈信息。

根据所述输入信息和所述反馈信息生成学习记录信息；

将所述学习记录信息发送至服务器。

输出所述学习记录信息。

参照图2，在一实施例中，所述书本点读互动设备的控制方法包括以下步骤：

步骤S10，在检测到输入信息时，根据所述输入信息生成所述输入信息的反馈信息，其中，所述输入信息包括语音输入信息、点击输入信息、手写输入信息、手势输入信息以及环境信息中的至少一个；

在本实施例中，在用户使用书本点读互动设备的过程中，可以通过用户语音输入或点击输入、书本点读互动设备自动获取等方式输入信息。在检测到输入的信息时，书本点读互动设备可以根据输入信息对用户做出相应的反馈，其中，输入信息可以是语音输入信息、点击输入信息、手写输入信息、手势输入信息以及环境信息中的至少一个。例如，在检测到用户输入的语音时，可对输入的语音进行评分判定或是对错判定，在用户通过点击输入信息时，则可以根据点击区域获取输入的具体内容，点击输入信息也可以是通过书本点读互动设备的笔尖进行点击。由于点击输入的局限性，用户通过点击方式输入大量内容比较耗时，输入效率较低，因此，用户可优先使用点击方式选择书本点读互动设备的具体应用场景，切换应用场景以及对于书本点读互动设备的其他指令式操作。例如，在用户选择跟读场景时，对用户跟读的语音与标准语音进行对比，以对用户发音不准的地方进行纠正，形成学习互动。在用户通过手写输入信息时，可使用书本点读互动设备在对应的点读本上划过一片区域，由于点读本上设有编码，可根据编码生成书本点读互动设备划过的轨迹，再根据轨迹获取用户输入的信息，其中，编码可以是支持点读或者手写笔迹同步的编码，例如多媒体印刷读物(MPR，Multimedia Print Reader)码等。在用户通过手势输入信息时，可控制书本点读互动设备内的运动传感器检测多个方向上的加速度，识别出用户手势动作，比如摇动、挥击、翻转等。此外，还可通过书本点读互动设备进行地理位置定位，以输入用户所在地的多种环境信息，例如天气信息等。

目前书本点读互动设备多用在英语学科的学习中，以提升用户的语音口语能力。当然，书本点读互动设备也可用于语文、数学等其他课程的学习。例如，在使用书本点读互动设备进行语文方面的学习时，书本点读互动设备可辅助用户进行课文背诵，在用户背诵时进行提示和纠正，在用户遇到生字生词时，也可控制书本点读互动设备进行提示，并要求用户进行跟读。在用户完成作业或习题时，书本点读互动设备还可用于解题思路的点拨，或是答案的正误判断，由于语音输出方式不够直观，因此也可将习题的提示内容通过网络推送至绑定有相同账号的智能手机等终端进行显示。在用户通过书本点读互动设备书写习题答案时，可根据书本点读互动设备书写轨迹，即根据书本点读互动设备在点读书中划过的编码顺序在智能系统中构建虚拟的答案内容，从而判断答案内容是否正确。此外，在用户使用书本点读互动设备阅读科普类点读本时，可通过更直观的方式帮助用户进行理解，例如，根据用户的输入信息输出相关图片或视频信息至绑定的智能手机、智能电视等终端，以方便用户进行查看。

步骤S20，控制书本点读互动设备输出所述反馈信息。

在本实施例中，反馈信息可以是语音反馈、震动反馈、或是显示反馈中的至少一种，具体的反馈方式可根据检测到的输入信息进行确定。例如，在对用户输入的语音信息进行反馈时，可控制书本点读互动设备以语音、震动或文字显示的输出方式反馈给用户，与用户之间形成互动交流，这样，用户可以知晓自己输入语音的评价情况，从而进一步做出改进。在对用户点击输入的信息进行应用场景切换时，可控制书本点读互动设备切换为对应的场景模式，并在切换成功后以语音、震动或文字显示的提示用户，在获取到的是环境信息时，则可输出天气信息等多种环境反馈，从而给予用户生活上的提示和关怀。

在本实施例公开的技术方案中，通过在用户使用书本点读互动设备进行点读的过程中，获取多种方式输入的信息，并根据输入的信息进行反馈，引导用户学习，实现用户与书本点读互动设备之间的信息交互，提高用户的学习效率。

在另一实施例中，如图3所示，在上述图2所示的实施例基础上，步骤S10之前，还包括：

步骤S30，在接收到任务指令时，控制所述书本点读互动设备输出提示信息。

在本实施例中，一般情况下，在用户通过书本点读互动设备输入信息之前，书本点读互动设备都会对用户进行提示，使用户知晓应该如何输入信息以及输入怎样的信息内容。在接受到任务指令时，需要根据任务指令控制书本点读互动设备输出对应的提示信息。首先，控制书本点读互动设备读取与书本点读互动设备对应的点读书中的编码，再根据编码获取与任务指令对应的提示信息并进行输出。由于用户在使用书本点读互动设备时一般存在某种使用需求，即在某种应用场景中通过书本点读互动设备进行点读，因此，任务指令中一般包含应用场景的选择信息，并且用户会将书本点读互动设备放在需要进行点读的书本内容上。书本点读互动设备通常配备有对应的点读书，点读书中每一部分内容对应不同的编码，编码对应提示信息以及针对输入信息的反馈规则，在此不做具体限定。在接收到任务指令时，控制书本点读互动设备获取编码，再通过网络或书本点读互动设备连接的存储器文件获取提示信息，并进行输出。由于点读书中的部分内容可用在多个应用场景中，因此存在一个编码对应多种应用场景下的提示信息，可根据编码获取与任务指令中的应用场景的选择信息对应的提示信息，提示信息可以是书本点读互动设备输出的语音提示信息，也可通过网络或蓝牙等无线方式传输至智能手机、智能电视、电脑等终端输出视频或语音内容。例如，在书本点读互动设备开机后，首先读取用户历史学习进度信息，以及所在地理位置和天气等环境信息，并反馈给用户，在用户触发任务指令后，根据任务指令对应的应用场景和编码获取云端或内置的题目内容，并进行输出，以提示用户，比如，在用户跟读场景下，输出标准语音提示用户进行跟读，并根据用户跟读的内容作出反馈，以引导用户学习，在分角色点读场景中，控制书本点读互动设备输出预设语音与用户进行对话，并对用户语音内容作出评价，可从流利度、准确度和完整度等方面向用户提出改善的建议。此外，在游戏场景中，可控制书本点读互动设备输出游戏规则内容和相关提示，用户与书本点读互动设备之间语音交流，完成游戏任务，从而激发用户的学习兴趣。

在本实施例公开的技术方案中，根据书本点读互动设备输出的提示信息，引导用户输入信息，并根据输入信息声称反馈信息并进行输出，实现了用户与书本点读互动设备之间的信息交互，引导用户学习，提高了用户的学习效率。

在再一实施例中，如图4所示，在图2至图3任一实施例所示的基础上，步骤S20之后，还包括：

步骤S40，根据所述输入信息和所述反馈信息生成学习记录信息；

在本实施例中，在用户使用书本点读互动设备进行学习的过程中，会不断地产生输入信息和对应的反馈信息，并且从输入信息和反馈信息中，可以清楚知晓用户的学习过程，因此可将输入信息和反馈信息进行整合，生成学习记录信息，在输入信息和反馈信息的内容较多时，也可提取部分内容生成学习记录信息，以便于存储和读取。

步骤S50，将所述学习记录信息发送至服务器。

在本实施例中，所述学习记录信息可保存在与书本点读互动设备关联的存储设备中，也可通过绑定个人账号的方式，获取与书本点读互动设备对应的云端存储地址，以保存在服务器端。生成学习记录信息后，将学习记录信息通过网络传输的方式上传至服务器中的对应位置进行存储，以方便用户进行查看以及不同设备端学习记录信息的同步，例如用户可从多个手机、电脑、智能电视等多个设备端查看学习记录信息，以及播放点读书中的内容等，或者将学习记录信息进行分享。此外，每次在书本点读互动设备开启时，也可输出所述学习记录信息，从而使用户可以了解历史学习进度，并有针对性的做出改进，或是根据不同用户的学习情况生成对应的个性化学习指导和复习等。例如，在抢答场景下，获取用户上一次学习的内容并根据预设规则生成多个问题，并要求用户在指定时间内进行做答，若预设时间内用户未作答或答案错误，则控制书本点读互动设备输出正确答案，若预设时间内用户输入正确答案，则控制书本点读互动设备输出提示信息，在抢答结束后统计用户得分并进行存储，以激发用户的竞争意识以及学习兴趣。

在本实施例公开的技术方案中，根据所述输入信息和所述反馈信息生成学习记录信息，并发送至服务器，方便用户进行查看和复习，提高了用户使用书本点读互动设备时的学习效率。

在又一实施例中，如图5所示，在图2至图4任一实施例所示的基础上，步骤S20之后，还包括：

步骤S60，在所述书本点读互动设备开启时，记录所述书本点读互动设备的工作时长；

步骤S70，在所述工作时长大于预设时长时，输出提示休息的语音信息。

在本实施例中，在书本点读互动设备开启时，开始进行计时，即工作时长，在工作时长大于预设时长时，用户需要进行休息，因此输出提示信息以提醒用户。此外，在书本点读互动设备开启状态下，用户并不一定是在学习中，因此也可根据输入信息的输入时长和反馈信息的输出时长来判断用户的学习时间，在学习时间过长时提示用户进行休息，例如，本次学习时间大于30分钟时，书本点读互动设备提示用户进行休息，在休息预设时间后，提示用户是否继续学习。

在本实施例公开的技术方案中，通过在所述书本点读互动设备开启时，记录所述书本点读互动设备的工作时长，并在所述工作时长大于预设时长时，输出提示休息的语音信息，使用户在使用书本点读互动设备时可以劳逸结合，进一步提高了用户的学习效率。

此外，本发明实施例还提出一种书本点读互动设备，所述书本点读互动设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被所述处理器执行时实现如上实施例所述的书本点读互动设备的控制方法的步骤。

此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被所述处理器执行时实现如上实施例所述的书本点读互动设备的控制方法的步骤。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims

1.一种书本点读互动设备的控制方法，其特征在于，所述书本点读互动设备的控制方法包括步骤：

控制书本点读互动设备输出所述反馈信息。

2.如权利要求1所述的书本点读互动设备的控制方法，其特征在于，所述书本点读互动设备输出所述反馈信息的形式包括语音输出、震动输出以及文字输出中的至少一个。

3.如权利要求1所述的书本点读互动设备的控制方法，其特征在于，所述检测到输入信息的步骤之前，还包括：

4.如权利要求3所述的书本点读互动设备的控制方法，其特征在于，所述在接收到任务指令时，控制所述书本点读互动设备输出任务提示信息的步骤包括：

根据所述编码获取与所述任务指令对应的提示信息；

输出所述提示信息。

5.如权利要求1所述的书本点读互动设备的控制方法，其特征在于，所述根据所述输入信息生成所述输入信息的反馈信息包括：

根据所述输入信息生成所述输入信息的评分信息；

根据所述评分信息生成所述反馈信息。

6.如权利要求1所述的书本点读互动设备的控制方法，其特征在于，所述控制书本点读互动设备输出所述反馈信息的步骤之后，还包括：

根据所述输入信息和所述反馈信息生成学习记录信息；

将所述学习记录信息发送至服务器。

7.如权利要求6所述的书本点读互动设备的控制方法，其特征在于，所述书本点读互动设备的控制方法还包括：

输出所述学习记录信息。

8.如权利要求1所述的书本点读互动设备的控制方法，其特征在于，所述书本点读互动设备的控制方法还包括：

9.一种书本点读互动设备，其特征在于，所述书本点读互动设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被所述处理器执行时实现如权利要求1至8中任一项所述的书本点读互动设备的控制方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有书本点读互动设备的控制程序，所述书本点读互动设备的控制程序被处理器执行时实现如权利要求1至8中任一项所述的书本点读互动设备的控制方法的步骤。