CN108427948A - 一种辅助学习方法及系统 - Google Patents

一种辅助学习方法及系统 Download PDF

Info

Publication number
CN108427948A
CN108427948A CN201810232002.1A CN201810232002A CN108427948A CN 108427948 A CN108427948 A CN 108427948A CN 201810232002 A CN201810232002 A CN 201810232002A CN 108427948 A CN108427948 A CN 108427948A
Authority
CN
China
Prior art keywords
terminal
word
text information
pen
intelligence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810232002.1A
Other languages
English (en)
Inventor
王佩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810232002.1A priority Critical patent/CN108427948A/zh
Publication of CN108427948A publication Critical patent/CN108427948A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/19—Image acquisition by sensing codes defining pattern positions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明公开了一种辅助学习方法及系统，所述方法包括：通过智能拍摄笔获取文字图片；所述智能拍摄笔将所述文字图片发送至终端；所述终端根据文字识别算法，在所述文字图片中识别文字信息；所述终端通过播放设备播放所述文字信息。本发明的技术方案，实现了用户遇到不认识或不理解的文字时能够实时得到所需的解释，无需多余的操作，提升了阅读效率和体验。

Description

一种辅助学习方法及系统
技术领域
本发明涉及人工智能技术领域，具体涉及一种辅助学习方法及系统。
背景技术
目前，人们在阅读时往往容易遇到不认识的文字，此时，往往需要用户手动上网或用词典查询，费时费力，打断了用户的阅读，降低了阅读体验。
因此，如何在阅读过程中快速为用户提供文字信息，成为目前亟待解决的技术问题。
发明内容
本发明的目的在于提供一种辅助学习方法及系统，用以解决现有阅读中查询不认识的文字费时费力的问题。
为实现上述目的，本发明的第一方面提出了一种辅助学习方法，包括：通过智能拍摄笔获取文字图片；所述智能拍摄笔将所述文字图片发送至终端；所述终端根据文字识别算法，在所述文字图片中识别文字信息；所述终端通过播放设备播放所述文字信息。
在上述技术方案中，可选地，在通过智能拍摄笔获取文字图片的步骤之前，还包括：通过所述智能拍摄笔或所述终端调整所述智能拍摄笔的拍摄面积。
在上述技术方案中，可选地，所述终端根据文字识别算法，在所述文字图片中识别文字信息的步骤，具体包括：所述终端通过二值化处理将所述文字图片中的文字与背景分离；所述终端抽取分离得到的文字的结构特征；所述终端将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征；所述终端在文字信息数据库中获取与所述目标结构特征对应的文字信息。
在上述技术方案中，可选地，所述播放设备包括蓝牙耳机、有线耳机和终端自带的播放器。
在上述技术方案中，可选地，还包括：所述终端将每一次识别得到的文字信息保存至历史记录；以及所述终端根据用户操作信息，显示所述历史记录。
本发明的第二方面提出了一种辅助学习系统，包括：智能拍摄笔，通过无线连接方式连接至终端，用于获取文字图片，并将所述文字图片发送至所述终端；终端，用于根据文字识别算法，在所述文字图片中识别文字信息，并向播放设备发送播放命令；所述播放设备，用于根据所述播放命令播放所述文字信息。
在上述技术方案中，可选地，所述智能拍摄笔或所述终端还用于：调整所述智能拍摄笔的拍摄面积。
在上述技术方案中，可选地，所述终端用于：通过二值化处理将所述文字图片中的文字与背景分离，并抽取分离得到的文字的结构特征，以及将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征，并在文字信息数据库中获取与所述目标结构特征对应的文字信息。
在上述技术方案中，可选地，所述播放设备包括蓝牙耳机、有线耳机和终端自带的播放器。
在上述技术方案中，可选地，所述终端还用于：将每一次识别得到的文字信息保存至历史记录，以及根据用户操作信息，显示所述历史记录。
本发明具有如下优点：
本发明的技术方案，提供了一种由智能拍摄笔、终端和播放设备组成的系统，当用户遇到不认识的文字时，可直接使用智能拍摄笔点击该文字或放置在该文字处，实现智能拍摄笔拍摄文字图片，接着，智能拍摄笔将文字图片发送至终端，终端即可根据预设的文字识别算法，在所述文字图片中识别文字信息，最终，终端通过播放设备播放该文字信息，此过程为实时进行，实现了用户遇到不认识或不理解的文字时能够实时得到所需的解释，无需多余的操作，提升了阅读效率和体验。
附图说明
图1示出了本发明的一个实施例的辅助学习方法的流程图。
图2示出了本发明另一个实施例的辅助学习方法的流程图。
图3示出了本发明再一个实施例的辅助学习方法的流程图。
图4示出了本发明的一个实施例的辅助学习系统的框图。
具体实施方式
以下实施例用于说明本发明，但不用来限制本发明的范围。
实施例1
图1示出了本发明的一个实施例的辅助学习方法的流程图。
如图1所示，本发明的一个实施例的辅助学习方法，包括：
步骤102，通过智能拍摄笔获取文字图片。
步骤104，所述智能拍摄笔将所述文字图片发送至终端。这里所述的终端可以为手机、平板等，也可为专用的阅读设备，终端中安装有应用程序，该应用程序接收文字图片。
步骤106，所述终端根据文字识别算法，在所述文字图片中识别文字信息。即终端中的应用程序根据文字识别算法识别出文字图片中识别文字信息，下述内容中将不再对终端和应用程序两个概念进行区分。
具体来说，所述终端通过二值化处理将所述文字图片中的文字与背景分离；所述终端抽取分离得到的文字的结构特征；所述终端将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征；所述终端在文字信息数据库中获取与所述目标结构特征对应的文字信息。
在本发明的另一种实现方式中，还可采用OCR(光学字符识别)的方式，终端得到文字的扫描图片，通过检测暗、亮的模式确定其形状，然后用字符识别方法将形状翻译成计算机文字的过程。即针对印刷体字符，采用光学的方式将纸质文档中的文字转换成为黑白点阵的图像文件，并通过识别软件将图像中的文字转换成文本格式，供文字处理软件进一步编辑加工的技术。
在本发明的再一种实现方式中，还可以采用深度学习的方式进行文字识别，在此不再赘述。
当然，终端在得到文字信息后，还可以实时联网获取该文字信息的相关信息，如例句、常用释义、应用场景等，以向用户提供尽可能详细的阅读辅助信息，提升阅读的有效性。
步骤108，所述终端通过播放设备播放所述文字信息。
其中，所述播放设备包括蓝牙耳机、有线耳机或终端自带的播放器。也就是说，播放设备可以为终端本身自带的播放器，也可以为外设播放器，外设播放器与终端的连接方式可以为有线，为了使用方便起见，也可使用与终端无线连接的外接播放器，外接播放器包括但不限于蓝牙耳机和有线耳机，还可以是任何其他类型的播放器。通过播放器播放识别出的语音信息，可以向用户提供实时的阅读反馈，避免用户的阅读被不认识或不理解的文字打断，提升了用户阅读过程的流畅性。
综上，本发明的技术方案，提供了一种由智能拍摄笔、终端和播放设备组成的系统，当用户遇到不认识的文字时，可直接使用智能拍摄笔点击该文字或放置在该文字处，实现智能拍摄笔拍摄文字图片，接着，智能拍摄笔将文字图片发送至终端，终端即可根据预设的文字识别算法，在所述文字图片中识别文字信息，最终，终端通过播放设备播放该文字信息，此过程为实时进行，实现了用户遇到不认识或不理解的文字时能够实时得到所需的解释，无需多余的操作，提升了阅读效率和体验。
实施例2
图2示出了本发明另一个实施例的辅助学习方法的流程图。
如图2所示，本发明另一个实施例的辅助学习方法，包括：
步骤202，通过智能拍摄笔或终端调整所述智能拍摄笔的拍摄面积。
步骤204，通过智能拍摄笔获取文字图片。
步骤206，所述智能拍摄笔将所述文字图片发送至终端。
步骤208，所述终端根据文字识别算法，在所述文字图片中识别文字信息。
步骤210，所述终端通过播放设备播放所述文字信息。
对于不同字号的阅读内容，所需的智能拍摄笔的拍摄面积不同，或对于用户不同的阅读需求，如用户需要查询一个单词、一句话或一段话的含义时，所需的智能拍摄笔的拍摄面积不同。
为此，智能拍摄笔上可设有屏幕，屏幕上具有调节拍摄面积的选项，或者，智能拍摄笔上可设有旋钮或“+”和“—”的按钮，通过在智能拍摄笔上的操作可以调整期拍摄面积的大小。
或者，也可在终端的应用程序中设置有调整功能，用户可在终端侧直接进行拍摄面积增减的操作，以调整智能拍摄笔的拍摄面积。
由此，使得识别内容更具针对性，进一步适应了用户的实际阅读需求。
实施例3
图3示出了本发明再一个实施例的辅助学习方法的流程图。
如图3所示，本发明再一个实施例的辅助学习方法，包括：
步骤302，通过智能拍摄笔获取文字图片。
步骤304，所述智能拍摄笔将所述文字图片发送至终端。
步骤306，所述终端根据文字识别算法，在所述文字图片中识别文字信息。
步骤308，所述终端通过播放设备播放所述文字信息。
步骤310，所述终端将每一次识别得到的文字信息保存至历史记录。
即终端可以把识别过的文字信息整理和记录下来，形成历史记录，以供用户查阅，可供用户直接反复练习不认识或不理解的文字，此复习模式能够对用户的阅读和学习行为提供有效反馈，提升了阅读的有效性。
步骤312，所述终端根据用户操作信息，显示所述历史记录。即用户可在终端的应用程序中对该历史记录进行阅读、播放和编辑，以适应用户的实际阅读和学习需求。
另外，用户还可在终端的该应用程序上进行多种其他操作，如调节播放设备的音量、对历史记录的显示格式进行编辑和修改等。
实施例4
图4示出了本发明的一个实施例的辅助学习系统的框图。
如图4所示，本发明的一个实施例的辅助学习系统400包括：智能拍摄笔402，通过无线连接方式连接至终端404，用于获取文字图片，并将所述文字图片发送至所述终端404；终端404，用于根据文字识别算法，在所述文字图片中识别文字信息，并向播放设备406发送播放命令；所述播放设备406，用于根据所述播放命令播放所述文字信息。
该辅助学习系统400使用实施例1至3中任一项所述的方法流程，因此，具有上述全部技术效果，在此不再赘述。辅助学习系统400还具有以下技术特征：
在上述技术方案中，可选地，所述智能拍摄笔402或所述终端404还用于：调整所述智能拍摄笔402的拍摄面积。
在上述技术方案中，可选地，所述终端404用于：通过二值化处理将所述文字图片中的文字与背景分离，并抽取分离得到的文字的结构特征，以及将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征，并在文字信息数据库中获取与所述目标结构特征对应的文字信息。
在上述技术方案中，可选地，所述播放设备406包括蓝牙耳机、有线耳机或终端404自带的播放器。
在上述技术方案中，可选地，所述终端404还用于：将每一次识别得到的文字信息保存至历史记录，以及根据用户操作信息，显示所述历史记录。
虽然，上文中已经用一般性说明及具体实施例对本发明作了详尽的描述，但在本发明基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本发明精神的基础上所做的这些修改或改进，均属于本发明要求保护的范围。

Claims (10)

1.一种辅助学习方法，其特征在于，包括：
通过智能拍摄笔获取文字图片；
所述智能拍摄笔将所述文字图片发送至终端；
所述终端根据文字识别算法，在所述文字图片中识别文字信息；
所述终端通过播放设备播放所述文字信息。
2.根据权利要求1所述的方法，其特征在于，在通过智能拍摄笔获取文字图片的步骤之前，还包括：
通过所述智能拍摄笔或所述终端调整所述智能拍摄笔的拍摄面积。
3.根据权利要求1所述的方法，其特征在于，所述终端根据文字识别算法，在所述文字图片中识别文字信息的步骤，具体包括：
所述终端通过二值化处理将所述文字图片中的文字与背景分离；
所述终端抽取分离得到的文字的结构特征；
所述终端将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征；
所述终端在文字信息数据库中获取与所述目标结构特征对应的文字信息。
4.根据权利要求1所述的方法，其特征在于，所述播放设备包括蓝牙耳机、有线耳机或终端自带的播放器。
5.根据权利要求1至4中任一项所述的方法，其特征在于，还包括：
所述终端将每一次识别得到的文字信息保存至历史记录；以及
所述终端根据用户操作信息，显示所述历史记录。
6.一种辅助学习系统，其特征在于，包括：
智能拍摄笔，通过无线连接方式连接至终端，用于获取文字图片，并将所述文字图片发送至所述终端；
终端，用于根据文字识别算法，在所述文字图片中识别文字信息，并向播放设备发送播放命令；
所述播放设备，用于根据所述播放命令播放所述文字信息。
7.根据权利要求6所述的系统，其特征在于，所述智能拍摄笔或所述终端还用于：
调整所述智能拍摄笔的拍摄面积。
8.根据权利要求6所述的系统，其特征在于，所述终端用于：
通过二值化处理将所述文字图片中的文字与背景分离，并抽取分离得到的文字的结构特征，以及将所述分离得到的文字的结构特征在文字特征数据库中进行比对，得到与所述分离得到的文字的结构特征相匹配的目标结构特征，并在文字信息数据库中获取与所述目标结构特征对应的文字信息。
9.根据权利要求6所述的系统，其特征在于，所述播放设备包括蓝牙耳机、有线耳机或终端自带的播放器。
10.根据权利要求6至9中任一项所述的系统，其特征在于，所述终端还用于：
将每一次识别得到的文字信息保存至历史记录，以及根据用户操作信息，显示所述历史记录。
CN201810232002.1A 2018-03-20 2018-03-20 一种辅助学习方法及系统 Pending CN108427948A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810232002.1A CN108427948A (zh) 2018-03-20 2018-03-20 一种辅助学习方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810232002.1A CN108427948A (zh) 2018-03-20 2018-03-20 一种辅助学习方法及系统

Publications (1)

Publication Number Publication Date
CN108427948A true CN108427948A (zh) 2018-08-21

Family

ID=63158771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810232002.1A Pending CN108427948A (zh) 2018-03-20 2018-03-20 一种辅助学习方法及系统

Country Status (1)

Country Link
CN (1) CN108427948A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110211311A (zh) * 2019-07-09 2019-09-06 中国工商银行股份有限公司 用于自助办理业务的语音指导方法、装置及系统
CN111524507A (zh) * 2019-01-16 2020-08-11 北京字节跳动网络技术有限公司 语音信息的反馈方法、装置、设备、服务器及存储介质
CN113223243A (zh) * 2021-04-30 2021-08-06 中国银行股份有限公司 业务办理的方法及智能柜台

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103268714A (zh) * 2013-04-22 2013-08-28 安徽工程大学 点读视频笔、其点读图书的使用方法及专用图书
CN204833766U (zh) * 2015-08-03 2015-12-02 熊子箭 一种点读笔
CN106097797A (zh) * 2016-08-15 2016-11-09 张乐 一种智能图像识别点读笔
US20170053180A1 (en) * 2015-07-31 2017-02-23 NOWaccount Network Corporation Systems and Methods for Providing a Continuous Check Scanner Utilizing a Tablet Computer and Camera
CN206524019U (zh) * 2016-07-13 2017-09-26 联想(北京)有限公司 阅读设备
CN107545260A (zh) * 2017-09-25 2018-01-05 上海电机学院 一种基于双目视觉的点读笔文字识别系统
CN107798322A (zh) * 2017-11-17 2018-03-13 深圳市极联信息科技有限公司 一种智能笔

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103268714A (zh) * 2013-04-22 2013-08-28 安徽工程大学 点读视频笔、其点读图书的使用方法及专用图书
US20170053180A1 (en) * 2015-07-31 2017-02-23 NOWaccount Network Corporation Systems and Methods for Providing a Continuous Check Scanner Utilizing a Tablet Computer and Camera
CN204833766U (zh) * 2015-08-03 2015-12-02 熊子箭 一种点读笔
CN206524019U (zh) * 2016-07-13 2017-09-26 联想(北京)有限公司 阅读设备
CN106097797A (zh) * 2016-08-15 2016-11-09 张乐 一种智能图像识别点读笔
CN107545260A (zh) * 2017-09-25 2018-01-05 上海电机学院 一种基于双目视觉的点读笔文字识别系统
CN107798322A (zh) * 2017-11-17 2018-03-13 深圳市极联信息科技有限公司 一种智能笔

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111524507A (zh) * 2019-01-16 2020-08-11 北京字节跳动网络技术有限公司 语音信息的反馈方法、装置、设备、服务器及存储介质
CN110211311A (zh) * 2019-07-09 2019-09-06 中国工商银行股份有限公司 用于自助办理业务的语音指导方法、装置及系统
CN113223243A (zh) * 2021-04-30 2021-08-06 中国银行股份有限公司 业务办理的方法及智能柜台

Similar Documents

Publication Publication Date Title
CN103763453B (zh) 一种图文采集识别装置
CN104883642B (zh) 一种音效调节方法
CN104157171B (zh) 一种点读系统及其方法
CN108427948A (zh) 一种辅助学习方法及系统
EP3258423A1 (en) Handwriting recognition method and apparatus
CN104717360B (zh) 一种通话录音方法及终端
CN106951881B (zh) 一种三维场景呈现方法、装置及系统
US7676092B2 (en) Data input apparatus and method
WO2020192394A1 (zh) 笔记显示方法、装置、终端和存储介质
CN107886969B (zh) 一种音频播放方法及音频播放装置
CN108174236A (zh) 一种媒体文件处理方法、服务器及移动终端
EP4120268A1 (en) Audio processing method and electronic device
CN110855893A (zh) 一种视频拍摄的方法及电子设备
CN109819167B (zh) 一种图像处理方法、装置和移动终端
CN109391842B (zh) 一种配音方法、移动终端
CN109657099B (zh) 一种学习互动方法及学习客户端
CN107864353A (zh) 一种视频录制方法及移动终端
CN114556469A (zh) 数据处理方法、装置、电子设备和存储介质
CN110096251A (zh) 交互方法及装置
CN105139848A (zh) 数据转换方法和装置
JP2006331271A (ja) 代表画像抽出装置及び代表画像抽出プログラム
JP2010176544A (ja) 会議支援装置
CN112329563A (zh) 一种基于树莓派的智能阅读辅助方法及系统
CN112599130A (zh) 一种基于智慧屏的智能会议系统
KR102460595B1 (ko) 게임 방송에서의 실시간 채팅 서비스 제공 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180821

RJ01 Rejection of invention patent application after publication