CN105005431A - 听写设备及其数据处理方法和相关装置 - Google Patents

听写设备及其数据处理方法和相关装置 Download PDF

Info

Publication number
CN105005431A
CN105005431A CN201510435427.9A CN201510435427A CN105005431A CN 105005431 A CN105005431 A CN 105005431A CN 201510435427 A CN201510435427 A CN 201510435427A CN 105005431 A CN105005431 A CN 105005431A
Authority
CN
China
Prior art keywords
content
feedback
module
dictation
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510435427.9A
Other languages
English (en)
Inventor
李则润
王玉娇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201510435427.9A priority Critical patent/CN105005431A/zh
Publication of CN105005431A publication Critical patent/CN105005431A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

一种听写设备及其数据处理方法和相关装置中,朗读模块根据朗读方式标识信息对内容单元进行朗读时,反馈模块的信号生成子模块根据反馈模块的至少一个反馈开关的状态生成反馈信息,控制模块根据反馈信息控制朗读模块对内容单元进行朗读和/或修改保存在存储模块内的听写内容。本申请提供的听写设备及其数据处理方法和相关装置,在为用户提供更有效的听写内容获取、朗读、反馈方案提供了支持,实现了用户对听写内容的实时反馈,有助力于提高用户的听写体验和听写效率,并且其实现结构简单,实现成本较低。

Description

听写设备及其数据处理方法和相关装置
技术领域
本申请涉及一种学习机,具体涉及一种听写设备及其数据处理方法和相关装置。
背景技术
听写是学习基础知识的重要手段,例如:在学习语文或者外语时,人们往往通过听写的方式来检验字、词是否真的记住并且会写了。在实践中,人们采用各种各样的听写辅助手段,例如课堂上通过老师读、学生写的方式;在家里通过复读机播放音频,通过不断的暂停、播放动作来控制复读机的播放。
通过复读机或录音机进行听写时,复读机或者录音机能够对预先录制的内容进行播放。当其内容中有需要停顿的地方时,则可以在预先录制时,间隔一定时间,或者是由用户主动控制暂停/播放按钮。这种方式的缺点在于:在预先录制的内容中采用间隔时间的方式,由于并不知道用户对于内容单元(听写内容分为多个片段,每个片段连续地进行朗读,片段之间有停顿的时间,这些片段称为内容单元。例如:一段听写内容包含多个词,一个词包含了多个字,每个词的多个字是连续读出来的,而词与词之间有一段停顿时间,词就是内容单元。其中,听写内容是指要朗读出来的内容,通常听写内容是一段文字,可以是中文,也可以是其他语言的文字。)的掌握情况,往往采用固定的间隔时间。无论用户对听写内容的掌握如何,所播放的音频中间的停顿都是固定的时长。如果由用户主动按暂停/播放按钮,那么会干扰正常的听写过程。且对于用户已经掌握的内容,仍然会继续被播放。
另外,还有一种支持听写的技术,这种技术除了播放音频外,还提供了一种可供输入听写内容的输入装置,用户在该装置中输入的内容被用于和当前播放的听写内容进行比较,通过比较的结果来判断用户的掌握情况。这种方式的缺点在于,需要增加一个专门的手写输入装置,增加了成本;所播放的音频节奏和听写内容是固定的,用户无法根据对某个内容单元的掌握情况来干预听写内容的播放。而且用户在手写输入装置上写字的体验,与平时在纸上写字的体验有明显差异,使得体验变差。
发明内容
本申请提供了一种听写设备及其数据处理方法和相关装置,能够实现用户对听写内容的反馈,从而根据反馈的信息修改听写内容,以提高用户的听写体验和听写效率;并且,在实现用户的听写反馈时,采用的结构更加简单,要求的成本更低。
根据本申请的第一方面,本申请提供了一种听写设备,包括:
存储模块,用于保存规范化格式的听写内容,所述听写内容包括多个内容单元以及朗读方式标识信息;
朗读模块,用于根据所述朗读方式标识信息对所述内容单元进行朗读;
反馈模块,用于获取用户输入的反馈信息;其中,所述反馈模块包括至少一个反馈开关、信号生成子模块和通信子模块;所述信号生成子模块与所述反馈开关连接,用于根据反馈开关的状态生成反馈信息;
控制模块,其分别与存储模块、朗读模块、反馈模块连接,用于根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
根据本申请的第二方面,本申请提供了一种听写设备的数据处理方法,包括:
朗读模块根据规范化格式的听写内容的朗读方式标识信息,对所述听写内容的内容单元进行朗读;所述听写内容保存在存储模块中;
反馈模块获取用户输入的反馈信息,具体为:反馈模块的信号生成子模块根据反馈模块的至少一个反馈开关的状态生成反馈信息;
控制模块根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
根据本申请的第三方面,本申请提供了一种反馈装置,包括:
至少一个反馈开关;
信号生成子模块,其与所述反馈开关连接,用于根据反馈开关的状态生成反馈信息;
通信子模块,其与听写装置通信连接,用于将所述反馈信息发送给所述听写装置。
根据本申请的第四方面,本申请提供了一种听写装置,包括:
存储模块,用于保存规范化格式的听写内容,所述听写内容包括多个内容单元以及朗读方式标识信息;
朗读模块,用于根据所述朗读方式标识信息对所述内容单元进行朗读;
通信模块,其与上述反馈装置通信连接,用于获取所述反馈装置发送的反馈信息;
控制模块,其分别与存储模块、朗读模块、通信模块连接,用于根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
本申请提供的听写设备及其数据处理方法和相关装置中,朗读模块根据朗读方式标识信息对内容单元进行朗读时,反馈模块的信号生成子模块根据反馈模块的至少一个反馈开关的状态生成反馈信息,控制模块根据反馈信息控制朗读模块对内容单元进行朗读和/或修改保存在存储模块内的听写内容。本申请提供的听写设备及其数据处理方法和相关装置,在为用户提供更有效的听写内容获取、朗读、反馈方案提供了支持,实现了用户对听写内容的实时反馈,有助力于提高用户的听写体验和听写效率,并且其实现结构简单,实现成本较低。
附图说明
图1为本申请一种实施例中听写设备的结构示意图;
图2为本申请一种实施例中听写内容的组织形式示意图;
图3为本申请一种实施例中内容库的结构示意图;
图4为本申请另一种实施例中听写内容的组织形式示意图;
图5为本申请一种实施例中反馈模块的结构示意图;
图6为本申请一种实施例中反馈信息的示例图;
图7为本申请一种实施例中内容获取模块的结构示意图;
图8为本申请一种实施例中听写设备与反馈装置和服务器的连接示意图;
图9为本申请一种实施例中听写设备的结构实现示意图;
图10为本申请一种实施例中听写设备的数据处理方法的流程示意图;
图11为本申请一种实施例听写设备执行听写应用程序的界面示意图;
图12为本申请一种实施例中反馈装置的结构示意图;
图13为本申请一种实施例中听写装置的结构示意图。
具体实施方式
下面通过具体实施方式结合附图对本申请作进一步详细说明。
实施例一
请参考图1,本实施例提供了一种听写设备,包括存储模块101、朗读模块102、反馈模块103和控制模块104。
存储模块101用于保存规范化格式的听写内容,听写内容包括多个内容单元以及朗读方式标识信息。
朗读模块102用于根据朗读方式标识信息对内容单元进行朗读。
反馈模块103用于获取用户输入的反馈信息。
控制模块104其分别与存储模块、朗读模块、反馈模块连接,用于根据反馈信息控制朗读模块对内容单元进行朗读和/或修改听写内容。
请参考图2,本实施例中,朗读方式标识信息包括标记在每两个内容单元之间的停顿标识。停顿标识表示了朗读模块102在朗读完前面一个内容单元后,需要停顿的时长,以朗读下一个内容单元。
下面为规范化格式的听写内容的一个具体示例:
以字符“|”作为停顿标识,朗读模块102在朗读内容单元时,每个“|”代表停顿一个单位时间。
“大小|多少|奋不顾身||心情舒畅”
上述听写内容表示朗读模块102在朗读完“大小”之后停顿一个单位时间再朗读“多少”,在朗读完“多少”之后停顿一个单位时间再朗读“奋不顾身”,在朗读完“奋不顾身”之后停顿两个单位时间再朗读“心情舒畅”。此处使用特殊的字符序列作为停顿标识,表达了需要停顿的时间长度。
在确定内容单元之间需要停顿多长时间时,可以采用下面方式:内容单元的字数较少,则可以停顿较短的时间;内容单元的字数较多,则可以停顿较长的时间。当然,对于中文字体,做进一步的精细处理,以内容单元的笔画数量多少,作为衡量内容单元复杂程度的依据,从而确定停顿时间。
当然,在其他示例中,也可以采用其他字符作为停顿标识,例如:\1表示需要停顿一个单位时间,\2表示需要停顿两个单位时间。
“大小\1多少\1奋不顾身\2心情舒畅”
具体的,朗读模块102可以使用文本转语音技术(Text To Sound,TTS),将以文本形式保存在存储模块101内的内容单元转换为音频,以进行播放。对于内容单元之间的停顿标识,则停顿相应的时间。以上述示例进行说明,假设一个单位时间为2秒,则用语音读出“大小”,停顿2秒;然后用语音读出“多少”,停顿2秒;然后用语音读出“奋不顾身”,停顿4秒;然后用语音读出“心情舒畅”。
在其他实施例中,朗读模块102可以采用现有技术中任意一种实现方式,将文本形式的内容单元转换为音频,以进行播放。
朗读模块102在朗读过程中,反馈模块103实时获取用户输入的反馈信息,用于对听写过程进行调整。
控制模块104根据反馈信息控制朗读模块对内容单元进行朗读和/或修改听写内容,具体的,可以对听写过程进行下面调整:
(1)反馈信息包括对朗读速度的反馈,例如反馈信息包括降低朗读速度和提高朗读速度的指令。用户在听写过程中,如果感觉朗读速度过快,则通过反馈模块103输入表示需要降低朗读速度的反馈信息。反馈模块103将该反馈信息发送给控制模块104。由于反馈信息包括降低朗读速度的指令,控制模块104根据该指令控制朗读模块102降低朗读速度。
(2)反馈信息包括延长内容单元停顿时间和缩短内容单元停顿时间的指令。用户在听写过程中,如果感觉内容单元之间的停顿时间过短,则通过反馈模块103输入表示需要延长内容单元停顿时间的反馈信息。反馈模块103将该反馈信息发送给控制模块104。由于反馈信息包括延长内容单元停顿时间的指令,控制模块104根据该指令修改朗读方式标识信息中的停顿标识,以延长内容单元之间的停顿时间。
(3)反馈信息包括删除内容单元的指令。用户在听写过程中,如果确认已经掌握所听写的内容单元(例如词汇),则通过反馈模块103输入表示删除内容单元的反馈信息。反馈模块103将反馈信息发送给控制模块104。由于反馈信息包括删除内容单元的指令,控制模块104根据该指令将当前朗读的内容单元删除。
当然,在另一种实现方式中,反馈信息包括标记内容单元的指令,该标记表示用户已经掌握该内容单元,不再对该内容单元进行朗诵。用户在听写过程中,如果确认已经掌握所听写的内容单元(例如词汇),则通过反馈模块103输入表示需要标记内容单元的反馈信息。反馈模块103将反馈信息发送给控制模块104。由于反馈信息包括标记内容单元的指令,控制模块104根据该指令修改朗读方式标识信息(即朗读方式标识信息还包括表示是否朗读内容单元的标记),在相应内容单元上进行标记。今后,朗读模块102在识别到该标记时,不再对具有该标记的内容单元进行朗读。
具体的,控制模块104用于控制听写过程的启动、停止、调用朗读模块102播放内容、接受反馈模块103的反馈信息、根据收到的反馈信息调整朗读的过程等。对于同一段听写内容,控制模块104可以启动多次听写过程。根据用户的反馈,后执行的听写过程比先执行的做相应的优化,例如:用户已经掌握的内容单元就不再朗读,没有掌握的内容单元朗读后停留更长的时间等。通常控制模块104可以设定一套具体的听写的过程,例如,对听写内容进行多轮听写,经过多轮听写,如果用户对于所有的内容单元都做出了已经掌握的反馈,则整个听写过程结束。当然,对于同一段听写内容的多轮听写,不一定连续进行,例如可以隔几个小时或者几天再进行下一轮听写。
存储模块101保存听写内容时可以采用内容库的形式实现。内容库中保存有多个听写内容,每个听写内容中有多个内容单元以及朗读方式标识信息,这些内容单元按照听写的轮次进行组织,听写的次数越多,则用户未掌握的内容单元越少。对于已经掌握的内容单元,可以采取做标记或者删除的办法。
当采取删除的方式时,越往后的轮次剩下的内容单元越来越少。具体删除哪个内容单元,是由用户通过反馈模块103进行反馈来决定的。请参考图3,为内容库的结构示意图,该内容库包含了两个听写内容,内容一包括三轮听写内容,内容二包括两轮听写内容。
具体的,对听写内容的听写轮次、听写顺序等设计可以通过运行在控制模块104内的听写应用程序决定。
请参考图4,在一具体应用例中,听写内容还包括与内容单元对应的附加内容。内容单元作为要听写的内容,附加内容则用于提示、解释、扩展内容单元。在听写过程中,在合适的时机播放附加内容,以增强知识的掌握效果。
当用户在某个内容单元播放后,没有写出该内容单元,即反馈模块103在停顿时间内没有收到用户发出的“已经掌握该内容单元”的反馈信息,则播放该内容单元的附加内容。例如,对于如下听写内容:“大小\1多少\1奋不顾身\2心情舒畅”,可以给里面笔画复杂的字设计附加内容,当朗读完毕“奋不顾身”,如果没有及时收到用户反馈的“已经掌握该内容单元”的反馈信息,则播放该内容单元的附加内容“奋斗的奋,照顾的顾”。
请参考图5,本实施例中,反馈模块103包括至少一个反馈开关1031、信号生成子模块1032和通信子模块1033。
信号生成子模块1032与反馈开关1031连接,用于根据反馈开关的状态生成反馈信息。通信子模块1033与控制模块104通信连接,这种通信连接可以是有线的,也可以是无线的,用于将反馈信息发送给控制模块104。优选的,反馈模块103为独立在存储模块101、朗读模块102、控制模块104之外,反馈模块103的通信子模块1033通过有线或无线的方式与控制模块104通信连接。
具体的,反馈开关1031可以为按键开关,例如反馈开关为一个机械按钮,用户通过该反馈开关,输入反馈信息。例如,用户每触发一次反馈开关,信号生成子模块1032即根据反馈开关的状态获得一个触发信号。用户触发一次或连续触发多次反馈开关,信号生成子模块1032分别生成不同的反馈信息。
反馈开关1031也可以是触摸式开关,例如通过电容或电阻触摸屏实现对用户触摸动作的感应,以获取用户的反馈。
反馈开关1031也可以是多个,信号生成子模块1032根据用户触发哪个反馈开关或者反馈开关的组合,以形成不同的反馈信息。
具体的,通信子模块1033与控制模块104的连接可以支持多路数字信号的传输,每一路代表不同的控制指令(反馈信息),输入高电平代表发出指令,输入低电平则不发出指令。
当信号生成子模块1032采用微处理器加上软件程序实现反馈信息的生成时,可以通过通信子模块1033输出不同的字符、数字来表示不同的反馈信息,通信子模块1033通过串行接口或者其他数据通信接口发送给控制模块104。
本实施例中,反馈信息可以采用不同的形式,在具体设计时,可以根据需求选择。
请参考图6,为反馈信息的几种标识方式分别对应的意义,及控制模块104在获取到该反馈信息后所要做出的处理。
优选的,本实施例中,听写设备还包括内容获取模块105。当用户需要听写的内容在存储模块101内不存在时,用户可以通过内容获取模块105获取,即内容获取模块105用于获取非本地存储的听写内容。
请参考图7,本实施例中,内容获取模块105包括原始信息采集子模块1051、解析子模块1052和格式规范化子模块1053。
原始信息采集子模块1051用于采集原始信息。具体的,原始信息采集子模块1051可以是各类传感器构成的器件,例如麦克风、摄像头等。
解析子模块1052用于根据原始信息获取文本内容。解析子模块1052根据原始信息获取文本内容,具体可以是通过对采集的原始信息进行解析,直接获得文本内容,例如对采集的图像、视频、音频等原始信息进行解析,得到原始信息内包括的文本内容;也可以是通过对采集原始信息进行解析,得到用于从服务器下载相关内容的地址信息,例如对采集的二维码(原始信息)进行解析,得到二维码对应的网址,然后再从网址对应的网络服务器上下载得到文本内容。当然,如果从网络服务器上下载,其下载的可以是未进行格式规范化处理的文本内容,也可以直接下载得到已经进行格式规范化处理的听写内容。
格式规范化子模块1053用于对文本内容进行格式规范化,以得到规范化格式的听写内容。
内容获取模块105负责把来源各异、格式不同的听写内容转换为统一的格式的听写内容。下面为几种典型的内容来源和转换方法:
(1)对于印刷在书本上的文字内容,采用图文识别(Optical CharacterRecognition,OCR)技术转换为文本内容,原始信息采集子模块1051为摄像头,解析子模块1052通过图文识别软件从原始信息中解析出文本内容,格式规范化子模块1053再对文本内容进行格式规范化,即识别出内容单元,根据内容单元的复杂程度,在内容单元之间加上停顿标识。
(2)对于音频格式的内容,需要采用语音识别技术转换为文本,原始信息采集子模块1051为麦克风,解析子模块1052通过语音识别软件从原始信息中解析出文本内容。
(3)对于视频格式的内容,需要从视频中提取音频,然后再用语音识别技术转换为文本内容。
(4)对于文本形式的听写内容已经存在的情况,不需要转换,但是需要通过特定的检索方式来检索获得。例如:在纸上印刷了二维码,这个二维码的内容是一段网址,该网址对应了网络服务器上所保存的一段文本,通过扫描二维码,就可以获得该文本内容。
请参考图8,其示出了当听写设备需要从网络服务器获取文本内容时,听写设备A01与服务器A02的连接关系示意图。
把听写内容保存在服务器上,听写设备不需要从本地获得听写内容,而是通过关键词检索(例如:“小学三年级语文第八课读读记记”),或者扫描印在书上的听写内容的标识(例如:条形码、二维码、RFID标签等),从服务器获得待听写的内容,形成当前内容。并且一个服务器可以连接多个听写设备。
把服务器部署在互联网上,听写设备能够访问互联网。服务器与听写设备之间通过互联网协议连接,例如使用HTTP(Hyper Text Transfer Protocol)协议。服务器上的内容库来源多样,可以是具有内容获取能力的部分听写设备从本地采集听写内容后,上传给服务器的,然后其他听写设备就可以通过检索的方式从服务器获取相应的听写内容。
请参考图9,本实施例提供的听写设备具体可以通过下面形式实现。听写设备包括处理器201、扬声器202、摄像头203、反馈模块204、存储模块205、输入/输出模块206和输入/输出接口207。
存储模块205包括持久性存储和非持久性存储。持久性存储在断电后仍然保持所记录的信息,例如闪存(Flash Memory)、SD(Secure Digital Memory Card)卡、硬盘等;非持久性存储在断电后则失去所记录的信息,例如内存(RAM:Random Access Memory)。其中持久性存储用于保存操作系统和听写应用程序、内容库等需要在断电后仍然需要保持的内容,非持久性存储用于在运行时保存可执行代码和数据。
内容库保存在存储模块205内,其保存了待听写的内容,基于存储模块205,使用文件系统或者数据库来保存待听写的内容。
听写应用程序B01用于实现图1中控制模块104、内容获取模块105、朗读模块102的软件功能。
操作系统B02封装了处理器201和输入/输出设备的访问接口,为听写应用程序提供运行环境。
处理器201用于执行操作系统和听写应用程序的可执行代码,完成业务逻辑,例如中央处理器(CPU,Central Processing Unit)、微处理器(MPU,MicroProcessing Unit)等都可以用来做处理器使用。此处,处理器201基于操作系统B02和听写应用程序B01,相当于完成图1中控制模块104的功能,以及朗读模块102和内容获取模块105的部分功能。
输入/输出接口207为介于输入/输出设备206和处理器207之间的物理接口,实现了输入/输出设备206与处理器207之间的数据传输和数据格式转换。它可以是音频设备接口、视频设备接口、串行设备接口、存储设备接口等。
摄像头203属于图1中的内容获取模块105的一部分,接受听写应用程序的控制,用于拍摄印刷的文字或者图形化的编码。
输入/输出设备206用于接受用户的控制指令,例如:输入设备可以是键盘、触摸屏、麦克风等;输出设备用于表现听写应用程序的执行效果,例如:输出设备可以是显示器等。
扬声器202属于图1中朗读模块102的一部分,用于把电信号转换为声音信号,扬声器202接受听写应用程序的控制,播出音频内容。
反馈模块204用于获取用户在听写过程中输入的反馈信息,并将反馈信息发送给处理器反馈开关模块204与输入/输出接口107之间既可以是有线连接,也可以是无线连接。例如,无线连接的情况下,可以把反馈模块204做在一个小盒子中,小盒子上设置反馈开关,反馈模块204通过近距离无线通信的方式与处理器进行通信,发送反馈信息。
实施例二
请参考图10,基于实施例一提供的听写设备,本实施例提供了一种听写设备的数据处理方法,包括下面步骤:
步骤1.1:控制模块控制内容获取模块获取听写内容。用户通过控制模块来控制听写的过程,首先确定听写内容,根据内容来源的不同,控制模块调用不同的内容获取模块来获取。例如,对于印刷在纸上的文本,则调用使用摄像头拍照的内容获取模块;如果是存储模块内的内容库中已有的听写内容,则通过检索的方式来获取特定的听写内容。
步骤1.2:内容获取模块获取听写内容,其获取的方式可以采用实施例一提供的任意一种。
步骤1.2具体可以包括:内容获取模块的原始信息采集子模块采集原始信息;内容获取模块的解析子模块根据原始信息获取文本内容;内容获取模块的格式规范化子模块对文本内容进行格式规范化,以得到规范化格式的听写内容。
原始信息经过内容获取模块的处理,获得格式规范化的听写内容,并将其保存在存储模块的内容库中。在其他实施例中,对于内容库中已经有的听写内容,则直接从内容库中选择即可,不需要从外部获取听写内容。
步骤1.3:控制模块向朗读模块发出朗读的指令,指令中至少包括听写内容的标识,例如:听写内容的访问路径和文件名,或者关系数据库中可以检索到听写内容的编号。
步骤1.4:朗读模块根据规范化格式的听写内容的朗读方式标识信息,对听写内容的内容单元进行朗读。朗读模块根据所收到的听写内容的标识,获得规范化文本的内容,然后输入给TTS程序生成音频,把音频在扬声器中播放出来。
步骤1.5:在朗读的过程中,反馈模块实时获取用户的反馈信息,用于对听写过程进行调整。具体的,反馈模块的信号生成子模块根据反馈模块的至少一个反馈开关的状态生成反馈信息。
步骤1.6:反馈模块把反馈信息发送给控制模块。
步骤1.7:控制模块根据反馈信息控制朗读模块对内容单元进行朗读和/或修改听写内容。控制模块根据反馈信息对内容库中所记录的听写内容进行调整,可能的操作包括以下的一个或者多个:增加或者减少内容单元之间的停顿间隔时间、给内容单元做标记(下一轮无需朗读、下一轮需要朗读)、删除内容单元、提高或者降低朗读速度。
上述步骤均可以通过用户执行听写应用程序来执行,请参考图11,为本实施例中,执行听写应用程序时,输入/输出设备上显示的界面示意图。
用户点击“获取新内容”按钮,则执行获取听写内容的步骤,例如调用摄像头拍摄书上印刷的文字。可选的,可以在应用程序界面上提供包围内容的选择框,只有在框内的内容才是被采集的内容,然后对获取的内容进行OCR处理,转换为文本。根据文本之间的空格或者使用分词技术,把文本拆分为一个一个的内容单元,然后在内容单元之间标记停顿标识,形成格式规范化的听写内容,并将其保存在存储模块的内容库中。
用户点击“播放”按钮,则使用TTS技术播放获取的听写内容。
在播放过程中,如果用户认为已经掌握刚听写的内容单元,则使用反馈模块进行反馈。本实施例中,反馈模块与控制模块、存储模块、朗读模块等都在一个盒子中实现,反馈模块与控制模块之间是有线连接的方式,其连接方式如图11所示,C01即为反馈模块的反馈开关。反馈模块设置一个反馈开关,用于按下则表示已经掌握了刚播放的内容单元;不按,则表示未掌握。当用户按下反馈开关,则听写应用程序把本单元内容标记为已经掌握的(或者从内容库中删除已经掌握的内容单元),马上播放下一个内容单元,而不必等待停顿时间结束。如果用户没有按下开关,则听写应用程序把本内容单元标记为未掌握的状态,等待停顿时间后,则播放下一个内容单元。
听写内容从头到尾播放一遍后,则内容单元分为两类:已经掌握的、未掌握的。此时,对于未掌握的内容单元,可以重新编排,形成下一轮待听写的内容,保存在内容库中,这些内容单元之间也标记了停顿标识,停顿时间可以与前一轮的停顿时间不同,例如略微延长停顿时间。用户按“选择旧内容”按钮可以从内容库中选择已经存在的内容为当前内容,然后按“播放”按钮,以进行朗读。这样的过程可以执行多次,直至该听写内容的所有内容单元都被标记为已经掌握的状态。
需要说明的是,用户点击“选择旧内容”,则不使用摄像头拍摄印刷的文字,而是从内容库中选择已经存在的听写内容,然后点击“播放”按钮,以进行朗读。
实施例三
请参考图12,本实施例提供了一种反馈装置,包括至少一个反馈开关301、信号生成子模块302和通信子模块303。
信号生成子模块302与反馈开关301连接,用于根据反馈开关的状态生成反馈信息。通信子模块303与听写装置通信连接,用于将反馈信息发送给听写装置。
具体的,反馈开关301为按键开关,例如反馈开关301为一个机械按钮,用户通过该反馈开关,输入反馈信息。例如,用户每触发一次反馈开关,信号生成子模块302即根据反馈开关的状态获得一个触发信号。用户触发一次或连续触发多次反馈开关,信号生成子模块302分别生成不同的反馈信息。
反馈开关301也可以是多个,信号生成子模块302根据用户触发哪个反馈开关或者反馈开关的组合,以形成不同的反馈信息。
具体的,通信子模块303与听写装置的连接可以支持多路数字信号的传输,每一路代表不同的控制指令(反馈信息),输入高电平代表发出指令,输入低电平则不发出指令。
当信号生成子模块302采用微处理器加上软件程序实现反馈信息的生成时,可以通过通信子模块303输出不同的字符、数字来表示不同的反馈信息,通信子模块303通过串行接口或者其他数据通信接口发送给听写装置。
本实施例中,反馈信息可以采用不同的形式,在具体设计时,可以根据需求选择。
在其他实施例中,通信子模块303与听写装置可以采用无线通信方式,如图8所示,其示出了通信子模块303与听写装置采用无线通信方式时,反馈装置A03与听写设备A01(听写装置)的连接关系。
本实施例提供的反馈装置的工作原理可参照上述实施例一提供的听写设备的反馈模块,此处不再对其进行赘述。
本实施例提供的反馈装置,由于采用反馈开关的形式来获取用户输入的反馈信息,其实现较简单,因此,实现成本较低。
实施例四
请参考图13,本实施例提供了一种听写装置,包括存储模块401、朗读模块402、通信模块403和控制模块404。
存储模块401用于保存规范化格式的听写内容,听写内容包括多个内容单元以及朗读方式标识信息。
朗读模块402用于根据朗读方式标识信息对内容单元进行朗读。
通信模块403其与反馈装置通信连接,用于获取反馈装置发送的反馈信息。其中,反馈装置可以是实施例三提供的装置,通信模块403与反馈装置可以通过有线或无线的方式连接。
控制模块404其分别与存储模块401、朗读模块402、通信模块403连接,用于根据反馈信息控制朗读模块对内容单元进行朗读和/或修改听写内容。
优选的,听写装置还包括用于获取非本地存储的听写内容的内容获取模块405,内容获取模块405与控制模块404连接。
本实施例提供的听写装置,其工作原理可参照上述实施例提供的听写设备,此处不再对其赘述。
本申请实施例提供的听写设备及其数据处理方法和相关装置,在为用户提供更有效的听写内容获取、朗读、反馈方案提供了支持,实现了用户对听写内容的实时反馈,有助力于提高用户的听写体验和听写效率,并且其实现结构简单,实现成本较小。
本领域技术人员可以理解,上述实施方式中各种方法的全部或部分步骤可以通过程序来指令相关硬件完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器、随机存取存储器、磁盘或光盘等。
以上内容是结合具体的实施方式对本申请所作的进一步详细说明,不能认定本申请的具体实施只局限于这些说明。对于本申请所属技术领域的普通技术人员来说,在不脱离本申请发明构思的前提下,还可以做出若干简单推演或替换。

Claims (10)

1.一种听写设备,其特征在于,包括:
存储模块,用于保存规范化格式的听写内容,所述听写内容包括多个内容单元以及朗读方式标识信息;
朗读模块,用于根据所述朗读方式标识信息对所述内容单元进行朗读;
反馈模块,用于获取用户输入的反馈信息;其中,所述反馈模块包括至少一个反馈开关、信号生成子模块和通信子模块;所述信号生成子模块与所述反馈开关连接,用于根据反馈开关的状态生成反馈信息;
控制模块,其分别与存储模块、朗读模块、反馈模块的通信子模块连接,用于根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
2.如权利要求1所述的听写设备,其特征在于,还包括内容获取模块,用于获取非本地存储的听写内容。
3.如权利要求2所述的听写设备,其特征在于,所述内容获取模块包括:
原始信息采集子模块,用于采集原始信息;
解析子模块,用于根据所述原始信息获取文本内容;
格式规范化子模块,用于对所述文本内容进行格式规范化,以得到规范化格式的听写内容。
4.如权利要求1-3任一项所述的听写设备,其特征在于,所述反馈开关为按键开关或触摸式开关。
5.一种听写设备的数据处理方法,其特征在于,包括:
朗读模块根据规范化格式的听写内容的朗读方式标识信息,对所述听写内容的内容单元进行朗读;所述听写内容保存在存储模块中;
反馈模块获取用户输入的反馈信息,具体为:反馈模块的信号生成子模块根据反馈模块的至少一个反馈开关的状态生成反馈信息;
控制模块根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
6.如权利要求5所述的方法,其特征在于,还包括:内容获取模块获取非本地存储的听写内容。
7.如权利要求5或6所述的方法,其特征在于,内容获取模块获取非本地存储的听写内容,具体为:
内容获取模块的原始信息采集子模块采集原始信息;
内容获取模块的解析子模块根据所述原始信息获取文本内容;
内容获取模块的格式规范化子模块对所述文本内容进行格式规范化,以得到规范化格式的听写内容。
8.一种反馈装置,其特征在于,包括:
至少一个反馈开关;
信号生成子模块,其与所述反馈开关连接,用于根据反馈开关的状态生成反馈信息;
通信子模块,其与听写装置通信连接,用于将所述反馈信息发送给所述听写装置。
9.如权利要求8所述的反馈装置,其特征在于,所述反馈开关为按键开关或触摸式开关。
10.一种听写装置,其特征在于,包括:
存储模块,用于保存规范化格式的听写内容,所述听写内容包括多个内容单元以及朗读方式标识信息;
朗读模块,用于根据所述朗读方式标识信息对所述内容单元进行朗读;
通信模块,其与如权利要求8或9所述反馈装置通信连接,用于获取所述反馈装置发送的反馈信息;
控制模块,其分别与存储模块、朗读模块、通信模块连接,用于根据所述反馈信息控制朗读模块对所述内容单元进行朗读和/或修改所述听写内容。
CN201510435427.9A 2015-07-22 2015-07-22 听写设备及其数据处理方法和相关装置 Pending CN105005431A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510435427.9A CN105005431A (zh) 2015-07-22 2015-07-22 听写设备及其数据处理方法和相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510435427.9A CN105005431A (zh) 2015-07-22 2015-07-22 听写设备及其数据处理方法和相关装置

Publications (1)

Publication Number Publication Date
CN105005431A true CN105005431A (zh) 2015-10-28

Family

ID=54378117

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510435427.9A Pending CN105005431A (zh) 2015-07-22 2015-07-22 听写设备及其数据处理方法和相关装置

Country Status (1)

Country Link
CN (1) CN105005431A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105702246A (zh) * 2016-03-17 2016-06-22 广东小天才科技有限公司 一种辅助用户进行听写的方法及装置
CN109147472A (zh) * 2018-09-14 2019-01-04 郭凯明 基于单词音形意的速记平台构建方法及相关装置
CN109558511A (zh) * 2018-12-12 2019-04-02 广东小天才科技有限公司 一种听写报读方法及装置
CN111026872A (zh) * 2019-04-29 2020-04-17 广东小天才科技有限公司 一种关联听写方法及电子设备
CN111028591A (zh) * 2019-04-25 2020-04-17 广东小天才科技有限公司 一种听写控制方法及学习设备
CN111079423A (zh) * 2019-08-02 2020-04-28 广东小天才科技有限公司 一种听写报读音频的生成方法、电子设备及存储介质
CN111078098A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种听写控制方法及装置
CN111081079A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 基于听写情况的听写控制方法及装置
CN111081081A (zh) * 2019-07-02 2020-04-28 广东小天才科技有限公司 一种听写报读方法及电子设备
CN111081083A (zh) * 2019-07-11 2020-04-28 广东小天才科技有限公司 一种听写报读的方法及电子设备
CN111081089A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种基于面部特征信息的听写控制方法及装置
CN111899575A (zh) * 2020-07-21 2020-11-06 北京字节跳动网络技术有限公司 听写内容发布方法、装置、设备和存储介质
CN113311987A (zh) * 2021-07-28 2021-08-27 北京猿力未来科技有限公司 听写设备的控制方法、装置、听写设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2529349Y (zh) * 2002-03-08 2003-01-01 韩富义 带有听写控制器的磁带机
CN1424665A (zh) * 2003-01-08 2003-06-18 无敌科技(西安)有限公司 具有听写测验及自动评分功能的装置及其操作方法
US20030125945A1 (en) * 2001-12-14 2003-07-03 Sean Doyle Automatically improving a voice recognition system
CN1474306A (zh) * 2002-08-09 2004-02-11 无敌科技股份有限公司 具有渐进调整功能的听力学习系统及其方法
CN102460577A (zh) * 2009-05-13 2012-05-16 李斗汉 多媒体文件播放方法及多媒体播放器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030125945A1 (en) * 2001-12-14 2003-07-03 Sean Doyle Automatically improving a voice recognition system
CN2529349Y (zh) * 2002-03-08 2003-01-01 韩富义 带有听写控制器的磁带机
CN1474306A (zh) * 2002-08-09 2004-02-11 无敌科技股份有限公司 具有渐进调整功能的听力学习系统及其方法
CN1424665A (zh) * 2003-01-08 2003-06-18 无敌科技(西安)有限公司 具有听写测验及自动评分功能的装置及其操作方法
CN102460577A (zh) * 2009-05-13 2012-05-16 李斗汉 多媒体文件播放方法及多媒体播放器

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
无人喝彩: "超级电脑复读机sitman", 《电脑迷》 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105702246A (zh) * 2016-03-17 2016-06-22 广东小天才科技有限公司 一种辅助用户进行听写的方法及装置
CN109147472A (zh) * 2018-09-14 2019-01-04 郭凯明 基于单词音形意的速记平台构建方法及相关装置
CN109558511A (zh) * 2018-12-12 2019-04-02 广东小天才科技有限公司 一种听写报读方法及装置
CN111028591A (zh) * 2019-04-25 2020-04-17 广东小天才科技有限公司 一种听写控制方法及学习设备
CN111028591B (zh) * 2019-04-25 2022-03-01 广东小天才科技有限公司 一种听写控制方法及学习设备
CN111026872A (zh) * 2019-04-29 2020-04-17 广东小天才科技有限公司 一种关联听写方法及电子设备
CN111026872B (zh) * 2019-04-29 2024-03-22 广东小天才科技有限公司 一种关联听写方法及电子设备
CN111078098B (zh) * 2019-05-10 2021-11-05 广东小天才科技有限公司 一种听写控制方法及装置
CN111078098A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种听写控制方法及装置
CN111081079A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 基于听写情况的听写控制方法及装置
CN111081089A (zh) * 2019-05-10 2020-04-28 广东小天才科技有限公司 一种基于面部特征信息的听写控制方法及装置
CN111081081A (zh) * 2019-07-02 2020-04-28 广东小天才科技有限公司 一种听写报读方法及电子设备
CN111081081B (zh) * 2019-07-02 2021-12-21 广东小天才科技有限公司 一种听写报读方法及电子设备
CN111081083A (zh) * 2019-07-11 2020-04-28 广东小天才科技有限公司 一种听写报读的方法及电子设备
CN111079423A (zh) * 2019-08-02 2020-04-28 广东小天才科技有限公司 一种听写报读音频的生成方法、电子设备及存储介质
CN111899575A (zh) * 2020-07-21 2020-11-06 北京字节跳动网络技术有限公司 听写内容发布方法、装置、设备和存储介质
CN113311987A (zh) * 2021-07-28 2021-08-27 北京猿力未来科技有限公司 听写设备的控制方法、装置、听写设备和存储介质
CN113311987B (zh) * 2021-07-28 2021-11-16 北京猿力未来科技有限公司 听写设备的控制方法、装置、听写设备和存储介质

Similar Documents

Publication Publication Date Title
CN105005431A (zh) 听写设备及其数据处理方法和相关装置
WO2018187234A1 (en) Hands-free annotations of audio text
US20090326953A1 (en) Method of accessing cultural resources or digital contents, such as text, video, audio and web pages by voice recognition with any type of programmable device without the use of the hands or any physical apparatus.
US20200058288A1 (en) Timbre-selectable human voice playback system, playback method thereof and computer-readable recording medium
CN102629936B (zh) 一种移动终端处理文本的方法、相关设备及系统
CN106796496A (zh) 显示设备及其操作方法
CN100559460C (zh) 用元数据标记音频信号的方法和系统
CN102867526A (zh) 用于分布式音频文件编辑的门户网站
CN101657816A (zh) 用于分布式音频文件编辑的门户网站
CN110738996B (zh) 一种语音控制打印机打印的方法及一种打印终端
CN111145719B (zh) 将中英混合及语气标签化的数据标注方法及装置
JP5586754B1 (ja) 情報処理装置及びその制御方法、コンピュータプログラム
JP6389289B2 (ja) 語学教材作成システム
KR101789057B1 (ko) 시각 장애인을 위한 자동 오디오 북 시스템 및 그 운영 방법
CN110781417A (zh) 一种基于二维码的朗读作品传播方法及系统
WO2005038683A1 (en) Language education system, language education method and language education program recorded media based on corpus retrieval system, which use the functions of questions and answers
CN108140384A (zh) 信息管理系统和信息管理方法
KR20110056131A (ko) 사용자 정의의 단어 학습 콘텐츠를 제공하는 단어 학습 시스템 및 그 단어 학습 방법
US20050158696A1 (en) [interactive computer-assisted language learning method and system thereof]
KR101124798B1 (ko) 전자 그림책 편집 장치 및 방법
JP2004266551A (ja) ストリームデータ生成装置、ストリームデータ生成システム、ストリームデータ生成方法及びプログラム
KR100882857B1 (ko) 식별코드를 이용한 콘텐츠 재생 방법
JP2005326811A (ja) 音声合成装置および音声合成方法
CN112786026A (zh) 基于语音迁移学习的亲子故事个性化音频生成系统及方法
CN112465679B (zh) 一种钢琴学习与创作系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20151028