CN111681467A - 一种词汇学习方法及电子设备、存储介质 - Google Patents

一种词汇学习方法及电子设备、存储介质 Download PDF

Info

Publication number
CN111681467A
CN111681467A CN202010486771.1A CN202010486771A CN111681467A CN 111681467 A CN111681467 A CN 111681467A CN 202010486771 A CN202010486771 A CN 202010486771A CN 111681467 A CN111681467 A CN 111681467A
Authority
CN
China
Prior art keywords
dimensional
vocabulary
content
spelling
spelling unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010486771.1A
Other languages
English (en)
Other versions
CN111681467B (zh
Inventor
崔颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Genius Technology Co Ltd
Original Assignee
Guangdong Genius Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Genius Technology Co Ltd filed Critical Guangdong Genius Technology Co Ltd
Priority to CN202010486771.1A priority Critical patent/CN111681467B/zh
Publication of CN111681467A publication Critical patent/CN111681467A/zh
Application granted granted Critical
Publication of CN111681467B publication Critical patent/CN111681467B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words

Abstract

本申请实施例涉及电子设备技术领域,公开了一种词汇学习方法及电子设备、存储介质,能够提高用户的词汇学习效率。该方法包括:获取对物理页面拍摄到的页面图像,从页面图像中识别出被指示的词汇内容。将词汇内容切分为至少一个拼读单元,获取每个拼读单元对应的发音数据,以及获取词汇内容所对应的三维模型。输出三维模型,同时播放每个拼读单元对应的发音数据。

Description

一种词汇学习方法及电子设备、存储介质
技术领域
本申请涉及电子设备技术领域,具体涉及一种词汇学习方法及电子设备、存储介质。
背景技术
目前,学生们在学习一门外语时,通常习惯于利用查词软件来查询单词。当学生查询某一单词时,可以在查词软件提供的单词页面中看到该单词的拼写和音标,并通过点击发音键收听该单词的发音音频。然而,实践中发现,这种方式很难加深学生对单词的理解与印象,导致学生总是记不住新单词,因此词汇学习效率较低。
发明内容
本申请实施例公开了一种词汇学习方法及电子设备、存储介质,能够提高用户的词汇学习效率。
本申请实施例第一方面提供一种词汇学习方法,所述方法包括:
获取对物理页面拍摄到的页面图像;
从所述页面图像中识别出被指示的词汇内容;
将所述词汇内容切分为至少一个拼读单元,并获取每个所述拼读单元对应的发音数据,以及获取所述词汇内容所对应的三维模型;
输出所述三维模型,同时播放每个所述拼读单元对应的发音数据。
作为一种可选的实施方式,在本申请实施例第一方面中,所述获取所述词汇内容所对应的三维模型,包括:
识别出所述词汇内容所包含的所有原始字母;
获取对每个所述原始字母进行三维建模后的三维字母;
根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型。
作为一种可选的实施方式,在本申请实施例第一方面中,所述根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型,包括:
对所述词汇内容进行语义分析,获得与所述词汇内容相匹配的语义元素;
获取与所述语义元素相匹配的三维场景对象;
根据所有所述原始字母对应的三维字母以及所述三维场景对象,生成所述词汇内容所对应的三维模型。
作为一种可选的实施方式,在本申请实施例第一方面中,所述根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型,包括:
对所有所述原始字母对应的三维字母进行分组,获得至少一个三维字母组;其中,每个所述三维字母组对应于一个拼读单元;
生成每个所述三维字母组对应的组合模型;
根据每个所述三维字母组对应的组合模型,确定所述词汇内容所对应的三维模型。
作为一种可选的实施方式,在本申请实施例第一方面中,所述输出所述三维模型,同时播放每个所述拼读单元对应的发音数据,包括:
按照每个所述三维字母组在所述词汇内容中对应的拼写顺序,依次输出每个所述三维字母组对应的组合模型,以及,在输出每个所述三维字母组所对应组合模型的同时,播放所述三维字母组所对应拼读单元的发音数据。
作为一种可选的实施方式,在本申请实施例第一方面中,所述方法还包括:
若检测到针对任一组合模型的选中操作,播放第一拼读单元对应的发音数据,所述第一拼读单元为所述选中操作对应的组合模型所对应的拼读单元;
若检测到针对任一组合模型的旋转操作,则响应于所述旋转操作,控制所述旋转操作对应的组合模型旋转至所述旋转操作指示的角度;当所述旋转操作对应的组合模型处于所述指示的角度时,按照预设形式输出与所述指示的角度绑定且与第二拼读单元相关的关联内容,所述第二拼读单元为所述旋转操作对应的组合模型所对应的拼读单元。
作为一种可选的实施方式,在本申请实施例第一方面中,所述关联内容包括与所述第二拼读单元相关的关联词汇,所述关联词汇至少包含所述第二拼读单元;所述方法还包括:
检测针对所述关联词汇输入的朗读语音;根据所述关联词汇对应的正确发音,对所述朗读语音进行评估,获得发音评估结果,所述发音评估结果用于更新对所述第二拼读单元的发音掌握度;
或,检测针对所述关联词汇输入的语义作答内容,并将所述关联词汇对应的正确语义与所述语义作答内容进行比对,获得批改结果,所述批改结果用于更新对所述第二拼读单元的语义掌握度。
本申请实施例第二方面提供一种电子设备,所述电子设备包括:
图像获取模块,用于获取对物理页面拍摄到的页面图像;
识别模块,用于从所述页面图像中识别出被指示的词汇内容;
发音数据获取模块,用于将所述词汇内容切分为至少一个拼读单元,并获取每个所述拼读单元对应的发音数据;
模型获取模块,用于获取所述词汇内容所对应的三维模型;
输出模块,用于输出所述三维模型,同时播放每个所述拼读单元对应的发音数据。
本申请实施例第三方面提供一种电子设备,所述电子设备包括:
一个或多个存储器;
一个或多个处理器,用于执行存储在所述一个或多个存储器中的一个或多个计算机程序,以执行如本申请第一方面所述的方法。
本申请实施例第四方面提供一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行如本申请第一方面所述的方法。
本申请实施例第五方面提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行如本申请第一方面所述的方法。
与现有技术相比,本申请实施例具有以下有益效果:
在本申请实施例中,通过获取对物理页面拍摄到的页面图像,可以从页面图像中快速识别出被指示的词汇内容,无需用户手动输入待查询的词汇,提高了词汇查询的效率和便利性。之后,再将词汇内容切分为至少一个拼读单元,获取每个拼读单元对应的发音数据,并获取词汇内容对应的三维模型,从而输出三维模型,同时播放每个拼读单元对应的发音数据。可见,这样能够以三维立体的输出形式加深用户对词汇内容中字母外形及拼写的印象,同时以拼读单元为单位播放发音数据,还能够提升用户对不同拼读单元发音的敏感度,有利于加深用户对词汇结构及音节的理解,进而提高了用户的词汇学习效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例公开的一种电子设备的使用场景示意图;
图2是本申请实施例公开的一种词汇学习方法的流程示意图;
图3是本申请实施例公开的另一种词汇学习方法的流程示意图;
图4是本申请实施例中一种电子设备输出三维模型的示意图;
图5是本申请实施例中另一种电子设备输出三维模型的示意图;
图6是本申请实施例中另一种电子设备输出三维模型的示意图;
图7是本申请实施例中另一种电子设备输出三维模型的示意图;
图8是本申请实施例公开的一种电子设备的结构示意图;
图9是本申请实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本申请实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请实施例公开了一种词汇学习方法及电子设备、存储介质,能够提高用户的词汇学习效率。本申请实施例公开的词汇学习方法应用于电子设备,电子设备可以包括智能手机、智能音箱、家教机、点读机、可穿戴设备、笔记本电脑和平板电脑等,对此不作具体限定。以下结合附图进行详细描述。
为了更好的理解本申请实施例公开的词汇学习方法,以下先对本申请实施例公开的一种电子设备进行描述。
请参阅图1,图1是本申请实施例公开的一种电子设备的使用场景示意图。如图1所示,该电子设备10设有显示屏101、拍摄装置103以及反光装置105。反光装置105与电子设备10可拆卸连接,并可固定于电子设备10的外壳上任意位置。应当理解的是,图1所示的电子设备10为平板电脑,这仅仅是一种示例,并不构成本申请实施例中对电子设备的类型限定。
在一些可选的实施例中,电子设备10可以在外壳的任意位置设有一个或多个拍摄装置,对拍摄装置的具体数目与位置均不作限定。相应的,反光装置105可以自由固定于任一拍摄装置的前方。为了方便理解,以下均以图1中设于电子设备10顶部的拍摄装置103和反光装置105为例进行描述。
如图1所示,当电子设备10与水平面(比如桌面)呈一定角度摆放时,反光装置105可以用于改变拍摄装置103的光路,使得拍摄装置103拍摄到摆放在水平面上的物理页面11的页面图像。其中,物理页面11可以包括作业本、课本、书籍、杂志和试卷等纸质资料中的页面,对此不作限定。
在一些可选的实施例中,拍摄装置103可以为广角摄像头。
下面对本申请实施例公开的词汇学习方法进行详细描述。
请参阅图2,图2是本申请实施例公开的一种词汇学习方法的流程示意图。如图2所示,该方法可以包括以下步骤:
201、获取对物理页面拍摄到的页面图像。
本申请实施例中,电子设备可以通过启动拍摄装置来对物理页面进行拍摄。电子设备启动拍摄装置的触发方式可以包括但不限于:1、用户通过按压电子设备上指定的实体按键、点击显示屏上的虚拟按键或者输入语音启动指令,启动电子设备上已预先获得拍摄权限的任一授权软件,比如搜词软件;2、电子设备从日程表中读取到即时学习任务,且当前时间属于为该即时学习任务所设定的学习时间段内。
202、从页面图像中识别出被指示的词汇内容。
在本申请实施例中,词汇内容可以是单个单词、包括至少两个单词的短语、语句和文本段落等,对此不作具体限定。此外,词汇内容的语言种类可以是英语、西班牙语和法语等,亦不作具体限定。以下均以英语为例进行描述。
在本申请实施例中,可选的,电子设备可以存储有不同指示物所对应的指示物特征信息。指示物可以包括手指、智能笔、写字笔或其他可起到指示作用的物体等,亦不作具体限定。
基于此,电子设备利用指示物特征信息对页面图像进行图像特征识别与匹配,可以从页面图像中匹配出对应的指示物,并定位出指示物末端在页面图像中指示的位置。指示物的末端可以是指示物上用来指示物理页面上的内容的一端,比如手指的指尖、写字笔的笔尖。之后,电子设备可以直接通过光学字符识别(optical character recognition,OCR)对整个页面图像进行内容识别,获得文本内容。基于文本内容与页面图像的映射关系,电子设备可以快速从文本内容中获取与指示位置所对应的词汇内容。
203、将词汇内容切分为至少一个拼读单元,并获取每个拼读单元对应的发音数据,以及获取词汇内容所对应的三维模型。
在一种可选的实现方式中,拼读单元可以对应于一个音节,且根据所有拼读单元对应的音节可以拼读出整个词汇内容的读音。相应的,电子设备可以先获取词汇内容对应的国际音标(international phonetic alphabet,IPA),再结合词汇内容对应的IPA以及预设的音节划分规则对词汇内容进行音节划分,获得至少一个音节。预设的音节划分规则可以包括但不限于:按元音和重音符号划分音节;辅音之间有一个或一个以上元音只算一个音节;元音之间有一个辅音,辅音归后一音节;元音之间有两个辅音,两个辅音分别归前后音节;固定搭配的辅音组合(比如th、ph)不拆分;两个元音,或者元音和半元音字母组合发的是一个元音或双元音时不拆分;辅音词缀不拆分。举例来说,单词“matter”可被划分为两个拼读单元,即“mat”和“ter”。可见,划分音节可以辅助用户掌握词汇的轻重读规则以及不同重读位置所表达的不同含义,有利于记忆单词拼写。
在另一种可选的实现方式中,电子设备还可以进一步将音节细分为至少一个音素,以实现从音素层面划分词汇内容。此时,拼读单元可以包括但不限于单元音、单辅音、复合元音、复合辅音以及特定发音组合。
其中,音素是基本发音单位,而英语通常被认为具有48个音素,即20个元音和28个辅音,比如[e]、[b]和[ai]等。基于此,举例来说,单词“sweater”可被划分为四个拼读单元,即“sw”、“ea”“t”以及“er”。可见,本申请结合了自然拼读法的特点(即,把复杂的发音归纳成有规律的、简单的发音,将英文的字母与发音联系起来,以解决学生学英语发音难、发不准音的问题),对词汇内容按照音素进行细分,有利于根据音素的发音培养用户的语感,使得用户看到字母或字母组合可自然读出发音,或者听到单词读音便可拼写出该单词。
在又一种可选的实现方式中,电子设备可以识别出词汇内容所包含的所有语素,以作为拼读单元。语素是语言中最小的音义结合体,主要可以包括词根和词缀。词根用于决定词义,可单独或组合构成词汇。而词缀粘附在词根上构成语素,无法独立存在,可用于改变词义或者决定词性,比如“pre”、“dis”、“ex”和“il”等。举例来说,单词“antiwar”可分为两个拼读单元,即词缀“anti”和词根“war”,如果结合词缀“anti(反对、相反)”和词根“war(战争)”来看,容易联想到单词“antiwar”的含义为“反战的”。可见,将词汇内容按照语素进行划分,能够辅助用户从形态学角度掌握词汇的内部结构和构词规律,有助于用户更准确地用词与记词。
在本申请实施例中,拼读单元对应的发音数据可以是该拼读单元的发音音频、发音口型视频或者动画等,对此不作限定。
在本申请实施例中,三维模型是具有三维数据的模型。可选的,电子设备可以存储有预先利用三维建模技术为不同词汇构建的三维模型,故步骤203中,若电子设备搜索到词汇内容对应的三维模型,则可直接调出该三维模型。或者,还可选的,若电子设备无法直接搜索到词汇内容对应的三维模型,则还可以先识别出词汇内容包含的关键信息,关键信息可以包括但不限于拼写字母和词义关键词。之后,电子设备获取与关键信息匹配的多个三维对象,再对多个三维对象进行组合,从而获得词汇内容对应的三维模型。
204、输出三维模型,同时播放每个拼读单元对应的发音数据。
在本申请实施例中,电子设备可以直接在显示屏上显示三维模型,也可以先在显示屏上显示页面图像,再在页面图像上的指示位置处显示三维模型,以实现增强现实(augmented reality,AR)互动的效果,对此不作具体限定。可选的,电子设备还可以在播放完每个拼读单元对应的发音数据后,再播放一遍词汇内容对应的发音数据。举例来说,如果电子设备从页面图像中识别出单词“sweater”,则可以在输出单词“sweater”所对应三维模型的同时,播放内容为“sw-ea-t-er,sweater”的发音音频。
可见,实施上述方法实施例,无需用户手动输入待查询的词汇,能够提高词汇查询的效率和便利性。此外,还能够以三维立体的输出形式加深用户对词汇内容中字母外形及拼写的印象,同时以拼读单元为单位播放发音数据,提升了用户对不同拼读单元发音的敏感度,有利于加深用户对词汇结构及音节的理解,进而提高了用户的词汇学习效率。
请参阅图3,图3是本申请实施例公开的另一种词汇学习方法的流程示意图。如图3所示,该方法可以包括以下步骤:
301、获取对物理页面拍摄到的页面图像。
302、从所述页面图像中识别出被指示的词汇内容。
303、将词汇内容切分为至少一个拼读单元,并获取每个拼读单元对应的发音数据。
在本申请实施例中,步骤301~步骤303请参照图2所示实施例中对步骤201~步骤203的描述,此处不再赘述。
304、识别出词汇内容所包含的所有原始字母。
305、获取对每个原始字母进行三维建模后的三维字母。
306、根据所有原始字母对应的三维字母,生成词汇内容所对应的三维模型。
在本申请实施例中,电子设备可以在本地或云端数据库中存储有对26个小写英文字母及26个大写英文字母各自建模得到的三维字母,以供直接调用。
307、输出三维模型,同时播放每个拼读单元对应的发音数据。
基于步骤304~步骤307,示例性的,请参阅图4,图4是本申请实施例中一种电子设备输出三维模型的示意图。如图4所示,电子设备在显示屏上显示有对物理页面40拍摄到的页面图像。假设用户手指(未图示)指向物理页面40上的指示位置401,且电子设备从指示位置401处识别出词汇内容为“drop”,则电子设备可以调出三维字母“d”、“r”“o”和“p”,再将这些三维字母组合成三维模型42。基于此,电子设备可以在指示位置401处显示三维模型42,并播放内容为“dr-o-p,drop”的发音音频,便于用户同时通过三维模型观察单词拼写与收听拼读发音。
可见,三维立体化的字母提高了词汇展示的直观性,有助于加深用户对词汇拼写的印象。
作为一种可选的实施方式,电子设备还可以对所有原始字母对应的三维字母进行分组,获得至少一个三维字母组,每个三维字母组对应于一个拼读单元。电子设备生成每个三维字母组对应的组合模型,并根据每个三维字母组对应的组合模型,确定词汇内容所对应的三维模型。
其中,每个三维字母组所包括的原始字母与相应拼读单元所包括的字母一一对应,且三维字母组的总数量与拼读单元的总数量相等。电子设备生成每个三维字母组对应的组合模型可以包括但不限于以上几种方式:电子设备根据三维字母组的总数量N,确定N种模型类,其中,不同模型类采用不同的模型尺寸、角度、颜色、贴图或纹理等模型属性,N为正整数。电子设备采用不同模型类对每个三维字母组进行重建模与渲染,获得每个三维字母组对应的组合模型,最终将所有组合模型组合为词汇内容所对应的三维模型。
示例性的,请参阅图5,图5是本申请实施例中另一种电子设备输出三维模型的示意图。如图5所示,电子设备从指示位置401处识别出词汇内容为“drop”,并调出三维字母“d”、“r”、“o”和“p”之后,由于“drop”可被划分为3个拼读单元“dr”、“o”和“p”,因此电子设备可将上述三维字母分为3个三维字母组“dr”、“o”和“p”,并分别生成三维字母组“dr”对应的组合模型441、三维字母组“o”对应的组合模型442以及三维字母组“p”对应的组合模型443,以组合为三模模型44。可见,各三维字母组的组合模型均采用不同纹理以相互区分,便于用户直观地观察词汇的拼读方式。
此外,作为一种可选的实施方式,电子设备可以对词汇内容进行语义分析,获得与词汇内容相匹配的语义元素。之后,电子设备获取与语义元素相匹配的三维场景对象,并根据所有原始字母对应的三维字母以及三维场景对象,生成词汇内容所对应的三维模型。
其中,语义元素可以是从词汇内容的释义中提取出的关键词,比如,词汇“band”的译义包括:群、伙、帮、乐队、条纹、橡皮筋,则提取出的语义元素可以包括:乐队、条纹和橡皮筋。在一种实现方式中,电子设备还可以优先挑选常用的译义关键词作为语义元素。
其中,三维场景对象可以是静态的三维对象,比如一张桌子,也可以是动态的三维对象,比如正在奔跑的小人,不作具体限定。在一些情况下,三维场景对象还可以是场景模型,比如语义元素为“park(公园)”时,其对应的三维场景对象可以是一个公园模型,该公园模型由长凳、树木、水池、草地等三维对象构成。可选的,电子设备还可以提供三维制作软件,且不同语义元素所对应的三维场景对象还可以由用户通过三维制作软件人为构建与渲染得到,能够提升词汇学习的趣味性。
示例性的,请参阅图6,图6是本申请实施例中另一种电子设备输出三维模型的示意图。如图6所示,若电子设备识别出词汇内容为“dog”,电子设备除了在显示屏上显示组合模型“d”601、组合模型“o”602和组合模型“g”603,还可以显示小狗的三维模型604,用于与3个组合模型共同组合为词汇内容“dog”的三维模型。可见,用户只需看到小狗的三维模型604便可领悟到词汇“dog”的含义,实现了将词汇的音形义三者关联起来,加深学生对词汇的印象。
在本申请实施例中,还可选的,三维模型在显示屏上的显示大小和位置还可以人为设置与调整,比如,用户长按显示屏上的三维模型,可以将三维模型从显示屏的中间位置拖动至右上角位置,从而适应不同的观看需求,为用户提供最优的观看体验。
作为一种可选的实施方式,电子设备还可以按照每个三维字母组在词汇内容中对应的拼写顺序,依次输出每个三维字母组对应的组合模型,以及,在输出每个三维字母组所对应组合模型的同时,播放三维字母组所对应拼读单元的发音数据。
可见,将三维字母组的显示输出与发音朗读进行同步,便于用户更好地掌握三维字母组所展示的字母拼写与发音之间的联系。
请参阅图7,图7是本申请实施例中另一种电子设备输出三维模型的示意图。如图7所示,针对图5中的三维模型44,电子设备可以首先输出第一个组合模型“dr”441,同时播放“dr”的发音。其次,电子设备输出第二个组合模型“o”442,同时播放“o”的发音。之后,电子设备输出第三个组合模型“p”443,同时播放“p”的发音。最后,电子设备在显示完整的三维模型44的同时,播放一遍“drop”的完整发音。
进一步的,作为一种可选的实施方式,若用户在显示屏上点击任一组合模型,则电子设备可以检测到针对该组合模型的选中操作,并播放第一拼读单元对应的发音数据,第一拼读单元为选中操作对应的组合模型所对应的拼读单元。可见,用户可以根据自身需求点击相应的组合模型进行针对性学习,操作简单方便。
此外,三维模型还可以实现360°范围中任意角度的旋转。若用户选中任一组合模型,并将该组合模型旋转至某一角度,则电子设备可以检测到针对任一组合模型的旋转操作,并响应于旋转操作,控制旋转操作对应的组合模型旋转至旋转操作指示的角度。当旋转操作对应的组合模型处于指示的角度时,电子设备可以按照预设形式输出与指示的角度绑定且与第二拼读单元相关的关联内容,第二拼读单元为旋转操作对应的组合模型所对应的拼读单元。
其中,旋转操作指示的角度与关联内容绑定,也可以指该指示角度所属的角度范围与关联内容绑定。也就是说,当组合模型旋转至不同的角度,电子设备可以输出不同的关联内容,这些关联内容包括但不限于关联词汇、教学视频、例句和历史笔记。此外,电子设备可以在三维模型所处界面上输出关联内容,并在组合模型的旋转角度不与关联内容所绑定的角度匹配时,不再显示该关联内容;或者,电子设备也可以弹出新窗口,在新窗口中显示关联内容,并由用户控制对新窗口的位置调整及关闭,对此不作限定。
示例性的,如果用户将组合模型绕水平轴旋转至0°~90°中任一角度,电子设备可以输出与第二拼读单元相关的关联词汇。如果用户将组合模型绕垂直轴旋转至0°~90°中任一角度,则电子设备可以输出与第二拼读单元相关的发音口型视频。
可见,基于三维空间特性,建立组合模型的旋转角度与输出内容的关联关系,既能够提供丰富的关联内容以供用户进行拓展学习,又操作简便,提高了与用户的交互性。
可选的,当用户选中整个词汇内容对应的三维模型时,上述对组合模型的描述同样适用于该三维模型,不再赘述。
再进一步的,关联内容为第二拼读单元相关的关联词汇时,关联词汇至少包含第二拼读单元,比如,若第二拼读单元为“t”,则关联词汇可以包括tap、letter和debt等。若用户朗读关联词汇,则电子设备还可以检测用户的朗读语音,并根据关联词汇对应的正确发音,对朗读语音进行评估,获得发音评估结果,发音评估结果用于更新对第二拼读单元的发音掌握度。
在一些实施例中,若用户通过手写或语音输入针对关联词汇的语义作答内容,电子设备还可以接收语义作答内容,并将关联词汇对应的正确语义与语义作答内容进行比对,获得批改结果,批改结果用于更新对第二拼读单元的语义掌握度。
其中,如果发音评估结果和批改结果的正确率越高,则相应的发音掌握度和语义掌握度会变高;反之,则相应的发音掌握度和语义掌握度会变低。还可选的,每当用户对任一拼读单元的发音掌握度或语义掌握度增长预设级别,电子设备还可以为用户解锁更多对不同语义元素自定义添加三维场景对象的机会,以提高用户的学习参与度。
可见,通过检测用户对关联词汇的发音或词义作答,能够及时测试用户对拼读单元的掌握程度,以便更好地巩固词汇学习效果。
可见,实施上述方法实施例,无需用户手动输入待查询的词汇,能够提高词汇查询的效率和便利性。此外,还能够以三维立体的输出形式加深用户对词汇内容中字母外形及拼写的印象,同时以拼读单元为单位播放发音数据,提升了用户对不同拼读单元发音的敏感度,有利于加深用户对词汇结构及音节的理解,=提高了用户的词汇学习效率。进一步的,还便于用户根据自身需求点击相应的组合模型进行针对性学习,操作简单方便,以及,基于三维空间特性,建立组合模型的旋转角度与输出内容的关联关系,能够提供丰富的关联内容以供用户进行拓展学习,提高了与用户的交互性。再进一步的,还能够及时测试用户对拼读单元的掌握程度,以便更好地巩固词汇学习效果。
上述对本申请实施例中词汇学习方法进行了说明,下面对本申请实施例中的电子设备进行说明。
请参阅图8,图8是本申请实施例公开的一种电子设备的结构示意图。该电子设备包括图像获取模块801、识别模块802、发音数据获取模块803、模型获取模块804以及输出模块805,其中:
图像获取模块801,用于获取对物理页面拍摄到的页面图像。
识别模块802,用于从页面图像中识别出被指示的词汇内容。
发音数据获取模块803,用于将词汇内容切分为至少一个拼读单元,并获取每个拼读单元对应的发音数据。
模型获取模块804,用于获取词汇内容所对应的三维模型。
输出模块805,用于输出三维模型,同时播放每个拼读单元对应的发音数据。
可选的,在本申请的一些实施例中,图像获取模块801可以包括识别单元、三维字母获取单元和生成单元,其中:
识别单元,用于识别出词汇内容所包含的所有原始字母;
三维字母获取单元、用于获取对每个原始字母进行三维建模后的三维字母;
生成单元,用于根据所有原始字母对应的三维字母,生成词汇内容所对应的三维模型。
可选的,在本申请的一些实施例中,生成单元,可以包括语义分析子单元、对象获取子单元以及生成子单元,其中:
语义分析子单元,用于对词汇内容进行语义分析,获得与词汇内容相匹配的语义元素;
对象获取子单元,用于获取与语义元素相匹配的三维场景对象;
第一生成子单元,用于根据所有原始字母对应的三维字母以及三维场景对象,生成词汇内容所对应的三维模型。
可选的,在本申请的一些实施例中,生成单元,还可以包括,其中:
分组子单元,用于对所有原始字母对应的三维字母进行分组,获得至少一个三维字母组,每个三维字母组对应于一个拼读单元;
第二生成子单元,用于生成每个三维字母组对应的组合模型;
第三生成子单元,用于根据每个三维字母组对应的组合模型,确定词汇内容所对应的三维模型。
可选的,在本申请的一些实施例中,输出模块805,具体用于按照每个三维字母组在词汇内容中对应的拼写顺序,依次输出每个三维字母组对应的组合模型,以及,在输出每个三维字母组所对应组合模型的同时,播放三维字母组所对应拼读单元的发音数据。
可选的,在本申请的一些实施例中,电子设备还可以包括控制模块,其中:
输出模块805,还用于在检测到针对任一组合模型的选中操作时,播放第一拼读单元对应的发音数据,第一拼读单元为选中操作对应的组合模型所对应的拼读单元;
控制模块,用于在检测到针对任一组合模型的旋转操作时,响应于旋转操作,控制旋转操作对应的组合模型旋转至旋转操作指示的角度;
输出模块805,还用于在旋转操作对应的组合模型处于指示的角度时,按照预设形式输出与指示的角度绑定且与第二拼读单元相关的关联内容,第二拼读单元为旋转操作对应的组合模型所对应的拼读单元。
可选的,在本申请的一些实施例中,关联内容包括与第二拼读单元相关的关联词汇,且关联词汇至少包含第二拼读单元。电子设备还可以包括检测模块、评估模块以及比对模块,其中:
检测模块,用于检测针对关联词汇输入的朗读语音;
评估模块,用于根据关联词汇对应的正确发音,对朗读语音进行评估,获得发音评估结果,发音评估结果用于更新对第二拼读单元的发音掌握度;
检测模块,还用于检测针对关联词汇输入的语义作答内容;
比对模块,用于将关联词汇对应的正确语义与语义作答内容进行比对,获得批改结果,批改结果用于更新对第二拼读单元的语义掌握度。
可见,实施上述实施例,无需用户手动输入待查询的词汇,能够提高词汇查询的效率和便利性。此外,还能够以三维立体的输出形式加深用户对词汇内容中字母外形及拼写的印象,同时以拼读单元为单位播放发音数据,提升了用户对不同拼读单元发音的敏感度,有利于加深用户对词汇结构及音节的理解,进而提高了用户的词汇学习效率。
请参阅图9,图9是本申请实施例公开的另一种电子设备的结构示意图。该电子设备包括:
一个或多个存储器901;
一个或多个处理器902,用于执行存储在一个或多个存储器901中的一个或多个计算机程序,以执行上述各实施例中描述的方法。
需要说明的是,本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程,在此不再叙述。
需要说明的是,本申请实施例中,图9所示的电子设备还可以包括拍摄装置、反光装置、用于输出声音的扬声器模组、显示屏、电池模组、无线通信模组(如移动通信模块、WIFI模块、蓝牙模块等)、传感器模组(如环境光传感器、色温传感器等)、输入模组(如麦克风、按键)以及用户接口模组(如充电接口、对外供电接口、卡槽、有线耳机接口等)等未显示的部件。
本申请实施例提供一种计算机可读存储介质,其上存储有计算机指令,该计算机指令运行时使计算机执行上述方法实施例所描述的词汇学习方法。
本申请实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(read-only memory,ROM)、随机存储器(random access memory,RAM)、可编程只读存储器(programmable read-only memory,PROM)、可擦除可编程只读存储器(erasable programmable read only memory,EPROM)、一次可编程只读存储器(one-time programmable read only memory,OTPROM)、电子抹除式可复写只读存储器(electrically-erasable programmable read-only memory,EEPROM)、只读光盘(compactdisc read-only memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本申请实施例公开的一种词汇学习方法及电子设备、存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种词汇学习方法,其特征在于,所述方法包括:
获取对物理页面拍摄到的页面图像;
从所述页面图像中识别出被指示的词汇内容;
将所述词汇内容切分为至少一个拼读单元,并获取每个所述拼读单元对应的发音数据,以及获取所述词汇内容所对应的三维模型;
输出所述三维模型,同时播放每个所述拼读单元对应的发音数据。
2.根据权利要求1所述的方法,其特征在于,所述获取所述词汇内容所对应的三维模型,包括:
识别出所述词汇内容所包含的所有原始字母;
获取对每个所述原始字母进行三维建模后的三维字母;
根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型。
3.根据权利要求2所述的方法,其特征在于,所述根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型,包括:
对所述词汇内容进行语义分析,获得与所述词汇内容相匹配的语义元素;
获取与所述语义元素相匹配的三维场景对象;
根据所有所述原始字母对应的三维字母以及所述三维场景对象,生成所述词汇内容所对应的三维模型。
4.根据权利要求2所述的方法,其特征在于,所述根据所有所述原始字母对应的三维字母,生成所述词汇内容所对应的三维模型,包括:
对所有所述原始字母对应的三维字母进行分组,获得至少一个三维字母组;其中,每个所述三维字母组对应于一个拼读单元;
生成每个所述三维字母组对应的组合模型;
根据每个所述三维字母组对应的组合模型,确定所述词汇内容所对应的三维模型。
5.根据权利要求4所述的方法,其特征在于,所述输出所述三维模型,同时播放每个所述拼读单元对应的发音数据,包括:
按照每个所述三维字母组在所述词汇内容中对应的拼写顺序,依次输出每个所述三维字母组对应的组合模型,以及,在输出每个所述三维字母组所对应组合模型的同时,播放所述三维字母组所对应拼读单元的发音数据。
6.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:
若检测到针对任一组合模型的选中操作,播放第一拼读单元对应的发音数据,所述第一拼读单元为所述选中操作对应的组合模型所对应的拼读单元;
若检测到针对任一组合模型的旋转操作,则响应于所述旋转操作,控制所述旋转操作对应的组合模型旋转至所述旋转操作指示的角度;当所述旋转操作对应的组合模型处于所述指示的角度时,按照预设形式输出与所述指示的角度绑定且与第二拼读单元相关的关联内容,所述第二拼读单元为所述旋转操作对应的组合模型所对应的拼读单元。
7.根据权利要求6所述的方法,其特征在于,所述关联内容包括与所述第二拼读单元相关的关联词汇,所述关联词汇至少包含所述第二拼读单元;所述方法还包括:
检测针对所述关联词汇输入的朗读语音;根据所述关联词汇对应的正确发音,对所述朗读语音进行评估,获得发音评估结果,所述发音评估结果用于更新对所述第二拼读单元的发音掌握度;
或,检测针对所述关联词汇输入的语义作答内容,并将所述关联词汇对应的正确语义与所述语义作答内容进行比对,获得批改结果,所述批改结果用于更新对所述第二拼读单元的语义掌握度。
8.一种电子设备,其特征在于,所述电子设备包括:
图像获取模块,用于获取对物理页面拍摄到的页面图像;
识别模块,用于从所述页面图像中识别出被指示的词汇内容;
发音数据获取模块,用于将所述词汇内容切分为至少一个拼读单元,并获取每个所述拼读单元对应的发音数据;
模型获取模块,用于获取所述词汇内容所对应的三维模型;
输出模块,用于输出所述三维模型,同时播放每个所述拼读单元对应的发音数据。
9.一种电子设备,其特征在于,所述电子设备包括:
一个或多个存储器;
一个或多个处理器,用于执行存储在所述一个或多个存储器中的一个或多个计算机程序,以执行如权利要求1~7任一项所述的方法。
10.一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行如权利要求1~7任一项所述的方法。
CN202010486771.1A 2020-06-01 2020-06-01 一种词汇学习方法及电子设备、存储介质 Active CN111681467B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010486771.1A CN111681467B (zh) 2020-06-01 2020-06-01 一种词汇学习方法及电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010486771.1A CN111681467B (zh) 2020-06-01 2020-06-01 一种词汇学习方法及电子设备、存储介质

Publications (2)

Publication Number Publication Date
CN111681467A true CN111681467A (zh) 2020-09-18
CN111681467B CN111681467B (zh) 2022-09-23

Family

ID=72453718

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010486771.1A Active CN111681467B (zh) 2020-06-01 2020-06-01 一种词汇学习方法及电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN111681467B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114896513A (zh) * 2022-07-12 2022-08-12 北京新唐思创教育科技有限公司 学习内容推荐方法、装置、设备和存储介质

Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0997349A (ja) * 1995-09-29 1997-04-08 Matsushita Electric Ind Co Ltd プレゼンテーション装置
CN1770261A (zh) * 2004-11-01 2006-05-10 英业达股份有限公司 语音合成系统以及方法
KR20100058843A (ko) * 2008-11-25 2010-06-04 세종대학교산학협력단 증강 현실을 이용한 한글 교습 방법 및 시스템
CN103680261A (zh) * 2012-08-31 2014-03-26 英业达科技有限公司 词汇学习系统及其方法
CN103703772A (zh) * 2011-07-18 2014-04-02 三星电子株式会社 内容播放方法和装置
US20140168271A1 (en) * 2012-12-13 2014-06-19 Tobii Technology Ab Rotation of visual content on a display unit
CN104835361A (zh) * 2014-02-10 2015-08-12 陈旭 一种电子词典
CN106097794A (zh) * 2016-07-25 2016-11-09 焦点科技股份有限公司 基于增强现实的汉语拼音组合认读学习系统及认读方法
CN106205239A (zh) * 2016-09-18 2016-12-07 三峡大学 一种基于3d立体成像的电子词典系统
CN106571072A (zh) * 2015-10-26 2017-04-19 苏州梦想人软件科技有限公司 基于增强现实幼教卡片的实现方法
CN108091185A (zh) * 2018-01-12 2018-05-29 李勤骞 基于音节拼读的单词学习系统及其单词学习方法
CN108172044A (zh) * 2018-02-27 2018-06-15 滨州学院 一种英语单词学习用具
CN108346432A (zh) * 2017-01-25 2018-07-31 北京三星通信技术研究有限公司 虚拟现实vr音频的处理方法及相应设备
US20180240280A1 (en) * 2015-08-14 2018-08-23 Metail Limited Method and system for generating an image file of a 3d garment model on a 3d body model
CN109254657A (zh) * 2018-08-23 2019-01-22 广州视源电子科技股份有限公司 交互智能设备的旋转方法和装置
CN110032305A (zh) * 2017-12-22 2019-07-19 达索系统公司 用于旋转的基于手势的操纵器
CN110136501A (zh) * 2019-04-04 2019-08-16 广东工业大学 一种基于ar及图像识别的英语学习机
CN110213641A (zh) * 2019-05-21 2019-09-06 北京睿格致科技有限公司 4d微课播放方法及装置
CN110442839A (zh) * 2019-07-04 2019-11-12 陈俪 英语文本的拼读标注方法、拼读方法、存储介质和电子设备
CN110688005A (zh) * 2019-09-11 2020-01-14 塔普翊海(上海)智能科技有限公司 混合现实的教学环境、教师、教具互动系统及互动方法
CN111079736A (zh) * 2019-05-15 2020-04-28 广东小天才科技有限公司 一种听写内容识别方法及电子设备

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0997349A (ja) * 1995-09-29 1997-04-08 Matsushita Electric Ind Co Ltd プレゼンテーション装置
CN1770261A (zh) * 2004-11-01 2006-05-10 英业达股份有限公司 语音合成系统以及方法
KR20100058843A (ko) * 2008-11-25 2010-06-04 세종대학교산학협력단 증강 현실을 이용한 한글 교습 방법 및 시스템
CN103703772A (zh) * 2011-07-18 2014-04-02 三星电子株式会社 内容播放方法和装置
CN103680261A (zh) * 2012-08-31 2014-03-26 英业达科技有限公司 词汇学习系统及其方法
US20170285743A1 (en) * 2012-12-13 2017-10-05 Tobii Ab Rotation of visual content on a display unit
US20140168271A1 (en) * 2012-12-13 2014-06-19 Tobii Technology Ab Rotation of visual content on a display unit
CN104835361A (zh) * 2014-02-10 2015-08-12 陈旭 一种电子词典
US20180240280A1 (en) * 2015-08-14 2018-08-23 Metail Limited Method and system for generating an image file of a 3d garment model on a 3d body model
CN106571072A (zh) * 2015-10-26 2017-04-19 苏州梦想人软件科技有限公司 基于增强现实幼教卡片的实现方法
CN106097794A (zh) * 2016-07-25 2016-11-09 焦点科技股份有限公司 基于增强现实的汉语拼音组合认读学习系统及认读方法
CN106205239A (zh) * 2016-09-18 2016-12-07 三峡大学 一种基于3d立体成像的电子词典系统
CN108346432A (zh) * 2017-01-25 2018-07-31 北京三星通信技术研究有限公司 虚拟现实vr音频的处理方法及相应设备
CN110032305A (zh) * 2017-12-22 2019-07-19 达索系统公司 用于旋转的基于手势的操纵器
CN108091185A (zh) * 2018-01-12 2018-05-29 李勤骞 基于音节拼读的单词学习系统及其单词学习方法
CN108172044A (zh) * 2018-02-27 2018-06-15 滨州学院 一种英语单词学习用具
CN109254657A (zh) * 2018-08-23 2019-01-22 广州视源电子科技股份有限公司 交互智能设备的旋转方法和装置
CN110136501A (zh) * 2019-04-04 2019-08-16 广东工业大学 一种基于ar及图像识别的英语学习机
CN111079736A (zh) * 2019-05-15 2020-04-28 广东小天才科技有限公司 一种听写内容识别方法及电子设备
CN110213641A (zh) * 2019-05-21 2019-09-06 北京睿格致科技有限公司 4d微课播放方法及装置
CN110442839A (zh) * 2019-07-04 2019-11-12 陈俪 英语文本的拼读标注方法、拼读方法、存储介质和电子设备
CN110688005A (zh) * 2019-09-11 2020-01-14 塔普翊海(上海)智能科技有限公司 混合现实的教学环境、教师、教具互动系统及互动方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114896513A (zh) * 2022-07-12 2022-08-12 北京新唐思创教育科技有限公司 学习内容推荐方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN111681467B (zh) 2022-09-23

Similar Documents

Publication Publication Date Title
US20060194181A1 (en) Method and apparatus for electronic books with enhanced educational features
US9478143B1 (en) Providing assistance to read electronic books
US11410642B2 (en) Method and system using phoneme embedding
JPH0375860A (ja) パーソナライズド端末
CN109389873B (zh) 计算机系统和由计算机实现的训练系统
CN111681467B (zh) 一种词汇学习方法及电子设备、存储介质
US20140120503A1 (en) Method, apparatus and system platform of dual language electronic book file generation
KR20160001332A (ko) 영어 연음 학습 시스템 및 그의 방법
KR20140087956A (ko) 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법
US20150127352A1 (en) Methods, Systems, and Tools for Promoting Literacy
KR102645880B1 (ko) 자기주도 영어 학습 콘텐츠 제공 방법 및 장치
KR20140107067A (ko) 이미지 데이터와 원어민 발음 데이터를 이용한 단어 학습장치 및 방법
CN114972716A (zh) 上课内容记录方法、相关装置和介质
US20160267811A1 (en) Systems and methods for teaching foreign languages
KR100505346B1 (ko) 플래쉬 기법을 이용한 언어학습방법
TWM467143U (zh) 語言自學系統
Hamada et al. A mobile-based multimedia system for learning Japanese
CN112951013A (zh) 一种学习交互方法、装置、电子设备以及存储介质
CN111401082A (zh) 一种智能个性化二语学习方法、终端及计算机可读存储介质
KR101206306B1 (ko) 언어구사원리에 기초한 언어학습시스템 및 언어학습방법
CN111159433A (zh) 一种内容定位方法及电子设备
KR102656262B1 (ko) 이미지를 이용한 중국어 연상학습 콘텐츠 제공 방법 및 장치
WO2013086575A1 (en) Speech visualisation tool
TWM553866U (zh) 基於文字轉語音技術之電子書語言學習診斷裝置
TW308666B (en) Intelligent Chinese voice learning system and method thereof

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant