CN111031232B - 一种听写实时检测的方法及电子设备 - Google Patents

Abstract

本发明实施例涉及教育技术领域，公开了一种听写实时检测的方法及电子设备，该方法包括：在听写过程中，若检测到书写区域不在初始拍摄区域内，控制变焦摄像头进行变焦处理以获得扩大的目标拍摄区域，书写区域位于目标拍摄区域内；通过变焦摄像头监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程；根据书写过程获取目标听写内容对应的听写检测结果。可见，实施本发明实施例，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。

Description

一种听写实时检测的方法及电子设备

技术领域

本发明涉及教育技术领域，尤其涉及一种听写实时检测的方法及电子设备。

背景技术

近年来，电子设备(如家教机等)被广泛应用于学习辅导，如辅助学生进行听写等。电子设备能够通过摄像头拍摄用户书写的听写内容，从而获取听写内容的检测结果。但是，在实践中发现，学生在听写过程中使用的作业本款式多样，而不同款式的作业本的纸张大小各不相同，当纸张较大时，电子设备无法拍摄到用户书写在拍摄区域之外的听写内容，进而无法获取用户书写在拍摄区域之外的听写内容的检测结果。

发明内容

本发明实施例公开了一种听写实时检测的方法及电子设备，能够提升获得听写内容的检测结果的机率。

本发明实施例第一方面公开了一种听写实时检测的方法，所述方法包括：

在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，所述书写区域位于所述目标拍摄区域内；

通过所述变焦拍摄模组监测用户根据听写音频片段在所述书写区域内书写目标听写内容的书写过程；

根据所述书写过程，获取所述目标听写内容对应的听写检测结果。

作为一种可选的实施方式，在本发明实施例第一方面中，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果，包括：

解析所述书写过程，以获得书写形态和笔尖运动参数；

判断所述书写形态是否与指定的形态相匹配；

若所述书写形态与所述指定的形态相匹配，分析所述笔尖运动参数以获取书写笔顺；

判断所述书写笔顺与是否与指定的笔顺相匹配；

若所述书写笔顺与所述指定的笔顺相匹配，确定所述目标听写内容对应的听写检测结果为正确。

作为一种可选的实施方式，在本发明实施例第一方面中，所述目标听写内容属于音乐简谱，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果，包括：

解析所述书写过程，以获得依次书写的各个简谱音符；

根据所述各个简谱音符的书写顺序，将所述各个简谱音符进行排序，以获得书写的简谱音符串；

判断所述书写的简谱音符串与所述听写音频片段对应的标准的简谱音符串是否相同，若相同，确定所述目标听写内容对应的听写检测结果为正确；

所述确定所述目标听写内容对应的听写检测结果为正确之后，所述方法还包括：

在显示屏上输出指定的虚拟乐器；

检测在所述虚拟乐器上弹奏输入的弹奏音频；

将所述弹奏音频与所述听写音频片段进行校验，以获得所述弹奏音频对应的弹奏检测结果。

作为一种可选的实施方式，在本发明实施例第一方面中，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果之后，所述方法还包括：

若所述目标听写内容属于英语科目，输出阅读提示信息以提示所述用户跟读所述目标听写内容；

获取所述用户跟读所述目标听写内容的音频；

根据所述音频获取所述用户的发音检测结果；

根据所述听写检测结果和所述发音检测结果获取所述用户的听说水平等级；

将所述用户当前所处地理区域对应的区域标识、所述听说水平等级以及所述用户的用户账号发送至管理平台，以使所述管理平台根据所述听说水平等级从所述当前所处地理区域中确定出目标英语交流群；其中，所述听说水平等级与所述目标英语交流群的听说水平等级范围相匹配；

获取所述管理平台发送的包括所述目标英语交流群的群账号的入群推荐信息。

作为一种可选的实施方式，在本发明实施例第一方面中，所述控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域之后，所述方法还包括：

通过指定的拍摄模组监测所述用户的左眼与所述书写区域所在平面的第一垂直距离、以及所述用户的右眼与所述书写区域所在平面的第二垂直距离；

当所述第一垂直距离小于指定的第一距离阈值时，输出姿势纠正提醒信息以提醒所述用户调整书写姿势；

或，当所述第二垂直距离小于所述第一距离阈值时，输出所述姿势纠正提醒信息；

或，当所述第一垂直距离与所述第二垂直距离的差值大于指定的第二距离阈值时，输出所述姿势纠正提醒信息。

本发明实施例第二方面公开了一种电子设备，所述电子设备包括：

变焦单元，用于在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，所述书写区域位于所述目标拍摄区域内；

第一监测单元，用于通过所述变焦拍摄模组监测用户根据听写音频片段在所述书写区域内书写目标听写内容的书写过程；

第一获取单元，用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果。

作为一种可选的实施方式，在本发明实施例第二方面中，所述第一获取单元用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果的方式具体为：

所述第一获取单元，用于解析所述书写过程，以获得书写形态和笔尖运动参数；判断所述书写形态是否与指定的形态相匹配；若所述书写形态与所述指定的形态相匹配，分析所述笔尖运动参数以获取书写笔顺；判断所述书写笔顺与是否与指定的笔顺相匹配；若所述书写笔顺与所述指定的笔顺相匹配，确定所述目标听写内容对应的听写检测结果为正确。

作为一种可选的实施方式，在本发明实施例第二方面中，所述第一获取单元用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果的方式具体为：

所述第一获取单元，用于解析所述书写过程，以获得依次书写的各个简谱音符；根据所述各个简谱音符的书写顺序，将所述各个简谱音符进行排序，以获得书写的简谱音符串；判断所述书写的简谱音符串与所述听写音频片段对应的标准的简谱音符串是否相同，若相同，确定所述目标听写内容对应的听写检测结果为正确；其中，所述目标听写内容属于音乐简谱；

所述电子设备还包括：

第一输出单元，用于在确定所述目标听写内容对应的听写检测结果为正确之后，在显示屏上输出指定的虚拟乐器；

检测单元，用于检测在所述虚拟乐器上弹奏输入的弹奏音频；

校验单元，用于将所述弹奏音频与所述听写音频片段进行校验，以获得所述弹奏音频对应的弹奏检测结果。

作为一种可选的实施方式，在本发明实施例第二方面中，所述电子设备还包括：

第二输出单元，用于在根据所述书写过程，获取所述目标听写内容对应的听写检测结果之后，若所述目标听写内容属于英语科目，输出阅读提示信息以提示所述用户跟读所述目标听写内容；

第二获取单元，用于获取所述用户跟读所述目标听写内容的音频；

所述第二获取单元，还用于根据所述音频获取所述用户的发音检测结果；

所述第二获取单元，还用于根据所述听写检测结果和所述发音检测结果获取所述用户的听说水平等级；

发送单元，用于将所述用户当前所处地理区域对应的区域标识、所述听说水平等级以及所述用户的用户账号发送至管理平台，以使所述管理平台根据所述听说水平等级从所述当前所处地理区域中确定出目标英语交流群；其中，所述听说水平等级与所述目标英语交流群的听说水平等级范围相匹配；

所述第二获取单元，还用于获取所述管理平台发送的包括所述目标英语交流群的群账号的入群推荐信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述电子设备还包括：

第二监测单元，用于在控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域之后，通过指定的拍摄模组监测所述用户的左眼与所述书写区域所在平面的第一垂直距离、以及所述用户的右眼与所述书写区域所在平面的第二垂直距离；

第三输出单元，用于在所述第一垂直距离小于指定的第一距离阈值时，输出姿势纠正提醒信息以提醒所述用户调整书写姿势；

所述第三输出单元，还用于在所述第二垂直距离小于所述第一距离阈值时，输出所述姿势纠正提醒信息；

所述第三输出单元，还用于在所述第一垂直距离与所述第二垂直距离的差值大于指定的第二距离阈值时，输出所述姿势纠正提醒信息。

本发明实施例第三方面公开一种电子设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的一种听写实时检测的方法。

本发明实施例第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的一种听写实时检测的方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

在听写过程中，若检测到书写区域不在初始拍摄区域内，控制变焦摄像头进行变焦处理以获得扩大的目标拍摄区域，书写区域位于目标拍摄区域内；通过变焦摄像头监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程；根据书写过程获取目标听写内容对应的听写检测结果。可见，实施本发明实施例，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种听写实时检测的方法的流程示意图；

图2是本发明实施例公开的另一种听写实时检测的方法的流程示意图；

图3是本发明实施例公开的另一种听写实时检测的方法的流程示意图；

图4是本发明实施例公开的一种电子设备的结构示意图；

图5是本发明实施例公开的另一种电子设备的结构示意图；

图6是本发明实施例公开的另一种电子设备的结构示意图；

图7是本发明实施例公开的另一种电子设备的结构示意图；

图8是本发明实施例公开的一种电子设备控制变焦拍摄模组进行变焦处理的过程的左侧示例图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同的对象，而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种听写实时检测的方法及电子设备，能够提升获得听写内容的检测结果的机率。以下进行结合附图进行详细描述。

实施例一

请参阅图1，图1是本发明实施例公开的一种听写实时检测的方法的流程示意图。如图1所示，该听写实时检测的方法可以包括以下步骤。

101、电子设备在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，该书写区域位于目标拍摄区域内。

本发明实施例中，电子设备可以是供学生使用的学习平板、学习手机、学习机、家教机或点读机等可以辅助学习的电子设备，可选的，电子设备还可以包括底座，该底座用于限定电子设备的摆放角度，在使用电子设备时，可以利用底座使电子设备与桌面成一定角度竖直放置，将作业本资料放置于电子设备前端的桌面上，本发明实施例不作限定。

本发明实施例中，可以理解，变焦拍摄模组在一定范围内可以变换焦距、从而得到不同宽窄的视场角、不同大小的影象和不同景物范围。变焦拍摄模组在不改变拍摄距离的情况下，可以通过变动焦距来改变拍摄范围，因此有利于画面构图。可选的，电子设备配置的变焦拍摄模组可以安装在电子设备上沿，进一步可选的，该变焦拍摄模组可以是弹出式的，本发明实施例不作限定。

本发明实施例中，可以理解，拍摄区域是有限，若用户使用的纸张较大，或书写的字体较大，都可能导致书写区域不在拍摄区域内，通过变焦处理可以改变拍摄区域的大小；上述变焦处理可以是指改变变焦拍摄模组中镜头的焦距，也可以是改变镜头的视角，本发明实施例不作限定。举例来说，请参阅图8，图8是本发明实施例公开的一种电子设备控制变焦拍摄模组进行变焦处理的过程的左侧示例图，如图8所示，电子设备10与桌面成一定角度竖直摆放，电子设备10设置有变焦拍摄模组20，在变焦处理之前，电子设备10的拍摄范围在A1和A2的连线之间，书写区域可以全部或部分位于A1和A2的连线之外，变焦处理之后，电子设备10的拍摄范围被放大，获得目标拍摄区域，即B1和B2的连线之间，使得书写区域可以全部位于目标拍摄区域内。

102、电子设备通过变焦拍摄模组监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程。

本发明实施例中，可以理解，书写区域全部位于目标拍摄区域内，电子设备能够通过变焦拍摄模组监测用户的书写过程。

103、电子设备根据书写过程，获取目标听写内容对应的听写检测结果。

作为一种可选的实施方式，步骤103可以包括：

电子设备解析书写过程，以获得书写形态和笔尖运动参数；判断书写形态是否与指定的形态相匹配；若书写形态与指定的形态相匹配，分析笔尖运动参数以获取书写笔顺；判断书写笔顺与是否与指定的笔顺相匹配；若书写笔顺与指定的笔顺相匹配，确定目标听写内容对应的听写检测结果为正确。

可以理解，上述笔尖运动参数可以包括笔尖的运动加速度，运动速度、运动方向和运动距离中的至少一个；当目标听写内容为汉字时，书写形态可以是汉字的造型；在书写形态正确的前提下，可以进一步检测书写的笔顺是否正确，在书写笔顺正确的情况下才能确定听写检测结果是正确的。可见，实施本实施方式，电子设备结合书写形态和书写笔顺来确定听写检测结果，使得该听写检测结果能够更全面的反应用户书写的目标听写内容的准确性。

作为一种可选的实施方式，在步骤103之后，还可以包括以下步骤：

当听写检测结果指示目标听写内容为正确内容，且上述听写音频片段为英语音频，目标听写内容为至少一个英语单词组成的内容时，电子设备输出翻译提示信息，以提示用户翻译该目标听写内容；电子设备获取用户反馈的翻译内容，并记录反馈时间；电子设备获取翻译内容与预设的翻译内容的匹配度，并根据匹配度以及预设的匹配度权重获取第一翻译分数；电子设备根据反馈时间以及预设的时间权重获取第二翻译分数；电子设备将第一翻译分数与第二翻译分数的和作为翻译分数。

进一步可选的，在电子设备将第一翻译分数与第二翻译分数的和作为翻译分数之后，还可以包括以下步骤：

电子设备确定目标听写内容的翻译难度，并根据翻译分数和翻译难度确定出用户的翻译水平等级；电子设备将用户当前所处地理区域对应的区域标识、翻译水平等级以及用户的用户账号发送至管理平台，以使该管理平台根据翻译水平等级从当前所处地理区域中确定出目标好友；其中，用户的翻译水平等级与目标好友的翻译水平等级范围相匹配；电子设备获取管理平台发送的包括目标好友的社交账号的推荐信息。

可见，实施本实施方式，电子设备还可以获取用户的翻译水平等级，并使管理平台根据该翻译水平等级为用户推荐适合的目标好友，有利于进一步提升用户的翻译水平，并扩大用户的社交圈，提升用户体验。

可见，实施图1所描述的方法，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。

实施例二

请参阅图2，图2是本发明实施例公开的另一种听写实时检测的方法的流程示意图。如图2所示，该听写实时检测的方法可以包括以下步骤。

201、电子设备在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，该书写区域位于目标拍摄区域内。

202、电子设备通过变焦拍摄模组监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程。

203、当上述目标听写内容属于音乐简谱，电子设备解析上述书写过程，以获得依次书写的各个简谱音符。

本发明实施例中，上述音乐简谱可以是字母简谱，也可以数字简谱，本发明实施例不作限定。

204、电子设备根据各个简谱音符的书写顺序，将各个简谱音符进行排序，以获得书写的简谱音符串。

本发明实施例中，可以理解，书写过程可以包括各个简谱音符的书写顺序，进而能够将各个简谱音符进行排序。

205、电子设备判断书写的简谱音符串与听写音频片段对应的标准的简谱音符串是否相同；若是，执行步骤206；若否，结束本流程。

206、电子设备确定目标听写内容对应的听写检测结果为正确。

实施步骤203～步骤206，

207、电子设备在显示屏上输出指定的虚拟乐器。

本发明实施例中，虚拟乐器可以是虚拟钢琴、虚拟吉他或虚拟小提琴等，本发明实施例不作限定。

作为一种可选的实施方式，在步骤207之前还可以包括以下步骤：

电子设备检测是否接收到用户选择虚拟乐器的选择信息，该选择信息中包含目标虚拟乐器的信息，该选择信息的形式可以是语音形式、文字形式或手势形式；若是，电子设备在显示屏上输出目标虚拟乐器；若否，执行电子设备在显示屏上输出指定的虚拟乐器的步骤。

进一步可选的，步骤207可以包括：

电子设备根据用户的登陆账号获知用户的常用乐器，根据该常用乐器确定指定的虚拟乐器，并在显示屏上输出指定的虚拟乐器。

可见实施本发明实施例，用户可以根据自身需求选择虚拟乐器；此外，还能够根据用户的常用乐器确定指定的虚拟乐器，能够提升用户体验。

208、电子设备检测在虚拟乐器上弹奏输入的弹奏音频。

本发明实施例中，可以理解，电子设备可以通过用户检测在虚拟乐器上触控的位置、触控的时长以及触控的压力值来检测出弹奏操作，进而获得弹奏音频。

209、电子设备将弹奏音频与听写音频片段进行校验，以获得弹奏音频对应的弹奏检测结果。

当听写内容属于音乐简谱时，电子设备输出虚拟乐器以供用户进行弹奏，理论结合实践，能够辅助用户有效掌握乐理。

可见，实施图2所描述的方法，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。此外，当听写内容属于音乐简谱时，电子设备输出虚拟乐器以供用户进行弹奏，理论结合实践，能够辅助用户有效掌握乐理。

实施例三

请参阅图3，图3是本发明实施例公开的另一种听写实时检测的方法的流程示意图。如图3所示，该听写实时检测的方法可以包括以下步骤。

301、电子设备在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，该书写区域位于目标拍摄区域内。

302、电子设备通过变焦拍摄模组监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程。

303、电子设备根据书写过程，获取目标听写内容对应的听写检测结果。

304、若目标听写内容属于英语科目，电子设备输出阅读提示信息以提示用户跟读目标听写内容。

305、电子设备获取用户跟读目标听写内容的音频。

本发明实施例中，可以理解，电子设备可以在输出阅读提示信息的同时，开启录音功能，进而能够获取用户跟读目标听写内容的音频。

306、电子设备根据音频获取用户的发音检测结果。

本发明实施例中，可以理解，电子设备可以通过将上述音频与目标听写内容对应的标准音频进行比较和匹配来获取用户的发音检测结果。

307、电子设备根据听写检测结果和发音检测结果获取用户的听说水平等级。

本发明实施例中，可以理解，听写检测结果可以反映用户的听力水平；发音检测结果可以检测用户的发音水平，因此，结合听写检测结果和发音检测结果可以获取用户的听说水平等级。

308、电子设备将用户当前所处地理区域对应的区域标识、听说水平等级以及用户的用户账号发送至管理平台，以使管理平台根据听说水平等级从当前所处地理区域中确定出目标英语交流群；其中，听说水平等级与目标英语交流群的听说水平等级范围相匹配。

本发明实施例中，可以理解，将当前所处地理区域对应的区域标识能发送至管理平台，可以使该管理平台确定出电子设备当前所处地理区域。

309、电子设备获取管理平台发送的包括目标英语交流群的群账号的入群推荐信息。

可以理解，实施步骤308～步骤309，电子设备获取管理平台根据用户的听说水平推荐的目标英语交流群的群账号，用户的听说水平等级与目标英语交流群的听说水平等级范围相适配，有助于用户通过与目标英语交流群中的群友交流学习来稳步提升用户的英语听说水平，此外，还可以辅助用户扩大社交圈。

作为一种可选的实施方式，上述听写实时检测的方法还可以包括以下步骤：

电子设备通过指定的拍摄模组监测用户的左眼与书写区域所在平面的第一垂直距离、以及用户的右眼与书写区域所在平面的第二垂直距离；当第一垂直距离小于指定的第一距离阈值时，电子设备输出姿势纠正提醒信息以提醒用户调整书写姿势；或，当第二垂直距离小于第一距离阈值时，电子设备输出姿势纠正提醒信息；或，当第一垂直距离与第二垂直距离的差值大于指定的第二距离阈值时，电子设备输出姿势纠正提醒信息。

可以理解，若第一垂直距离与第二垂直距离的差值较大，可以推测出用户的头部是歪斜的，书写姿势是错误的。实施本实施方式，电子设备通过实时监测用户的眼睛到书写区域所在平面的距离来检测用户的书写姿势，有利于辅助用户养成良好的书写习惯，进而保护视力。

作为一种可选的实施方式，上述听写实时检测方法还可以包括以下步骤：

电子设备获取当前环境的亮度；若当前环境的亮度低于预设的亮度阈值，电子设备获取当前位置；若当前位置位于预设的建筑物内，电子设备通过指定的拍摄模组拍摄当前环境的环境图像；电子设备根据环境图像确定出目标灯具，并开启智能遥控模块，以通过智能遥控模块开启目标灯具。

可见，实施本实施方式，若当前所处的听写环境较暗，且当前位置位于预设的建筑物内，电子设备能够智能遥控开启目标灯具以增大当前环境的亮度，为用户提供适宜的听写环境亮度，保护用户视力，进而提升用户体验。举例来说，预设的建筑物可以是教学楼，电子设备根据环境图像确定用户具体处于教学楼里的哪一间课室，以及在该课室中的具体方位，进而确定出目标灯具。

可见，实施图3所描述的方法，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。此外，若目标听写内容属于英语科目，电子设备还可以获取用户的听说水平等级，并使管理平台根据该听说水平等级为用户推荐适合的英语交流群，有利于进一步提升用户的听说水平。此外，电子设备通过实时监测用户的眼睛到书写区域所在平面的距离来检测用户的书写姿势，有利于辅助用户养成良好的书写习惯，进而保护视力。

实施例四

请参阅图4，图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示，该电子设备可以包括：

变焦单元401，用于在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，书写区域位于目标拍摄区域内；

第一监测单元402，用于通过变焦拍摄模组监测用户根据听写音频片段在书写区域内书写目标听写内容的书写过程；

第一获取单元403，用于根据书写过程，获取目标听写内容对应的听写检测结果。

作为一种可选的实施方式，第一获取单元403用于根据书写过程，获取目标听写内容对应的听写检测结果的方式具体为：

第一获取单元403，用于解析书写过程，以获得书写形态和笔尖运动参数；判断书写形态是否与指定的形态相匹配；若书写形态与指定的形态相匹配，分析笔尖运动参数以获取书写笔顺；判断书写笔顺与是否与指定的笔顺相匹配；若书写笔顺与指定的笔顺相匹配，确定目标听写内容对应的听写检测结果为正确。

可见，实施本实施方式，电子设备结合书写形态和书写笔顺来确定听写检测结果，使得该听写检测结果能够更全面的反应用户书写的目标听写内容的准确性。

作为一种可选的实施方式，当听写检测结果指示目标听写内容为正确内容，且上述听写音频片段为英语音频，目标听写内容为至少一个英语单词组成的内容时，第一获取单元403，还用于在根据书写过程，获取目标听写内容对应的听写检测结果之后，输出翻译提示信息，以提示用户翻译该目标听写内容；获取用户反馈的翻译内容，并记录反馈时间；获取翻译内容与预设的翻译内容的匹配度，并根据匹配度以及预设的匹配度权重获取第一翻译分数；根据反馈时间以及预设的时间权重获取第二翻译分数；将第一翻译分数与第二翻译分数的和作为翻译分数。

进一步可选的，第一获取单元403，还用于在将第一翻译分数与第二翻译分数的和作为翻译分数之后，还可以包括以下步骤之后，确定目标听写内容的翻译难度，并根据翻译分数和翻译难度确定出用户的翻译水平等级；将用户当前所处地理区域对应的区域标识、翻译水平等级以及用户的用户账号发送至管理平台，以使该管理平台根据翻译水平等级从当前所处地理区域中确定出目标好友；其中，用户的翻译水平等级与目标好友的翻译水平等级范围相匹配；获取管理平台发送的包括目标好友的社交账号的推荐信息。

可见，实施本实施方式，电子设备还可以获取用户的翻译水平等级，并使管理平台根据该翻译水平等级为用户推荐适合的目标好友，有利于进一步提升用户的翻译水平，并扩大用户的社交圈，提升用户体验。

可见，实施图4所描述的电子设备，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。

实施例五

请参阅图5，图5是本发明实施例公开的另一种电子设备的结构示意图。其中，图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较，图5所示的电子设备中：

第一获取单元403用于根据书写过程，获取目标听写内容对应的听写检测结果的方式具体为：

第一获取单元403，用于解析书写过程，以获得依次书写的各个简谱音符；根据各个简谱音符的书写顺序，将各个简谱音符进行排序，以获得书写的简谱音符串；判断书写的简谱音符串与听写音频片段对应的标准的简谱音符串是否相同，若相同，确定目标听写内容对应的听写检测结果为正确；其中，目标听写内容属于音乐简谱；

图5所示的电子设备还可以包括：

第一输出单元404，用于在确定目标听写内容对应的听写检测结果为正确之后，在显示屏上输出指定的虚拟乐器；

作为一种可选的实施方式，第一输出单元404，还用于在确定目标听写内容对应的听写检测结果为正确之后，在显示屏上输出指定的虚拟乐器之前，检测是否接收到用户选择虚拟乐器的选择信息，该选择信息中包含目标虚拟乐器的信息，该选择信息的形式可以是语音形式、文字形式或手势形式；若是，在显示屏上输出目标虚拟乐器；若否，第一输出单元404执行在显示屏上输出指定的虚拟乐器的步骤。

进一步可选的，第一输出单元404用于在确定目标听写内容对应的听写检测结果为正确之后，在显示屏上输出指定的虚拟乐器的方式具体可以为：

第一输出单元404，用于根据用户的登陆账号获知用户的常用乐器，根据该常用乐器确定指定的虚拟乐器，并在显示屏上输出指定的虚拟乐器。

可见实施本发明实施例，用户可以根据自身需求选择虚拟乐器；此外，还能够根据用户的常用乐器确定指定的虚拟乐器，能够提升用户体验。

检测单元405，用于检测在虚拟乐器上弹奏输入的弹奏音频；

校验单元406，用于将弹奏音频与听写音频片段进行校验，以获得弹奏音频对应的弹奏检测结果。

可见，实施图5所描述的电子设备，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。此外，当听写内容属于音乐简谱时，电子设备输出虚拟乐器以供用户进行弹奏，理论结合实践，能够辅助用户有效掌握乐理。

实施例六

请参阅图6，图6是本发明实施例公开的另一种电子设备的结构示意图。其中，图6所示的电子设备是由图5所示的电子设备进行优化得到的。与图5所示的电子设备相比较，图6所示的电子设备还可以包括：

第二输出单元407，用于在根据书写过程，获取目标听写内容对应的听写检测结果之后，若目标听写内容属于英语科目，输出阅读提示信息以提示用户跟读目标听写内容；

第二获取单元408，用于获取用户跟读目标听写内容的音频；

第二获取单元408，还用于根据音频获取用户的发音检测结果；

第二获取单元408，还用于根据听写检测结果和发音检测结果获取用户的听说水平等级；

发送单元409，用于将用户当前所处地理区域对应的区域标识、听说水平等级以及用户的用户账号发送至管理平台，以使管理平台根据听说水平等级从当前所处地理区域中确定出目标英语交流群；其中，听说水平等级与目标英语交流群的听说水平等级范围相匹配；

第二获取单元408，还用于获取管理平台发送的包括目标英语交流群的群账号的入群推荐信息。

作为一种可选的实施方式，图5所示的电子设备还可以包括：

第二监测单元410，用于在控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域之后，通过指定的拍摄模组监测用户的左眼与书写区域所在平面的第一垂直距离、以及用户的右眼与书写区域所在平面的第二垂直距离；

第三输出单元411，用于在第一垂直距离小于指定的第一距离阈值时，输出姿势纠正提醒信息以提醒用户调整书写姿势；

第三输出单元411，还用于在第二垂直距离小于第一距离阈值时，输出姿势纠正提醒信息；

第三输出单元411，还用于在第一垂直距离与第二垂直距离的差值大于指定的第二距离阈值时，输出姿势纠正提醒信息。

可见，实施本实施方式，电子设备通过实时监测用户的眼睛到书写区域所在平面的距离来检测用户的书写姿势，有利于辅助用户养成良好的书写习惯，进而保护视力。

作为一种可选的实施方式，上述电子设备还可以包括图6未展示的以下单元：

第三获取单元，用于获取当前环境的亮度；

第三获取单元，还用于在当前环境的亮度低于预设的亮度阈值时，获取当前位置；

拍摄单元，用于在当前位置位于预设的建筑物内时，通过指定的拍摄模组拍摄当前环境的环境图像；

确定单元，用于根据环境图像确定出目标灯具；

开启单元，用于开启智能遥控模块，以通过智能遥控模块开启目标灯具。

可见，实施本实施方式，若当前所处的听写环境较暗，且当前位置位于预设的建筑物内，电子设备能够智能遥控开启目标灯具以增大当前环境的亮度，为用户提供适宜的听写环境亮度，保护用户视力，进而提升用户体验。

可见，实施图6所描述的电子设备，电子设备通过变焦拍摄模组自动调整拍摄区域大小，使得书写区域位于拍摄区域内，能够实时监测书写区域内用户书写目标听写内容的书写过程，无需用户在听写过程中调整纸张位置，能够提升用户体验。此外，若目标听写内容属于英语科目，电子设备还可以获取用户的听说水平等级，并使管理平台根据该听说水平等级为用户推荐适合的英语交流群，有利于进一步提升用户的听说水平。此外，电子设备通过实时监测用户的眼睛到书写区域所在平面的距离来检测用户的书写姿势，有利于辅助用户养成良好的书写习惯，进而保护视力。

实施例七

请参阅图7，图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示，该电子设备可以包括：

存储有可执行程序代码的存储器701；

与存储器701耦合的处理器702；

其中，处理器702调用存储器701中存储的可执行程序代码，执行图1～图3任意一种听写实时检测的方法。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1～图3任意一种听写实时检测的方法。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台，该应用发布平台用于发布计算机程序产品，其中，当上述计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种听写实时检测的方法及电子设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种听写实时检测的方法，其特征在于，所述方法包括：

在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，所述书写区域位于所述目标拍摄区域内；其中，所述变焦处理包括改变所述变焦拍摄模组中镜头的焦距，或者，改变所述变焦拍摄模组中镜头的视角；

通过所述变焦拍摄模组监测用户根据听写音频片段在所述书写区域内书写目标听写内容的书写过程；

根据所述书写过程，获取所述目标听写内容对应的听写检测结果；

当所述听写检测结果指示所述目标听写内容为正确内容，且所述听写音频片段为英语音频，所述目标听写内容包含至少一个英语单词组成的内容时，输出翻译提示信息，所述翻译提示信息用于提示用户翻译所述目标听写内容；获取用户反馈的翻译内容，并记录反馈时间；获取所述翻译内容与预设的翻译内容的匹配度，并根据所述匹配度以及预设的匹配度权重获取第一翻译分数；根据所述反馈时间以及预设的时间权重获取第二翻译分数；将所述第一翻译分数与所述第二翻译分数的和作为翻译分数；

确定所述目标听写内容的翻译难度，并根据所述翻译分数和所述翻译难度确定出用户的翻译水平等级；将用户当前所处地理区域对应的区域标识、所述翻译水平等级以及用户的用户账号发送至管理平台，以使该管理平台根据翻译水平等级从当前所处地理区域中确定出目标好友，其中，所述用户的翻译水平等级与所述目标好友的翻译水平等级范围相匹配；获取所述管理平台发送的包括所述目标好友的社交账号的推荐信息。

2.根据权利要求1所述的方法，其特征在于，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果，包括：

解析所述书写过程，以获得书写形态和笔尖运动参数；

判断所述书写形态是否与指定的形态相匹配；

若所述书写形态与所述指定的形态相匹配，分析所述笔尖运动参数以获取书写笔顺；

判断所述书写笔顺与是否与指定的笔顺相匹配；

若所述书写笔顺与所述指定的笔顺相匹配，确定所述目标听写内容对应的听写检测结果为正确。

3.根据权利要求1所述的方法，其特征在于，所述目标听写内容属于音乐简谱，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果，包括：

解析所述书写过程，以获得依次书写的各个简谱音符；

根据所述各个简谱音符的书写顺序，将所述各个简谱音符进行排序，以获得书写的简谱音符串；

判断所述书写的简谱音符串与所述听写音频片段对应的标准的简谱音符串是否相同，若相同，确定所述目标听写内容对应的听写检测结果为正确；

所述确定所述目标听写内容对应的听写检测结果为正确之后，所述方法还包括：

在显示屏上输出指定的虚拟乐器；

检测在所述虚拟乐器上弹奏输入的弹奏音频；

将所述弹奏音频与所述听写音频片段进行校验，以获得所述弹奏音频对应的弹奏检测结果。

4.根据权利要求1所述的方法，其特征在于，所述根据所述书写过程，获取所述目标听写内容对应的听写检测结果之后，所述方法还包括：

若所述目标听写内容属于英语科目，输出阅读提示信息以提示所述用户跟读所述目标听写内容；

获取所述用户跟读所述目标听写内容的音频；

根据所述音频获取所述用户的发音检测结果；

根据所述听写检测结果和所述发音检测结果获取所述用户的听说水平等级；

将所述用户当前所处地理区域对应的区域标识、所述听说水平等级以及所述用户的用户账号发送至管理平台，以使所述管理平台根据所述听说水平等级从所述当前所处地理区域中确定出目标英语交流群；其中，所述听说水平等级与所述目标英语交流群的听说水平等级范围相匹配；

获取所述管理平台发送的包括所述目标英语交流群的群账号的入群推荐信息。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域之后，所述方法还包括：

通过指定的拍摄模组监测所述用户的左眼与所述书写区域所在平面的第一垂直距离、以及所述用户的右眼与所述书写区域所在平面的第二垂直距离；

当所述第一垂直距离小于指定的第一距离阈值时，输出姿势纠正提醒信息以提醒所述用户调整书写姿势；

或，当所述第二垂直距离小于所述第一距离阈值时，输出所述姿势纠正提醒信息；

或，当所述第一垂直距离与所述第二垂直距离的差值大于指定的第二距离阈值时，输出所述姿势纠正提醒信息。

6.一种电子设备，其特征在于，所述电子设备包括：

变焦单元，用于在听写过程中，若检测到书写区域不在拍摄区域内，控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域，所述书写区域位于所述目标拍摄区域内；其中，所述变焦处理包括改变所述变焦拍摄模组中镜头的焦距，或者，改变所述变焦拍摄模组中镜头的视角；

第一监测单元，用于通过所述变焦拍摄模组监测用户根据听写音频片段在所述书写区域内书写目标听写内容的书写过程；

第一获取单元，用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果；

所述第一获取单元，还用于当所述听写检测结果指示所述目标听写内容为正确内容，且所述听写音频片段为英语音频，所述目标听写内容包含至少一个英语单词组成的内容时，输出翻译提示信息，所述翻译提示信息用于提示用户翻译所述目标听写内容；获取用户反馈的翻译内容，并记录反馈时间；获取所述翻译内容与预设的翻译内容的匹配度，并根据所述匹配度以及预设的匹配度权重获取第一翻译分数；根据所述反馈时间以及预设的时间权重获取第二翻译分数；将所述第一翻译分数与所述第二翻译分数的和作为翻译分数；确定所述目标听写内容的翻译难度，并根据所述翻译分数和所述翻译难度确定出用户的翻译水平等级；将用户当前所处地理区域对应的区域标识、所述翻译水平等级以及用户的用户账号发送至管理平台，以使该管理平台根据翻译水平等级从当前所处地理区域中确定出目标好友，其中，所述用户的翻译水平等级与所述目标好友的翻译水平等级范围相匹配；获取所述管理平台发送的包括所述目标好友的社交账号的推荐信息。

7.根据权利要求6所述的电子设备，其特征在于，所述第一获取单元用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果的方式具体为：

所述第一获取单元，用于解析所述书写过程，以获得书写形态和笔尖运动参数；判断所述书写形态是否与指定的形态相匹配；若所述书写形态与所述指定的形态相匹配，分析所述笔尖运动参数以获取书写笔顺；判断所述书写笔顺与是否与指定的笔顺相匹配；若所述书写笔顺与所述指定的笔顺相匹配，确定所述目标听写内容对应的听写检测结果为正确。

8.根据权利要求6所述的电子设备，其特征在于，所述第一获取单元用于根据所述书写过程，获取所述目标听写内容对应的听写检测结果的方式具体为：

所述第一获取单元，用于解析所述书写过程，以获得依次书写的各个简谱音符；根据所述各个简谱音符的书写顺序，将所述各个简谱音符进行排序，以获得书写的简谱音符串；判断所述书写的简谱音符串与所述听写音频片段对应的标准的简谱音符串是否相同，若相同，确定所述目标听写内容对应的听写检测结果为正确；其中，所述目标听写内容属于音乐简谱；

所述电子设备还包括：

第一输出单元，用于在确定所述目标听写内容对应的听写检测结果为正确之后，在显示屏上输出指定的虚拟乐器；

检测单元，用于检测在所述虚拟乐器上弹奏输入的弹奏音频；

校验单元，用于将所述弹奏音频与所述听写音频片段进行校验，以获得所述弹奏音频对应的弹奏检测结果。

9.根据权利要求6所述的电子设备，其特征在于，所述电子设备还包括：

第二输出单元，用于在根据所述书写过程，获取所述目标听写内容对应的听写检测结果之后，若所述目标听写内容属于英语科目，输出阅读提示信息以提示所述用户跟读所述目标听写内容；

第二获取单元，用于获取所述用户跟读所述目标听写内容的音频；

所述第二获取单元，还用于根据所述音频获取所述用户的发音检测结果；

所述第二获取单元，还用于根据所述听写检测结果和所述发音检测结果获取所述用户的听说水平等级；

发送单元，用于将所述用户当前所处地理区域对应的区域标识、所述听说水平等级以及所述用户的用户账号发送至管理平台，以使所述管理平台根据所述听说水平等级从所述当前所处地理区域中确定出目标英语交流群；其中，所述听说水平等级与所述目标英语交流群的听说水平等级范围相匹配；

所述第二获取单元，还用于获取所述管理平台发送的包括所述目标英语交流群的群账号的入群推荐信息。

10.根据权利要求6至9任一项所述的电子设备，其特征在于，所述电子设备还包括：

第二监测单元，用于在控制变焦拍摄模组进行变焦处理以获得扩大的目标拍摄区域之后，通过指定的拍摄模组监测所述用户的左眼与所述书写区域所在平面的第一垂直距离、以及所述用户的右眼与所述书写区域所在平面的第二垂直距离；

第三输出单元，用于在所述第一垂直距离小于指定的第一距离阈值时，输出姿势纠正提醒信息以提醒所述用户调整书写姿势；

所述第三输出单元，还用于在所述第二垂直距离小于所述第一距离阈值时，输出所述姿势纠正提醒信息；

所述第三输出单元，还用于在所述第一垂直距离与所述第二垂直距离的差值大于指定的第二距离阈值时，输出所述姿势纠正提醒信息。

Images