CN113038053A - 一种数据合成方法、装置、电子设备以及存储介质 - Google Patents

一种数据合成方法、装置、电子设备以及存储介质 Download PDF

Info

Publication number
CN113038053A
CN113038053A CN202110338986.3A CN202110338986A CN113038053A CN 113038053 A CN113038053 A CN 113038053A CN 202110338986 A CN202110338986 A CN 202110338986A CN 113038053 A CN113038053 A CN 113038053A
Authority
CN
China
Prior art keywords
data
target
fused
background
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110338986.3A
Other languages
English (en)
Inventor
董超宏
张博慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Lexuebang Network Technology Co Ltd
Original Assignee
Beijing Lexuebang Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Lexuebang Network Technology Co Ltd filed Critical Beijing Lexuebang Network Technology Co Ltd
Priority to CN202110338986.3A priority Critical patent/CN113038053A/zh
Publication of CN113038053A publication Critical patent/CN113038053A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本公开提供了一种数据合成方法、装置、电子设备以及存储介质,其中,该方法包括:在多个学习资源中确定目标学习资源;响应于针对目标学习资源的录制指令,采集用户的目标录制数据;确定目标学习资源的待融合背景数据;将待融合背景数据和目标录制数据进行合成,合成得到针对目标学习资源的目标录制文件。本公开实施例通过先对目标录制数据进行录制,再将录制完成的目标录制数据和待融合背景数据进行融合的方式,可以提高目标录制文件的录制质量,提高目标录制文件的录制成功率,从而进一步减少用户的录制操作,以提高用户录制体验。

Description

一种数据合成方法、装置、电子设备以及存储介质
技术领域
本公开涉及计算机技术领域,具体而言,涉及一种数据合成方法、装置、电子设备以及存储介质。
背景技术
目前,随着智能终端和多媒体技术的快速发展,越来越多的多媒体教学应用程序出现在用户的视野中,其中,朗读配乐类教学应用程序也开始逐渐在用户中被广泛使用,该朗读配乐类教学应用程序可以辅助用户进行发音练习。
然而,在现有的朗读配乐类教学应用程序中,在用户朗读相应的文本时,该应用程序一般是在用户朗读该文本时,同时播放相应的背景音频文件,从而在录制用户所朗读的文本时,将同时播放的背景音频文件和用户所朗读的音频数据一起进行采集。若采集用户所朗读的音频数据时,该应用程序未播放相应的背景音频文件,则将出现未录入背景音乐的情况。例如,当用户通过耳机朗读对应的文本时,会导致背景音频文件无法被终端设备捕捉到,此时,将无法自动匹配到相对应的背景音频文件,也无法将该背景音频文件和用户朗读过程中所采集的音频文件进行合成,从而影响了用户的学习体验。
发明内容
本公开实施例至少提供一种数据合成方法、装置、电子设备以及存储介质。
第一方面,本公开实施例提供了一种数据合成方法,包括:在多个学习资源中确定目标学习资源;响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
结合第一方面,本公开实施例提供了第一方面的第一种可能的实施方式,其中,所述确定所述目标学习资源的待融合背景数据,包括:确定所述目标学习资源的待融合背景数据的数据标识信息,其中,所述数据标识信息用于指示所述待融合背景数据的存储位置;查找与所述数据标识信息相匹配的数据,并将所述相匹配的数据确定为所述待融合背景数据。
结合第一方面,本公开实施例提供了第一方面的第二种可能的实施方式,其中,所述将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,包括:确定所述待融合背景数据的数据标识信息;将所述数据标识信息和所述目标录制数据发送至服务器,以使所述服务器对所述待融合背景数据和所述目标录制数据进行合成,得到所述目标录制文件。
结合第一方面第一种可能的实施方式,本公开实施例提供了第一方面的第三种可能的实施方式,其中,所述目标学习资源中包含待朗读文本;所述将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,包括:在所述目标录制数据中确定所述用户对所述待朗读文本进行朗读的朗读时间段;确定所述目标录制数据中与所述朗读时间段相匹配的录制数据,并将所述相匹配的录制数据确定为待融合录制数据;将所述待融合录制数据和所述待融合背景数据进行合成,得到所述目标录制文件。
结合第一方面,本公开实施例提供了第一方面的第四种可能的实施方式,其中,所述目标录制数据包括:音频录制数据;所述方法还包括:获取所述音频录制数据所对应的标准音频数据;将所述音频录制数据和所述标准音频数据进行对比,得到所述用户针对所述目标学习资源的评分结果。
结合第一方面第一种可能的实施方式,本公开实施例提供了第一方面的第五种可能的实施方式,其中,所述方法还包括:生成用于提示用户所述评分结果的提示信息,并按照预设展示方式展示所述提示信息,其中,所述提示信息包括:文字提示信息、图片提示信息、动画提示信息、音频提示信息中的至少一种。
结合第一方面,本公开实施例提供了第一方面的第六种可能的实施方式,其中,所述方法还包括:在合成得到针对所述目标学习资源的目标录制文件之后,响应于所述用户针对所述目标录制文件的分享指令,将所述目标录制文件上传至待分享平台中进行分享。
结合第一方面,本公开实施例提供了第一方面的第七种可能的实施方式,其中,所述确定所述目标学习资源的待融合背景数据,还包括:确定所述目标学习资源的特征信息,并在数据库所包含的多种类型的背景数据中确定与所述特征信息相匹配的背景数据作为所述待融合背景数据;或者,确定所述用户的属性信息;在数据库所包含的多种类型的背景数据中确定与所述属性信息相匹配的背景数据作为所述待融合背景数据。
第二方面,本公开实施例还提供一种数据合成装置,其特征在于,包括:第一确定模块:用于在多个学习资源中确定目标学习资源;采集模块:用于响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;第二确定模块:用于确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;合成模块:用于将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
第三方面,本公开实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
第四方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
本公开实施例提供的数据合成方法、装置、电子设备以及存储介质,在本公开实施例中,首先对用户录制目标学习资源时的音视频数据进行采集,得到目标录制数据;之后,确定目标学习资源的待融合背景数据,进而将录制完成的目标录制数据和该待融合背景数据进行融合得到目标录制文件。通过上述描述可知,本公开通过先对目标录制数据进行录制,再将录制完成的目标录制数据和待融合背景数据进行融合的方式,可以提高目标录制文件的录制质量,提高目标录制文件的录制成功率,从而进一步减少用户的录制操作,以提高用户录制体验。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种数据合成方法的流程图;
图2示出了本公开实施例所提供的数据合成方法中,目标学习资源中的学习资源播放结束后的显示界面图;
图3示出了本公开实施例所提供的数据合成方法中,展示针对目标学习资源的评分结果的显示界面图;
图4示出了本公开实施例所提供的一种数据合成装置的示意图;
图5示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
经研究发现,在现有的朗读配乐类教学应用程序中,在用户朗读相应的文本时,该应用程序一般是在用户朗读该文本时,同时播放相应的背景音频文件,从而在录制用户所朗读的文本时,将同时播放的背景音频文件和用户所朗读的音频数据一起进行采集。若采集用户所朗读的音频数据时,该应用程序未播放相应的背景音频文件,则将出现未录入背景音乐的情况。
基于上述研究,本公开提供了一种数据合成方法、装置、电子设备以及存储介质,在本公开实施例中,首先对用户录制目标学习资源时的音视频数据进行采集,得到目标录制数据;之后,确定目标学习资源的待融合背景数据,进而将录制完成的目标录制数据和该待融合背景数据进行融合得到目标录制文件。通过上述描述可知,本公开通过先对目标录制数据进行录制,再将录制完成的目标录制数据和待融合背景数据进行融合的方式,可以提高目标录制文件的录制质量,提高目标录制文件的录制成功率,从而进一步减少用户的录制操作,以提高用户录制体验。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种数据合成方法进行详细介绍,本公开实施例所提供的数据合成方法的执行主体一般为具有一定计算能力的电子设备,该电子设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal Digital Assistant,PDA)、手持设备、计算设备、车载设备、可穿戴设备等。在一些可能的实现方式中,该数据合成方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
本公开实施例所提供的数据合成方法可适用于在线教育类客户端、互联网教育类客户端,或者其他类型的客户端中。上述所描述的教育类客户端可以用来协助用户进行古诗词、古文、英文等的各种朗读背诵的客户端。上述所描述的教育类客户端还可以实现对指定社交类客户端的调用,其中,该社交类客户端为用户提供了相应的数据分享平台。上述所描述的教育类客户端可以通过调用该社交类客户端来实现在该社交类客户端的数据分享平台对该用户所录制的数据(即,下述所描述的目标录制文件)进行分享。
实施例一:
参见图1所示,为本公开实施例提供的一种数据合成方法的流程图,所述方法包括步骤S101~S107,其中:
S101:在多个学习资源中确定目标学习资源。
在上述所描述的教育类客户端中,预先创建了多个预设课程,比如,多个预设课程可以为语文课程、英语课程等。
通过上述描述可知,在本公开实施例中,可以按照学生所学习课程的种类(例如,语文,英语)创建多个预设课程,除此之外,还可以按照其他的数据维度创建上述多个预设课程,例如,唐诗、宋词、近现代诗歌等数据维度创建上述多个预设课程,其中,唐诗对应一个预设课程,宋词对应另外一个预设课程。
针对多个预设课程中的每个预设课程,对应包含相应的多种学习资源。例如,若上述预设课程为语文课程,则该语文课程所包含的学习资源可以为古诗词、《三字经》、《百家姓》等内容的资源。又例如,若上述预设课程为唐诗课程,则该唐诗课程所包含的学习资源为每一首唐诗的资源。
在本公开实施例中,用户可以在上述所描述的教育类客户端所提供的预设课程确定想要学习的课程,并在想要学习的课程所包含的多个学习资源中确定目标学习资源。
S103:响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据。
在本公开实施例中,在确定出目标学习资源之后,可以在该教育类客户端中对该目标学习资源进行播放,并在该目标学习资源播放结束后,开始执行录制目标录制数据的操作。
需要说明的是,在本公开实施例中,在播放目标学习资源时,可以设置目标学习资源的循环播放次数,例如,可以设置循环播放该目标学习资源2次,3次等,具体播放次数可以根据用户的实际需要来进行设定,本公开对此不作具体限定。
可以理解的是,在目标学习资源播放结束之后,用户还可以点击重新播放按钮,从而实现对该目标学习资源进行重新播放,如图2所示。
在一个可选的实施方式中,可以在目标学习资源播放结束之后,生成一个开始录制的提示音“准备开始录制啦”,并在该提示音播放结束之后,开始录制用户对目标学习资源中的文本进行朗读时的数据,从而得到目标录制数据。
在另一个可选的实施方式中,可以在目标学习资源播放结束之后,生成另外一个提示音“播放结束啦,点击录制开始按钮进行录制吧”。之后,教育类客户端就可以检测用户针对该录制按钮的点击操作,并在检测到该点击操作之后,开始录制用户对目标学习资源中的文本进行朗读时的数据,得到目标录制数据。
S105:确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种。
在本公开实施例中,预先为每个学习资源设置了对应的一种或多种背景数据,例如,针对任意一首古诗,为其设置了多种风格(比如,豪放、磅礴、动画、实物)的背景数据。
在确定出目标学习资源之后,可以确定目标学习资源所对应的待融合背景数据,其中,该待融合背景数据包括背景图片数据、背景音频数据以及背景视频数据中的至少一种用于和目标录制数据进行合成的背景数据。在本公开实施例中,可以根据该目标学习资源的资源标识信息,在数据库中查找该目标学习资源所对应的待融合背景数据。
在一些可能的实施方式中,待融合背景数据还可以和目标学习资源的具体内容相适应,例如,假设目标学习资源为古诗《悯农》,则对应的待融合背景数据可以为农耕的图片、PPT、动画、音乐或者视频等,视频还可以为动画或者实物,对此不做赘述。
S107:将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
在本公开实施例中,可以将上述待融合背景数据和目标录制数据进行合成,从而得到目标录制文件。例如,上述目标录制数据为用户朗读古诗的音频录制数据时。在将确定出的待融合背景数据与该音频录制数据进行合成后,就可以得到目标录制文件。
在本公开实施例中,首先对用户录制目标学习资源时的音视频数据进行采集,得到目标录制数据;之后,确定目标学习资源的待融合背景数据,进而将录制完成的目标录制数据和该待融合背景数据进行融合得到目标录制文件。通过上述描述可知,本公开通过先对目标录制数据进行录制,再将录制完成的目标录制数据和待融合背景数据进行融合的方式,可以提高目标录制文件的录制质量,提高目标录制文件的录制成功率,从而进一步减少用户的录制操作,以提高用户录制体验。
在本公开实施例中,首先响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;并在采集到目标录制数据之后,确定目标学习资源的待融合背景数据,并将该待融合背景数据和目标录制数据进行合成,得到目标录制文件。
在一个可选的实施方式中,在上述目标录制数据包括音频录制数据的情况下,在采集到目标录制数据之后,本公开所提供的方法还可以包括如下过程:
(1)、获取所述音频录制数据所对应的标准音频数据。
在本公开实施例中,在获取到上述音频录制数据后,可以将该音频录制数据和目标学习资源的资源标识信息发送至服务器,服务器根据该目标学习资源的资源标识信息在数据库中查找该音频录制数据所对应的标准音频数据。
(2)、将所述音频录制数据和所述标准音频数据进行对比,得到所述用户针对所述目标学习资源的评分结果。
在本公开实施例中,服务器在获取到该音频录制数据时,解析该音频录制数据中每个文字的声母和韵母音素,得到一个音素序列,其中,该音素序列里的每个音素子序列对应一个文字。然后,通过一个训练好的神经网络,将该音素序列和标准读音音素序列进行对比,得到用户在朗读目标学习资源时的评分结果,其中,该标准读音音素序列为通过标准音频数据所确定的包含该目标学习资源中所对应文本的标准读音音素的序列。
具体地,当目标学习资源所对应的文本为古诗时,对用户在朗读该古诗时的音频录制数据进行解析,得到一个音素序列,然后获取该古诗所对应的标准读音音素序列,将上述音素序列和标准读音音素序列进行对比,得到音频录制数据中每个文字的评分结果。然后,将该音频录制数据中每个文字的评分结果进行加权平均,得到用于表征用户针对该古诗学习效果的评分结果。
其中,该评分结果可以为百分制的数值,还可以星级评分(例如,不同星级评分对应不同数量的星星)。例如,评分结果为85,则对应星星的数量为4颗星;评分值为95分,则对应星星的数量为5颗星。
通过上述描述可知,在本公开实施例中,可以根据音频录制数据和该音频录制数据所对应的标准音频数据的对比结果,得到该用户在朗读目标学习资源中文本的评分结果,从而将用户的学习效果具象化,以便指导用户学习。
在本公开实施例中,在得到所述用户针对所述目标学习资源的评分结果后,还可以生成用于提示用户所述评分结果的提示信息,并按照预设展示方式展示所述提示信息,其中,所述提示信息包括:文字提示信息、图片提示信息、动画提示信息、音频提示信息中的至少一种。
在本公开实施例中,在得到上述评分结果之后,可以将该评分结果返回至客户端,并以预设展示方式在客户端的显示界面上展示该评分结果的提示信息。例如,将上述评分结果的百分制数值展示在显示屏幕上,或者将表示该评分结果的星星数量展示在显示屏幕上,具体展示方式如图3所示。
通过上述描述可知,在本公开实施例中,可以按照预设展示方式展示所述提示信息的方式,向用户展示针对目标学习资源的评分结果,使得用户能够更好的掌握学习重点以及学习过程中的不足,从而获得更好的学习效果。
在本公开的一个可选实施方式中,上述步骤S103,确定所述目标学习资源的待融合背景数据,具体包括如下过程:
S1031:确定所述目标学习资源的待融合背景数据的数据标识信息,其中,所述数据标识信息用于指示所述待融合背景数据的存储位置。
S1032:查找与所述数据标识信息相匹配的数据,并将所述相匹配的数据确定为所述待融合背景数据。
在本公开实施例中,可以根据确定出的目标学习资源,获取该目标学习资源所对应的待融合背景数据的数据标识信息,并根据该数据标识信息所指示的存储位置,在数据库中查找该待融合背景数据。
需要说明的是,针对每个目标学习资源可以预先为其设置多种类型的待融合背景数据。例如,除前述内容所述的根据目标学习资源的具体内容设置多种类型的待融合背景数据之外,还可以按照用户的属性设置多种类型的待融合背景数据,该属性可以为年龄、性别、地域、喜好等。
在确定出目标学习资源之后,可以确定出至少一种类型的待融合背景数据,并将至少一种类型的待融合背景数据的种类展示在客户端的显示界面上,供用户进行选择。
也即,在本公开实施例中,在将至少一种类型的待融合背景数据的种类展示在客户端的显示界面上,供用户进行选择时,还可以包括如下两种方式。
方式一:
确定所述目标学习资源的特征信息,并在数据库所包含的多种类型的背景数据中确定与所述特征信息相匹配的背景数据作为所述待融合背景数据。
在本公开实施例中,首先确定目标学习资源的特征信息,其中,该特征信息可以为该目标学习资源的标题、目标学习资源的序号、目标学习资源的其他基本属性,比如,作者,作者的生活年代,作者的标签(比如,诗人、政治家、哲学家、文学家)等信息。
例如,目标学习资源为诗词《望庐山瀑布》,此时,该目标学习资源的特征信息可以包括以下一种或多种:该诗词的题目“望庐山瀑布”、该诗词的序号“001”、该诗词的作者“李白”、该诗词所对应作者的生活年代“唐朝”、该诗词所对应作者的标签“诗仙”。在确定出该诗词的特征信息之后,就可以根据上述特征信息,在数据库所包含的多种类型的背景数据中确定与该特征信息相匹配的背景数据作为待融合背景数据。
假设,特征信息为该诗词的题目“望庐山瀑布”,在根据该特征信息确定待融合背景数据时,具体过程描述如下:
首先,在题目中提取关键词组,比如“瀑布”和/或“庐山”,之后,就可以根据关键词组“瀑布”和/或“庐山”在数据库所包含的多种类型的背景数据中确定与“瀑布”和/或“庐山”相匹配的背景数据作为待融合背景数据。
又假设,特征信息为该诗词的作者“李白”,在根据该特征信息确定待融合背景数据时,具体过程描述如下:
首先,在数据库所包含的多种类型的背景数据中确定预先为“李白”设定的背景数据,并将该背景数据作为待融合背景数据。
除此之外,目标学习资源的特征信息还可以为用户根据目标学习资源的资源内容预先设定的特征信息,本公开对此不作具体限定。
例如,目标学习资源为诗词《望庐山瀑布》,该诗词的内容为:日照香炉生紫烟,遥看瀑布挂前川。飞流直下三千尺,疑是银河落九天。此时,用户就可以根据该诗词的内容确定该目标学习资源的特征信息,比如,该特征信息可以为:瀑布、银河、香炉、紫烟等该诗词中的关键词。
在根据诗词内容确定出上述关键词之后,就可以将该关键词作为该目标学习资源的特征信息,并在数据库所包含的多种类型的背景数据中确定与该关键词相匹配的背景数据作为待融合背景数据。
当然,目标学习资源为诗词《望庐山瀑布》时,待融合背景数据还可为预先收录的针对该诗词的所有图音视频材料中的任一数据,图音视频材料可以自定义并制作的,也可为通过其他方式收录的,如购买,对此不做赘述。
方式二:
确定所述用户的属性信息,并在数据库所包含的多种类型的背景数据中确定与所述属性信息相匹配的背景数据作为所述待融合背景数据。
在本公开实施例中,还可以根据用户的属性信息对数据库中的背景数据进行分类。例如,上述属性信息可以为用户的年龄、性别、爱好、年级以及用户等级(例如,用户是否为该客户端的会员,相应的对应着两种不同的用户等级)等,上述每个属性信息都对应着不同的背景数据的文件。在判断出当前用户的属性信息之后,向用户推送和属性信息相对应的背景数据,以便用户确定出待融合背景数据。例如,若根据该用户选择过的待融合背景数据,确定出用户的爱好为古风,则向用户推送古风类型的背景数据。
通过上述描述可知,在本公开实施例中,可以根据不同用户的不同属性信息确定出对应的待融合背景数据,更加贴合了用户在实际使用中的使用需求,增加了选择的裕度,提高了用户的操作体验。
在本公开实施例中,步骤S105,将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,具体包括如下过程:
(1)、确定所述待融合背景数据的数据标识信息。
(2)、将所述数据标识信息和所述目标录制数据发送至服务器,以使所述服务器对所述待融合背景数据和所述目标录制数据进行合成,得到所述目标录制文件。
在另一种可选的实施方式中,还可以在确定出待融合背景数据的数据标识信息后,将该数据标识信息和目标录制数据发送至服务器,服务器根据上述数据标识信息,获取相应的待融合背景数据,并将获取到的待融合背景数据和目标录制数据进行合成,得到目标录制文件。
在本公开实施例中,若所述目标学习资源中包含待朗读文本;上述步骤将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,具体包括如下过程:
(1)、在所述目标录制数据中确定所述用户对所述待朗读文本进行朗读的朗读时间段。
在本公开实施例中,可以通过一个训练好的神经网络对目标录制数据进行解析,从而解析出用户对待朗读文本进行朗读的朗读时间段。具体地,该神经网络可以识别该目标录制数据中的音频录制数据,确定该音频录制数据中用户对待朗读文本进行朗读的朗读时间段。若该目标录制数据中只包含视频录制数据,则对该视频录制数据进行解析,得到其中的音频录制数据,然后,确定该音频录制数据中用户对待朗读文本进行朗读的朗读时间段。
(2)、确定所述目标录制数据中与所述朗读时间段相匹配的录制数据,并将所述相匹配的录制数据确定为待融合录制数据。
在本公开实施例中,在确定出朗读时间段之后,就可以对目标录制数据进行截取,截取得到该朗读时间段所对应的录制数据(即,上述相匹配的录制数据),进而将该录制数据确定为待融合录制数据。
(3)、将所述待融合录制数据和所述待融合背景数据进行合成,得到所述目标录制文件。
在本公开实施例中,将待融合录制数据后和待融合背景数据进行合成之后,就可以得到目标录制文件。
例如,上述目标学习资源中所包含的待朗读文本为古诗,则目标录制数据为用户朗读该古诗时的数据。其中,若该目标录制数据的时长为1分06秒,用户朗读该古诗的开始时间为第23秒,结束时间为第51秒,则确定该目标录制数据中第23秒到第52秒之间的数据为待融合录制数据。
通过上述描述可知,在本公开实施例中,可以自动在目标录制数据中截取待融合录制数据,并将待融合录制数据和待融合背景数据进行合成,得到目标录制文件的方式,能够提高目标录制数据和待融合背景数据之间的契合度,从而舍弃目标录制数据中的冗余数据,进而得到契合效果更好的目标录制文件。
在本公开实施例中,在合成得到针对所述目标学习资源的目标录制文件之后,所述方法还包括如下过程:
在合成得到针对所述目标学习资源的目标录制文件之后,响应于所述用户针对所述目标录制文件的分享指令,将所述目标录制文件上传至待分享平台中进行分享。
一种可能的实施方式中,服务器对目标录制数据和待融合背景数据进行合成得到目标录制文件之后,可以将该目标录制文件返回至客户端。客户端可以根据用户的分享指令,将该目标录制文件分享至社交平台。其中,该社交平台还可以为该客户端所在终端设备中所安装的其他社交客户端的分享平台。
需要说明的是,用户还可以对分享到分享平台中的浏览权限进行设置,例如,若用户将该目标录制文件设置为“仅自己可见”,则只有上传该目标录制文件的用户可以在该分享平台上对该目标录制文件进行预览。若用户将该目标录制文件设置为“全部用户可见”,则任意使用该社交客户端的分享平台的用户都能对该目标录制文件进行预览。
综上,本公开实施例采用将用户的目标录制数据和该目标录制数据所对应的待融合背景数据进行合成,合成包括音视频的目标录制文件的方式,与现有技术中同时将背景音频文件和用户所朗读的音频数据一起进行采集的方式相比,本公开实施例所提供的方法避免了客户端的背景音乐录入失败的情况,提高了用户的操作体验。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与数据合成方法对应的数据合成装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述数据合成方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
实施例二:
参照图4所示,为本公开实施例提供的一种数据合成装置的示意图,所述装置包括:第一确定模块、采集模块、第二确定模块、合成模块;其中,
第一确定模块:用于在多个学习资源中确定目标学习资源;
采集模块:用于响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;
第二确定模块:用于确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;
合成模块:用于将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
本公开实施例通过将用户的目标录制数据和该目标录制数据所对应的待融合背景数据进行合成的方式,得到目标录制文件,避免了客户端的背景音乐录入失败的情况,同时还可以匹配待融合背景数据中的视频数据,合成包括音视频的目标录制文件,提高了用户的操作体验。
一种可能的实施方式中,第二确定模块,用于:确定所述目标学习资源的待融合背景数据的数据标识信息,其中,所述数据标识信息用于指示所述待融合背景数据的存储位置;查找与所述数据标识信息相匹配的数据,并将所述相匹配的数据确定为所述待融合背景数据。
一种可能的实施方式中,合成模块,用于:确定所述待融合背景数据的数据标识信息;将所述数据标识信息和所述目标录制数据发送至服务器,以使所述服务器对所述待融合背景数据和所述目标录制数据进行合成,得到所述目标录制文件。
一种可能的实施方式中,合成模块,还用于:所述目标学习资源中包含待朗读文本;所述将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,包括:在所述目标录制数据中确定所述用户对所述待朗读文本进行朗读的朗读时间段;确定所述目标录制数据中与所述朗读时间段相匹配的录制数据,并将所述相匹配的录制数据确定为待融合录制数据;将所述待融合录制数据和所述待融合背景数据进行合成,得到所述目标录制文件。
一种可能的实施方式中,该装置还用于:所述目标录制数据包括:音频录制数据;获取所述音频录制数据所对应的标准音频数据;将所述音频录制数据和所述标准音频数据进行对比,得到所述用户针对所述目标学习资源的评分结果。
一种可能的实施方式中,该装置还用于:生成用于提示用户所述评分结果的提示信息,并按照预设展示方式展示所述提示信息,其中,所述提示信息包括:文字提示信息、图片提示信息、动画提示信息、音频提示信息中的至少一种。
一种可能的实施方式中,该装置还用于:在合成得到针对所述目标学习资源的目标录制文件之后,响应于所述用户针对所述目标录制文件的分享指令,将所述目标录制文件上传至待分享平台中进行分享。
一种可能的实施方式中,第二确定模块,还用于:确定所述目标学习资源的特征信息,并在数据库所包含的多种类型的背景数据中确定与所述特征信息相匹配的背景数据作为所述待融合背景数据;或者,确定所述用户的属性信息,并在数据库所包含的多种类型的背景数据中确定与所述属性信息相匹配的背景数据作为所述待融合背景数据。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
实施例三:
对应于图1中的数据合成方法,本公开实施例还提供了一种电子设备500,如图5所示,为本公开实施例提供的电子设备500结构示意图,包括:
处理器51、存储器52、和总线53;存储器52用于存储执行指令,包括内存521和外部存储器522;这里的内存521也称内存储器,用于暂时存放处理器51中的运算数据,以及与硬盘等外部存储器522交换的数据,处理器51通过内存521与外部存储器522进行数据交换,当所述电子设备500运行时,所述处理器51与所述存储器52之间通过总线53通信,使得所述处理器51执行以下指令:
在多个学习资源中确定目标学习资源;响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的数据合成方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的数据合成方法的步骤,具体可参见上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (11)

1.一种数据合成方法,其特征在于,包括:
在多个学习资源中确定目标学习资源;
响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;
确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;
将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
2.根据权利要求1所述的方法,其特征在于,所述确定所述目标学习资源的待融合背景数据,包括:
确定所述目标学习资源的待融合背景数据的数据标识信息,其中,所述数据标识信息用于指示所述待融合背景数据的存储位置;
查找与所述数据标识信息相匹配的数据,并将所述相匹配的数据确定为所述待融合背景数据。
3.根据权利要求1所述的方法,其特征在于,所述将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,包括:
确定所述待融合背景数据的数据标识信息;
将所述数据标识信息和所述目标录制数据发送至服务器,以使所述服务器对所述待融合背景数据和所述目标录制数据进行合成,得到所述目标录制文件。
4.根据权利要求3所述的方法,其特征在于,所述目标学习资源中包含待朗读文本;
所述将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件,包括:
在所述目标录制数据中确定所述用户对所述待朗读文本进行朗读的朗读时间段;
确定所述目标录制数据中与所述朗读时间段相匹配的录制数据,并将所述相匹配的录制数据确定为待融合录制数据;
将所述待融合录制数据和所述待融合背景数据进行合成,得到所述目标录制文件。
5.根据权利要求1所述的方法,其特征在于,所述目标录制数据包括:音频录制数据;所述方法还包括:
获取所述音频录制数据所对应的标准音频数据;
将所述音频录制数据和所述标准音频数据进行对比,得到所述用户针对所述目标学习资源的评分结果。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
生成用于提示用户所述评分结果的提示信息,并按照预设展示方式展示所述提示信息,其中,所述提示信息包括:文字提示信息、图片提示信息、动画提示信息、音频提示信息中的至少一种。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在合成得到针对所述目标学习资源的目标录制文件之后,响应于所述用户针对所述目标录制文件的分享指令,将所述目标录制文件上传至待分享平台中进行分享。
8.根据权利要求1所述的方法,其特征在于,所述确定所述目标学习资源的待融合背景数据,还包括:
确定所述目标学习资源的特征信息,并在数据库所包含的多种类型的背景数据中确定与所述特征信息相匹配的背景数据作为所述待融合背景数据;或者,
确定所述用户的属性信息,并在数据库所包含的多种类型的背景数据中确定与所述属性信息相匹配的背景数据作为所述待融合背景数据。
9.一种数据合成装置,其特征在于,包括:
第一确定模块:用于在多个学习资源中确定目标学习资源;
采集模块:用于响应于针对所述目标学习资源的录制指令,采集用户的目标录制数据;其中,所述目标录制数据中包含所述用户录制所述目标学习资源时的音频录制数据和/或视频录制数据;
第二确定模块:用于确定所述目标学习资源的待融合背景数据,其中,所述待融合背景数据包括:背景图片数据、背景音频数据以及背景视频数据中的至少一种;
合成模块:用于将所述待融合背景数据和所述目标录制数据进行合成,合成得到针对所述目标学习资源的目标录制文件。
10.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至8任意一项所述的数据合成方法的步骤。
11.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至8任意一项所述的数据合成方法的步骤。
CN202110338986.3A 2021-03-30 2021-03-30 一种数据合成方法、装置、电子设备以及存储介质 Pending CN113038053A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110338986.3A CN113038053A (zh) 2021-03-30 2021-03-30 一种数据合成方法、装置、电子设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110338986.3A CN113038053A (zh) 2021-03-30 2021-03-30 一种数据合成方法、装置、电子设备以及存储介质

Publications (1)

Publication Number Publication Date
CN113038053A true CN113038053A (zh) 2021-06-25

Family

ID=76452916

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110338986.3A Pending CN113038053A (zh) 2021-03-30 2021-03-30 一种数据合成方法、装置、电子设备以及存储介质

Country Status (1)

Country Link
CN (1) CN113038053A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114996512A (zh) * 2022-04-28 2022-09-02 北京达佳互联信息技术有限公司 朗读视频生成方法、装置、电子设备、介质及程序产品
CN117495197A (zh) * 2023-11-28 2024-02-02 北京大学人民医院 一种临床医学见习教学过程管理方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965757A (zh) * 2018-08-02 2018-12-07 广州酷狗计算机科技有限公司 视频录制方法、装置、终端及存储介质
CN110025958A (zh) * 2019-04-03 2019-07-19 网易(杭州)网络有限公司 语音的发送方法、装置、介质及电子设备
CN111212323A (zh) * 2020-01-13 2020-05-29 北京大米未来科技有限公司 音视频合成的方法、装置、电子设备及介质
CN112040310A (zh) * 2020-09-03 2020-12-04 广州优谷信息技术有限公司 一种音视频合成方法、装置、移动终端及存储介质
CN112509609A (zh) * 2020-12-16 2021-03-16 北京乐学帮网络技术有限公司 音频处理方法、装置、电子设备以及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965757A (zh) * 2018-08-02 2018-12-07 广州酷狗计算机科技有限公司 视频录制方法、装置、终端及存储介质
CN110025958A (zh) * 2019-04-03 2019-07-19 网易(杭州)网络有限公司 语音的发送方法、装置、介质及电子设备
CN111212323A (zh) * 2020-01-13 2020-05-29 北京大米未来科技有限公司 音视频合成的方法、装置、电子设备及介质
CN112040310A (zh) * 2020-09-03 2020-12-04 广州优谷信息技术有限公司 一种音视频合成方法、装置、移动终端及存储介质
CN112509609A (zh) * 2020-12-16 2021-03-16 北京乐学帮网络技术有限公司 音频处理方法、装置、电子设备以及存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114996512A (zh) * 2022-04-28 2022-09-02 北京达佳互联信息技术有限公司 朗读视频生成方法、装置、电子设备、介质及程序产品
CN117495197A (zh) * 2023-11-28 2024-02-02 北京大学人民医院 一种临床医学见习教学过程管理方法及系统
CN117495197B (zh) * 2023-11-28 2024-06-11 北京大学人民医院 一种临床医学见习教学过程管理方法及系统

Similar Documents

Publication Publication Date Title
CN111143610B (zh) 一种内容推荐方法、装置、电子设备和存储介质
US8285654B2 (en) Method and system of providing a personalized performance
US8832584B1 (en) Questions on highlighted passages
CN112689189B (zh) 一种视频展示、生成方法及装置
US20140164507A1 (en) Media content portions recommended
US20160042230A1 (en) Processing of images during assessment of suitability of books for conversion to audio format
US20140164371A1 (en) Extraction of media portions in association with correlated input
CN109155110B (zh) 信息处理装置以及其控制方法、计算机程序
CN113536172B (zh) 一种百科信息展示的方法、装置及计算机存储介质
US10089898B2 (en) Information processing device, control method therefor, and computer program
CN113038053A (zh) 一种数据合成方法、装置、电子设备以及存储介质
CN112230838A (zh) 一种文章处理方法、装置、设备及计算机可读存储介质
WO2023226760A1 (zh) 一种话题推荐方法、装置、计算机设备及存储介质
CN113254708A (zh) 一种视频搜索方法、装置、计算机设备及存储介质
Garner Not my lifeblood: Autoethnography, affective fluctuations and popular music antifandom
CN113763919A (zh) 一种视频展示方法、装置、计算机设备及存储介质
Lee et al. AccessComics2: Understanding the user experience of an accessible comic book reader for blind people with textual sound effects
CN113886610A (zh) 信息展示方法、信息处理方法及装置
CN113573128A (zh) 一种音频处理方法、装置、终端以及存储介质
CN111933128A (zh) 调查问卷的题库的处理方法、装置、电子设备
CN116541114A (zh) 一种信息展示方法、装置、计算机设备以及存储介质
CN114661196B (zh) 一种习题展示方法、装置、电子设备以及存储介质
CN112951013B (zh) 一种学习交互方法、装置、电子设备以及存储介质
JP2017027168A (ja) 嗜好学習方法、嗜好学習プログラム、及び嗜好学習装置
CN115357753A (zh) 一种信息展示方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210625