CN116955659A - 一种数据处理方法、装置、设备以及计算机可读存储介质 - Google Patents

一种数据处理方法、装置、设备以及计算机可读存储介质 Download PDF

Info

Publication number
CN116955659A
CN116955659A CN202210414881.6A CN202210414881A CN116955659A CN 116955659 A CN116955659 A CN 116955659A CN 202210414881 A CN202210414881 A CN 202210414881A CN 116955659 A CN116955659 A CN 116955659A
Authority
CN
China
Prior art keywords
language
content
target
learning
language learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210414881.6A
Other languages
English (en)
Inventor
冯彦清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202210414881.6A priority Critical patent/CN116955659A/zh
Publication of CN116955659A publication Critical patent/CN116955659A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • G06F16/4393Multimedia presentations, e.g. slide shows, multimedia albums
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/483Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本申请实施例公开了一种数据处理方法、装置、设备以及计算机可读存储介质,该方法包括:在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;在多媒体应用中输出语言学习内容。采用本申请,可以通过语言学习内容提高目标媒体内容的展示效果,进而可以提高多媒体数据的实用性。本申请实施例可应用于基于多媒体数据的语言学习场景。

Description

一种数据处理方法、装置、设备以及计算机可读存储介质
技术领域
本申请涉及互联网技术领域,尤其涉及一种数据处理方法、装置、设备以及计算机可读存储介质。
背景技术
随着互联网技术的不断发展,各类应用如雨后春笋,不乏为了丰富人们的业余生活的多媒体应用,多媒体应用可以便利地为人们展示其感兴趣的多媒体数据,例如音乐应用可以播放人们喜欢的歌曲,影音应用可以播放人们喜欢的视频,新闻阅读应用可以让人们阅读自己喜欢的电子书籍。
人们可以通过终端设备上的多媒体应用输出多媒体数据,但在现有技术中,多媒体应用只可以输出其对应的后台预先配置的多媒体数据(包括目标媒体内容),显然,现有的输出方式降低了目标媒体内容的展示效果,进而降低了多媒体数据的实用性。
发明内容
本申请实施例提供一种数据处理方法、装置、设备以及计算机可读存储介质,可以通过语言学习内容提高目标媒体内容的展示效果,进而可以提高多媒体数据的实用性。
本申请实施例一方面提供了一种数据处理方法,包括:
在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;
在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;
在多媒体应用中输出语言学习内容。
本申请实施例一方面提供了一种数据处理装置,包括:
第一输出模块,用于在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;
第二输出模块,用于在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;
第二输出模块,还用于在多媒体应用中输出语言学习内容。
其中,第二输出模块,具体用于按照语言学习功能,获取针对目标媒体内容的语言学习内容;语言学习功能是针对目标语言库所设置的功能。
其中,语言学习功能包括语言学习提示功能,语言学习内容包括基于目标媒体内容所确定的目标语言词汇,以及目标语言词汇对应的目标含义;
第二输出模块,包括:
第一显示单元,用于根据语言学习提示功能,在第一应用页面中显示语言提示区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;
第一显示单元,还用于在语言提示区域中显示目标含义以及属于目标语言的目标语言词汇;目标含义所属的语言是对象在多媒体应用中所设置的默认显示语言;
第二显示单元,用于当语言提示区域的显示时长超过预设显示时长时,取消显示语言提示区域。
其中,语言学习功能包括语言学习跟读功能;语言学习内容包括目标媒体内容对应的第一播放音频内容;第一播放音频内容所属的语言为目标语言;
第二输出模块,包括:
第一暂停单元,用于根据语言学习跟读功能,暂停输出多媒体数据;
第三显示单元,用于在第一应用页面中显示语言跟读区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;语言跟读区域包括用于提示对象跟读第一播放音频内容的跟读提示信息;
第一输出单元,用于播放第一播放音频内容,若响应针对第一播放音频内容的音频输入操作,则输出针对跟读音频内容的跟读质量结果;跟读音频内容是基于音频输入操作所输入的音频内容。
其中,第三显示单元,还用于在语言跟读区域中显示虚拟录音设备;
则第一输出单元,包括:
音频播放子单元,用于在第一时刻播放第一播放音频内容;
第一获取子单元,用于若在第二时刻响应针对第一播放音频内容的音频输入操作,则将虚拟录音设备的静止状态更新为交互状态,获取虚拟录音设备处于交互状态期间内的跟读音频内容,在虚拟录音设备中输出针对跟读音频内容的跟读质量结果;第二时刻晚于第一时刻,且第二时刻与第一时刻之间的时间间隔小于时间间隔阈值;
第一取消子单元,用于若在第三时刻未响应针对第一播放音频内容的音频输入操作,则取消显示语言跟读区域,继续输出多媒体数据;第三时刻晚于第二时刻,且第三时刻与第一时刻之间的时间间隔等于时间间隔阈值。
其中,语言学习功能包括语言学习复读功能;语言学习内容包括目标媒体内容对应的第二播放音频内容;
第二输出模块,包括:
第四显示单元,用于根据语言学习复读功能,在第一应用页面中显示针对第二播放音频内容的复读控件;复读控件用于表征目标媒体内容所属的语言为目标语言;第一应用页面是指多媒体应用中输出多媒体数据的页面;
音频播放单元,用于若在第一应用页面中响应针对复读控件的触发操作,则重新播放第二播放音频内容。
其中,语言学习功能包括语言学习拼写功能;语言学习内容包括目标媒体内容对应的第一词汇拼写内容;
第二输出模块,包括:
第二暂停单元,用于根据语言学习拼写功能,暂停输出多媒体数据;
第五显示单元,用于在第一应用页面中显示语言拼写区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;语言拼写区域包括关闭控件、目标输入框,以及用于提示对象在目标输入框中输入第一词汇拼写内容的拼写提示信息;
第二输出单元,用于若响应针对关闭控件的触发操作,则继续输出多媒体内容;
第二输出单元,还用于若响应针对目标输入框的词汇输入操作,则获取第二词汇拼写内容,基于第二词汇拼写内容继续输出多媒体内容。
其中,第二输出模块,还包括:
内容遮盖单元,用于若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则对所输出的目标媒体内容进行遮盖。
其中,第二输出单元,包括:
第二取消子单元,用于若第二词汇拼写内容与第一词汇拼写内容相同,则取消显示语言拼写区域,继续输出多媒体内容;
内容删除子单元,用于若第二词汇拼写内容与第一词汇拼写内容不同,则删除第二词汇拼写内容,在语言拼写区域中显示拼写错误提示信息;
第二获取子单元,用于若响应针对目标输入区域的词汇重新输入操作,则获取第三词汇拼写内容,基于第三词汇拼写内容继续输出多媒体内容。
其中,语言学习功能包括语言学习复习功能;语言学习内容包括目标词汇列表;
第二输出模块,包括:
第六显示单元,用于根据语言学习复习功能,在第二应用页面中显示复习提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;
第七显示单元,用于在复习提示区域中显示目标词汇列表;目标词汇列表包括基于目标媒体内容所确定的目标语言词汇,以及目标语言词汇对应的目标含义;目标语言词汇所属的语言属于目标语言。
其中,语言学习功能包括语言学习测评功能;语言学习内容包括针对目标媒体内容的测评题目,以及测评题目对应的测评结果;
第二输出模块,包括:
第八显示单元,用于根据语言学习测评功能,在第二应用页面中显示测评提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;
第九显示单元,用于在测评提示区域中显示测评题目,响应针对测评题目的答复操作,显示针对答复内容的测评结果;答复内容是基于答复操作所输入的内容。
其中,语言学习功能的总数量为至少两个;
第二输出模块,包括:
第一获取单元,用于获取至少两个语言学习功能以及至少两个语言学习功能分别对应的功能执行顺序;至少两个语言学习功能包括第一语言学习功能以及第二语言学习功能;其中,第一语言学习功能对应的功能执行顺序早于第二语言学习功能对应的功能执行顺序;语言学习内容包括第一语言学习功能对应的第一语言学习内容,以及第二语言学习功能对应的第二语言学习内容;
第三输出单元,用于在第四时刻,根据第一语言学习功能,在多媒体应用中输出第一语言学习内容;
第三输出单元,还用于在第五时刻,根据第二语言学习功能,在多媒体应用中输出第二语言学习内容;第五时刻晚于第四时刻。
其中,数据处理装置,还包括:
第三输出模块,用于若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则在第一应用页面中以高亮显示的方式输出目标媒体内容;第一应用页面是指多媒体应用中输出多媒体数据的页面。
其中,数据处理装置,还包括:
第一显示模块,用于在多媒体应用中显示学习设置页面;学习设置页面包括语言设置区域以及学习类型设置区域;
第一确定模块,用于响应针对语言设置区域的设置操作,确定目标语言;
第二确定模块,用于响应针对学习类型设置区域的设置操作,确定针对目标语言的目标语言学习类型。
其中,学习设置页面还包括功能设置区域;
数据处理装置,还包括:
第二显示模块,用于在功能设置区域中显示候选语言学习功能;候选语言学习功能是针对目标语言库所提供的功能;
第三确定模块,用于响应针对候选语言学习功能的选择操作,将所选择的候选语言学习功能确定为语言学习功能;语言学习功能用于确定针对目标媒体内容的语言学习内容。
其中,数据处理装置,还包括:
第一生成模块,用于生成针对目标数据的学习内容获取请求;目标数据包括多媒体数据以及目标语言库;
第四确定模块,用于基于学习内容获取请求,确定语言学习内容的内容状态;
第二生成模块,用于基于内容状态,生成语言学习内容以及输出指令;
则第二输出模块,具体用于根据输出指令,在多媒体应用中输出语言学习内容。
其中,第二生成模块,包括:
第二获取单元,用于若内容状态为内容待生成状态,则获取多媒体数据对应的数据描述文本;
第三获取单元,用于基于数据描述文本获取针对多媒体数据的目标语言文本;目标语言文本所属的语言为目标语言;
第一确定单元,用于获取目标语言库,将目标语言文本以及目标语言库进行匹配,根据匹配结果确定目标语言文本中的候选目标语言词汇;
第二确定单元,用于基于语言学习功能,确定候选目标语言词汇对应的候选语言学习内容;语言学习功能是针对目标语言库所设置的功能;
第三确定单元,用于获取对象的对象学习特征,根据对象学习特征,从候选语言学习中确定语言学习内容,根据语言学习内容,生成输出指令。
其中,第二获取单元,包括:
第一确定子单元,用于若多媒体数据具有字幕文本,则将字幕文本确定为数据描述文本;
音频提取子单元,用于若多媒体数据不具有字幕文本,则提取多媒体数据对应的音频数据;
第二确定子单元,用于对音频数据进行音频识别处理,得到音频识别文本,将音频识别文本确定为数据描述文本;
则第三获取单元,包括:
第三确定子单元,用于若数据描述文本所属的语言为目标语言,则将数据描述文本确定为针对多媒体数据的目标语言文本;
第四确定子单元,用于若数据描述文本所属的语言与目标语言不同,则基于目标语言,对数据描述文本进行语言变换处理,得到目标语言文本。
其中,语言学习内容包括内容属性互不相同的M个语言学习子内容;M为正整数;
第二生成模块,还包括:
第四获取单元,用于从目标语言库中获取与语言学习功能相匹配的学习内容显示模板;学习内容显示模板包括子组件类型互不相同的M个视图子组件;M个视图子组件包括视图子组件Cd,d为正整数且d小于或等于M;
第五获取单元,用于在M个语言学习子内容中,获取与视图子组件Cd对应的子组件类型相匹配的语言学习子内容Ed
第五获取单元,还用于根据语言学习子内容Ed对视图子组件Cd进行渲染,当M个视图子组件均完成渲染时,得到学习内容显示模板对应的语言学习组件;
则第二输出模块,具体用于根据输出指令,在多媒体应用中输出针对目标媒体内容的语言学习组件。
本申请一方面提供了一种计算机设备,包括:处理器、存储器、网络接口;
上述处理器与上述存储器、上述网络接口相连,其中,上述网络接口用于提供数据通信功能,上述存储器用于存储计算机程序,上述处理器用于调用上述计算机程序,以使得计算机设备执行本申请实施例中的方法。
本申请实施例一方面提供了一种计算机可读存储介质,上述计算机可读存储介质中存储有计算机程序,上述计算机程序适于由处理器加载并执行本申请实施例中的方法。
本申请实施例一方面提供了一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中;计算机设备的处理器从计算机可读存储介质读取该计算机程序,处理器执行该计算机程序,使得该计算机设备执行本申请实施例中的方法。
在本申请实施例中,通过在多媒体应用中输出多媒体数据,计算机设备可以在多媒体数据中的目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容,其中,语言学习内容是基于目标语言库所确定的,目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;在多媒体应用中输出语言学习内容。上述可知,采用本申请,可以通过语言学习内容提高目标媒体内容的展示效果,进而可以提高多媒体数据的实用性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种系统架构示意图;
图2是本申请实施例提供的一种数据处理的场景示意图一;
图3是本申请实施例提供的一种数据处理的场景示意图二;
图4是本申请实施例提供的一种数据处理方法的流程示意图一;
图5是本申请实施例提供的一种数据处理的场景示意图三;
图6是本申请实施例提供的一种数据处理的场景示意图四;
图7是本申请实施例提供的一种数据处理方法的流程示意图二;
图8是本申请实施例提供的一种数据处理的场景示意图五;
图9是本申请实施例提供的一种数据处理方法的流程示意图三;
图10本申请实施例提供的一种数据处理方法的交互流程示意图;
图11是本申请实施例提供的一种学习服务器的功能模块的示意图;
图12是本申请实施例提供的一种数据处理装置的结构示意图;
图13是本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了便于理解,首先对部分名词进行以下简单解释:
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习、自动驾驶、智慧交通等几大方向。
语音技术(Speech Technology)的关键技术有自动语音识别技术(AutomaticSpeech Recognition,ASR)、语音合成技术(TTS)以及声纹识别技术。让计算机能听、能看、能说、能感觉,是未来人机交互的发展方向,其中语音成为未来最被看好的人机交互方式之一。在本申请实施例中,语音技术可以用于识别多媒体数据中的音频数据。
自然语言处理(Nature Language processing,NLP)是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。因此,这一领域的研究将涉及自然语言,即人们日常使用的语言,所以它与语言学的研究有着密切的联系。自然语言处理技术通常包括文本处理、语义理解、机器翻译、机器人问答、知识图谱等技术。在本申请实施例中,自然语言处理可以用于处理多媒体数据对应的数据描述文本。
机器学习(Machine Learning,ML)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心,是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。机器学习和深度学习通常包括人工神经网络、置信网络、强化学习、迁移学习、归纳学习、式教学习等技术。在本申请实施例中,可以基于机器学习对数据描述文本进行识别处理。
请参见图1,图1是本申请实施例提供的一种系统架构示意图。如图1所示,该系统可以包括服务器100a、服务器100a对应的语言库100b以及终端设备集群,终端设备集群可以包括:终端设备200a、终端设备200b、终端设备200c、…、终端设备200n,可以理解的是,上述系统可以包括一个或者多个终端设备,本申请不对终端设备的数量进行限制。
语言库100b是一个语言数据库,可视为电子化的文件柜——存储电子文件(本申请指语言基础知识文件)的处所,服务器100a对应的运营者可以对文件中的语言基础知识进行新增、查询、更新、删除等操作。所谓“数据库”是以一定方式储存在一起、能与多个使用对象共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合。
服务器100a可以为包括多媒体应用对应的后台服务器、数据处理服务器等多个服务器的集合,在本申请实施例中,基于功能性,服务器100a可以包括学习服务器以及多媒体服务器,其中,学习服务器主要具有存储终端设备对应的对象提交的语言学习计划、基于学习内容获取请求确定多媒体数据的语言学习内容以及输出指令等功能,多媒体服务器主要具有提供多媒体数据等功能,学习服务器以及多媒体服务器分别对应的详细功能请参见下文的描述,此处暂不展开描述。
其中,终端设备集群之间可以存在通信连接,例如终端设备200a与终端设备200b之间存在通信连接,终端设备200a与终端设备200c之间存在通信连接。同时,终端设备集群中的任一终端设备可以与服务器100a存在通信连接,例如终端设备200a与服务器100a之间存在通信连接,其中,上述通信连接不限定连接方式,可以通过有线通信方式进行直接或间接地连接,也可以通过无线通信方式进行直接或间接地连接,还可以通过其它方式,本申请在此不做限制。
应当理解,如图1所示的终端设备集群中的每个终端设备均可以安装有多媒体应用对应的客户端(下述简称应用客户端),当该应用客户端运行于各终端设备中时,可以分别与上述图1所示的服务器100a进行数据交互,即上述的通信连接。其中,该应用客户端可以为视频应用、社交应用、即时通信应用、游戏应用、音乐应用、小说应用、浏览器等具有加载多媒体数据功能的应用客户端。其中,该应用客户端可以为独立的客户端,也可以为集成在某客户端(例如,社交客户端以及教育客户端等)中的嵌入式子客户端,在此不做限定。以视频应用为例,每个终端设备均可以通过该视频应用对应的应用客户端与服务器100a进行数据传输,如每个终端设备均可以通过视频应用的应用客户端获取服务器100a中的视频,并在应用客户端中进行播放。
可以理解的是,在本申请的具体实施方式中,涉及到用户信息(例如目标语言、目标语言学习类型、对象学习特征)等相关的数据,当本申请中的实施例运用到具体产品或技术中时,需要获得用户许可或者同意,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
为便于后续理解和说明,本申请实施例可以在图1所示的终端设备集群中选择一个终端设备作为目标终端设备,例如以终端设备200a作为目标终端设备。终端设备200a可以从服务器100a中的多媒体服务器中获取多媒体数据,在多媒体应用(即上述的应用客户端)中输出多媒体数据,该多媒体数据可以包括目标媒体内容;本申请实施例不对多媒体应用进行限定,可以为视频应用、音乐应用以及电子书应用等应用,故不对多媒体数据进行限定,可以包括以下一种媒体数据或多种媒体数据:属于文本媒体类型的文本数据、属于音频媒体类型的音频数据(可以包括文本数据)、属于影像媒体类型的视频数据(其可以包括文本数据以及音频数据);本申请实施例亦不对目标媒体内容进行限定,当多媒体数据为文本数据时,目标媒体内容可以是文本内容;当多媒体数据为携带文本数据的音频数据或携带文本数据的视频数据时,目标媒体内容可以是文本内容;当多媒体数据为未携带文本数据的音频数据或未携带文本数据的视频数据时,目标媒体内容可以是音频内容。可选的,终端设备200a可以从本地获取多媒体数据并进行输出,本申请实施例不对多媒体数据的来源进行限定。
终端设备200a在输出多媒体数据的同时,可以生成针对目标数据的学习内容获取请求,该目标数据可以包括多媒体数据以及目标语言库,目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的,可以理解的是,该目标语言库属于上述的语言库100b,目标语言库可以包括针对目标语言的目标语言学习类型所对应的语言基础知识;本申请将用于获取语言学习内容的请求称为学习内容获取请求。
基于学习内容获取请求,终端设备200a可以将多媒体数据对应的媒体标识以及对象对应的对象标识作为待识别数据发送至服务器100a中的学习服务器,本申请实施例不对多媒体标识进行限定,可以为任意一种能够用于标识多媒体服务器中的多媒体数据的信息;同理,本申请实施例不对对象标识(对象已授权)进行限定,包括但不限于对象在应用客户端中所绑定的手机、标识号,可以根据实际应用场景进行设定。
学习服务器接收到终端设备200a发送的待识别数据后,可以根据媒体标识从多媒体服务器中获取多媒体数据,可以根据对象标识获取对象对应的语言学习计划,进而可以获取对象提交的目标语言以及目标语言学习类型,进而可以根据目标语言以及目标语言学习类型,从语言库100b中获取目标语言库。需要说明的是,本申请实施例不对待识别数据的内容进行限定,上述是以对象标识以及媒体标识示例,可选的,终端设备200a将对象的语言学习计划以及多媒体数据作为待识别数据,或将语言学习计划以及媒体标识作为待识别数据。
学习服务器可以在目标媒体内容属于目标语言库时,基于目标语言库生成针对目标媒体内容的语言学习内容,此处暂不对语言学习内容进行说明,请参见下文实施例的描述。进一步,学习服务器将语言学习内容返回至终端设备200a,故终端设备200a可以在输出多媒体数据的同时,输出针对目标媒体内容的语言学习内容,或多媒体数据输出完毕时,输出语言学习内容。
可选的,若终端设备200a的本地存储了目标语言库,则终端设备200a可以在生成学习内容获取请求后,基于本地的目标语言库,确定多媒体数据中属于目标语言库的目标媒体内容所对应的语言学习内容。其中,终端设备200a本地的目标语言库,可以是由学习服务器在生成或更新目标语言库后发送至终端设备200a的。
可以理解的是,本申请实施例中的语言学习内容不属于多媒体数据本身,其是在多媒体数据中的目标媒体内容属于目标语言库时,基于目标语言库所生成的,故本申请实施例可以丰富目标媒体内容的展示效果,此外,多媒体数据不仅具有观赏功能,还具有学习功能,即本申请实施例可以提高多媒体数据的实用性。
需要说明的是,上述服务器100a、终端设备200a、终端设备200b、终端设备200c...、终端设备200n均可以为区块链网络中的区块链节点,全文叙述的数据(例如包括目标语言以及目标语言学习类型的语言学习计划)可以进行存储,存储方式可以是区块链节点根据数据生成区块,并将区块添加至区块链中进行存储的方式。
区块链是一种分布式数据存储、点对点传输、共识机制以及加密算法等计算机技术的新型应用模式,主要用于对数据按时间顺序进行整理,并加密成账本,使其不可被篡改和伪造,同时可进行数据的验证、存储和更新。区块链本质上是一个去中心化的数据库,该数据库中的每个节点均存储一条相同的区块链,区块链网络可以将节点区分为核心节点、数据节点以及轻节点。核心节点、数据节点以及轻节点共同组成区块链节点。其中核心节点负责区块链全网的共识,也就是说核心节点为区块链网络中的共识节点。对于区块链网络中的交易数据被写入账本的流程可以为,区块链网络中的数据节点或轻节点获取到交易数据,将交易数据在区块链网络中传递(也就是节点以接力棒的方式进行传递),直到共识节点收到该交易数据,共识节点再将该交易数据打包进区块,对该区块执行共识,待共识完成后将该交易数据写入账本。此处以语言学习计划示例交易数据,服务器100a(区块链节点)在通过对交易数据的共识后,根据交易数据生成区块,将区块存储至区块链网络中;而对于交易数据(即语言学习计划)的读取,则可以由区块链节点在区块链网络中,获取到包含该交易数据的区块,进一步,在区块中获取交易数据。
可以理解的是,本申请实施例提供的方法可以由计算机设备执行,计算机设备包括但不限于终端设备或服务器。其中,服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云数据库、云服务、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端设备包括但不限于手机、电脑、智能语音交互设备、智能家电、车载终端、飞行器等。其中,终端设备和服务器可以通过有线或无线方式进行直接或间接地连接,本申请实施例在此不做限制。
进一步地,请参见图2,图2是本申请实施例提供的一种数据处理的场景示意图一。本申请实施例可应用于各种场景,包括但不限于云技术、人工智能、智慧交通、辅助驾驶等。本申请实施例可适用于基于多媒体数据的语言学习场景。其中,该数据处理场景的实现过程可以在服务器中进行,也可以在终端设备中进行,还可以在终端设备和服务器中交互进行,此处不做限制。为了便于叙述以及理解,本申请实施例以在终端设备中进行为例进行叙述,其中,终端设备可以为上述图1所对应实施例的终端设备集群中的任意一个终端设备,图2以终端设备200a为例进行叙述。
具体的,终端设备在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;在多媒体应用中输出语言学习内容。
如图1所对应实施例中叙述,本申请实施例不对多媒体应用的应用类型以及多媒体数据的数据类型进行限定,为了便于叙述以及理解,图2以应用一(具体可以为电子书应用)示例多媒体应用,以文本数据(例如电子书籍等)示例多媒体数据,具体地,图2以文本句子“他是一个能力非凡的人”示例多媒体数据,以文本词汇示例目标媒体内容,文本句子可以包括以下文本词汇(即目标媒体内容):他、是、一个、能力、非凡的、人。本申请实施例不对目标语言以及目标语言学习类型的设置场景展开描述,请参见下文图7所对应的实施例的描述,为了便于叙述以及理解,本申请实施例以英语示例目标语言,以英语四级示例目标语言学习类型,以中文示例对象20a在应用一中所设置的默认显示语言。需要理解的是,应用一对应的默认显示语言是针对应用一的应用内容的语言,例如应用一是以中文显示,目标语言是指对象20a想要学习的语言。
如图2所示,对象20a与终端设备200a具有绑定关系,对象20a在绝对时间(如图2所示例的2022年3月7日14点12分02秒)浏览至文本句子“他是一个能力非凡的人”,绝对时间是指输出多媒体数据的客观时间,即终端设备200a对应的地区时间,该文本句子是文本数据(共2000页)第204页的内容。此时,由于文本词汇“能力”属于目标语言库,在本申请实施例中目标语言库为针对英语四级的语言库,终端设备200a可以按照语言学习功能,获取针对目标媒体内容的语言学习内容;语言学习功能是针对目标语言库所设置的功能。本申请实施例不对语言学习功能的设置进行限定,可以根据实际应用场景进行设定,例如可以是学习服务器预先设置,终端设备200a根据学习服务器预先设置的语言学习功能输出语言学习内容,也可以是学习服务器提供候选语言学习功能,终端设备200a显示该候选语言学习功能,并响应针对候选语言学习功能的选择操作,将所选择的候选语言学习功能确定为语言学习功能。
本申请实施例不对语言学习功能的具体内容进行限定,可以根据实际应用场景进行设定,故本申请实施例不对语言学习内容进行限定,其可以根据语言学习功能进行设定。为了便于叙述以及理解,图2以语言学习提示功能以及语言学习跟读功能示例叙述。
请参见图2,终端设备200a在2022年3月7日14点12分02秒显示文本句子“他是一个能力非凡的人”(作为多媒体数据),由于目标媒体内容(即文本词汇“能力”)属于目标语言库(本申请实施例是指英语四级对应的语言库),则在语言学习功能包括语言学习提示功能时,终端设备200a可以根据语言学习提示功能,在第一应用页面301a中显示语言提示区域302a,本申请将输出多媒体数据的页面称为第一应用页面;其中,终端设备200a可以在语言提示区域302a中显示目标含义(如图2所示例的“能力;能耐,本领”)以及属于目标语言的目标语言词汇(如图2所示例的“ability”),明显地,目标含义所属的语言是对象20a在多媒体应用中所设置的默认显示语言(本申请以中文示例);可选的,语言提示区域302a可以包括目标语言词汇对应的词性,如图2中所示例的目标语言词汇“ability”的词性(即名词,缩写为“n”)。
进一步,当语言提示区域302a的显示时长超过预设显示时长时,终端设备200a取消显示语言提示区域302a,可以理解的是,预设显示时长可以根据实际应用场景进行设定,本申请实施例以5秒示例预设显示时长,则终端设备200a在2022年3月7日14点12分02秒-2022年3月7日14点12分06秒持续显示语言提示区域302a,在2022年3月7日14点12分07秒取消显示语言提示区域302a。若语言学习功能包括语言学习提示功能以及语言学习跟读功能,且示例语言学习提示功能对应的功能执行顺序,早于语言学习跟读功能对应的功能执行顺序,则终端设备200a在输出目标媒体内容时,暂停输出多媒体数据,如图2所示,在2022年3月7日14点12分02秒暂停输出多媒体数据,例如暂停第一应用页面301a的滑动功能,即对象20a无法在应用一中触发针对多媒体数据的页面滑动,在2022年3月7日14点12分07秒取消显示语言提示区域302a,同时,终端设备200a显示语言跟读区域303a,语言跟读区域303a可以包括用于提示对象20a跟读第一播放音频内容(图2以“ability”的音频内容示例)的跟读提示信息,如图2所示例的“请跟读:ability”,语言跟读区域303a还可以包括虚拟录音设备306a、播放控件304a以及关闭控件305a。
终端设备200a在第一时刻(例如2022年3月7日14点12分07秒),播放第一播放音频内容(图2是指播放“ability”),可以理解的是,时间间隔阈值应当根据实际应用场景进行设定,本申请实施例为了便于叙述,示例时间间隔阈值为5秒。若对象20a在第六时刻触发关闭控件305a,则终端设备200a在第六时刻响应针对关闭控件305a的触发操作,取消显示语言提示区域302a,其中,第六时刻的取值范围是第一时刻至第三时刻。若在第二时刻(如图2所示例的2022年3月7日14点12分08秒),响应针对第一播放音频内容的音频输入操作,则终端设备200a将虚拟录音设备306a的静止状态更新为交互状态,获取虚拟录音设备306a处于交互状态期间内的跟读音频内容,在虚拟录音设备中输出针对跟读音频内容的跟读质量结果,跟读质量结果可以表征跟读音频内容的音量大小,即若跟读音频内容的音量大,则跟读质量结果好,若跟读音频内容的音量小,则跟读质量结果差。若在第三时刻(例如2022年3月7日14点12分12秒)未响应针对第一播放音频内容的音频输入操作,则终端设备200a取消显示语言跟读区域303a,继续输出多媒体数据,此时,终端设备200a可以在应用一中启动针对多媒体数据的滑动功能。
可选的,若对象20a在说出“ability”之后,例如在2022年3月7日14点12分10秒触发播放控件304a,则终端设备200a将第一时刻更新为2022年3月7日14点12分10秒,且重新播放第一播放音频内容;可以理解的是,第三时刻更新为2022年3月7日14点12分14秒,第二时刻的取值范围在更新后的第一时刻至更新后的第三时刻,后续过程与上文一致,故不再进行赘述。
图2是以语言学习功能包括语言学习提示功能以及语言学习跟读功能示例叙述,可以理解的是,若语言学习功能只包括语言学习提示功能,则终端设备200a显示语言学习提示功能对应的语言学习内容;若语言学习功能只包括语言学习跟读功能,则终端设备200a输出语言学习跟读功能对应的语言学习内容,下面以图2为例简单叙述语言学习功能仅包括语言学习跟读功能,此时,终端设备200a在2022年3月7日14点12分02秒暂停输出多媒体数据,并显示语言跟读区域303a,后续过程请参见上文叙述,区别仅在于语言学习功能不包括语言学习提示功能。
图2是以文本数据为多媒体数据示例进行描述,请一并参见图3,图3是本申请实施例提供的一种数据处理的场景示意图二。其中,图2以及图3相同标号的含义是一致的,故不进行赘述。图3以应用二(具体可以为视频应用)示例多媒体应用,以视频数据(图3中的视频一)示例多媒体数据,以英语示例目标语言,以英语四级示例目标语言学习类型,以中文示例默认显示语言,以语言学习提示功能以及语言学习跟读功能示例语言学习功能。
如图3所示,终端设备200a正在播放视频一,对象20a通过终端设备200a正在观看视频一,其中,视频一的总时长为4分钟,其包括音频数据以及字幕文本,此时目标媒体内容为字幕词汇。在地区时间为2022年3月8日10点10分01秒时,终端设备200a播放至视频一的1分52秒,在第一应用页面301b中显示字幕句子“He is a person of unusually greatability”(为了便于叙述,下文简称为目标字幕句子),且开始播放音频数据“He is aperson of unusually great ability”,由于字幕词汇“ability”属于英语四级词汇,故终端设备200a可以在第一应用页面301b中高亮显示字幕词汇“ability”。进一步,在语言学习功能包括语言学习提示功能时,终端设备200a可以根据语言学习提示功能,在第一应用页面301b中显示语言提示区域302a。
在目标字幕句子对应的显示时长,即包括属于目标语言库的目标媒体内容(图3以字幕词汇“ability”示例)的字幕句子对应的显示时长,大于语言提示区域302a的预设显示时长时,终端设备200a可以保持播放视频一,例如目标字幕句子对应的显示时长为6秒,预设显示时长为5秒。
在目标字幕句子对应的显示时长等于或小于语言提示区域302a的预设显示时长,且语言学习功能仅包括语言学习提示功能时,终端设备200a可以保持播放视频一,此时,语言提示区域302a开始显示于目标字幕句子所属的页面(如图3中的第一应用页面301b),取消显示于目标字幕句子所属的页面(此时,目标字幕句子对应的显示时长等于预设显示时长),或取消显示于视频一的后续内容中(此时,目标字幕句子对应的显示时长小于预设显示时长),此场景下,地区时间与视频一的播放进度同步变化。例如目标字幕句子对应的显示时长为2秒,语言提示区域302a对应的预设显示时长为5秒,如图3所示的步骤1,终端设备200a保持播放,语言提示区域302a在第一应用页面301b持续显示2秒,在地区时间为2022年3月8日10点10分03秒时,播放至视频一的1分54秒,终端设备200a更新显示第一应用页面302b,在第一应用页面302b中显示目标字幕句子的后续字幕句子,如字幕句子“He is goodat basketball”,且持续显示语言提示区域302a,在地区时间为2022年3月8日10点10分06秒时,终端设备200a播放至视频一的1分57秒,取消显示语言提示区域302a。
在目标字幕句子对应的显示时长,等于或小于语言提示区域302a的预设显示时长,且针对目标语言库还设置了剩余语言学习功能(即除了语言学习提示功能之外的语言学习功能,例如语言学习跟读功能)时,终端设备200a可以暂停播放视频一,当语言提示区域302a的显示时长超过预设显示时长时,取消显示语言提示区域302a,并输出语言学习跟读功能对应的语言学习子内容。例如语言提示区域302a对应的预设显示时长为5秒,如图3中的步骤2所示,终端设备200a暂停播放视频一,地区时间与视频一的播放进度不同步变化,地区时间为2022年3月8日10点10分5秒时,终端设备200a在应用二中显示第一应用页面303b,第一应用页面303b包括暂停标识304b,暂停标识304b用于表征终端设备200a暂停播放视频一。假设语言学习提示功能对应的功能执行顺序早于语言学习跟读功能对应的功能执行顺序,则在2022年3月8日10点10分6秒时,终端设备200a取消显示语言提示区域302a,且显示语言跟读区域303a,继续暂停播放视频一,如第一应用页面305b所示,地区时间为2022年3月8日10点10分8秒,视频一的播放进度仍为1分52秒,后续过程与上述图2中的描述一致,故不进行赘述,请参见上文图2中的描述。
可以理解的是,若语言学习功能只包括语言学习跟读功能,下面以图3为例简单叙述,此场景下,终端设备200a在2022年3月8日10点10分01秒暂停播放视频一,并显示语言跟读区域303a,后续过程请参见上文叙述,区别仅在于语言学习功能不包括语言学习提示功能。
图2以文本数据为多媒体数据示例进行描述,图3以视频数据为多媒体数据示例进行描述,图2以及图3均以语言学习提示功能以及语言学习跟读功能示例语言学习功能描述,但本申请的多媒体数据还可以包括音频数据(例如歌曲或电台广播等),针对多媒体数据为音视频数据,且音视频数据仅包括音频内容,无字幕内容时,触发语言学习功能的条件为终端设备播放到属于目标语言库的目标媒体内容(此时属于音频词汇),剩余处理过程与携带字幕内容的音视频的处理过程的一致;语言学习功能还可以包括额外的语言学习功能,具体请参见下文实施例的描述。
可以理解的是,图2以及图3中所展示的界面以及控件仅仅是一些可供参考的表现形式,在实际业务场景中,开发人员可以根据产品需求来进行相关设计,本申请实施例对涉及到的界面和控件的具体形式不做限制。
综上所述,本申请的实施例基于目标语言库,可生成多媒体数据对应的语言学习内容,解决了目标语言对应的学习素材不足的局限;同时,本申请实施例基于多媒体应用,可以为对象提供语言学习功能,让对象在观看或听写自己感兴趣的多媒体数据的同时,又能有效学习语言知识,故增加了多媒体应用的实用功能。
进一步地,请参见图4,图4是本申请实施例提供的一种数据处理方法的流程示意图一。该数据处理方法可以由服务器(例如,上述图1所示的服务器100a)执行,也可以由终端设备(例如,上述图1所示的终端设备200a)执行,还可以由服务器和终端设备交互执行。为便于理解,本申请实施例以该方法由终端设备执行为例进行说明。如图4所示,该数据处理方法至少可以包括以下步骤S101-步骤S102。
步骤S101,在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容。
具体的,多媒体应用、多媒体数据以及目标媒体内容分别对应的含义,请参见上文实施例中的描述,此处不进行赘述。为了便于叙述,本申请实施例以应用二(具体可以为视频应用)示例多媒体应用,以视频数据示例多媒体数据,以中文示例默认显示语言。
请一并参见图5,图5是本申请实施例提供的一种数据处理的场景示意图三。如图3所示,对象20a通过终端设备200a观看视频一,地区时间为2022年3月8日10点10分时,终端设备200a播放至视频一(总时长为4分钟)的1分51秒,第一应用页面401a包括字幕句子“Hecomes from a beautiful country”。
步骤S102,在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的。
具体的,按照语言学习功能,获取针对目标媒体内容的语言学习内容;语言学习功能是针对目标语言库所设置的功能。
该步骤的具体过程请参见下文图9所对应的实施例中的描述,此处暂不展开叙述。
步骤S103,在多媒体应用中输出语言学习内容。
具体的,语言学习功能包括语言学习复读功能;语言学习内容包括目标媒体内容对应的第二播放音频内容;根据语言学习复读功能,在第一应用页面中显示针对第二播放音频内容的复读控件;复读控件用于表征目标媒体内容所属的语言为目标语言;第一应用页面是指多媒体应用中输出多媒体数据的页面;若在第一应用页面中响应针对复读控件的触发操作,则重新播放第二播放音频内容。
具体的,语言学习功能包括语言学习拼写功能;语言学习内容包括目标媒体内容对应的第一词汇拼写内容;根据语言学习拼写功能,暂停输出多媒体数据;在第一应用页面中显示语言拼写区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;语言拼写区域包括关闭控件、目标输入框,以及用于提示对象在目标输入框中输入第一词汇拼写内容的拼写提示信息;若响应针对关闭控件的触发操作,则继续输出多媒体内容;若响应针对目标输入框的词汇输入操作,则获取第二词汇拼写内容,基于第二词汇拼写内容继续输出多媒体内容。若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则对所输出的目标媒体内容进行遮盖。
其中,基于第二词汇拼写内容继续输出多媒体内容的具体过程可以包括:若第二词汇拼写内容与第一词汇拼写内容相同,则取消显示语言拼写区域,继续输出多媒体内容;若第二词汇拼写内容与第一词汇拼写内容不同,则删除第二词汇拼写内容,在语言拼写区域中显示拼写错误提示信息;若响应针对目标输入区域的词汇重新输入操作,则获取第三词汇拼写内容,基于第三词汇拼写内容继续输出多媒体内容。
具体的,语言学习功能包括语言学习复习功能;语言学习内容包括目标词汇列表;根据语言学习复习功能,在第二应用页面中显示复习提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;在复习提示区域中显示目标词汇列表;目标词汇列表包括基于目标媒体内容所确定的目标语言词汇,以及目标语言词汇对应的目标含义;目标语言词汇所属的语言属于目标语言。
具体的,语言学习功能包括语言学习测评功能;语言学习内容包括针对目标媒体内容的测评题目,以及测评题目对应的测评结果;根据语言学习测评功能,在第二应用页面中显示测评提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;在测评提示区域中显示测评题目,响应针对测评题目的答复操作,显示针对答复内容的测评结果;答复内容是基于答复操作所输入的内容。
具体的,语言学习功能的总数量为至少两个;获取至少两个语言学习功能以及至少两个语言学习功能分别对应的功能执行顺序;至少两个语言学习功能包括第一语言学习功能以及第二语言学习功能;其中,第一语言学习功能对应的功能执行顺序早于第二语言学习功能对应的功能执行顺序;语言学习内容包括第一语言学习功能对应的第一语言学习内容,以及第二语言学习功能对应的第二语言学习内容;在第四时刻,根据第一语言学习功能,在多媒体应用中输出第一语言学习内容;在第五时刻,根据第二语言学习功能,在多媒体应用中输出第二语言学习内容;第五时刻晚于第四时刻。
可选的,若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则在第一应用页面中以高亮显示的方式输出目标媒体内容;第一应用页面是指多媒体应用中输出多媒体数据的页面。
本申请实施例不对目标语言进行限定,可以为外语,例如英语、法语等,也可以为地方语言;同理,本申请实施例不对目标语言学习类型进行限定,目标语言学习类型可以包括目标语言等级类型(例如英语四级),以及目标语言应用类型(例如商务英语),目标语言以及目标语言学习类型均由对象设置。本申请实施例以英语示例目标语言,以英语四级示例目标语言学习类型,以英语四级对应的语言库示例目标语言库。本申请实施例不对语言学习功能进行限定,可以根据实际应用场景进行设定,本申请实施例以语言学习复读功能、语言学习拼写功能、语言学习复习功能以及语言学习测评功能示例语言学习功能叙述;可以理解的是,图2以及图3所描述的语言学习提示功能以及语言学习跟读功能,可以与本申请实施例所叙述的语言学习功能组合,此时,语言学习功能的总数量为至少两个。
若目标媒体内容属于目标语言库,且语言学习功能为语言学习复读功能,则在第一应用页面中显示语言学习复读功能对应的复读控件;若目标媒体内容属于目标语言库,且语言学习功能为语言学习拼写功能,则在第一应用页面中显示语言学习拼写功能对应的语言拼写区域;若目标媒体内容属于目标语言库,且语言学习功能为语言学习复习功能,则在第二应用页面中显示语言学习复习功能对应的复习提示区域;若目标媒体内容属于目标语言库,且语言学习功能为语言学习测评功能,则在第二应用页面中显示语言学习测评功能对应的测评提示区域;后续过程请参见下文描述。
若目标媒体内容的媒体类型为文本媒体类型时,终端设备可以在第一应用页面中突出显示属于目标语言库的目标媒体内容,如图2所以,终端设备200a采用基本形状(如图2中的矩形)标记目标媒体内容(即文本词汇“能力”);进一步,若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则终端设备在第一应用页面中,可以以高亮显示的方式输出目标媒体内容,如图3所示,终端设备200a对字幕词汇“ability”高亮显示,其中,高亮显示的方式可以为加粗显示,或采用不同于目标字幕句子的醒目颜色显示。
本申请实施例以语言学习功能包括语言学习复读功能以及语言学习拼写功能,且语言学习复读功能对应的功能执行顺序早于语言学习拼写功能对应的功能执行顺序为例进行叙述,可以理解的是,当语言学习功能的总数量为至少两个时,至少两个语言学习功能分别对应的功能执行顺序,可以由图1所述的学习服务器设置,也可以由对象通过终端设备设置,本申请实施例对此不做限定。
请再参见图5,在2022年3月8日10点10分1秒时,终端设备200a播放至视频一的1分52秒,在第一应用页面402a中显示字幕句子“He is a person of unusually greatability”(为了便于叙述,下文简称为目标字幕句子),且开始播放音频数据“He is aperson of unusually great ability”,由于字幕词汇“ability”属于英语四级词汇,故终端设备200a可以根据语言学习复习功能,将目标字幕句子确定为第二播放音频内容,且在第一应用页面402a输出针对目标字幕句子的复读控件,如图5所示例的控件403a。若对象20a触发复读控件,则终端设备200a可以重新播放第二播放音频内容(如图5中的目标字幕句子),此场景下,终端设备200a的地区时间与视频一的播放时长不同步变化;若对象20a未触发复读控件,则当第二播放音频内容播放完毕时,复读控件取消显示。
若语言学习功能仅包括语言学习复读功能,则终端设备200a继续播放视频一,即继续输出多媒体数据。假设目标字幕句子对应的播放时长为3秒,图5示例对象20a未触发复读控件,且语言学习功能包括语言学习复读功能以及语言学习拼写功能,故当地区时间为2022年3月8日10点10分3秒时,终端设备200a播放完毕第二播放音频内容,取消显示复读控件,暂停播放视频一,并在第一应用页面404a中显示语言拼写区域405a,如图5所示,语言拼写区域405a包括关闭控件406a、目标输入框407a,以及用于提示对象20a在目标输入框407a中输入第一词汇拼写内容(图5以ability示例)的拼写提示信息,如图5中的“请默写:n.能力;能耐,本领”。由于目标媒体内容(图5中的字幕词汇“ability”)的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言(即英语),故终端设备200a对字幕词汇“ability”进行遮盖。
若对象20a触发关闭控件406a,则终端设备200a响应针对关闭控件406a的触发操作,继续输出多媒体内容,如图5中的视频一;若对象20a触发目标输入框407a,则终端设备200a响应针对目标输入框407a的词汇输入操作,获取第二词汇拼写内容,如图5所示,对象20a在第一应用页面408a的目标输入框407a中输入字符串“abil”,若对象20a接下来输入非正确字符,例如字符“a”,此时,终端设备200a获取到的第二词汇拼写内容为字符串“abila”,由于第二词汇拼写内容与第一词汇拼写内容不同,故终端设备200a可以将目标输入框407a中的第二词汇拼写内容进行删除处理,并在语言拼写区域405a中显示拼写错误提示信息,如图5中所示例的“拼写错误,请重新默写”。此时,对象20a可以选择触发关闭控件406a或触发目标输入框407a,若触发目标输入框407a,则终端设备200a取消显示拼写错误提示信息,后续过程可以参见上文的描述,不进行赘述。
可选的,假设语言学习功能仅包括语言学习拼写功能,下面以图5为例简单叙述,此场景下,终端设备200a在2022年3月8日10点10分01秒暂停播放视频一,并显示语言拼写区域405a,后续过程请参见上文叙述,区别仅在于语言学习功能不包括语言学习复读功能。可选的,语言学习功能包括语言学习提示功能、语言学习跟读功能、语言学习复读功能以及语言学习拼写功能,且语言学习提示功能对应的功能执行顺序早于语言学习跟读功能对应的功能执行顺序,语言学习跟读功能对应的功能执行顺序早于语言学习复读功能对应的功能执行顺序,语言学习复读功能对应的功能执行顺序早于语言学习拼写功能对应的功能执行顺序,此时可以结合图3以及图5理解,即按照每个语言学习功能分别对应的功能执行顺序,按序执行语言学习功能,对于上述提及的4个语言学习功能的其他组合场景,也可以结合图3以及图5理解,本申请不一一进行赘述。
进一步,本申请实施例中的语言学习功能还可以包括语言学习复习功能,结合图5以及图6叙述,图6是本申请实施例提供的一种数据处理的场景示意图四。如图6所示,当视频一播放完毕时,根据语言学习复习功能,终端设备200a可以在第二应用页面401b中显示复习提示区域402b,复习提示区域402b可以包括关闭控件403b以及目标词汇列表,其中,目标词汇列表包括多媒体数据中所有属于目标语言库的目标媒体内容,在本申请实施例中,目标词汇列表包括视频一中所有属于英语四级对应的语言库的字幕词汇,如图6所示例的3个字幕词汇,分别为字幕词汇“abandon”,以及其对应的词性(动词,缩写为vt),以及其中文含义(即丢弃;放弃,抛弃),以及字幕词汇“ability”,以及其对应的词性(名词,缩写为n),以及其中文含义(即能力;能耐,本领),以及字幕词汇“admire”,以及其对应的词性(动词,缩写为vt),以及其中文含义(即钦佩,羡慕,赞赏)。
进一步,在语言学习功能不包括语言学习测评功能的场景下,若对象20a触发关闭控件403b,则终端设备200a退出第二应用页面401b,例如更新显示应用二的主页面等。在语言学习功能包括语言学习测评功能,且语言学习复习功能对应的功能执行顺序早于语言学习测评功能对应的功能执行顺序的场景下,若对象20a触发关闭控件403b,如图6所示,终端设备200a响应针对关闭控件403b的触发操作,更新显示针对视频一的第二应用页面404b,其中,第二应用页面404b包括语言学习测评功能对应的测评提示区域405b以及关闭控件406b,其中,测评提示区域405b包括针对目标词汇列表402b中的目标语言词汇的测评题目,本申请实施例不对测评题目的题目类型进行限定,可以根据实际应用场景设定,例如选择题、填空题等,图6以选择题示意,故测评提示区域405b中包括测评题目对应的答复选项。
进一步,若对象20a触发关闭控件406b,则终端设备200a退出当前应用页面,更新显示应用二的主页面等。若对象20a触发答复操作,例如触发图6中的答复选项“admire”对应的选择控件407b,则终端设备200a将答复选项“admire”确定为测评题目“1、I____theteacher.”的答复内容。如图6所示,测评提示区域405b还可以包括测评题目的总数量(如图6中的数量3)、当前显示的测评题目所对应的题目序号(如图6中的序号1),以及用于显示下一个测评题目的题目切换控件(如图6中的“下一题”控件408b)。当对象20a触发“下一题”控件408b时,终端设备200a在测评提示区域405b中更新显示题目序号为2的测评题目,其中,针对题目序号为2的测评题目的处理过程,与终端设备200a针对题目序号为1的测评题目(测评题目“1、I____the teacher.”)的处理过程是相同的,故此处不进行赘述。
请再参见图6,针对题目序号为3的测评题目(即测评题目“3、She____herchildren and went abroad.”),对象20a选择答复选项“abandoned”,则终端设备200a将答复选项“abandoned”,确定为题目序号为3的测评题目的答复内容。此时,测评提示区域405b还可以包括用于显示上一个测评题目的题目切换控件(如图6中的“上一题”控件409b),以及结束答复控件(如图6中的结束控件410b)。如果对象20a想要更改题目序号为1的测评题目对应的答复内容,或题目序号为2的测评题目对应的答复内容,那么对象20a可以触发“上一题”控件409b,则终端设备200a可以显示题目序号为2的测评题目,若对象20a触发题目序号为2的测评题目所属的第二应用页面的“上一题”控件,则可以显示题目序号为1的测评题目。
若对象20a触发结束控件410b,则终端设备200a获取每个测评题目分别对应的答复内容,基于获取到的答复内容,确定测评结果,本申请实施例不对测评结果的具体内容进行限定,可以根据实际应用场景进行设定,例如若存在测评题目的答复内容为错误的答复内容,则终端设备200a可以显示该测评题目的正确的答复内容,并显示解析思路。
上文是在语言学习功能包括语言学习复习功能以及语言学习测评功能,且语言学习复习功能对应的功能执行顺序早于语言学习测评功能对应的功能执行顺序的场景下描述的。可选的,若语言学习功能仅包括语言学习测评功能,下面以图6为例简单叙述,此场景下,终端设备200a在2022年3月8日10点14分显示第二应用页面404b,后续过程请参见上文叙述,区别仅在于语言学习功能不包括语言学习复习功能。
可以理解的是,图5以及图6中所展示的界面以及控件仅仅是一些可供参考的表现形式,在实际业务场景中,开发人员可以根据产品需求来进行相关设计,本申请实施例对涉及到的界面和控件的具体形式不做限制。
综上所述,采用本申请,可以通过语言学习内容提高目标媒体内容的展示效果,进而可以提高多媒体数据的实用性,即多媒体数据不仅具有观赏性,还具有学习性。
请参见图7,图7是本申请实施例提供的一种数据处理方法的流程示意图二。该方法可以由服务器(例如,上述图1所示的服务器100a)执行,也可以由终端设备(例如,上述图1所示的终端设备200a)执行,还可以由服务器和终端设备交互执行。为便于理解,本申请实施例以该方法由终端设备执行为例进行说明。如图7所示,该方法至少可以包括以下步骤。
步骤S201,在多媒体应用中显示学习设置页面;学习设置页面包括语言设置区域以及学习类型设置区域。
具体的,本申请实施例不对学习设置页面的显示过程进行限定,可以是对象在多媒体应用中的主页面中触发学习设置控件,此时,终端设备选响应针对学习设置控件的触发操作,在多媒体应用页面中显示学习设置页面;可选的,对象在浏览多媒体应用中的多媒体数据时,终端设备显示学习设置页面;可以理解的是,学习设置页面的显示过程应当根据实际应用场景进行设定。
请一并参见图8,图8是本申请实施例提供的一种数据处理的场景示意图五。如图8所示,本申请实施例以应用二示例多媒体应用,学习设置页面701a可以包括标题,如图8中所示例的“开启学习计划”,可以包括语言设置区域702a以及与学习类型设置区域703a。
步骤S202,响应针对语言设置区域的设置操作,确定目标语言。
具体的,本申请实施例不对目标语言的设置方式进行限定,可以为对象在语言设置区域输入目标语言,例如对象激活语言设置区域,输入目标语言;也可以如图8所示,对象触发语言设置区域702a中的语言选择控件,终端设备响应针对语言选择控件的触发操作,显示语言列表704a;该语言列表704a由学习服务器提供,学习服务器根据图1的语言库100b所包含的各种语言生成语言列表704a,图8以英语、法语、地方语言1以及地方语言2示例语言列表704a中的语言。此外,对象可以触发语言列表704a中的滑动组件,以浏览更多的语言。
当对象触发英语对应的选择控件时,终端设备响应针对英语对应的选择控件的触发操作,将英语确定为目标语言。故终端设备可以将学习设置页面701a更新显示为学习设置页面705a,学习设置页面705a中的语言设置区域显示有目标语言(即英语),可以理解的是,若对象想要更改目标语言,则可以再次触发语言设置区域中的语言选择控件,后续过程与上述描述相同,故不进行赘述。
步骤S203,响应针对学习类型设置区域的设置操作,确定针对目标语言的目标语言学习类型。
具体的,本申请实施例不对目标语言学习类型的设置方式进行限定,可以为对象在学习类型设置区域输入目标语言学习类型,例如对象激活学习类型设置区域,输入目标语言学习类型;也可以如图8所示,对象触发学习类型设置区域703a中的学习类型选择控件,终端设备响应针对学习类型选择控件的触发操作,显示针对目标语言(图8以英语示例)的学习类型列表706a;该学习类型列表706a由学习服务器提供,学习服务器根据图1的语言库100b所包含的英语的语言基础知识,生成学习类型列表706a,图8以四级、六级、八级以及商务示例学习类型列表706a中的语言等级。此外,对象可以触发学习类型列表706a中的滑动组件,以浏览更多的学习类型。
当对象触发四级对应的选择控件时,终端设备响应针对四级对应的选择控件的触发操作,将英语四级确定为目标语言学习类型。故终端设备可以将学习设置页面705a更新显示为学习设置页面707a,学习设置页面707a中的学习类型设置区域显示有目标语言学习类型(即四级),可以理解的是,若对象想要更改目标语言学习类型,则可以再次触发学习类型设置区域中的学习类型选择控件,后续过程与上述描述相同,故不进行赘述。
若在设置目标语言或设置目标语言学习类型的过程中,对象触发取消控件709a,则终端设备取消显示学习设置页面,若对象设置好目标语言以及目标语言学习类型,且触发确定控件708a,则终端设备基于对象标识、目标语言以及目标语言学习类型生成语言学习计划,将语言学习计划本地保存,且将语言学习计划发送至学习服务器,学习服务器存储语言学习计划。可选的,基于语言学习计划,学习服务器将目标语言库发送至终端设备,故终端设备可以存储目标语言库,后续,基于目标语言库,终端设备可以生成属于目标语言库的目标媒体内容的语言学习内容。
上文图2以及图3分别对应的实施例主要介绍语言学习提示功能以及语言学习跟读功能,图4对应的实施例主要介绍语言学习复读功能、语言学习拼写功能、语言学习复习功能以及语言学习测评功能。本申请不对语言学习功能进行限定,可以根据目标语言库确定,例如,语言学习功能还可以包括语言学习词性功能以及语言学习时态功能等,其中,语言学习词性功能是指终端设备根据本地的目标语言库或学习服务器根据目标语言库,生成词性与目标语言词汇对应的词性不相同的第一关联语言词汇,例如目标语言词汇为admire,其词性为动词,终端设备根据语言学习词性功能,显示第一关联语言词汇,例如admiringly(副词)、admirer(名词)。语言学习词性功能是指终端设备根据本地的目标语言库或学习服务器根据目标语言库,生成时态与目标语言词汇对应的时态不相同的第二关联语言词汇,例如目标语言词汇为admire,其时态为一般现在时,终端设备根据语言学习时态功能,显示第二关联语言词汇,例如admired(一般过去时)、admiring(现在进行时)。
此外,语言学习功能、语言学习功能对应的语言学习内容、语言学习功能对应功能执行顺序,以及语言学习功能对应的功能执行条件可以由学习服务器预先设置好,终端设备按照学习服务器预先设置好的上述信息,显示属于目标语言库中的目标媒体内容的语言学习内容。
可选的,终端设备响应对象针对候选语言学习功能的选择操作,从学习服务器提供的候选语言学习功能中确定语言学习功能。具体过程可以为:学习设置页面还包括功能设置区域;在功能设置区域中显示候选语言学习功能;候选语言学习功能是针对目标语言库所提供的功能;响应针对候选语言学习功能的选择操作,将所选择的候选语言学习功能确定为语言学习功能;语言学习功能用于确定针对目标媒体内容的语言学习内容。
如图8中的学习设置页面701b所示,其包括功能设置区域702b,图8将语言学习提示功能简称为提示,将语言学习跟读功能简称为跟读,将语言学习复读功能简称为复读,将语言学习拼写功能简称为拼写,将语言学习复习功能简称为复习,将语言学习测评功能简称为测评,其中,上述6个语言学习功能分别对应的描述,请参见上文的实施例中的描述,此处不进行赘述。可以理解的是,对象在学习设置页面701b中设置目标语言以及目标语言学习类型的过程,与对象在学习设置页面701a中设置目标语言以及目标语言学习类型的过程是相同的,故请参见上文的描述,此处不进行赘述。
进一步,请参见图8中的学习设置页面702b,若对象触发提示对应的选择控件(简称提示选择控件)、拼写对应的选择控件(简称拼写选择控件)以及测评对应的选择控件(简称测评选择控件),则终端设备分别响应针对提示选择控件、拼写选择控件以及测评选择控件的触发操作,将提示、拼写以及测评确定为针对目标语言学习类型的语言学习功能。后续,终端设备基于对象标识、目标语言、目标语言学习类型以及语言学习功能生成语言学习计划,将语言学习计划本地保存,且将语言学习计划发送至学习服务器,学习服务器存储语言学习计划。可选的,基于语言学习计划,学习服务器将目标语言库发送至终端设备,故终端设备可以存储目标语言库,后续,基于目标语言库,终端设备可以生成属于目标语言库的目标媒体内容的语言学习内容。
步骤S204,在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容。
步骤S205,在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;
步骤S206,在多媒体应用中输出语言学习内容。
其中,步骤S204-步骤S206的具体实现过程,请参见上文图4所对应的实施例中的步骤S101-步骤S103,此处不进行赘述。
可以理解的是,图8中所展示的界面以及控件仅仅是一些可供参考的表现形式,在实际业务场景中,开发人员可以根据产品需求来进行相关设计,本申请实施例对涉及到的界面和控件的具体形式不做限制。
综上所述,采用本申请,可以通过语言学习内容提高目标媒体内容的展示效果,进而可以提高多媒体数据的实用性,即多媒体数据不仅具有观赏性,还具有学习性。
请参见图9,图9是本申请实施例提供的一种数据处理方法的流程示意图三。该方法可以由服务器(例如,上述图1所示的服务器100a)执行,也可以由终端设备(例如,上述图1所示的终端设备200a)执行,还可以由服务器和终端设备交互执行。为便于理解,本申请实施例以该方法由终端设备执行为例进行说明。如图9所示,该方法至少可以包括以下步骤。
步骤S301,在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容。
步骤S302,生成针对目标数据的学习内容获取请求;目标数据包括多媒体数据以及目标语言库。
步骤S303,基于学习内容获取请求,确定语言学习内容的内容状态。
结合步骤S301-步骤S303描述,请一并结合图10,图10本申请实施例提供的一种数据处理方法的交互流程示意图。如图10所示,步骤S401,运营设备上传语言基础知识;首先,运营对象在运营平台上传语言基础知识到学习服务器,本申请不对语言基础知识进行限定,可以为任何一种语言对应的基础知识。步骤S402,学习服务器保存语言基础知识;学习服务器根据语言基础知识的类别,生成语言选项,例如英语、法语、地方语言1等,根据上述语言选项生成语言列表;同理,根据语言(英语)对应的基础知识,学习服务器生成该语言对应的学习类型选项,例如英语四级、英语六级、商务英语等,进一步,根据学习类型选项生成学习类型列表。步骤S403,终端设备提交语言学习计划;该具体过程可以参见上文图7对应的实施例中的描述。步骤S404,学习服务器保存语言学习计划。步骤S405,终端设备输出多媒体数据;终端设备从多媒体服务器中获取多媒体数据,其中,多媒体服务器与学习服务器可以是同一个服务器,也可以是不同的服务器,本申请实施例对此不做限定。步骤S406,终端设备请求语言学习内容;终端设备输出多媒体数据时,可以生成学习内容获取请求,该请求用于请求语言学习内容。在终端设备本地有目标语言库(由学习服务器根据语言学习计划返回的)的场景下,终端设备可以在本地基于学习内容获取请求,确定语言学习内容的内容状态,进而基于内容状态,生成语言学习内容以及输出指令,该具体实现过程与学习服务器执行确定语言学习内容的内容状态,以及,基于内容状态生成语言学习内容以及输出指令的过程,是基本相同的,故此处不展开描述,请参见下文的描述。
步骤S304,基于内容状态,生成语言学习内容以及输出指令。
具体的,若内容状态为内容待生成状态,则获取多媒体数据对应的数据描述文本;基于数据描述文本获取针对多媒体数据的目标语言文本;目标语言文本所属的语言为目标语言;获取目标语言库,将目标语言文本以及目标语言库进行匹配,根据匹配结果确定目标语言文本中的候选目标语言词汇;基于语言学习功能,确定候选目标语言词汇对应的候选语言学习内容;语言学习功能是针对目标语言库所设置的功能;获取对象的对象学习特征,根据对象学习特征,从候选语言学习中确定语言学习内容,根据语言学习内容,生成输出指令。
其中,获取多媒体数据对应的数据描述文本的具体过程可以包括:若多媒体数据具有字幕文本,则将字幕文本确定为数据描述文本;若多媒体数据不具有字幕文本,则提取多媒体数据对应的音频数据;对音频数据进行音频识别处理,得到音频识别文本,将音频识别文本确定为数据描述文本。
其中,基于数据描述文本获取针对多媒体数据的目标语言文本的具体过程可以包括:若数据描述文本所属的语言为目标语言,则将数据描述文本确定为针对多媒体数据的目标语言文本;若数据描述文本所属的语言与目标语言不同,则基于目标语言,对数据描述文本进行语言变换处理,得到目标语言文本。
具体的,语言学习内容包括内容属性互不相同的M个语言学习子内容;M为正整数;从目标语言库中获取与语言学习功能相匹配的学习内容显示模板;学习内容显示模板包括子组件类型互不相同的M个视图子组件;M个视图子组件包括视图子组件Cd,d为正整数且d小于或等于M;在M个语言学习子内容中,获取与视图子组件Cd对应的子组件类型相匹配的语言学习子内容Ed;根据语言学习子内容Ed对视图子组件Cd进行渲染,当M个视图子组件均完成渲染时,得到学习内容显示模板对应的语言学习组件。
结合图10叙述,如图10所示,步骤S407,学习服务器判断是否已经生成目标数据对应的语言学习内容以及输出指令,该目标数据包括多媒体数据以及目标语言库,若已经生成,则语言学习内容的内容状态为内容已生成状态,此时,执行步骤S416,即学习服务器从目标语言库中获取语言学习内容以及输出指令,并将语言学习内容以及输出指令发送至终端设备。若未生成,则语言学习内容的内容状态为内容待生成状态,此时,执行步骤S408,学习服务器获取多媒体数据;本申请实施例不对学习服务器获取多媒体数据的方式进行限定,可以从多媒体服务器获取多媒体数据,也可以终端设备将多媒体数据发送至学习服务器。步骤S409,学习服务器确认多媒体数据是否有字幕文本,可以理解的是,若多媒体数据为文本数据,无需执行该步骤以及步骤S401;若多媒体数据包括字幕文本,则执行步骤S411;若多媒体数据不包括字幕文本,则执行步骤S410。步骤S410,学习服务器提取多媒体数据中的音频数据,对音频数据进行音频识别处理,得到音频识别文本;其中,本申请实施例可以采用基于语音技术的第一模型,对音频数据进行音频识别处理,得到音频识别文本;步骤S411,学习服务器可以采用基于自然语言处理的第二模型,对字幕文本或音频识别文本进行翻译,得到属于目标语言的目标语言文本;该步骤执行的条件是字幕文本或音频识别文本所属的语言与目标语言不同,例如字幕或音频识别文本所述的语言为中文,目标语言为英语;在字幕或音频识别文本所属的语言与目标语言相同时,学习服务器不执行本步骤,直接执行步骤S412。步骤S412,学习服务器将目标语言文本与目标语言库进行匹配;基于语言学习计划,学习服务器从语言库中获取目标语言库,可以基于机器学习的第三模型,将目标语言文本与目标语言库进行匹配;步骤S413,学习服务器得到匹配的学习知识点,生成候选语言学习内容,结合对象对应的对象学习特征(对象已授权的情况下),生成语言学习内容;其中,对象学习特征是指对象的历史学习行为数据,假设目标语言词汇包括第一目标语言词汇以及第二目标语言词汇,若对象学习特征表明对象针对第一目标语言词汇的拼写结果均为正确拼写结果,则可以将候选语言学习内容中针对第一目标语言词汇的语言拼写内容进行删除,或降低第一目标语言词汇的语言学习内容的输出频次;若对象学习特征表明对象针对第二目标语言词汇的测评结果为低质量测评结果,则针对第二目标语言词汇,可以生成额外的测评题目,将额外的测评题目添加至候选语言学习内容。明显地,通过对象学习特征,学习服务器可以推送更符合对象的学习情况的语言学习内容。步骤S414,学习服务器基于语言学习内容生成输出指令。步骤S415,学习服务器保存语言学习内容以及输出指令,后续,终端设备请求语言学习内容时,学习服务器可以直接执行步骤S416。步骤S416,学习服务器发送语言学习内容以及输出指令至终端设备。
步骤S305,在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;在多媒体应用中输出语言学习内容。
步骤S306,根据输出指令,在多媒体应用中输出语言学习内容。
请再参见图10,步骤S417,终端设备生成语言学习内容以及输出指令,其中,语言学习内容包含开始时间点、结束时间点、学习内容、显示样式等属性,按照上述属性,终端设备在第一应用页面中按照指定的时间点和指定样式,显示学习内容,如图3所示例的,终端设备在1分52秒,用气泡样式展示目标语言词汇“abilitya”,以及其含义,如图5所示例的,终端设备在播放进度为1分54秒,采用弹窗方式展示语言拼写区域405a。同时,终端设备按照输出指令控制多媒体应用的输出行为,输出指令包含功能指令、触发时间点、动作、行为指令、控制时间点等属性,请一并参见表1、图3以及图5,表1是本申请实施例提供的一种输出指令的示例表。如表1所示:
表1
根据跟读功能指令,在输出进度为1分52秒时,终端设备可以执行暂停行为指令,即暂停输出多媒体数据,动作是自动弹窗录音,如图3中的语言跟读区域303a,对象跟读完毕时,终端设备在1分52秒继续输出多媒体数据。根据复读功能指令,在输出进度为1分52秒-1分54秒的时间区间(为第二播放音频内容的播放时长)内,终端设备可以执行播放行为指令,动作为调整播放时间,即重新播放第二播放音频内容。根据拼写功能指令,在输出进度为1分54秒(第二播放音频内容播放完毕)时,终端设备可以执行暂停行为指令,即暂停输出多媒体数据,动作是弹窗输入文本,如图5中的语言拼写区域405a,对象拼写完毕时,终端设备在1分54秒继续输出多媒体数据。
请再参见图10,输出多媒体数据完毕时,终端设备执行步骤S418,即上传对象学习特征至学习服务器,或本地保存对象学习特征。请一并参见图11,图11是本申请实施例提供的一种学习服务器的功能模块的示意图。如图11所示,基于功能性,学习服务器可以包括如下功能模块。
1、基础知识管理模块,用于管理语言基础知识,比如英语四级词汇表、英语六级词汇表、英语四级词汇例句、英语四级词汇测验题等材料,由多媒体应用的运营对象上传或更新语言基础知识,可为对象提供语言列表以及学习类型列表,以使对象确定目标语言以及目标语言学习类型。
2、学习计划管理模块,用于保存对象的语言学习计划,对象可编辑或删除已有的语言学习计划。
3、多媒体内容获取模块,用于从多媒体服务器或终端设备获取多媒体数据,得到相应的音频数据和字幕文本,若无字幕文本,则调用音频识别模块生成相应的音频识别文本。
4、音频识别模块,主要用于对多媒体数据的音频数据进行音频识别,以及语义理解处理,得到相应的音频识别文本。
5、语言翻译模块,主要用于按照对象设定的目标语言,将字幕文本或音频识别文本进行翻译,得到目标语言文本,比如将中文字幕翻译为英语文本。
6、学习内容管理模块,主要根据目标语言文本,结合对象的语言学习计划,匹配出对象在多媒体数据中属于目标语言库的目标媒体内容,生成候选语言学习内容,结合对象的对象学习特征,为对象生成语言学习内容和输出指令。
7、输出指令管理模块,主要保存上述学习内容管理模块生成的输出指令,当对象再次浏览该多媒体数据时,下发输出指令。
8、内容显示管理模块,主要保存上述学习内容管理模块生成的语言学习内容,包括输出时间,包括相关的单词、例句、考题的输出时间以及输出样式。
9、学习特征管理模块,主要用于保存对象的学习记录及学习特征,以使学习内容管理模块为对象制定个性化的学习方案。
综上所述,本申请实施例在有各个语言分别对应的语言基础知识的条件下,即可根据多媒体数据的字幕文本或音频数据,生成该多媒体数据对应的语言学习内容,故可以生成任意一个多媒体数据对应语言学习内容,后续,由终端设备根据输出指令,在输出多媒体数据的同时,展现语言学习内容,进而可以从根本上解决学习素材不丰富的缺陷。故采用本申请,不仅可以通过语言学习内容提高目标媒体内容的展示效果,还可以提高多媒体数据的实用性。
进一步地,请参见图12,图12是本申请实施例提供的一种数据处理装置的结构示意图。上述数据处理装置1可以用于执行本申请实施例提供的方法中的相应步骤。如图12所示,该数据处理装置1可以包括:第一输出模块11以及第二输出模块12。
第一输出模块11,用于在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;
第二输出模块12,用于在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;
第二输出模块12,还用于在多媒体应用中输出语言学习内容。
其中,第一输出模块11以及第二输出模块12的具体功能实现方式可以参见上述图4对应实施例中的步骤S101-步骤S103,这里不再进行赘述。
再请参见图12,第二输出模块12,具体用于按照语言学习功能,获取针对目标媒体内容的语言学习内容;语言学习功能是针对目标语言库所设置的功能。
其中,第二输出模块12的具体功能实现方式可以参见上述图4对应实施例中的步骤S102,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习提示功能,语言学习内容包括基于目标媒体内容所确定的目标语言词汇,以及目标语言词汇对应的目标含义;
第二输出模块12可以包括:第一显示单元121以及第二显示单元122。
第一显示单元121,用于根据语言学习提示功能,在第一应用页面中显示语言提示区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;
第一显示单元121,还用于在语言提示区域中显示目标含义以及属于目标语言的目标语言词汇;目标含义所属的语言是对象在多媒体应用中所设置的默认显示语言;
第二显示单元122,用于当语言提示区域的显示时长超过预设显示时长时,取消显示语言提示区域。
其中,第一显示单元121以及第二显示单元122的具体功能实现方式可以参见上述图2对应实施例中的描述,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习跟读功能;语言学习内容包括目标媒体内容对应的第一播放音频内容;第一播放音频内容所属的语言为目标语言;
第二输出模块12可以包括:第一暂停单元123、第三显示单元124以及第一输出单元125。
第一暂停单元123,用于根据语言学习跟读功能,暂停输出多媒体数据;
第三显示单元124,用于在第一应用页面中显示语言跟读区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;语言跟读区域包括用于提示对象跟读第一播放音频内容的跟读提示信息;
第一输出单元125,用于播放第一播放音频内容,若响应针对第一播放音频内容的音频输入操作,则输出针对跟读音频内容的跟读质量结果;跟读音频内容是基于音频输入操作所输入的音频内容。
其中,第一暂停单元123、第三显示单元124以及第一输出单元125的具体功能实现方式可以参见上述图2对应实施例中的描述,这里不再进行赘述。
再请参见图12,第三显示单元124,还用于在语言跟读区域中显示虚拟录音设备;
则第一输出单元125可以包括:音频播放子单元1251、第一获取子单元1252以及第一取消子单元1253。
音频播放子单元1251,用于在第一时刻播放第一播放音频内容;
第一获取子单元1252,用于若在第二时刻响应针对第一播放音频内容的音频输入操作,则将虚拟录音设备的静止状态更新为交互状态,获取虚拟录音设备处于交互状态期间内的跟读音频内容,在虚拟录音设备中输出针对跟读音频内容的跟读质量结果;第二时刻晚于第一时刻,且第二时刻与第一时刻之间的时间间隔小于时间间隔阈值;
第一取消子单元1253,用于若在第三时刻未响应针对第一播放音频内容的音频输入操作,则取消显示语言跟读区域,继续输出多媒体数据;第三时刻晚于第二时刻,且第三时刻与第一时刻之间的时间间隔等于时间间隔阈值。
其中,音频播放子单元1251、第一获取子单元1252以及第一取消子单元1253的具体功能实现方式可以参见上述图2对应实施例中的描述,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习复读功能;语言学习内容包括目标媒体内容对应的第二播放音频内容;
第二输出模块12可以包括:第四显示单元126以及音频播放单元127。
第四显示单元126,用于根据语言学习复读功能,在第一应用页面中显示针对第二播放音频内容的复读控件;复读控件用于表征目标媒体内容所属的语言为目标语言;第一应用页面是指多媒体应用中输出多媒体数据的页面;
音频播放单元127,用于若在第一应用页面中响应针对复读控件的触发操作,则重新播放第二播放音频内容。
其中,第四显示单元126以及音频播放单元127的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习拼写功能;语言学习内容包括目标媒体内容对应的第一词汇拼写内容;
第二输出模块12可以包括:第二暂停单元128、第五显示单元129以及第二输出单元220。
第二暂停单元128,用于根据语言学习拼写功能,暂停输出多媒体数据;
第五显示单元129,用于在第一应用页面中显示语言拼写区域;第一应用页面是指多媒体应用中输出多媒体数据的页面;语言拼写区域包括关闭控件、目标输入框,以及用于提示对象在目标输入框中输入第一词汇拼写内容的拼写提示信息;
第二输出单元220,用于若响应针对关闭控件的触发操作,则继续输出多媒体内容;
第二输出单元220,还用于若响应针对目标输入框的词汇输入操作,则获取第二词汇拼写内容,基于第二词汇拼写内容继续输出多媒体内容。
其中,第二暂停单元128、第五显示单元129以及第二输出单元220的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,第二输出模块12还可以包括:内容遮盖模块221。
内容遮盖模块221,用于若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则对所输出的目标媒体内容进行遮盖。
其中,内容遮盖模块221的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,第二输出单元220可以包括:第二取消子单元2201、内容删除子单元2202以及第二获取子单元2203。
第二取消子单元2201,用于若第二词汇拼写内容与第一词汇拼写内容相同,则取消显示语言拼写区域,继续输出多媒体内容;
内容删除子单元2202,用于若第二词汇拼写内容与第一词汇拼写内容不同,则删除第二词汇拼写内容,在语言拼写区域中显示拼写错误提示信息;
第二获取子单元2203,用于若响应针对目标输入区域的词汇重新输入操作,则获取第三词汇拼写内容,基于第三词汇拼写内容继续输出多媒体内容。
其中,第二取消子单元2201、内容删除子单元2202以及第二获取子单元2203的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习复习功能;语言学习内容包括目标词汇列表;
第二输出模块12可以包括:第六显示单元222以及第七显示单元223。
第六显示单元222,用于根据语言学习复习功能,在第二应用页面中显示复习提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;
第七显示单元223,用于在复习提示区域中显示目标词汇列表;目标词汇列表包括基于目标媒体内容所确定的目标语言词汇,以及目标语言词汇对应的目标含义;目标语言词汇所属的语言属于目标语言。
其中,第六显示单元222以及第七显示单元223的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,语言学习功能包括语言学习测评功能;语言学习内容包括针对目标媒体内容的测评题目,以及测评题目对应的测评结果;
第二输出模块12可以包括:第八显示单元224以及第九显示单元225。
第八显示单元224,用于根据语言学习测评功能,在第二应用页面中显示测评提示区域;第二应用页面用于表征在多媒体应用中多媒体数据输出完毕;
第九显示单元225,用于在测评提示区域中显示测评题目,响应针对测评题目的答复操作,显示针对答复内容的测评结果;答复内容是基于答复操作所输入的内容。
其中,第八显示单元224以及第九显示单元225的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,语言学习功能的总数量为至少两个;
第二输出模块12可以包括:第一获取单元226以及第三输出单元227。
第一获取单元226,用于获取至少两个语言学习功能以及至少两个语言学习功能分别对应的功能执行顺序;至少两个语言学习功能包括第一语言学习功能以及第二语言学习功能;其中,第一语言学习功能对应的功能执行顺序早于第二语言学习功能对应的功能执行顺序;语言学习内容包括所述第一语言学习功能对应的第一语言学习内容,以及第二语言学习功能对应的第二语言学习内容;
第三输出单元227,用于在第四时刻,根据第一语言学习功能,在多媒体应用中输出第一语言学习内容;
第三输出单元227,还用于在第五时刻,根据第二语言学习功能,在多媒体应用中输出第二语言学习内容;第五时刻晚于第四时刻。
其中,第一获取单元226以及第三输出单元22的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,数据处理装置1还可以包括:第三输出模块13。
第三输出模块13,用于若目标媒体内容的媒体类型为文本媒体类型,且目标媒体内容所属的语言为目标语言,则在第一应用页面中以高亮显示的方式输出目标媒体内容;第一应用页面是指多媒体应用中输出多媒体数据的页面。
其中,第三输出模块13的具体功能实现方式可以参见上述图4对应实施例中的步骤S103,这里不再进行赘述。
再请参见图12,数据处理装置1还可以包括:第一显示模块14、第一确定模块15以及第二确定模块16。
第一显示模块14,用于在多媒体应用中显示学习设置页面;学习设置页面包括语言设置区域以及学习类型设置区域;
第一确定模块15,用于响应针对语言设置区域的设置操作,确定目标语言;
第二确定模块16,用于响应针对学习类型设置区域的设置操作,确定针对目标语言的目标语言学习类型。
其中,第一显示模块14、第一确定模块15以及第二确定模块16的具体功能实现方式可以参见上述图7对应实施例中的步骤S201-步骤S203,这里不再进行赘述。
再请参见图12,学习设置页面还包括功能设置区域;
数据处理装置1还可以包括:第二显示模块17以及第三确定模块18。
第二显示模块17,用于在功能设置区域中显示候选语言学习功能;候选语言学习功能是针对目标语言库所提供的功能;
第三确定模块18,用于响应针对候选语言学习功能的选择操作,将所选择的候选语言学习功能确定为语言学习功能;语言学习功能用于确定针对目标媒体内容的语言学习内容。
其中,第二显示模块17以及第三确定模块18的具体功能实现方式可以参见上述图7对应实施例中的步骤S203,这里不再进行赘述。
再请参见图12,数据处理装置1还可以包括:第一生成模块19、第四确定模块20以及第二生成模块21。
第一生成模块19,用于生成针对目标数据的学习内容获取请求;目标数据包括多媒体数据以及目标语言库;
第四确定模块20,用于基于学习内容获取请求,确定语言学习内容的内容状态;
第二生成模块21,用于基于内容状态,生成语言学习内容以及输出指令;
则第二输出模块12,具体用于根据输出指令,在多媒体应用中输出语言学习内容。
其中,第一生成模块19、第四确定模块20以及第二生成模块21的具体功能实现方式可以参见上述图9对应实施例中的步骤S302-步骤S306,这里不再进行赘述。
再请参见图12,第二生成模块21可以包括:第二获取单元211、第三获取单元212、第一确定单元213、第二确定单元214以及第三确定单元215。
第二获取单元211,用于若内容状态为内容待生成状态,则获取多媒体数据对应的数据描述文本;
第三获取单元212,用于基于数据描述文本获取针对多媒体数据的目标语言文本;目标语言文本所属的语言为目标语言;
第一确定单元213,用于获取目标语言库,将目标语言文本以及目标语言库进行匹配,根据匹配结果确定目标语言文本中的候选目标语言词汇;
第二确定单元214,用于基于语言学习功能,确定候选目标语言词汇对应的候选语言学习内容;语言学习功能是针对目标语言库所设置的功能;
第三确定单元215,用于获取对象的对象学习特征,根据对象学习特征,从候选语言学习中确定语言学习内容,根据语言学习内容,生成输出指令。
其中,第二获取单元211、第三获取单元212、第一确定单元213、第二确定单元214以及第三确定单元215的具体功能实现方式可以参见上述图9对应实施例中的步骤S304,这里不再进行赘述。
再请参见图12,第二获取单元211可以包括:第一确定子单元2111、音频提取子单元2112以及第二确定子单元2113。
第一确定子单元2111,用于若多媒体数据具有字幕文本,则将字幕文本确定为数据描述文本;
音频提取子单元2112,用于若多媒体数据不具有字幕文本,则提取多媒体数据对应的音频数据;
第二确定子单元2113,用于对音频数据进行音频识别处理,得到音频识别文本,将音频识别文本确定为数据描述文本。
则第三获取单元212可以包括:第三确定子单元2121以及第四确定子单元2122。
第三确定子单元2121,用于若数据描述文本所属的语言为目标语言,则将数据描述文本确定为针对多媒体数据的目标语言文本;
第四确定子单元2122,用于若数据描述文本所属的语言与目标语言不同,则基于目标语言,对数据描述文本进行语言变换处理,得到目标语言文本。
其中,第一确定子单元2111、音频提取子单元2112、第二确定子单元2113、第三确定子单元2121以及第四确定子单元2122的具体功能实现方式可以参见上述图9对应实施例中的步骤S304,这里不再进行赘述。
再请参见图12,语言学习内容包括内容属性互不相同的M个语言学习子内容;M为正整数;
第二生成模块21还可以包括:第四获取单元216以及第五获取单元217。
第四获取单元216,用于从目标语言库中获取与语言学习功能相匹配的学习内容显示模板;学习内容显示模板包括子组件类型互不相同的M个视图子组件;M个视图子组件包括视图子组件Cd,d为正整数且d小于或等于M;
第五获取单元217,用于在M个语言学习子内容中,获取与视图子组件Cd对应的子组件类型相匹配的语言学习子内容Ed
第五获取单元217,还用于根据语言学习子内容Ed对视图子组件Cd进行渲染,当M个视图子组件均完成渲染时,得到学习内容显示模板对应的语言学习组件;
则第二输出模块12,具体用于根据输出指令,在多媒体应用中输出针对目标媒体内容的语言学习组件。
其中,第四获取单元216、第五获取单元217以及第二输出模块12的具体功能实现方式可以参见上述图9对应实施例中的步骤S304-步骤S306,这里不再进行赘述。
综上所述,本申请的实施例基于目标语言库,可生成多媒体数据对应的语言学习内容,解决了目标语言对应的学习素材不足的局限;同时,本申请实施例基于多媒体应用,可以为对象提供语言学习功能,让对象在观看或听写自己感兴趣的多媒体数据的同时,又能有效学习语言知识,故增加了多媒体应用的实用功能。
进一步地,请参见图13,图13是本申请实施例提供的一种计算机设备的结构示意图。如图13所示,该计算机设备1000可以包括:至少一个处理器1001,例如CPU,至少一个网络接口1004,用户接口1003,存储器1005,至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,在一些实施例中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),网络接口1004可选地可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器1005可选地还可以是至少一个位于远离前述处理器1001的存储装置。如图13所示,作为一种计算机存储介质的存储器1005可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
在图13所示的计算机设备1000中,网络接口1004可提供网络通讯功能;而用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的设备控制应用程序,以实现:
在多媒体应用中输出多媒体数据;多媒体数据包括目标媒体内容;
在目标媒体内容属于目标语言库时,获取针对目标媒体内容的语言学习内容;语言学习内容是基于目标语言库所确定的;目标语言库是基于对象在多媒体应用中所设置的目标语言以及针对目标语言的目标语言学习类型所确定的;
在多媒体应用中输出语言学习内容。
应当理解,本申请实施例中所描述的计算机设备1000可执行前文各实施例中对数据处理方法或装置的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行时实现前文各实施例中对数据处理方法或装置的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
上述计算机可读存储介质可以是前述任一实施例提供的数据处理装置或者上述计算机设备的内部存储单元,例如计算机设备的硬盘或内存。该计算机可读存储介质也可以是该计算机设备的外部存储设备,例如该计算机设备上配备的插接式硬盘,智能存储卡(smart media card,SMC),安全数字(secure digital,SD)卡,闪存卡(flash card)等。进一步地,该计算机可读存储介质还可以既包括该计算机设备的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该计算机设备所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本申请实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机程序,处理器执行该计算机程序,使得该计算机设备可执行前文各实施例中对数据处理方法或装置的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
本申请实施例的说明书和权利要求书及附图中的术语“第一”、“第二”等是用于区别不同对象,而非用于描述特定顺序。此外,术语“包括”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、装置、产品或设备没有限定于已列出的步骤或模块,而是可选地还包括没有列出的步骤或模块,或可选地还包括对于这些过程、方法、装置、产品或设备固有的其他步骤单元。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (23)

1.一种数据处理方法,其特征在于,包括:
在多媒体应用中输出多媒体数据;所述多媒体数据包括目标媒体内容;
在所述目标媒体内容属于目标语言库时,获取针对所述目标媒体内容的语言学习内容;所述语言学习内容是基于所述目标语言库所确定的;所述目标语言库是基于对象在所述多媒体应用中所设置的目标语言以及针对所述目标语言的目标语言学习类型所确定的;
在所述多媒体应用中输出所述语言学习内容。
2.根据权利要求1所述的方法,其特征在于,所述获取针对所述目标媒体内容的语言学习内容,包括:
按照语言学习功能,获取针对所述目标媒体内容的语言学习内容;所述语言学习功能是针对所述目标语言库所设置的功能。
3.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习提示功能,所述语言学习内容包括基于所述目标媒体内容所确定的目标语言词汇,以及所述目标语言词汇对应的目标含义;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习提示功能,在第一应用页面中显示语言提示区域;所述第一应用页面是指所述多媒体应用中输出所述多媒体数据的页面;
在所述语言提示区域中显示所述目标含义以及属于所述目标语言的所述目标语言词汇;所述目标含义所属的语言是所述对象在所述多媒体应用中所设置的默认显示语言;
当所述语言提示区域的显示时长超过预设显示时长时,取消显示所述语言提示区域。
4.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习跟读功能;所述语言学习内容包括所述目标媒体内容对应的第一播放音频内容;所述第一播放音频内容所属的语言为所述目标语言;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习跟读功能,暂停输出所述多媒体数据;
在第一应用页面中显示语言跟读区域;所述第一应用页面是指所述多媒体应用中输出所述多媒体数据的页面;所述语言跟读区域包括用于提示所述对象跟读所述第一播放音频内容的跟读提示信息;
播放所述第一播放音频内容,若响应针对所述第一播放音频内容的音频输入操作,则输出针对跟读音频内容的跟读质量结果;所述跟读音频内容是基于所述音频输入操作所输入的音频内容。
5.根据权利要求4所述的方法,其特征在于,还包括:
在所述语言跟读区域中显示虚拟录音设备;
则所述播放所述第一播放音频内容,若响应针对所述第一播放音频内容的音频输入操作,则输出针对跟读音频内容的跟读质量结果,包括:
在第一时刻播放所述第一播放音频内容;
若在第二时刻响应针对所述第一播放音频内容的音频输入操作,则将所述虚拟录音设备的静止状态更新为交互状态,获取所述虚拟录音设备处于所述交互状态期间内的跟读音频内容,在所述虚拟录音设备中输出针对所述跟读音频内容的跟读质量结果;所述第二时刻晚于所述第一时刻,且所述第二时刻与所述第一时刻之间的时间间隔小于时间间隔阈值;
若在第三时刻未响应针对所述第一播放音频内容的音频输入操作,则取消显示所述语言跟读区域,继续输出所述多媒体数据;所述第三时刻晚于所述第二时刻,且所述第三时刻与所述第一时刻之间的时间间隔等于所述时间间隔阈值。
6.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习复读功能;所述语言学习内容包括所述目标媒体内容对应的第二播放音频内容;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习复读功能,在第一应用页面中显示针对所述第二播放音频内容的复读控件;所述复读控件用于表征所述目标媒体内容所属的语言为所述目标语言;所述第一应用页面是指所述多媒体应用中输出所述多媒体数据的页面;
若在所述第一应用页面中响应针对所述复读控件的触发操作,则重新播放所述第二播放音频内容。
7.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习拼写功能;所述语言学习内容包括所述目标媒体内容对应的第一词汇拼写内容;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习拼写功能,暂停输出所述多媒体数据;
在第一应用页面中显示语言拼写区域;所述第一应用页面是指所述多媒体应用中输出所述多媒体数据的页面;所述语言拼写区域包括关闭控件、目标输入框,以及用于提示所述对象在所述目标输入框中输入所述第一词汇拼写内容的拼写提示信息;
若响应针对所述关闭控件的触发操作,则继续输出所述多媒体内容;
若响应针对所述目标输入框的词汇输入操作,则获取第二词汇拼写内容,基于所述第二词汇拼写内容继续输出所述多媒体内容。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
若所述目标媒体内容的媒体类型为文本媒体类型,且所述目标媒体内容所属的语言为所述目标语言,则对所输出的所述目标媒体内容进行遮盖。
9.根据权利要求7所述的方法,其特征在于,所述基于所述第二词汇拼写内容继续输出所述多媒体内容,包括:
若所述第二词汇拼写内容与所述第一词汇拼写内容相同,则取消显示所述语言拼写区域,继续输出所述多媒体内容;
若所述第二词汇拼写内容与所述第一词汇拼写内容不同,则删除所述第二词汇拼写内容,在所述语言拼写区域中显示拼写错误提示信息;
若响应针对所述目标输入区域的词汇重新输入操作,则获取第三词汇拼写内容,基于所述第三词汇拼写内容继续输出所述多媒体内容。
10.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习复习功能;所述语言学习内容包括目标词汇列表;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习复习功能,在第二应用页面中显示复习提示区域;所述第二应用页面用于表征在所述多媒体应用中所述多媒体数据输出完毕;
在所述复习提示区域中显示所述目标词汇列表;所述目标词汇列表包括基于所述目标媒体内容所确定的目标语言词汇,以及所述目标语言词汇对应的目标含义;所述目标语言词汇所属的语言属于所述目标语言。
11.根据权利要求2所述的方法,其特征在于,所述语言学习功能包括语言学习测评功能;所述语言学习内容包括针对所述目标媒体内容的测评题目,以及所述测评题目对应的测评结果;
所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述语言学习测评功能,在第二应用页面中显示测评提示区域;所述第二应用页面用于表征在所述多媒体应用中所述多媒体数据输出完毕;
在所述测评提示区域中显示所述测评题目,响应针对所述测评题目的答复操作,显示针对答复内容的所述测评结果;所述答复内容是基于所述答复操作所输入的内容。
12.根据权利要求2所述的方法,其特征在于,所述语言学习功能的总数量为至少两个;
所述在所述多媒体应用中输出所述语言学习内容,包括:
获取至少两个语言学习功能分别对应的功能执行顺序;所述至少两个语言学习功能包括第一语言学习功能以及第二语言学习功能;其中,第一语言学习功能对应的功能执行顺序早于所述第二语言学习功能对应的功能执行顺序;所述语言学习内容包括所述第一语言学习功能对应的第一语言学习内容,以及所述第二语言学习功能对应的第二语言学习内容;
在第四时刻,根据所述第一语言学习功能,在所述多媒体应用中输出所述第一语言学习内容;
在第五时刻,根据所述第二语言学习功能,在所述多媒体应用中输出所述第二语言学习内容;所述第五时刻晚于所述第四时刻。
13.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若所述目标媒体内容的媒体类型为文本媒体类型,且所述目标媒体内容所属的语言为所述目标语言,则在第一应用页面中以高亮显示的方式输出所述目标媒体内容;所述第一应用页面是指所述多媒体应用中输出所述多媒体数据的页面。
14.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述多媒体应用中显示学习设置页面;所述学习设置页面包括语言设置区域以及学习类型设置区域;
响应针对所述语言设置区域的设置操作,确定所述目标语言;
响应针对所述学习类型设置区域的设置操作,确定针对所述目标语言的所述目标语言学习类型。
15.根据权利要求14所述的方法,其特征在于,所述学习设置页面还包括功能设置区域;
所述方法还包括:
在所述功能设置区域中显示候选语言学习功能;所述候选语言学习功能是针对所述目标语言库所提供的功能;
响应针对所述候选语言学习功能的选择操作,将所选择的候选语言学习功能确定为语言学习功能;所述语言学习功能用于确定针对所述目标媒体内容的语言学习内容。
16.根据权利要求1所述的方法,其特征在于,所述方法还包括:
生成针对目标数据的学习内容获取请求;所述目标数据包括所述多媒体数据以及所述目标语言库;
基于所述学习内容获取请求,确定所述语言学习内容的内容状态;
基于所述内容状态,生成所述语言学习内容以及输出指令;
则所述在所述多媒体应用中输出所述语言学习内容,包括:
根据所述输出指令,在所述多媒体应用中输出所述语言学习内容。
17.根据权利要求16所述的方法,其特征在于,所述基于所述内容状态,生成所述语言学习内容以及输出指令,包括:
若所述内容状态为内容待生成状态,则获取所述多媒体数据对应的数据描述文本;
基于所述数据描述文本获取针对所述多媒体数据的目标语言文本;所述目标语言文本所属的语言为所述目标语言;
获取所述目标语言库,将所述目标语言文本以及所述目标语言库进行匹配,根据匹配结果确定所述目标语言文本中的候选目标语言词汇;
基于语言学习功能,确定所述候选目标语言词汇对应的候选语言学习内容;所述语言学习功能是针对所述目标语言库所设置的功能;
获取所述对象的对象学习特征,根据所述对象学习特征,从所述候选语言学习中确定所述语言学习内容,根据所述语言学习内容,生成输出指令。
18.根据权利要求17所述的方法,其特征在于,所述获取所述多媒体数据对应的数据描述文本,包括:
若所述多媒体数据具有字幕文本,则将所述字幕文本确定为数据描述文本;
若所述多媒体数据不具有字幕文本,则提取所述多媒体数据对应的音频数据;
对所述音频数据进行音频识别处理,得到音频识别文本,将所述音频识别文本确定为所述数据描述文本;
则所述基于所述数据描述文本获取针对所述多媒体数据的目标语言文本,包括:
若所述数据描述文本所属的语言为所述目标语言,则将所述数据描述文本确定为针对所述多媒体数据的目标语言文本;
若所述数据描述文本所属的语言与所述目标语言不同,则基于所述目标语言,对所述数据描述文本进行语言变换处理,得到所述目标语言文本。
19.根据权利要求17所述的方法,其特征在于,所述语言学习内容包括内容属性互不相同的M个语言学习子内容;M为正整数;
所述方法还包括:
从所述目标语言库中获取与语言学习功能相匹配的学习内容显示模板;所述学习内容显示模板包括子组件类型互不相同的M个视图子组件;所述M个视图子组件包括视图子组件Cd,d为正整数且d小于或等于M;
在所述M个语言学习子内容中,获取与所述视图子组件Cd对应的子组件类型相匹配的语言学习子内容Ed
根据所述语言学习子内容Ed对所述视图子组件Cd进行渲染,当所述M个视图子组件均完成渲染时,得到所述学习内容显示模板对应的语言学习组件;
则所述根据所述输出指令,在所述多媒体应用中输出所述语言学习内容,包括:
根据所述输出指令,在所述多媒体应用中输出针对所述目标媒体内容的语言学习组件。
20.一种数据处理装置,其特征在于,包括:
第一输出模块,用于在多媒体应用中输出多媒体数据;所述多媒体数据包括目标媒体内容;
第二输出模块,用于在所述目标媒体内容属于目标语言库时,获取针对所述目标媒体内容的语言学习内容;所述语言学习内容是基于所述目标语言库所确定的;所述目标语言库是基于对象在所述多媒体应用中所设置的目标语言以及针对所述目标语言的目标语言学习类型所确定的;
所述第二输出模块,还用于在所述多媒体应用中输出所述语言学习内容。
21.一种计算机设备,其特征在于,包括:处理器、存储器以及网络接口;
所述处理器与所述存储器、所述网络接口相连,其中,所述网络接口用于提供数据通信功能,所述存储器用于存储计算机程序,所述处理器用于调用所述计算机程序,以使得所述计算机设备执行权利要求1至19任一项所述的方法。
22.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,所述计算机程序适于由处理器加载并执行,以使得具有所述处理器的计算机设备执行权利要求1-19任一项所述的方法。
23.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序,所述计算机程序存储在计算机可读存储介质中,所述计算机程序适于由处理器读取并执行,以使得具有所述处理器的计算机设备执行权利要求1-19任一项所述的方法。
CN202210414881.6A 2022-04-20 2022-04-20 一种数据处理方法、装置、设备以及计算机可读存储介质 Pending CN116955659A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210414881.6A CN116955659A (zh) 2022-04-20 2022-04-20 一种数据处理方法、装置、设备以及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210414881.6A CN116955659A (zh) 2022-04-20 2022-04-20 一种数据处理方法、装置、设备以及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN116955659A true CN116955659A (zh) 2023-10-27

Family

ID=88447900

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210414881.6A Pending CN116955659A (zh) 2022-04-20 2022-04-20 一种数据处理方法、装置、设备以及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN116955659A (zh)

Similar Documents

Publication Publication Date Title
CN110035330B (zh) 基于在线教育的视频生成方法、系统、设备及存储介质
Serban et al. A survey of available corpora for building data-driven dialogue systems
US12022974B2 (en) Natural conversation storytelling system
CN116702737B (zh) 文案生成方法、装置、设备、存储介质及产品
US20140272820A1 (en) Language learning environment
US11107465B2 (en) Natural conversation storytelling system
Arguello et al. Tip of the tongue known-item retrieval: A case study in movie identification
US20150213793A1 (en) Methods and systems for converting text to video
CN114339285B (zh) 知识点的处理方法、视频处理方法、装置及电子设备
US20160217704A1 (en) Information processing device, control method therefor, and computer program
KR20190083532A (ko) 학습자가 선택한 동영상을 학습 콘텐츠로 활용하는 외국어 학습시스템 및 이의 학습 콘텐츠 생성방법
CN113407766A (zh) 视觉动画显示方法及相关设备
TW201303723A (zh) 線上互動式三維多媒體編輯交流架構、編輯交流方法及其電腦可讀取媒體
KR20160137384A (ko) 인터넷을 이용한 외국어 교육 콘텐츠 제공시스템 및 제공방법
CN116955659A (zh) 一种数据处理方法、装置、设备以及计算机可读存储介质
Chierici et al. A cloud-based user-centered time-offset interaction application
Loke et al. Video seeking behavior of young adults for self directed learning
JP6740803B2 (ja) 情報処理装置、情報処理システム、プログラム
Law House MD and creativity: A corpus linguistic systemic functional multimodal discourse analysis approach
Lee PRESTIGE: MOBILIZING AN ORALLY ANNOTATED LANGUAGE DOCUMENTATION CORPUS
Mejías-CLiMent Corpus studies and localization: a research proposal for interactive material
Balzano et al. Lectures Retrieval: Improving Students’ E-learning Process with a Search Engine Based on ASR Model
Kodagoda et al. APlus: An Intelligent Lecture Delivery System using Artificial Intelligence Learning Analytics
Cruz-Lara et al. Immersive 3D environments and multilinguality: Some non-intrusive and dynamic e-learning-oriented scenarios based on textual information
Zhang et al. Design of Multimedia Courseware Synchronous Display System for Distance Teaching

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination