CN111787363A - 一种多媒体数据处理方法、装置、设备及可读存储介质 - Google Patents

一种多媒体数据处理方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN111787363A
CN111787363A CN202010588325.1A CN202010588325A CN111787363A CN 111787363 A CN111787363 A CN 111787363A CN 202010588325 A CN202010588325 A CN 202010588325A CN 111787363 A CN111787363 A CN 111787363A
Authority
CN
China
Prior art keywords
subtitle
task
multimedia data
caption
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010588325.1A
Other languages
English (en)
Other versions
CN111787363B (zh
Inventor
刘亚运
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010588325.1A priority Critical patent/CN111787363B/zh
Publication of CN111787363A publication Critical patent/CN111787363A/zh
Application granted granted Critical
Publication of CN111787363B publication Critical patent/CN111787363B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8352Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种多媒体数据处理方法、装置、设备及可读存储介质,本申请属于计算机技术领域,方法包括:响应针对字幕审核界面的语言选择操作,展示字幕任务列表;响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段,根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本。采用本申请,可以减少字幕审核流程中的流量消耗。

Description

一种多媒体数据处理方法、装置、设备及可读存储介质
技术领域
本申请涉及计算机技术领域,尤其涉及一种多媒体数据处理方法、装置、设备及可读存储介质。
背景技术
随着多媒体技术的发展,视频与音乐等多媒体数据已成为人们日常生活中获取信息与享受娱乐的主要载体。不同的多媒体软件的爆炸式增长使海量视频、海量音乐出现在人们的视野中,对于视频、音乐中的字幕对用户极为重要,用户可以根据字幕准确的获取信息。
在现有技术中,用户在观看媒体数据时,不仅可以浏览字幕,还可以提交针对字幕的投诉建议,工作人员再对这些投诉建议进行审核和反馈,以更好的完善原有字幕。工作人员在从后台拉取字幕的投诉建议时,后台往往是按照投诉建议的提交时间顺序来推给工作人员,然而这些字幕的投诉建议中可能会存在工作人员并不懂的字幕语言类型,那么工作人员就无法对这一部分字幕的投诉建议进行反馈,因此,后台所推送的这一部分字幕的投诉建议会导致流量的浪费。
发明内容
本申请实施例提供一种多媒体数据处理方法、装置、设备以及可读存储介质,可以减少字幕审核流程中流量的消耗。
本申请实施例一方面提供一种多媒体数据处理方法,包括:
响应针对字幕审核界面的语言选择操作,展示字幕任务列表;字幕任务列表中的字幕任务所属的多媒体数据,包括语言选择操作所选择的目标语言类型;字幕任务用于关联多媒体数据中的原始字幕片段;
响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;字幕反馈信息列表中的字幕反馈信息与字幕任务选择操作所选择的待审核字幕任务相关联;字幕反馈信息包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段,根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
本申请实施例一方面提供一种多媒体数据处理装置,包括:
任务列表展示模块,用于响应针对字幕审核界面的语言选择操作,展示字幕任务列表;字幕任务列表中的字幕任务所属的多媒体数据,包括语言选择操作所选择的目标语言类型;字幕任务用于关联多媒体数据中的原始字幕片段;
反馈列表展示模块,用于响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;字幕反馈信息列表中的字幕反馈信息与字幕任务选择操作所选择的待审核字幕任务相关联;字幕反馈信息包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
审核字幕生成模块,用于响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段;
字幕更新模块,用于根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
其中,任务列表展示模块包括:
媒体数据展示单元,用于响应针对字幕审核界面的语言选择操作,展示多媒体数据任务列表;多媒体数据任务列表中的多媒体数据,包括语言选择操作所选择的目标语言类型;
字幕任务展示单元,用于响应针对多媒体数据任务列表的多媒体数据选择操作,展示字幕任务列表;字幕任务列表中的字幕任务与多媒体数据选择操作所选择的多媒体数据相关联。
其中,媒体数据展示单元包括:
数据查询请求发送子单元,用于响应针对字幕审核界面的语言选择操作,向业务服务器发送多媒体数据查询请求;多媒体数据查询请求中携带目标语言类型;
媒体数据展示子单元,用于接收业务服务器根据目标语言类型对应的语言映射关系所返回的多媒体数据任务列表,将多媒体数据任务列表展示于字幕审核界面中;语言映射关系是由业务服务器在目标语言类型与包含目标语言类型的多媒体数据之间所创建的映射关系。
其中,字幕任务展示单元包括:
任务查询请求发送子单元,用于响应针对多媒体数据任务列表的多媒体数据选择操作,向业务服务器发送字幕任务查询请求;字幕任务查询请求中携带目标多媒体数据的媒体标识;
字幕任务展示子单元,用于接收业务服务器根据目标语言类型及媒体标识共同对应的任务映射关系所返回的字幕任务列表,将字幕任务列表展示于字幕审核界面中;字幕任务列表中的字幕任务与目标多媒体数据的媒体标识及目标语言类型之间存在任务映射关系。
其中,反馈列表展示模块包括:
反馈查询请求发送单元,用于响应针对字幕任务列表的字幕任务选择操作,向业务服务器发送字幕反馈信息查询请求;字幕反馈信息查询请求中携带待审核字幕任务;
反馈列表展示单元,用于接收业务服务器根据待审核字幕任务的反馈映射关系所返回的字幕反馈信息列表,将字幕反馈信息列表展示于字幕审核界面中;反馈映射关系是由业务服务器在待审核字幕任务与字幕反馈信息之间所创建的映射关系。
其中,审核操作包括编辑操作和确认操作;
审核字幕生成模块包括:
编辑操作响应单元,用于响应针对字幕反馈信息的编辑操作,创建针对修正字幕片段对应的文本编辑界面,获取针对修正字幕片段所输入的审核文本信息,将审核文本信息确定为修正字幕片段对应的审核字幕片段;或者,
确认操作响应单元,用于响应针对字幕反馈信息的确认操作,将修正字幕片段确定为审核字幕片段。
其中,装置还包括:
更新字幕展示模块,用于响应针对目标多媒体数据的播放操作,将更新字幕文本展示于目标多媒体数据的播放界面中。
本申请一方面提供了一种计算机设备,包括:处理器、存储器、网络接口;
处理器与存储器、网络接口相连,其中,网络接口用于提供数据通信功能,存储器用于存储计算机程序,处理器用于调用计算机程序,以执行本申请实施例中一方面中的方法。
本申请一方面提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序包括程序指令,程序指令当被处理器执行时,执行本申请实施例中一方面中的方法。
本申请实施例一方面提供另一种多媒体数据处理装置,包括:
查询请求获取模块,用于获取第一用户终端发送的字幕任务查询请求;字幕任务查询请求中携带目标语言类型;
任务列表组成模块,用于根据字幕任务查询请求,获取与目标语言类型相关联的字幕任务,组成字幕任务列表,将字幕任务列表返回至第一用户终端;字幕任务用于关联多媒体数据中的原始字幕片段;
查询请求获取模块,还用于获取第一用户终端发送的字幕反馈信息查询请求;字幕反馈信息查询请求中携带待审核字幕任务;待审核字幕任务为第一用户终端在字幕任务列表中所选择的字幕任务;
反馈列表组成模块,用于根据字幕反馈信息查询请求,获取与待审核字幕任务相关联的字幕反馈信息,组成字幕反馈信息列表,将字幕反馈信息列表返回至第一用户终端;字幕反馈信息中包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
更新请求获取模块,用于获取第一用户终端发送的字幕更新请求;字幕更新请求中携带修正字幕片段对应的审核字幕片段;
字幕更新模块,用于根据审核字幕片段对目标原始字幕片段进行更新,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
其中,任务列表组成模块包括:
媒体数据获取单元,用于根据字幕任务查询请求,获取与目标语言类型具有语言映射关系的多媒体数据,组成多媒体数据任务列表,将多媒体数据任务列表返回至第一用户终端,以使第一用户终端在多媒体数据任务列表中选择出目标多媒体数据;
字幕任务获取单元,用于获取第一用户终端所选择的目标多媒体数据的媒体标识,获取与媒体标识及目标语言类型具有任务映射关系的字幕任务,组成字幕任务列表,将字幕任务列表返回至第一用户终端;
则反馈列表组成模块,具体用于根据字幕反馈信息查询请求,获取与待审核字幕任务具有反馈映射关系的字幕反馈信息,组成字幕反馈信息列表。
其中,装置还包括:
修改请求获取模块,用于获取第二用户终端发送的字幕修改请求;字幕修改请求中携带目标多媒体数据的媒体标识、目标原始字幕片段的索引、修正字幕片段以及目标语言类型;
任务映射关系创建模块,用于根据目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引,生成待审核字幕任务,创建目标多媒体数据及目标语言类型与待审核字幕任务之间的任务映射关系;
反馈映射关系创建模块,用于根据目标原始字幕片段的索引以及修正字幕片段生成字幕反馈信息,创建字幕反馈信息与待审核字幕任务之间的反馈映射关系;
语言映射关系创建模块,用于创建目标多媒体数据与目标语言类型之间的语言映射关系。
其中,任务映射关系创建模块包括:
第一索引库遍历单元,用于遍历关系索引库;
第一映射关系创建单元,用于若在关系索引库中不存在与目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引之间具有正向索引关系的字幕任务,则根据目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引,生成待审核字幕任务,并创建目标多媒体数据及目标语言类型与待审核字幕任务之间的任务映射关系。
其中,语言映射关系创建模块包括:
第二索引库遍历单元,用于遍历关系索引库;
第二映射关系创建单元,用于若在关系索引库中不存在与目标多媒体数据的媒体标识及目标语言类型具有任务映射关系的字幕任务,则确定待审核字幕任务为目标多媒体数据的媒体标识及目标语言类型所对应的首个字幕任务,创建目标多媒体数据与目标语言类型之间的语言映射关系。
本申请一方面提供了一种计算机设备,包括:处理器、存储器、网络接口;
处理器与存储器、网络接口相连,其中,网络接口用于提供数据通信功能,存储器用于存储计算机程序,处理器用于调用计算机程序,以执行本申请实施例中一方面中的方法。
本申请一方面提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序包括程序指令,程序指令当被处理器执行时,执行本申请实施例中一方面中的方法。
本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行本申请实施例中一方面提供的方法。
在本申请实施例中,当字幕审核用户在字幕审核界面选择了一种字幕语言类型(如目标语言类型)后,可以在该字幕审核界面中查看到与该目标语言类型相关联的字幕任务,字幕审核用户可以在字幕审核界面中通过字幕任务选择操作,确定出待审核字幕任务;随后,字幕审核用户可以在字幕审核界面中查看到与该待审核字幕任务相关联的字幕反馈信息,其中,该字幕反馈信息可以为观看多媒体数据的用户针对该多媒体数据中的任意一个原始字幕片段所提交的字幕修改意见;字幕审核用户可以通过审核操作来对字幕反馈信息进行审核,当字幕审核用户对字幕反馈信息完成审核后,可以生成该字幕反馈信息中的修正字幕片段所对应的审核字幕片段,根据该审核字幕片段可以对该字幕反馈信息中的目标原始字幕片段进行更新,从而可以使得该待审核任务字幕任务所属的目标多媒体数据的字幕文本得到更新。应当理解,字幕审核用户可以从语言类型维度,拉取到相关联的字幕任务,从字幕任务维度,拉取到相关联的字幕反馈信息。从而可以实现为字幕审核用户精准的拉取数据,减少不必要的流量消耗。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本申请实施例提供的一种网络架构的结构示意图;
图1b是本申请实施例提供的一种数据关联示意图;
图2是本申请实施例提供的一种创建映射关系的场景示意图;
图3a是本申请实施例提供的一种字幕审核的场景示意图;
图3b是本申请实施例提供的一种字幕审核的场景示意图;
图4是本申请实施例提供的一种多媒体数据处理方法的流程示意图;
图5是本申请实施例提供的一种系统架构示意图;
图6是本申请实施例提供的一种字幕反馈的流程示意图;
图7是本申请实施例提供的一种创建映射关系的流程示意图;
图8是本申请实施例提供的一种字幕添加的场景示意图;
图9是本申请实施例提供的一种多媒体数据处理装置的结构示意图;
图10是本申请实施例提供的一种多媒体数据处理装置的结构示意图;
图11是本申请实施例提供的一种计算机设备的示意图;
图12是本申请实施例提供的一种多媒体数据处理装置的结构示意图;
图13是本申请实施例提供的一种多媒体数据处理装置的结构示意图;
图14是本申请实施例提供的一种计算机设备的结构示意图;
图15是本申请实施例提供的一种多媒体数据处理系统的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参见图1a,图1a是本申请实施例提供的一种网络架构的结构示意图。如图1a所示,如图1a所示,网络架构可以包括业务服务器1000和用户终端集群,用户终端集群可以包括一个或者多个用户终端,这里将不对用户终端的数量进行限制。如图1a所示,多个用户终端可以包括用户终端100a、用户终端100b、用户终端100c、…、用户终端100n;如图1a所示,用户终端100a、用户终端100b、用户终端100c、…、用户终端100n可以分别与服务器1000进行网络连接,以便于每个用户终端可以通过该网络连接与服务器1000之间进行数据交互。
如图1a所示的业务服务器1000可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。
为便于理解,本申请实施例可以在图1a所示的多个用户终端中选择一个用户终端作为目标用户终端,该用户终端可以包括:智能手机、平板电脑、笔记本电脑、桌上型电脑、智能电视、智能音箱、台式计算机、智能手表等携带多媒体数据处理功能(例如,视频数据播放功能、音乐数据播放功能)的智能终端,但并不局限于此。例如,本申请实施例可以将图1a所示的用户终端100a作为目标用户终端,该目标用户终端中可以集成有具备该多媒体数据处理功能的应用客户端。其中,应用客户端可以包括多媒体客户端(例如,视频客户端)、娱乐客户端(例如,游戏客户端)等具有多媒体数据(例如,视频与音乐)加载和播放功能的客户端。其中,目标用户终端(例如,用户终端100a)可以为第一用户所使用的用户终端,该第一用户可以为字幕审核人员,可以基于该用户终端100a查看到第二用户针对任一多媒体数据的任一条原始字幕片段的修正字幕片段,并对这些修正字幕片段进行审核,其中,该第二用户可以为观看多媒体数据的用户,该第二用户可以通过用户终端(例如,用户终端100b)提交针对原始字幕片段的修正字幕片段。业务服务器1000可以根据第二用户提交的修正字幕片段,生成一个字幕反馈信息,并将该字幕反馈信息挂载到字幕任务下,同时将字幕任务与多媒体数据、字幕片段的语言类型以及原始字幕片段的索引等信息进行关联,由此,当第一用户在进行字幕审核时,可以按语言类型、多媒体数据等纬度来拉取需要审核的字幕反馈信息,由此获取到字幕反馈信息对应的修正字幕片段,并对修正字幕片段进行审核。可以理解的是,这里的字幕任务可以为一个标识,该标识可以为数字(例如0、1、2)、文字(例如,字幕任务)或英文(例如task_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,task_1、task_two、字幕任务1)。这里的字幕反馈信息也可以为一个标识,该标识可以为数字(例如1000、2.8、10)、文字(例如,字幕反馈)或英文(例如,report_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,report_1、report_two、字幕反馈信息1)。
对于业务服务器1000将字幕反馈信息,挂载到字幕任务下,同时将字幕任务与多媒体数据、字幕片段的语言类型以及字幕片段的索引等信息进行关联的具体实现方式,本方案可以采取以下方法,以多媒体数据为视频数据为例,用户A(即第二用户)在用户终端100b中观看视频A时,发现“我送清风与烈酒”这条字幕翻译的不够准确,应该翻译为“与轻风把酒相送”,则用户A可以提交针对“我送清风与烈酒”这条字幕的字幕修改信息,该用户终端100b可以生成字幕修改请求,将该字幕修改请求发送至业务服务器1000。其中,该字幕修改请求中携带多媒体数据的媒体标识(例如,用户A观看的视频的视频标识)、目标原始字幕片段的索引(例如,“我送清风与烈酒”这条原始字幕片段的索引“20”)、修正字幕片段(例如,“与轻风把酒相送”这条修正字幕片段)以及目标语言类型(例如,“我送清风与烈酒”这条原始字幕片段对应的中文类型);业务服务器1000在接收到该字幕修改请求后,可以遍历关系索引库,查找是否存在与该媒体标识、目标语言类型以及该目标原始字幕片段的索引具有正向索引关系的字幕任务,若不存在,则证明当前没有该视频A下的针对“我送清风与烈酒”这条字幕的修正反馈,则业务服务器1000可以生成一个字幕任务(例如,task_2),并创建该视频标识及中文类型与该字幕任务task_2之间的任务映射关系(例如,{视频A,中文}——>task_2),用以表征该视频A的中文类型下,具有该“我送清风与烈酒”这条目标原始字幕片段的字幕任务;应当理解,一个视频与语言类型的组合,可以与一个或多个字幕任务具有任务映射关系,也就是说,一个视频下的某种语言类型的原始字幕片段可以有多个,每个原始字幕片段对应一个字幕任务。进一步地,业务服务器1000可以根据该“我送清风与烈酒”这条目标原始字幕片段的索引“20”以及“与轻风把酒相送”这条修正字幕片段,生成字幕反馈信息(例如,report_1),并在字幕反馈信息report_1与字幕任务task_2之间,创建反馈映射关系;应当理解,一个字幕任务可以与一条或多条字幕反馈信息具有反馈映射关系,一个字幕任务与一条字幕反馈信息的反馈映射关系可以表征该视频的某一条原始字幕片段下,存在某个用户提交的字幕反馈信息。进一步地,业务服务器1000可以遍历该关系索引库,确定该字幕任务task_2是否为该视频A下的第一个字幕任务,若该字幕任务task_2为该视频A下的第一个字幕任务,也就是说,当前没有该视频A中除“我送清风与烈酒”这条目标原始字幕片段之外的其他原始字幕片段的修正反馈,则业务服务器1000可以创建该视频A与中文类型之间的语言映射关系;应当理解,一种语言类型可以与一个或多个视频之间具有语言映射关系,也就是说,一种语言类型下,可以有一个或多个待审核的视频。
为便于理解,请一并参见图1b,是本申请实施例提供的一种数据关联示意图。如图1b所示,一种语言类型下可以关联有n个多媒体数据(例如,视频数据、音频数据),其中,n为大于或等于1的正整数,也就是说,一种语言可以与一个或多个多媒体数据具有语言映射关系;如图1b所示,一个多媒体数据下可以关联有m个字幕任务,也就是说,一个多媒体数据可以与一个或多个字幕任务具有任务映射关系;如图1b所示,一个字幕任务可以关联有s个字幕反馈信息,也就是说,一个字幕任务可以与一个或多个字幕反馈信息具有反馈映射关系。鉴于此,应当理解,当第一用户在进行视频(即多媒体数据)的字幕审核时,可以根据语言映射关系,获取到所选择的目标语言类型对应的待审核的视频任务列表,比如,第一用户所选择的语言类型对应的视频数据1、视频数据2、…、视频数据n。进一步地,可以根据任务映射关系,获取到第一用户在视频任务列表中所选择的待审核视频所对应的字幕任务列表,比如,第一用户所选择的视频数据为视频数据1(即多媒体数据1),则可以拉取到该视频数据下的m个字幕任务,来组成字幕任务列表;进一步地,可以再根据反馈映射关系,获取到第一用户所选择的待审核字幕任务所对应的字幕反馈信息列表,比如,第一用户所选择的待审核字幕任务为视频数据1下的字幕任务1,则可以拉取到该字幕任务1下的s个字幕反馈信息,来组成字幕反馈信息列表。从而第一用户可以对该字幕反馈信息列表中的字幕反馈信息进行审核。应当理解,第一用户在对某条字幕反馈信息进行审核后,第一用户所对应的用户终端可以生成字幕反馈信息中的修正字幕片段所对应的审核字幕片段,比如,用户M(即第二用户)在对“与轻风把酒相送”这条修正字幕片段进行审核时,认为翻译的很好,则审核意见为通过,则用户M对应的用户终端100a可以响应用户M针对“与轻风把酒相送”这条修正字幕片段的确认通过触发操作,将该修正字幕片段“与轻风把酒相送”确定为审核字幕片段。应当理解,用户终端可以根据该审核字幕片段“与轻风把酒相送”对目标原始字幕片段“我送清风与烈酒”进行更新,得到该视频A的更新字幕文本。
可以理解的是,本申请实施例提供的方法可以由计算机设备执行,计算机设备包括但不限于用户终端或业务服务器。用户终端以及业务服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
为便于理解,进一步地,请参见图2,图2是本申请实施例提供的一种创建映射关系的场景示意图。其中,如图2所示的业务服务器可以为上述服务器1000,且如图2所示的用户终端可以为在上述图1a所对应实施例的用户终端集群中所选取的任意一个用户终端,比如,该用户终端可以为上述用户终端100b。
如图2所示,用户B可以为第二用户,用户B在使用用户终端全屏观看电视剧“陈情令”的第一集视频,字幕的语言类型为中文。对于当前的中文字幕“抬头让我看看”,用户B认为翻译的不够准确,则用户B可以从字幕反馈入口提起字幕反馈修正的请求。如图2所示,当用户B点击字幕反馈入口后,可以进入反馈详情界面,在该反馈详情界面中,可以展示当前字幕的内容,当前字幕的语言类型,以及可以参考的已有字幕语言类型。如图2所示,当前字幕的内容为“抬头让我看看”,当前字幕的语言类型为中文,可以参考的已有字幕语言类型为英文,参考字幕的内容为“Look up let me see”,用户B可以根据“Look up let me see”这一参考字幕,来修改当前中文字幕“抬头让我看看”。如图2所示,用户B在反馈详情界面输入的修正字幕为“抬头让我瞧瞧”。在用户B点击提交后,用户终端可以生成字幕修改请求,并将该字幕修改请求发送至业务服务器。其中,该字幕修改请求中可以携带“陈情令”这一电视剧中,正在播放的第一集这一视频的视频ID(例如,EP1、EP2)、“抬头让我看看”这条目标原始字幕片段在“陈情令”这部电视剧中的字幕文件中的字幕序号(即目标原始字幕片段的索引)、目标原始字幕片段“抬头让我看看”、修正字幕片段“抬头让我瞧瞧”以及目标语言类型“中文”。业务服务器接收到该字幕修改请求后,可以将视频ID(即媒体标识)、目标语言类型“中文”以及字幕序号(即字幕索引)组成一个三元组,比如,“陈情令”第一集视频的视频ID为EP1,则第一集的视频标识可以为EP1,“抬头让我看看”这条目标原始字幕片段的字幕序号为caption_20,则组成的三元组可以为{EP1,中文,caption_20}。进一步地,业务服务器可以查询关系索引库中,查询是否存在该三元组{EP1,中文,caption_20}对应的字幕任务。若当前没有除用户B以外的其他用户对“抬头让我看看”这条目标原始字幕片段进行过字幕反馈修正,那么该关系索引库中就不存在三元组{EP1,中文,caption_20}对应的字幕任务,则业务服务器可以新生成一个字幕任务(例如,task_20),并创建三元组{EP1,中文,caption_20}到该字幕任务task_20的正向索引关系,由此,该字幕任务task_20就可以与“陈情令”的第一集中,“抬头让我看看”这条语言类型为中文的目标原始字幕片段相关联。进一步地,业务服务器可以根据当前播放的第一集视频的视频标识(EP1)、目标原始字幕片段的序号(caption_20)、目标原始字幕片段的内容“抬头让我看看”、修正字幕片段的内容“抬头让我瞧瞧”以及目标语言类型“中文”,生成一个字幕反馈信息。比如,生成的字幕反馈信息为report_1,则该report_1可以用于EP1这个视频、目标原始字幕片段的序号(caption_20)、目标原始字幕片段的内容“抬头让我看看”、修正字幕片段的内容“抬头让我瞧瞧”以及目标语言类型“中文”这些字幕反馈内容。进一步地,业务服务器可以在该字幕反馈信息report_1与该生成的字幕任务task_20之间创建反馈映射关系,如,task_20——>report_1,该反馈映射关系可以用于将该字幕反馈信息report_1挂载到字幕任务task_20下,由此,通过字幕任务task_20的反馈映射关系,就可以获取到字幕反馈信息report_1。应当理解,业务服务器若在关系索引库中,查询到存在有三元组{EP1,中文,caption_20}对应的字幕任务task_20,也就是说,该字幕任务task_20与三元组{EP1,中文,caption_20}具有正向索引关系,则可以说明当前存在有针对“抬头让我看看”这条目标原始字幕的反馈信息(例如,report_2),该条已存在的反馈信息report_2不同于反馈信息report_1,该反馈信息report_2可以为用户B在提交反馈信息report_1之前所提交的反馈信息,也可以为除用户B以外的其他用户所提交的反馈信息。在查询到关系索引库已存在有字幕任务task_20时,业务服务器无需重新生成字幕任务,可以直接创建字幕反馈信息report_1与该已有的字幕任务task_20之间的反馈映射关系。那么该字幕任务task_20下,就挂载有两个字幕反馈信息,分别为字幕反馈信息report_1以及字幕反馈信息report_2,由此,通过字幕任务task_20的语言映射关系,就可以获取到字幕反馈信息report_1以及字幕反馈信息report_2。
进一步地,若该三元组对应的字幕任务为首次生成(例如,新生成字幕任务task_20),则可以在该字幕任务task_20与视频标识EP1(即媒体标识)及目标语言类型“中文”之间,创建任务映射关系,比如,{EP1,中文}——>task_20,该任务映射关系可以用于将字幕任务task_20关联到语言类型为中文的“陈情令”的第一集视频下。进一步地,业务服务器可以查询关系索引库,查询是否存在与该{EP1,中文}具有任务映射关系的字幕任务,若不存在这样的字幕任务,则可以说明当前除“抬头让我看看”这条目标原始字幕片段以外,没有视频EP1中的其他原始字幕片段的字幕反馈,也就是说,该字幕任务task_20为该视频EP1下的第一个字幕任务,则业务服务器可以在中文这个语言类型与视频EP1之间创建语言映射关系,比如,中文——>EP1,该语言映射关系可以用于将视频EP1关联到中文这一语言类型下,由此,通过中文的语言映射关系,就可以获取到该视频EP1。业务服务器可以将task_20——>report_1这一反馈映射关系、{EP1,中文}——>task_20这一任务映射关系以及中文——>EP1这一语言映射关系存储至关系索引库中,这样在后续流程(比如,字幕审核流程)中,业务服务器就可以根据中文这一语言类型的语言映射关系,获取到EP1这一视频(即“陈情令”的第一集视频),再通过中文下的EP1对应的任务映射关系,获取到字幕任务task_20,再通过字幕任务task_20对应的反馈映射关系,获取到字幕反馈信息report_1。
为便于理解,请参见图3a,图3a是本申请实施例提供的一种字幕审核的场景示意图。其中,如图3a所示的业务服务器可以为上述业务服务器1000,且如图3a所示的用户终端可以为在上述图1a所对应实施例的用户终端集群中所选取的任意一个用户终端,比如,该用户终端可以为上述用户终端100a。
如图3a所示,用户E可以为第一用户,该用户E可以为字幕审核人员,可以对第二用户(例如,上述用户B)提出的字幕反馈修正意见进行审核。如图3a所示,不同的第二用户在提交字幕反馈后,用户E可以通过用户终端的字幕审核界面1进行查看。所有的字幕反馈信息可以按多媒体数据(例如,视频数据)和语言维度进行聚合,当用户E在进行字幕审核时,可以在字幕审核界面1中选取语言类型,如图3a所示,用户E选择的语言类型为中文,则用户终端可以针对用户E的这一语言选择操作,向业务服务器发送字幕任务查询请求,业务服务器在接收到该字幕任务查询请求后,可以获取到与中文这一语言类型具有语言映射关系的视频(即,中文这一语言类型下,所关联的一个或多个待审核的视频);进一步地,业务服务器可以获取到每个待审核视频下,所关联的一个或多个字幕任务(即,与待审核视频具有任务映射关系的字幕任务),业务服务器可以将这些待审核视频以及每个待审核视频所关联的字幕任务返回至用户终端,用户终端可以在字幕审核界面上将这些待审核视频以及字幕任务所关联的三元组(由视频标识、语言类型以及原始字幕片段的索引组成)的信息显示出来。如图3a所示,用户E在选择中文这一语言类型后,字幕审核界面中会显示视频EP1、视频EP3以及视频EP4,其中,视频EP1具有字幕任务task_1以及字幕任务task_3,视频EP3具有字幕任务task_2,视频EP4具有字幕任务task_4。该字慕审核界面1中会显示每个字幕任务所关联的三元组的信息,如,task_1所关联的三元组为{视频EP1,中文,caption_10},其中,caption_10为原始字幕片段“我打篮球超棒的”的索引,则如图3a所示,在该字幕审核界面1中,所显示的字幕任务task_1的内容为“视频EP1,以及中文字幕‘我打篮球超棒的’”。用户E可以在这些字幕任务中选择任一个字幕任务来作为待审核字幕任务进行审核,如图3a所示,用户E选择字幕任务task_4,通过用户E对字幕任务task_4的触发操作,用户终端可以生成字幕反馈信息查询请求,并将该字幕反馈信息查询请求(携带有字幕任务task_4)发送至业务服务器,业务服务器在接收到该携带有字幕反馈信息查询请求后,可以在关系索引库中获取到与该字幕任务task_4具有反馈映射关系的字幕反馈信息(即,该字幕任务task_4所关联的一个或多个字幕反馈信息),组成字幕反馈信息列表返回至用户终端。用户终端可以将这些字幕反馈信息(例如,字幕反馈信息中所包括的修正字幕片段)显示于字幕审核界面2中,如图3a所示,字幕审核界面2中所显示有视频EP4“外星女生柴小七_01”,以及修正字幕片段3条(包括字幕反馈信息report_200对应的修正字幕片段“它是第一个被人类观测到”、字幕反馈信息report_300对应的修正字幕片段“人们发现了它”以及report_400对应的修正字幕片段“人们首次发现它”),则可以说明,字幕任务task_4所关联的字幕反馈信息具有三条(分别为report_200、report_300以及report_400)。其中,如图3a所示,有两条修正字幕片段(包括“它是第一个被人类观测到”以及“人们首次发现它”)已被修改过,那么用户E无需再对这两条修改过的修正字幕片段进行审核。其中,应当理解,于2020/1/22日所修改的修正字幕片段“人们发现了它”,已作为审核字幕片段,对视频EP4的字幕文本进行了更新,则“人们发现了它”已将EP4中的字幕文本进行替换,第二用户在观看视频EP4时,所观看到的字幕为“人们发现了它”,而第二用户认为“人们发现了它”这条字幕翻译得不够准确,提交了修改意见“人们首次发现它”。针对“人们首次发现它”这条修正字幕片段,用户E认为翻译得仍不准确,如图3a所示用户E选择编辑操作,以进行二次修改。针对用户E的这一触发操作,用户终端可以创建一个文本编辑界面以供用户E输入文本信息,如图3a所示,用户E可以在该文本编辑界面中输入文本信息,例如,用户E输入的文本信息为“人类第一次观测到它”,在用户E点击确定后,针对这一触发操作,用户终端可以将用户E输入的“人类第一次观测到它”这一文本信息,作为审核字幕片段,并生成字幕更新请求,将该字幕更新请求发送至业务服务器,以使业务服务器根据该审核字幕片段“人类第一次观测到它”对原始字幕片段“人们发现了它”进行更新。在业务服务器完成字幕更新后,若第二用户再一次播放该视频EP4时,显示的字幕会变为“人类第一次观测到它”。应当理解,如图3a所示,若用户E认为“人们首次发现它”这条修正字幕片段翻译得不合适,则可以驳回这一修正请求,应当理解,若用户E认为一条原始字幕片段下的所有修正字幕片段均翻译得不合适,则可以将这些修正请求全部驳回。可以理解的是,若用户E认为“人们首次发现它”这条修正字幕片段翻译得合适,则可以不作二次修改,点击通过。针对用户E的这一触发操作,用户终端可以直接将“人们首次发现它”这条修正字幕片段作为审核字幕片段,并生成字幕更新请求发送至业务服务器,业务服务器在接收到该字幕更新请求后,可以根据审核字幕片段“人们首次发现它”对原始字幕片段“人们发现了它”进行更新。在业务服务器完成字幕更新后,若第二用户再一次播放该视频EP4时,显示的字幕会变为“人们首次发现它”。
可选的,可以理解的是,当第一用户(即字幕审核人员,如上述用户E)在字幕审核界面1中选择一种语言类型(目标语言类型)后,用户终端可以先向业务服务器发送多媒体数据查询请求,业务服务器根据该多媒体数据查询请求可以获取与该目标语言类型相关联的多媒体数据,组成多媒体数据任务列表返回至用户终端。用户终端可以先显示与该目标语言类型具有语言映射关系的多媒体数据(例如,视频数据)任务列表;第一用户可以从该多媒体数据任务列表中选择一个多媒体数据来进行审核,用户终端可以根据第一用户选择的目标多媒体数据这一选择操作,生成字幕任务查询请求,并将该字幕任务查询请求发送至业务服务器,业务服务器可以根据字幕任务查询请求,获取与该目标多媒体数据的媒体标识具有任务映射关系的字幕任务,组成字幕任务列表并返回至用户终端。用户终端在接收到该字幕任务列表后,可以显示与该目标多媒体数据具有任务映射关系的字幕任务列表;第一用户可以在该字幕任务列表中选择一个字幕任务来进行审核,用户终端可以将该第一用户选择的字幕任务作为待审核字幕任务,并显示与该待审核字幕任务具有反馈映射关系的字幕反馈信息列表,则第一用户可以对该字幕反馈信息列表中的字幕反馈信息进行审核。
例如,请一并参见图3b,图3b是本申请实施例提供的一种字幕审核的场景示意图。如图3b所示,用户E选择的语言类型为中文,则用户终端可以针对用户E的这一语言选择操作,向业务服务器发送包括视频查询请求,业务服务器在接收到该视频查询请求后,可以获取到与中文这一语言类型具有语言映射关系的视频(即,中文这一语言类型下,所关联的一个或多个待审核的视频),业务服务器将该视频任务列表返回至用户终端后,用户终端可以将该视频任务列表显示于字幕审核界面1中。如图3b所示,中文这一语言类型下所关联的视频有视频EP1、视频EP3以及视频EP4,用户E可以查看到包括该视频EP1、视频EP3以及视频EP4的视频任务列表。用户E可以在该视频任务列表中,选择一个视频来进行审核,如图3b所示,用户E选择视频EP1以进行审核,针对用户E的这一视频选择操作,用户终端可以将生成字幕任务查询请求,并将该携带有视频标识(如,EP1)的字幕任务查询请求发送至业务服务器,业务服务器可以根据字幕任务查询请求,从关系索引库中,获取到与中文及视频标识EP1具有任务映射关系的字幕任务,组成字幕任务列表返回至用户终端。用户终端可以将该字幕任务列表显示于字幕审核界面2中,以供用户E进行查看。如图3b所示,用户E可以在字幕审核界面2中查看到“视频EP1,以及中文字幕‘我打篮球超棒的’”(即字幕任务task_1关联的三元组的信息),以及“视频EP1,以及中文字幕‘比赛十分激烈’”(即字幕任务task_3关联的三元组的信息)。即视频EP1所关联的字幕任务有task_1以及task_3,用户E所选择的字幕任务为字幕任务task_3。针对用户E的这一字幕任务选择操作,用户终端可以生成字幕反馈信息查询请求,并将携带有字幕任务task_3的字幕反馈信息查询请求发送至业务服务器,业务服务器可以根据该字幕反馈信息查询请求,获取到与该字幕任务task_3具有反馈映射关系的字幕反馈信息(如,report_6),业务服务器可以将该字幕反馈信息report_6返回至用户终端。用户终端可以将该字幕反馈信息report_6中的修正字幕片段显示于字幕审核界面3中,如图3b所示,用户E可以在字幕审核界面3中查看到修正字幕片段“比赛已进入白热化阶段”,用户E可以对该修正字幕片段“比赛已进入白热化阶段”进行审核。如图3b所示,用户E认为该修正字幕片段“比赛已进入白热化阶段”翻译得较为合适,则用户E点击通过,以通过审核。针对用户E的这一触发操作,用户终端可以将修正字幕片段“比赛已进入白热化阶段”确定为审核字幕片段,并生成字幕更新请求,向业务服务器发送携带审核字幕片段“比赛已进入白热化阶段”的字幕更新请求。业务服务器可以根据该字幕更新请求,基于该审核字幕片段“比赛已进入白热化阶段”对原始字幕片段“比赛十分激烈”进行替换更新。在业务服务器完成字幕更新后,在第二用户播放该视频EP1时,显示的字幕会变为“比赛已进入白热化阶段”。
可选的,可以理解的是,当第一用户(即字幕审核人员,如用户E)在字幕审核界面中选择一种语言类型(目标语言类型)后,用户终端可以向业务服务器发送包括多媒体数据任务查询请求的字幕任务查询请求(共2个请求),业务服务器可以根据该2个请求中的多媒体数据任务查询请求,先获取与该目标语言类型相关联的多媒体数据,组成多媒体数据任务列表并返回至用户终端,以使第一用户在该多媒体数据任务列表中选择出目标多媒体数据。用户终端可以将第一用户所选择的目标媒体数据的媒体标识发送至业务服务器,业务服务器可以根据前述2个请求中的字幕任务查询请求,获取与该媒体标识具有任务映射关系的字幕任务,组成字幕任务列表并返回至用户终端。从而第一用户可以在字幕任务列表中选择一个字幕任务来进行审核。
进一步地,请参见图4,图4是本申请实施例提供的一种多媒体数据处理方法的流程示意图。如图4所示,该方法可以由用户终端(例如,上述图2、图3a以及图3b所示的用户终端)执行,也可以由业务服务器(例如,上述图2、图3a以及图3b所示的业务服务器)执行,还可以由用户终端和业务服务器共同执行。为便于理解,本实施例以该方法由上述用户终端执行为例进行说明,以阐述在用户终端中进行字幕审核的具体过程。其中,该方法至少可以包括以下步骤S101-步骤S103:
步骤S101,响应针对字幕审核界面的语言选择操作,展示字幕任务列表;字幕任务列表中的字幕任务所属的多媒体数据,包括语言选择操作所选择的目标语言类型;字幕任务用于关联多媒体数据中的原始字幕片段。
本申请中,目标用户终端中可以部署有上述目标应用,该目标应用可以为视频客户端或音频客户端。当使用该目标用户终端的第一用户(如字幕审核人员)启动该目标应用之后,可以在该目标用户终端上显示一种或多种语言类型(例如,中文、泰文、英文以及法语等)。进一步地,当第一用户针对该语言类型执行语言选择操作时,该目标用户终端可以响应针对该语言类型的语言选择操作,向业务服务器发送多媒体数据查询请求,以使业务服务器获取与该语言选择操作所选择的目标语言类型(第一用户所选择的语言类型)相关联的多媒体数据。其中,这里的与目标语言类型相关联的多媒体数据可以是指与目标语言类型具有语言映射关系的多媒体数据;其中,这里的语言映射关系可以是指由该业务服务器在该目标语言类型与包含该目标语言类型的多媒体数据之间所创建的映射关系;其中,这里的多媒体数据可以是指视频数据、音频数据等。其中,这里的语言选择操作可以为触发操作(例如,点击操作)。应当理解,业务服务器在接收到用户终端所发送的多媒体数据查询请求后,可以根据该多媒体数据查询请求中所携带的目标语言类型,获取到与该目标语言类型具有该语言映射关系的多媒体数据,组成多媒体数据任务列表并返回至目标用户终端。目标用户终端可以将该多媒体数据任务列表展示于字幕审核界面中,以供第一用户进行查看或选择。比如,以上述图3b所对应实施例为例,用户E(即第一用户)选择的语言类型为中文,针对用户E的语言选择操作,用户终端可以生成视频任务查询请求,并向业务服务器发送该视频任务查询请求。业务服务器在接收到该视频任务查询请求后,可以获取与中文这一语言类型具有语言映射关系的视频(如,视频EP1、视频EP3以及视频EP4),组成视频任务列表,并返回至用户终端,用户终端可以在字幕审核界面中展示该包括视频EP1、视频EP3以及视频EP4的视频任务列表。
进一步地,第一用户可以针对该多媒体数据任务列表执行多媒体数据选择操作(例如,多媒体数据点击操作)。当第一用户在多媒体数据列表中选择(点击)一个多媒体数据时,目标用户终端可以响应针对该多媒体数据任务列表的多媒体数据选择操作,向业务服务器发送字幕任务查询请求,以使业务服务器获取与该多媒体数据选择操作所选择的目标多媒体数据(第一用户所选择的多媒体数据)的媒体标识及目标语言类型,具有任务映射关系的字幕任务。其中,这里的字幕任务可以是指一个标识,用于关联该多媒体数据中的原始字幕片段,该标识可以为数字(例如0、1、2)、文字(例如,字幕任务)、英文(例如task_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,task_1、task_two、字幕任务1),对于字幕任务的具体呈现形式,本申请不做限制,在此不再一一举例。
应当理解,业务服务器在接收到用户终端所发送的字幕任务查询请求后,可以根据该字幕任务查询请求中所携带的目标多媒体数据的媒体标识,获取到与该目标语言类型及该媒体标识具有任务映射关系的字幕任务,组成字幕任务列表,并返回至目标用户终端。目标用户终端在接收到该字幕任务列表后,可以在字幕审核界面中显示该字幕任务列表。比如,以上述图3b所对应实施例为例,用户E(即第一用户)在视频任务列表(包括视频EP1、视频EP3以及视频EP4)中,所选择(点击)的视频为视频EP1,针对用户E的视频选择操作,用户终端可以生成字幕任务查询请求,并向业务服务器发送该字幕任务查询请求。业务服务器在接收到该字幕任务查询请求后,可以获取与视频EP1这一视频标识及中文这一语言类型具有任务映射关系的字幕任务(如,task_1及task_3),组成字幕任务列表,并返回至用户终端,用户终端可以在字幕审核界面中展示该包括字幕任务task_1即字幕任务task_3的字幕任务列表。如图3b所示,用户终端显示有字幕任务task_1所关联的视频EP1以及原始字幕片段“我打篮球超棒的”,还显示有字幕任务task_3所关联的视频EP1以及原始字幕片段“比赛十分激烈”。
步骤S102,响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;字幕反馈信息列表中的字幕反馈信息与字幕任务选择操作所选择的待审核字幕任务相关联;字幕反馈信息包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段。
本申请中,第一用户可以针对该字幕任务列表执行字幕任务选择操作(例如,字幕任务点击操作)。当第一用户在字幕任务列表中选择(点击)一个字幕任务时,目标用户终端可以响应针对该字幕任务列表的字幕任务选择操作,向业务服务器发送字幕反馈信息查询请求,以使业务服务器获取与该字幕任务选择操作所选择的待审核字幕任务(第一用户所选择的字幕任务),具有反馈映射关系的字幕反馈信息。其中,这里的字幕反馈信息可以为一个标识,该标识可以为数字(例如1000、2.8、10)、文字(例如,字幕反馈)、英文(例如,report_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,report_1、report_two、字幕反馈信息1)。对于字幕反馈信息的具体呈现形式,本申请不做限制,在此不再一一举例。其中,因为每个字幕任务均关联有一条原始字幕片段,则待审核字幕任务也关联有一条目标原始字幕片段,那么与待审核字幕片段具有反馈映射关系的字幕反馈信息中,可以包括有目标原始字幕片段以及该目标原始字幕片段对应的修正字幕片段,由此,业务服务器就可以将该字幕反馈信息与该待审核字幕任务之间创建反馈映射关系。应当理解,业务服务器在接收到用户终端所发送的字幕反馈信息查询请求后,可以根据该字幕反馈信息查询请求中所携带的待审核字幕任务,获取到与该待审核字幕任务具有反馈映射关系的字幕反馈信息,组成字幕反馈信息列表,并返回至目标用户终端。目标用户终端在接收到该字幕反馈信息列表后,可以在字幕审核界面中显示该字幕反馈信息列表。比如,以上述图3b所对应实施例为例,用户E(即第一用户)在字幕任务列表(包括task_1及task_3)中,所选择(点击)的字幕任务为字幕任务task_3,针对用户E的字幕任务选择操作,用户终端可以生成字幕反馈信息查询请求,并向业务服务器发送该字反馈信息查询请求。业务服务器在接收到该字幕反馈信息查询请求后,可以获取与字幕任务task_3具有反馈映射关系的字幕反馈信息(如,report_20),并将该字幕反馈信息report_20返回至用户终端,用户终端可以在字幕审核界面中展示该字幕反馈信息report_20的修正字幕片段。如图3b所示,用户终端显示有修正字幕片段“比赛已进入白热化阶段”,用户E可以在该字幕审核界面中对修正字幕片段“比赛已进入白热化阶段”进行审核。
步骤S103,响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段,根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
本申请中,第一用户可以针对该字幕反馈信息列表执行字幕反馈信息选择操作(例如,字幕反馈信息点击操作),并对该字幕反馈信息操作所选择的字幕反馈信息执行审核操作。其中,审核操作可以包括驳回操作、编辑操作以及通过操作。若第一用户认为字幕反馈信息中所包括的修正字幕片段不准确时,可以通过驳回操作对该修正字幕片段进行驳回;若第一用户认为修正字幕片段可以用,但还需二次完善时,则第一用户可以通过编辑操作,对修正字幕片段进行二次编辑完善;若第一用户认为修正字幕片段已足够准确,则第一用户可以点击通过操作,来通过修正字幕片段的审核。当第一用户针对修正字幕片段点击编辑后,目标用户终端可以响应第一用户的编辑操作,创建针对该修正字幕片段对应的文本编辑界面,第一用户可以针对该修正字幕片段在该文本编辑界面中输入审核文本信息,目标用户终端可以获取第一用户所输入的审核文本信息,并将该审核文本信息确定为该修正字幕片段对应的审核字幕片段。进一步地,目标用户终端可以生成字幕更新请求,并将该字幕更新请求发送至业务服务器,以使业务服务器根据该审核字幕片段对原始字幕片段进行更新,从而得到目标多媒体数据的更新字幕文本。鉴于此,在第二用户(不同于第一用户的观看多媒体数据的用户)或第一用户播放该目标多媒体数据时,可以将该更新字幕文本展示与该目标多媒体数据的播放界面中。
可选的,可以理解的是,当第一用户针对该语言类型执行语言选择操作时,该目标用户终端可以响应针对该语言类型的语言选择操作,向业务服务器发送字幕任务查询请求,业务服务器可以根据该字幕任务查询请求中的目标语言类型(第一用户所选择的语言类型)获取与该语言选择操作所选择的目标语言类型(第一用户所选择的语言类型)具有语言映射关系的多媒体数据,再获取到与这些多媒体数据及语言类型具有任务映射关系的字幕任务,组成字幕任务列表,将字幕任务列表展示于字幕审核界面中。例如,以图3a所对应实施例为例,用户E(即第一用户)在选择语言类型(中文)后,用户终端在字幕审核界面中所显示的内容为与中文具有语言映射关系的视频EP1、视频EP3以及视频EP4,还显示了与视频EP1具有任务映射关系的字幕任务task_1及字幕任务task_3,与视频EP3具有任务映射关系的字幕任务task_2,与视频EP4具有任务映射关系的字幕任务task_4。用户E可以在该字幕审核界面中,选择一个字幕任务来进行审核。如用户E选择的字幕任务为字幕任务task_4,则用户终端会在字幕审核界面中,显示与字幕任务task_4具有反馈映射关系的字幕反馈信息,用户E可以对这些字幕反馈信息进行审核。
应当理解,语言映射关系、任务映射关系以及反馈映射关系均是业务服务器根据第二用户的字幕修改请求所创建的映射关系,当第二用户观看多媒体数据时,若认为多媒体数据中的字幕片段翻译得不够准确,则第二用户可以从字幕反馈入口发起字幕修改请求。第二用户所在的用户终端可以创建反馈详情界面,第二用户可以在该反馈详情界面中输入修正字幕片段,用户终端则可以将该携带多媒体数据的媒体标识、原始字幕片段的索引、修正字幕片段以及原始字幕片段所属的语言类型的字幕修改请求,发送至业务服务器。业务服务器可以根据该多媒体数据的媒体标识、该语言类型以及该原始字幕片段的索引,生成一个字幕任务,并创建该多媒体数据及字幕任务之间的任务映射关系;进一步地,业务服务器可以根据该原始字幕片段的索引以及该修正字幕片段,生成字幕反馈信息,并创建字幕反馈信息与字幕任务之间的反馈映射关系;业务服务器还可以创建多媒体数据与语言类型之间的语言映射关系。鉴于此,当第一用户在进行字幕审核时,业务服务器可以根据这些映射关系(包括语言映射关系、任务映射关系以及反馈映射关系),从语言维度拉取到相关联的多媒体数据,再从多媒体数据维度拉取到相关联的字幕任务,最后从字幕任务拉取到相关联的字幕反馈信息。比如,以图2所对应实施例为例,描述了业务服务器创建语言映射关系、任务映射关系以及反馈映射关系的具体过程,在这里将不再进行赘述。
在本申请实施例中,用户在观看多媒体数据时,可以对多媒体数据中的原始字幕片段提交修正字幕片段(字幕修改意见),而本申请可以根据用户的字幕修改意见,生成字幕反馈信息,本申请可以将该条字幕反馈信息挂载到一个字幕任务下,同时将字幕任务关联该原始字幕片段、原始字幕片段对应的语言类型以及多媒体数据的媒体标识等信息。由此当字幕审核用户进行字幕审核时,可以按语言类型、多媒体数据以及字幕任务等维度来获取到需要审核的字幕反馈信息,并对字幕反馈信息进行审核,基于审核意见更新多媒体数据的字幕文件。应当理解,字幕审核用户可以从语言类型维度,拉取到相关联的字幕任务,从字幕任务维度,拉取到相关联的字幕反馈信息。从而可以实现为字幕审核用户精准的拉取数据,减少不必要的流量消耗。同时,针对于同一个原始字幕片段,聚合了一个或多个用户的字幕修改意见(即修正字幕片段);则基于这些修正字幕片段所生成的审核字幕片段,不仅结合了观看多媒体数据的用户的修改意见,还结合了字幕审核用户的审核意见,则该审核字幕片段具备较高的准确性。可以看出,本申请可以支持观看多媒体数据的用户提出字幕修改意见,可以提高字幕翻译中用户的参与度,且字幕审核用户可以对字幕反馈信息进行审核,可以提高字幕翻译的准确率;同时本申请由于创建语言类型、字幕任务以及字幕反馈信息之间的映射关系,可以实现为字幕审核用户精准的拉取数据,从而减少流量消耗。
进一步地,为便于理解,请参见图5,图5是本申请实施例提供的一种系统架构示意图。如图5所示,用户终端A可以为前述图1a中的用户终端集群中的任一用户终端,如用户终端100b;用户终端B可以为前述图1a中的用户终端集群中的任一用户终端,如用户终端100a;业务服务器可以为前述图1a中的业务服务器1000。如图5所示的用户终端A与用户终端B中均可以集成有具备该多媒体数据处理功能的应用客户端(例如,视频客户端),该视频客户端可以具有加载和播放视频功能。当用户A在使用用户终端A中的应用客户端播放多媒体数据时,可以从业务服务器的CDN节点中下载多媒体数据源文件以及该多媒体数据对应的语言字幕文件,并将该多媒体数据源文件以及语言字幕文件显示于用户终端的多媒体数据的播放界面中,以供用户查看。而用户A在播放视频时,若对某条原始字幕片段存在修改意见,则可以通过字幕反馈入口提交字幕修改意见,用户终端A可以生成字幕修改请求,并向业务服务器中的字幕反馈服务模块发送该字幕修改请求。其中,该字幕修改请求中携带有用户A针对原始字幕片段的反馈修正信息。
进一步地,该字幕反馈服务模块可以根据该字幕修改请求,由该用户A的反馈修正信息,生成一个反馈标识(即字幕反馈信息),例如,该反馈标识可以为report_8,该反馈标识report_8用于表征该用户A的反馈修正信息。进一步地,字幕反馈服务模块可以将该反馈标识report_8以及反馈标识report_8对应的反馈修正信息一并发送至后台服务器的任务生产服务模块;任务生产服务模块可以将该用户的反馈修正信息进行聚合加工,比如,任务生产服务模块可以将该反馈标识report_8挂载到一个任务标识(即字幕任务)下,例如,该任务标识可以为task_4。其中,该任务标识为该任务生产服务模块根据该反馈修正信息所属的多媒体数据、该反馈修正信息中的原始字幕片段的索引以及原始字幕片段对应的语言类型所生成的;该任务标识可以用于关联原始字幕片段。进一步地,任务生产服务模块可以对该多媒体数据、原始字幕片段对应的语言类型以及该任务标识之间,进行数据关联(创建关联关系);并将这些关联关系存储至任务池中。其中,这里的关联关系可以包括多媒体数据与语言类型之间的语言映射关系、(多媒体数据+语言类型)与任务标识(即字幕任务)之间的任务映射关系以及字幕任务与反馈标识(即字幕反馈信息)之间的反馈映射关系。对于任务生产服务模块创建语言映射关系、任务映射关系以及反馈映射关系的具体过程,可以参见前述图2所对应实施例中,对业务服务器创建语言映射关系、任务映射关系以及反馈映射关系的描述,这里将不再进行赘述。
鉴于此,当字幕审核用户在进行字幕审核时,字幕审核用户所在的用户终端B可以向后台服务器中的反馈服务读服务模块发送反馈任务读请求,而反馈服务读服务模块在接收到该反馈任务读请求后,可以根据任务池中所存储的多媒体数据与语言类型之间的语言映射关系、(多媒体数据+语言类型)与任务标识(即字幕任务)之间的任务映射关系以及字幕任务与反馈标识(即字幕反馈信息)之间的反馈映射关系,按照语言维度拉取到相关联的多媒体数据,按照多媒体数据的维度拉取到相关联的任务标识,按照任务标识(即字幕任务)的维度拉取到相关联的反馈标识(即字幕反馈信息),从而可以获取到反馈标识所对应的反馈修正信息(包含原始字幕片段以及修正字幕片段等信息)。应当理解,字幕审核用户可以对反馈修正信息进行审核,当字幕审核用户在对某一条反馈修正信息审核通过时,该字幕审核用户所对应的用户终端B可以向业务服务器中的反馈服务写服务模块,发送字幕更新请求,而该反馈服务写服务模块在接收到该字幕更新请求后,可以对该审核通过的反馈修正信息所属的多媒体数据的本地字幕文件,进行更新。应当理解,当多媒体数据的本地字幕文件被更新后,当用户再次播放该多媒体数据时,CND节点会进行回源查询,将回源查询到的该多媒体数据以及最新修改后的字幕文件信息返回给用户终端,即该用户通过该用户终端在观看该多媒体数据的时候,能够看到最新修改后的字幕文件信息的字幕内容。
可以看出,每个播放多媒体数据的用户均可以参与到字幕翻译的流程中,这降低了字幕翻译者的门槛。且针对于同一个原始字幕片段,不同的观看多媒体数据的用户,可以具有不同的字幕修改意见,同时该字幕修改意见又结合了字幕审核用户的审核意见,从而可以很好地提高字幕翻译的准确率。
为便于理解,请参见图6,图6是本申请实施例提供的一种字幕反馈的流程示意图。如图6所示,该流程可以包括:
步骤S201,用户终端向字幕反馈服务模块发送字幕修改请求。
本申请中,该用户终端可以为前述图1a所对应实施例中,用户终端集群中的任一用户终端,例如,该用户终端为用户终端100b。用户可以使用该用户终端播放多媒体数据(例如,视频数据、音频数据)时,可以针对任一原始字幕片段发起字幕修改请求(例如,用户通过点击播放界面中的字幕反馈入口而发起字幕修改请求),而用户终端可以获取到用户发起字幕修改请求时,当前时刻所显示的原始字幕片段的索引以及当前时刻所显示的原始字幕片段的字幕文字信息。针对用户的字幕修改请求,用户终端可以创建一个反馈详情界面,用户可以在该反馈详情界面中输入自己的字幕修改意见(即修正字幕片段)。进一步地,在用户填写好修正字幕片段并提交后,用户终端可以将向字幕反馈服务模块发送该字幕修改请求。其中,同时,用户终端还可以将该多媒体数据的媒体标识、原始字幕片段的索引、原始字幕片段、修正字幕片段以及该原始字幕片段对应的语言类型一并发送至该字幕反馈服务模块。
步骤S202,字幕反馈服务模块根据该字幕修改请求,生成字幕反馈信息。
本申请中,该字幕反馈服务模块在接收到用户终端发送过来的字幕修改请求后,可以为用户的这次反馈生成一个唯一的反馈标识,即可以将该多媒体数据的媒体标识、原始字幕片段的索引、原始字幕片段、修正字幕片段以及该原始字幕片段对应的语言类型进行封装,生成一个反馈标识(即字幕反馈信息)。其中,该反馈标识的具体呈现形式,可以为数字(例如1000、2.8、10)、文字(例如,字幕反馈)、英文(例如,report_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,report_1、report_two、字幕反馈信息1),在此不再一一进行举例。
步骤S203,字幕反馈服务模块发送字幕反馈信息至任务生产服务模块。
本申请中,字幕反馈服务模块可以将该条字幕反馈信息,以及字幕反馈信息所包括的原始字幕片段、修正字幕片段、语言类型等反馈修正信息发送至任务生产服务模块,以使任务生产服务模块将该条字幕反馈信息添加至任务池中。其中,该字幕反馈服务模块以及任务生产服务模块均包括在业务服务器中,该业务服务器可以为前述图1a所对应实施例中的业务服务器1000。也就是说,该字幕反馈服务模块以及任务生产服务模块为业务服务器中的两个模块,每个模块具有单独的业务处理功能。
步骤S204,任务生产服务模块将字幕反馈信息添加至任务池中。
步骤S205,任务生产服务模块返回反馈完成消息至字幕反馈服务模块。
步骤S206,字幕反馈服务模块返回反馈完成消息至用户终端。
本申请中,字幕反馈服务模块在接收到反馈完成消息后,可以向用户终端返回反馈完成消息,以使发起字幕修改请求的用户,可以查看到这一完成消息,从而可以得知自己的修改意见已成功提交。
在本申请实施例中,每个播放多媒体数据的用户均可以参与到字幕翻译的流程中,可以对一个原始字幕片段提交字幕修改意见,这降低了字幕翻译者的门槛。且针对于同一个原始字幕片段,不同的观看多媒体数据的用户,可以具有不同的字幕修改意见,一个原始字幕片段可以聚合有不同的用户的修改意见,由此可以提高字幕翻译的准确性。
为便于理解,进一地,请参见图7,图7是本申请实施例提供的一种创建映射关系的流程示意图。如图7所示,该流程可以包括:
步骤S301,字幕反馈服务模块发送字幕反馈信息至任务生产服务模块。
本申请中,对于步骤S301的具体实现方式,可以参见图6所对应实施例中,对步骤S203的描述,这里将不再进行赘述。
步骤S302,任务生产服务模块从任务索引库中查询字幕任务。
本申请中,任务生产服务模块在接收到字幕反馈服务模块发送的字幕反馈信息后,可以将字幕反馈信息中的多媒体数据的媒体标识、原始字幕片段对应的语言类型、原始字幕片段的索引组成三元组,例如,该三元组可以为{媒体标识,语言类型,字幕索引}。进一步地,可以在任务索引库中查询是否存在三元组{媒体标识,语言类型,字幕索引}所对应的任务标识(即字幕任务),即查询是否存在与三元组{媒体标识,语言类型,字幕索引}具有正向索引关系的任务标识。该任务标识的具体呈现形式,可以为数字(例如1、6、10)、文字(例如,字幕任务)、英文(例如,task_one)呈现形式,也可以为数字、文字、英文等语言中任意两种或两种以上的组成呈现形式(例如,task_1、task_two、字幕任务1),在此不再一一进行举例。若当前没有对该多媒体数据中的该原始字幕片段的反馈,则该任务索引库中就不存在三元组{媒体标识,语言类型,字幕索引}所对应的字幕任务,则可以生成一个字幕任务(例如,task_4),并在三元组{媒体标识,语言类型,字幕索引}与字幕任务task_4之间建立正向索引关系,用以将该字幕任务task_4与原始字幕片段之间进行关联。
步骤S303,任务生产服务模块在字幕反馈信息与字幕任务之间创建反馈映射关系。
本申请中,任务生产服务模块可以在字幕反馈信息(例如,report_4)与字幕任务task_4之间创建反馈映射关系,并将该反馈映射关系存储至反馈索引库中。即,将该字幕反馈信息report_4关联字幕任务task_4下,用以将字幕反馈信息report_4与字幕任务task_4进行绑定。应当理解,若前述任务生产服务模块在查询任务标识(即字幕任务)时,查询到任务索引库中存在三元组{媒体标识,语言类型,字幕索引}对应的任务标识(如,task_3),则无需再生成字幕任务task_4,可以直接在字幕反馈信息report_4与字幕任务task_3之间创建反馈映射关系。也就是说,字幕任务是为这条原始字幕片段生成一个唯一的任务标识,由此,当在后续流程中接收到其他用户对该原始字幕片段的反馈时,则无需重新生成任务标识,可以直接使用。
步骤S304,任务生产服务模块将多媒体数据与字幕任务进行关联。
本申请中,若该字幕任务是该任务生产反馈服务新生成时,则任务生产服务模块可以将该新生成的字幕任务(例如,字幕任务task_4)与该多媒体数据进行关联。关联的关系可以为在{语言类型,媒体标识}与字幕任务之间创建任务映射关系(例如,{语言类型,媒体标识}——>字幕任务task_4),同时将该任务映射关系存储至任务列表索引中。
步骤S305,任务生产服务模块将多媒体数据与语言类型相关联。
本申请中,任务生产服务模块可以查询任务列表索引库中,是否存在与语言类型及媒体标识具有任务映射关系的其他字幕任务,若不存在,则可以说明该字幕任务task_4是该多媒体数据中的第一个字幕任务(即,当前没有对该多媒体数据中的其他原始字幕片段的反馈),则可以创建该媒体标识与语言类型之间的语言映射关系,并将该语言映射关系存储至多媒体数据列表索引库中,用以将该多媒体数据与语言类型进行关联。
需要说明的是,任务索引库、反馈索引库、任务列表索引库以及多媒体数据列表索引库均可以包括在上述图2所对应实施例中的关系索引库中。
可以理解的是,当字幕审核用户进入字幕审核页面后,字幕审核用户在选择审核的语言类型(即目标语言类型)后,可以通过多媒体数据列表索引库中的语言映射关系,获取到该目标语言类型所关联的多媒体数据任务列表(例如,中文——>{多媒体数据1,…,多媒体数据n});进一步地,字幕审核用户在多媒体数据任务列表中选择审核的多媒体数据(即目标多媒体数据)后,可以通过任务列表所以库中的任务映射关系,获取到该目标多媒体数据所关联的字幕任务列表(即目标语言类型+目标多媒体数据——>{字幕任务task_1,…,字幕任务task_n});进一步地,字幕审核用户在字幕任务列表中选择审核的字幕任务(即待审核字幕任务)后,可以通过反馈索引库中的反馈映射关系,获取到该待审核字幕任务所关联的字幕反馈信息列表(即task_4——>report_1,…,report_n)。字幕审核用户可以针对字幕反馈信息列表中的任一条字幕反馈信息进行审核,在审核通过后,该条字幕反馈信息中的修正字幕片段会对该目标多媒体数据的字幕文件进行更新,同时在刷新线上字幕文件后,当用户(包括字幕审核用户)在再次播放该多媒体数据时,可以观看到更新后的字幕文件信息。
在本申请实施例中,用户在观看多媒体数据时,可以对多媒体数据中的原始字幕片段提交修正字幕片段(字幕修改意见),而本申请可以根据用户的字幕修改意见,生成字幕反馈信息,本申请可以将该条字幕反馈信息挂载到一个字幕任务下,同时将字幕任务关联该原始字幕片段、原始字幕片段对应的语言类型以及多媒体数据的媒体标识等信息。由此当字幕审核用户进行字幕审核时,可以按语言类型、多媒体数据以及字幕任务等维度来获取到需要审核的字幕反馈信息,并对字幕反馈信息进行审核,基于审核意见更新多媒体数据的字幕文件。应当理解,字幕审核用户可以从语言类型维度,拉取到相关联的字幕任务,从字幕任务维度,拉取到相关联的字幕反馈信息。从而可以实现为字幕审核用户精准的拉取数据,减少不必要的流量消耗。同时,针对于同一个原始字幕片段,聚合了一个或多个用户的字幕修改意见(即修正字幕片段);则基于这些修正字幕片段所生成的审核字幕片段,不仅结合了观看多媒体数据的用户的修改意见,还结合了字幕审核用户的审核意见,则该审核字幕片段具备较高的准确性。可以看出,本申请可以支持观看多媒体数据的用户提出字幕修改意见,可以提高字幕翻译中用户的参与度,且字幕审核用户可以对字幕反馈信息进行审核,可以提高字幕翻译的准确率;同时本申请由于创建语言类型、字幕任务以及字幕反馈信息之间的映射关系,可以实现为字幕审核用户精准的拉取数据,从而减少流量消耗。
可选的,应当理解,为增加多媒体数据的字幕语言类型种类,从而提升多媒体数据本地化用户体验,本申请可以增加字幕添加入口,当多媒体数据(例如,视频数据)中不存在某些语言类型(例如,泰文、阿拉伯语等语言类型)的字幕时,用户可以通过该字幕添加入口,通过已有的字幕(例如,英文)来进行翻译并提交至业务服务器,业务服务器可以将这些用户提交的字幕进行汇总,从而得到该语言类型对应的字幕文件。则当用户对该多媒体数据进行播放时,可以观看到这一语言类型对应的字幕。为便于理解,请一并参见图8,图8是本申请实施例提供的一种字幕添加的场景示意图。如图8所示,用户C通过用户终端正在播放电视剧“陈情令”的第一集,该电视剧“陈情令”中,已存在中文字幕以及英文字幕,如图8所示所展示的为中文字幕中的一个字幕片段“Look up let me see”。用户C想要提交泰文的字幕,则如图8所示,用户C可以点击字幕添加入口,用户终端针对用户C的这一触发操作,可以创建一个字幕添加界面,以供用户C输入添加的字幕内容。如图8所示,用户C在字幕添加界面中,可以查看到已有的英文字幕“Look up let me see”,这一英文字幕“Look uplet me see”可以作为参考字幕,用户C可以参考“Look up let me see”进行泰文翻译,并在输入框内输入翻译的泰文内容。如图8所示,用户C在输入完成并点击提交后,用户终端针对用户C的这一触发操作,可以生成字幕添加请求,并将该字幕添加请求发送至业务服务器,业务服务器可以将用户C的这一句泰文字幕添加至数据库中进行存储,并向用户终端返回存储成功消息。用户终端在接收到存储成功消息后,可以在字幕添加界面中显示字幕添加成功消息,用户C在查看到该字幕添加成功消息后,可以知道自己翻译的泰文内容已提交成功。应当理解,该用户C还可以对其他已有的英文字幕片段进行泰文翻译并提交,业务服务器可以对用户C提交的这些泰文翻译片段进行汇总,得到泰文这一语言类型所对应的一个完整的字幕文件。由此,当用户C播放“陈情令”这一电视剧时,在选择观看字幕的语言类型时,可以选择泰文这一语言类型,由此可以查看到泰文的字幕文件的内容。应当理解,除用户C以外的其他用户(例如,用户D)也可以参考已有的英文字幕片段进行泰文翻译并提交,若用户C以及用户D提交的泰文翻译片段具有重复(即对同一个英文字幕片段进行的泰文翻译),则在汇总泰文翻译片段时,业务服务器可以根据用户C与用户D的提交时间顺序来进行选择(例如,用户D提交的时间晚于用户C,则选择用户D的泰文翻译片段);也可以由字幕审核人员来对用户C与用户D的泰文翻译片段来进行审核,由人工选择出一个较为合适的一个泰文翻译片段。
应当理解,通过增加字幕添加入口,对一些多媒体数据中,当部分语言类型没有对应的字幕文件时,可由不同的用户通过参考已有的语言类型的字幕,来进行翻译,从而可以增加字幕语言类型的种类,不仅降低了字幕翻译的成本,同时可以提高多媒体数据本地化用户体验。
进一步地,请参见图9,图9是本申请实施例提供的一种多媒体数据处理装置的结构示意图。如图9所示,该多媒体数据处理装置1可以包括:任务列表展示模块100、反馈列表展示模块200、审核字幕生成模块300以及字幕更新模块400。
任务列表展示模块100,用于响应针对字幕审核界面的语言选择操作,展示字幕任务列表;字幕任务列表中的字幕任务所属的多媒体数据,包括语言选择操作所选择的目标语言类型;字幕任务用于关联多媒体数据中的原始字幕片段;
反馈列表展示模块200,用于响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;字幕反馈信息列表中的字幕反馈信息与字幕任务选择操作所选择的待审核字幕任务相关联;字幕反馈信息包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
审核字幕生成模块300,用于响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段;
字幕更新模块400,用于根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
其中,任务列表展示模块100、反馈列表展示模块200、审核字幕生成模块300以及字幕更新模块400的具体实现方式,可以参见图4所对应实施例中步骤S101-步骤S103的描述,这里将不再进行赘述。
可以理解的是,本申请实施例中的多媒体数据处理装置1可执行前文图4所对应实施例中对多媒体数据处理方法的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
进一步地,请参见图10,是本申请实施例提供的一种多媒体数据处理装置的结构示意图。如图10所示,该多媒体数据处理装置2可以包括:任务列表展示模块11、反馈列表展示模块12、审核字幕生成模块13以及字幕更新模块14;进一步地,该多媒体数据处理装置2还可以包括字幕展示模块15。
其中,任务列表展示模块11、反馈列表展示模块12、审核字幕生成模块13以及字幕更新模块14的具体实现方式,分别与图9中的任务列表展示模块100、反馈列表展示模块200、审核字幕生成模块300以及字幕更新模块400一致,这里将不再进行赘述。
请参见图10,任务列表展示模块11可以包括:媒体数据展示单元111以及字幕任务展示单元112。
媒体数据展示单元111,用于响应针对字幕审核界面的语言选择操作,展示多媒体数据任务列表;多媒体数据任务列表中的多媒体数据,包括语言选择操作所选择的目标语言类型;
字幕任务展示单元112,用于响应针对多媒体数据任务列表的多媒体数据选择操作,展示字幕任务列表;字幕任务列表中的字幕任务与多媒体数据选择操作所选择的多媒体数据相关联。
请参见图10,媒体数据展示单元111可以包括:数据查询请求发送子单元1111以及媒体数据展示子单元1112。
数据查询请求发送子单元1111,用于响应针对字幕审核界面的语言选择操作,向业务服务器发送多媒体数据查询请求;多媒体数据查询请求中携带目标语言类型;
媒体数据展示子单元1112,用于接收业务服务器根据目标语言类型对应的语言映射关系所返回的多媒体数据任务列表,将多媒体数据任务列表展示于字幕审核界面中;语言映射关系是由业务服务器在目标语言类型与包含目标语言类型的多媒体数据之间所创建的映射关系。
请参见图10,字幕任务展示单元112可以包括:任务查询请求发送子单元1121以及字幕任务展示子单元1122。
任务查询请求发送子单元1121,用于响应针对多媒体数据任务列表的多媒体数据选择操作,向业务服务器发送字幕任务查询请求;字幕任务查询请求中携带目标多媒体数据的媒体标识;
字幕任务展示子单元1122,用于接收业务服务器根据目标语言类型及媒体标识共同对应的任务映射关系所返回的字幕任务列表,将字幕任务列表展示于字幕审核界面中;字幕任务列表中的字幕任务与目标多媒体数据的媒体标识及目标语言类型之间存在任务映射关系。
请参见图10,反馈列表展示模块12可以包括:反馈查询请求发送单元121以及反馈列表展示单元122。
反馈查询请求发送单元121,用于响应针对字幕任务列表的字幕任务选择操作,向业务服务器发送字幕反馈信息查询请求;字幕反馈信息查询请求中携带待审核字幕任务;
反馈列表展示单元122,用于接收业务服务器根据待审核字幕任务的反馈映射关系所返回的字幕反馈信息列表,将字幕反馈信息列表展示于字幕审核界面中;反馈映射关系是由业务服务器在待审核字幕任务与字幕反馈信息之间所创建的映射关系。
其中,审核操作包括编辑操作和确认操作;审核字幕生成模块13可以包括:编辑操作响应单元131以及确认操作响应单元132
编辑操作响应单元131,用于响应针对字幕反馈信息的编辑操作,创建针对修正字幕片段对应的文本编辑界面,获取针对修正字幕片段所输入的审核文本信息,将审核文本信息确定为修正字幕片段对应的审核字幕片段;或者,
确认操作响应单元132,用于响应针对字幕反馈信息的确认操作,将修正字幕片段确定为审核字幕片段。
可选的,字幕展示模块15,用于响应针对目标多媒体数据的播放操作,将更新字幕文本展示于目标多媒体数据的播放界面中。
其中,任务列表展示模块11、反馈列表展示模块12、审核字幕生成模块13以及字幕更新模块14的具体实现方式可以参见图4所对应实施例中对步骤S101-步骤S103的描述,这里将不再继续进行赘述。其中,字幕展示模块15的具体实现方式可以参见图4所对应实施例中对步骤S103中的描述,这里将不再继续进行赘述。
可以理解的是,本申请实施例中的多媒体数据处理装置2可执行前文图4所对应实施例中对多媒体数据处理方法的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
进一步地,请参见图11,是本申请实施例提供的一种计算机设备的示意图。如图11所示,计算机设备1000可以为图3a或图3b所对应实施例中的用户终端,计算机设备1000可以包括:至少一个处理器1001,例如CPU,至少一个网络接口1004,用户接口1003,存储器1005,至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),网络接口1004可选地可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器1005可选地还可以是至少一个位于远离前述处理器1001的存储装置。如图11所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
在图11所示的计算机设备1000中,网络接口1004主要用于与业务服务器进行网络通信;而用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的设备控制应用程序,以实现:
响应针对字幕审核界面的语言选择操作,展示字幕任务列表;字幕任务列表中的字幕任务所属的多媒体数据,包括语言选择操作所选择的目标语言类型;字幕任务用于关联多媒体数据中的原始字幕片段;
响应针对字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;字幕反馈信息列表中的字幕反馈信息与字幕任务选择操作所选择的待审核字幕任务相关联;字幕反馈信息包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
响应针对字幕反馈信息的审核操作,生成修正字幕片段对应的审核字幕片段,根据审核字幕片段更新目标原始字幕片段,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
应当理解,本申请实施例中所描述的计算机设备1000可执行前文图4所对应实施例中对该视频数据处理方法的描述,也可执行前文图9所对应实施例中对该多媒体数据处理装置1的描述,还可执行前文图10所对应实施例中对多媒体数据处理装置2的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
此外,这里需要指出的是:本申请实施例还提供了一种计算机可读存储介质,且计算机可读存储介质中存储有前文提及的数据处理的计算机设备1000所执行的计算机程序,且计算机程序包括程序指令,当处理器执行程序指令时,能够执行前文图4所对应实施例中对数据处理方法的描述,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机可读存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述。
进一步地,请参见图12,图12是本申请实施例提供的一种多媒体数据处理装置的结构示意图。如图12所示,该多媒体数据处理装置3可以包括:查询请求获取模块1000、任务列表组成模块2000、反馈列表组成模块3000、更新请求获取模块4000以及字幕更新模块5000。
查询请求获取模块1000,用于获取第一用户终端发送的字幕任务查询请求;字幕任务查询请求中携带目标语言类型;
任务列表组成模块2000,用于根据字幕任务查询请求,获取与目标语言类型相关联的字幕任务,组成字幕任务列表,将字幕任务列表返回至第一用户终端;字幕任务用于关联多媒体数据中的原始字幕片段;
查询请求获取模块1000,还用于获取第一用户终端发送的字幕反馈信息查询请求;字幕反馈信息查询请求中携带待审核字幕任务;待审核字幕任务为第一用户终端在字幕任务列表中所选择的字幕任务;
反馈列表组成模块3000,用于根据字幕反馈信息查询请求,获取与待审核字幕任务相关联的字幕反馈信息,组成字幕反馈信息列表,将字幕反馈信息列表返回至第一用户终端;字幕反馈信息中包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
更新请求获取模块4000,用于获取第一用户终端发送的字幕更新请求;字幕更新请求中携带修正字幕片段对应的审核字幕片段;
字幕更新模块5000,用于根据审核字幕片段对目标原始字幕片段进行更新,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
其中,查询请求获取模块1000、任务列表组成模块2000、反馈列表组成模块3000、更新请求获取模块4000以及字幕更新模块5000的具体实现方式,可以参见图4所对应实施例中步骤S101-步骤S103中的描述,这里将不再进行赘述。
可以理解的是,本申请实施例中的多媒体数据处理装置3可执行前文图4所对应实施例中对多媒体数据处理方法的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
进一步地,请参见图13,图13是本申请实施例提供的一种多媒体数据处理装置的结构示意图。如图13所示,该多媒体数据处理装置4可以包括:查询请求获取模块41、任务列表组成模块42、反馈列表组成模块43、更新请求获取模块44以及字幕更新模块45;进一步地,该多媒体数据处理装置4还可以包括:修改请求获取模块46、任务映射关系创建模块47、反馈映射关系创建模块48以及语言映射关系创建模块49。
其中,查询请求获取模块41、任务列表组成模块42、反馈列表组成模块43、更新请求获取模块44以及字幕更新模块45的具体实现方式,分别与图12的查询请求获取模块1000、任务列表组成模块2000、反馈列表组成模块3000、更新请求获取模块4000以及字幕更新模块5000一致,这里将不再进行赘述。
请参见图13,任务列表组成模块42可以包括:媒体数据获取单元421以及字幕任务获取单元422。
媒体数据获取单元421,用于根据字幕任务查询请求,获取与目标语言类型具有语言映射关系的多媒体数据,组成多媒体数据任务列表,将多媒体数据任务列表返回至第一用户终端,以使第一用户终端在多媒体数据任务列表中选择出目标多媒体数据;
字幕任务获取单元422,用于获取第一用户终端所选择的目标多媒体数据的媒体标识,获取与媒体标识及目标语言类型具有任务映射关系的字幕任务,组成字幕任务列表,将字幕任务列表返回至第一用户终端;
可选的,反馈列表组成模块43,可以具体用于根据字幕反馈信息查询请求,获取与待审核字幕任务具有反馈映射关系的字幕反馈信息,组成字幕反馈信息列表。
修改请求获取模块46,用于获取第二用户终端发送的字幕修改请求;字幕修改请求中携带目标多媒体数据的媒体标识、目标原始字幕片段的索引、修正字幕片段以及目标语言类型。
任务映射关系创建模块47,用于根据目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引,生成待审核字幕任务,创建目标多媒体数据及目标语言类型与待审核字幕任务之间的任务映射关系。
其中,任务映射关系创建模块47可以包括:第一索引库遍历单元471以及第一映射关系创建单元472。
第一索引库遍历单元471,用于遍历关系索引库;
第一映射关系创建单元472,用于若在关系索引库中不存在与目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引之间具有正向索引关系的字幕任务,则根据目标多媒体数据的媒体标识、目标语言类型以及目标原始字幕片段的索引,生成待审核字幕任务,并创建目标多媒体数据及目标语言类型与待审核字幕任务之间的任务映射关系。
反馈映射关系创建模块48,用于根据目标原始字幕片段的索引以及修正字幕片段生成字幕反馈信息,创建字幕反馈信息与待审核字幕任务之间的反馈映射关系。
语言映射关系创建模块49,用于创建目标多媒体数据与目标语言类型之间的语言映射关系。
其中,语言映射关系创建模块49可以包括:第二索引库遍历单元491以及第二映射关系创建单元492。
第二索引库遍历单元491,用于遍历关系索引库;
第二映射关系创建单元492,用于若在关系索引库中不存在与目标多媒体数据的媒体标识及目标语言类型具有任务映射关系的字幕任务,则确定待审核字幕任务为目标多媒体数据的媒体标识及目标语言类型所对应的首个字幕任务,创建目标多媒体数据与目标语言类型之间的语言映射关系。
其中,查询请求获取模块41、任务列表组成模块42、反馈列表组成模块43、更新请求获取模块44以及字幕更新模块45的具体实现方式,可以参见图4所对应实施例中步骤S101-步骤S103中的描述,这里将不再进行赘述。其中,修改请求获取模块46、任务映射关系创建模块47、反馈映射关系创建模块48以及语言映射关系创建模块49的具体实现方式,可以参见图7所对应实施例中对步骤S301-步骤S305的描述,这里将不再进行赘述。
可以理解的是,本申请实施例中的多媒体数据处理装置4可执行前文图7所对应实施例中对多媒体数据处理方法的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
进一步地,请参见图14,是本申请实施例提供的一种计算机设备的结构示意图。如图14所示,该计算机设备4000可以为服务器,例如,图1a所对应实施例中的服务器1000。该计算机设备1000可以包括:处理器4001,网络接口4004和存储器4005,此外,该计算机设备4000还可以包括:用户接口4003,和至少一个通信总线4002。其中,通信总线4002用于实现这些组件之间的连接通信。其中,用户接口4003还可以包括标准的有线接口、无线接口。网络接口4004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器4004可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器4005可选的还可以是至少一个位于远离前述处理器4001的存储装置。如图14所示,作为一种计算机存储介质的存储器4005中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
其中,该计算机设备4000中的网络接口4004还可以提供网络通讯功能。在图14所示的计算机设备4000中,网络接口4004可提供网络通讯功能;而用户接口4003主要用于为用户提供输入的接口;而处理器4001可以用于调用存储器4005中存储的设备控制应用程序,以实现:
获取第一用户终端发送的字幕任务查询请求;字幕任务查询请求中携带目标语言类型;
根据字幕任务查询请求,获取与目标语言类型相关联的字幕任务,组成字幕任务列表,将字幕任务列表返回至第一用户终端;字幕任务用于关联多媒体数据中的原始字幕片段;
获取第一用户终端发送的字幕反馈信息查询请求;字幕反馈信息查询请求中携带待审核字幕任务;待审核字幕任务为第一用户终端在字幕任务列表中所选择的字幕任务;
根据字幕反馈信息查询请求,获取与待审核字幕任务相关联的字幕反馈信息,组成字幕反馈信息列表,将字幕反馈信息列表返回至第一用户终端;字幕反馈信息中包括待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
获取第一用户终端发送的字幕更新请求;字幕更新请求中携带修正字幕片段对应的审核字幕片段;
根据审核字幕片段对原始字幕片段进行更新,得到目标多媒体数据的更新字幕文本;目标多媒体数据为待审核字幕任务所属的多媒体数据。
应当理解,本申请实施例中所描述的计算机设备4000可执行前文图5、图6以及图7所对应实施例中对该多媒体数据处理方法的描述,也可执行前文图12所对应实施例中对该多媒体数据处理装置3的描述,还可以执行前文图13所对应实施例中对该多媒体数据处理装置4的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
此外,这里需要指出的是:本申请实施例还提供了一种计算机可读存储介质,且计算机可读存储介质中存储有前文提及的数据处理的计算机设备4000所执行的计算机程序,且计算机程序包括程序指令,当处理器执行程序指令时,能够执行前文图6到图7所对应实施例中对数据处理方法的描述,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机可读存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述。
进一步的,请参见图15,是本申请实施例提供的一种多媒体数据处理系统的结构示意图。该多媒体数据处理系统5可以包含多媒体数据处理装置1a和多媒体数据处理装置2a。其中,多媒体数据处理装置1a可以为图9所对应实施例中的多媒体数据处理装置1,或图10所对应实施例中的多媒体数据处理装置2,可以理解的是,该多媒体数据处理装置1a可以集成在图4所对应实施例中的用户终端,因此,这里将不再进行赘述。其中,多媒体数据处理装置2a可以为图12所对应实施例中的多媒体数据处理装置3,或图13所对应实施例中的多媒体数据处理装置4,可以理解的是,该多媒体数据处理装置2a可以集成在图4所对应实施例中的业务服务器,因此,这里不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。需要说明的是,多媒体数据处理装置1a与多媒体数据处理装置2a中均包括字幕更新模块,当多媒体数据处理装置1a的字幕更新模块在执行字幕更新操作时,多媒体数据处理装置2a中的字幕更新模块暂停执行字幕更新操作;当多媒体数据处理装置2a中的字幕更新模块在执行字幕更新操作时,多媒体数据处理装置1a中的字幕更新模块暂停执行字幕更新操作。
可选的,多媒体数据处理装置1a中可以包括字幕更新模块,多媒体数据处理装置2a中不包括字幕更新模块,该多媒体数据处理装置1a中的字幕更新模块可以用于执行字幕更新操作。
可选的,多媒体数据处理装置1a中不包括字幕更新模块,多媒体数据处理装置2a中包括字幕更新模块,该多媒体数据处理装置2a中的字幕更新模块可以用于执行字幕更新操作。
对于本申请所涉及的多媒体数据处理系统实施例中未披露的技术细节,请参照本申请方法实施例的描述。
计算机可读存储介质可以是前述任一实施例提供的多媒体数据处理装置或者计算机设备的内部存储单元,例如计算机设备的硬盘或内存。该计算机可读存储介质也可以是该计算机设备的外部存储设备,例如该计算机设备上配备的插接式硬盘,智能存储卡(smart media card,SMC),安全数字(secure digital,SD)卡,闪存卡(flash card)等。进一步地,该计算机可读存储介质还可以既包括该计算机设备的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该计算机设备所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本申请提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行本申请实施例中提供的方法。
本申请实施例的说明书和权利要求书及附图中的术语“第一”、“第二”等是用于区别不同对象,而非用于描述特定顺序。此外,术语“包括”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、装置、产品或设备没有限定于已列出的步骤或模块,而是可选地还包括没有列出的步骤或模块,或可选地还包括对于这些过程、方法、装置、产品或设备固有的其他步骤单元。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例提供的方法及相关装置是参照本申请实施例提供的方法流程图和/或结构示意图来描述的,具体可由计算机程序指令实现方法流程图和/或结构示意图的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。这些计算机程序指令可提供到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或结构示意图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或结构示意图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或结构示意一个方框或多个方框中指定的功能的步骤。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (15)

1.一种多媒体数据处理方法,其特征在于,包括:
响应针对字幕审核界面的语言选择操作,展示字幕任务列表;所述字幕任务列表中的字幕任务所属的多媒体数据,包括所述语言选择操作所选择的目标语言类型;所述字幕任务用于关联所述多媒体数据中的原始字幕片段;
响应针对所述字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;所述字幕反馈信息列表中的字幕反馈信息与所述字幕任务选择操作所选择的待审核字幕任务相关联;所述字幕反馈信息包括所述待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
响应针对所述字幕反馈信息的审核操作,生成所述修正字幕片段对应的审核字幕片段,根据所述审核字幕片段更新所述目标原始字幕片段,得到目标多媒体数据的更新字幕文本;所述目标多媒体数据为所述待审核字幕任务所属的多媒体数据。
2.根据权利要求1所述的方法,其特征在于,所述响应针对字幕审核界面的语言选择操作,展示字幕任务列表,包括:
响应针对所述字幕审核界面的语言选择操作,展示多媒体数据任务列表;所述多媒体数据任务列表中的多媒体数据,包括所述语言选择操作所选择的目标语言类型;
响应针对所述多媒体数据任务列表的多媒体数据选择操作,展示字幕任务列表;所述字幕任务列表中的字幕任务与所述多媒体数据选择操作所选择的多媒体数据相关联。
3.根据权利要求2所述的方法,其特征在于,所述响应针对所述字幕审核界面的语言选择操作,展示多媒体数据任务列表,包括:
响应针对字幕审核界面的语言选择操作,向业务服务器发送多媒体数据查询请求;所述多媒体数据查询请求中携带所述目标语言类型;
接收所述业务服务器根据所述目标语言类型对应的语言映射关系所返回的多媒体数据任务列表,将所述多媒体数据任务列表展示于所述字幕审核界面中;所述语言映射关系是由所述业务服务器在所述目标语言类型与包含所述目标语言类型的多媒体数据之间所创建的映射关系。
4.根据权利要求2所述的方法,其特征在于,所述响应针对所述多媒体数据任务列表的多媒体数据选择操作,展示字幕任务列表,包括:
响应针对所述多媒体数据任务列表的多媒体数据选择操作,向所述业务服务器发送字幕任务查询请求;所述字幕任务查询请求中携带所述目标多媒体数据的媒体标识;
接收所述业务服务器根据所述目标语言类型及所述媒体标识共同对应的任务映射关系所返回的字幕任务列表,将所述字幕任务列表展示于所述字幕审核界面中;所述字幕任务列表中的字幕任务与所述目标多媒体数据的媒体标识及所述目标语言类型之间存在所述任务映射关系。
5.根据权利要求2所述的方法,其特征在于,所述响应针对所述字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表,包括:
响应针对所述字幕任务列表的字幕任务选择操作,向所述业务服务器发送字幕反馈信息查询请求;所述字幕反馈信息查询请求中携带所述待审核字幕任务;
接收所述业务服务器根据所述待审核字幕任务的反馈映射关系所返回的字幕反馈信息列表,将所述字幕反馈信息列表展示于所述字幕审核界面中;所述反馈映射关系是由所述业务服务器在所述待审核字幕任务与所述字幕反馈信息之间所创建的映射关系。
6.根据权利要求1所述的方法,其特征在于,所述审核操作包括编辑操作和确认操作;所述响应针对所述字幕反馈信息的审核操作,生成所述修正字幕片段对应的审核字幕片段,包括:
响应针对所述字幕反馈信息的编辑操作,创建针对所述修正字幕片段对应的文本编辑界面,获取针对所述修正字幕片段所输入的审核文本信息,将所述审核文本信息确定为所述修正字幕片段对应的审核字幕片段;或者,
响应针对所述字幕反馈信息的确认操作,将所述修正字幕片段确定为所述审核字幕片段。
7.根据权利要求1所述的方法,其特征在于,还包括:
响应针对所述目标多媒体数据的播放操作,将所述更新字幕文本展示于所述目标多媒体数据的播放界面中。
8.一种多媒体数据处理方法,其特征在于,包括:
获取第一用户终端发送的字幕任务查询请求;所述字幕任务查询请求中携带目标语言类型;
根据所述字幕任务查询请求,获取与所述目标语言类型相关联的字幕任务,组成字幕任务列表,将所述字幕任务列表返回至所述第一用户终端;所述字幕任务用于关联多媒体数据中的原始字幕片段;
获取所述第一用户终端发送的字幕反馈信息查询请求;所述字幕反馈信息查询请求中携带待审核字幕任务;所述待审核字幕任务为所述第一用户终端在所述字幕任务列表中所选择的字幕任务;
根据所述字幕反馈信息查询请求,获取与所述待审核字幕任务相关联的字幕反馈信息,组成字幕反馈信息列表,将所述字幕反馈信息列表返回至所述第一用户终端;所述字幕反馈信息中包括所述待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
获取所述第一用户终端发送的字幕更新请求;所述字幕更新请求中携带所述修正字幕片段对应的审核字幕片段;
根据所述审核字幕片段对所述目标原始字幕片段进行更新,得到目标多媒体数据的更新字幕文本;所述目标多媒体数据为所述待审核字幕任务所属的多媒体数据。
9.根据权利要求8所述的方法,其特征在于,所述根据所述字幕任务查询请求,获取与所述目标语言类型相关联的字幕任务,组成字幕任务列表,将所述字幕任务列表返回至所述第一用户终端,包括:
根据所述字幕任务查询请求,获取与所述目标语言类型具有语言映射关系的多媒体数据,组成多媒体数据任务列表,将所述多媒体数据任务列表返回至所述第一用户终端,以使所述第一用户终端在所述多媒体数据任务列表中选择出目标多媒体数据;
获取所述第一用户终端所选择的所述目标多媒体数据的媒体标识,获取与所述媒体标识及所述目标语言类型具有任务映射关系的字幕任务,组成字幕任务列表,将所述字幕任务列表返回至所述第一用户终端;
则所述根据所述字幕反馈信息查询请求,获取与所述待审核字幕任务相关联的字幕反馈信息,组成字幕反馈信息列表,包括:
根据所述字幕反馈信息查询请求,获取与所述待审核字幕任务具有反馈映射关系的字幕反馈信息,组成字幕反馈信息列表。
10.根据权利要求9所述的方法,其特征在于,还包括:
获取第二用户终端发送的字幕修改请求;所述字幕修改请求中携带所述目标多媒体数据的媒体标识、目标原始字幕片段的索引、所述修正字幕片段以及所述目标语言类型;
根据所述目标多媒体数据的媒体标识、所述目标语言类型以及所述目标原始字幕片段的索引,生成所述待审核字幕任务,创建所述目标多媒体数据及所述目标语言类型与所述待审核字幕任务之间的任务映射关系;
根据所述目标原始字幕片段的索引以及所述修正字幕片段生成所述字幕反馈信息,创建所述字幕反馈信息与所述待审核字幕任务之间的反馈映射关系;
创建所述目标多媒体数据与所述目标语言类型之间的语言映射关系。
11.根据权利要求10所述的方法,其特征在于,所述根据所述目标多媒体数据的媒体标识、所述目标语言类型以及所述目标原始字幕片段的索引,生成所述待审核字幕任务,创建所述目标多媒体数据及所述目标语言类型与所述待审核字幕任务之间的任务映射关系,包括:
遍历关系索引库;
若在所述关系索引库中不存在与所述目标多媒体数据的媒体标识、所述目标语言类型以及所述目标原始字幕片段的索引之间具有正向索引关系的字幕任务,则根据所述目标多媒体数据的媒体标识、所述目标语言类型以及所述目标原始字幕片段的索引,生成所述待审核字幕任务,并创建所述目标多媒体数据及所述目标语言类型与所述待审核字幕任务之间的任务映射关系。
12.根据权利要求10所述的方法,其特征在于,所述创建所述目标多媒体数据与所述目标语言类型之间的语言映射关系,包括:
遍历关系索引库;
若在所述关系索引库中不存在与所述目标多媒体数据的媒体标识及所述目标语言类型具有任务映射关系的字幕任务,则确定所述待审核字幕任务为所述目标多媒体数据的媒体标识及所述目标语言类型所对应的首个字幕任务,创建所述目标多媒体数据与所述目标语言类型之间的语言映射关系。
13.一种多媒体数据处理装置,其特征在于,包括:
任务列表展示模块,用于响应针对字幕审核界面的语言选择操作,展示字幕任务列表;所述字幕任务列表中的字幕任务所属的多媒体数据,包括所述语言选择操作所选择的目标语言类型;所述字幕任务用于关联所述多媒体数据中的原始字幕片段;
反馈列表展示模块,用于响应针对所述字幕任务列表的字幕任务选择操作,展示字幕反馈信息列表;所述字幕反馈信息列表中的字幕反馈信息与所述字幕任务选择操作所选择的待审核字幕任务相关联;所述字幕反馈信息包括所述待审核字幕任务关联的目标原始字幕片段以及修正字幕片段;
审核字幕生成模块,用于响应针对所述字幕反馈信息的审核操作,生成所述修正字幕片段对应的审核字幕片段;
字幕更新模块,用于根据所述审核字幕片段更新所述目标原始字幕片段,得到目标多媒体数据的更新字幕文本;所述目标多媒体数据为所述待审核字幕任务所属的多媒体数据。
14.一种计算机设备,其特征在于,包括:处理器、存储器以及网络接口;
所述处理器与所述存储器、所述网络接口相连,其中,所述网络接口用于提供网络通信功能,所述存储器用于存储程序代码,所述处理器用于调用所述程序代码,以执行如权利要求1-12任一项所述的方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时,执行如权利要求1-12任一项所述的方法。
CN202010588325.1A 2020-06-24 2020-06-24 一种多媒体数据处理方法、装置、设备及可读存储介质 Active CN111787363B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010588325.1A CN111787363B (zh) 2020-06-24 2020-06-24 一种多媒体数据处理方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010588325.1A CN111787363B (zh) 2020-06-24 2020-06-24 一种多媒体数据处理方法、装置、设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN111787363A true CN111787363A (zh) 2020-10-16
CN111787363B CN111787363B (zh) 2021-08-24

Family

ID=72760229

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010588325.1A Active CN111787363B (zh) 2020-06-24 2020-06-24 一种多媒体数据处理方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN111787363B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113392625A (zh) * 2021-06-25 2021-09-14 北京百度网讯科技有限公司 确定标注信息的方法、装置、电子设备和存储介质
CN113609870A (zh) * 2021-07-23 2021-11-05 深圳市元征信息技术开发有限公司 翻译方法、装置、服务器及可读存储介质
CN114880549A (zh) * 2022-03-04 2022-08-09 陕西广电网络传媒(集团)股份有限公司 辅助审查媒体资源信息的服务平台、装置、设备和介质
CN115086691A (zh) * 2021-03-16 2022-09-20 北京有竹居网络技术有限公司 字幕优化方法、装置、电子设备和存储介质
CN115484478A (zh) * 2021-05-31 2022-12-16 上海哔哩哔哩科技有限公司 字幕处理方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040260569A1 (en) * 2000-09-07 2004-12-23 Cyber Legal Solutions, Inc. Expert legal task management
US20110128442A1 (en) * 2009-12-01 2011-06-02 Robert Blanchard Delivery of Captions, Content Advisory and Other Data Through Digital Interface
CN104093037A (zh) * 2014-06-10 2014-10-08 腾讯科技(深圳)有限公司 字幕校正方法和装置
CN105930340A (zh) * 2016-03-31 2016-09-07 北京奇虎科技有限公司 基于百科词条的词条纠错方法及装置
CN106973333A (zh) * 2017-03-27 2017-07-21 山东浪潮商用系统有限公司 基于比较的视频字幕错别字词纠错的方法及装置
CN109963092A (zh) * 2017-12-26 2019-07-02 深圳市优必选科技有限公司 一种字幕的处理方法、装置及终端
CN110235449A (zh) * 2016-09-30 2019-09-13 乐威指南公司 用于校正字幕文本中的错误的系统和方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040260569A1 (en) * 2000-09-07 2004-12-23 Cyber Legal Solutions, Inc. Expert legal task management
US20110128442A1 (en) * 2009-12-01 2011-06-02 Robert Blanchard Delivery of Captions, Content Advisory and Other Data Through Digital Interface
CN104093037A (zh) * 2014-06-10 2014-10-08 腾讯科技(深圳)有限公司 字幕校正方法和装置
CN105930340A (zh) * 2016-03-31 2016-09-07 北京奇虎科技有限公司 基于百科词条的词条纠错方法及装置
CN110235449A (zh) * 2016-09-30 2019-09-13 乐威指南公司 用于校正字幕文本中的错误的系统和方法
CN106973333A (zh) * 2017-03-27 2017-07-21 山东浪潮商用系统有限公司 基于比较的视频字幕错别字词纠错的方法及装置
CN109963092A (zh) * 2017-12-26 2019-07-02 深圳市优必选科技有限公司 一种字幕的处理方法、装置及终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
杨跃麟: "云南台国际频道多语言多字幕制播一体设计", 《电视技术》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115086691A (zh) * 2021-03-16 2022-09-20 北京有竹居网络技术有限公司 字幕优化方法、装置、电子设备和存储介质
CN115484478A (zh) * 2021-05-31 2022-12-16 上海哔哩哔哩科技有限公司 字幕处理方法及装置
CN113392625A (zh) * 2021-06-25 2021-09-14 北京百度网讯科技有限公司 确定标注信息的方法、装置、电子设备和存储介质
CN113392625B (zh) * 2021-06-25 2023-08-11 北京百度网讯科技有限公司 确定标注信息的方法、装置、电子设备和存储介质
CN113609870A (zh) * 2021-07-23 2021-11-05 深圳市元征信息技术开发有限公司 翻译方法、装置、服务器及可读存储介质
CN114880549A (zh) * 2022-03-04 2022-08-09 陕西广电网络传媒(集团)股份有限公司 辅助审查媒体资源信息的服务平台、装置、设备和介质

Also Published As

Publication number Publication date
CN111787363B (zh) 2021-08-24

Similar Documents

Publication Publication Date Title
CN111787363B (zh) 一种多媒体数据处理方法、装置、设备及可读存储介质
US9936184B2 (en) Code execution in complex audiovisual experiences
US9380410B2 (en) Audio commenting and publishing system
US9936259B2 (en) Systems and methods for rendering text onto moving image content
KR101296295B1 (ko) 커스터마이즈된 채널 정보를 제공하고 표시하기 위한 장치 및 방법
US20160226804A1 (en) Methods, systems, and media for suggesting a link to media content
US8510333B2 (en) Methods, systems, and apparatus for developing widgets
US20180295396A1 (en) Techniques for creation of auto-montages for media content
US20120206647A1 (en) System and method for tagging streamed video with tags based on position coordinates and time and selectively adding and using content associated with tags
CN104823454A (zh) 向辅助连接设备的内容推送
WO2012088468A2 (en) Switched annotations in playing audiovisual works
US20170060966A1 (en) Action Recommendation System For Focused Objects
US11800201B2 (en) Method and apparatus for outputting information
WO2010081378A1 (zh) 一种服务器、数字电视接收终端和节目信息显示系统与方法
US20240054279A1 (en) Website plugin and framework for content management services
CN107888989A (zh) 一种基于互联网直播的交互系统及方法
US9781232B2 (en) Server apparatus and information processing apparatus
US20120331507A1 (en) Systems and methods for providing local event listings with video
CN108738362A (zh) 基于多层级引用符数据生成应用的深度链接
US20190385192A1 (en) Digital media generation
US11895371B1 (en) Media content segment generation and presentation
US11700430B2 (en) Systems and methods to implement preferred subtitle constructs
US20090319571A1 (en) Video indexing
CN107018451B (zh) 时基超媒体事件的调度方法、装置及系统
WO2024027184A1 (zh) 一种发布群投票的方法、装置及相关产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40030864

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant