CN112218109A - 多媒体资源获取方法、装置、设备及存储介质 - Google Patents

多媒体资源获取方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112218109A
CN112218109A CN202010995671.1A CN202010995671A CN112218109A CN 112218109 A CN112218109 A CN 112218109A CN 202010995671 A CN202010995671 A CN 202010995671A CN 112218109 A CN112218109 A CN 112218109A
Authority
CN
China
Prior art keywords
target
multimedia resource
node
address
key frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010995671.1A
Other languages
English (en)
Other versions
CN112218109B (zh
Inventor
杨华清
李家旭
卢俊华
孙成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202010995671.1A priority Critical patent/CN112218109B/zh
Publication of CN112218109A publication Critical patent/CN112218109A/zh
Application granted granted Critical
Publication of CN112218109B publication Critical patent/CN112218109B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs

Abstract

本公开关于一种多媒体资源获取方法、装置、设备及存储介质。其中,多媒体资源获取方法包括:当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧;根据目标时间范围,生成地址查询请求;将地址查询请求发送至录制节点,地址查询请求用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内;接收录制节点反馈的目标播放地址;基于目标播放地址,获取指定多媒体资源。根据本公开实施例,能够解决相关技术中基于目前所获取的多媒体资源无法准确地识别直播内容和主播意图的问题。

Description

多媒体资源获取方法、装置、设备及存储介质
技术领域
本公开涉及计算机技术领域,尤其涉及一种多媒体资源获取方法、装置、设备及存储介质。
背景技术
随着计算机技术的发展,网络视频直播由于综合了图像、声音和文字的优点,特别是向用户提供即时与互动的交流和沟通方式,而受到了用户的青睐。
网络视频直播平台在为用户提供直播服务的过程中,会实时地获取直播中的多媒体资源,以基于多媒体资源实时地识别直播内容和主播意图。然而,基于目前所获取的多媒体资源无法准确地识别直播内容和主播意图。
发明内容
本公开提供一种多媒体资源获取方法、装置、设备及存储介质,以至少解决相关技术中基于目前所获取的多媒体资源无法准确地识别直播内容和主播意图的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种多媒体资源获取方法,包括:当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧;根据目标时间范围,生成地址查询请求;将地址查询请求发送至录制节点,地址查询请求用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内;接收录制节点反馈的目标播放地址;基于目标播放地址,获取指定多媒体资源。
在其中一个实施例中,当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围之前,该方法还包括:当接收到录制节点发送的至少一个直播关键帧时,显示至少一个直播关键帧,直播关键帧为从指定多媒体资源所属的目标多媒体资源中抽取的一个视频帧;接收目标对象的目标输入;响应于目标输入,将目标输入所选择的直播关键帧作为目标关键帧;
或者,基于目标播放地址,获取指定多媒体资源,包括:根据目标播放地址,拉取存储于第一数据存储节点中的指定多媒体资源。
在其中一个实施例中,确定目标关键帧对应的目标时间范围,包括:获取目标关键帧的播放时间;以目标关键帧的播放时间为目标时间范围的时间中点,按照预设时长,确定目标时间范围。
在其中一个实施例中,指定多媒体资源的数量为多个;其中,基于目标播放地址,获取指定多媒体资源之后,该方法还包括:对多个指定多媒体资源进行合成,得到合成多媒体资源;播放合成多媒体资源。
根据本公开实施例的第二方面,提供一种多媒体资源获取方法,包括:接收审核节点发送的地址查询请求;响应于地址查询请求,地址查询请求进行解析,得到地址查询请求信息;其中,所述址查询请求信息包括目标时间范围,目标时间范围根据目标关键帧确定,目标关键帧为从指定多媒体资源中抽取的一个视频帧,指定多媒体资源的至少部分播放时间段位于目标时间范围内;根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址;将目标播放地址发送至审核节点,以使审核节点基于目标播放地址,获取指定多媒体资源。
在其中一个实施例中,接收审核节点发送的地址查询请求之前,该方法还包括:拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;按照预设截帧时间间隔从目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个直播关键帧对应的播放时间;将多个直播关键帧和每个直播关键帧的播放时间发送至审核节点。
在其中一个实施例中,得到多个直播关键帧和每个直播关键帧对应的播放时间之后,该方法还包括:将每个直播关键帧的关键帧信息和播放时间发送至第二数据存储节点;将多个直播关键帧发送至第一数据存储节点,以使第一数据存储节点反馈每个直播关键帧的获取地址;接收第一数据存储节点反馈的直播关键帧的获取地址。
在其中一个实施例中,得到地址查询请求信息之后,根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址之前,该方法还包括:根据目标时间范围,生成数据查询请求;将数据查询请求发送至第二数据存储节点,数据查询请求用于使第二数据存储节点反馈指定多媒体资源的目标资源信息;接收第二数据存储节点反馈的目标资源信息;
其中,根目标时间范围,在多个播放地址中查询所述指多媒体资源的目标播放地址,包括:在多个播放地址中,查询目标资源信息对应的目标播放地址。
在其中一个实施例中,接收审核节点发送的地址查询请求之前,该方法还包括:拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;按照预设录制时间间隔对目标多媒体资源进行录制,得到多个多媒体资源和每个多媒体资源的播放时间段;将多个多媒体资源发送至第一数据存储节点,以使第一数据存储节点反馈每个多媒体资源的播放地址;接收第一数据存储节点反馈的多媒体资源的播放地址。
在其中一个实施例中,得到多个多媒体资源和每个多媒体资源的播放时间段之后,该方法还包括:将每个多媒体资源的资源信息和播放时间段发送至第二数据存储节点。
根据本公开实施例的第三方面,提供一种多媒体资源获取装置,包括:第一确定单元,被配置为当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧;第一生成单元,被配置为执行根据目标时间范围,生成地址查询请求;第一发送单元,被配置为执行将地址查询请求发送至录制节点,地址查询请求用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内;第一接收单元,被配置为执行接收录制节点反馈的目标播放地址;第一获取单元,被配置为执行基于目标播放地址,获取指定多媒体资源。
在其中一个实施例中,该装置还包括:第一显示单元,被配置为当接收到录制节点发送的至少一个直播关键帧时,显示至少一个直播关键帧,直播关键帧为从指定多媒体资源所属的目标多媒体资源中抽取的一个视频帧;第二接收单元,被配置为执行接收目标对象的目标输入;第一处理单元,被配置为执行响应于目标输入,将目标输入所选择的直播关键帧作为目标关键帧;
或者,第一获取单元被进一步配置为执行根据目标播放地址,拉取存储于第一数据存储节点中的指定多媒体资源。
在其中一个实施例中,第一确定单元包括:第一获取子单元,被配置为执行获取目标关键帧的播放时间;第一确定子单元,被配置为执行以目标关键帧的播放时间为目标时间范围的时间中点,按照预设时长,确定目标时间范围。
在其中一个实施例中,指定多媒体资源的数量为多个;
其中,该装置还包括:第一合成单元,被配置为执行对多个指定多媒体资源进行合成,得到合成多媒体资源;第一播放单元,被配置为执行播放合成多媒体资源。
根据本公开实施例的第四方面,提供一种多媒体资源获取装置,包括:第三接收单元,被配置为执行接收审核节点发送的地址查询请求;第一解析单元,被配置为执行响应于地址查询请求,对地址查询请求进行解析,得到地址查询请求信息;其中,地址查询请求信息包括目标时间范围,目标时间范围根据目标关键帧确定,目标关键帧为从指定多媒体资源中抽取的一个视频帧,指定多媒体资源的至少部分播放时间段位于目标时间范围内;第一查询单元,被配置为执行根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址;第二发送单元,被配置为执行目标播放地址发送至所述核节点,以使审核节点基于目标播放地址,获取指定多媒体资源。
在其中一个实施例中,该装置还包括:第一拉取单元,被配置为执行拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;第二处理单元,被配置为执行按照预设截帧时间间隔从目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个直播关键帧对应的播放时间;第三发送单元,被配置为执行将多个直播关键帧和每个直播关键帧的播放时间发送至审核节点。
在其中一个实施例中,该装置还包括:第四发送单元,被配置为执行将每个直播关键帧的关键帧信息和播放时间发送至第二数据存储节点;第五发送单元,被配置为执行将多个直播关键帧发送至第一数据存储节点,以使第一数据存储节点反馈每个直播关键帧的获取地址;第四接收单元,被配置为执行接收第一数据存储节点反馈的直播关键帧的获取地址。
在其中一个实施例中,该装置还包括:第二生成单元,被配置为执行根据目标时间范围,生成数据查询请求;第六发送单元,被配置为执行将数据查询请求发送至第二数据存储节点,数据查询请求用于使第二数据存储节点反馈指定多媒体资源的目标资源信息;第五接收单元,被配置为执行接收第二数据存储节点反馈的目标资源信息;其中,第一查询单元被进一步配置为执行在多个播放地址中,查询目标资源信息对应的目标播放地址。
在其中一个实施例中,该装置还包括:第二拉取单元,被配置为执行拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;第三处理单元,被配置为执行按照预设录制时间间隔对目标多媒体资源进行录制,得到多个多媒体资源和每个多媒体资源的播放时间段;第七发送单元,被配置为执行将多个多媒体资源发送至第一数据存储节点,以使第一数据存储节点反馈每个多媒体资源的播放地址;第六接收单元,被配置为执行接收第一数据存储节点反馈的多媒体资源的播放地址。
在其中一个实施例中,该装置还包括:第八发送单元,被配置为执行将每个多媒体资源的资源信息和播放时间段发送至第二数据存储节点。
根据本公开实施例的第五方面,提供一种多媒体资源获取设备,包括:处理器;用于存储处理器可执行指令的存储器;其中,处理器被配置为执行指令,以实现如第一方面或者第二方面所述的多媒体资源获取方法。
根据本公开实施例的第六方面,提供一种存储介质,当存储介质中的指令由多媒体资源获取设备的处理器执行时,使得多媒体资源获取设备能够执行如第一方面或者第二方面所述的多媒体资源获取方法。
根据本公开实施例的第七方面,提供一种计算机程序产品,当计算机程序产品中的指令由多媒体资源获取设备的处理器执行时,使得多媒体资源获取设备能够执行如第一方面或者第二方面所述的多媒体资源获取方法。
本公开的实施例提供的技术方案至少带来以下有益效果:
在本公开实施例中,当接收到录制节点发送的目标关键帧时,可以确定从指定多媒体资源中抽取的目标关键帧对应的目标时间范围,并且基于目标时间范围生成地址查询请求,进而将地址查询请求发送至录制节点,以利用地址查询请求使录制节点反馈至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并在接收到录制节点反馈的目标播放地址之后,基于目标播放地址,获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种多媒体资源获取的架构图;
图2是根据一示例性实施例示出的另一种多媒体资源获取的架构图;
图3是根据一示例性实施例示出的又一种多媒体资源获取的架构图;
图4是根据一示例性实施例示出的一种多媒体资源获取方法的流程图;
图5是根据一示例性实施例示出的另一种多媒体资源获取方法的流程图;
图6是根据一示例性实施例示出的一种查询目标资源信息方法的流程图;
图7是根据一示例性实施例示出的一种多媒体资源获取装置的框图;
图8是根据一示例性实施例示出的另一种多媒体资源获取装置的框图;
图9是根据一示例性实施例示出的一种多媒体资源获取设备的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开所提供的多媒体资源获取方法可以应用于如图1至图3所示的架构中,具体结合图1和图2进行详细说明。
图1是根据一示例性实施例示出的一种多媒体资源获取的架构图。
如图1所示,该架构图中可以包括网络视频直播平台的服务端的直播节点110、录制节点120和审核节点130。
在一些实施例中,直播节点110、录制节点120和审核节点130可以分别为服务器。直播节点110、录制节点120和审核节点130可以分别设置于服务端的不同的服务器中,直播节点110、录制节点120和审核节点130中的至少两个也可以设置于服务端的相同的服务器中,在此不做限定。
在另一些实施例中,直播节点110和录制节点120可以分别为服务器,审核节点130可以为电子设备,直播节点110和录制节点120可以分别设置于服务端的不同的服务器中,直播节点110和录制节点120也可以设置于服务端的相同的服务器中,在此不做限定。
其中,服务器可以是云服务器或者服务器集群等具有存储以及计算功能的设备。电子设备可以是手机、计算机、平板设备、健身设备、个人数字助理等具有通讯功能的设备。
基于上述的架构,直播节点110可以为用户提供直播服务。录制节点120可以在直播节点110为用户提供直播服务的过程中,拉取直播节点110中缓存的目标多媒体资源,即直播数据流,并按照一定的频率对直播数据流进行截帧,得到直播关键帧,然后将直播关键帧发送给审核节点130。审核节点130可以接收录制节点120发送的直播关键帧。
为了更准确地基于直播数据识别直播内容和主播意图,审核节点130在接收到直播关键帧之后,如果想要进一步准确识别直播关键帧中的目标关键帧附近的直播内容和主播意图,可以确定目标关键帧对应的目标时间范围,根据目标时间范围,生成用于获取至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址的地址查询请求,然后将地址查询请求发送至录制节点120,其中,目标关键帧可以为从指定多媒体资源中抽取的一个视频帧。录制节点120接收到审核节点130发送的地址查询请求后,可以响应于地址查询请求,解析地址查询请求所携带的目标时间范围,然后根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址,并将目标播放地址发送至审核节点130。审核节点130在接收到录制节点120反馈的目标播放地址之后,可以基于目标播放地址,获取指定多媒体资源,以基于指定多媒体资源对目标关键帧附近的直播内容和主播意图进行准确地识别。
在一些实施例中,多媒体资源可以为视频片段数据。
由此,上述的架构可以避免仅基于直播关键帧识别直播内容和主播意图时,只能得到直播关键帧对应的时间下的静态直播内容,导致识别得到的直播内容和主播意图相对片面,无法准确地识别直播内容和主播意图的问题。
为了提高录制节点的数据处理效率,可以将多媒体资源存储于录制节点以外的数据存储节点内,下面通过图2进行进一步说明。
图2是根据一示例性实施例示出的另一种多媒体资源获取的架构图。
如图2所示,该架构图中可以包括网络视频直播平台的服务端的直播节点110、录制节点120、审核节点130和第一数据存储节点140。
在一些实施例中,直播节点110、录制节点120、审核节点130和第一数据存储节点140可以分别为服务器。直播节点110、录制节点120、审核节点130和第一数据存储节点140可以分别设置于服务端的不同的服务器中,直播节点110、录制节点120、审核节点130和第一数据存储节点140中的至少两个也可以设置于服务端的相同的服务器中,在此不做限定。
在另一些实施例中,直播节点110、录制节点120和第一数据存储节点140可以分别为服务器,审核节点130可以为电子设备,直播节点110、录制节点120和第一数据存储节点140可以分别设置于服务端的不同的服务器中,直播节点110、录制节点120和第一数据存储节点140中的至少两个也可以设置于服务端的相同的服务器中,在此不做限定。
其中,服务器可以是云服务器或者服务器集群等具有存储以及计算功能的设备。电子设备可以是手机、计算机、平板设备、健身设备、个人数字助理等具有通讯功能的设备。
在一些实施例中,第一数据存储节点140还可以由内容分发网络(ContentDelivery Network,CDN)实现,在此不做限制。
基于上述的架构,直播节点110可以为用户提供直播服务。录制节点120可以在直播节点110为用户提供直播服务的过程中,拉取直播节点110中的缓存的目标多媒体资源,即直播数据流,并按照一定的频率对直播数据流进行截帧,得到直播关键帧,然后将直播关键帧发送给审核节点130。审核节点130可以接收录制节点120发送的直播关键帧。录制节点120还可以按照一定的频率对直播数据流进行分段录制,得到多媒体资源,然后将多媒体资源发送给第一数据存储节点140。第一数据存储节点140可以存储录制节点120发送的多媒体资源。
为了更准确地基于直播数据识别直播内容和主播意图,审核节点130在接收到直播关键帧之后,如果想要进一步准确识别直播关键帧中的目标关键帧附近的直播内容和主播意图,可以确定目标关键帧对应的目标时间范围,根据目标时间范围,生成用于获取至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址的地址查询请求,然后将地址查询请求发送至录制节点120,其中,目标关键帧可以为从指定多媒体资源中抽取的一个视频帧。录制节点120接收到审核节点130发送的地址查询请求后,可以响应于地址查询请求,解析地址查询请求所携带的目标时间范围,然后根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址,并将目标播放地址发送至审核节点130。审核节点130在接收到录制节点120反馈的目标播放地址之后,可以基于目标播放地址,拉取存储于第一数据存储节点140中的指定多媒体资源,以基于指定多媒体资源对目标关键帧附近的直播内容和主播意图进行准确地识别。
在一些实施例中,多媒体资源可以为视频片段数据。
为了进一步提高录制节点的数据处理效率,可以将多媒体资源的资源信息和播放时间段存储于录制节点以外的数据存储节点内,下面通过图3进行进一步说明。
图3是根据一示例性实施例示出的又一种多媒体资源获取的架构图。
如图3所示,该架构图中可以包括网络视频直播平台的服务端的直播节点110、录制节点120、审核节点130、第一数据存储节点140和第二数据存储节点150。
在一些实施例中,直播节点110、录制节点120、审核节点130、第一数据存储节点140和第二数据存储节点150可以分别为服务器。直播节点110、录制节点120、审核节点130、第一数据存储节点140和第二数据存储节点150可以分别设置于服务端的不同的服务器中,直播节点110、录制节点120、审核节点130、第一数据存储节点140和第二数据存储节点150中的至少两个也可以设置于服务端的相同的服务器中,在此不做限定。
在另一些实施例中,直播节点110、录制节点120、第一数据存储节点140和第二数据存储节点150可以分别为服务器,审核节点130可以为电子设备,直播节点110、录制节点120、第一数据存储节点140和第二数据存储节点150可以分别设置于服务端的不同的服务器中,直播节点110、录制节点120、第一数据存储节点140和第二数据存储节点150中的至少两个也可以设置于服务端的相同的服务器中,在此不做限定。
其中,服务器可以是云服务器或者服务器集群等具有存储以及计算功能的设备。电子设备可以是手机、计算机、平板设备、健身设备、个人数字助理等具有通讯功能的设备。
在一些实施例中,第一数据存储节点140还可以由CDN实现,在此不做限制。
基于上述的架构,直播节点110可以为用户提供直播服务。录制节点120可以在直播节点110为用户提供直播服务的过程中,拉取直播节点110中的缓存的目标多媒体资源,即直播数据流,并按照一定的频率对直播数据流进行截帧,得到直播关键帧,然后将直播关键帧发送给审核节点130。审核节点130可以接收录制节点120发送的直播关键帧。录制节点120还可以按照一定的频率对直播数据流进行分段录制,得到多媒体资源,然后将多媒体资源发送给第一数据存储节点140,并且将多媒体资源的资源信息和播放时间段发送给第二数据存储节点150。第一数据存储节点140可以存储录制节点120发送的多媒体资源。第二数据存储节点150可以将录制节点120发送的多媒体资源的资源信息和播放时间段关联存储。
为了更准确地基于直播数据识别直播内容和主播意图,审核节点130在接收到直播关键帧之后,如果想要进一步准确识别直播关键帧中的目标关键帧附近的直播内容和主播意图,可以确定目标关键帧对应的目标时间范围,根据目标时间范围,生成用于获取至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址的地址查询请求,然后将地址查询请求发送至录制节点120,其中,目标关键帧可以为从指定多媒体资源中抽取的一个视频帧。录制节点120接收到审核节点130发送的地址查询请求后,可以响应于地址查询请求,解析地址查询请求所携带的目标时间范围,然后根据目标时间范围,生成用于获取指定多媒体资源的目标资源信息的数据查询请求,并将数据查询请求发送至第二数据存储节点150。第二数据存储节点150在接收到录制节点120发送的数据查询请求后,可以响应于数据查询请求,解析数据查询请求所携带的目标时间范围,并且在所存储的目标多媒体资源对应的多个多媒体资源的播放时间段中,查找至少部分播放时间段位于目标时间范围内的目标播放时间段,然后获取与目标播放时间段关联存储的指定多媒体资源的目标资源信息,然后将目标资源信息反馈给录制节点120。录制节点120在接收到第二数据存储节点150反馈的目标资源信息后,可以在多个播放地址中查询目标资源信息对应的目标播放地址,并将目标播放地址发送至审核节点130。审核节点130在接收到录制节点120反馈的目标播放地址之后,可以基于目标播放地址,拉取存储于第一数据存储节点140中的指定多媒体资源,以基于指定多媒体资源对目标关键帧附近的直播内容和主播意图进行准确地识别。
在一些实施例中,多媒体资源可以为视频片段数据。
综上所述,上述的架构能够在审核节点130接收到直播关键帧之后,在想要进一步准确识别直播关键帧中的目标关键帧附近的直播内容和主播意图的情况下,获取至少部分播放时间段位于目标关键帧对应的目标时间范围内的指定多媒体资源,使得可以通过指定多媒体资源展示目标关键帧对应的目标时间范围内的直播过程,因此,可以基于指定多媒体资源对目标关键帧附近的直播内容和主播意图进行准确地识别。
根据上述架构,下面结合图4-图6对本公开实施例提供的指定多媒体资源获取方法进行详细说明。
图4是根据一示例性实施例示出的一种多媒体资源获取方法的流程图。
在本公开一些实施例中,图4所示的方法可以由图1至图3中所示的审核节点130执行,也可以由审核节点130中的功能模块执行,在此不作限定。
如图4所示,该多媒体资源获取方法可以包括以下步骤。
在S410中,当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧。
其中,录制节点可以为图1至图3中所示的录制节点120。
在本公开一些实施例中,审核节点可以连续接收录制节点发送的目标直播的直播关键帧,并且在每接收到一个直播关键帧后,即将该直播关键帧作为目标关键帧,然后确定该目标关键帧对应的目标时间范围。
在本公开另一些实施例中,审核节点可以连续接收录制节点发送的目标直播的直播关键帧,并且在接收到直播关键帧之后,判定该直播关键帧是否为需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧,如果该直播关键帧是目标关键帧,则可以进一步确定该目标关键帧对应的目标时间范围,后续将对此进行详细说明。
在本公开实施例中,目标关键帧为从指定多媒体资源中抽取的任意一个直播视频帧,指定多媒体资源属于目标直播对应的目标多媒体资源。
在本公开实施例中,审核节点可以基于预设确定方式,确定目标关键帧对应的目标时间范围。
在一些实施例中,预设确定方式可以为基于目标关键帧对应的目标播放时间和预设时长,确定目标关键帧对应的目标时间范围。
其中,S410可以具体包括如下步骤。
获取目标关键帧对应的播放时间。
以目标关键帧的播放时间为目标时间范围的时间中点,按照预设时长,确定目标时间范围。
具体地,审核节点所接收的直播关键帧可以携带有该直播关键帧的播放时间,当审核节点将直播关键帧作为目标关键帧后,可以获取目标关键帧携带的播放时间,然后,将目标关键帧对应的播放时间作为目标时间范围的中点,将目标播放时间减去预设时长的一半,得到目标时间范围的起始点,将目标播放时间加上预设时长的一半,得到目标时间范围的结束点,进而根据起始点和结束点,确定目标时间范围,以获取到包含目标播放时间的足够长度的目标时间范围,使得所获取的指定多媒体资源可以体现更完整的直播内容和主播意图。
以目标播放时间为目标直播的第3分20秒、预设时长为30秒为例,可以确定目标时间范围为目标直播的第3分05秒至第3分35秒。
在S420中,根据目标时间范围,生成地址查询请求。
其中,地址查询请求携带有目标时间范围。
在本公开一些实施例中,直播关键帧还可以携带有该直播关键帧所属的目标直播的目标直播标识,审核节点还可以获取目标关键帧携带的目标直播标识,并且根据目标时间范围和目标直播标识,生成地址查询请求。
在S430中,将地址查询请求发送至录制节点。
在本公开一些实施例中,在录制节点仅存储有目标直播对应的多媒体资源的播放地址的情况下,目标播放地址可以仅携带有目标时间范围。
其中,地址查询请求可以携带有目标时间范围,地址查询请求可以用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内。
具体地,在审核节点将地址查询请求发送至录制节点之后,录制节点可以响应于该地址查询请求,查询至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并且将查询到的目标播放地址反馈给审核节点。
在本公开另一些实施例中,在录制节点存储有多个直播对应的多媒体资源的播放地址的情况下,目标播放地址可以携带有目标时间范围和目标直播标识。
其中,地址查询请求可以携带有目标时间范围和目标直播标识,地址查询请求可以用于使录制节点在目标直播对应的多个播放地址中,查询指定多媒体资源的目标播放地址,并且反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内。
具体地,在审核节点将地址查询请求发送至录制节点之后,录制节点可以响应于该地址查询请求,根据目标直播标识查询目标直播对应的多个播放地址,并且在目标直播对应的多个播放地址中,查询至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并且将查询到的目标播放地址反馈给审核节点。
其中,录制节点响应于地址查询请求向审核节点反馈目标播放地址的方法将在后续详细说明。
在S440中,接收录制节点反馈的目标播放地址。
在S450中,基于目标播放地址,获取指定多媒体资源。
在本公开一些实施例中,指定多媒体资源可以存储于第一数据存储节点中,其中,第一数据存储节点可以为图2和图3中所示的第一数据存储节点140。相应地,S450可以具体为根据目标播放地址,拉取存储于第一数据存储节点中的指定多媒体资源。
具体地,审核节点可以根据目标播放地址生成直播片段拉取请求,使直播片段拉取请求携带有目标播放地址,然后向第一数据存储节点发送直播片段拉取请求。第一数据存储节点接收到直播片段拉取请求后,可以响应于直播片段拉取请求,解析直播片段拉取请求中携带的目标播放地址,然后将目标播放地址对应的指定多媒体资源反馈给审核节点。
在本公开另一些实施例中,指定多媒体资源可以存储于录制节点中,相应地,S450可以具体为根据目标播放地址,拉取存储于录制节点中的指定多媒体资源。
在本公开实施例中,当接收到录制节点发送的目标关键帧时,可以确定从指定多媒体资源中抽取的目标关键帧对应的目标时间范围,并且基于目标时间范围生成地址查询请求,进而将地址查询请求发送至录制节点,以利用地址查询请求使录制节点反馈至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并在接收到录制节点反馈的目标播放地址之后,基于目标播放地址,获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
在本公开另一种实现方式中,为了提高审核效率,审核节点可以在接收到直播关键帧之后,判定该直播关键帧是否为需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧,如果该直播关键帧是目标关键帧,则进一步确定该目标关键帧对应的目标时间范围。
在本公开一些实施例中,在审核节点为服务器的情况下,审核节点可以将直播关键帧输入预设的内容识别模型,得到内容识别结果,该内容识别结果为直播关键帧对应的用于表征直播内容和主播意图的标记值,该标记值可以表征该直播关键帧是否涉及非正常直播内容。如果内容识别结果大于或等于预设的阈值,则说明该直播关键帧可能涉及非正常直播内容,可以确定直播关键帧为需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧;如果内容识别结果小于预设的阈值,则说明该直播关键帧不涉及非正常直播内容,可以确定直播关键帧不是需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧。
在本公开另一些实施例中,在审核节点为电子设备的情况下,审核节点可以通过人工方式判定审核节点接收的直播关键帧是否为需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧。
在这些实施例中,在S410之前,该多媒体资源获取方法还可以包括如下步骤。
当接收到录制节点发送的至少一个直播关键帧时,显示至少一个直播关键帧,直播关键帧为从指定多媒体资源所属的目标多媒体资源中抽取的一个视频帧。
接收目标对象的目标输入;
响应于目标输入,将目标输入所选择的直播关键帧作为目标关键帧。
具体地,审核节点可以依次接收由录制节点发送的从指定多媒体资源所属的目标多媒体资源中抽取的多个直播关键帧,并且依次显示接收到的每个直播关键帧,目标对象可以为用户,例如审核人员,审核人员可以依次根据直播关键帧识别直播内容和主播意图,并且基于所识别的直播内容和主播意图进行直播标注。当审核人员认为某个直播关键帧可能涉及非正常直播内容时,可以输入目标输入。其中,目标输入可以用于选择目标关键帧,进而使审核节点可以响应于目标输入,确定目标输入所选择的直播关键帧,进而将目标输入所选择的直播关键帧作为目标关键帧,并确定目标关键帧对应的目标时间范围。
在本公开实施例中,目标输入可以为对多个直播关键帧中的目标关键帧的点击输入、长按输入、双击输入等,目标输入也可以为对目标关键帧对应的目标控件的点击输入、长按输入、双击输入等,在此不做限制,只要是能够选择目标关键帧并且能够触发审核节点确定目标时间范围即可。其中,目标控件可以为目标关键帧对应的目标按钮,例如“选择”按钮或“确定”按钮。
由此,审核节点可以仅在直播关键帧为需要进一步准确识别关键帧附近的直播内容和主播意图的目标关键帧的情况下,才确定目标关键帧对应的目标时间范围,进而获取指定多媒体资源,可以减少审核节点的数据处理量,提高数据处理效率。
在本公开另一种实现方式中,在审核节点为电子设备的情况下,在S450之后,该多媒体资源获取方法还可以包括播放指定多媒体资源。
在本公开一些实施例中,在指定多媒体资源的数量为一个或多个(两个或两个以上)的情况下,可以直接依次播放指定多媒体资源。
在本公开另一些实施例中,在指定多媒体资源的数量为多个的情况下,其中,多个指两个或两个以上,在S450之后,该多媒体资源获取方法还可以包括如下步骤。
对多个指定多媒体资源进行合成,得到合成多媒体资源;
播放合成多媒体资源。
具体地,审核节点可以按照指定多媒体资源对应的目标播放时间段的时间先后顺序排列多个指定多媒体资源,并且将多个指定多媒体资源进行拼接,得到合成多媒体资源,然后播放合成多媒体资源,进而能够对多个指定多媒体资源进行连续播放,提高多个指定多媒体资源的播放效果,并且提高审核人员的观看体验。
图5是根据一示例性实施例示出的另一种多媒体资源获取方法的流程图。
在本公开一些实施例中,图5所示的方法可以由图1至图3中所示的录制节点120执行,也可以由录制节点120中的功能模块执行,在此不作限定。
如图5所示,该多媒体资源获取方法可以包括以下步骤。
在S510中,接收审核节点发送的地址查询请求。
在本公开实施例中,地址查询请求由审核节点生成,其中,审核节点可以为图1至图3中所示的审核节点130。审核节点生成地址查询请求的方法已在上文中介绍,在此不做赘述。
在S520中,响应于地址查询请求,对地址查询请求进行解析,得到地址查询请求信息,地址查询请求信息包括目标时间范围。
其中,目标时间范围可以根据目标关键帧确定,目标关键帧可以为从指定多媒体资源中抽取的一个视频帧,指定多媒体资源的至少部分播放时间段可以位于目标时间范围内,在此不做赘述。因此,目标时间范围可以用于录制节点查询指定多媒体资源。
具体地,录制节点在接收到地址查询请求之后,可以对地址查询请求进行请求解析,得到地址查询请求信息。
在本公开另一些实施例中,地址查询请求信息还可以包括目标直播的目标直播标识,目标直播标识用于使录制节点确定所要查询的目标直播,进而在目标直播对应的多媒体资源的播放地址中,查询指定多媒体资源的目标播放地址。
在S530中,根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址。
在本公开一些实施例中,在录制节点仅存储有目标直播对应的多媒体资源的播放地址的情况下,可以直接根据目标时间范围,在多个播放地址中,查询指定多媒体资源的目标播放地址。
在本公开另一些实施例中,在录制节点存储有多个直播对应的多媒体资源的播放地址的情况下,每个播放地址分别对应一个直播标识,录制节点可以首先根据目标直播标识查找到目标直播对应的多媒体资源的播放地址,然后根据目标时间范围,在多个标直播对应的多媒体资源的播放地址中,查询指定多媒体资源的目标播放地址。
在本公开一些实施例中,在录制节点以外的第二数据存储节点中存储有目标直播对应的多媒体资源的资源信息和播放时间段的情况下,录制节点可以根据目标时间范围通过第二数据存储节点查询指定多媒体资源的目标资源信息,进而通过目标资源信息查询指定多媒体资源的目标播放地址,后续将对此进行详细说明。
其中,第二数据存储节点可以为图3中所示的第二数据存储节点150。第二数据存储节点可以与上述的第一数据存储节点为相同的数据存储节点,也可以为不同的数据存储节点,在此不做限制。
在本公开另一些实施例中,在录制节点本地存储有目标视频的多媒体资源的资源信息和播放时间段的情况下,录制节点可以根据目标时间范围在本地查询指定多媒体资源的目标资源信息,进而通过目标资源信息查询指定多媒体资源的目标播放地址。其中,录制节点在本地查询目标资源信息的方法与第二数据存储节点查询目标资源信息的方法相似。
在S540中,将目标播放地址发送至审核节点,以使审核节点基于目标播放地址,获取指定多媒体资源。
在本公开实施例中,录制节点所查询的目标播放地址的数量为一个或多个,在目标播放地址的数量为多个的情况下,录制节点将所查询的全部目标播放地址发送至审核节点。
在本公开实施例中,可以解析审核节点发送的地址查询请求所携带的根据从指定多媒体资源中抽取的目标关键帧所确定的目标时间范围,并且根据目标时间范围,在多个播放地址中查询至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,然后将目标播放地址发送给审核节点,以使审核节点基于目标播放地址获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以使审核节点基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
在本公开另一种实现方式中,可以通过录制节点从目标直播的目标多媒体资源即目标直播数据流中截取直播关键帧,具体地,在S510之前,该多媒体资源获取方法还可以包括以下步骤。
拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;
按照预设截帧时间间隔从目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个直播关键帧对应的播放时间;
将多个直播关键帧和每直播关键帧的播放时间发送至所述核节点。
录制节点可以基于目标直播对应的目标多媒体资源获取地址,拉取缓存于直播节点中的目标多媒体资源。即录制节点可以根据目标多媒体资源获取地址生成目标多媒体资源拉取请求,使目标多媒体资源拉取请求携带有目标多媒体资源获取地址,然后,向直播节点发送目标多媒体资源拉取请求,直播节点接收到目标多媒体资源拉取请求之后,可以响应于目标多媒体资源拉取请求,解析目标多媒体资源拉取请求中携带的目标多媒体资源获取地址,并将目标多媒体资源获取地址对应的目标多媒体资源反馈给录制节点。
录制节点还可以按照预设截帧时间间隔对目标多媒体资源进行截帧,以按照预设截帧时间间隔从所述目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个直播关键帧对应的播放时间。其中,预设截帧时间间隔可以根据需要进行设置,例如10s,在此不做限制。
录制节点还可以将多个直播关键帧和每个直播关键帧的播放时间发送至审核节点,以使审核节点显示直播关键帧,进而可以向审核人员展示直播关键帧的内容。
在本公开一些实施例中,录制节点在得到多个直播关键帧和每个直播关键帧对应的播放时间之后,还可以生成每个直播关键帧的关键帧信息,然后存储每个直播关键帧对应的关键帧信息和播放时间。其中,关键帧信息包括直播关键帧所属的目标直播的目标直播标识和直播关键帧的关键帧标识。
在本公开另一些实施例中,在得到多个直播关键帧和每个直播关键帧对应的播放时间之后,录制节点还可以存储多个直播关键帧,使每个直播关键帧具有各自的获取地址。
在本公开另一些实施例中,在得到多个直播关键帧和每个直播关键帧对应的播放时间之后,该多媒体资源获取方法还可以包括以下步骤。
将每个直播关键帧的关键帧信息和播放时间发送至第二数据存储节点;
将多个直播关键帧发送至第一数据存储节点,以使第一数据存储节点反馈每个直播关键帧的获取地址;
接收第一数据存储节点反馈的直播关键帧的获取地址。
具体地,录制节点在得到多个直播关键帧和每个直播关键帧对应的播放时间之后,还可以生成每个直播关键帧的关键帧信息,然后,将每个直播关键帧的关键帧信息和播放时间发送至第二数据存储节点,使第二数据存储节点可以将每个直播关键帧对应的关键帧信息和播放时间关联存储。另外,录制节点还可以将多个直播关键帧发送至第一数据存储节点,以使第一数据存储节点存储多个直播关键帧,使每个直播关键帧具有各自的获取地址,然后向录制节点反馈每个直播关键帧的获取地址。录制节点可以将接收到的直播关键帧的获取地址和关键帧信息关联存储。
由此,本公开实施例可以对所截取的直播关键帧进行存储,方便审核人员通过获取地址随时调取直播关键帧。
在本公开另一些实施方式中,为了提高录制节点的数据处理效率,可以在录制节点以外的第二数据存储节点中存储有目标直播的多媒体资源的资源信息和播放时间段,相应地,在S530之前,该多媒体资源获取方法还可以包括以下步骤。
根据目标时间范围,生成数据查询请求;
将数据查询请求发送至第二数据存储节点,数据查询请求用于使第二数据存储节点反馈指定多媒体资源的目标资源信息;
接收第二数据存储节点反馈的目标资源信息;
在这些实施例中,S530可以具体包括在多个播放地址中,查询目标资源信息对应的目标播放地址。
在本公开一些实施例中,在第二数据存储节点中仅存储有目标直播对应的多媒体资源的资源信息和播放时间段的情况下,录制节点可以直接根据目标时间范围,生成数据查询请求,使生成数据查询请求携带有目标时间范围,然后将数据查询请求发送至第二数据存储节点,以使第二数据存储节点在目标直播对应的资源信息中查询目标资源信息,并向录制节点反馈目标资源信息。
在本公开另一些实施例中,在第二数据存储节点中存储有多个直播对应的多媒体资源的资源信息和播放时间段的情况下,录制节点可以直接根据目标时间范围和目标直播标识,生成数据查询请求,使生成数据查询请求携带有目标时间范围和目标直播标识,然后将数据查询请求发送至第二数据存储节点,以使第二数据存储节点基于目标直播标识,在多个资源信息中查询目标直播对应的资源信息和播放时间段,进而在目标直播对应的资源信息中查询目标资源信息,并向录制节点反馈目标资源信息。
在本公开实施例中,多媒体资源的资源信息和播放时间段可以关联存储于第二数据存储节点中,以减少录制节点的数据存储量并且提高录制节点的数据处理效率。此时,可以由第二数据存储节点查询目标资源信息。
图6是根据一示例性实施例示出的一种查询目标资源信息方法的流程图。
如图6所示,第二数据存储节点查询目标资源信息的过程包括如下步骤。
在S610中,获取多个播放时间段。
在本公开一些实施例中,在第二数据存储节点中仅存放有目标直播对应的多媒体资源的资源信息和播放时间段的情况下,第二数据存储节点可以直接获取目标多媒体资源对应的多个多媒体资源的播放时间段。
在本公开另一些实施例中,在第二数据存储节点中存放有多个直播对应的多媒体资源的资源信息和播放时间段的情况下,第二数据存储节点可以直接获取目标直播标识,然后获取与目标直播标识关联存储的多个多媒体资源的播放时间段,从而得到目标直播对应的目标多媒体资源中的多媒体资源的播放时间段。
在S620中,在多个播放时间段中,查询目标播放时间段。其中,目标播放时间段的至少部分位于目标时间范围内。
在本公开实施例中,第二数据存储节点可以在多个播放时间段中,查询至少部分播放时间段位于目标时间范围内的目标播放时间段。
在S630中,获取每个目标播放时间段对应的目标资源信息。
在本公开实施例中,第二数据存储节点可以在查询到目标播放时间段之后,获取每个目标播放时间段对应的目标资源信息。
在本公开另一种实现方式中,可以通过录制节点从目标直播的目标多媒体资源中录制多媒体资源,具体地,在S610之前,该多媒体资源获取方法还可以包括以下步骤。
拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源;
按照预设录制时间间隔对目标多媒体资源进行录制,得到多个多媒体资源和每个多媒体资源的播放时间段;
将每个多媒体资源的资源信息和播放时间段发送至第二数据存储节点。
录制节点可以基于目标直播对应的目标多媒体资源获取地址,拉取缓存于直播节点中的目标多媒体资源,上文中已经对此进行描述,在此不做赘述。
录制节点还可以按照预设录制时间间隔对目标多媒体资源进行分段录制,得到多个多媒体资源和每个多媒体资源对应的播放时间段。其中,预设录制时间间隔可以根据需要进行设置,例如12s,在此不做限制。
录制节点在得到多个多媒体资源和每个多媒体资源对应的播放时间段之后,还可以生成每个多媒体资源的资源信息,然后,将每个多媒体资源的资源信息和播放时间段分别发送至第二数据存储节点,使第二数据存储节点可以将每个多媒体资源的资源信息和播放时间段关联存储。其中,资源信息可以包括多媒体资源所属的目标直播的目标直播标识和多媒体资源的资源标识。
在本公开另一些实施例中,在得到多个多媒体资源和每个多媒体资源对应的播放时间段之后,该多媒体资源获取方法还可以包括以下步骤。
将多个多媒体资源发送至第一数据存储节点,以使第一数据存储节点反馈每个多媒体资源的播放地址。
接收第一数据存储节点反馈的多媒体资源的播放地址。
具体地,录制节点还可以将多个多媒体资源发送至第一数据存储节点,以使第一数据存储节点存储多个多媒体资源,使每个多媒体资源具有各自的播放地址,然后向录制节点反馈每个多媒体资源的播放地址。录制节点可以将接收到的多媒体资源的播放地址和资源信息关联存储。
在本公开又一些实施例中,录制节点还可以在本地存储多个多媒体资源对应的资源信息和播放时间段,或者,在本地存储多个多媒体资源,使每个多媒体资源具有各自的播放地址。
在本公开一些实施例中,目标资源信息可以包括目标直播标识和目标资源标识,录制节点在目标直播对应的多个播放地址中查询指定多媒体资源的目标播放地址的过程可以包括:录制节点在目标直播对应的多个播放地址中,查询与目标资源标识关联存储的目标播放地址。
在本公开又一种实施方式中,录制节点在S630之后、在S640之前,可以基于目标播放地址生成manifest文件,其中,manifest文件内可以包括目标播放地址。相应地,S640可以具体包括将manifest文件发送至审核节点。
可选地,在审核节点为电子设备的情况下,审核节点可以接收录制节点反馈的manifest文件,审核节点在接收到manifest文件之后,可以通过审核节点内的视频播放应用运行manifest文件,以获取目标播放地址对应的指定多媒体资源,然后对多个指定多媒体资源进行合成,得到合成多媒体资源,进而播放合成多媒体资源。
综上所述,本公开实施例可以对直播数据流进行截取和录制,得到直播关键帧和多媒体资源,然后将直播数据流以多媒体资源的方式分片式存储,使得在审核人员基于直播关键帧进行直播标注的过程中,可以按需查询相应的多媒体资源,进而可以播放所关注的直播关键帧附件的直播内容,从而可以帮助审核人员对直播内容和主播意图进行全面的判断。
图7是根据一示例性实施例示出的一种多媒体资源获取装置的框图。
在本公开一些实施例中,图7所示的装置可以设置于图1至图3中所示的审核节点130内。
如图7所示,该多媒体资源获取装置700可以包括第一确定单元710、第一生成单元720、第一发送单元730、第一接收单元740和第一获取单元750。
该第一确定单元710可以被配置为当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧。
该第一生成单元720可以被配置为执行根据目标时间范围,生成地址查询请求。
该第一发送单元730可以被配置为执行将地址查询请求发送至录制节点,地址查询请求用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内。
该第一接收单元740可以被配置为执行接收录制节点反馈的目标播放地址。
该第一获取单元750可以被配置为执行基于目标播放地址,获取指定多媒体资源。
在本公开实施例中,当该多媒体资源获取装置700接收到录制节点发送的目标关键帧时,可以确定从指定多媒体资源中抽取的目标关键帧对应的目标时间范围,并且基于目标时间范围生成地址查询请求,进而将地址查询请求发送至录制节点,以利用地址查询请求使录制节点反馈至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并在接收到录制节点反馈的目标播放地址之后,基于目标播放地址,获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
在本公开一些实施例中,该多媒体资源获取装置700还可以包括第一显示单元、第二接收单元和第一处理单元。
该第一显示单元可以被配置为当接收到录制节点发送的至少一个直播关键帧时,显示至少一个直播关键帧,直播关键帧为从指定多媒体资源所属的目标多媒体资源中抽取的一个视频帧。
该第二接收单元可以被配置为执行接收目标对象的目标输入。
该第一处理单元可以被配置为执行响应于目标输入,将目标输入所选择的直播关键帧作为目标关键帧。
在本公开一些实施例中,该第一确定单元710可以包括第一获取子单元和第一确定子单元。
该第一获取子单元可以被配置为执行获取目标关键帧的播放时间。
该第一确定子单元可以被配置为执行以目标关键帧的播放时间为目标时间范围的时间中点,按照预设时长,确定目标时间范围。
在本公开一些实施例中,第一获取单元750还可以被进一步配置为执行根据目标播放地址,拉取存储于第一数据存储节点中的指定多媒体资源。
在本公开一些实施例中,指定多媒体资源的数量为多个;
相应地,该多媒体资源获取装置700还可以包括第一合成单元和第一播放单元。
该第一合成单元可以被配置为执行对多个指定多媒体资源进行合成,得到合成多媒体资源。
该第一播放单元可以被配置为执行播放合成多媒体资源。
关于上述实施例中的装置,其中各个单元执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图8是根据一示例性实施例示出的另一种多媒体资源获取装置的框图。
在本公开一些实施例中,图8所示的装置可以设置于图1至图3中所示的录制节点120内。
如图8所示,该多媒体资源获取装置800可以包括第三接收单元810、第一解析单元820、第一查询单元830和第二发送单元840。
该第三接收单元810可以被配置为执行接收审核节点发送的地址查询请求。
该第一解析单元820可以被配置为执行响应于地址查询请求,对地址查询请求进行解析,得到地址查询请求信息;其中,地址查询请求信息包括目标时间范围,目标时间范围根据目标关键帧确定,目标关键帧为从指定多媒体资源中抽取的一个视频帧,指定多媒体资源的至少部分播放时间段位于目标时间范围内。
该第一查询单元830可以被配置为执行根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址。
该第二发送单元840可以被配置为执行将目标播放地址发送至审核节点,以使审核节点基于目标播放地址,获取指定多媒体资源。
在本公开实施例中,该多媒体资源获取装置800可以解析审核节点发送的地址查询请求所携带的根据从指定多媒体资源中抽取的目标关键帧所确定的目标时间范围,并且根据目标时间范围,在多个播放地址中查询至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,然后将目标播放地址发送给审核节点,以使审核节点基于目标播放地址获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以使审核节点基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
在本公开一些实施例中,该多媒体资源获取装置800还可以包括第一拉取单元、第二处理单元和第三发送单元。
该第一拉取单元可以被配置为执行拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源。
该第二处理单元可以被配置为执行按照预设截帧时间间隔从目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个直播关键帧对应的播放时间。
该第三发送单元可以被配置为执行将多个直播关键帧和每个直播关键帧的播放时间发送至审核节点。
在本公开一些实施例中,该多媒体资源获取装置800还可以包括第四发送单元、第五发送单元和第四接收单元。
该第四发送单元可以被配置为执行将每个直播关键帧的关键帧信息和播放时间发送至第二数据存储节点。
该第五发送单元可以被配置为执行将多个直播关键帧发送至第一数据存储节点,以使第一数据存储节点反馈每个直播关键帧的获取地址。
该第四接收单元可以被配置为执行接收第一数据存储节点反馈的直播关键帧的获取地址。
在本公开一些实施例中,该多媒体资源获取装置800还可以包括第二生成单元、第六发送单元和第五接收单元。
该第二生成单元可以被配置为执行根据目标时间范围,生成数据查询请求。
该第六发送单元可以被配置为执行将数据查询请求发送至第二数据存储节点,数据查询请求用于使第二数据存储节点反馈指定多媒体资源的目标资源信息。
该第五接收单元可以被配置为执行接收第二数据存储节点反馈的目标资源信息。
相应地,该第一查询单元830还可以被进一步配置为执行在多个播放地址中,查询目标资源信息对应的目标播放地址。
在本公开一些实施例中,该多媒体资源获取装置800还可以包括第二拉取单元、第三处理单元、第七发送单元和第六接收单元。
该第二拉取单元可以被配置为执行拉取缓存于直播节点中的目标多媒体资源,目标多媒体资源包括指定多媒体资源。
该第三处理单元可以被配置为执行按照预设录制时间间隔对目标多媒体资源进行录制,得到多个多媒体资源和每个多媒体资源的播放时间段。
该第七发送单元可以被配置为执行将多个多媒体资源发送至第一数据存储节点,以使第一数据存储节点反馈每个多媒体资源的播放地址。
该第六接收单元可以被配置为执行接收第一数据存储节点反馈的多媒体资源的播放地址。
在本公开一些实施例中,该多媒体资源获取装置800还可以包括第八发送单元。
该第八发送单元可以被配置为执行将每个多媒体资源的资源信息和播放时间段发送至第二数据存储节点。
关于上述实施例中的装置,其中各个单元执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图9是根据一示例性实施例示出的一种多媒体资源获取设备的框图。
如图9所示,该多媒体资源获取设备可以指代本公开实施例中的如图1至图3中所示的录制节点120或审核节点130。该多媒体资源获取设备可以包括处理器910、通信接口920、存储器930和通信总线940,其中,处理器910、通信接口920和存储器930通过通信总线940完成相互间的通信。
该存储器930,用于存放处理器910可执行的指令。
该处理器910,用于执行存储器930上所存放的指令时,实现如下步骤:
当接收到录制节点发送的目标关键帧时,确定目标关键帧对应的目标时间范围,目标关键帧为从指定多媒体资源中抽取的一个视频帧;根据目标时间范围,生成地址查询请求;将地址查询请求发送至录制节点,地址查询请求用于使录制节点反馈指定多媒体资源的目标播放地址,指定多媒体资源的至少部分播放时间段位于目标时间范围内;接收录制节点反馈的目标播放地址;基于目标播放地址,获取指定多媒体资源。
或者,接收审核节点发送的地址查询请求;响应于地址查询请求,对地址查询请求进行解析,得到地址查询请求信息,地址查询请求信息包括目标时间范围,目标时间范围根据目标关键帧确定,目标关键帧为从指定多媒体资源中抽取的一个视频帧,指定多媒体资源的至少部分播放时间段位于目标时间范围内;根据目标时间范围,在多个播放地址中查询指定多媒体资源的目标播放地址;将目标播放地址发送至审核节点,以使审核节点基于目标播放地址,获取指定多媒体资源。
在本公开实施例中,当接收到录制节点发送的目标关键帧时,可以确定从指定多媒体资源中抽取的目标关键帧对应的目标时间范围,并且基于目标时间范围生成地址查询请求,进而将地址查询请求发送至录制节点,以利用地址查询请求使录制节点反馈至少部分播放时间段位于目标时间范围内的指定多媒体资源的目标播放地址,并在接收到录制节点反馈的目标播放地址之后,基于目标播放地址,获取指定多媒体资源,由于指定多媒体资源可以展示目标关键帧对应的目标时间范围内的直播过程,因此,可以基于指定多媒体资源,对目标关键帧附近的直播内容和主播意图进行准确地识别。
在本公开一些实施例中,还提供了一种存储介质,当该存储介质中的指令由多媒体资源获取设备的处理器执行时,使得多媒体资源获取设备能够执行上述任一实施例所述的多媒体资源获取方法。
可选地,该存储介质可以是非临时性计算机可读存储介质,示例性的,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在本公开一些实施例中,还提供了一种计算机程序产品,当计算机程序产品中的指令由多媒体资源获取设备的处理器执行时,使得多媒体资源获取设备能够执行上述任一实施例所述的多媒体资源获取方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种多媒体资源获取方法,其特征在于,包括:
当接收到录制节点发送的目标关键帧时,确定所述目标关键帧对应的目标时间范围,所述目标关键帧为从指定多媒体资源中抽取的一个视频帧;
根据所述目标时间范围,生成地址查询请求;
将所述地址查询请求发送至所述录制节点,所述地址查询请求用于使所述录制节点反馈指定多媒体资源的目标播放地址,所述指定多媒体资源的至少部分播放时间段位于所述目标时间范围内;
接收所述录制节点反馈的所述目标播放地址;
基于所述目标播放地址,获取所述指定多媒体资源。
2.根据权利要求1所述的方法,其特征在于,所述当接收到录制节点发送的目标关键帧时,确定所述目标关键帧对应的目标时间范围之前,所述方法还包括:
当接收到所述录制节点发送的至少一个直播关键帧时,显示所述至少一个直播关键帧,直播关键帧为从所述指定多媒体资源所属的目标多媒体资源中抽取的一个视频帧;
接收目标对象的目标输入;
响应于所述目标输入,将所述目标输入所选择的直播关键帧作为所述目标关键帧;
或者,所述基于所述目标播放地址,获取所述指定多媒体资源,包括:
根据所述目标播放地址,拉取存储于第一数据存储节点中的所述指定多媒体资源。
3.根据权利要求1所述的方法,其特征在于,所述指定多媒体资源的数量为多个;
其中,所述基于所述目标播放地址,获取所述指定多媒体资源之后,所述方法还包括:
对多个所述指定多媒体资源进行合成,得到合成多媒体资源;
播放所述合成多媒体资源。
4.一种多媒体资源获取方法,其特征在于,包括:
接收审核节点发送的地址查询请求;
响应于所述地址查询请求,对所述地址查询请求进行解析,得到地址查询请求信息;其中,所述地址查询请求信息包括目标时间范围,所述目标时间范围根据目标关键帧确定,所述目标关键帧为从指定多媒体资源中抽取的一个视频帧,所述指定多媒体资源的至少部分播放时间段位于所述目标时间范围内;
根据所述目标时间范围,在多个播放地址中查询所述指定多媒体资源的目标播放地址;
将所述目标播放地址发送至所述审核节点,以使所述审核节点基于所述目标播放地址,获取所述指定多媒体资源。
5.根据权利要求4所述的方法,其特征在于,所述接收审核节点发送的地址查询请求之前,所述方法还包括:
拉取缓存于直播节点中的目标多媒体资源,所述目标多媒体资源包括所述指定多媒体资源;
按照预设截帧时间间隔从所述目标多媒体资源中抽取视频帧,得到多个直播关键帧和每个所述直播关键帧对应的播放时间;
将所述多个直播关键帧和每个所述直播关键帧的播放时间发送至所述审核节点。
6.根据权利要求4所述的方法,其特征在于,所述接收审核节点发送的地址查询请求之前,所述方法还包括:
拉取缓存于直播节点中的目标多媒体资源,所述目标多媒体资源包括所述指定多媒体资源;
按照预设录制时间间隔对所述目标多媒体资源进行录制,得到多个多媒体资源和每个所述多媒体资源的播放时间段;
将所述多个多媒体资源发送至第一数据存储节点,以使所述第一数据存储节点反馈每个所述多媒体资源的播放地址;
接收所述第一数据存储节点反馈的所述多媒体资源的播放地址。
7.一种多媒体资源获取装置,其特征在于,包括:
第一确定单元,被配置为当接收到录制节点发送的目标关键帧时,确定所述目标关键帧对应的目标时间范围,所述目标关键帧为从指定多媒体资源中抽取的一个视频帧;
第一生成单元,被配置为执行根据所述目标时间范围,生成地址查询请求;
第一发送单元,被配置为执行将所述地址查询请求发送至所述录制节点,所述地址查询请求用于使所述录制节点反馈指定多媒体资源的目标播放地址,所述指定多媒体资源的至少部分播放时间段位于所述目标时间范围内;
第一接收单元,被配置为执行接收所述录制节点反馈的所述目标播放地址;
第一获取单元,被配置为执行基于所述目标播放地址,获取所述指定多媒体资源。
8.一种多媒体资源获取装置,其特征在于,包括:
第三接收单元,被配置为执行接收审核节点发送的地址查询请求;
第一解析单元,被配置为执行响应于所述地址查询请求,对所述地址查询请求进行解析,得到地址查询请求信息;其中,所述地址查询请求信息包括目标时间范围,所述目标时间范围根据目标关键帧确定,所述目标关键帧为从指定多媒体资源中抽取的一个视频帧,所述指定多媒体资源的至少部分播放时间段位于所述目标时间范围内;
第一查询单元,被配置为执行根据所述目标时间范围,在多个播放地址中查询所述指定多媒体资源的目标播放地址;
第二发送单元,被配置为执行将所述目标播放地址发送至所述审核节点,以使所述审核节点基于所述目标播放地址,获取所述指定多媒体资源。
9.一种多媒体资源获取设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至3中任一项或者如权利要求4至6中任一项所述的多媒体资源获取方法。
10.一种存储介质,当所述存储介质中的指令由多媒体资源获取设备的处理器执行时,使得多媒体资源获取设备能够执行如权利要求1至3中任一项或者如权利要求4至6中任一项所述的多媒体资源获取方法。
CN202010995671.1A 2020-09-21 2020-09-21 多媒体资源获取方法、装置、设备及存储介质 Active CN112218109B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010995671.1A CN112218109B (zh) 2020-09-21 2020-09-21 多媒体资源获取方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010995671.1A CN112218109B (zh) 2020-09-21 2020-09-21 多媒体资源获取方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112218109A true CN112218109A (zh) 2021-01-12
CN112218109B CN112218109B (zh) 2023-03-24

Family

ID=74049780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010995671.1A Active CN112218109B (zh) 2020-09-21 2020-09-21 多媒体资源获取方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112218109B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103716690A (zh) * 2013-12-27 2014-04-09 广州华多网络科技有限公司 多媒体直播举报的方法、终端、服务器及系统
CN106791517A (zh) * 2016-11-21 2017-05-31 广州爱九游信息技术有限公司 直播视频检测方法、装置及服务端
CN109495783A (zh) * 2018-11-02 2019-03-19 平安科技(深圳)有限公司 视频审核方法、装置、电子设备及介质
CN110012302A (zh) * 2018-01-05 2019-07-12 阿里巴巴集团控股有限公司 一种网络直播监测方法及装置、数据处理方法
CN110049343A (zh) * 2018-01-17 2019-07-23 亦非云互联网技术(上海)有限公司 电视视频直播片段分享方法及系统、存储介质及智能终端
CN110324643A (zh) * 2019-04-24 2019-10-11 网宿科技股份有限公司 一种视频录制方法及系统
CN110602544A (zh) * 2019-09-12 2019-12-20 腾讯科技(深圳)有限公司 视频展示方法及装置、电子设备、存储介质
CN110796098A (zh) * 2019-10-31 2020-02-14 广州市网星信息技术有限公司 内容审核模型的训练及审核方法、装置、设备和存储介质
CN111246240A (zh) * 2018-11-29 2020-06-05 杭州海康威视系统技术有限公司 存储媒体数据的方法和装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103716690A (zh) * 2013-12-27 2014-04-09 广州华多网络科技有限公司 多媒体直播举报的方法、终端、服务器及系统
CN106791517A (zh) * 2016-11-21 2017-05-31 广州爱九游信息技术有限公司 直播视频检测方法、装置及服务端
CN110012302A (zh) * 2018-01-05 2019-07-12 阿里巴巴集团控股有限公司 一种网络直播监测方法及装置、数据处理方法
CN110049343A (zh) * 2018-01-17 2019-07-23 亦非云互联网技术(上海)有限公司 电视视频直播片段分享方法及系统、存储介质及智能终端
CN109495783A (zh) * 2018-11-02 2019-03-19 平安科技(深圳)有限公司 视频审核方法、装置、电子设备及介质
CN111246240A (zh) * 2018-11-29 2020-06-05 杭州海康威视系统技术有限公司 存储媒体数据的方法和装置
CN110324643A (zh) * 2019-04-24 2019-10-11 网宿科技股份有限公司 一种视频录制方法及系统
CN110602544A (zh) * 2019-09-12 2019-12-20 腾讯科技(深圳)有限公司 视频展示方法及装置、电子设备、存储介质
CN110796098A (zh) * 2019-10-31 2020-02-14 广州市网星信息技术有限公司 内容审核模型的训练及审核方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN112218109B (zh) 2023-03-24

Similar Documents

Publication Publication Date Title
CN104798346B (zh) 用于补充与广播媒体相关的电子消息的方法和计算系统
CN110024412B (zh) 一种视频直播的方法、装置和系统
CN110198432B (zh) 视频数据的处理方法、装置、计算机可读介质及电子设备
CN100385424C (zh) 信息处理装置和内容信息处理方法
CN109891896A (zh) 用于直播流的锚
EP3876441B1 (en) Method for surveying broadcast ratings and ratings statistics information server
CN110784751B (zh) 信息显示方法及装置
KR102110623B1 (ko) 송신 장치, 정보 처리 방법, 프로그램, 수신 장치 및 애플리케이션 연동 시스템
CN112383790B (zh) 直播的录屏方法、装置、电子设备及存储介质
CN107743271A (zh) 一种弹幕的处理方法、电子设备以及计算机可读存储介质
JP2004185456A (ja) カスタマイズされたコンテンツの配信システム
CN114629929B (zh) 一种日志记录方法、装置及系统
CN110536147B (zh) 直播处理的方法、装置及系统
CN111263183A (zh) 唱歌状态识别方法及装置
CN104065978B (zh) 一种媒体内容定位的方法及系统
KR101181732B1 (ko) 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
CN104429092B (zh) 接收装置、处理信息的方法、程序、发送装置以及应用联动系统
CN112218109B (zh) 多媒体资源获取方法、装置、设备及存储介质
CN112764838A (zh) 目标内容的显示方法和装置及电子设备
JP2006229453A (ja) 番組提示システム
CN105049890B (zh) 一种新广告的推送方法及装置
CN115190339B (zh) 直播信息发送方法、装置、电子设备、存储介质
CN111050132B (zh) 监控设备的监控预览图生成方法、装置、终端设备及存储装置
CN115190339A (zh) 直播信息发送方法、装置、电子设备、存储介质
CN110691256B (zh) 视频关联信息的处理方法、装置,服务器及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant