CN112153469A - 多媒体资源的播放方法、装置、终端、服务器及存储介质 - Google Patents

多媒体资源的播放方法、装置、终端、服务器及存储介质 Download PDF

Info

Publication number
CN112153469A
CN112153469A CN202010927551.8A CN202010927551A CN112153469A CN 112153469 A CN112153469 A CN 112153469A CN 202010927551 A CN202010927551 A CN 202010927551A CN 112153469 A CN112153469 A CN 112153469A
Authority
CN
China
Prior art keywords
resource
multimedia resource
target
segment
target multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010927551.8A
Other languages
English (en)
Inventor
李继
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202010927551.8A priority Critical patent/CN112153469A/zh
Publication of CN112153469A publication Critical patent/CN112153469A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本公开关于一种多媒体资源的播放方法、装置、终端、服务器及存储介质。所述方法包括:根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;响应于多媒体资源播放请求,播放目标多媒体资源;检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。该方法通过避免在播放关键片段的过程中展示多媒体资源的关联信息,使得关联信息的展示时间更具针对性且更加灵活,提高了展示关联信息的智能化程度。

Description

多媒体资源的播放方法、装置、终端、服务器及存储介质
技术领域
本公开涉及互联网技术领域,尤其涉及一种多媒体资源的播放方法、装置、终端、服务器、系统及存储介质。
背景技术
随着多媒体资源播放网站的不断发展,网站为了盈利通常会在用户观看多媒体资源的过程中插入关联信息。
相关技术中,通常通过设置一个固定的间隔时间,在播放多媒体资源的过程中,当检测到间隔时间到达时,进行关联信息的展示;或者通过预先设置推送时间点,当检测推送时间点到达时,进行关联信息的展示。但是,发明人发现,采用相关技术中基于固定时间点展示关联信息方法,存在展示关联信息的时间针对性较差、不够智能化的问题。
发明内容
本公开提供一种多媒体资源的播放方法、装置、终端、服务器、系统及存储介质,以至少解决相关技术中展示关联信息的时间针对性较差、不够智能化的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种多媒体资源的播放方法,包括:
根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;响应于多媒体资源播放请求,播放目标多媒体资源;检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
在其中一个实施例中,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,包括:响应于多媒体资源播放请求,获取目标多媒体资源;对目标多媒体资源进行检测,确定包括目标对象的资源片段;获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在其中一个实施例中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在其中一个实施例中,检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息,包括:获取当前播放的资源内容对应的当前时间信息;当检测当前时间信息未包含在关键片段指示内时,展示目标多媒体资源的关联信息。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源进行划分,生成多个待检测资源片段;对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在其中一个实施例中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在其中一个实施例中,检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息,包括:获取当前播放的资源内容所属的资源片段对应的标识信息;将标识信息与关键片段指示进行比较;当检测当前播放的资源内容对应的标识信息不属于关键片段指示时,展示目标多媒体资源的关联信息。
在其中一个实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,包括:根据多媒体资源播放请求,向服务器发送目标多媒体资源以及关键片段指示的获取请求,触发服务器对目标多媒体资源进行检测,确定包括目标对象的资源片段,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示;接收服务器响应于获取请求返回的目标多媒体资源以及目标多媒体资源的关键片段指示。
在其中一个实施例中,所述方法还包括:响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示。
在其中一个实施例中,所述方法还包括:若检测到目标多媒体资源当前播放的资源内容属于关键片段指示所对应的资源片段,则继续对目标多媒体资源当前播放的资源内容进行检测,直至目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
在其中一个实施例中,展示目标多媒体资源的关联信息,包括:在不属于关键片段指示所对应的资源片段中的随机时间点,展示关联信息。
在其中一个实施例中,展示目标多媒体资源的关联信息,包括:获取展示关联信息的界面区域信息;在界面区域信息对应的界面区域中展示关联信息。
根据本公开实施例的第二方面,提供一种多媒体资源的播放方法,包括:
根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;将目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端,触发客户端播放目标多媒体资源,并在检测目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
在其中一个实施例中,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,包括:响应于多媒体资源播放请求,获取目标多媒体资源;对目标多媒体资源进行检测,确定包括目标对象的资源片段;获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在其中一个实施例中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源进行划分,生成多个待检测资源片段;对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在其中一个实施例中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在其中一个实施例中,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,包括:响应于多媒体资源播放请求,获取目标多媒体资源,以及获取预先生成的目标多媒体资源的关键片段指示,关键片段指示为对目标多媒体资源进行检测,确定包括目标对象的资源片段,根据包括目标对象的资源片段对应的片段指示得到的。
在其中一个实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,所述方法还包括:响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息,预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示;将关联信息发送至客户端。
根据本公开实施例的第三方面,提供一种多媒体资源的播放装置,包括:
获取模块,被配置为执行根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;播放模块,被配置为执行响应于多媒体资源播放请求,播放目标多媒体资源;检测模块,被配置为执行检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段;展示模块,被配置为执行在检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
在其中一个实施例中,获取模块,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源;所述装置还包括:目标对象检测模块,被配置为执行对目标多媒体资源进行检测,确定包括目标对象的资源片段;片段指示确定模块,被配置为执行获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在其中一个实施例中,目标对象检测模块,包括:采样单元,被配置为执行按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;第一目标对象检测单元,被配置为执行对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;资源片段确定单元,被配置为执行获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在其中一个实施例中,片段指示确定模块,被配置为执行获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在其中一个实施例中,获取模块,还被配置为执行获取当前播放的资源内容对应的当前时间信息;展示模块,被配置为执行当检测当前时间信息未包含在关键片段指示内时,展示目标多媒体资源的关联信息。
在其中一个实施例中,目标对象检测模块,包括:划分单元,被配置为执行对目标多媒体资源进行划分,生成多个待检测资源片段;第二目标对象检测单元,被配置为执行对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在其中一个实施例中,片段指示确定模块,被配置为执行获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在其中一个实施例中,获取模块,还被配置为执行获取当前播放的资源内容所属的资源片段对应的标识信息;所述装置还包括:比较模块,被配置为执行将标识信息与关键片段指示进行比较;展示模块,被配置为执行当检测当前播放的资源内容对应的标识信息不属于关键片段指示时,展示目标多媒体资源的关联信息。
在其中一个实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在其中一个实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,获取模块,包括:发送单元,被配置为执行根据多媒体资源播放请求,向服务器发送目标多媒体资源以及关键片段指示的获取请求,触发服务器对目标多媒体资源进行检测,确定包括目标对象的资源片段,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示;接收单元,被配置为执行接收服务器响应于获取请求返回的目标多媒体资源以及目标多媒体资源的关键片段指示。
在其中一个实施例中,获取模块,还被配置为执行响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示。
在其中一个实施例中,检测模块,还被配置为执行若检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,则继续对目标多媒体资源当前播放的资源内容进行检测;展示模块,被配置为执行在检测到目标多媒体资源当前播放的资源内容属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
在其中一个实施例中,展示模块,被配置为执行在不属于关键片段指示所对应的资源片段中的随机时间点,展示关联信息。
在其中一个实施例中,展示模块,被配置为执行获取展示关联信息的界面区域信息;在界面区域信息对应的界面区域中展示关联信息。
根据本公开实施例的第四方面,提供一种多媒体资源的播放装置,包括:
获取模块,被配置为执行根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;发送模块,被配置为执行将目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端,触发客户端播放目标多媒体资源,并在检测目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
在其中一个实施例中,获取模块,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源;所述装置还包括:目标对象检测模块,被配置为执行对目标多媒体资源进行检测,确定包括目标对象的资源片段;片段指示确定模块,被配置为执行获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在其中一个实施例中,目标对象检测模块,包括:采样单元,被配置为执行按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;第一目标对象检测单元,被配置为执行对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;资源片段确定单元,被配置为执行获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在其中一个实施例中,片段指示确定模块,被配置为执行获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在其中一个实施例中,目标对象检测模块,包括:划分单元,被配置为执行对目标多媒体资源进行划分,生成多个待检测资源片段;第二目标对象检测单元,被配置为执行对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在其中一个实施例中,片段指示确定模块,被配置为执行:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在其中一个实施例中,获取模块,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源,以及获取预先生成的目标多媒体资源的关键片段指示,关键片段指示为对目标多媒体资源进行检测,确定包括目标对象的资源片段,根据包括目标对象的资源片段对应的片段指示得到的。
在其中一个实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在其中一个实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在其中一个实施例中,获取模块,还被配置为执行响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息,预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示;发送模块,还被配置为执行将关联信息发送至客户端。
根据本公开实施例的第五方面,提供一种终端,包括:
处理器;用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如第一方面的任一项实施例中所述的多媒体资源的播放方法。
根据本公开实施例的第六方面,提供一种服务器,包括:
处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现如第二方面的任一项实施例中所述的多媒体资源的播放方法。
根据本公开实施例的第七方面,提供一种多媒体资源的播放系统,包括如第五方面所述的终端,以及如第六方面所述的服务器。
根据本公开实施例的第八方面,提供一种存储介质,当所述存储介质中的指令由终端的处理器执行时,使得所述终端能够执行如第一方面的任一项实施例中所述的多媒体资源的播放方法。
根据本公开实施例的第九方面,提供一种存储介质,当所述存储介质中的指令由服务器的处理器执行时,使得所述服务器能够执行如第二方面的任一项实施例中所述的多媒体资源的播放方法。
根据本公开实施例的第十方面,提供一种计算机程序产品,所述程序产品包括计算机程序,所述计算机程序存储在可读存储介质中,设备的至少一个处理器从所述可读存储介质读取并执行所述计算机程序,使得设备执行第一方面和/或第二方面的任一项实施例中所述的多媒体资源的播放方法。
本公开的实施例提供的技术方案至少带来以下有益效果:
通过根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;在播放目标多媒体资源的过程中,当检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息,从而可以避免在播放关键片段的过程中展示多媒体资源的关联信息,使得关联信息的展示时间更具针对性且更加灵活,提高了展示关联信息的智能化程度。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种多媒体资源的播放方法的应用环境图。
图2是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。
图3是根据一示例性实施例示出的一种确定关键片段指示步骤的流程图。
图4是根据一示例性实施例示出的一种确定包括目标对象的资源片段步骤的流程图。
图5是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。
图6是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。
图7是根据一示例性实施例示出的一种确定关键片段指示步骤的流程图。
图8是根据一示例性实施例示出的一种多媒体资源的播放方法的交互图。
图9是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。
图10是根据一示例性实施例示出的一种多媒体资源的播放装置的框图。
图11是根据一示例性实施例示出的一种多媒体资源的播放装置的框图。
图12是根据一示例性实施例示出的一种终端的内部结构图。
图13是根据一示例性实施例示出的一种服务器的内部结构图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在一个实施例中,本公开所提供的多媒体资源的播放方法可以应用于如图1所示的应用环境中。其中,终端110通过网络与服务器120进行交互。多媒体资源可以存储在服务器120中。终端110接收的多媒体资源播放请求后,向服务器120请求与多媒体资源播放请求对应的目标多媒体资源。目标多媒体资源的关键片段指示可以是服务器120通过预先部署的关键片段指示的确定逻辑对目标多媒体资源进行处理得到,也可以是终端110在获取目标多媒体资源后自行处理得到,在此不做限定。终端110在获取目标多媒体资源以及目标多媒体资源的关键片段指示后,播放目标多媒体资源;在播放过程中,通过终端110或者服务器120在检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示已获取的目标多媒体资源的关联信息。
在另一个实施例中,本公开所提供的多媒体资源的播放方法可以应用于终端。多媒体资源、关键片段指示的确定逻辑等信息可以部署在本地存储中。终端在接收到多媒体资源播放请求后,获取多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;播放目标多媒体资源;检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
在另一个实施例中,本公开所提供的多媒体资源的播放方法可以应用于服务器端。多媒体资源、关键片段指示的确定逻辑等信息可以部署在服务器中。服务器在接收到终端发送的多媒体资源播放请求后,获取多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;将目标多媒体资源以及目标多媒体资源的关键片段指示发送至终端,以使终端能够播放目标多媒体资源;在播放过程中,服务器在检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,向终端发送关联信息,以使终端能够展示目标多媒体资源的关联信息。
其中,终端110可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器120可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
图2是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图,如图2所示,多媒体资源的播放方法用于终端110中,包括以下步骤。
在步骤S210中,根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示。
其中,多媒体资源是指可数字传输的资源,包括图片、文字、声音、视频、动画、游戏、网页等。关键片段指示是指多媒体资源的关键片段所对应的指示信息,例如,可以是关键片段的标识信息、时间段信息等。关键片段依具体情况而定,例如,可以是视频资源中的精彩片段、声音资源中的包含声音的片段等。
具体地,多媒体资源播放请求可以是用户触发的,例如,用户通过终端屏幕点击视频链接触发;也可以是客户端自主触发的,例如,电视端自动切换播放。客户端在接收到多媒体资源播放请求后,从本地存储或者服务器处获取与多媒体资源播放请求对应的目标多媒体资源。目标多媒体资源的关键片段指示可以是服务器在接收多媒体资源播放请求后,对目标多媒体资源进行处理得到的;也可以是服务器预先对目标多媒体资源进行处理得到的;也可以是客户端获取目标多媒体资源后,对目标多媒体资源进行处理得到的。
在步骤S220中,响应于多媒体资源播放请求,播放目标多媒体资源。
在步骤S230中,检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
其中,关联信息可以是指借助现代通信、网络和媒体技术,以不同介质(如广播、电视、网络等)为载体向用户提供的信息,不限于是文本、图片、音频、视频等。关联信息可以在响应于所接收的多媒体资源播放请求时获取;也可以在播放目标多媒体资源的过程中获取。具体地,客户端在获取目标多媒体资源后,播放所获取的目标多媒体资源。在播放的过程中,通过客户端检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段。若不属于关键片段指示所对应的资源片段,则在当前的资源片段展示目标多媒体资源的关联信息。
上述多媒体资源的播放,通过根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;在播放目标多媒体资源的过程中,当检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息,从而可以避免在播放关键片段的过程中展示多媒体资源的关联信息,使得关联信息的展示时间更具针对性且更加灵活,提高了展示关联信息的智能化程度。
在一示例性实施例中,对关联信息一种获取方式进行说明:响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示。
具体地,多媒体资源关联列表可以是预先设置固化在本地存储中或者服务器存储中,也可以是响应外部的配置请求进行配置或者动态更新的。客户端获取与多媒体资源播放请求对应的目标多媒体资源后,根据目标多媒体资源从预设的多媒体资源关联列表中查找得到与目标多媒体资源对应的关联信息指示,并根据关联信息指示从本地存储或者服务器存储中获取对应的关联信息。
本实施例中,预先配置多媒体资源关联列表,通过多媒体资源关联列表可以清晰地表示多媒体资源和关联信息之间的关系,便于快速地索引到目标多媒体资源对应的关联信息,从而提高了关联信息的获取效率。
在一示例性实施例中,在播放目标多媒体资源的过程中,若客户端检测目标多媒体资源当前播放的资源内容属于关键片段指示所对应的资源片段,则继续对目标多媒体资源当前播放的资源内容进行检测。直至检测到当前播放的资源内容不属于关键片段指示所对应的资源片段,在当前的资源片段展示目标多媒体资源的关联信息。本实施例中,通过对播放的资源内容所属的资源片段自动进行实时检测,从而可以精准地确定可展示关联信息的资源片段。
在一示例性实施例中,展示目标多媒体资源的关联信息,包括:在不属于关键片段指示所对应的资源片段中的随机时间点,展示关联信息。
具体地,客户端在播放目标多媒体资源的过程中,检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段,若不属于关键片段指示所对应的资源片段,则在该不属于关键片段指示所对应的资源片段的任意时间点展示关联信息。本实施例中,通过使客户端能够在不属于关键片段指示所对应的资源片段中的随机时间点展示关联信息,使得关联信息的展示在避免关键片段指示所对应的资源片段的情况下更具灵活性。
在一示例性实施例中,展示目标多媒体资源的关联信息,包括:获取展示关联信息的界面区域信息;在界面区域信息对应的界面区域中展示关联信息。
其中,界面区域信息可以是播放界面或者终端屏幕中的位置坐标。界面区域信息对应的界面区域可以是播放目标多媒体资源的区域,也可以是单独的窗口区域。具体地,关联信息的界面区域信息可以预先配置在客户端或者服务器中。在客户端获取目标多媒体资源对应的关联信息后,从客户端或者服务器中获取关联信息的界面区域信息,并在界面区域信息对应的界面区域中展示关联信息。本实施例中,通过获取预先定义的展示关联信息的界面区域信息,使客户端能够在界面区域信息对应的界面区域中自行展示关联信息,从而可以提高关联信息的展示效果和展示效率。
在一示例性实施例中,对关键片段指示的一种确定方式进行说明。关键片段指示可以通过客户端在获取目标多媒体资源之后进行确定。如图3所示,在步骤S210中,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,可以通过以下步骤实现:
在步骤S310中,响应于多媒体资源播放请求,获取目标多媒体资源。
具体地,客户端所接收的多媒体资源播放请求中可以携带唯一性地多媒体资源标识。多媒体资源标识可以是网址、视频名称等信息。客户端根据多媒体资源标识,从本地存储或者服务器中获取与多媒体资源标识对应的目标多媒体资源。
在步骤S320中,对目标多媒体资源进行检测,确定包括目标对象的资源片段。
在步骤S330中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
其中,目标对象可以是预先定义的物体、声音等内容,例如,人物、动物、人物声音、音乐等。目标对象的类别可以包括一种或者多种。资源片段可以是根据预先部署的片段确定逻辑进行动态配置的,例如,可以对目标多媒体资源进行采样得到、也可以对目标多媒体资源进行划分得到;也可以是在对目标多媒体资源监测完成后根据包含目标对象的资源内容进行拼接得到。资源片段对应的片段指示用于唯一性地区分资源片段。
具体地,在获取目标多媒体资源后,客户端可以从目标多媒体资源中提取需要进行处理的待处理素材。待处理素材可以根据目标对象的类别进行定义,例如,目标对象为人物时,待处理素材可以是目标多媒体资源中的图像素材;目标对象为声音时,待处理素材可以是目标多媒体资源中的背景音乐素材、声音素材等。对待处理素材进行检测的方式也可以根据目标对象的类别进行定义。例如,目标对象为人物时,对待处理素材进行检测的方式可以采用深度学习网络;目标对象为声音时,对待处理素材进行检测的方式可以是任一种音频检测方式。在对目标多媒体资源检测完成后,客户端获取目标多媒体资源中存在目标对象的资源片段,以及该资源片段对应的片段指示,作为目标多媒体资源的关键片段指示。
本实施例中,由于包含目标对象的资源内容通常被认为是需要避免展示关联信息内容,因此,通过对目标多媒体资源进行检测,得到包含目标对象的资源片段,将包含目标对象的资源片段所对应的片段指示作为关键片段指示,能够有效地避免在包含目标对象的资源片段中展示关联信息,使得关联信息的展示时间更具针对性。
在一示例性实施例中,如图4所示,在步骤S320中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,可以通过以下步骤实现:
在步骤S410中,按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点。
在步骤S420中,对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点。
在步骤S430中,获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
其中,采样时间间隔可以预先配置,例如,可以设置为3秒。即,从目标多媒体资源播放起点开始,每隔3s进行时间点采样,得到采样时间点。相邻的包括目标对象的采样时间点是指互相之间的时间间隔为采样时间间隔的两个时间点。
具体地,客户端在确定采样时间点后,获取采样时间点对应的资源内容。从采样时间点对应的资源内容中提取出待处理素材。待处理素材可以是图像素材、背景音乐素材、声音素材等。客户端对采样时间点对应的待处理素材进行检测,判断其中是否存在目标对象。若存在,则获取该包括目标对象的采样时间点。客户端从包括目标对象的采样时间点中,查询得到相邻的采样时间点。将相邻的采样时间点形成的资源片段作为包括目标对象的资源片段。进一步地,客户端还可以获取非相邻的包括目标对象的采样时间点,将非相邻的包括目标对象的采样时间点形成的资源片段作为可展示关联信息的资源片段。
示例性地,目标多媒体资源的总时长为30s,预先配置采样时间间隔为3s。对目标多媒体资源进行采样,可以得到3s、6s、……、30s多个采样时间点。若检测3s、6s、21s、24s、30s采样时间点对应的资源内容中包括目标对象,则获取这5个采样时间点。在这5个采样时间点中,3s、6s和21s、24s为相邻的包括目标对象的采样时间点,则可以将3s、6s和21s、24s形成的资源片段作为包括目标对象的资源片段。进一步地,在所得到的5个采样时间点中,6s、21s和24s、30s为非相邻的包括目标对象的采样时间点,则可以将6s、21s和24s、30s形成的资源片段作为可展示关联信息的资源片段。
本实施例中,通过对目标多媒体资源的进行时间点采样,只对采样时间点对应的资源内容进行检测,获取包括目标对象的采样时间点,进而确定包括目标对象的资源片段,可以提高包括目标对象的资源片段的生成效率、减少计算量且减轻设备的运行压力。
在一示例性实施例中,在步骤S330中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
具体地,在根据相邻的包括目标对象的采样时间点确定包括目标对象的资源片段后,根据相邻的包括目标对象的采样时间点形成时间段,将所形成的时间段作为包括目标对象的资源片段所对应的片段指示。客户端获取包括目标对象的资源片段对应的片段指示,作为目标多媒体资源的关键片段指示。
在步骤S230中,检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息,包括:获取当前播放的资源内容对应的当前时间信息;当检测当前时间信息未包含在关键片段指示内时,展示目标多媒体资源的关联信息。
具体地,在播放目标多媒体资源的过程中,客户端实时获取当前播放的资源内容对应的当前时间信息。若判断当前时间信息未包含在包括目标对象的资源片段对应时间段中,则在当前包括目标对象的资源片段的任意时间点展示目标多媒体资源的关联信息。
本实施例中,通过将包括目标对象的资源片段对应的时间段作为关键片段指示,在播放目标多媒体资源的过程中,直接根据当前已播放到的时间信息判断能否展示关联信息,实施过程简便且准确性较高。
在一示例性实施例中,对关键片段指示的另一种确定方式进行说明。在步骤S320中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源进行划分,生成多个待检测资源片段;对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
其中,待检测资源片段是指待进行检测是否存在目标对象的资源片段。具体地,待检测资源片段根据预先部署的划分逻辑进行划分得到,例如,可以按照固定时长进行划分,也可以是按照固定的资源片段数量进行划分。客户端从每个待检测资源片段中提取出待处理素材。待处理素材可以是图像素材、背景音乐素材、声音素材等。对每个待检测资源片段对应的待处理素材进行检测,判断其中是否存在目标对象。若存在,则获取包括目标对象的待检测资源片段。
本实施例中,对目标多媒体资源进行划分得到的多个待检测资源片段,通过分别对每个待检测资源片段进行检测,实现了对目标多媒体资源的全面检测,从而可以得到可靠的目标多媒体资源的检测结果。
在一示例性实施例中,在步骤S330中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
具体地,每个待检测资源片段对应的标识信息可以是对目标多媒体资源进行划分后进行编码得到,用于唯一性地标识每个待检测资源片段。在客户端获取包括目标对象的待检测资源片段后,获取包括目标对象的待检测资源片段对应的标识信息,作为目标多媒体资源的关键片段指示。
在步骤S230中,检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息,包括:获取当前播放的资源内容所属的资源片段对应的标识信息;将标识信息与关键片段指示进行比较;当检测当前播放的资源内容对应的标识信息不属于关键片段指示时,展示目标多媒体资源的关联信息。
具体地,在播放目标多媒体资源的过程中,客户端实时获取当前播放的资源内容所属的资源片段对应的当前标识信息。将当前标识信息与关键片段指示中的标识信息进行比较。若判断当前标识信息不属于关键片段指示中的标识信息,则在当前标识信息对应的资源片段中的任意时间点展示目标多媒体资源的关联信息。
本实施例中,通过将包括目标对象的待检测资源片段对应的标识信息作为关键片段指示,在播放目标多媒体资源的过程中,根据标识信息确定能否展示关联信息,实施过程简便且准确性较高。
在一示例性实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
具体地,通常用户观看多媒体资源的过程中注意力和集中度会随着多媒体资源内容的精彩程度变化,当多媒体资源的内容达到精彩阶段时往往会极大地吸引用户注意力。而对于大部分的多媒体资源而言,当多媒体资源中出现人物或者人物声音中的至少一个时,通常为精彩时间段。因此,本实施例中,预先配置目标对象为人物和/或人物声音,多媒体资源中的待处理素材则可以对应为待处理图像和/或待处理声音数据。客户端可以对所获取的待处理图像和/或待处理声音数据分别进行检测,判断是否存在人物和/或是否存在人物声音。进而,根据人物和/或人物声音的检测结果,确定包含目标对象的资源片段。
本实施例中,通过配置目标对象为人物和目标声音中的至少一种,使得关键片段指示的获取符合大部分多媒体资源的精彩内容规律,从而使关联信息的展示能够避开大部分多媒体资源的精彩片段,提高了关联信息的展示方式的通用性。
在一示例性实施例中,在步骤S320中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
具体地,若目标对象包含人物,则可以按照上述实施例中确定采样时间点的方式,得到待检测的采样点时间点对应的资源内容;或者对目标多媒体资源进行划分的方式,得到待检测资源片段。客户端从待检测的资源内容或者待检测资源片段中提取出待处理图像。通过预先配置的图像识别技术对待处理图像进行检测,得到人物检测结果。图像识别技术可以通过已训练的基于深度学习的目标检测模型实现。目标检测模型可以是RefineDet(一种基于单阶段的检测器)、Faster R-CNN(一种目标检测网络)、SSD(Single ShotMultibox Detector)、CornerNet(一种目标检测模型)等。当人物检测结果中存在人物且人物的数量大于或者等于预设阈值时,则将该待处理图像对应的待检测的资源内容或者待检测资源片段确定为目标资源内容。进而参照可以按照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
本实施例中,通过基于图像识别技术对待检测的资源内容进行自动检测,可以提高多媒体资源播放的自动化程度;通过从人物以及人物数量两方面进行判断,可以更为准确的定位到目标多媒体资源中包括目标对象的资源片段,进而提高关联信息展示的准确性。
在一示例性实施例中,在步骤S320中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
具体地,若目标对象包含人物声音,则可以按照上述实施例中确定采样时间点的方式,得到待检测的采样点时间点对应的资源内容;或者对目标多媒体资源进行划分的方式,得到待检测资源片段。客户端从待检测的资源内容或者待检测资源片段中提取出待处理声音数据。
在一个可能性实施例中,由于多媒体资源中的人物声音数据和其他声音数据可以分离存储。因此,待处理声音数据可以为待处理音轨数据。客户端检测待处理音轨数据中是否存在人物声音数据。若存在,则获取包括人物声音的待检测的资源内容或者待检测资源片段。参照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
在另一个可能性实施例中,由于多媒体资源中的人物声音数据和其他声音数据可以混合存储。因此,待处理声音数据可以为待处理音频数据。客户端可以通过傅里叶变换对待处理音频数据进行转换处理,得到对应的频谱图。当检测频谱图中包含人物声音的声音频率时,则获取包括人物声音的待检测的资源内容或者待检测资源片段。参照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
本实施例中,若目标对象包含人物声音,根据人物声音数据和其他声音数据的不同存储条件的情况下,采用与存储条件对应的方式获取包括人物声音的资源片段,可以提高包括人物声音的资源片段的检测的准确性且提高人物声音检测的兼容性。
在一示例性实施例中,对关键片段指示的另一种确定方式进行说明。关键片段指示可以通过服务器在接收到客户端的关键片段指示的获取请求之后确定。在步骤S210中,根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,包括:根据多媒体资源播放请求,向服务器发送目标多媒体资源以及关键片段指示的获取请求,触发服务器对目标多媒体资源进行检测,确定包括目标对象的资源片段,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示;接收服务器响应于获取请求返回的目标多媒体资源以及目标多媒体资源的关键片段指示。
具体地,客户端在接收到多媒体资源播放请求后,向服务器发送目标多媒体资源以及关键片段指示的获取请求。服务器根据所接收的目标多媒体资源以及关键片段指示的获取请求,查找得到与目标多媒体资源的获取请求对应的目标多媒体资源。参照上述实施例中描述的确定包括目标对象的资源片段的方式,从目标多媒体资源中得到包括目标对象的资源片段。获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。将目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端。
本实施例中,通过将关键片段指示的确定逻辑部署在服务器端,可以减轻终端设备的运行压力;通过使服务器端对多媒体资源进行统一处理,便于管理和维护多媒体资源的关键片段指示,且可以保证不同客户端接收到的数据的一致性。
图5是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。如图5所示,多媒体资源的播放方法用于终端中,包括以下步骤。
在步骤S501中,根据所接收的多媒体资源播放请求,获取目标多媒体资源。具体地,目标多媒体资源可以预先存储在本地存储或者服务器存储中。在客户端接收到多媒体资源播放请求后,从本地存储或者服务器存储中获取目标多媒体资源。
在步骤S502中,响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示。具体地,多媒体资源关联列表以及关联信息可以预先存储在本地存储或者服务器存储中。在客户端接收到多媒体资源播放请求后,从本地存储或者服务器存储中根据预设的多媒体资源关联列表,获取关联信息。
在步骤S503中,对目标多媒体资源进行检测,确定其中包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容。具体地,确定包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容的具体方式可以参照上述实施例说明,在此不做具体阐述。
在步骤S504中,根据包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容,生成包括人物和/或人物声音的资源片段。
在步骤S505中,获取包括人物和/或人物声音的资源片段对应的片段指示,作为关键片段指示。其中,片段指示可以通过时间段或者标识信息表征,具体可以参照上述实施例说明,在此不做具体阐述。
在步骤S506中,检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段。若属于,则执行步骤S507;若不属于,则执行步骤S508。
进一步地,步骤S506还可以通过服务器执行。在客户端播放目标多媒体资源的过程中,获取当前播放的资源内容。判断当前播放的资源内容是否属于关键片段指示所对应的资源片段。若属于,则执行步骤S507。
在步骤S507中,继续对目标多媒体资源当前播放的资源内容进行检测,直至目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段。
在步骤S508中,在不属于关键片段指示所对应的资源片段中的随机时间点,以及与已获取的界面区域信息对应的界面区域中展示目标多媒体资源的关联信息。
图6是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图,如图6所示,多媒体资源的播放方法用于服务器中,包括以下步骤。
在步骤S610中,根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示。
在步骤S620中,将目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端,触发客户端播放目标多媒体资源,并在检测目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
具体地,多媒体资源播放请求可以是用户触发的,例如,用户通过终端屏幕点击视频链接触发;也可以是客户端自主触发的,例如,电视端自动切换播放。客户端在接收到多媒体资源播放请求后,向服务器发送多媒体资源播放请求。多媒体资源播放请求中可以携带多媒体资源标识,以使服务器能够根据多媒体资源标识,查找对应的目标多媒体资源。服务器可以通过预先检测或者实时检测的方式,对目标多媒体资源进行处理得到目标多媒体资源的关键片段指示。将所得到的目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端。客户端播放所获取的目标多媒体资源。在播放的过程中,通过客户端检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段。若不属于关键片段指示所对应的资源片段,则通过客户端在当前的资源片段展示目标多媒体资源的关联信息。
上述多媒体资源的播放,通过根据所接收的多媒体资源播放请求,将与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端,可以使客户端在播放目标多媒体资源的过程中,在检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息,从而可以避免在播放关键片段的过程中展示多媒体资源的关联信息,使得关联信息的展示时间更具针对性且更加灵活,提高了展示关联信息的智能化程度。
在一示例性实施例中,对关联信息一种获取方式进行说明:响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息,预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示;将关联信息发送至客户端。
具体地,多媒体资源关联列表可以是预先设置固化在服务器存储中,也可以是响应外部的配置请求进行配置或者动态更新的。在服务器接收多媒体资源播放请求后,确定与多媒体资源播放请求对应的目标多媒体资源。根据目标多媒体资源从预设的多媒体资源关联列表中查找得到与目标多媒体资源对应的关联信息指示,并根据关联信息指示从服务器存储中获取对应的关联信息。
本实施例中,预先配置多媒体资源关联列表,通过多媒体资源关联列表可以清晰地表示多媒体资源和关联信息之间的关系,便于快速地索引到目标多媒体资源对应的关联信息,从而提高了关联信息的获取效率。
在一示例性实施例中,对关键片段指示的一种确定方式进行说明。关键片段指示可以是服务器在获取多媒体播放请求之后进行确定。如图7所示,在步骤S610中,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示,可以通过以下步骤得到:
在步骤S710中,响应于多媒体资源播放请求,获取目标多媒体资源。
在步骤S720中,对目标多媒体资源进行检测,确定包括目标对象的资源片段。
在步骤S730中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
其中,目标对象可以是预先定义的物体、声音等内容,例如,人物、动物、人物声音、音乐等。目标对象的类别可以包括一种或者多种。资源片段可以是根据预先部署的片段确定逻辑进行动态配置的,例如,可以对目标多媒体资源进行采样得到、也可以对目标多媒体资源进行划分得到;也可以在对目标多媒体资源监测完成后根据包含目标对象的资源内容进行拼接得到。
具体地,服务器所接收的多媒体资源播放请求中可以携带唯一性地多媒体资源标识。多媒体资源标识可以是网址、视频名称等信息。服务器根据多媒体资源标识获取与多媒体资源标识对应的目标多媒体资源。从目标多媒体资源中提取需要进行处理的待处理素材。待处理素材可以根据目标对象的类别进行定义,例如,目标对象为人物时,待处理素材可以是目标多媒体资源中的图像素材;目标对象为声音时,待处理素材可以是目标多媒体资源中的背景音乐素材、声音素材等。对待处理素材进行检测的方式也可以根据目标对象的类别进行定义。例如,目标对象为人物时,对待处理素材进行检测的方式可以采用深度学习网络;目标对象为声音时,对待处理素材进行检测的方式可以是任一种音频检测方式。在对目标多媒体资源检测完成后,服务器获取目标多媒体资源中存在目标对象的资源片段,以及该资源片段对应的片段指示,作为目标多媒体资源的关键片段指示。
本实施例中,由于包含目标对象的资源内容通常被认为是需要避免展示关联信息内容,因此,通过对目标多媒体资源进行检测,得到包含目标对象的资源片段,将包含目标对象的资源片段所对应的片段指示作为关键片段指示,能够有效地避免在包含目标对象的资源片段中展示关联信息,使得关联信息的展示时间更具针对性。
在一示例性实施例中,在步骤S720中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
其中,采样时间间隔可以预先配置,例如,可以设置为3秒。即,从目标多媒体资源播放起点开始,每隔3s进行时间点采样,得到采样时间点。相邻的包括目标对象的采样时间点是指互相之间的时间间隔为采样时间间隔的两个时间点。
具体地,服务器获取采样时间点对应的资源内容。从采样时间点对应的资源内容中提取出待处理素材。待处理素材可以是图像素材、背景音乐素材、声音素材等。客户端对采样时间点对应的待处理素材进行检测,判断其中是否存在目标对象。若存在,则获取该包括目标对象的采样时间点。服务器从包括目标对象的采样时间点中,查询得到相邻的采样时间点。相邻的采样时间点形成的资源片段作为包括目标对象的资源片段。进一步地,服务器还可以获取非相邻的包括目标对象的采样时间点,将非相邻的包括目标对象的采样时间点形成的资源片段作为可展示关联信息的资源片段。
本实施例中,通过对目标多媒体资源的进行时间点采样,只对采样时间点对应的资源内容进行检测,获取包括目标对象的采样时间点,进而确定包括目标对象的资源片段,可以提高包括目标对象的资源片段的生成效率、减少计算量且减轻设备的运行压力。
在一示例性实施例中,在步骤S730中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
具体地,在根据相邻的包括目标对象的采样时间点确定包括目标对象的资源片段后,根据相邻的包括目标对象的采样时间点形成时间段,将所形成的时间段作为包括目标对象的资源片段对应的片段指示。服务器获取包括目标对象的资源片段对应的片段指示,作为目标多媒体资源的关键片段指示。
本实施例中,通过将包括目标对象的资源片段对应的时间段作为关键片段指示,在播放目标多媒体资源的过程中,直接根据当前已播放到的时间信息判断能否展示关联信息,实施过程简便且准确性较高。
在一示例性实施例中,对关键片段指示的另一种确定方式进行说明。在步骤S620中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源进行划分,生成多个待检测资源片段;对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
其中,待检测资源片段是指待进行检测是否存在目标对象的资源片段。具体地,待检测资源片段根据预先部署的划分逻辑进行划分得到,例如,可以按照固定时长进行划分,也可以是按照固定的资源片段数量进行划分。服务器从每个待检测资源片段中提取出待处理素材。待处理素材可以是图像素材、背景音乐素材、声音素材等。对每个待检测资源片段对应的待处理素材进行检测,判断其中是否存在目标对象。若存在,则获取包括目标对象的待检测资源片段。
本实施例中,对目标多媒体资源进行划分得到的多个待检测资源片段,通过分别对每个待检测资源片段进行检测,实现了对目标多媒体资源的全面检测,从而可以得到可靠的目标多媒体资源的检测结果。
在一示例性实施例中,在步骤S730中,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示,包括:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
具体地,每个待检测资源片段对应的标识信息可以是对目标多媒体资源进行划分后进行编码得到,用于唯一性地标识每个待检测资源片段。在服务器获取包括目标对象的待检测资源片段后,获取包括目标对象的待检测资源片段对应的标识信息,作为目标多媒体资源的关键片段指示。本实施例中,通过将包括目标对象的待检测资源片段对应的标识信息作为关键片段指示,实施过程简便且准确性较高。
在一示例性实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
具体地,通常用户观看多媒体资源的过程中注意力和集中度会随着多媒体资源内容的精彩程度变化,当多媒体资源的内容达到精彩阶段时往往会极大地吸引用户注意力。而对于大部分的多媒体资源而言,当多媒体资源中出现人物或者人物声音中的至少一个时,通常为精彩时间段。因此,本实施例中,预先配置目标对象为人物和/或人物声音,多媒体资源中的待处理素材则可以对应为待处理图像和/或待处理声音数据。服务器可以对所获取的待处理图像和/或待处理声音数据分别进行检测,判断是否存在人物和/或是否存在人物声音。进而,根据人物和/或人物声音的检测结果,确定包含目标对象的资源片段。
本实施例中,通过配置目标对象为人物和目标声音中的至少一种,使得关键片段指示的获取符合大部分多媒体资源的精彩内容规律,从而使关联信息的展示能够避开大部分多媒体资源的精彩片段,提高了关联信息的展示方式的通用性。
在一示例性实施例中,在步骤S720中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
具体地,若目标对象包含人物,则可以按照上述实施例中确定采样时间点的方式,得到待检测的采样点时间点对应的资源内容;或者对目标多媒体资源进行划分的方式,得到待检测资源片段。服务器从待检测的资源内容或者待检测资源片段中提取出待处理图像。通过预先配置的图像识别技术对待处理图像进行检测,得到人物检测结果。图像识别技术可以通过已训练的基于深度学习的目标检测模型实现。目标检测模型可以是RefineDet(一种基于单阶段的检测器)、Faster R-CNN(一种目标检测网络)、SSD(Single ShotMultibox Detector)、CornerNet(一种目标检测模型)等。当人物检测结果中存在人物且人物的数量大于或者等于预设阈值时,则将该待处理图像对应的待检测的资源内容或者待检测资源片段确定为目标资源内容。进而参照可以按照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
本实施例中,通过基于图像识别技术对待检测的资源内容进行自动检测,可以提高多媒体资源播放的自动化程度;通过从人物以及人物数量两方面进行判断,可以更为准确的定位到目标多媒体资源中包括目标对象的资源片段,进而提高关联信息展示的准确性。
在一示例性实施例中,在步骤S720中,对目标多媒体资源进行检测,确定包括目标对象的资源片段,包括:对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
具体地,若目标对象包含人物声音,则可以按照上述实施例中确定采样时间点的方式,得到待检测的采样点时间点对应的资源内容;或者对目标多媒体资源进行划分的方式,得到待检测资源片段。从待检测的资源内容中或者待检测资源片段中提取出待处理声音数据。
在一个可能性实施例中,由于多媒体资源中的人物声音数据和其他声音数据可以分离存储。因此,待处理声音数据可以为待处理音轨数据。服务器检测待处理音轨数据中是否存在人物声音数据。若存在,则获取包括人物声音的待检测的资源内容或者待检测资源片段。参照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
在另一个可能性实施例中,由于多媒体资源中的人物声音数据和其他声音数据可以混合存储。因此,待处理声音数据可以为待处理音频数据。服务器可以通过傅里叶变换对待处理音频数据进行转换处理,得到对应的频谱图。当检测频谱图中包含人物声音的声音频率时,则获取包括人物声音的待检测的资源内容或者待检测资源片段。参照上述实施例中采样时间点的方式,或者对目标多媒体资源进行划分的方式,得到包括目标对象的资源片段。
本实施例中,若目标对象包含人物声音,根据人物声音数据和其他声音数据的不同存储条件的情况下,采用与存储条件对应的方式获取包括人物声音的资源片段,可以提高包括人物声音的资源片段的检测的准确性且提高人物声音检测的兼容性。
图8是根据一示例性实施例示出的一种多媒体资源的播放方法的流程图。如图8所示,多媒体资源的播放方法用于服务器中,包括以下步骤。
在步骤S801中,根据所接收的多媒体资源播放请求,获取目标多媒体资源。
在步骤S802中,响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示
在步骤S803中,对目标多媒体资源进行检测,确定其中包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容。具体地,确定包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容的具体方式可以参照上述实施例说明,在此不做具体阐述。
在步骤S804中,根据包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的资源内容,生成包括人物和/或人物声音的资源片段。
在步骤S805中,获取包括人物和/或人物声音的资源片段对应的片段指示,作为关键片段指示。其中,片段指示可以通过时间段或者标识信息表征,具体可以参照上述实施例说明,在此不做具体阐述。
在步骤S806中,将目标多媒体资源、目标多媒体资源的关键片段指示以及关联信息发送至客户端,触发客户端播放目标多媒体资源,并在检测目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
进一步地,在步骤S806中,在客户端播放目标多媒体资源的过程中,还可以通过服务器获取当前播放的资源内容,检测当前播放的资源内容是否属于关键片段指示所对应的资源片段。若不属于,则触发客户端展示目标多媒体资源的关联信息。
图9是根据一示例性实施例示出的一种多媒体资源的播放方法的交互图。在本实施例中,多媒体资源为视频;关键片段指示的确定逻辑部署在服务器端,为在线实时检测逻辑;关联信息为待展示的广告信息。如图9所示,多媒体资源的播放方法应用于终端和服务器构成的系统中。其中,服务器中部署有视频预分析模块和播放模块。视频预分析模块用于对目标视频进行检测和分析,得到目标视频对应的关键片段指示,并将关键片段指示发送至播放模块;播放模块用于根据关键片段指示进行广告推送。终端中部署有播放模块,用于播放目标视频和广告。如图9所示,包括以下步骤。
在步骤S901中,播放模块获取客户端发起的视频播放请求。
在步骤S902中,播放模块向视频预分析模块请求对目标视频进行检测。
在步骤S903中,视频预分析模块对目标视频进行检测,确定其中包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的视频内容(对应图9中的关键的视频内容)。其中,确定包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的视频内容的具体方式可以参照上述实施例说明,在此不做具体阐述。
在步骤S904中,视频预分析模块根据包括人物且人物的数量大于或等于预设阈值,和/或包括人物声音的视频内容,生成包括人物或者人物声音的视频片段(对应图9中的关键片段)。
在步骤S905中,视频预分析模块获取包括人物和/或人物声音的资源片段对应的片段指示,作为关键片段指示。
在步骤S906中,视频预分析模块根据目标视频的关键片段指示生成目标视频的关键片段指示配置文件。
在步骤S907中,视频预分析模块将目标视频的关键片段指示配置文件发送至播放模块。
在步骤S908中,播放模块向客户端发送目标视频的视频数据流。
在步骤S909中,客户端播放目标视频。
在步骤S910中,播放模块查询关键片段指示配置文件。
在步骤S911中,当播放模块判断当前播放的视频内容不属于关键片段指示所对应的视频片段,则向客户端推送广告数据流。
在步骤S912中,客户端展示广告。
应该理解的是,虽然上述流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
图10是根据一示例性实施例示出的一种多媒体资源的播放装置1000框图。参照图10,该装置包括获取模块1001、播放模块1002、检测模块1003和展示模块1004。
获取模块1001,被配置为执行根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;播放模块1002,被配置为执行响应于多媒体资源播放请求,播放目标多媒体资源;检测模块1003,被配置为执行检测目标多媒体资源当前播放的资源内容是否属于关键片段指示所对应的资源片段;展示模块1004,被配置为执行在检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
在一示例性实施例中,获取模块1001,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源;所述装置1000还包括:目标对象检测模块,被配置为执行对目标多媒体资源进行检测,确定包括目标对象的资源片段;片段指示确定模块,被配置为执行获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在一示例性实施例中,目标对象检测模块,包括:采样单元,被配置为执行按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;第一目标对象检测单元,被配置为执行对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;资源片段确定单元,被配置为执行获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在一示例性实施例中,片段指示确定模块,被配置为执行获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在一示例性实施例中,获取模块1001,还被配置为执行获取当前播放的资源内容对应的当前时间信息;展示模块1004,被配置为执行当检测当前时间信息未包含在关键片段指示内时,展示目标多媒体资源的关联信息。
在一示例性实施例中,目标对象检测模块,包括:划分单元,被配置为执行对目标多媒体资源进行划分,生成多个待检测资源片段;第二目标对象检测单元,被配置为执行对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在一示例性实施例中,片段指示确定模块,被配置为执行获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在一示例性实施例中,获取模块1001,还被配置为执行获取当前播放的资源内容所属的资源片段对应的标识信息;所述装置1000还包括:比较模块,被配置为执行将标识信息与关键片段指示进行比较;展示模块1004,还被配置为执行当检测当前播放的资源内容对应的标识信息不属于关键片段指示时,展示目标多媒体资源的关联信息。
在一示例性实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在一示例性实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在一示例性实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在一示例性实施例中,获取模块1001,包括:发送单元,被配置为执行根据多媒体资源播放请求,向服务器发送目标多媒体资源以及关键片段指示的获取请求,触发服务器对目标多媒体资源进行检测,确定包括目标对象的资源片段,获取包括目标对象的资源片段对应的片段指示,作为关键片段指示;接收单元,被配置为执行接收服务器响应于获取请求返回的目标多媒体资源以及目标多媒体资源的关键片段指示。
在一示例性实施例中,获取模块1001,还被配置为执行响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息;预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示。
在一示例性实施例中,检测模块1003,还被配置为执行若检测到目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段,则继续对目标多媒体资源当前播放的资源内容进行检测;展示模块1004,被配置为执行在检测到目标多媒体资源当前播放的资源内容属于关键片段指示所对应的资源片段,展示目标多媒体资源的关联信息。
在一示例性实施例中,展示模块1004,被配置为执行在不属于关键片段指示所对应的资源片段中的随机时间点,展示关联信息。
在一示例性实施例中,展示模块1004,被配置为执行获取展示关联信息的界面区域信息;在界面区域信息对应的界面区域中展示关联信息。
图11是根据一示例性实施例示出的一种多媒体资源的播放装置1100框图。参照图11,该装置包括获取模块1101和发送模块1102。
获取模块1101,被配置为执行根据所接收的多媒体资源播放请求,获取与多媒体资源播放请求对应的目标多媒体资源以及目标多媒体资源的关键片段指示;发送模块1102,被配置为执行将目标多媒体资源以及目标多媒体资源的关键片段指示发送至客户端,触发客户端播放目标多媒体资源,并在检测目标多媒体资源当前播放的资源内容不属于关键片段指示所对应的资源片段时,展示目标多媒体资源的关联信息。
在一示例性实施例中,获取模块1101,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源;所述装置1100还包括:目标对象检测模块,被配置为执行对目标多媒体资源进行检测,确定包括目标对象的资源片段;片段指示确定模块,被配置为执行获取包括目标对象的资源片段对应的片段指示,作为关键片段指示。
在一示例性实施例中,目标对象检测模块,包括:采样单元,被配置为执行按照采样时间间隔对目标多媒体资源进行采样,得到采样时间点;第一目标对象检测单元,被配置为执行对采样时间点对应的资源内容进行检测,确定包括目标对象的采样时间点;资源片段确定单元,被配置为执行获取相邻的包括目标对象的采样时间点,根据相邻的包括目标对象的采样时间点,确定包括目标对象的资源片段。
在一示例性实施例中,片段指示确定模块,被配置为执行获取根据相邻的包括目标对象的采样时间点形成的时间段,作为目标多媒体资源的关键片段指示。
在一示例性实施例中,目标对象检测模块,包括:划分单元,被配置为执行对目标多媒体资源进行划分,生成多个待检测资源片段;第二目标对象检测单元,被配置为执行对每个待检测资源片段进行检测,得到包括目标对象的待检测资源片段。
在一示例性实施例中,片段指示确定模块,被配置为执行:获取预先生成的与每个待检测资源片段对应的标识信息;获取包括目标对象的待检测资源片段对应的标识信息,作为关键片段指示。
在一示例性实施例中,获取模块1101,被配置为执行响应于多媒体资源播放请求,获取目标多媒体资源,以及获取预先生成的目标多媒体资源的关键片段指示,关键片段指示为对目标多媒体资源进行检测,确定包括目标对象的资源片段,根据包括目标对象的资源片段对应的片段指示得到的。
在一示例性实施例中,目标对象包括资源内容中的人物和人物声音中的至少一种。
在一示例性实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,确定其中包括人物且人物的数量大于或等于预设阈值的目标资源内容;根据目标资源内容,生成包括目标对象的资源片段。
在一示例性实施例中,目标对象检测模块,被配置为执行对目标多媒体资源中的资源内容进行检测,得到包括人物声音的资源内容;根据包括人物声音的资源内容,生成包括目标对象的资源片段。
在一示例性实施例中,获取模块1101,还被配置为执行响应于多媒体资源播放请求,根据预设的多媒体资源关联列表,获取关联信息,预设的多媒体资源关联列表中分别记录有多个多媒体资源对应的关联信息指示;发送模块1102,还被配置为执行将关联信息发送至客户端。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图12是根据一示例性实施例示出的一种用于多媒体资源的播放的终端1200的框图。例如,终端1200可以是移动电话、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。
参照图12,终端1200可以包括以下一个或多个组件:处理组件1202、存储器1204、电力组件1206、多媒体组件1208、音频组件1210、输入/输出(I/O)的接口1212、传感器组件1214以及通信组件1216。
处理组件1202通常控制终端1200的整体操作,诸如与显示、电话呼叫、数据通信、相机操作和记录操作相关联的操作。处理组件1202可以包括一个或多个处理器1220来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1202可以包括一个或多个模块,便于处理组件1202和其他组件之间的交互。例如,处理组件1202可以包括多媒体模块,以方便多媒体组件1208和处理组件1202之间的交互。
存储器1204被配置为存储各种类型的数据以支持在终端1200的操作。这些数据的示例包括用于在终端1200上操作的任何应用程序或方法的指令、联系人数据、电话簿数据、消息、图片、视频等。存储器1204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器、磁盘或光盘。
电源组件1206为终端1200的各种组件提供电力。电源组件1206可以包括电源管理系统,一个或多个电源,及其他与为终端1200生成、管理和分配电力相关联的组件。
多媒体组件1208包括在所述终端1200和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件1208包括一个前置摄像头和/或后置摄像头。当终端1200处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1210被配置为输出和/或输入音频信号。例如,音频组件1210包括一个麦克风(MIC),当终端1200处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1204或经由通信组件1216发送。在一些实施例中,音频组件1210还包括一个扬声器,用于输出音频信号。
I/O接口1212为处理组件1202和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1214包括一个或多个传感器,用于为终端1200提供各个方面的状态评估。例如,传感器组件1214可以检测到终端1200的打开/关闭状态,组件的相对定位,例如所述组件为终端1200的显示器和小键盘,传感器组件1214还可以检测终端1200或终端1200一个组件的位置改变,用户与终端1200接触的存在或不存在,终端1200方位或加速/减速和终端1200的温度变化。传感器组件1214可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1214还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1214还可以包括加速度传感器、陀螺仪传感器、磁传感器、压力传感器或温度传感器。
通信组件1216被配置为便于终端1200和其他设备之间有线或无线方式的通信。终端1200可以接入基于通信标准的无线网络,如WiFi,运营商网络(如2G、3G、4G或5G),或它们的组合。在一个示例性实施例中,通信组件1216经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1216还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端1200可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1204,上述指令可由终端1200的处理器1220执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
图13是根据一示例性实施例示出的一种用于多媒体资源的播放的服务器1300的框图。参照图13,服务器1300包括处理组件1320,其进一步包括一个或多个处理器,以及由存储器1322所代表的存储器资源,用于存储可由处理组件1320的执行的指令,例如应用程序。存储器1322中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1320被配置为执行指令,以执行上述多媒体资源的播放方法。
服务器1300还可以包括一个电源组件1324被配置为执行服务器1300的电源管理,一个有线或无线网络接口1326被配置为将服务器1300连接到网络,和一个输入输出(I/O)接口1328。服务器1300可以操作基于存储在存储器1322的操作系统,例如Windows Server,Mac OS X,Unix,Linux,FreeBSD或类似。
在示例性实施例中,还提供了一种包括指令的存储介质,例如包括指令的存储器1322,上述指令可由服务器1300的处理器执行以完成上述方法。存储介质可以是非临时性计算机可读存储介质,例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种多媒体资源的播放方法,其特征在于,包括:
根据所接收的多媒体资源播放请求,获取与所述多媒体资源播放请求对应的目标多媒体资源以及所述目标多媒体资源的关键片段指示;
响应于所述多媒体资源播放请求,播放所述目标多媒体资源;
检测到所述目标多媒体资源当前播放的资源内容不属于所述关键片段指示所对应的资源片段,展示所述目标多媒体资源的关联信息。
2.根据权利要求1所述的多媒体资源的播放方法,其特征在于,所述获取与所述多媒体资源播放请求对应的目标多媒体资源以及所述目标多媒体资源的关键片段指示,包括:
响应于所述多媒体资源播放请求,获取所述目标多媒体资源;
对所述目标多媒体资源进行检测,确定包括目标对象的资源片段;
获取所述包括目标对象的资源片段对应的片段指示,作为所述关键片段指示。
3.一种多媒体资源的播放方法,其特征在于,包括:
根据所接收的多媒体资源播放请求,获取与所述多媒体资源播放请求对应的目标多媒体资源以及所述目标多媒体资源的关键片段指示;
将所述目标多媒体资源以及所述目标多媒体资源的关键片段指示发送至客户端,触发所述客户端播放所述目标多媒体资源,并在检测所述目标多媒体资源当前播放的资源内容不属于所述关键片段指示所对应的资源片段时,展示所述目标多媒体资源的关联信息。
4.一种多媒体资源的播放装置,其特征在于,包括:
获取模块,被配置为执行根据所接收的多媒体资源播放请求,获取与所述多媒体资源播放请求对应的目标多媒体资源以及所述目标多媒体资源的关键片段指示;
播放模块,被配置为执行响应于所述多媒体资源播放请求,播放所述目标多媒体资源;
检测模块,被配置为执行检测所述目标多媒体资源当前播放的资源内容是否属于所述关键片段指示所对应的资源片段;
展示模块,被配置为执行在检测到所述目标多媒体资源当前播放的资源内容不属于所述关键片段指示所对应的资源片段时,展示所述目标多媒体资源的关联信息。
5.一种多媒体资源的播放装置,其特征在于,包括:
获取模块,被配置为执行根据所接收的多媒体资源播放请求,获取与所述多媒体资源播放请求对应的目标多媒体资源以及所述目标多媒体资源的关键片段指示;
发送模块,被配置为执行将所述目标多媒体资源以及所述目标多媒体资源的关键片段指示发送至客户端,触发所述客户端播放所述目标多媒体资源,并在检测所述目标多媒体资源当前播放的资源内容不属于所述关键片段指示所对应的资源片段时,展示所述目标多媒体资源的关联信息。
6.一种终端,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至2中任一项所述的多媒体资源的播放方法。
7.一种服务器,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求3所述的多媒体资源的播放方法。
8.一种多媒体资源的播放系统,其特征在于,包括如权利要求6所述的终端,以及如权利要求7所述的服务器。
9.一种存储介质,其特征在于,当所述存储介质中的指令由终端的处理器执行时,使得所述终端能够执行如权利要求1至2中任一项所述的多媒体资源的播放方法。
10.一种存储介质,其特征在于,当所述存储介质中的指令由服务器的处理器执行时,使得所述服务器能够执行如权利要求3所述的多媒体资源的播放方法。
CN202010927551.8A 2020-09-07 2020-09-07 多媒体资源的播放方法、装置、终端、服务器及存储介质 Pending CN112153469A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010927551.8A CN112153469A (zh) 2020-09-07 2020-09-07 多媒体资源的播放方法、装置、终端、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010927551.8A CN112153469A (zh) 2020-09-07 2020-09-07 多媒体资源的播放方法、装置、终端、服务器及存储介质

Publications (1)

Publication Number Publication Date
CN112153469A true CN112153469A (zh) 2020-12-29

Family

ID=73890692

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010927551.8A Pending CN112153469A (zh) 2020-09-07 2020-09-07 多媒体资源的播放方法、装置、终端、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN112153469A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110321114A1 (en) * 2010-06-23 2011-12-29 Echostar Technologies Llc Systems and methods for processing supplemental information associated with media programming
US20150172353A1 (en) * 2012-07-11 2015-06-18 Miska Hannuksela Method and apparatus for interacting with a media presentation description that describes a summary media presentation and an original media presentation
CN104780461A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种视频播放方法、移动终端及系统
CN105144739A (zh) * 2013-03-15 2015-12-09 三星电子株式会社 具有媒体处理机制的显示系统及其操作方法
CN106454527A (zh) * 2016-10-21 2017-02-22 北京小米移动软件有限公司 消息推送方法及装置
CN109862388A (zh) * 2019-04-02 2019-06-07 网宿科技股份有限公司 直播视频集锦的生成方法、装置、服务器及存储介质
CN110958493A (zh) * 2019-12-17 2020-04-03 腾讯科技(深圳)有限公司 一种弹幕调整方法、装置、电子设备和存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110321114A1 (en) * 2010-06-23 2011-12-29 Echostar Technologies Llc Systems and methods for processing supplemental information associated with media programming
US20150172353A1 (en) * 2012-07-11 2015-06-18 Miska Hannuksela Method and apparatus for interacting with a media presentation description that describes a summary media presentation and an original media presentation
CN105144739A (zh) * 2013-03-15 2015-12-09 三星电子株式会社 具有媒体处理机制的显示系统及其操作方法
CN104780461A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 一种视频播放方法、移动终端及系统
CN106454527A (zh) * 2016-10-21 2017-02-22 北京小米移动软件有限公司 消息推送方法及装置
CN109862388A (zh) * 2019-04-02 2019-06-07 网宿科技股份有限公司 直播视频集锦的生成方法、装置、服务器及存储介质
CN110958493A (zh) * 2019-12-17 2020-04-03 腾讯科技(深圳)有限公司 一种弹幕调整方法、装置、电子设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陆枫等: "基于细粒度标签的在线视频广告投放机制研究", 《计算机研究与发展》 *

Similar Documents

Publication Publication Date Title
CN108932253B (zh) 多媒体搜索结果展示方法及装置
US20210334325A1 (en) Method for displaying information, electronic device and system
CN111083512A (zh) 直播间的切换方法、装置、电子设备和存储介质
RU2640632C2 (ru) Способ и устройство для доставки информации
WO2018157631A1 (zh) 多媒体资源处理方法及装置
WO2018157630A1 (zh) 关联用户推荐方法及装置
CN111783001A (zh) 页面显示方法、装置、电子设备和存储介质
CN111556366A (zh) 一种多媒体资源的展示方法、装置、终端、服务器及系统
CN107153684B (zh) 推送消息的显示方法、装置和设备
CN107784045B (zh) 一种快捷回复方法和装置、一种用于快捷回复的装置
CN111753135B (zh) 视频展示方法、装置、终端、服务器、系统及存储介质
US20220137756A1 (en) Method for displaying interactive content, electronic device, and storage medium
CN106550252A (zh) 信息的推送方法、装置及设备
CN112464031A (zh) 交互方法、装置、电子设备以及存储介质
CN112291614A (zh) 一种视频生成方法及装置
CN112464096A (zh) 一种信息处理方法及装置
CN112131466A (zh) 群组展示方法、装置、系统和存储介质
WO2022252610A1 (zh) 弹幕下发方法及接收方法
CN111629270A (zh) 一种候选项确定方法、装置及机器可读介质
CN113901241A (zh) 页面展示方法、装置、电子设备及存储介质
CN111246255B (zh) 视频推荐方法、装置、存储介质、终端及服务器
CN110213062B (zh) 处理消息的方法及装置
CN109960444B (zh) 一种呈现应用程序快捷方式的方法、装置和设备
CN114464186A (zh) 关键词确定方法及装置
US11284127B2 (en) Method and apparatus for pushing information in live broadcast room

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201229

RJ01 Rejection of invention patent application after publication