CN106210808B - 媒体信息投放方法、终端、服务器及系统 - Google Patents

媒体信息投放方法、终端、服务器及系统 Download PDF

Info

Publication number
CN106210808B
CN106210808B CN201610643369.3A CN201610643369A CN106210808B CN 106210808 B CN106210808 B CN 106210808B CN 201610643369 A CN201610643369 A CN 201610643369A CN 106210808 B CN106210808 B CN 106210808B
Authority
CN
China
Prior art keywords
video
target object
point
broadcast interface
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610643369.3A
Other languages
English (en)
Other versions
CN106210808A (zh
Inventor
王星星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610643369.3A priority Critical patent/CN106210808B/zh
Publication of CN106210808A publication Critical patent/CN106210808A/zh
Priority to PCT/CN2017/096175 priority patent/WO2018028533A1/zh
Priority to US16/009,426 priority patent/US10595071B2/en
Application granted granted Critical
Publication of CN106210808B publication Critical patent/CN106210808B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224Monitoring of user activity on external systems, e.g. Internet browsing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种媒体信息投放方法、终端、服务器及系统;方法包括:加载播放界面并在所述播放界面播放视频;播放所述视频至视频点位时,在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息。实施本发明,能够精确向观看视频的用户投放媒体信息,且不会造成对用户的干扰。

Description

媒体信息投放方法、终端、服务器及系统
技术领域
本发明通信领域的互联网技术,尤其涉及一种媒体信息投放方法、终端、服务器及系统。
背景技术
目前,随着互联网视频信息的日益丰富,用户经常在持有的终端(如笔记本电脑、平板电脑和智能手机)上观看视频节目,在用户观看视频节目的过程中存在向终端用户投放媒体信息(如广告、富媒体页面、新闻等)的需求。
相关技术通常是在用户观看视频之前以及观看视频的过程中向用户投放媒体信息,至少存在以下问题:
所投放的媒体信息难以保证是用户当前所需要的,导致难以满足媒体信息的投放精度需求,以广告投放为例,在用户观看视频的过程中随意投放的广告不仅难以命中用户获取媒体信息的需求,影响了投放媒体信息的精度,也给用户造成了干扰。
发明内容
本发明实施例提供一种媒体信息投放方法及终端、服务器及系统,能够精确向观看视频的用户投放媒体信息,在不会造成对用户的干扰。
本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供一种媒体信息投放方法,所述方法包括:
加载播放界面并在所述播放界面播放视频;
播放所述视频至视频点位时,在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息。
第二方面,本发明实施例提供一种媒体信息投放方法,所述方法包括:
解析视频中各帧图像的目标对象;
基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
向所述终端发送相应视频点位的点位数据;
其中,所述点位数据用于供所述终端在播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素。
第三方面,本发明实施例提供一种媒体信息投放方法,所述方法包括:
服务器解析视频中各帧图像的目标对象;
所述服务器基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
所述服务器向终端发送相应视频点位的点位数据;
所述终端加载播放界面并在所述播放界面播放所述视频;
所述终端播放所述视频至视频点位时,基于所述点位数据在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
所述终端响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息。
第四方面,本发明实施例提供一种终端,所述终端包括:
播放单元,用于加载播放界面并在所述播放界面播放所述视频;
加载单元,用于当所述播放单元播放所述视频至视频点位时,在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
响应单元,用于响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息。
第五方面,本发明实施例提供一种服务器,所述服务器包括:
识别单元,用于解析视频中各帧图像的目标对象;
点位单元,用于基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
发送单元,用于向所述终端发送相应视频点位的点位数据;
其中,所述点位数据用于供所述终端在播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素。
第六方面,本发明实施例提供一种媒体信息投放系统,所述系统包括:服务器和终端;
所述服务器,用于解析视频中各帧图像的目标对象;
所述服务器,还用于基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
所述服务器,还用于向所述终端发送相应视频点位的点位数据;
所述终端,用于加载播放界面并在所述播放界面播放所述视频;
所述终端,还用于播放所述视频至视频点位时,基于所述点位数据在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
所述终端,还用于响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息。
本发明实施例具有以下有益效果:
将媒体信息的投放与用户是否参与视频中目标对象的互动关联,在用户参与互动时,向用户投放目标对象对应的媒体信息如广告,避免了相关技术中在播放视频过程中投放媒体信息的盲目性,确保投放的媒体信息契合用户当前的需求。
附图说明
图1是本发明实施例中终端以及服务器一个可选的硬件结构示意图;
图2是本发明实施例中广告投放的一个可选的应用场景示意图;
图3是本发明实施例中媒体信息投放方法的一个可选的流程示意图;
图4是本发明实施例中图4示出的媒体信息投放的另一个可选的流程示意图;
图5是本发明实施例中媒体信息投放方法的又一个可选的流程示意图;
图6是本发明实施例中视频互动广告的一个可选的系统架构示意图;
图7至图11是本发明实施例中终端的播放界面的可选的示意图;
图12是本发明实施例中对视频中的人脸进行跟踪的一个可选的流程示意图;
图13是本发明实施例中终端的一个可选的功能结构示意图;
图14是本发明实施例中服务器的一个可选的功能结构示意图。
具体实施方式
以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所提供的实施例仅仅用以解释本发明,并不用于限定本发明。另外,以下所提供的实施例是用于实施本发明的部分实施例,而非提供实施本发明的全部实施例,在本领域技术人员不付出创造性劳动的前提下,对以下实施例的技术方案进行重组所得的实施例、以及基于对发明所实施的其他实施例均属于本发明的保护范围。
需要说明的是,在本发明实施例中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的方法或者装置不仅包括所明确记载的要素,而且还包括没有明确列出的其他要素,或者是还包括为实施方法或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的方法或者装置中还存在另外的相关要素(例如方法中的步骤或者装置中的单元)。
还需要说明的是,本发明实施例所涉及的术语“第一\第二”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二”在允许的情况下可以互换特定的顺序或先后次序。应该理解“第一\第二”区分的对象在适当情况下可以互换,以使这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
本发明实施例中涉及的名词和术语适用于如下的解释。
1)媒体信息,可用于向终端侧投放的任意形式的信息,从类型上讲,媒体信息可以为文本、图片(动态图片和静态图片等)视频和音频等形式;从功能上讲,媒体信息可以为广告、富媒体页面等。
2)视频点位,视频中的时间点或者多个时间点(可以是连续的也可以是间隔的)形成的片段,视频点位包括至少一个帧图像,当视频点位为视频片段时视频点位包括多个帧图像。
3)对象,视频中各帧图像包括的人、物体、动物和建筑等。
4)目标对象,在视频点位的各帧图像中跟踪并突出显示的对象,目标对象可以各帧图像中的一个对象,也可以是各帧图像中的多个对象。
5)点位数据,与视频点位对应,点位数据中可以包括以下信息:
5.1)用于描述视频点位的各帧图像中目标对象的位置,也就是目标对象在相应帧图像中的位置。
5.2)与目标对象对应的互动元素,或者包括互动元素的获取方式,如用于获取互动元素的地址、标识等。
5.3)对互动元素的控制,也称为互动形式,
6)互动元素,虚拟道具(如虚拟的鲜花、服装等)、语音、动画、文字(评论)等元素,互动元素以既定的互动形式能够产生与用户互动的效果,如根据用户操作的互动元素以及操作方式而产生特定的效果,如对象显示效果的变换,发出特定的语音提示,产生动画效果以及给出提示文字等。
7)互动形式用于控制互动元素的加载顺序、互动元素加载的方式以及互动元素组合方式等。
8)广告主:具有广告投放需求并为广告投放支付相应费用的一方,广告主希望自己每次付费的广告点击都是真实用户的有效点击,而非作弊点击。
9)广告点击:用户在用户侧设备(如智能手机、平板电脑等终端设备)通过点击广告而访问广告主的页面,用户点击一次广告而访问广告主的页面,称为广告点击。
10)转化率,曝光(广告在终端的一次展示称为一次曝光)的广告中产生实际广告效果(如用户点击广告,并在广告主网页注册账户、下载应用等)的数量与曝光的广告的数量的比值。
11)点击率:广告点击量与广告曝光次数的比值。
本发明实施例提供媒体信息投放方法、应用媒体信息投放方法的终端、服务器及系统。
本发明实施例提供的终端可以以各种形式来实施,示例性地,可以为智能手机、平板电脑、车载终端等移动终端,也可以台式机电脑、智能电视、机顶盒等形式的固定终端,或者是类似的运算装置。
图1示例性示出了终端以及服务器一个可选的硬件结构示意图,图1示出的硬件结构仅为示例,并不构成对设备结构的限定。例如,可以根据实施需要设置较图1更多的组件,或者根据实施需要省略设置部分组件。
在图1中,硬件结构10包括:处理器11、输入/输出接口13,存储介质14以及网络接口12,组件可以经系统总线15连接通信。
处理器11可以采用中央处理器(CPU)、微处理器(MCU,Microcontroller Unit)、专用集成电路(ASIC,Application Specific Integrated Circuit)或逻辑可编程门阵列(FPGA,Field-Programmable Gate Array)实现。
输入/输出接口13可以采用如显示屏、触摸屏、扬声器等输入/输出器件实现。
存储介质14可以采用闪存、硬盘、光盘等非易失性存储介质实现,也可以采用双倍率(DDR,Double Data Rate)动态缓存等易失性存储介质实现,示例性地,存储介质14可以与终端10共同在同一地点设置,也可以相对于终端10异地远程设置,或者相对终端10本地和异地分布设置。
网络接口12向处理器11提供外部数据如异地设置的存储介质14的访问能力,示例性地,网络接口12可以基于近场通信(NFC,Near Field Communication)技术、蓝牙(Bluetooth)技术、紫蜂(ZigBee)技术进行的近距离通信,另外,还可以实现如基于码分多址(CDMA,Code Division Multiple Access)、宽带码分多址(WCDMA,Wideband CodeDivision Multiple Access)等通信制式及其演进制式的通信。
以下,以本发明实施例提供的媒体信息投放方法、终端、服务器以及系统应用于广告投放为例进行说明,本领域的技术人员基于以下的记载可轻易实施于其他类型媒体信息的投放。
广告投放的一个可选的应用场景示意图如图2所示,广告主选取需要投放广告的视频,如热门的电视剧、娱乐节目等,对视频中的特定的视频点位(如剧情的高潮片段,主要人物的出厂片段)中的目标对象(如目标人物)设定互动元素,如可通过操作而赠送给视频中目标对象的虚拟道具、文字评论等,操作的结果可以由服务器30在播放该视频的终端20中同步显示。
服务器30根据广告主设定的互动元素、互动形式等形成不同视频点位的点位数据,当终端20播放数据库50的视频至视频点位时,根据服务器30下发的点位数据,在终端20的视频播放界面中加载互动元素,支持对当前视频点位出现目标对象的互动操作,如赠送鲜花等虚拟道具,一旦用户参与了互动操作,则代表用户关注了视频中当前出现的目标对象,终端20从广告系统40拉取对应目标对象的广告,如包括目标对象的广告,从而提升广告的点击率以及转化率,以下结合流程图对上述的处理的实现过程进行说明。
结合图3示出的媒体信息投放方法的一个可选的流程示意图进行说明,如图3所示,包括以下步骤:
步骤101,终端20从数据库50获取视频。
在一个实施例中,终端20运行在线视频播放应用,并根据用户选中的在线视频的标识向服务器30请求流媒体形式的视频数据。
流媒体指在Internet/Intranet中使用流式传输技术的连续时基媒体,如:音频、视频或多媒体文件,终端20在播放流媒体前并不从服务器30下载视频的全部数据,只将视频的部分流媒体数据存入内存进行播放,流媒体的数据流在终端20与服务器30之间随时传送随时播放,只是在开始时播放时因传输带宽的影响而存在延迟。
在一个实施例中,终端20与服务器30之间以实时流式传输(Realtime Streaming)或顺序流式传输(Progressive Streaming)的方式传输流媒体的视频数据。一般说来,如视频为需要实时播放的,则使用流式传输的媒体服务器30,或应用如实时流传输协议(RTSP,Real Time Streaming Protocol)传输。如使用超文本传输协议(HTTP,HyperTextTransfer Protocol)服务器30,流媒体的视频数据即通过顺序流发送。采用何种传输方式依赖于视频播放的实时性的需求。当然,终端20也可以将视频文件的全部的数据下载到本地再进行播放。
步骤102,终端20加载播放界面并在播放界面播放视频。
步骤103,终端20向服务器30请求视频的点位数据。
步骤104,服务器30向终端20下发终端20当前播放的视频点位对应的点位数据。
在一个实施例中,服务器30向终端20提供点位数据的查询服务,终端20通过使用查询服务查询当前视频点位是否有对应的点位数据,示例性地,与视频点位对应的点位数据可以包括以下信息:
1)视频点位各帧图像中的目标对象(如目标人物、目标物品等)绑定的互动元素;
2)目标对象在各图像中的位置,如目标人物的特定部位(头部等)在各帧图像中的位置;
3)互动元素的互动形式。
以下步骤105和步骤106为终端20接收到与当前视频点位对应的点位数据时,在播放当前视频点位时的处理过程,执行顺序不分先后,可顺序执行或并行执行。
步骤105,终端20播放视频至视频点位时,在播放界面中加载对应视频点位所包括目标对象的跟踪标识。
在一个实施例中,当播放界面中加载有视频点位中包括目标对象的帧图像时,基于点位数据指示的目标对象的特定部位在视频点位中相应帧图像的位置,在相应帧图像加载用于在目标对象的特定部位浮动显示的图层。
例如,当前视频点位的各帧图像包括人物1、人物2和人物3时,基于点位数据指示的人物2(目标人物)的头部在视频点位中各帧图像的位置,在各帧图像的相应位置加载图层,示例性地,图层可以采用各种有别于帧图像显示效果的显示元素,如方框、圆圈或虚拟道具(如帽子等),从而形成了对视频点位各图像帧中的目标对象进行跟踪显示的效果,提示用户在步骤106中加载的互动元素是与跟踪显示的目标对象对应的。
步骤106,终端20在播放界面中加载对应视频点位所包括目标对象的互动元素。
在一个实施例中,终端20利用点位数据包括的互动元素,或点位数据中指示的互动元素的获取方式至相应的数据库获取互动元素,根据点位数据指示的目标对象在视频点位各帧图像中出现的位置。判断出播放界面的第一区域中加载有视频点位中包括目标对象的帧图像时,在播放界面的第二区域中加载对应目标对象的互动元素。
例如,第二区域可以在第一区域之上以特定效果(如半透明效果)叠加显示,从而引起终端20用户对互动元素的注意并节省播放界面的空间。
再例如,第二区域与第一区域可以为播放界面中不同的区域,这样能够避免在第一区域播放视频的过程中,因用户过度关注视频点位中的目标对象而由互动元素对用户的观看造成干扰,第一区域和第二区域可以任意方式对播放界面进行划分得到,如横向划分、竖向划分或不规则划分等,对此不作限定。
实际应用中存在这样的情况,视频点位各帧图像中包括多个对象,部分对象的显示效果不佳(如人物脸部的失真、脸部过小或过大等),这种对象在相应的视频点位中不应成为目标对象,避免用户无法识别从而导致影响参与互动的概率的问题。
为实现上述目的,在一个实施例中,服务器30对视频点位中不适宜绑定互动元素的对象进行筛除而得到目标对象,通过对应的点位数据指示给终端20。终端20基于点位数据指示的目标对象在视频点位各帧图像中的位置,在视频点位的帧图像包括多个对象中确定目标对象,也就是对多个对象中的部分对象进行了筛除(不作为目标对象),需要指出的是,这里的筛除并非将非目标对象的图像从视频点位中抹除,而是用于供识别目标用户的标定。
例如,当视频点位各帧图像中包括人物1、人物2和人物3时,如点位数据指示的目标人物的位置与人物1对应,则在当前视频点位中筛除人物2和人物3,人物1作为识别目标用户的标定。
示例性地,对于视频点位的各帧图像中筛除的对象,有以下几种情况:
1)位于视频点位中帧图像的边缘区域的对象,例如,视频点位中一个对象在连续的多帧出现,但是总位于帧图像的边缘导致无法了解脸部,对于这样的对象即使绑定互动元素,用户参与互动的概率也偏低。
2)在视频点位出现的时间低于时间阈值的对象,例如,在一个包括100帧的视频点位中,若一个对象只在其中的一帧或离散的多帧中出现,则该对象不适宜作为用于绑定互动元素的目标对象。
3)在视频点位的清晰度小于清晰度阈值的对象,例如,在一个包括多个对象的帧图像中,如果一对象的脸部与帧图像的比例超出最大值或小于最小值,往往会导致失真,或者不够清晰,则该对象同样不适宜作为用于绑定互动元素的目标对象。
步骤107和步骤108为终端20在接收到用户参数互动时对应的处理,可以任意顺序执行或者并行执行。
步骤107,终端20响应于针对互动元素的操作,在播放界面加载响应操作的结果。
在一个实施例中,终端20基于点位数据中的互动形式控制互动元素针对用户操作的响应,实现响应前与响应后差异化的视听效果,示例性地,互动元素的操作可以免费方式或者收费方式,或者,根据终端20用户的等级、积分等身份信息对应分配互动元素的使用权限(如可使用的互动元素的种类以及数量等)。
例如,当互动元素为虚拟道具如鲜花时,一旦用户触发对该虚拟道具的赠送操作,则服务器30在所有播放该视频的终端20中同步目标对应拥有的鲜花的数量,实现不同终端20用户之间互动的效果。
步骤108,终端20向广告系统请求与目标对象对应的媒体信息。
以媒体信息为广告为例,当目标对象为视频点位中的人物时,与人物对应的广告可以为目标人物参与制作的广告,当目标对象为视频点位中的商品(如衣服、饮料)时,对应的广告可以为广告主针对该商品的需要投放的广告。
再以媒体信息为新闻为例,当目标对象为视频点位中的人物时,与人物对应的广告可以为人物近期的新闻。
步骤109,终端20在播放界面加载对应目标对象的媒体信息。
如前,一旦终端20用户参与针对目标对象的互动,则表示用户对目标对象的关注,此时如果向用户投放与目标对象相关的广告则可以切合用户对目标对象进行了解的需求,用户点击广告的概率更高,提升投放的目标对象的点击率和转化率。
在一个实施例中,当终端20检测到终端20用户参与目标对象的互动时,向广告系统请求点位数据指示的与目标对象相关的广告,在播放界面中播放包括目标对象的视频点位的同时,在播放界面中加载的对应目标对象的广告,一旦用户点击广告,或者,在点击广告后还实施产生广告效果的行为(如在广告调整页面注册、下订单、留下联系资料等),说明投放的广告宣传的信息恰好是终端20用户所需要的,从而能够实现精准向终端20用户投放广告的效果。
前述以终端20用户针对目标对象的互动元素实施操作,从而触发向终端20用户投放媒体信息为例进行说明,作为一种向终端20用户投放广告的替代方式,还可以基于用户对目标对象的跟踪标识的触发投放广告。
前述步骤105和步骤106中,在播放界面加载目标对象的跟踪标识的同时,还在播放界面加载对应目标对象的互动元素。作为步骤105和步骤106的一个替代方案,参见图4示出的媒体信息投放的另一个可选的流程示意图,基于图3,当在播放界面加载目标对象的跟踪标识(步骤105)之后,还检测是否接收到用户针对目标用户的跟踪标识的触发操作(步骤110),如果接收到,则终端20在播放界面中加载对应视频点位所包括目标对象的互动元素(步骤106),如果未接收到,则继续检测直至检测到用户针对目标用户的跟踪标识的触发操作,或者,直至视频点位播放完毕,也就是播放界面中不再加载有包括目标对象的帧图像。
在检测到用户针对跟踪标识之后才加载互动元素的好处是,避免对用户观看视频造成干扰,在用户有参与互动需求时可以通过跟踪标识触发互动元素的加载,也就是通过跟踪标识不仅提示当前视频点位的目标对象,还实现了控制是否参与目标对象的互动的开关的功能,灵活性更高。
如前所述,服务器30向终端20提供针对视频中不同视频点位的点位数据的查询服务,服务器30可以对已有的录播视频预先形成对应的点位数据,也可以对在线直播的视频实时形成点位数据。以下结合流程图对形成点位数据并向终端20发送的实现过程进行说明。
示例性地,服务器30可以在终端20请求视频的点位数据之前预先生成点位数据,或者在终端20查询点位数据时实时生成,以服务器30预先生成点位数据进行说明。
参见图5示出的媒体信息投放方法的又一个可选的流程示意图,基于图3,包括以下步骤:
步骤111,服务器30识别视频中各帧图像的目标对象。
在一个实施例中,参见图12,服务器30对视频进行解码得到各帧图像,对各帧图像进行对象检测得到包括对象的区域;在时域上相邻的两帧图像上,通过深度卷积特征匹配得到对象的光流特征点;根据对象的光流特征点的稳定性、以及数量判断是否在各帧图像中对对象跟踪识别。
上述的识别对象的方式,对对象在帧图像之间的运动幅度的限制较小,可以识别对象在帧图像之间较大的帧间位移,保持对象在帧图像之间旋转不变的特性,也就说即使对象在帧图像之间发生了旋转也能够准确识别,同时对噪声的敏感性降低。
在一个实施例中,视频包括的多个对象时,服务器30当筛除部分对象而得到目标对象,部分对象包括以下类型对象至少之一:
1)位于视频点位中帧图像的边缘区域的对象;
2)在视频点位出现的时间低于时间阈值的对象;
3)在视频点位的清晰度小于清晰度阈值的对象。
再以对象为人物为例,服务器30从视频中筛除的部分人物可以为:
1)人脸面积占比小于最小值或大于最大值的人物,人脸面积比小于最小值或者大于最大值时会出现失真的情况,难以引起用户的关注,因此不适宜用于绑定互动元素。
2)人脸在视频中的位置位于帧图像边缘区域的人物,人脸总是位于帧图像的边缘导致终端20用户无法了解脸部,对于这样的对象即使绑定互动元素,用户参与互动的概率也偏低。
3)在帧图像中不具有正脸的人物。
步骤112,服务器30基于所识别出的目标对象、以及目标对象的互动元素,形成对应视频中不同视频点位的点位数据。
如前,示例性地,服务器30基于以下信息形成点位数据:
1)视频点位各帧图像中的目标对象(如目标人物、目标物品等)绑定的互动元素,或者是所绑定的互动元素的获取方式,如互动元素在数据库中的存储地址。
2)目标对象在各图像中的位置,如目标人物的特定部位(头部等)在各帧图像中的位置;
3)互动元素的互动形式。
再结合这样的一个示例进行说明:在视频中跟踪目标人物的人脸,并在视频的播放界面加载互动元素,在接收到用户针对互动元素的操作时,向终端用户投放对应目标人物的广告。
参见图6示出的视频互动广告的一个可选的系统架构示意图,服务器30端的编码系统对视频编码形成视频,算法模块通过任务调度的方式从视频中提取人脸的跟踪信息(也就是人脸在视频各帧图像中的位置),将人脸跟踪信息入库存储。
打点后台以查询服务的方式从数据库获取人脸跟踪信息,确定视频中的哪些人脸是需要绑定互动信息,将目标人脸对应的人物信息、互动元素绑定形成点位数据打点信息。
终端20在播放视频时向打点后台查询当前进度对应的点位数据,终端20显示跟踪人脸的图层以及对应人物的互动元素,在接收到针对互动元素的操作时,从广告系统拉取的人物参与的广告在终端20播放。
终端20的播放界面的一个可选的示意图如图7-图11所示。
在图7中,播放界面的区域71中用于播放视频,当视频播放到人脸互动点位的时候就会自动弹出一个跟踪人脸72的浮层73,播放界面的区域71的右下角出现该明星的人物信息74,用户可以在区域75中实施为自己喜欢的明星点赞,送花等互动操作。
在图8中,终端20用户在区域71中赠送虚拟道具后播放界面,在区域71中加载有对应人物参与的广告76。
在图9中视频帧中包括多个人脸,基于上述的筛选方式筛选出的目标人脸以方框91标识,并浮动显示目标人脸对应人物的相关信息92。
在图10中仅一个人脸并以方框101标识为目标人脸,特别地,终端20接收到针对方框101的点触操作时会在播放界面中加载针对相应人物的互动界面,以避免观看视频时的干扰。
在图11中以方框111标识目标人脸并在播放界面加载相应人物的的信息112。
图12为对视频中的人脸进行跟踪的一个可选的流程示意图。
基于上述示例可以看出:
1)在用户侧,用户可以边看视频边参与互动,告别无趣的、单一的视频信息接收的模式,同时观众可以通过送花的形式实时表达观看感受。
2)在媒体信息投放方面,以广告为例,使用了基于视频内容分析出目标对象(如汽车、明星包、衣物等)的个性化投放形式,丰富了广告的可投放种类,与目前视频广告大多采用片头,片尾,或者中插投放广告的形式强制观看的方式相比,用户体验更加友好。
如果用户通过对自己喜欢的目标对象赠送虚拟道具(如点赞加油,送花)的同时,推送一些与目标对象相关的广告,这种方式让广告变为用户主动获取,真正做到从用户兴趣出发进行推送广告,大幅提升广告的点击率和转化率。
对前述终端20的逻辑功能结构进行说明,参见图13示出的终端20的一个可选的逻辑功能结构示意图,包括:
播放单元21,用于加载播放界面并在播放界面播放视频;
加载单元22,用于当播放单元21播放视频至视频点位时,在播放界面中加载对应视频点位所包括目标对象的跟随标识,以及,在播放界面中加载对应视频点位所包括目标对象的互动元素;
响应单元23,用于响应于针对互动元素的操作,在播放界面加载响应操作的结果,以及,在播放界面加载对应目标对象的媒体信息。
在一个实施例中,加载单元22,还用于当播放界面中加载有视频点位中包括目标对象的帧图像时,基于目标对象的特定部位在视频点位中相应帧图像的位置,在相应帧图像加载用于在目标对象的特定部位浮动显示的图层。
在一个实施例中,加载单元22,还用于当播放界面的第一区域中加载有视频点位中包括目标对象的帧图像时,在播放界面的第二区域中加载对应目标对象的互动元素。
在一个实施例中,加载单元22,还用于检测到针对跟随标识的操作时,在播放界面中加载对应视频点位所包括目标对象的互动元素。
在一个实施例中,加载单元22,还用于当视频点位的帧图像包括多个对象时,在多个对象中筛除部分对象而得到目标对象,并当播放界面中加载有对应目标对象的帧图像时,基于目标对象的特定部位在视频点位各帧图像的位置,在相应的位置加载用于在目标对象的特定部位跟随显示的图层。
在一个实施例中,加载单元22,还用于在播放界面中筛除以下类型对象至少之一:
位于视频点位中帧图像的边缘区域的对象;
在视频点位出现的时间低于时间阈值的对象;
在视频点位的清晰度小于清晰度阈值的对象。
对前述服务器30的逻辑功能结构进行说明,参见图14示出的服务器30的一个可选的逻辑功能结构示意图,包括:
识别单元31,用于解析视频中各帧图像的目标对象;
点位单元32,用于基于所识别出的目标对象、以及目标对象的互动元素,形成对应视频中不同视频点位的点位数据;
发送单元33,用于向终端20发送相应视频点位的点位数据;
其中,点位数据用于供终端20在播放界面中加载对应视频点位所包括目标对象的跟随标识,以及,在播放界面中加载对应视频点位所包括目标对象的互动元素。
在一个实施例中,识别单元31,还用于对视频进行解码得到各帧图像,对各帧图像进行对象检测得到包括对象的区域;
在时域上相邻的两帧图像上,通过深度卷积特征匹配得到对象的光流特征点;
根据对象的光流特征点的稳定性、以及数量判断是否在各帧图像中对对象跟踪识别。
在一个实施例中,识别单元31,还用于当视频包括的多个对象筛除部分对象而得到目标对象;
部分对象包括以下类型对象至少之一:
位于视频点位中帧图像的边缘区域的对象;
在视频点位出现的时间低于时间阈值的对象;
在视频点位的清晰度小于清晰度阈值的对象。
对图2示出的媒体信息投放系统中的终端20和服务器30的功能进行说明。
终端20,用于加载播放界面并在播放界面播放视频;
播放视频至视频点位时,在播放界面中加载对应视频点位所包括目标对象的跟踪标识,以及,在播放界面中加载对应视频点位所包括目标对象的互动元素;
响应于针对互动元素的操作,在播放界面加载响应操作的结果,以及,在播放界面加载对应目标对象的媒体信息。
在一个实施例中,终端20还用于当播放界面中加载有视频点位中包括目标对象的帧图像时,基于目标对象的特定部位在视频点位中相应帧图像的位置,在相应帧图像加载用于在目标对象的特定部位浮动显示的图层。
在一个实施例中,终端20还用于当播放界面的第一区域中加载有视频点位中包括目标对象的帧图像时,在播放界面的第二区域中加载对应目标对象的互动元素。
在一个实施例中,终端20还用于检测到针对跟踪标识的操作时,在播放界面中加载对应视频点位所包括目标对象的互动元素。
在一个实施例中,终端20还用于当视频点位的帧图像包括多个对象时,在多个对象中筛除部分对象而得到目标对象,并当播放界面中加载有对应目标对象的帧图像时,基于目标对象的特定部位在视频点位各帧图像的位置,在相应的位置加载用于在目标对象的特定部位跟踪显示的图层。
服务器30,用于解析视频中各帧图像的目标对象;
基于所识别出的目标对象、以及目标对象的互动元素,形成对应视频中不同视频点位的点位数据;
向终端20发送相应视频点位的点位数据;
其中,点位数据用于供终端20在播放界面中加载对应视频点位所包括目标对象的跟踪标识,以及,在播放界面中加载对应视频点位所包括目标对象的互动元素。
在一个实施例中,服务器30还用于对视频进行解码得到各帧图像,对各帧图像进行对象检测得到包括对象的区域;
在时域上相邻的两帧图像上,通过深度卷积特征匹配得到对象的光流特征点;
根据对象的光流特征点的稳定性、以及数量判断是否在各帧图像中对对象跟踪识别。
在一个实施例中,服务器30还用于当视频包括的多个对象筛除部分对象而得到目标对象;
部分对象包括以下类型对象至少之一:
位于视频点位中帧图像的边缘区域的对象;
在视频点位出现的时间低于时间阈值的对象;
在视频点位的清晰度小于清晰度阈值的对象。
综上所述,本发明实施例具有以下有益效果:
1)通过对象检测如人脸检测以及人脸跟踪技术分析视频内容,设置多种条件筛选较好的对象如明星人脸。
2)互动视频技术让媒体信息(如广告)变为用户主动获取的信息,真正做到从用户兴趣出发进行推送,大幅提升广告的点击率和转化率。
3)基人脸检测跟踪算法,提升了用户视频互动体验的效果,竞品的人脸跟踪丢失的问题。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、随机存取存储器(RAM,Random Access Memory)、只读存储器(ROM,Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、RAM、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (20)

1.一种媒体信息投放方法,其特征在于,所述方法包括:
加载播放界面并在所述播放界面播放视频;
播放所述视频至视频点位时,在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括目标对象的互动元素;
响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息,所述在所述播放界面加载响应所述操作的结果包括:基于指定的互动形式控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字。
2.如权利要求1所述的方法,其特征在于,所述在所述播放界面中加载对应视频点位所包括目标对象的跟踪标识,包括:
当所述播放界面中加载有所述视频点位中包括目标对象的帧图像时,基于所述目标对象在所述视频点位中相应帧图像的位置,在相应帧图像加载用于在所述目标对象浮动显示的图层。
3.如权利要求1所述的方法,其特征在于,所述在所述播放界面中加载对应所述视频点位所包括目标对象的互动元素,包括:
当所述播放界面的第一区域中加载有包括所述目标对象的帧图像时,在所述播放界面的第二区域中加载对应所述目标对象的互动元素。
4.如权利要求1所述的方法,其特征在于,所述在所述播放界面中加载对应所述视频点位所包括目标对象的互动元素,包括:
检测到针对所述跟踪标识的操作时,在所述播放界面中加载对应所述视频点位所包括目标对象的互动元素。
5.如权利要求1所述的方法,其特征在于,所述在所述播放界面中加载对应视频点位所包括目标对象的跟踪标识,包括:
当所述视频点位的帧图像包括多个对象时,在所述多个对象中筛除部分对象而得到所述目标对象,并当所述播放界面中加载有对应所述目标对象的帧图像时,基于所述目标对象在所述视频点位各帧图像的位置,在相应的位置加载用于跟踪所述目标对象显示的图层。
6.如权利要求5所述的方法,其特征在于,在所述播放界面中筛除部分对象而得到所述目标对象,包括
在所述播放界面中筛除以下类型对象至少之一:
位于所述视频点位中帧图像的边缘区域的对象;
在所述视频点位出现的时间低于时间阈值的对象;
在所述视频点位的清晰度小于清晰度阈值的对象。
7.一种媒体信息投放方法,其特征在于,所述方法包括:
解析视频中各帧图像的目标对象;
基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据,所述点位数据包括以下信息:所述视频点位的各帧图像中所述目标对象的位置、与所述目标对象对应的互动元素或者互动元素的获取方式、互动元素的互动形式,所述互动形式用于终端在响应于针对互动元素的操作时,控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字;
向所述终端发送相应视频点位的点位数据;
其中,所述点位数据用于供所述终端在播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素。
8.如权利要求7所述的方法,其特征在于,所述解析视频中各帧图像的目标对象,包括:
对所述视频进行解码得到各帧图像,对所述各帧图像进行对象检测得到包括所述对象的区域;
在时域上相邻的两帧图像上,通过深度卷积特征匹配得到所述对象的光流特征点;
根据所述对象的光流特征点的稳定性、以及数量判断是否在所述各帧图像中对所述对象跟踪识别。
9.如权利要求7所述的方法,其特征在于,所述解析视频中各帧图像的目标对象,包括:
对所述视频包括的多个对象筛除部分对象而得到所述目标对象;
所述部分对象包括以下类型对象至少之一:
位于所述视频点位中帧图像的边缘区域的对象;
在所述视频点位出现的时间低于时间阈值的对象;
在所述视频点位的清晰度小于清晰度阈值的对象。
10.一种媒体信息投放方法,其特征在于,所述方法包括:
服务器解析视频中各帧图像的目标对象;
所述服务器基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
所述服务器向终端发送相应视频点位的点位数据;
所述终端加载播放界面并在所述播放界面播放所述视频;
所述终端播放所述视频至视频点位时,基于所述点位数据在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
所述终端响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息,所述在所述播放界面加载响应所述操作的结果包括:基于指定的互动形式控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字。
11.一种终端,其特征在于,所述终端包括:
播放单元,用于加载播放界面并在所述播放界面播放视频;
加载单元,用于当所述播放单元播放所述视频至视频点位时,在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
响应单元,用于响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息,所述在所述播放界面加载响应所述操作的结果包括:基于指定的互动形式控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字。
12.如权利要求11所述的终端,其特征在于,
所述加载单元,还用于当所述播放界面中加载有所述视频点位中包括所述目标对象的帧图像时,基于所述目标对象在所述视频点位中相应帧图像的位置,在相应帧图像加载用于在所述目标对象浮动显示的图层。
13.如权利要求11所述的终端,其特征在于,
所述加载单元,还用于当所述播放界面的第一区域中加载有包括所述目标对象的帧图像时,在所述播放界面的第二区域中加载对应所述目标对象的互动元素。
14.如权利要求11所述的终端,其特征在于,
所述加载单元,还用于检测到针对所述跟踪标识的操作时,在所述播放界面中加载对应所述视频点位所包括目标对象的互动元素。
15.如权利要求11所述的终端,其特征在于,
所述加载单元,还用于当所述视频点位的帧图像包括多个对象时,在所述多个对象中筛除部分对象而得到所述目标对象,并当所述播放界面中加载有对应所述目标对象的帧图像时,基于所述目标对象在所述视频点位各帧图像的位置,在相应的位置加载用于跟踪所述目标对象显示的图层。
16.如权利要求15所述的终端,其特征在于,
所述加载单元,还用于在所述播放界面中筛除以下类型对象至少之一:
位于所述视频点位中帧图像的边缘区域的对象;
在所述视频点位出现的时间低于时间阈值的对象;
在所述视频点位的清晰度小于清晰度阈值的对象。
17.一种服务器,其特征在于,所述服务器包括:
识别单元,用于解析视频中各帧图像的目标对象;
点位单元,用于基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据,所述点位数据包括以下信息:所述视频点位的各帧图像中所述目标对象的位置、与所述目标对象对应的互动元素或者互动元素的获取方式、互动元素的互动形式,所述互动形式用于终端在响应于针对互动元素的操作时,控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字;
发送单元,用于向所述终端发送相应视频点位的点位数据;
其中,所述点位数据用于供所述终端在播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素。
18.如权利要求17所述的服务器,其特征在于,
所述识别单元,还用于对所述视频进行解码得到各帧图像,对所述各帧图像进行对象检测得到包括所述对象的区域;
在时域上相邻的两帧图像上,通过深度卷积特征匹配得到所述对象的光流特征点;
根据所述对象的光流特征点的稳定性、以及数量判断是否在所述各帧图像中对所述对象跟踪识别。
19.如权利要求17所述的服务器,其特征在于,
所述识别单元,还用于当所述视频包括的多个对象筛除部分对象而得到所述目标对象;
所述部分对象包括以下类型对象至少之一:
位于所述视频点位中帧图像的边缘区域的对象;
在所述视频点位出现的时间低于时间阈值的对象;
在所述视频点位的清晰度小于清晰度阈值的对象。
20.一种媒体信息投放系统,其特征在于,所述系统包括:服务器和终端;
所述服务器,用于解析视频中各帧图像的目标对象;
所述服务器,还用于基于所识别出的所述目标对象、以及所述目标对象的互动元素,形成对应所述视频中不同视频点位的点位数据;
所述服务器,还用于向所述终端发送相应视频点位的点位数据;
所述终端,用于加载播放界面并在所述播放界面播放所述视频;
所述终端,还用于播放所述视频至视频点位时,基于所述点位数据在所述播放界面中加载对应所述视频点位所包括目标对象的跟踪标识,以及,在所述播放界面中加载对应所述视频点位所包括所述目标对象的互动元素;
所述终端,还用于响应于针对所述互动元素的操作,在所述播放界面加载响应所述操作的结果,以及,在所述播放界面加载对应所述目标对象的媒体信息,所述在所述播放界面加载响应所述操作的结果包括:基于指定的互动形式控制互动元素针对用户操作的响应,实现与所述目标对象的互动效果在响应前与响应后差异化的视听效果,所述差异化的视听效果包括如下至少之一:对象显示效果的变换、发出特定的语音提示、产生动画效果、给出提示文字。
CN201610643369.3A 2016-08-08 2016-08-08 媒体信息投放方法、终端、服务器及系统 Active CN106210808B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610643369.3A CN106210808B (zh) 2016-08-08 2016-08-08 媒体信息投放方法、终端、服务器及系统
PCT/CN2017/096175 WO2018028533A1 (zh) 2016-08-08 2017-08-07 媒体信息投放方法、终端、服务器、系统及存储介质
US16/009,426 US10595071B2 (en) 2016-08-08 2018-06-15 Media information delivery method and system, terminal, server, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610643369.3A CN106210808B (zh) 2016-08-08 2016-08-08 媒体信息投放方法、终端、服务器及系统

Publications (2)

Publication Number Publication Date
CN106210808A CN106210808A (zh) 2016-12-07
CN106210808B true CN106210808B (zh) 2019-04-16

Family

ID=57514461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610643369.3A Active CN106210808B (zh) 2016-08-08 2016-08-08 媒体信息投放方法、终端、服务器及系统

Country Status (3)

Country Link
US (1) US10595071B2 (zh)
CN (1) CN106210808B (zh)
WO (1) WO2018028533A1 (zh)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106210808B (zh) 2016-08-08 2019-04-16 腾讯科技(深圳)有限公司 媒体信息投放方法、终端、服务器及系统
CN109215131B (zh) * 2017-06-30 2021-06-01 Tcl科技集团股份有限公司 虚拟人脸的驱动方法及装置
CN111417974A (zh) * 2017-09-13 2020-07-14 源数码有限公司 基于规则的辅助数据
CN108211359B (zh) * 2017-12-28 2021-04-09 珠海豹好玩科技有限公司 一种信息提示方法、装置、终端和计算机可读存储介质
CN110166842B (zh) * 2018-11-19 2020-10-16 深圳市腾讯信息技术有限公司 一种视频文件操作方法、装置和存储介质
CN111476063B (zh) * 2019-01-23 2023-04-25 北京小米松果电子有限公司 目标跟踪方法、装置、存储介质和电子设备
CN111669612B (zh) * 2019-03-08 2023-02-28 腾讯科技(深圳)有限公司 基于直播的信息投放方法、装置和计算机可读存储介质
CN112004134B (zh) * 2019-05-27 2022-12-09 腾讯科技(深圳)有限公司 多媒体数据的展示方法、装置、设备及存储介质
CN110324672A (zh) * 2019-05-30 2019-10-11 腾讯科技(深圳)有限公司 一种视频数据处理方法、装置、系统及介质
CN110446104A (zh) * 2019-08-30 2019-11-12 腾讯科技(深圳)有限公司 视频处理方法、装置及存储介质
CN110636322B (zh) * 2019-09-29 2022-06-21 腾讯科技(深圳)有限公司 多媒体数据的处理方法、装置、智能终端及存储介质
CN111368277A (zh) * 2019-11-21 2020-07-03 北汽福田汽车股份有限公司 车辆启动方法、装置、存储介质及车辆
CN112927326A (zh) * 2019-11-21 2021-06-08 腾讯科技(深圳)有限公司 图像处理方法及装置、电子设备和计算机可读存储介质
CN111107425B (zh) * 2019-11-25 2022-06-28 福州市暖色网络科技有限公司 基于渲染组件元素获取计算资源的方法、系统和存储介质
CN111008305B (zh) * 2019-11-29 2023-06-23 百度在线网络技术(北京)有限公司 一种视觉搜索方法、装置以及电子设备
CN110889076B (zh) * 2019-11-29 2021-04-13 北京达佳互联信息技术有限公司 评论信息发布方法、装置、客户端、服务器、系统和介质
CN111080357B (zh) * 2019-12-12 2023-08-25 恩亿科(北京)数据科技有限公司 产品投放占比的确定方法、装置、电子设备及存储介质
CN111596841B (zh) * 2020-04-28 2021-09-07 维沃移动通信有限公司 图像显示方法及电子设备
CN111818370B (zh) * 2020-06-30 2022-03-11 腾讯科技(深圳)有限公司 信息推荐方法、装置、电子设备及计算机可读存储介质
CN111970570B (zh) * 2020-07-17 2022-01-25 北京奇艺世纪科技有限公司 一种提示视频内容互动位置的方法及装置
CN111914523B (zh) * 2020-08-19 2021-12-14 腾讯科技(深圳)有限公司 基于人工智能的多媒体处理方法、装置及电子设备
CN112084952B (zh) * 2020-09-10 2023-08-15 湖南大学 一种基于自监督训练的视频点位跟踪方法
CN114153357A (zh) * 2020-11-20 2022-03-08 完美世界(北京)软件科技发展有限公司 一种界面逻辑执行方法以及装置、电子设备、介质
CN114765700B (zh) * 2021-01-13 2023-07-14 腾讯科技(深圳)有限公司 信息交互方法和装置、存储介质及电子设备
CN115079909A (zh) * 2021-03-12 2022-09-20 北京字节跳动网络技术有限公司 打榜交互方法和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101699863A (zh) * 2009-10-29 2010-04-28 孙剑 一种在视频中投放广告的方法
CN103297840A (zh) * 2012-03-01 2013-09-11 阿里巴巴集团控股有限公司 一种基于视频移动焦点的附加信息展现方法及系统
CN104486680A (zh) * 2014-12-19 2015-04-01 珠海全志科技股份有限公司 基于视频的广告推送方法及系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040116183A1 (en) * 2002-12-16 2004-06-17 Prindle Joseph Charles Digital advertisement insertion system and method for video games
US20050229227A1 (en) * 2004-04-13 2005-10-13 Evenhere, Inc. Aggregation of retailers for televised media programming product placement
CN101072340B (zh) * 2007-06-25 2012-07-18 孟智平 流媒体中加入广告信息的方法与系统
CN101753913B (zh) * 2008-12-17 2012-04-25 华为技术有限公司 一种视频中插入超链接的方法、装置及处理器
EP2719187A4 (en) * 2011-06-07 2015-03-11 In Situ Media Corp SYSTEM AND METHOD FOR IDENTIFYING AND MODIFYING IMAGES IN A DIGITAL VIDEO
US9013553B2 (en) * 2011-08-31 2015-04-21 Rocks International Group Pte Ltd. Virtual advertising platform
CN103021432B (zh) * 2011-09-22 2017-06-16 南京中兴软件有限责任公司 一种处理广告的方法和终端
EP2798853A4 (en) * 2011-12-30 2015-07-15 Intel Corp INTERACTIVE MEDIA SYSTEMS
US9407975B2 (en) * 2013-03-05 2016-08-02 Brandon Grusd Systems and methods for providing user interactions with media
CN103475943A (zh) * 2013-09-11 2013-12-25 马清虎 一种电视节目的互动方法和系统
CN103607647B (zh) * 2013-11-05 2018-08-14 Tcl集团股份有限公司 多媒体视频的广告推荐方法、系统及广告播放设备
CN103888785A (zh) * 2014-03-10 2014-06-25 百度在线网络技术(北京)有限公司 信息的提供方法和装置
WO2015196281A1 (en) * 2014-06-24 2015-12-30 Sportlogiq Inc. System and method for visual event description and event analysis
US10242266B2 (en) * 2016-03-02 2019-03-26 Mitsubishi Electric Research Laboratories, Inc. Method and system for detecting actions in videos
CN106210808B (zh) * 2016-08-08 2019-04-16 腾讯科技(深圳)有限公司 媒体信息投放方法、终端、服务器及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101699863A (zh) * 2009-10-29 2010-04-28 孙剑 一种在视频中投放广告的方法
CN103297840A (zh) * 2012-03-01 2013-09-11 阿里巴巴集团控股有限公司 一种基于视频移动焦点的附加信息展现方法及系统
CN104486680A (zh) * 2014-12-19 2015-04-01 珠海全志科技股份有限公司 基于视频的广告推送方法及系统

Also Published As

Publication number Publication date
US10595071B2 (en) 2020-03-17
WO2018028533A1 (zh) 2018-02-15
CN106210808A (zh) 2016-12-07
US20180310043A1 (en) 2018-10-25

Similar Documents

Publication Publication Date Title
CN106210808B (zh) 媒体信息投放方法、终端、服务器及系统
McDonald et al. The Netflix effect: Technology and entertainment in the 21st century
Lobato et al. The informal media economy
Uricchio The future of a medium once known as television
CN108184144B (zh) 一种直播方法、装置、存储介质及电子设备
Kavka Reality tv
Turner et al. Television studies after TV: Understanding television in the post-broadcast era
Lee et al. Second-screen theory: From the democratic surround to the digital enclosure
US8732745B2 (en) Method and system for inserting an advertisement in a media stream
CN108401175A (zh) 一种弹幕消息的处理方法、装置、存储介质及电子设备
US9861895B2 (en) Apparatus and methods for multimedia games
US20150281756A1 (en) Data session management method and system including content recognition of broadcast data and remote device feedback
US20110251902A1 (en) Target Area Based Content and Stream Monetization Using Feedback
US20120159356A1 (en) Enhanced World Wide Web-Based Communications
CN102216945B (zh) 通过媒体指纹进行联网
CN105872786B (zh) 一种在节目中通过弹幕投放广告的方法及装置
CN107659831B (zh) 媒体数据处理方法、客户端、及存储介质
CN112866787A (zh) 弹幕设置方法、装置及系统
Alvarez-Monzoncillo Watching the Internet: the Future of TV?
CN107659545B (zh) 一种媒体信息处理方法及媒体信息处理系统、电子设备
CN108171160A (zh) 一种任务结果识别方法、装置、存储介质及电子设备
Sang et al. Podcast trends and issues in Australia and beyond: Global perspectives
Rich Ultimate Guide to YouTube for Business
Barker Social TV: Multi-screen content and ephemeral culture
CN113727125B (zh) 直播间的截图方法、装置、系统、介质以及计算机设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant