CN106060578B - 生成视频数据的方法和系统 - Google Patents

生成视频数据的方法和系统 Download PDF

Info

Publication number
CN106060578B
CN106060578B CN201610192765.9A CN201610192765A CN106060578B CN 106060578 B CN106060578 B CN 106060578B CN 201610192765 A CN201610192765 A CN 201610192765A CN 106060578 B CN106060578 B CN 106060578B
Authority
CN
China
Prior art keywords
video data
section
source
data
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610192765.9A
Other languages
English (en)
Other versions
CN106060578A (zh
Inventor
拉姆·斯里尼瓦桑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Riyadh Advertising Public Ltd By Share Ltd
Original Assignee
Riyadh Advertising Public Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Riyadh Advertising Public Ltd By Share Ltd filed Critical Riyadh Advertising Public Ltd By Share Ltd
Publication of CN106060578A publication Critical patent/CN106060578A/zh
Application granted granted Critical
Publication of CN106060578B publication Critical patent/CN106060578B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8583Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6377Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746Control signals issued by the network directed to the server or the client
    • H04N21/64761Control signals issued by the network directed to the server or the client directed to the server
    • H04N21/64769Control signals issued by the network directed to the server or the client directed to the server for rate control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6582Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种将其他视频对象合并到源视频数据以生成输出视频数据的方法。该方法包括检索源视频数据以及定义了发布者使用的段大小的数据,在被发布者传送时视频数据被分割成所述段大小。该方法包括分析源视频数据以确认视频材料中包括对应于适于接收其他视频对象的区域的插入区域的被选择帧。该方法包括确认所述源视频数据的至少一个边界点。该方法包括将其他视频对象嵌入到所述被选择帧内,创建具有与被确认的边界点对应的边界的输出视频数据。该方法包括生成包括关于需要由被创建的输出视频数据替换的所述源视频数据的所述边界点的信息的元数据;以及将所述输出视频数据和所述元数据传送至发布者。

Description

生成视频数据的方法和系统
技术领域
本发明涉及生成视频数据。特别地但非排他性地,本发明涉及将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的方法和应用、计算机程序、计算机程序产品以及包括适于执行该方法的装置的系统。
背景技术
近年来,广播行业已经发生了显著变化。随着网络的兴起,基于数字网络的流媒体变得越来越受欢迎并且逐渐替代了传统电视广播。在这些变化之前,电视节目通常在电视演播厅或者外景现场被记录在录像带里。在录像带中没有文件结构,只有线性图片信息。数字技术的可用性使得媒体具有目录和文件结构。从原始捕捉材料到最终材料之间的工艺数量一直是增加的,在基于文件的域中,可能通过连结多个工艺生成工作流。
伴随着数字文件的处理,很多可用于将贴有商标的产品回顾性地嵌入到屏幕内的新工艺成为可能。这会涉及数字后加工被捕捉画面,以将例如贴有商标的饮料瓶的展示添加到桌子或货架上。
自适性串流是一种将视频传送到网络协议(IP)的设备,如智能手机,平板电脑,联网电视,笔记本电脑等的方法。在自适性串流中,视频数据以小段或小块(2S)的形式被传送。每一段被编码为多个比特率,例如400Kbps,700 Kbps和1500Kbps。根据设备在任意时刻的带宽和容量,该视频数据可将用于传送视频数据到该设备的比特率切换至更高或更低。现有不同的自适性比特率格式,HTTP实时流(用于设备)、HTTP动态流微软平滑流以及基于HTTP的动态自适应流(DASH)。根据请求该视频数据的设备,传送合适的视频数据格式。既然这些仅在格式上变化,将视频数据生成或转化为不同的视频数据格式是可能的。
已知的系统允许广告被放置在视频材料的块之间,以重复传统的“视频中”或广告休息的广告技术。然而,这一技术的缺陷在于用户可以跳过广告以及视频长度被延长。
另一种已知的系统在视频材料的帧内嵌入广告。然而,这承受的问题在于必须传输大量的视频数据,并且将广告指定到特定用户需要生成并传送多个版本的嵌入视频。这种大文件尺寸使得多个文件的传送更加耗时且效率低下。此外,当广告活动发起和结束时,发布者不能切换嵌入广告。此外,发布者不能收集该广告活动的分析。
提供一种生成视频数据的改进结构将会是被期待的。
发明内容
本发明的实施例旨在提供一种提供视频材料的装置和方法,在该视频材料中,一个或多个其他视频对象被利用自适性串流嵌入以便分发。
根据本发明一实施例,提供了一种将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的方法;方法包括检索源视频数据,该源视频数据包括视频材料的帧以及定义发布者使用的段大小的数据,在被发布者传送时视频数据被分割成该段大小;分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;基于确定视频数据在发布前被分割成的段大小的数据并基于被选择帧,确认该源视频数据的至少一个边界点;将一个或多个其他视频对象嵌入到该被选择帧内;创建包括一个或多个其他视频对象,并且具有与被确认的至少一个边界点对应的边界的输出视频数据;生成包括关于被创建的输出视频数据替换的该源视频数据的至少一个边界点的信息的元数据;以及将该输出视频数据和该元数据传送至发布者。
根据本发明另一实施例,提供了一种将输出视频数据合并到源视频数据中以生成最终视频数据的方法,该方法包括:提供源视频数据,该源视频数据包括视频材料的帧以及定义发布者使用的段大小的数据,在被发布者传送时视频数据被分割该段大小;接收来自远程位置的输出视频数据,该输出视频数据包括插入到该源视频数据的插入区域的一个或多个其他视频对象,其中该插入区域对应于适于接收其他视频对象的视频材料的被选择帧内一个或多个区域;接收来自远程位置的元数据,该元数据包括被创建的输出视频数据替换的源视频数据的至少一个边界点的信息,其中该边界点基于定义数据在发布前被分割成的段大小的数据,并基于被选择帧;将该源视频数据分割为源视频数据段并基于接收到的输出视频数据和接收到的元数据将一个或多个输出视频数据段放置在源视频数据段内,以创建最终视频数据。
根据本发明另一实施例,提供了一种将一个或多个其他视频对象合并到源视频数据中以生成输出视频数据的方法,该方法包括:检索源视频数据,该源视频数据包括视频材料的帧以及定义发布者使用的段大小的数据,在被发布者传送时视频数据被分割成该段大小;分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;基于定义视频数据在发布前被分割成的段大小的数据并基于被选择帧,确认该源视频数据的至少一个边界点;将一个或多个其他视频对象嵌入到该被选择帧内;创建输出视频数据,该输出视频数据包括:嵌入一个或多个其他视频对象的被选择帧,以及如果被选择帧位于至少一个边界点的阈值内的情况下,视频材料中位于被选择帧和至少一个边界点之间的一个或多个其他视频材料帧;生成包括与被创建输出视频数据替换的源视频数据相关的信息的元数据;以及将该输出视频数据和该元数据传送至发布者。
根据本发明另一实施例,提供了一种将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的系统。该系统包括:用于存储检索到的源视频数据的存储器,该源视频数据包括视频材料的帧以及定义发布者使用的段大小的数据,在被发布者传送时视频数据被分割成该段大小;处理器,用于分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;基于定义视频数据在发布前被分割成的段大小的数据并基于被选择帧,确认该源视频数据的至少一个边界点;将一个或多个其他视频对象嵌入到该被选择帧内;创建包括一个或多个其他视频对象,并且具有与被确认的至少一个边界点对应的边界的输出视频数据;生成包括关于被创建的输出视频数据替换的该源视频数据的至少一个边界点的信息的元数据;以及将该输出视频数据和该元数据传送至发布者。
根据本发明另一实施例,提供了一种存储有计算机可执行指令的非瞬时性计算机可读介质的系统。当被计算机设备执行时,该系统会使计算机设备执行将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的方法,方法包括:检索源视频数据,该源视频数据包括视频材料的帧以及定义发布者使用的段大小的数据;在被发布者传送时视频数据被分割成该段大小;分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;基于定义视频数据在发布前被分割成的段大小的数据并基于被选择帧,确认该源视频数据的至少一个边界点;将一个或多个其他视频对象嵌入到该被选择帧内;创建包括一个或多个其他视频对象,并且具有与被确认的至少一个边界点对应的边界的输出视频数据;生成包括关于被创建的输出视频数据替换的该源视频数据的至少一个边界点的信息的元数据;以及将该输出视频数据和该元数据传送至发布者。
附图说明
图1描述了根据一些实施例的系统的示意图;
图2描述了自适性串流的示例;
图3描述了显示根据一些实施例的与将一个或多个其他视频对象加入到源视频数据中以生成输出视频数据相关的信息流的时序图;
图4描述了VMAP格式的元数据文件;
图5描述了根据一些实施例的将输出视频数据插入到源视频数据中的序列图;
图6描述了描述根据一些实施例的将一个或多个其他视频对象合并到源视频数据中以生成输出视频数据的方法的示意图;
图7描述了根据一些实施例的多个版本的输出视频数据;
图8描述了根据一些实施例的定向过程;
图9描述了显示根据一些实施例的与将输出视频数据放置到源视频数据中以生成最终视频数据相关的信息流的时序图;以及
图10描述了根据一些实施例的将输出视频数据插入到源视频数据中的序列图。
具体实施方式
图1是显示了根据一些实施例的视频处理系统100的示意图。该视频处理系统的子系统通过一个或多个数据通信网络(未示出)连接。在一些实施例中,该子系统通过因特网互相连接。
子系统102,在这里被称为“源中心”,除其他事项外还执行视频处理系统 100的视频数据分析。例如在视频或数据带上、在数字通用光碟(DVD)上、经过高速计算机网络、通过网络、在一个或多个可移除光盘驱动或其他方式提供有一个或多个数字文件时,该源中心102可检索源视频数据。在一实施例中,该源视频数据由发布者提供。在另一实施例中,该源视频数据由内容拥有者104 提供。
该源视频数据包括视频材料的帧。设置在同一位置的视频材料的连续帧又称为镜头。
在一些实施例中,源中心102包括执行涉及源视频数据的预分析的视频数据分析模块。该分析利用可使产品数字化地置入到已有视频材料内的合适的软件来执行。
该预分析可以是完全自动的,不涉及任何人工干预。
在一些实施例中,该数据分析模块用于执行涉及源视频数据的预分析许可,以确认该源视频数据中的一个或多个镜头。这会涉及到应用镜头检测和/或连续性检测,现对该镜头检测和连续性检测进行更详细的描述。
预分析涉及利用视频格式检测算法确认该源视频数据的格式,并且如果必要,将源视频数据转换为可以接收一个或多个其他视频对象的格式。
预分析涉及利用镜头检测函数确认视频数据中不同镜头间的边界。例如,该视频数据分析模块102a自动检测不同镜头之间的“硬”和“软”切换,这分别对应于硬过渡和软过渡。硬切换对应于视频数据中两连续帧之间视觉相似度的突然变化。软镜头切换对应于软过渡(例如划变和叠象渐变过渡)的开头或结尾,软过渡的特征在于多个帧之间具有明显却渐变的视频显示。
预分析可包括利用连续性检测函数确认视频数据中的相似镜头(如果检测到)。这可用于最大化在给定场景中的每个(类似的)镜头都被确认的可能性——这在数字化产品的放置的情形下是有益的。对于每一个检测到的镜头,镜头相似度算法自动检测源视频数据内视觉上相似的镜头。该相似度检测是基于帧间匹配的,其捕捉背景和布光的整体全局相似度。它可用于确定给定场景的部分镜头,从而加快选择镜头的进程,该镜头在彼此相似的基础上应该归并在一起。
预分析可包括利用对象和/或区域模板识别函数和/或人脸检测和识别函数。对象模板识别涉及确认例如在电视节目的多集里重复出现的对象,以及适于数字化产品置入的对象,从而在该节目的其他集中可以自动发现该对象。区域模板识别可使模板专用于电视节目的某区域并且在该节目的后续剧集中自动检测该区域的显示。区域为在节目的多集中规则显示的位置(例如房间)。人脸检测和识别涉及确认例如在电视节目的多集中重复显示的角色。这使得角色与特定的数字化产品位置相关联。
预分析可包括利用跟踪(如2D点跟踪)函数来检测和跟踪视频数据中的多个点特征。这涉及利用跟踪算法来检测和跟踪连续帧之间的特征点。特征点对应于图像中在视觉显示上具有特征的位置;换言之,它们表现出较强的对比度 (如暗角落或者亮背景)。通过比较位置附近像素的相似度寻找特征在下一帧中的位置以跟踪特征。
预分析可包括利用平面跟踪函数以随时间跟随图像区域并且在假定表面为平面的情况下确定它们的移动。这可能涉及跟踪由样条定义的2D区域,计算它们的2D转化、旋转、缩放、剪切以及通过视频数据投影缩减。该过程创建了可供其他视频分析函数利用的移动信息。
预分析可包括利用跟踪2D点的相对-特征-移动检测函数来确定视频数据中的2D移动。给定一组跟踪特征点,相对-特征-移动检测涉及根据相同的刚体移动检测哪些点一起移动。
预分析可包括利用涉及使用跟踪2D点的3D跟踪函数来确定视频数据中的 3D移动。3D跟踪涉及从视频镜头中提取几何信息,例如相机移动时的焦距、位置和方位。其他恢复信息为该视图场景的3D形状,用3D点表示。
预分析可包括利用自动密钥函数分离背景和前景区域,使产品数字地放置的同时不妨害任何遮挡(前景)对象,以提供看起来自然的嵌入图像。当前景对象在预期被用数字手段放置产品的背景的前方移动时,产品欲放置所在的区域应该停在前景和背景区域间的边界上。一般地,用数字手段放置的产品应该覆盖该背景区域的“屏蔽”区域。当该前景对象非常细节化或者模糊时,创建正确的屏蔽是尤其困难的。该自动密钥算法利用平面跟踪器创建移动信息,从而已知的背景或前景区域可以及时通过视频向前和向后传送。
预分析可包括用于将该视频数据分割成跨越时间和空间的区域分段。区域分段涉及利用检测给定视频数据的帧内部和之间的类似像素的区域的算法,例如用于为运动评估选择点特征。
预分析可包括使用黑界检测函数,该黑界检测函数用于寻找视频数据的视频图像部分周围的边界。这涉及利用检测视频序列中的帧附近的黑条的存在的算法,该黑条会干扰多个视频处理算法。
预分析可包括代理创建,该代理创建涉及创建低分辨率和/或压缩版本的源视频数据。
该源中心分析该源视频数据,以寻找该源视频数据中适于接收一个或多个其他视频部分的区域。该源视频中的适于接收其他视频数据的该区域又被称为插入区域。
在一实施例中,该源中心102还被用于该视频处理系统100中的创造性工作。
该源中心102提供有模块,如用于当被数字化置位的产品添加到视频资料中时,确定被数字化置位的产品的位置应该如何变化,例如考虑到记录该视频材料的相机的任何移动。跟踪可以是自动的和/或涉及人工干预的。
该源中心102还包括屏蔽模块。该屏蔽模块用于评估在考虑到可能已经存在于该视频材料的其他对象的情况下,如何处理将要数字化地放置在视频材料中的产品的遮挡物(如果存在)。屏蔽评估可以是自动的和/或涉及人工干预的。
源中心102还包括外观造型模块。该外观造型模块用于提供数字化放置的产品的理想的外观,例如利用模糊、纹理、加亮、3D照明和其他效果。外观造型可以是自动的和/或涉及人工干预的。
子系统106表示适于存储视频数据的数据存储。
子系统108表示用于将视频编码为一个或多个比特率的编码器。该编码器 108可以接收来自于源中心102的视频数据,压缩该视频并将该视频数据转换成一种或多种格式。
子系统110和112分别表示原始服务器和内容传递网络(CDN)。CDN允许数据通过网络更有效率地传送并且其在现有技术中是已知的。
子系统114,又被称为“发布者”,除其他事项外还执行视频发布。发布者的一个示例为“”。发布者允许用户通过网络访问视频文件。
子系统122、124和126分别表示流管理器、广告决策系统和广告策略管理器,并且在下文会更详细地描述。
传统的视频流技术,如实时流协议(RTP)以及窗口媒体HTTP流协议 (MS-WMSP)包含将以统一比特率编码的数据包的稳定流传送给客户端的服务器,客户端如116、118和120。该服务器仅以视频编码的比特率传送数据包给客户。例如,如果源视频以500Kbps被编码,则视频会以500Kbps被串流。此外,服务器仅传送足够的数据包以填充客户端的缓存。该客户端的缓存通常介于 1-10秒之间,这表示即使客户端暂停流视频,仅1-10秒的视频材料被下载到客户端。
即看式下载先进于传统的流技术,原因在于即看式下载允许在整个视频文件已下载之前可以在客户端播放流视频。即看式下载可得到大多媒体播放器和平台的支撑,并且基于简单的下载形式操作HTTP网络服务器。不同于传统的流,当视频暂停时,余下的视频会被继续下载到客户端。
图2描述了自适性串流。自适性串流通过将视频数据202分割成多个“块”或“段”,如A2、B2、C2等工作。这些段是一致的,并且通常在2s到10s之间。该统一的段规则的例外为最后一段的大小与其他段的大小不一致。或者,该段大小可以通过视频材料的帧数确定。在一个实施例中,该段大小介于50帧到250 帧。该段大小由发布者确定,并且依发布者传送平台和内容类型(实时、VoD等)而变化。该发布者提供数据到确定该发布者使用的段大小的源中心,最终视频数据在传送前被分割成该段大小。
每个段被编码器编码为至少两个比特率。在图2中,该视频数据被编码成三个比特率,分别用204、206和208表示。在一些实施例中,每个段被编码成具有不同质量的介于3到14个不同的比特率。在一实施例中,每个段被编码为三个比特率:400Kbps、700Kbps和1500Kbps。
客户端可以根据客户端可用网络容量在不同比特率编码的段间选择。如果客户端具有高带宽容量,则选择较高比特率编码的段,并且该视频数据以更高的质量串流。如果网络带宽下降,则客户端可选择较低比特率的段。在即看式下载中,如果用户暂停视频,则视频数据会继续下载。在图2示例中,前两个段从编码视频数据204中选择。下一个段从编码视频数据206等中选择。
每个段以解码立即刷新(IDR)帧开始。该IDR帧作为该段中其他视频帧的参考帧。由于段中剩余的帧参考IDR帧,可采用压缩技术压缩该段视频数据。随后的帧可以利用IDR帧进行解码,并且在这之前不需要任何其他信息。如果该IDR帧丢失,则段中剩余的帧不会播放。在一实施例中,该段大小等于该IDR 帧的间隔。
自适性串流允许客户端以适于当前网络情况的速度下载视频数据,并且从而降低了在客户端缓存中视频段不足以继续播放的风险。自适性串流为将输出视频数据插入到源视频数据以生成最终视频数据提供了平台,该输出视频数据包括一个或多个其他视频对象,如广告部分。
图3显示了根据一些实施例,与将一个或多个其他视频对象添加到源视频数据中以生成输出视频数据相关的信息流的时序图。
在步骤3a中,源中心301检索源视频数据。在一个实施例中,从发布者中检索源视频数据。在一个实施例中,从内容生成器304中检索源视频数据。该源视频数据包括视频材料的帧以及确定发布者使用的段大小的数据,其中视频数据在发布前被分割。该段大小可以按时间段或者帧的数量确认。在一个实施例中,源视频数据包括插入区域的最小允许长度的信息。如果该插入区域小于最低允许长度,则其他视频对象不会嵌入到该源视频数据中。
在步骤3b中,源中心302分析视频材料以确认该源视频数据中适于接收一个或多个其他视频对象的“插入区域”或区域。
在一个实施例中,在源视频材料的镜头中确认插入区域之后,分析剩余的源视频材料以确认该插入区域是否出现在该源视频材料的一个或多个镜头中。确认插入区域所在的帧被称为被选择帧。
在步骤3c中,源中心302基于确定视频数据在发布前被分割成的段大小的数据以及基于被选择帧计算至少一个边界点的位置。该边界点对应于由发布者在发布之前生成的最终视频数据的一个段的起始点。该边界点表示一个段的最早边界,该段中被选择帧会发生在最终视频数据中。在一实施例中,该边界点包括IDR帧。在一个实施例中,该源视频数据包括关于该源视频数据中的帧频的数据。在一实施例中,该源中心提供与该源视频数据相较具有不同帧频的输出视频数据。因此,该源中心需要将帧频之间的差异合并到识别边界点和提供输出视频数据的步骤中。
在一示例中,该插入区域已被确认所在的被选择帧从该源视频数据的起始的8.5s到9.5s之间发生,并且该发布者提供段大小为2s的信息,然后在本示例中,该源中心302计算边界点发生在8s。
在一示例中,该被选择帧发生在9.5s和10.5s之间,而段大小为2s,然后同样地,边界点发生在8s。
计算该边界点以确保由该源中心302生成的该输出视频数据符合该发布者的要求,如它们的自适性串流设置。由于在每个边界点处具有IDR帧,替换最终视频数据的整个段而非一部分段是重要的。通过计算该段的边界点,该源中心302可以计算除被选择帧外,还需要将多少帧包括在该输出视频数据中,从而被提供的输出视频数据对应于多个段大小。替换整个段而非段的一部分意味着由发布者将输出视频数据包括到该源视频数据内更容易些。在一个实施例中,在源视频数据中的每个段中有两个边界点被确认,第一个对应于该段的第一帧并包括IDR帧,第二边界点对应于该段的最后一帧,该最后一帧位于下一个IDR 帧的前一帧。
在步骤3d中,一个或多个其他视频对象被嵌入到被选择帧内。在一实施例中,该一个或多个其他对象嵌入到该源视频数据是在源中心302自身中执行的。在一替换性实施例中,该源视频数据和该一个或多个其他视频对象被提供到一个或多个远程中心,例如一创造性中心以执行该嵌入。在远程位置提供中心可使资源更有效地发布,例如通过将该远程中心定位在较大的劳动力储备库附近。
在步骤3e中,创建输出视频。该输出视频包括一个或多个输出视频数据段。该输出视频数据可包括非被选择帧的一个或多个帧。原因在于该输出视频数据的边界对应于在发布前会被发布者分段的最终视频数据的边界是重要的。在上述示例中,插入区域位于8.5s至9.5s之间,并且段大小为2s的被选择帧集合中,边界点发生在8s。为了确保输出视频数据具有对应于边界点的边界,发生在8s 到8.5s之间的视频帧也将被包括在该输出视频数据内,即使在本示例中,它们不包括插入区域。
在上述第二示例中,其中插入区域存在于发生在9.5s到10.5s之间的帧中,相关的边界点也是8s。该边界点为8s而非10s的原因是该输出视频的一部分会发生在8s和10s之间的段,该部分会相对于8s处发生的IDR帧被编码。在本示例中,8s到9.5s之间的视频帧还会被包括在该输出视频数据内。此外,被选择帧结尾和下一边界点之间的帧也会被包括,例如10.5s至12s之间的帧。在一实施例中,输出视频数据的大小对应于发布者提供的段的尺寸。在另一实施例中,该输出视频数据对应于由发布者提供的段的大小的多倍。
由于该输出视频数据的持续时间远小于该源视频数据,输出视频数据的文件大小更小,并且因此传送该输出视频数据比传送该源视频数据更容易。
在步骤3f中,创建元数据,该元数据提供关于被该输出视频数据替换的该源视频数据的至少一个边界点的信息。该元数据包括时间信息,包括该边界点的时间。在一实施例中,该元数据包括关于该输出视频数据的时间长度的时间信息。在一实施例中,该元数据包括该输出视频数据的帧数的信息。
在一实施例中,该元数据包括跟踪像素的数据。该跟踪像素用于传送由于输出视频数据被播放而导致的信息。这些跟踪像素可放置在该输出视频数据的起点,或者该输出视频数据的整个过程的任何点处。该跟踪像素可收集关于特定广告在输出视频数据中播放的次数的数据,这可用于计费目的。如果不止一个跟踪像素被包含在该元数据中,该跟踪像素可用于在该输出视频数据的开始、中间和结尾点火,然后可以收集关于该输出视频数据的开始、中间和结尾的次数的数据。
在一实施例中,该元数据为视频多广告播放列表(VMAP)格式。VMAP 为交互式广告局(IAB)的标准。VMAP为XML格式,通常用于为传统的视频前和视频中广告描述广告目录插入的结构。视频前广告为视频帧的集合,该视频帧并非源自源视频数据;视频帧用于在最终视频数据提供给用户前播放。视频中广告类似于视频前广告,但是视频中广告在该最终视频数据的帧间隔之间播放。
VMAP文件被如DoubleclickTM等公司使用。VMAP和被称为视频广告供应模板(VAST)的另一标准结合使用。VAST为另一基于XML 的标准,用于将广告提供到在线数字视频播放器。VMAP文件与该VAST标准结合使用。
随着这些标准在行业中建立,它们用于向广大观众提供广告。元数据的应用与VMAP用于指定视频中和视频前信息的方式不完全相同,由于输出视频数据与传统的视频前或视频中应用方式不同。图4显示了VMAP格式的元数据文件的示例。
图4中的标记1显示了将要插入到源视频数据内的输出视频数据的信息。该元数据提供关于输出视频数据和嵌入到输出视频数据的其他视频数据的数据的信息。该元数据可提供关于输出视频数据的位置的信息,例如URL地址。
图4中标记2显示了将输出视频数据插入到源视频数据中的时间码的信息。图4中标记3显示了输出视频数据的持续时间的信息。例如如果输出视频数据持续时间为14秒,而发布者使用的标准段大小为2秒,则输出视频数据由7段组成。图4中标记4显示了输出视频数据视频文件的信息。图4中标记5显示了当达到该输出视频数据的特定时刻时会点火的点火像素的信息。这些时刻可以是输出视频数据的开始,输出视频数据或者该输出视频数据的结尾的1秒内。在一实施例中,元数据被提供到流管理器。该流管理器可以管理客户端的播放列表和流。在另一实施例中,由于该元数据为VMAP格式,因此元数据可直接被播放器使用。
在步骤3g中,输出视频数据和元数据被传送给发布者。
图5显示了将输出视频数据插入到源视频数据的序列图。在S500中,检索到源视频数据。在S502中,基于发布者提供的段大小的数据,在源视频数据内确认边界点。该边界点表示基于发布者提供的段大小的数据,该视频数据在发布前会被分割成的段。该源视频数据在此阶段不必要分割。
在S504中,源中心分析该源视频数据以确认该源视频数据中的一个或多个插入区域。一个或多个插入区域被确认的被选择帧用b’和de’表示。被选择帧b’对应于段B,因此边界点出现在段A和B之间的边界。被选择帧de’对应于段D和 E,因此边界点出现在段C和D之间的边界。
在S506中,其他视频数据被嵌入到该被选择帧内,包括该一个或多个其他视频对象的输出视频数据被创建。该输出视频数据的边界对应于被确认的至少一个边界点的边界。在S506中,该段B’包括一个或多个已嵌入其他视频对象的帧,还包括一个或多个没有添加其他视频对象的帧。段B’的大小对应于段B的大小,段B在最终视频数据中被B’替代。通过匹配段B’和B的大小,替代段的过程变得更简单。
段D’和E’包括一个或多个已嵌入其他视频对象的被选择帧,也包括一个或多个未添加其他视频对象的被选择帧。该段D’和E’的大小对应于段D和E的大小;段D和E在最终视频数据中被D’和E’替代。
S508显示了最终视频数据,该最终视频数据显示了输出视频数据的段B’、 D’和E’替代了源视频数据的段B、D和E。关于包括B’、D’和E’的输出视频数据的段的位置信息被传送到该元数据的发布者。
在S508中所示的最终视频数据发布之前,该最终视频数据在发布者处被分割成段。该段被编码成多种比特率并利用自适性串流技术被传送到客户端。
在一个实施例中,输出视频数据被分割成段并且在源中心被编码。如图6 所示,每个段在源中心被编码成多个比特率。图6显示了段B’、D’和E’,该段B’、 D’和E’分别以第一比特率被编码为第一版本的输出视频数据,用B1、D1和E1 表示。图6还显示了被编码为一个或多个比特率的输出视频数据,用B2、D2和 E2以及B3、D3和E3表示。该编码输出数据被提供到发布者,并且该发布者可基于对应的元数据将段插入到源视频数据内。
定向广告涉及根据用户特征将不同的广告部分提供给不同的用户。图7显示了多个版本的输出视频数据根据一些实施例被创建的示例,该输出视频数据的一个或多个其他版本包括不同于插入到其他版本的输出视频数据种的一个或多个其他对象的一个或多个其他视频对象。步骤700对应于图5所示的步骤S504,其中插入区域b’和de’已经在该源视频数据中被确认。
在步骤702中,创建了三个版本的输出视频71、72和73。该输出视频数据71 中,对应于第一组其他视频数据的第一广告部分被插入以生成第一版本的输出视频数据。该输出视频数据72中,对应于第二组其他视频数据的第二广告部分被插入以生成第二版本的输出视频数据。该输出视频数据73中,对应于第三组其他视频数据的第三广告部分被插入以生成第三版本的输出视频数据。该三个版本的输出视频数据被传送到发布者。
上文所述且如图7所示的方法可创建具有多种生成版本的输出视频数据。例如,如果3个变化的其他视频数据被嵌入到源视频数据中,以在22分钟的源视频数据中创建6s长的输出视频数据,则该4个输出视频数据的总长度依然为 6*3=18s,相比之下,源视频数据为1320s。可以想到,在相同的内容中放置有不同的品牌被传送到不同的人群、位置或用户。
在实施例中,发布者包括广告策略管理器、广告传送系统以及流管理器。该广告策略管理器制定何时传送各种变化的一般规则,例如可向富人区定向高端汽车的广告。该广告传送系统分析用户文件的特点以确定广告策略管理器设定的哪种规则。该流管理器结合用户的客户端设备操作,并将清单文件提供给客户端设备,该清单文件列举将要提供给客户端设备的内容。
图8显示了根据一些实施例的定向过程。该源中心802创建了三个版本的输出视频数据804、806和808。输出视频数据804包括一个或多个第一视频对象。输出视频数据806包括一个或多个第二视频对象。输出视频数据808包括一个或多个第三视频对象。这三个版本的输出视频数据804、806和808由发布者编码和缓存。当用户818从发布者播放器816处请求视频内容时,该播放器从流管理器 812处请求清单文件。该流管理器联系广告决策系统814,该广告决策系统814 然后分析用户818的文件并且基于广告策略系统810制作的规则选择定向广告,该广告策略系统810可访问输出视频数据804、806和808。该被选择广告已经被嵌入的对应编码输出视频数据被添加到清单文件。该组合的清单文件然后被传送到播放器,播放器随后无缝播放包括作为该最终视频数据一部分的被选择广告的输出视频数据。该广告决策系统可为每个用户818、820和822选择不同的广告。
定向广告满足特定地理位置、特定设备或者特定观众的需求。在一实施例中,在单个广告活动中,每一个定向版本具有不同版本的输出视频数据。这些版本不同点在于嵌入到输出视频数据中的广告内容。例如,输出视频数据版本1 可包括辣茄酱品的产品,而输出视频数据版本2可包括奶酪(Quezo)口味的产品。具体为观众提供哪种版本的输出视频数据由广告决策系统决定。
图9显示了一个时序图,该图显示了根据一些实施例,将输出视频数据放置入源视频数据相关的信息流。
在步骤9a中,包括视频资源的帧以及定义由发布者使用的段大小的数据的源视频数据被提供至源中心。该源视频数据可由一个或多个内容生成者创建并且被提供给发布者。该源视频数据包括视频材料的帧和定义由发布者使用的段大小的数据;该输出视频数据在被发布者传送前被分割成该段大小。如上所述,源视频数据在发布供使用前利用自适性比特流被分割成段。
在步骤9b中,该发布者接收来自于远程位置,如中心源的输出视频数据,该输出视频数据包括插入到源视频数据的插入区域中的一个或多个其他视频对象,其中该插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域。在一实施例中,该其他视频对象为广告部分。该输出视频数据还可包括其中不包括其他视频对象的视频材料的一个或多个帧;包括其中不包括其他视频对象的视频材料的一个或多个帧的原因在于延伸了该输出视频数据的边界以对应于数据在发布前被分割成的段的一个或多个边界点。
在步骤9c中,发布者接收来自于远程位置的元数据,该元数据包括被创建的输出视频数据替换的源视频数据的至少一个边界点的信息。该元数据包括时间信息,该时间信息包括边界点的时间。在一实施例中,该元数据包括关于输出视频数据的时间长度的时间信息。在一实施例中,该元数据包括关于输出视频数据的帧数的信息。
在一实施例中,该元数据包括跟踪像素的数据。该跟踪像素用于传送由于输出视频数据被播放而导致的信息。这些跟踪像素可放置在该输出视频数据的起始,或者该输出视频数据的整个过程的任何点处。该跟踪像素可收集关于特定广告播放的次数的数据。如果不止一个跟踪像素被包含在该元数据中,该跟踪像素可用于在该输出视频数据的开始、中间和结尾点火,然后可以收集关于该输出视频数据的开始、中间和结尾的次数的数据。在一实施例中,该元数据为视频多广告播放列表(VMAP)格式。
该边界点基于定义根据发布前被分割成的段大小的数据,并且基于被选择帧。
在步骤9d中,该源视频数据被分割成源视频数据段。该源视频数据段的大小对应于提供到远程位置的段的大小相关的数据。基于接收到的输出视频数据和接收到的元数据,该一个或多个输出视频数据段被进入到该源视频数据段,以创建最终视频数据。
在一实施例中,该最终视频数据的段被编码为第一比特率的第一版本的最终视频数据;并且该一个或多个其他版本的最终视频数据的段被编码为一个或多个其他比特率。在一些实施例中,每个段被编码为3至14个具有不同质量的不同的比特率。在一实施例中,各段被编码为3个比特率:400Kbps、700Kbps和 1500Kbps。
客户端现在可以根据客户端可用的网络容量选择以不同比特率编码的段。如果客户端具有高宽带容量,则选择以高比特率编码的段并且该视频数据以较高质量被串流。如果网络带宽降低,则客户端可以选择较低的比特率段。
在一实施例中,创建了多个版本的输出视频数据。对应于第一组其他视频数据的第一广告部分被插入,以生成第一版本的输出视频数据。对应于第二组其他视频数据的第二广告部分被插入,以生成第二版本的输出视频数据。对应于第三组其他视频数据的第三广告部分被插入,以生成第三版本的输出视频数据。可能有不止三个版本的输出视频数据被创建。在实施例中,该广告决策系统基于广告策略管理器设定的规则分析用户文件并选择定向广告。该嵌入被选择广告的对应编码输出视频数据然后被添加到清单文件。该缝合的清单文件然后被传送到播放器,播放器随后无缝播放包括作为该最终视频数据一部分的被选择广告的输出视频数据。该广告决策系统可为每个用户选择不同的广告。
定向广告满足特定地理位置、特定设备或者特定观众的需求。在一实施例中,在单个广告活动中,每一个定向版本存在不同版本的输出视频数据。这些版本的不同点在于嵌入到输出视频数据中的广告内容。例如,输出视频数据版本1可包括辣茄酱品的产品,而输出视频数据版本2可包括奶酪(Quezo)口味的产品。具体为观众提供哪种版本的输出视频数据由广告决策系统决定。
图10描述了根据一些实施例将输出视频数据插入到源视频数据的序列图。步骤S1000、S1002和S1004对应于S500、S502和S504。在S1000中,检索到源视频数据。在S1002中,基于发布者提供的段大小的数据,在源视频数据内确认边界点。该边界点表示基于发布者提供的段大小的数据的,该视频数据在发布前将会被分割成的段。该源视频数据在此阶段不必要分割。
在S1004中,源中心分析该源视频数据以确认该源视频数据中的一个或多个插入区域。一个或多个插入区域被确认的被选择帧用b’和de’表示。被选择帧b’对应于段B,因此边界点发生在段A和B之间的边界。被选择帧de’对应于段D和 E,因此边界点发生在段C和D之间的边界。
在S1006中,其他视频数据被嵌入到该被选择帧内,包括该一个或多个其他视频对象的输出视频数据被创建。然而,与S506对比,输出视频数据的边界不必对应于被确认的至少一个边界点的边界。相反地,如果被选择帧与至少一个边界点有预先确定的相近关系,则输出视频数据段的边界会被延伸。该输出视频数据的边界可以通过将一个或多个其他帧包括到不包括一个或多个其他对象的输出视频数据段内进行调节。如果被选择帧与至少一个边界点有预先确定的相近关系,不包括一个或多个其他对象的一个或多个其他帧会包括到输出数据段中。在一实施例中,该预先确定的相近关系基于帧数。在一实施例中,如果被选择帧在该100帧的边界点内,则不包括一个或多个其他对象的一个或多个其他帧会包括到输出数据段中。在一实施例中,如果被选择帧在该10帧的边界点内,则不包括一个或多个其他对象的一个或多个其他帧会包括到输出数据段中。
在一实施例中,预先设定的相近关系是基于时段的。在一实施例中,如果被选择帧在0.5秒的边界点内,不包括一个或多个其他对象的一个或多个其他帧会被包括在该输出数据段中。在一实施例中,如果被选择帧在0.1秒的边界点内,不包括一个或多个其他对象的一个或多个其他帧会被包括在该输出数据段中。
在S1006的示例中,输出视频数据段DE’不在该至少一个边界点的预先确定的相近关系内,并且因此一个或多个其他视频帧未被包括并且该输出视频数据段DE’未被延伸到边界。输出视频数据段B’位于该至少一个边界点的预先确定的相近关系内,在本例中边界位于A和B之间。因此,不包括一个或多个其他对象的一个或多个其他帧会包括在该输出数据段B’内。
和S506一样,关于包括B’、D’和E’的输出视频数据的段位于何处的信息被传送到元数据中的发布者。
S1008显示了最终视频数据,该最终视频数据显示了输出视频数据的段B’、 D’和E’替代了源视频数据的段B、D和E。关于包括B’、D’和E’的输出视频数据的段位于何处的信息被传送到该元数据中的发布者。
在本实施例中,由于并非所有的段被替换,一个或多个其他IDR帧被创建并插入到每个新创建的段的前方。需要新IDR帧的位置的示例由图10中的X和Y 表示。该新IDR帧由发布者创建。

Claims (22)

1.一种将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的方法,其特征在于,所述方法包括:
检索源视频数据,所述源视频数据包括:视频材料的帧;以及定义了发布者使用的段大小的数据,所述段大小定义了在被发布者传送时视频数据被分割成的一个或多个段的大小;
分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中所述插入区域对应于视频材料的所述被选择帧内的一个或多个区域,每个被选择帧适用接收其他视频对象;
基于定义视频数据在发布前被分割成的段大小的数据并且基于所述被选择帧,确认所述源视频数据的至少一个边界点,其中所述至少一个边界点表示在被所述发布者传送时视频数据被分割成的所述一个或多个段,所述至少一个边界点对应所述被选择帧所存在的所述视频数据的段的起点;
将一个或多个其他视频对象嵌入到所述被选择帧内;
创建输出视频数据,所述输出视频数据包括具有被嵌入的一个或多个其他视频对象的被选择帧,其中,所述输出视频数据的所述起点与所述源视频数据的被确认的至少一个边界点对应,所述输出视频数据包括足够的所述源视频数据的非被选择帧的其他帧,使得所述输出视频数据对应于所述段大小的至少一倍或多倍的倍数;
生成包括指示所述源视频数据的至少一个边界点的信息的元数据,其中,可由所述输出视频数据替换的所述源视频数据的部分可由所述源视频数据的至少一个边界点指示;以及
将所述输出视频数据和所述元数据传送至发布者。
2.根据权利要求1所述的方法,其特征在于,所述元数据包括:
表示所述源视频数据的至少一个边界点的时间的时间信息;
表示所述输出视频数据的时间长度的时间信息;
关于所述输出视频数据的帧数的信息。
3.根据权利要求1所述的方法,其特征在于,当被所述发布者传送时,视频数据被分割成的段大小是一致的。
4.根据权利要求1所述的方法,其特征在于,当被所述发布者传送时,视频数据被分割成的段大小由时间段确定。
5.根据权利要求1所述的方法,其特征在于,当被所述发布者传送时,视频数据被分割成的段大小由视频材料的帧数确定。
6.根据权利要求1所述的方法,其特征在于,所述输出视频数据被分割成用于自适性串流中的段。
7.根据权利要求1所述的方法,其特征在于,所述源视频数据的至少一个边界点包括解码立即刷新(IDR)帧。
8.根据权利要求1所述的方法,其特征在于,所述元数据包括关于输出视频数据的时间长度的信息。
9.根据权利要求1所述的方法,其特征在于,被检索的源视频数据基于与所述发布者提供的段大小有关的检索数据被分割成段;所述方法包括确认对应于被确认的被选择帧的段。
10.根据权利要求8所述的方法,还包括:
将第一版本的输出视频数据编码为第一比特率;以及
将一个或多个其他版本的输出视频数据编码为不同于第一比特率的一个或多个比特率。
11.根据权利要求1所述的方法,其特征在于,所述元数据被包括在视频多广告播放列表(VMAP)文件中。
12.根据权利要求1所述的方法,其特征在于,所述元数据包括跟踪像素,所述跟踪像素用于对被播放器播放的所述输出视频数据做出响应而使信号从所述播放器被传送。
13.根据权利要求1所述的方法,其特征在于,包括创建一个或多个其他版本的输出视频数据,所述一个或多个其他版本的输出视频数据包括不同于插入到其他版本的输出视频数据的一个或多个其他对象的一个或多个其他视频对象。
14.根据权利要求13所述的方法,其特征在于,基于用户相关的一个或多个特征,选择将一个版本的输出视频数据包含到所述源视频数据内。
15.根据权利要求14所述的方法,其特征在于,与所述用户相关的一个或多个特征包括用户人群和/或用户位置。
16.一种将输出视频数据合并到源视频数据中以生成最终视频数据的方法,其特征在于,所述方法包括:
提供源视频数据至远程位置,所述源视频数据包括:视频材料的帧;以及定义了发布者使用的段大小的数据,所述段大小定义了在被发布者传送时视频数据可被分割的一个或多个段的大小;接收来自所述远程位置的输出视频数据和元数据,使用根据权利要求1至15任一项所述的方法生成所述输出视频数据和所述元数据;
基于所述段大小将所述源视频数据分割为源视频数据段;并
基于接收到的输出视频数据和接收到的元数据将一个或多个输出视频数据段放置在源视频数据段内,以创建最终视频数据。
17.根据权利要求16所述的方法,其特征在于,还包括:
将第一版本的最终视频段编码为第一比特率;并且将一个或多个其他版本的最终视频段编码为一个或多个其他比特率;以及
接收来自客户端的请求以串流最终视频数据;为所述客户端提供第一编码版本以及一个或多个其他编码版本的最终视频数据段。
18.根据权利要求17所述的方法,其特征在于,包括创建一个或多个其他版本的最终视频数据;所述一个或多个其他版本的最终视频数据包括不同于插入到其他版本的最终视频数据的一个或多个其他对象的一个或多个其他视频对象。
19.根据权利要求18所述的方法,其特征在于,基于用户相关的一个或多个特征,选择一个版本的最终视频数据提供给用户。
20.根据权利要求19所述的方法,其特征在于,与所述用户相关的一个或多个特征包括用户人群和/或用户位置。
21.一种将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的系统,其特征在于,所述系统包括:
用于存储检索到的源视频数据的存储器,所述源视频数据包括:视频材料的帧;以及定义了发布者使用的段大小的数据,所述段大小定义了在被发布者传送时视频数据被分割成所述段大小;
处理器,用于:
分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;
基于定义视频数据在发布前被分割成的段大小的数据并且基于被选择帧,确认所述源视频数据的至少一个边界点,其中所述至少一个边界点表示在被所述发布者传送时视频数据被分割成的所述一个或多个段,所述至少一个边界点对应所述被选择帧所存在的所述视频数据的段的起点;
将一个或多个其他视频对象嵌入到所述被选择帧内;
创建输出视频数据,所述输出视频数据包括具有被嵌入的一个或多个其他视频对象的被选择帧,其中,所述输出视频数据的所述起点与所述源视频数据的被确认的至少一个边界点对应,所述输出视频数据还包括足够的所述源视频数据的非被选择帧的其他帧,使得所述输出视频数据对应于所述段大小的至少一倍或多倍的倍数;
生成包括指示所述源视频数据的至少一个边界点的信息的元数据,其中,可由所创建的输出视频数据替换的所述源视频数据的部分可由所述源视频数据的至少一个边界点指示;以及
将所述输出视频数据和所述元数据传送至发布者。
22.一种存储有计算机可执行指令的非瞬时性计算机可读介质,其特征在于,当被计算机设备执行时,所述介质会使所述计算机设备执行将一个或多个其他视频对象合并到源视频数据以生成输出视频数据的方法,所述方法包括:
检索源视频数据,所述源视频数据包括:视频材料的帧;以及定义了发布者使用的段大小的数据,所述段大小定义了在被发布者传送时视频数据被分割成的一个或多个段的大小;
分析源视频数据以确认视频材料中包括一个或多个插入区域的被选择帧;其中插入区域对应于适于接收其他视频对象的视频材料的被选择帧内的一个或多个区域;
基于定义视频数据在发布前被分割成的段大小的数据并基于被选择帧,确认所述源视频数据的至少一个边界点,其中所述至少一个边界点表示在被所述发布者传送时视频数据被分割成的所述一个或多个段,所述至少一个边界点对应所述被选择帧所存在的所述视频数据的段的起点;
将一个或多个其他视频对象嵌入到所述被选择帧内;
创建输出视频数据,所述输出视频数据包括具有被嵌入的一个或多个其他视频对象的被选择帧,其中,所述输出视频数据的所述起点与所述源视频数据的被确认的至少一个边界点对应,所述输出视频数据还包括足够的所述源视频数据的非被选择帧的其他帧,使得所述输出视频数据对应于所述段大小的至少一倍或多倍的倍数;
生成包括指示所述源视频数据的至少一个边界点的信息的元数据,其中,所述源视频数据的部分可由所创建的输出视频数据替换;以及
将所述输出视频数据和所述元数据传送至所述发布者。
CN201610192765.9A 2015-04-03 2016-03-30 生成视频数据的方法和系统 Active CN106060578B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/678,780 2015-04-03
US14/678,780 US9438936B1 (en) 2015-04-03 2015-04-03 Producing video data

Publications (2)

Publication Number Publication Date
CN106060578A CN106060578A (zh) 2016-10-26
CN106060578B true CN106060578B (zh) 2019-08-13

Family

ID=55661295

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610192765.9A Active CN106060578B (zh) 2015-04-03 2016-03-30 生成视频数据的方法和系统

Country Status (3)

Country Link
US (3) US9438936B1 (zh)
EP (1) EP3076681B1 (zh)
CN (1) CN106060578B (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9438936B1 (en) * 2015-04-03 2016-09-06 Mirriad Limited Producing video data
EP3351003B1 (en) 2015-09-15 2021-07-14 InterDigital Madison Patent Holdings, SAS Method and apparatus for providing power saving media content
US11146837B2 (en) * 2017-12-08 2021-10-12 Hulu, LLC Audience location for media programs in live linear programming
US10705985B1 (en) * 2018-03-12 2020-07-07 Amazon Technologies, Inc. Integrated circuit with rate limiting
CN109688433A (zh) * 2018-11-22 2019-04-26 深圳艺达文化传媒有限公司 基于画面的剪切视频方法及相关产品
US11611798B2 (en) * 2019-04-05 2023-03-21 Sony Interactive Entertainment LLC IDR fracking for glass to glass latency reduction
EP3742738B1 (en) * 2019-05-24 2021-09-08 Mirriad Advertising PLC Incorporating visual objects into video material
US11546647B2 (en) * 2019-06-07 2023-01-03 Roku, Inc. Content-modification system with probability-based selection feature
CN112218128B (zh) * 2019-07-12 2022-05-03 腾讯科技(深圳)有限公司 广告视频的播放方法、播放客户端及可读存储介质
CN111079527B (zh) * 2019-11-07 2023-06-06 北京航空航天大学 一种基于3d残差网络的镜头边界检测方法
US11297358B2 (en) 2020-01-02 2022-04-05 Synamedia Limited Video distribution systems and methods
KR20210107480A (ko) * 2020-02-24 2021-09-01 삼성전자주식회사 전자장치 및 그 제어방법
US11916908B2 (en) 2020-10-26 2024-02-27 Dell Products L.P. Method and system for performing an authentication and authorization operation on video data using a data processing unit
US11599574B2 (en) * 2020-10-26 2023-03-07 Dell Products L.P. Method and system for performing a compliance operation on video data using a data processing unit
US11514949B2 (en) 2020-10-26 2022-11-29 Dell Products L.P. Method and system for long term stitching of video data using a data processing unit
US11930189B2 (en) * 2021-09-30 2024-03-12 Samsung Electronics Co., Ltd. Parallel metadata generation based on a window of overlapped frames
CN113691835B (zh) * 2021-10-21 2022-01-21 星河视效科技(北京)有限公司 视频植入方法、装置、设备及计算机可读存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2954680A1 (en) * 2013-02-07 2015-12-16 Thomson Licensing Method for providing targeted content in image frames of a video and corresponding device

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6615408B1 (en) * 1999-01-15 2003-09-02 Grischa Corporation Method, system, and apparatus for providing action selections to an image referencing a product in a video production
AU2002318948C1 (en) * 2001-08-02 2009-08-13 Opentv, Inc. Post production visual alterations
US20030149983A1 (en) * 2002-02-06 2003-08-07 Markel Steven O. Tracking moving objects on video with interactive access points
US20040233233A1 (en) * 2003-05-21 2004-11-25 Salkind Carole T. System and method for embedding interactive items in video and playing same in an interactive environment
KR101094119B1 (ko) * 2003-10-24 2011-12-15 인텔렉츄얼 벤처스 홀딩 67 엘엘씨 양방향 비디오 디스플레이 시스템 운용 방법 및 시스템
US20070078713A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. System for associating an advertisement marker with a media file
US9554093B2 (en) * 2006-02-27 2017-01-24 Microsoft Technology Licensing, Llc Automatically inserting advertisements into source video content playback streams
US7613691B2 (en) * 2006-06-21 2009-11-03 Microsoft Corporation Dynamic insertion of supplemental video based on metadata
JP5140952B2 (ja) * 2006-07-10 2013-02-13 日本電気株式会社 コンテンツ配信システム、コンテンツ配信サーバ、コンテンツ再生端末、プログラム、コンテンツ配信方法
JP4622950B2 (ja) * 2006-07-26 2011-02-02 ソニー株式会社 記録装置、記録方法および記録プログラム、ならびに、撮像装置、撮像方法および撮像プログラム
US20080126226A1 (en) * 2006-11-23 2008-05-29 Mirriad Limited Process and apparatus for advertising component placement
US9424587B2 (en) * 2007-04-11 2016-08-23 Comcast Cable Communications, Llc Advertisement supported video download
US8874468B2 (en) * 2007-04-20 2014-10-28 Google Inc. Media advertising
US20090222849A1 (en) * 2008-02-29 2009-09-03 Peters Mark E Audiovisual Censoring
US8028081B2 (en) * 2008-05-23 2011-09-27 Porto Technology, Llc System and method for adaptive segment prefetching of streaming media
GB0809631D0 (en) * 2008-05-28 2008-07-02 Mirriad Ltd Zonesense
WO2009157903A1 (en) * 2008-06-26 2009-12-30 Thomson Licensing Interval based ad insertion used for the delivery of video streams
US8387064B2 (en) * 2008-10-09 2013-02-26 International Business Machines Corporation Balancing a data processing load among a plurality of compute nodes in a parallel computer
WO2010076769A1 (en) * 2009-01-01 2010-07-08 Ziv Isaiah Embedding of addressable and context based messages in encoded video streams
US9838753B2 (en) * 2013-12-23 2017-12-05 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US11025962B2 (en) * 2011-02-28 2021-06-01 Adobe Inc. System and method for low-latency content streaming
KR20140022013A (ko) * 2011-03-10 2014-02-21 오픈 티브이 인코포레이티드 광고 효과의 결정
JP5890517B2 (ja) * 2011-06-24 2016-03-22 トムソン ライセンシングThomson Licensing 3dコンテンツを配信するための方法およびデバイス
WO2013028565A1 (en) * 2011-08-19 2013-02-28 General Instrument Corporation Encoder-aided segmentation for adaptive streaming
US9013553B2 (en) * 2011-08-31 2015-04-21 Rocks International Group Pte Ltd. Virtual advertising platform
WO2013075342A1 (zh) * 2011-11-26 2013-05-30 华为技术有限公司 一种视频处理的方法及装置
JP5768683B2 (ja) * 2011-11-28 2015-08-26 富士通株式会社 受信データ処理方法、通信装置、及びプログラム
US20130223509A1 (en) * 2012-02-28 2013-08-29 Azuki Systems, Inc. Content network optimization utilizing source media characteristics
BR122015005210A2 (pt) * 2012-06-28 2019-08-20 Ericsson Ab Método e sistema para inserção de anúncio em entrega de mídia ao vivo over the top
US8495675B1 (en) 2012-07-30 2013-07-23 Mdialog Corporation Method and system for dynamically inserting content into streaming media
US20140099080A1 (en) * 2012-10-10 2014-04-10 International Business Machines Corporation Creating An Abridged Presentation Of A Media Work
GB2508243B (en) * 2012-11-27 2016-04-06 Mirriad Advertising Ltd Producing video data
US20140215085A1 (en) * 2013-01-25 2014-07-31 Cisco Technology, Inc. System and method for robust adaptation in adaptive streaming
US9606887B2 (en) * 2013-03-15 2017-03-28 Riverbed Technology, Inc. Persisting large volumes of data in an efficient unobtrusive manner
CA2906179C (en) * 2013-03-15 2020-03-24 Arris Technology, Inc. Dlna/dtcp stream conversion for secure media playback
EP3014551A4 (en) * 2013-06-27 2017-01-18 Intel Corporation Adaptively embedding visual advertising content into media content
US10210541B2 (en) * 2013-07-02 2019-02-19 Facebook, Inc. Crediting impressions to advertisements in scrollable advertisement units
JP2016522621A (ja) * 2013-07-15 2016-07-28 ホアウェイ・テクノロジーズ・カンパニー・リミテッド ダイナミックアダプティブストリーミング・オーバー・ハイパーテキストトランスファープロトコルにおけるリモート要素のジャストインタイムデリファレンス
US20160212455A1 (en) * 2013-09-25 2016-07-21 Intel Corporation Dynamic product placement in media content
EP2876890A1 (en) * 2013-11-21 2015-05-27 Thomson Licensing Method and apparatus for frame accurate synchronization of video streams
US9955192B2 (en) * 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
KR20150080278A (ko) * 2013-12-31 2015-07-09 주식회사 케이티 광고 컨텐츠 및 비디오 컨텐츠를 제공하는 장치 및 방법
EP3152848A4 (en) * 2014-06-05 2017-12-27 Visible World Inc. Methods, systems, and computer-readable media for determining outcomes for promotional digital on-screen graphics
KR102247184B1 (ko) * 2014-10-17 2021-05-03 주식회사 케이티 동영상 썸네일 추출 방법, 장치 및 동영상 제공 시스템
US10692531B2 (en) * 2014-10-25 2020-06-23 Yieldmo, Inc. Methods for serving interactive content to a user
US9438936B1 (en) * 2015-04-03 2016-09-06 Mirriad Limited Producing video data
US10373195B2 (en) * 2015-06-02 2019-08-06 The Nielsen Company (Us), Llc Methods and systems to evaluate and determine degree of pretense in online advertisement
EP3396963B1 (en) * 2017-04-25 2021-04-07 Accenture Global Solutions Limited Dynamic media content rendering

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2954680A1 (en) * 2013-02-07 2015-12-16 Thomson Licensing Method for providing targeted content in image frames of a video and corresponding device

Also Published As

Publication number Publication date
US20160295303A1 (en) 2016-10-06
US20190052938A1 (en) 2019-02-14
EP3076681A1 (en) 2016-10-05
CN106060578A (zh) 2016-10-26
EP3076681B1 (en) 2019-09-18
US9438936B1 (en) 2016-09-06
US10841667B2 (en) 2020-11-17

Similar Documents

Publication Publication Date Title
CN106060578B (zh) 生成视频数据的方法和系统
US11557015B2 (en) System and method of data transfer in-band in video via optically encoded images
JP6562992B2 (ja) デジタルビデオストリーミングにおけるトリック再生
CA2924065C (en) Content based video content segmentation
JP6903653B2 (ja) 共通メディアセグメントの検出
CN101917591B (zh) 一种直播视频的回放方法及装置
CN101778257B (zh) 用于数字视频点播中的视频摘要片断的生成方法
US20150373385A1 (en) Method for providing targeted content in image frames of a video and corresponding device
CN106412677B (zh) 一种回放视频文件的生成方法和装置
CN111246126A (zh) 基于直播平台的导播切换方法、系统、装置、设备及介质
CN101641873A (zh) 用于确定媒体中的广告和其他插入物的位置和时序的方案
CN101917590A (zh) 一种具有回放功能的网络直播系统及一种播放器
CN1454430A (zh) 在用于非闯入的视听节目中嵌入可再使用的基于对象的产品信息,观众驱动使用方法
JP2021052416A (ja) ストリーミングコンテンツの中に広告をつなぎ合わせるためのシステムおよび方法
EP2553937A2 (en) Media fingerprinting for social networking
EP1949681A1 (en) Multi-view video delivery
CN114339423A (zh) 短视频生成方法、装置、计算设备及计算机可读存储介质
KR102069897B1 (ko) 사용자 영상 생성 방법 및 이를 위한 장치
KR101933696B1 (ko) Ai 영상학습 플랫폼 기반 vod 서비스 시스템
KR102036383B1 (ko) 콘텐츠 생성 방법 및 그 장치
KR102130073B1 (ko) 객체 중심의 해상도 복원 기능을 수행하는 영상 학습 시스템
KR102130075B1 (ko) 사용자 시청 취향 정보를 활용한 해상도 복원용 영상학습 지원 시스템
US11659217B1 (en) Event based audio-video sync detection
KR101933699B1 (ko) Ai 영상학습 기반 해상도 향상 방법
KR102130074B1 (ko) 열악한 네트워크 환경에서의 고화질 vod 제공 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: London, England

Applicant after: Riyadh advertising public Limited by Share Ltd

Address before: London, London, 11 sta portuyin building

Applicant before: M Riyadh advertising Limited by Share Ltd

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant