CN112753228B - 用于生成媒体内容的技术 - Google Patents
用于生成媒体内容的技术 Download PDFInfo
- Publication number
- CN112753228B CN112753228B CN201980063064.7A CN201980063064A CN112753228B CN 112753228 B CN112753228 B CN 112753228B CN 201980063064 A CN201980063064 A CN 201980063064A CN 112753228 B CN112753228 B CN 112753228B
- Authority
- CN
- China
- Prior art keywords
- media
- trigger
- segments
- segment
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 120
- 230000033001 locomotion Effects 0.000 claims abstract description 95
- 238000013442 quality metrics Methods 0.000 claims abstract description 60
- 230000004044 response Effects 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 16
- 239000012634 fragment Substances 0.000 claims description 8
- 230000008569 process Effects 0.000 description 47
- 238000010586 diagram Methods 0.000 description 19
- 230000003287 optical effect Effects 0.000 description 17
- 230000006870 function Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 12
- 238000004458 analytical method Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 7
- 239000013598 vector Substances 0.000 description 7
- 230000001413 cellular effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 4
- 230000001934 delay Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 239000000872 buffer Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000004931 aggregating effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000000386 athletic effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000005022 packaging material Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
- G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8549—Creating video summaries, e.g. movie trailer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
- G06V20/47—Detecting features for summarising video content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/44—Event detection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
提供了用于生成媒体内容的技术和系统。(例如,通过服务器计算机或其他设备或系统)可以从位于现场的设备检测到与现场的事件相关联的触发。可以获得由位于现场的多个媒体捕获设备捕获的媒体的媒体片段。至少一个所述媒体片段对应于所检测到的触发。可以基于在媒体片段中捕获的对象的第一运动和/或用于捕获媒体片段的媒体捕获设备的第二运动来确定媒体片段的一个或多个质量度量。可以基于针对所获得的媒体片段确定的质量度量从媒体片段中选择媒体片段子集。可以生成包括所述媒体片段子集的媒体片段的汇集。
Description
相关申请的交叉引用
本申请要求于2018年9月28日提交的美国专利申请No.16/145,774的权益,该美国专利申请出于所有目的以引用的方式全文并入本文。
技术领域
本公开总体上涉及用于生成媒体内容的技术和系统,并且更具体地涉及生成事件的媒体内容。
背景技术
媒体捕获设备可以捕获各种类型的媒体内容,包括图像、视频和/或音频。例如,照相机可以捕获场景的图像数据或视频数据。来自媒体捕获设备的媒体数据可以被捕获并输出以供处理和/或消费。例如,可以捕获并处理场景的视频以在一个或多个观看设备上显示。
来自多个媒体捕获设备的媒体内容可以用来生成包括场景中不同质量、视角和事件的媒体剪辑。然而,可能难以在不同的时间点从不同的媒体捕获设备捕获最高质量和最相关的媒体片段。当大量媒体内容可用于处理时,此问题会变得甚至更加困难。
发明内容
在一些示例中,本文公开了用于生成媒体内容的技术和系统。例如,媒体系统可以获得从位于一地点的一个或多个媒体捕获设备获得的不同媒体内容项。媒体内容项可以包括视频、音频、图像、其任何组合和/或任何其他类型的媒体。媒体系统可以将来自所获得的媒体内容项的某些媒体片段策划成媒体内容的汇集。
在一些示例中,媒体内容的汇集可以包括以导致所捕获的媒体内容的多个缩短的剪辑具有不同特性的方式组织的一组所选媒体片段。例如,媒体内容汇集中的媒体片段可以来自不同的时间点,可以来自该地点内的不同视点或视角,可以具有不同的缩放量,可以具有不同的显示和/或音频特性,可以具有它们的组合,并且/或者可以在媒体片段之间具有任何其他合适的变化。在一些情况下,可以在该地点发生事件期间捕获所获得的媒体内容。例如,媒体内容汇集可以通过包括捕获在不同时间点的事件的单个视野或多个视野(例如,从不同视角的不同视野)的一组媒体片段来提供事件的集锦(highlight reel)。
可以基于与媒体片段相关联的触发来选择可以包括在媒体内容汇集中的候选媒体片段。触发可用于指示在媒体内容捕获的事件内感兴趣的时刻已经发生。在一些情况下,触发可以与事件内的时间相关联。也可以获得与事件相关联的其他数据,在一些情况下,还可以将其与事件内的时间相关联。在一些示例中,触发可以由位于正在捕获媒体内容的事件地点的设备和/或由远程观察事件的用户(例如,在电视、移动设备、个人计算机或其他设备上观看事件的用户)的设备生成。在一些示例中,可以基于在事件期间可能已经发生感兴趣的时刻的指示来自动生成触发。例如,触发可以由设备基于事件期间对事件发生(也称为时刻)的检测,基于事件期间位于现场的设备的用户的特征,基于远程观察事件的用户的特征、其任意组合和/或事件期间发生重大事件的其他指示而生成。
媒体系统可以分析所选候选媒体片段的质量以确定哪些媒体片段将被包括在媒体内容汇集中。例如,可以基于指示那些媒体片段可能具有的对潜在观看者的感兴趣程度的因素来确定媒体片段的质量。在一些示例中,可以基于在媒体片段中捕获的一个或多个对象的运动,基于用于捕获媒体片段的媒体捕获设备的运动,基于与媒体片段相关联的触发的数目,基于媒体片段中特定对象的存在、其组合和/或媒体片段的任何其他合适的特性,来确定媒体片段的质量。然后可以从候选媒体片段中选择最高质量的候选媒体片段,以包括在媒体内容汇集中。
根据至少一个示例,提供了一种生成媒体内容的方法。该方法包括由服务器计算机检测来自设备的触发,该触发与地点处的事件相关联。该设备不捕获用于服务器计算机的媒体片段。该方法还包括由服务器计算机获得由位于该地点的多个媒体捕获设备捕获的媒体的媒体片段。所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发。服务器计算机不获得与触发不对应的媒体片段。该方法还包括由服务器计算机确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量。基于在媒体片段中捕获的对象的第一运动和用于捕获媒体片段的媒体捕获设备的第二运动中的至少一者,确定媒体片段的一个或多个质量度量。该方法还包括从所获得的媒体片段中选择媒体片段的子集,该媒体片段的子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的。该方法还包括生成包括所述媒体片段的子集的媒体片段的汇集。
在另一示例中,提供了一种系统,该系统包括一个或多个处理器以及被配置为存储媒体数据的存储器。所述一个或多个处理器被配置为能够检测来自设备的触发,该触发与地点处的事件相关联。该设备不捕获用于服务器计算机的媒体片段。所述一个或多个处理器还被配置为能够获得由位于该地点的多个媒体捕获设备捕获的媒体的媒体片段。所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发。服务器计算机不获得与触发不对应的媒体片段。所述一个或多个处理器还被配置为能够确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量。基于在媒体片段中捕获的对象的第一运动和用于捕获媒体片段的媒体捕获设备的第二运动中的至少一者,确定媒体片段的一个或多个质量度量。所述一个或多个处理器还被配置为能够从所获得的媒体片段中选择媒体片段的子集,该媒体片段的子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的。所述一个或多个处理器还被配置为能够生成包括该媒体片段的子集的媒体片段的汇集。
在另一示例中,提供一种服务器计算机的非暂态计算机可读介质,所述非暂态计算机可读介质上存储有指令,所述指令在由一个或多个处理器执行时使得所述一个或多个处理器:检测来自设备的触发,该触发与地点处的事件相关联,其中该设备不捕获用于所述系统的媒体片段;获得由位于所述地点的多个媒体捕获设备捕获的媒体的媒体片段,所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发,其中所述系统不获得与触发不对应的媒体片段;确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量,其中基于在媒体片段中捕获的对象的第一运动和用于捕获媒体片段的媒体捕获设备的第二运动中的至少一者,确定媒体片段的一个或多个质量度量;从所获得的媒体片段中选择媒体片段的子集,该媒体片段的子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的;以及生成包括所述媒体片段的子集的媒体片段的汇集。
在一些方面,所述触发是响应于由所述设备获得的用户输入而生成的。在一些方面,所述触发是由所述设备基于所述事件期间的时刻的检测和所述事件期间的用户的特征中的至少一者或多者而自动生成的。
在一些方面,获得媒体片段包括:接收由所述多个媒体捕获设备中的第一媒体捕获设备捕获的第一媒体流;接收由所述多个媒体捕获设备中的第二媒体捕获设备捕获的第二媒体流;以及从第一媒体流中提取第一媒体片段,并从第二媒体流中提取第二媒体片段。
在一些方面,所述触发是第一触发。在这些方面,上述的方法、装置和计算机可读介质还可以包括检测第二触发,该第二触发与该地点处的事件相关联。在这些方面,第一媒体片段对应于第一触发,并且第二媒体片段对应于第二触发。在一些方面,获得媒体片段包括:向所述多个媒体捕获设备中的第一媒体捕获设备发送第一触发,该第一触发使得从第一媒体捕获设备所捕获的媒体中提取第一媒体片段;向所述多个媒体捕获设备中的第一媒体捕获设备和第二媒体捕获设备中的至少一个发送第二触发,该第二触发使得从第一媒体捕获设备和第二媒体捕获设备中的至少一个捕获的媒体中提取第二媒体片段;以及从第一媒体捕获设备和第二媒体捕获设备中的至少一个接收提取的第一媒体片段和提取的第二媒体片段。
在一些方面,上述的方法、装置和计算机可读介质还包括:服务器计算机(或系统)将第一触发和第二触发与该地点处的事件中的时间相关联。在这些方面,所获得的媒体片段对应于与第一触发和第二触发相关联的时间。
在一些方面,所述媒体片段的子集是进一步基于与所述媒体片段的子集中的每个媒体片段相关联的触发的数目而选择的。
在一些方面,所述媒体片段的所述一个或多个质量度量是进一步基于所述媒体片段中的对象的存在。
在一些方面,从所获得的媒体片段中选择媒体片段的子集包括:获得第一媒体捕获设备捕获的事件的第一媒体片段;获得第二媒体捕获设备捕获的事件的第二媒体片段,第一媒体片段和第二媒体片段是同时从事件的不同视角捕获的;确定在第一媒体片段中捕获的一个或多个对象的运动量大于在第二媒体片段中捕获的一个或多个对象的运动量;以及基于在第一媒体片段中捕获的所述一个或多个对象的运动量大于在第二媒体片段中捕获的所述一个或多个对象的运动量而选择第一媒体片段。
在一些方面,上述的方法、装置和计算机可读介质还包括将媒体片段的汇集提供给一个或多个设备。
在一些方面,所述设备位于所述地点。在一些方面,所述设备位于远离所述地点的位置处。
本文针对示例性方法、装置和计算机可读介质公开的示例可以单独地或以任何组合来实现。
该发明内容既不旨在标识要求保护的主题的关键或必要特征,也不旨在单独用于确定要求保护的主题的范围。主题应当通过参考本专利的整个说明书的适当部分、任何或所有附图以及每个权利要求来理解。
通过参考以下说明书、权利要求和附图,前述内容以及其他特征和实施例将变得更加显而易见。
附图说明
下面参考以下附图详细描述本申请的说明性实施例:
图1是示出根据一些示例的网络环境的示例的框图;
图2是示出根据一些示例的发生事件的地点的示例的图;
图3是示出根据一些示例的媒体系统的示例的图;
图4是根据一些示例的提供信息供媒体系统使用的记分板的图;
图5是示出根据一些示例的发生事件的地点的另一示例的图;
图6是示出根据一些示例的用于生成媒体内容汇集的媒体系统的示例使用情况的图;
图7是示出根据一些示例的生成媒体内容的过程的示例的流程图;以及
图8是示出根据一些示例的计算系统架构的示例的框图。
具体实施方式
下面提供本公开的某些方面和实施例。对于本领域技术人员显而易见的是,这些方面和实施例中的一些可以独立地应用,并且它们中的一些也可以组合地应用。在下面的描述中,出于解释的目的,阐述了具体细节以便提供对本申请的实施例的透彻理解。然而,将显而易见的是,可以在没有这些具体细节的情况下实践各种实施例。附图和描述不意图是限制性的。
随后的描述仅提供示例性实施例,并不旨在限制本公开的范围、适用性或配置。确切地说,对示例性实施例的随后描述将向本领域技术人员提供用于实现示例性实施例的使能描述。应该理解的是,在不脱离所附权利要求所阐述的本申请的精神和范围的情况下,可以对元件的功能和布置进行各种改变。
在下面的描述中给出具体细节以提供对实施例的透彻理解。然而,本领域的普通技术人员将理解,可以在没有这些具体细节的情况下实践实施例。例如,电路、系统、网络、过程和其他组件可以以框图形式被示出为组件,以便不会在不必要的细节上使实施例晦涩难懂。在其他情况下,可以示出公知的电路、过程、算法、结构和技术而没有不必要的细节,以避免使实施例晦涩难懂。
此外,请注意,各个实施例可被描述为被描绘为流程图、流图、数据流图、结构图或框图的过程。尽管流程图可以将操作描述为顺序过程,但是许多操作可以并行或同时执行。另外,可以对操作的顺序重新进行排列。过程在其操作完成时终止,但是可以具有在图中没有包括的另外的步骤。过程可以对应于方法、函数、程序、子例程、子程序等。当过程对应于函数时,其终止可以对应于该函数返回到调用函数或主函数。
术语“计算机可读介质”包括但不限于,便携式或非便携式存储设备、光学存储设备,以及能够存储、包括或承载(一种或多种)指令和/或数据的各种其它介质。计算机可读介质可以包括能够存储数据且不包括无线或通过有线连接传播的载波和/或暂态电子信号的非暂态介质。非暂态介质的示例可以包括但不限于磁盘或磁带、诸如压缩盘(CD)或数字通用盘(DVD)的光学存储介质、闪速存储器、存储器或存储器设备。计算机可读介质上可以存储有代码和/或机器可执行指令,其可以表示过程、函数、子程序、程序、例程、子例程、模块、软件包、类或指令、数据结构或程序语句的任何组合。代码段可以通过传递和/或接收信息、数据、自变量、参数或存储器内容而耦合到另一个代码段或硬件电路。信息、自变量、参数、数据等可以通过包括存储器共享、消息传递、令牌传递、网络传输等的任何合适的手段来传递、转发或传输。
此外,实施例可以通过硬件、软件、固件、中间件、微代码、硬件描述语言或其任何组合来实现。当以软件、固件、中间件或微代码实现时,执行必要任务的程序代码或代码段(例如,计算机程序产品)可以被存储在计算机可读介质或机器可读介质中。(一个或多个)处理器可以执行必要任务。
媒体捕获设备可以用于捕获媒体内容(例如,图像、视频、音频和/或其他类型的媒体内容)。捕获的媒体内容可以被处理并输出以供消费。在一些情况下,来自多个媒体捕获设备的媒体内容可以被组合并用于生成具有事件或场景的各种视角的一个或多个媒体内容项(例如,不同的视野、声音、缩放级别等)。
然而,当使用来自多个媒体捕获设备的媒体内容时会出现问题。例如,捕获并选择不同的时间点(例如,在事件期间)的最高质量的媒体片段和最相关的媒体片段可能具有挑战性。例如,可能难以在正确的时间从最佳的视野收集高质量的媒体内容(例如,视频和/或音频、图像或其他内容)。也可能难以在不同时间点从不同角度收集和组织由不同用户设备捕获的视频。当大量媒体内容可用于处理时,这种困难更加严重。例如,在大量视频中发现最佳质量和/或最相关的内容可能具有挑战性,并且使用最佳质量和/或最相关的内容创建媒体内容汇集(例如,集锦)也可能具有挑战性。
本文公开了用于生成媒体内容的技术(例如,由一个或多个系统、装置和/或计算机可读介质实现的方法或过程)。例如,本文公开的技术可以将媒体内容的汇集和策展自动化为媒体内容的汇集。在一些情况下,本文公开的技术可以将策展媒体内容的汇集自动聚合到单个媒体内容项中。本文公开的技术可以减少生成这种媒体内容所需的人类活动量,从而减少所需的时间和成本。本文公开的技术可以通过最小化捕获和/或存储的媒体内容的量,通过最小化确定内容的质量和相关性所需的分析量等来减少生成媒体内容汇集所需的诸如设备、存储设备和处理器使用量的计算机资源的量。还可以通过将多个用户触发的捕获请求聚合到传送给多个用户的单个媒体文件中,来减少将媒体内容上载到一个或多个服务器(例如,一个或多个云服务器、一个或多个企业服务器和/或其他服务器)所需的网络带宽量。
图1是示出网络环境100的示例的框图。网络环境100包括媒体系统102、一个或多个媒体捕获设备104、一个或多个用户设备106以及一个或多个触发设备108。媒体系统102可以包括一个或多个服务器计算机,其可以处理媒体数据、触发和/或其他数据。下面参考图3描述示例媒体系统302的进一步细节。
在一些情况下,媒体系统102可以包括云基础设施系统(也称为云网络),该云基础设施系统向一个或多个媒体捕获设备104和一个或多个用户设备106(以及在某些情况下向一个或多个触发设备108)提供云服务。例如,可以由一个或多个媒体捕获设备104和/或一个或多个用户设备106安装和/或执行与媒体系统102的提供者相关联的应用(例如,移动应用或其他合适的设备应用)和/或网站。在这种情况下,应用和/或网站可以(通过网络)访问媒体系统102提供的云服务。在另一示例中,媒体系统102的云网络可以托管应用,并且用户可以通过通信网络(例如,互联网、WiFi网络、蜂窝网络和/或使用另一其他合适的通信网络)按需订购和使用该应用。在某些实施例中,媒体系统102提供的云服务可以包括可供云基础设施系统的用户按需使用的服务的主机。云基础设施系统提供的服务可以动态扩展以满足其用户的需要。媒体系统102的云网络可以包括一个或多个计算机、服务器和/或系统。在一些情况下,组成云网络的计算机、服务器和/或系统不同于可以位于地点(例如,主办事件的地点)的本地计算机、服务器和/或系统。
一个或多个服务器计算机可以使用无线网络、有线网络或有线网络和无线网络的组合来与一个或多个媒体捕获设备104、一个或多个用户设备106和一个或多个触发设备108通信。无线网络可以包括任何无线接口或无线接口的组合(例如,因特网、诸如3G的蜂窝、长期演进(LTE)或5G、其组合和/或其他合适的无线网络)。有线网络可以包括任何有线接口(例如,光纤、以太网、电力线以太网、同轴电缆上的以太网、数字信号线(DSL)或其他合适的有线网络)。可以使用可以将媒体系统102、媒体捕获设备104、用户设备106和触发设备108连接到网络的各种路由器、接入点、网桥、网关等来实现有线和/或无线网络。
一个或多个媒体捕获设备104可以被配置为捕获媒体数据。媒体数据可以包括视频、音频、图像、其任何组合和/或任何其他类型的媒体。如本文所使用的,媒体内容项可以包括视频文件、音频文件、图像文件、其任何合适的组合和/或其他媒体项。所述一个或多个媒体捕获设备104可以包括任何合适类型的媒体捕获设备,例如个人或商用摄像机(例如,数字照相机、IP照相机、视频流设备或其他合适类型的摄像机)、移动或固定电话听筒(例如,智能电话、蜂窝电话等)、音频捕获设备(例如,录音机、麦克风或其他合适的音频捕获设备)、用于捕获静态图像的照相机、其任何组合和/或任何其他类型的媒体捕获设备。在一个说明性示例中,所述一个或多个媒体捕获设备104中的媒体捕获设备可以包括捕获视频内容的摄像机(或具有内置摄像机的设备)。在这样的示例中,摄像机还可以捕获使用已知技术与视频内容同步的音频内容。
所述一个或多个触发设备108被配置为生成触发,所述触发可用于从被捕获的媒体中确定被考虑包括在媒体内容汇集中的候选媒体片段。触发设备108可以包括用户可以与之交互以使触发被生成的接口(例如,按钮、按键、触摸屏显示器、麦克风或其他合适的接口)。例如,用户可以按下触发设备108上的按钮,这可以使得触发设备108在媒体内容项期间的某个点处向媒体系统102发送触发。
所述一个或多个用户设备106(也可以称为客户端设备)可以包括个人电子设备,例如移动或固定电话听筒(例如,智能电话、蜂窝电话等)、照相机(例如,数字照相机、IP照相机、摄像机、照相电话、视频电话或其他合适的捕获设备)、膝上型计算机或笔记本计算机、平板计算机、数字媒体播放器、可穿戴设备(例如,智能手表、健身追踪器、虚拟现实头戴机、增强现实头戴机或其他可穿戴设备)、视频游戏机、视频流设备、桌上型计算机或任何其他合适类型的电子设备。所述一个或多个用户设备106还可以生成触发,所述触发可用于从被捕获的媒体中确定被考虑包括在媒体内容汇集中的候选媒体片段。在一些情况下,所述一个或多个用户设备106不向媒体系统102提供媒体内容。例如,所述一个或多个用户设备106的用户可以选择不向媒体系统102提供媒体内容,并且/或者可以未被认证以提供媒体内容。
媒体系统102被配置为从一个或多个媒体捕获设备104获得媒体。在一些示例中,媒体系统102可以从诸如单个存储位置(例如,媒体系统102本地或远离媒体系统102的文件位置,或其他存储位置)、单个媒体捕获设备和/或其他来源的单个源获得媒体。在一个说明性示例中,媒体可以由多个媒体捕获设备捕获,并且可以存储在媒体系统102处的计算机文件中(或者在一些情况下,存储在媒体系统102例如通过网络可访问的远程存储位置中)。媒体系统102可以通过访问(例如,打开和执行)计算机文件而将媒体作为单个媒体流获得。在另一说明性示例中,媒体可以由单个媒体捕获设备捕获。可以将由单个媒体捕获设备捕获的媒体存储在媒体系统102处的计算机文件中(或在一些情况下,存储在媒体系统102例如通过网络可访问的远程存储位置中),并且媒体系统102可以访问(例如,打开和执行)计算机文件以获得媒体。在另一说明性示例中,单个媒体捕获设备可以将媒体内容直接(例如,作为流媒体)发送到媒体系统102。在一些示例中,媒体系统102可以从多个来源(例如,从多个存储位置(例如,媒体系统102本地或远离媒体系统102的文件位置,或其他存储位置),从媒体捕获设备和/或其他源)获得媒体。在一个说明性示例中,可以将来自一个或多个媒体捕获设备的媒体内容存储在媒体系统102处的多个计算机文件中(或者在一些情况下,存储在媒体系统102例如通过网络可访问的远程存储位置中),并且媒体系统102可以通过访问(例如,打开和执行)多个计算机文件来获得媒体。在另一说明性示例中,多个媒体捕获设备可以将媒体内容直接(例如,作为流媒体)发送到媒体系统102。
可以基于一个或多个触发来选择来自捕获的媒体的候选媒体片段。媒体片段可以包括整个媒体内容项的一部分(例如,电影、歌曲或其他媒体内容项的一部分)。在一个说明性示例中,媒体内容项可以包括由视频捕获设备捕获的视频,并且媒体片段可以包括视频的一部分(例如,整个视频的前十秒,或者视频的其他部分)。在一些情况下,媒体系统102可以接收由一个或多个媒体捕获设备104捕获的媒体,并且可以使用一个或多个触发从接收到的媒体中选择候选媒体片段。在一些情况下,一个或多个媒体捕获设备104可以使用一个或多个触发来选择候选媒体片段,并且可以将所选媒体片段发送给媒体系统102。一个或多个触发可以包括由用户设备106和/或触发设备108如上所述生成的触发,并且/或者可以包括自动生成的触发。在一些情况下,一个或多个媒体捕获设备104可以生成一个或多个触发。
如以下更详细描述的,触发可以基于在捕获媒体的事件期间可能已经发生感兴趣的时刻的指示而自动生成。在一些示例中,触发可以基于地点处的事件期间对事件发生(或时刻)的检测,基于事件期间位于现场的设备的用户的特征,基于远程观察事件的用户的特征、其任意组合和/或事件期间的重大事件发生的其他指示而生成。
媒体系统102可以评估候选媒体片段,以确定哪些媒体片段要包括在媒体内容汇集中。如以下更详细描述的,可以为媒体片段确定一个或多个质量度量,并且可以将其用于确定该媒体片段是否将被包括在媒体内容汇集中。可以基于指示那些媒体片段可能具有的对于潜在观看者的感兴趣程度的因素来确定媒体片段的质量。在一些情况下,可以比较为媒体片段确定的质量度量,以确定将包括在媒体内容汇集中的媒体片段。例如,可以将针对第一媒体片段确定的质量度量与针对第二媒体片段确定的质量度量进行比较,并且将基于该比较而具有较高质量的第一媒体片段或第二媒体片段选择包括在媒体内容的汇集中。
在一些示例中,媒体内容汇集可以包括被组合的一组所选媒体片段,从而导致来自不同媒体捕获设备的捕获的媒体内容的多个缩短的剪辑。所选媒体片段的组可以具有不同的特性,这些特性可以基于媒体设备在捕获不同媒体片段时的特性或设置。例如,以视频和音频为例,媒体内容汇集中的媒体片段可以来自不同的时间点,可以来自一地点的不同视点,可以具有不同的缩放量,可以具有不同的显示和/或音频特性,可以具有它们的组合,并且/或者可以在该汇集中的媒体片段之间具有任何其他合适的变化。在一些示例中,媒体内容汇集可以包括一个或多个分离的单独的媒体剪辑。例如,可以将由视频捕获设备捕获的一个或多个视频片段选择为将被提供以供一个或多个设备观看的视频剪辑。
本文提供的一些示例使用视频作为媒体内容的说明性示例。然而,本领域的普通技术人员将会认识到,本文公开的系统和技术适用于任何类型的媒体内容,包括音频、图像、元数据和/或任何其他类型的媒体。此外,在一些情况下,视频内容还可以包括使用已知技术与视频内容同步的音频内容。本文公开的示例可以单独使用或以任何组合使用。
在一些情况下,可以在一地点发生事件期间捕获所获得的媒体内容。图2是示出发生事件的地点200的示例的图。事件可以包括体育事件(如图2所示)、表演艺术事件(例如,音乐事件、戏剧事件、舞蹈事件或其他表演艺术事件)、艺术展览或任何其他类型的事件。多个媒体捕获设备可以被布置在地点200内的不同位置处。媒体捕获设备可以包括任何合适类型的媒体捕获设备。例如,如图所示,三个视频捕获设备204a、204b和204c位于地点200内的三个不同位置处。虽然图2中示出了多个媒体捕获设备,但是在一些情况下,单个媒体捕获设备可以提供捕获发生在地点200处的事件的媒体。
视频捕获设备204a、204b和204c可以从地点200内的不同视点(也称为视野或视角)捕获事件的视频。在一些实施方式中,视频捕获设备204a、204b和204c可以连续地捕获事件的视频(例如,从事件开始之前的时间点到事件结束之后的时间点)。在一些实施方式中,视频捕获设备204a、204b和204c可以按需捕获事件的视频。例如,视频捕获设备204a、204b和204c中的一个或多个仅在接收到来自媒体系统(例如,图2中未示出的媒体系统102)、来自用户设备(例如,用户设备206a、206b或206c)、来自触发设备、来自任何其他合适的设备、来自使用视频捕获设备204a、204b和204c的接口或者使用任何其他命令提供输入的用户的捕获视频的命令时才会捕获视频。在一个说明性示例中,视频捕获设备可以在接收到触发、输入命令和/或其他输入时捕获视频,如本文中更详细描述的。在一些情况下,视频捕获设备204a、204b和204c中的一个或多个可以连续捕获事件的视频,而同时可以服务于针对媒体系统的按需视频片段请求。例如,拍摄的视频素材可以被本地存储在视频捕获设备204a、204b和204c上,而按需视频片段(例如,基于一个或多个触发确定的片段)可以被传送到服务器,并且在一些情况下,可供向由媒体系统提供且与该事件相关联的服务进行登记和/或认证的用户使用。例如,如下面更详细地描述的,视频片段(例如,作为独立视频片段,在诸如集锦的媒体内容汇集中,在一组所选视频剪辑中,等等)可供捕获视频片段的用户使用,并且也可供与该事件相关联的其他登记用户使用。
用户设备206a、206b和206c也可以位于地点200处。用户设备206a、206b和206c可以包括出席该事件的人使用的设备、远程观察事件(例如,在电视、移动设备、个人计算机或其他设备上观看)的人使用的设备或与媒体系统(未显示)通信的其他合适设备。用户设备206a、206b和206c中的每一个可以包括任何合适的电子设备。
尽管在图2中示出了三个视频捕获设备204a、204b和204c以及三个用户设备206a、206b和206c,但是本领域的普通技术人员将会认识到,更多或更少的视频捕获设备和/或用户设备可以位于地点200内。在一些实施方式中,一个或多个触发设备(未示出)也可以由在事件处的用户和/或由远程观察事件的用户使用。
使用来自视频捕获设备204a、204b和204c以及用户设备206a、206b和206c的信息,媒体系统可以生成媒体内容汇集。媒体内容汇集可以包括在不同的时间点提供事件的不同视野的一组视频片段(来自视频捕获设备204a、204b和204c捕获的视频)。例如,媒体内容汇集可以提供事件的集锦。事件期间的任何给定时间点也可以对该时间点具有不同的视野。在一些情况下,一个给定时间点的多个视野可以被包括在媒体内容汇集中(例如,基于具有最高质量的视野,如下所述)。在一些情况下,给定时间点的被确定为具有最高质量的单个视野可以被包括在媒体内容汇集中。
图3是示出媒体系统302的示例的图。媒体系统302可以与位于主办事件(例如,在图2所示的地点200处主办的事件)的地点处的一个或多个媒体设备304以及一个或多个用户设备306(以及在某些情况下的一个或多个触发设备308)通信。媒体系统302还可以与正在远程观察事件的用户的设备(未示出)通信。媒体系统302包括各种组件,所述组件包括触发检测引擎312、媒体片段分析引擎314、质量度量引擎316和媒体汇集生成引擎318。媒体系统302的组件可以包括电子电路或其他电子硬件,并且/或者可以使用电子电路或其他电子硬件来实现,所述电子电路或其他电子硬件可以包括一个或多个可编程电子电路(例如,微处理器、图形处理单元(GPU)、数字信号处理器(DSP)、中央处理单元(CPU)和/或其他合适的电子电路);并且/或者媒体系统302的组件可以包括计算机软件、固件或其任何组合,并且/或者可以使用计算机软件、固件或其任何组合来实现,以执行本文公开的各种操作。尽管媒体系统302被示出为包括某些组件,但是本领域的普通技术人员将会认识到,媒体系统302可以包括比图3所示的组件更多或更少的组件。例如,在一些情况下,媒体系统302还可以包括一个或多个存储器设备(例如,RAM、ROM、高速缓存、缓冲区等)、处理设备、一个或多个总线和/或未在图3中示出的其他设备。
在一些情况下,媒体系统302还可以包括认证引擎(未示出)。认证引擎可以对一个或多个用户设备306(和/或远程观察事件)的用户进行认证,所述用户设备306在主办事件的地点处并且将不向媒体系统302提供视频(和/或其他媒体)。可以通过一个或多个用户设备306对(将不向媒体系统302提供事件的视频的)所述一个或多个用户设备306的用户进行认证。认证引擎还可以对在事件处且将向媒体系统302提供事件的视频(和/或其他媒体)的一个或多个媒体捕获设备304(和/或一个或多个媒体捕获设备304的用户)进行认证。
通过与媒体系统302的提供者相关联的应用(安装在设备304和/或306上),通过与媒体系统302的提供者相关联的网站(例如,该网站可以由一个或多个用户设备306中的用户设备的浏览器执行),和/或使用任何其他合适的认证平台,可以对一个或多个用户设备306的用户以及一个或多个媒体捕获设备304的用户进行认证。例如,用户可以(例如,通过应用、网站或其他平台)向媒体系统302提供的服务登记。用户可以通过创建针对服务的帐号(例如,使用应用、网站或其他平台来选择用户名和密码,提供安全问题的答案,输入联系信息和/或提供其他信息)来向媒体系统302提供的服务登记。在登记时,可以将用户与允许用户通过媒体系统302进行认证的登录凭据(例如,用户名和密码)相关联。在登记用户提供凭据时执行认证动作,以便该用户变成标识为登记帐号的实际所有者并且已登录到该应用、网站或其他平台。一旦被认证,与用户相关联的活动(例如,播放的内容,捕获的内容,创建的内容,加入的事件,邀请以及其他活动)与他的帐号相关联。然后,用户可以在以后的时间通过向服务进行重新认证(例如重新登录)来检索活动。如下所述,在一些情况下,用户还可以作为“匿名”用户使用该服务。
一旦向媒体系统302提供的服务登记,用户也就可以加入和/或被邀请参加某些事件。在一个说明性示例中,用户可以购买事件的票证,并且可以使用票证信息针对该事件对该用户进行认证。在另一说明性示例中,用户可以通过与媒体系统302的提供者相关联的应用、网站或其他平台来加入事件。在加入或被邀请参加特定事件时,可以针对该事件对用户进行认证。针对事件被认证了的用户可以使用其设备(例如,一个或多个媒体设备304、一个或多个用户设备306和/或一个或多个触发设备308)来生成事件的触发,来访问由媒体系统302针对该事件提供的媒体内容,并且/或者向媒体系统302提供媒体内容以生成媒体内容汇集。在一些情况下,一个或多个媒体捕获设备304可以是特定用户拥有的个人设备。在一些情况下,一个或多个媒体捕获设备304可以不是个人设备,因此可以不被特定用户拥有。在一些情况下,不是个人设备的媒体捕获设备可以由媒体系统302预登记为授权的媒体源。
在一些示例中,不同类型的用户可以加入事件和/或捕获该事件的媒体内容。例如,除了经过认证的用户(如上所述)之外,“匿名”用户也可以加入事件和/或捕获该事件的媒体内容。匿名用户可以包括未向服务登记的用户或已向服务登记但未登录到应用(因此未被服务认证)的用户。在一些情况下,仅仅特征的子集可供匿名用户使用。在一些情况下,在与媒体系统302的提供者相关联的应用或网站的后续连接期间匿名用户可能不能检索匿名用户的活动和/或为匿名用户创建的内容,因为可能不知道这样的活动和/或内容应与哪个帐号配对。
触发检测引擎312可以检测设备生成的触发或自动生成的触发。触发指示事件期间发生了感兴趣的时刻。例如,(通过一个或多个用户设备306中的一个用户设备或一个或多个媒体捕获设备304中的一个媒体捕获设备)来自用户的触发可以指示来自用户的对与事件中的感兴趣时刻有关的视频(或者其他媒体内容)的一部分加上时间标记的请求。触发检测引擎312可以接收由一个或多个用户设备306生成的触发,以及在某些情况下的由一个或多个媒体捕获设备304生成的触发(例如,当媒体捕获设备是出席该事件的用户的个人设备时)。在一些情况下,仅从已由认证引擎进行认证的已认证用户接收触发。在一些示例中,可以由一个或多个用户设备306中的用户设备或由一个或多个媒体捕获设备304中的媒体捕获设备响应于用户输入来生成触发。可以通过安装在设备上的与媒体系统302的提供者相关联的应用来提供用户输入。用户输入也可以通过与媒体系统302的提供者相关联的网站来提供。例如,一旦用户登录到应用或网站(并因此被媒体系统302认证),用户就可以点击或者以另外的方式选择应用或网站的图形界面的虚拟按钮。用户设备或媒体捕获设备可以响应于虚拟按钮的选择而生成触发。尽管虚拟按钮在本文中用作生成触发的可选选项的示例,但是本领域技术人员将会认识到,可以使用任何其他选择机制来生成触发,例如,使用物理按钮,使用一个或多个手势输入,使用一个或多个语音输入,它们的组合和/或其他输入。
在一些情况下,触发检测引擎312还可以从一个或多个触发设备308接收触发。如上所述,一个或多个触发设备308中的触发设备可以包括用户可与之交互以便使触发被生成的接口(例如,按钮、按键、触摸屏显示器、麦克风或其他合适的接口)。例如,用户可以按下触发设备上的按钮(例如,物理按钮、虚拟按钮等),这可以使触发设备向媒体系统302发送触发。在另一示例中,用户可以打开在一个或多个用户设备306中的用户设备和/或一个或多个媒体捕获设备304中的媒体捕获设备上安装或执行的与媒体系统302的提供者相关联的应用或网站。触发设备可以通过应用或网站与事件相关联或同步,之后用户可以与触发设备308的接口进行交互以生成触发。例如,触发设备可以(例如,使用无线或有线链路)与运行该应用或网站的一个或多个用户设备306中的用户设备和/或一个或多个媒体捕获设备304中的媒体捕获设备连接,并且该应用或网站可以促进触发设备与该应用或网站的关联。然后,用户可以使用触发设备来生成触发,该触发(例如,通过无线或有线链路)被发送到应用或网站。
在一些情况下,一个或多个媒体捕获设备304、一个或多个用户设备306和/或一个或多个触发设备308可以与事件直接或间接配对。例如,在用于生成触发的接口是软件按钮的示例中,通过将软件按钮呈现在(与媒体系统302相关联的)应用或网站的事件视野图形用户界面内部,可以将该软件按钮与事件直接配对。在一些情况下,如果用于生成触发的接口是硬件按钮,则可以通过应用或网站将硬件按钮与事件间接配对。例如,硬件按钮可以同在与特定事件相关联的事件情景中运行的移动应用配对。在这样的示例中,仅当应用正在运行事件情景时,硬件按钮才会工作,在这种情况下,该按钮可以与在前台运行的应用(例如,当用户打开应用时)和/或在后台运行的应用(例如,当设备当前未显示该应用时和/或当该应用被关闭时)一起工作。触发也可以由可与事件间接配对的第三方系统(例如记分板或其他系统)生成。例如,第三方系统可以与系统中的“场所”对象配对,并且场所将与给定日期和时间的事件配对。“场所”对象是地点、位置、设施、场地(例如,运动场、公园等)在媒体系统302上的表示。在一些情况下,可以为永久设置物定义一个“场所”对象。在一个说明性示例中,当将媒体系统302提供的服务作为永久性设置物安装在冰球场时,可以创建与该球场上的每块冰相对应的“场所”对象。然后,可以将事件调度为在每个定义的“场所”对象上发生。在一些示例中,当第三方系统(例如,记分板或其他系统)与定义的“场所”配对时,由于媒体系统302启动和停止在该“场所”发生的调度事件,所以第三方系统可以与事件间接配对。结果,当与场所配对的记分板或其他系统生成触发时,媒体系统302可以识别当时在该“场所”正在运行的事件,并将该触发与该事件相关联。
媒体系统302可以通过与在设备(例如,一个或多个用户设备306中的用户设备和/或一个或多个媒体捕获设备304中的媒体捕获设备)上安装和/或正在执行的与媒体系统302的提供者相关联的应用或网站进行交互来检测触发。例如,应用或网站可以响应于(例如,在用户设备上,在媒体捕获设备上和/或在触发设备上的)用户输入而生成触发,并且可以(例如,通过互联网、无线网络、有线网络和/或其他合适的通信网络)将触发发送给媒体系统302。在一些情况下,可以将由触发设备生成的触发发送到媒体系统302,而不使用安装在用户设备和/或媒体捕获设备上或由其执行的应用或网站。
在一些实施方式中,可以定义不同的点击模式(通过一个或多个用户设备306中的用户设备、一个或多个媒体捕获设备304中的媒体捕获设备和/或一个或多个触发设备308中的触发设备的接口接收)并将其与事件期间的不同时刻相关联。在一个说明性示例中,双击可以与在体育赛事事件期间得分的进球相关联,并且长点击(例如,长于1秒)可以与体育赛事事件期间的处罚相关联。
如上所述,触发检测引擎312还可以检测自动生成的触发。可以基于指示事件期间可能已经发生感兴趣的时刻的信息来自动生成触发。在一些示例中,与媒体系统302的提供者相关联的应用、网站或其他平台(例如,安装在一个或多个用户设备306中的用户设备或一个或多个媒体捕获设备304中的媒体捕获设备上)可以被配置为基于事件期间发生事件的检测,基于事件期间位于现场的设备的用户的一个或多个特征,基于远程观察事件的用户的一个或多个特征,它们的任意组合和/或事件期间的重大事件发生的其他指示来自动生成触发。例如,在事件期间可能导致自动生成触发的事件发生可以包括体育赛事事件期间的得分变化(例如,使用如下所述的记分板数据或其他数据而检测到),体育赛事事件期间的运动员替换,重大的时间变化(例如,事件的四分之一或一半结束,事件本身的结束,戏剧或音乐事件的间歇,或其他重大的时间变化),体育赛事事件期间的处罚,事件期间的音频水平(例如,如欢呼声、蜂鸣器、铃声等的大噪声)。
可以按各种方式检测在事件期间可能导致自动生成触发的不同事件发生。例如,如下面关于图4进一步描述的,记分板可以通过软件集成到媒体系统302的提供者平台,通过与读取和解释记分板输出数据的记分板接口设备(可以包括硬件模块)进行硬件集成,和/或通过另一种类型的接口进行对接。然后可以分析来自记分板的数据(例如,在生成数据时实时进行,由于数据的传输和处理而具有正常延迟,或者接近实时进行)。基于对数据的分析,当满足某些条件时(例如,时钟停止,以及x秒后主队的得分增加了1等),可以生成自动触发。
在一些示例中,可以监视事件期间的音频,并且可以响应于某些模式、音调和/或其他音频事件来生成自动触发。在一些说明性示例中,响应于检测到高尔夫球杆击中球的声音,响应于检测到棒球棒击中球,响应于检测到大声的人群欢呼,响应于检测到裁判哨声,响应于检测到语音命令的关键字和/或响应于其他音频事件,可以自动生成触发。
在一些示例中,可以基于对事件中涉及的运动员的运动衫号码、面部或其他识别特征的检测来生成自动触发。例如,用户可以将喜爱的运动员的运动衫号码输入到应用或网站中。在另一示例中,用户可以输入喜爱的运动员的照片。也可以将喜爱的运动员的其他识别特征输入到应用或网站。可以基于识别特征的检测(例如,使用诸如对象和/或面部检测之类的计算机视觉技术检测运动衫号码或面部),来检测包括该运动员的视频序列。在一个说明性示例中,在棒球比赛期间,可以将照相机放置在本垒板的后面,并且运动员在本垒板处击球的位置使得运动衫号码清晰可见且稳定。这种设置允许计算机视觉算法分析击球手的视频帧,识别运动衫号码,并基于所识别的运动衫号码生成自动触发,从而使照相机捕获击球手在击球期间的视频并将其发送到媒体系统302。
在事件期间位于现场的设备的用户或远程观察事件的用户的特征可以包括与用户相关联的生物测定事件(例如,血压变化、温度变化、汗液增加、呼吸增加和/或呼吸快速、和/或其他生物测定事件)、用户的运动(例如,鼓掌、跳起、击掌和/或其他运动)、用户的音频水平(例如,与喊叫相关的音量等)、它们的任何组合和/或其他合适的用户特征。可以使用生物测定传感器(例如,可穿戴生物测定感测设备、智能手表、健身追踪器、用户设备306、媒体捕获设备304或其他合适的设备的生物测定传感器),使用设备的运动传感器(例如,用户设备306、媒体捕获设备304、可穿戴设备或其他合适的设备的运动传感器),使用设备的麦克风或其他音频传感器(例如,用户设备306、媒体捕获设备304、可穿戴设备或其他合适的设备的麦克风),或使用任何其他机构来测量用户的特征。
如上所述,可以基于与在事件期间位于现场的设备的用户或远程观察事件的用户相关联的生物测定事件来生成基于生物测定的触发。例如,可以检测用户的心率、脉搏、温度、呼吸速率和/或其他指标(例如,用户选择的指标),并且当检测到与预定模式相对应的变化时,可以生成自动触发以捕获引起身体反应的时刻。在一些情况下,最初可以使用默认模式,并且由于为用户获得了更多的生物测定数据(例如,使用可穿戴设备),所以可以针对用户的身体训练这些模式。在一些实施方式中,可以基于与事件相关联的其他人的生物测定指标来生成基于生物测定的触发,所述其他人例如为正在参加事件的运动员(例如,篮球比赛期间的篮球运动员)、参加事件的团队的教练、或位于现场或远程观察该事件的其他人。
在一些示例中,可以基于用户的拍手模式来生成自动生成的触发。拍手模式可以由可穿戴设备(例如,智能手表、健身追踪器或其他设备)检测,该可穿戴设备可以同与媒体系统302的提供者相关联的应用或网站配对。
媒体系统302(例如,使用触发检测引擎312)可以将检测到的触发与事件、事件中的对应时间和/或一个或多个媒体捕获设备304或其他媒体源相关联。可以存储检测到的触发的触发数据以供以后使用(例如,用于选择候选媒体片段,用于传输到媒体捕获设备以选择候选媒体片段和/或用于其他用途)。例如,媒体系统302可以将检测到的触发与事件相关联,并且还可以将检测到的触发与事件中的时间相关联,该时间与生成该触发的时间相对应。在一个说明性示例中,事件可以包括足球比赛,并且可以响应于用户在进球得分时选择一个或多个用户设备306中的用户设备的按钮(例如,安装在用户设备上的与媒体系统302的提供者相关联的应用的图形界面中的虚拟按钮)而生成触发。媒体系统302可以检测触发,并且可以将该触发与对应于进球得分时的时间相关联。
媒体系统302还被配置为从一个或多个媒体捕获设备304获得媒体内容(例如,视频、音频、图像和/或其他媒体内容)。在一些情况下,媒体系统302仅从事件处的经认证的记录设备接收媒体。例如,媒体系统302可以仅从已经向媒体系统302认证和/或已经针对事件认证的媒体捕获设备接收针对该事件捕获的媒体。在一些示例中,一个或多个媒体捕获设备304可以记录和/或缓冲所捕获的媒体。在这样的示例中,媒体系统302可以在稍后的时间点上传所有存储的媒体或一部分媒体。例如,一个或多个媒体捕获设备304中的媒体捕获设备可以将整个媒体内容发送到媒体系统302(例如,自动地或响应于媒体系统302从媒体捕获设备请求整个捕获的媒体内容)。在另一示例中,媒体系统302可以从媒体捕获设备或从一个或多个媒体捕获设备304中的多个媒体捕获设备请求所捕获的媒体内容的特定剪辑(例如,基于一个或多个检测到的触发,如下面更详细的描述)。在一些情况下,媒体捕获设备可以仅基于触发来捕获媒体内容。例如,一个或多个媒体捕获设备304中的媒体捕获设备可以在接收到触发时捕获事件的视频、音频和/或其他媒体。在一个说明性示例中,一个或多个媒体捕获设备304中的媒体捕获设备可以捕获生成触发时的媒体(例如,记录视频、音频和/或其他媒体)以及生成触发之前和/或之后的一定持续时间(例如,x秒)的媒体。媒体捕获设备要捕获媒体内容的时间窗口(基于生成触发的时间加上之前和/或之后的持续时间)在本文中可以称为媒体窗口大小。在一些示例中,媒体系统302可以从媒体捕获设备或一个或多个媒体捕获设备304中的多个媒体捕获设备接收媒体流(例如,视频流和音频-视频流、音频流等),在这种情况下,所述媒体捕获设备或所述多个媒体捕获设备可以记录和/或缓冲媒体内容,也可以不记录和/或缓冲媒体内容。在媒体内容正在被一个或多个媒体捕获设备304捕获时,可以将媒体流提供给媒体系统302。
在一些示例中,设备数据还可以由一个或多个媒体捕获设备304与媒体内容分开地或与媒体内容一起发送到媒体系统302。与媒体捕获设备相关联的设备数据可以包括设备标识符(例如,设备名称、设备序列号或其他数字标识符、或其他合适的标识符)、媒体捕获设备的用户(如果该设备存在唯一的用户的话)的标识符(例如,用户的名字、用户的数字标识符、或其他合适的用户标识符)、可以用来确定媒体捕获设备的稳定性的传感器数据(例如,媒体捕获设备304是否被安装(稳定)而不是被手持)和/或任何其他合适的数据。传感器数据可以来自媒体捕获设备的任何合适类型的传感器,例如加速度计、陀螺仪、磁力计和/或其他类型的运动传感器。媒体系统302可以存储设备数据以供以后使用。在一些情况下,媒体系统302可以将设备数据与事件中的对应时间相关联。
在一些实施方式中,媒体系统302可以从一个或多个用户设备306、主办事件的地点处的记分板和/或该地点处的其他设备接收其他数据,并且可以将其他数据与事件中的对应时间相关联。媒体系统302还可以存储其他数据以供以后使用。图4是示出在体育赛事事件处的记分板400的示例的图。可以将来自记分板400的记分板数据提供给媒体系统302。记分板数据可以用于检测事件期间的重大事件发生(例如,得分变化、运动员替换、诸如事件的四分之一、一半或事件本身结束之类的重大时间变化、处罚等),其可用于自动生成一个或多个触发。
在一些示例中,照相机(例如,一个或多个媒体捕获设备304中的媒体捕获设备和/或一个或多个用户设备306中的用户设备的照相机)可以与记分板400对准以捕获记分板400的图像或视频。在一些情况下,与媒体系统302的提供者相关联的应用或网站(例如,安装在媒体捕获设备304和/或用户设备306上和/或由媒体捕获设备304和/或用户设备306执行)可以分析记分板的图像的变化,以便检测事件期间的重大事件发生。在一些情况下,应用或网站可以将记分板的图像(和/或记分板数据)发送到媒体系统302,并且媒体系统302可以分析记分板数据(或图像)的变化,以便检测事件期间的重大事件发生。例如,可以使用计算机视觉技术分析图像,以确定事件期间的重大事件发生。在一些示例中,记分板可以被集成到与媒体系统302的提供者相关联的应用或网站(例如,安装在媒体捕获设备和/或用户设备上和/或由媒体捕获设备和/或用户设备执行)中。在这些示例中,事件可以与集成到应用或网站中的记分板同步。例如,如上所述,触发可以是基于来自可以与事件间接配对的第三方系统(例如记分板)的数据。在一个说明性示例中,第三方系统可以与系统中的“场所”对象配对,并且场所可以与给定日期和时间的事件配对。当事件在给定的“场所”活跃时,与该“场所”配对的所有设备和/或系统可以提供在该事件的情景中使用的数据和/或触发。
在一些示例中,记分板接口设备可以连接至记分板,并且可以解释在记分板上发生的事件,例如时钟停止、时钟开始、时钟值、主队得分、客队得分等等。在一些情况下,记分板接口可以是独立的硬件设备。记分板接口设备可以通过网络连接到媒体系统302、一个或多个用户设备306中的用户设备和/或一个或多个媒体捕获设备304中的媒体捕获设备,并且可以将记分板信息中继到媒体系统302、一个或多个用户设备306中的用户设备和/或一个或多个媒体捕获设备304中的媒体捕获设备。媒体系统302、用户设备和/或媒体捕获设备可以基于记分板信息生成触发。
可以基于由触发检测引擎312检测到的触发从捕获的媒体中选择候选媒体片段。媒体片段可以包括由一个或多个媒体捕获设备304中的媒体捕获设备捕获的整个媒体内容项的一部分。例如,媒体内容项可以包括由媒体捕获设备捕获的视频,并且媒体片段可以包括该视频的一部分(例如,整个视频的前十秒,或者视频的其他部分)。媒体内容项的与媒体片段相对应的部分可以是基于生成触发的时间。例如,可以在事件期间的时间点生成(例如,由用户设备、媒体捕获设备、触发设备生成或自动生成)触发。响应于该触发,可以选择媒体内容项的特定部分(对应于生成触发的时间点)作为候选媒体片段。例如,用于候选媒体片段的媒体内容项的部分可以包括在生成触发时捕获的媒体以及在生成触发的时间之前和/或之后的一定持续时间(例如,x秒数)捕获的媒体,从而得到时间长度大约等于该持续时间的候选媒体片段。在一个说明性示例中,候选媒体片段可以包括在生成触发时捕获的媒体,加上在生成触发的时间之前的十秒捕获的媒体,从而得到10-11秒的媒体片段。在另一说明性示例中,用于候选媒体片段的媒体内容项的部分可以包括在生成触发时捕获的媒体,加上在生成触发的时间之前十秒捕获的媒体和在触发的生成时间之后十秒钟捕获的媒体,从而得到20-21秒的媒体片段。
生成触发的时间、媒体项中(例如,视频中)的时间和事件中的时间之间的协调可以是基于绝对时间值(例如,由网络提供)和本地设备(例如,一个或多个媒体捕获设备304、一个或多个用户设备306和/或一个或多个触发设备308)的时间基准。例如,在一些情况下,触发的时间是基于绝对时间值,该绝对时间值可以由网络服务器或其他设备(例如,蜂窝基站、互联网服务器等)提供。绝对时间值可以用时间戳来表示。网络连接的设备按设计通过网络(例如,蜂窝网络、WiFi网络等)提供可靠且准确的时间基准,然后该时间基准可供应用使用。媒体捕获设备304可以从服务器接收触发的绝对时间值以及媒体窗口大小(例如,触发时间-5s,触发时间+20s或其他窗口大小),并且可以捕获或提供对应的媒体。当媒体捕获设备具有准确的时间基准并且还在运行与媒体系统302相关联的应用时,可以使用本地媒体捕获设备的时间戳将网络服务器提供的绝对时间戳直接映射到本地视频。
在一个说明性示例中,一个或多个媒体捕获设备304中的媒体捕获设备可以是运行与媒体系统302的提供者相关联的应用的智能电话。在这样的示例中,在视频被捕获(当时可供应用使用)与网络提供的其绝对时间基准之间不存在滞后或具有最小的滞后。在另一说明性示例中,在照相机与运行与媒体系统302的提供者相关联的应用的设备或服务器物理上分开的情况下,视频需要被传输到运行该应用的服务器。在这样的示例中,当应用接收具有绝对时间戳的触发时,应用可以使用本地服务器时间基准来执行触发。然而,应用可能不会自动补偿视频和/或触发从照相机传送到服务器所引起的延迟。如果不调整这样的偏移量,则结果是在视频片段中捕获的时刻示出在时间上比预期的要早捕获的视频。提供了校正这种延迟的技术。在一个说明性示例中,可以向服务器输入(例如,手动输入、自动输入等)固定偏移量,该偏移量施加到对于给定事件的来自一个或多个媒体捕获设备304中的给定媒体捕获设备的所有视频(和/或其他媒体)或所有一个或多个媒体捕获设备304上的视频。例如,当基于获得的触发提取视频片段时,服务器可以将偏移量施加到所有视频。在另一说明性示例中,可以由一个或多个媒体捕获设备304中的任何媒体捕获设备来拍摄示出可用的即时绝对时间值的识别模式(例如,QR码、条形码、图像或其他识别模式),并且媒体系统302的服务器引擎可以自动检测该识别模式,解释该识别模式的对应时间值,计算所需的偏移量,并将其定义为该照相机供给源的偏移量或对应事件的所有照相机供给源的偏移量。结果,当生成触发时,考虑到特定媒体流所特有的延迟,应用将接收绝对时间戳和计算出的偏移量值以裁剪正确的视频片段。
在另一说明性示例中,可以使用人工智能应用或算法(例如,使用诸如神经网络之类的机器学习)来确定在基于获得的触发提取媒体片段时将被施加到一个或多个媒体内容项(例如,视频)的偏移量。例如,使用以下描述的技术,可以相对于所获得的触发来分析在媒体片段中捕获的一个或多个对象的运动,以获得该触发和可能生成该触发的运动之间的偏移量。使用对来自媒体流的多个捕获的媒体片段的分析的结果,可以生成估计的偏移量。例如,如果在媒体片段中捕获的大多数运动在每个捕获的媒体片段中相对于对应触发在大约相同的时间发生,则该时间可以被定义为该媒体流的偏移量。可以继续分析相对于对应触发的偏移量,以进一步提高偏移量的精度或针对特定媒体流调整偏移量的漂移。
在一些实施方式中,媒体系统302可以接收由一个或多个媒体捕获设备304捕获的媒体(例如,作为媒体流,或者在由一个或多个媒体捕获设备304存储媒体之后),并可以使用检测到的触发从接收到的媒体中提取候选媒体片段。例如,媒体片段分析引擎314可以从自一个或多个媒体捕获设备304接收的媒体中提取媒体片段(例如,来自捕获的视频的视频片段),其中提取的视频片段对应于来自一个或多个触发源的触发(例如,由一个或多个用户设备306生成的触发,由一个或多个媒体捕获设备304生成的触发,由一个或多个触发设备308生成的触发和/或自动生成的触发)。
如上所述,媒体系统302可以将检测到的触发与对应于生成该触发的时间的事件中的时间相关联。媒体片段分析引擎314可以基于与触发相关联的时间来提取所接收的媒体的部分。例如,与触发相关联的时间可以被媒体片段分析引擎314用来识别所接收的媒体的要提取为候选媒体片段的部分。使用上面的示例,将被选择为候选媒体片段的媒体内容的一部分可以包括在生成触发时捕获的媒体,以及在生成触发的时间之前和/或之后的一定持续时间(例如,x秒)捕获的媒体,从而得到长度大约等于该持续时间的候选媒体片段。
在一些实施方式中,媒体系统302可以将检测到的触发传送到一个或多个媒体捕获设备304,并且可以接收与触发对应的媒体片段。在这样的实施方式中,一个或多个媒体捕获设备304可以使用触发来选择候选媒体片段。例如,媒体系统302可以将一个或多个检测到的触发发送到一个或多个媒体捕获设备304中的一些或全部,并且从媒体系统302接收到触发的媒体捕获设备可以使用触发来选择候选媒体片段。在一些情况下,媒体系统302还可以发送与触发相关联的时间(例如,与第一触发相关联的第一时间、与第二触发相关联的第二时间等等)。一个或多个媒体捕获设备304可以以与上面针对媒体系统302描述的方式相同的方式选择候选媒体片段。例如,一个或多个媒体捕获设备304中的媒体捕获设备可以使用与触发相关联的时间来识别接收到的媒体中要提取为候选媒体片段的部分。一旦媒体捕获设备已经选择了一个或多个候选媒体片段(基于一个或多个接收到的触发),则媒体捕获设备可以将所选的一个或多个媒体片段发送给媒体系统302以进行分析。如果多个媒体捕获设备从由不同媒体捕获设备捕获的不同媒体内容项(例如,不同视频)提取候选媒体片段,则所有媒体捕获设备可以将它们各自的候选媒体片段发送给媒体系统302以进行分析。
媒体系统302可以将接收到的媒体内容和关联的设备数据与对应的事件相关联。例如,媒体系统302可以将由媒体捕获设备接收的视频内容与媒体捕获设备的设备数据一起存储。视频内容和设备数据可以与视频被捕获的事件相关联。如上所述,设备数据可以包括设备标识符、该设备的用户(如果该设备存在唯一用户的话)的标识符、可以用于确定媒体捕获设备的稳定性的传感器数据、它们的任意组合、和/或任何其他合适的数据。
媒体系统102可以评估候选媒体片段,以确定哪些媒体片段要包括在媒体内容汇集中。例如,质量度量引擎316可以分析候选视频片段以确定候选视频片段的质量。质量数据可以与候选视频片段相关联(例如,第一视频片段的质量数据可以与第一视频片段相关联地存储,第二视频片段的质量数据可以与第二视频片段相关联地存储,等等)。可以选择最高质量的候选媒体片段以包括在媒体内容汇集中。
媒体片段的质量数据可以是基于为媒体片段确定的一个或多个质量度量。为媒体片段确定的质量度量可以是基于指示媒体片段可能具有的对于用户的感兴趣程度的因素。视频片段(或其他媒体片段)的质量度量的一个示例是在媒体片段中捕获的一个或多个对象的运动量。例如,媒体捕获设备304可以捕获体育赛事的视频,该视频包括场上的运动员。在体育赛事事件期间,运动员可以在场上移动。候选视频片段可以包括捕获的视频的一部分(例如,捕获的视频的十秒片段)。候选视频片段可以包括多个视频帧,其中运动员在帧之间在移动。可以确定视频片段中运动员的运动量,并且可以将其用作质量度量。例如,由于更多的运动指示视频捕获了一个或多个感兴趣的对象(例如,运动员),因此更多的运动(例如,大于运动阈值)与更高的质量相关联。没有运动或少量运动(例如,低于运动阈值)可能与较低质量相关联,因为没有运动或很少运动指示视频未捕获一个或多个感兴趣的对象。例如,视频片段中没有运动可以指示视频片段中不存在运动员,在这种情况下,体育赛事事件期间的感兴趣时刻(如使得视频片段被提取为候选视频片段的触发所指示)未被视频片段捕获。
视频片段中一个或多个对象的运动量可以由质量度量引擎316使用任何适当的技术来确定。例如,候选视频片段的帧之间的光流可以用来确定像素在帧之间的移动,这可以指示在视频片段中发生的运动量。在一些情况下,可以在视频片段的每个帧处(例如,从视频片段的第二帧开始)生成光流图。光流图可以包括帧中每个像素的矢量,每个矢量指示像素在帧之间的移动。例如,可以在相邻帧之间计算光流以生成光流矢量,并且光流矢量可以被包括在光流图中。每个光流图可以包括二维(2D)矢量场,其中每个矢量是示出点从第一帧到第二帧的移动的位移矢量。
质量度量引擎316可以使用任何合适的光流过程来确定视频片段中一个或多个对象的运动或移动。在一个说明性示例中,视频片段的帧M中的像素I(x,y,t)可以在一定时间Δt之后在下一帧M+t中移动了距离(Δx,Δy)。在假设像素相同并且强度在帧M和下一帧M+t之间不变的情况下,可以假设下式:
I(x,y,t)=I(x+Δx,y+Δy,t+Δt) 式(1)。
通过对上式(1)的右侧进行泰勒级数近似,然后去除公共项并除以Δt,可以将光流方程推导为:
fxu+fyv+ft=0, 式(2),
其中:
以及
使用光流方程(式(2)),可以求出图像梯度fx和fy以及随时间变化的梯度(表示为ft)。u和v项是I(x,y,t)的速度或光流的x和y分量,并且是未知的。光流方程因具有两个未知变量而无法求解,在这种情况下,可以使用任何合适的估计技术来估计光流。此类估计技术的示例包括差分方法(例如,Lucas-Kanade估计、Horn-Schunck估计、Buxton-Buxton估计或其他合适的差分方法)、相位相关、基于块的方法或其他合适的估计技术。例如,Lucas-Kanade假设光流(图像像素的位移)小,并且在像素I的局部邻域中近似恒定,并使用最小二乘法求解该邻域中所有像素的基本光流方程。
其他技术也可以用于确定视频片段中一个或多个对象的运动量。例如,基于颜色的技术可用于否定地确定运动。在一个说明性示例中,如果媒体捕获设备304正在拍摄溜冰场的一侧,并且由于运动员在溜冰场的另一侧而使该侧变空,则质量度量引擎316可以识别出白色量在这些视频帧中占主导。基于检测到白色量占主导,质量度量引擎316可以确定正在捕获的视频中没有运动(或几乎没有运动)。可以将白色量(例如,基于像素强度值)与一阈值进行比较,以确定白色是否占主导,从而确定是否存在运动。在一个说明性示例中,阈值可以包括具有白色像素值(例如,在0-255的像素值范围内的值255)的像素的阈值数目。例如,如果白色量大于阈值,则可以确定场景中没有运动或几乎没有运动。当白色量小于阈值时,质量度量引擎316可以确定正在捕获的视频中存在运动。尽管使用白色作为颜色的示例,但是可以使用任何合适的颜色(例如,基于事件的类型)。例如,对于其他类型的事件(例如,足球、橄榄球、曲棍球、长曲棍球等),颜色可以设置为绿色。
在一些示例中,可以将在媒体片段中捕获的一个或多个对象的运动量量化为运动得分。运动得分可以是加权的运动得分。例如,当从在生成触发的时间之前的一定持续时间(例如,x秒数)的视频中提取媒体片段时,对于媒体片段的较早部分可以使用较低的权重,而对于媒体片段的较后部分可以使用较高的权重,因为对应于触发的大多数动作通常发生在剪辑的结尾,该结尾更接近于生成触发的时间。在这样的示例中,在视频片段的较早部分中检测到的运动将被给予比在视频片段的较后部分中检测到的运动小的权重。在一个说明性示例中,视频片段可以包括300帧(表示为帧1-300,并对应于每秒30帧的十秒视频剪辑)。可以为帧1-100中的每个帧分配权重0.15,可以为帧101-200中的每个帧分配权重0.35,并且可以为帧201-300中的每个帧分配权重0.5。使用检测到的帧之间的运动乘以随时间变化的权重,可以为该视频片段计算运动得分。在另一示例中,当在生成触发的时间之前一定持续时间(例如,x秒数)和在生成触发的时间之后一定持续时间(例如,x秒数)捕获媒体片段时,对于媒体片段的开始和结尾可以使用较低的权重,而对于媒体片段的中间可以使用较高的权重,媒体片段的中间更接近生成触发的时间。
用于视频片段(或其他媒体片段)的质量度量的另一示例是一个或多个媒体捕获设备304中的媒体捕获设备在捕获视频片段时的运动。例如,用于媒体内容汇集中的媒体捕获设备的优先级可以是基于媒体捕获设备的稳定性。如上所述,为媒体捕获设备存储的设备数据可以包括可用来确定媒体捕获设备的稳定性的传感器数据。传感器数据可用于确定媒体捕获设备是否稳定(例如,由于安装在三脚架或其他支架上,与手持相反)。可以将媒体捕获设备的稳定性与基于视频片段中的一个或多个对象的运动的质量度量一起使用,因为手持的媒体捕获设备(例如,具有照相机的移动电话)在拍摄视频时可能抖动,这也会产生高的运动得分。基于稳定性的优先级可以帮助抵消此类问题。例如,如果确定媒体捕获设备是稳定的,并且确定从由媒体捕获设备捕获的视频中提取的视频片段具有高的运动得分,则质量度量引擎316可以确定针对该媒体片段检测到的运动是对象的实际运动,而不是媒体捕获设备本身的移动。
在一些情况下,稳定性阈值可用于确定媒体捕获设备是稳定的还是不稳定的。例如,可以由质量度量引擎316从媒体捕获设备的一个或多个传感器(例如,加速度计、陀螺仪、磁力计、其组合和/或另一类型的传感器)获得传感器数据。在一些情况下,与媒体系统302的提供者相关联的应用可以从媒体捕获设备获得传感器数据,并且可以将传感器数据发送到媒体系统302。在一个说明性示例中,传感器数据可以包括俯仰、横滚和偏航,其对应于围绕三维空间的x、y和z轴的旋转。在一些实施方式中,可以获得对应于媒体片段的时间段的传感器数据(例如,在媒体片段的时间段内来自一个或多个传感器的读数)。质量度量引擎316可以将传感器数据与稳定性阈值进行比较,以确定媒体捕获设备是稳定的还是不稳定的。如果传感器数据指示移动低于稳定性阈值(指示几乎没有移动至没有移动),则可以确定媒体捕获设备是稳定的。另一方面,如果传感器数据指示移动在稳定性阈值以上(指示多于预期的移动),则可以确定媒体捕获设备是不稳定的。与确定为不稳定的其他媒体捕获设备相比,(例如,基于传感器数据确定为)稳定的媒体捕获设备与更高的质量相关联。确定为稳定(因此具有较高质量)的媒体捕获设备将优先于被认为不稳定的媒体捕获设备。
在一些情况下,设备传感器可以暴露由应用实时解释的实时数据(例如,在数据被生成和接收时),并且被转换成得分(例如,运动得分)。当执行触发时,应用可以检索最新得分值(例如,运动得分值),验证该得分是高于还是低于质量阈值,并上传具有关联质量或优先级标签的对应视频剪辑。在一些情况下,标签可以包括得分。当服务器应用处理所有接收到的视频以进行排序并随后还处理媒体内容汇集(例如,集锦)时,服务器应用可以读取这些标签以对每个视频进行优先级排序。
用于媒体片段(例如,视频片段或任何其他媒体片段)的质量度量的另一示例是与该媒体片段相关联的触发的数目。例如,与第二视频片段相比,第一视频片段对应于更大的触发数目指示与第二视频片段相比,第一视频片段更令人感兴趣。在这样的示例中,第一视频片段可以被认为具有比第二视频片段更高的基于触发的质量。
质量度量的另一示例是基于媒体片段中特定对象的存在。这样的对象在本文中可以被称为感兴趣的对象。例如,可以将特定运动赛事事件中的一个运动员确定为感兴趣的对象,并且可以使具有与该运动员相关联的媒体的媒体片段优先于与该运动员不关联的媒体片段。在一个说明性示例中,可以使在事件期间包括该运动员的视频片段优先于不包括该运动员的其他视频片段。在一些情况下,可以基于用户输入来确定感兴趣的对象。例如,用户可以提供输入(例如,使用一个或多个用户设备306中的用户设备、一个或多个媒体设备304中的媒体设备或其他设备),该输入指示该用户对特定对象感兴趣。响应于用户输入,质量度量引擎316可以标记或以其他方式标识包括感兴趣的对象的媒体片段。在一些情况下,可以自动识别感兴趣的对象。例如,可以将团队中的一个运动员预先定义为感兴趣的对象,并且可以为该运动员的媒体片段分配比不包括该运动员的媒体片段更高的优先级。
可以使用任何适当的技术在媒体片段中识别感兴趣的对象,诸如使用针对视频的对象识别、针对音频的音频识别和/或任何其他适当类型的识别或标识技术。在一个说明性示例中,可以将一个运动员指定为感兴趣的对象。可以对视频帧执行面部识别,以识别该运动员是否存在于视频帧中。在另一示例中,可以执行对象识别以确定视频帧中的运动员的运动衫号码,并且可以基于对象识别的结果来识别分配给运动员的运动衫号码。对象识别可以包括对象字符识别算法,或者可以识别视频帧中的数字的任何其他类型的对象识别。
质量度量引擎316可以将候选媒体片段与来自所有数据源的数据相关联,所述数据例如为媒体片段质量数据(例如,视野中的运动、稳定性、触发的数目和/或其他质量数据)、设备数据(例如,用户标识符、运动传感器数据和/或其他设备数据)、基于时间的数据(例如,记分板数据或其他基于时间的数据)、基于触发的数据(例如,每个触发的用户的标识、总触发数目和/或其他基于触发的数据)。
如上所述,所确定的不同媒体片段的质量可以用于确定哪些媒体片段将被包括在媒体内容汇集(例如,事件的集锦)中。例如,可能有多个媒体捕获设备304同时捕获事件的视频。图5是示出发生事件的地点500的示例的图。如图所示,该事件是足球比赛,并且有四个视频捕获设备504a、504b、504c和504d布置在地点500周围的不同位置。视频捕获设备504a、504b、504c和504d提供事件的不同的照相机角度和视点。可以在图5所示的足球比赛期间的时间点生成触发。基于该触发的生成,与该时间点以及在生成触发的时间之前和/或之后一定持续时间相对应的候选视频片段可以从所有的视频捕获设备504a、504b、504c和504d捕获的视频中提取。
可以比较为提取的媒体片段确定的质量度量,以确定来自不同视频捕获设备504a-504d的候选媒体片段中的哪些候选媒体片段将被包括在与事件相对应的媒体内容汇集(例如,事件的集锦、一组视频剪辑和/或其他合适的媒体汇集)中。例如,如图5所示,场上的运动员位于场地的下半部,该场地的下半部在两个视频捕获设备504b和504d的视场内。该场地的上半部没有运动员,该场地的上半部在两个视频捕获设备504a和504c的视场内。基于运动员处于两个视频捕获设备504b和504d的视场中,在来自视频捕获设备504b和504d的视频片段中捕获的运动员的运动量将高于来自视频捕获设备504a和504c的视频片段中任何对象的运动。结果,来自视频捕获设备504b和504d的视频片段将比来自视频捕获设备504a和504c的视频片段具有更高的运动得分。具有较高运动得分的视频片段可以被优先用于媒体内容汇集中。
还可以确定视频捕获设备504a、504b、504c和504d的稳定性。例如,来自视频捕获设备504a、504b、504c和504d的传感器数据可以由质量度量引擎316进行分析,质量度量引擎316可以确定传感器数据指示高于还是低于稳定性阈值的移动。在一个说明性示例中,视频捕获设备504b和504c可以基于视频捕获设备504b和504c的传感器数据指示低于稳定性阈值的移动而被认为是稳定的(例如,在三脚架或其他稳定机构上),而视频捕获设备504a和504d可以基于视频捕获设备504a和504d的传感器数据指示高于稳定性阈值的移动而被认为是不稳定的(例如,由于设备正被手持)。稳定的视频捕获设备504b和504c与不太稳定的视频捕获设备504a和504d相比可以被优先用于媒体内容汇集中。
然后,媒体汇集生成引擎318可以基于运动得分和基于稳定性的优先级选择来自视频捕获设备504a、504b、504c和504d的视频片段用于包括在媒体内容汇集中。例如,由于视频捕获设备504b和504c是稳定的,因此视频捕获设备504b和504c将优先于视频捕获设备504a和504d。由于来自视频捕获设备504b的视频片段比来自视频捕获设备504d的视频片段具有更高的运动得分,因此相比于视频捕获设备504c,媒体汇集生成引擎318然后可以选择视频捕获设备504b。这样的结果将提供与所生成的触发相关联的动作的高质量视频片段(例如,具有更好的图像稳定性)。
媒体系统302可以生成媒体内容汇集,该媒体内容汇集包括基于与候选媒体片段相关联的数据选择的媒体片段。例如,媒体汇集生成引擎318可以使用媒体片段质量数据(基于所确定的质量度量)自动创建集锦。在一个说明性示例中,媒体汇集生成引擎318可以基于总触发数目来识别最相关的视频片段的子集,并且可以基于媒体片段质量数据从该子集中为每个触发选择最佳视频片段。
媒体内容汇集可以包括来自位于事件周围的不同媒体捕获设备的捕获媒体内容的多个缩短的剪辑(对应于媒体片段)。所选媒体片段的组可以具有不同的特性,这些特性可以是基于媒体捕获设备在捕获媒体片段时的特性或设置。例如,媒体内容汇集中的视频片段可以来自不同的时间点(对应于整个事件期间生成的触发),可以来自现场的不同视点(对应于用于捕获视频片段的不同的媒体捕获设备),可以具有不同的缩放量或其他显示特性,可以具有不同的音频特性(例如,基于在不同时间点捕获的不同音频),可以具有其任何合适的组合,并且/或者可以在汇集中的媒体片段之间具有任何其他合适的变化。
在一些示例中,媒体内容汇集可以包括基于时刻的集锦。基于时刻的集锦可以基于用户生成,并且可以包括与事件期间该用户的设备生成的所有触发相对应的媒体片段。例如,如果用户通过选择在用户设备上安装的应用中的触发图标十次来生成十个触发,则基于时刻的集锦可以包括基于这十个触发生成的十个媒体片段。这十个媒体片段将对应于在生成触发的时间周围发生的事件中的时刻,并且可以按时间顺序显示(例如,最早的媒体片段首先显示,然后显示时间上的下一个媒体片段,依此类推)。对于时间的每个时刻,将为基于时刻的集锦选择最高质量的媒体片段(使用上述质量度量确定)。
在一些示例中,媒体内容汇集可以包括基于事件的集锦。例如,可以选择与事件期间具有最大触发数目的时刻相对应的媒体片段以包括在基于事件的集锦中。在另一示例中,可以基于用户已经与其他用户共享这些媒体片段的次数来选择媒体片段以包括在基于事件的集锦中。例如,给定用户可以通过如下与其他用户共享媒体片段:例如,用该媒体片段向其他用户发送电子邮件,用该媒体片段向其他用户发送短信(例如,使用SMS或其他短信平台),用该媒体片段向其他用户发送消息,针对该媒体片段标记其他用户,并且/或者共享机制。相比于其他媒体片段,可以选择比其他媒体片段更频繁共享的媒体片段以包括在基于事件的集锦中。在一些情况下,可以基于媒体片段中存在感兴趣的特定对象来选择媒体片段以包括在基于事件的集锦中。例如,可以确定感兴趣的运动员(例如,基于用户输入,基于该对象在视频片段中的出现频率和/或基于其他因素),并且可以对媒体片段进行分析以确定感兴趣的对象的存在。相比于不包括感兴趣的对象的其他片段,可以选择包括感兴趣的对象的媒体片段以包括在基于事件的集锦中。
在一些情况下,当生成基于事件的集锦时,也可以考虑与媒体片段相关联的元数据。例如,虽然与事件期间的特定时刻相对应的媒体片段可能具有与之相关联的小数目的触发(例如,仅单个触发、两个触发等),但是用户可以将元数据输入到他们的设备中以指示该时刻是体育赛事事件期间的进球。在另一示例中,记分板数据可用于确定媒体片段对应于比赛中进球的时刻。基于指示该时刻对应于进球的元数据,可以将对应的媒体片段自动包括在该比赛的基于事件的集锦中。可以分析上述因素的任何组合,以确定哪些视频片段要包括在基于事件的集锦中。
一旦生成了媒体内容汇集,则媒体系统302然后可以将媒体内容汇集(例如,集锦)提供给已认证用户。例如,在其设备上安装了与媒体系统302的提供者相关联的应用的已认证用户可以通过该应用的界面访问媒体内容汇集。在另一示例中,用户可以通过与媒体系统302的提供者相关联的网站来访问媒体内容汇集。在一些示例中,用户可以在应用或网站内存储和/或共享媒体内容汇集,或者在应用或网站之外(例如,在社交网站或应用或其他合适的平台上),同与该用户相关联的其他用户(例如,该用户的“朋友”)共享该媒体内容汇集。
图6是示出用于生成事件的媒体内容汇集的媒体系统602的示例使用情况的图。该事件可以包括曲棍球比赛。由事件处的已认证的用户和/或远程观察事件的已认证的用户所生成的触发可以由媒体系统602接收。例如,触发可以由第一触发源632和第二触发源634来生成。在一些情况下,触发也可以在事件期间自动生成,如前所述。媒体内容可以由事件处的已认证的媒体源(例如,媒体捕获设备304)捕获,并且可以由媒体系统602接收。例如,第一媒体源636和第二媒体源638可以用于捕获事件的媒体内容(例如,视频、音频和/或图像)。
在一些情况下,为了创建事件的集锦640,媒体系统602可以检索与事件中的一个或多个时刻相关联的、与用户相关联的、与运动员相关联的、与团队相关联的、与位置相关联的和/或与事件的其他特征相关联的媒体片段。媒体系统302可以基于特定用户的设备(第一触发源632或第二触发源634)所生成的触发,基于由针对该事件已认证的所有用户的设备(例如,第一触发源632和第二触发源634)所生成的触发,基于事件中的特定时间,基于视野中的对象(例如,参加事件的特定运动员)等来选择候选媒体片段。媒体系统302然后可以为集锦中的每个媒体片段选择最佳媒体捕获设备(例如,第一媒体源636或第二媒体源638)。例如,如上所述,可以基于用于捕获媒体片段的媒体捕获设备的视野中的运动(例如,随时间加权),基于媒体捕获设备的运动或稳定性,基于媒体片段中特定对象的存在和/或基于其他因素来对媒体片段进行优先级划分或排序。集锦640可以包括基于事件的集锦或基于时刻的集锦。在一些情况下,可以为该事件生成基于事件的集锦,并且可以为使得在事件期间生成一个或多个触发(例如,通过点击与媒体系统602的提供者相关联的应用或网站中的触发按钮)的每个已认证的用户生成基于时刻的集锦。
媒体系统602还可以提供与事件期间捕获的一些或所有媒体片段相对应的媒体剪辑642。例如,视频剪辑644对应于在上午7:31在事件期间发生的时刻的视频片段。可以使媒体剪辑642和集锦640对于针对该事件已认证的所有用户可用。
使用上述媒体生成技术,可以为事件生成高质量的媒体内容汇集。例如,可以自动选择最相关和最高质量的媒体片段以包括在事件的集锦中。
图7是示出了使用本文公开的技术来生成媒体内容的过程700的示例的流程图。在框702处,过程700包括(例如,通过服务器计算机或其他设备或系统)检测来自设备的触发。触发与现场的事件相关联。例如,在一些情况下,事件标记可以包括在触发中,以指示触发与哪个事件相关联。在一些情况下,服务器计算机或其他设备或系统可以是媒体系统(例如,媒体系统302)的一部分。该设备不捕获用于服务器计算机或其他设备或系统的媒体片段。例如,该设备可以包括不向(例如,媒体系统302的)服务器计算机提供媒体内容的用户设备(例如,用户设备306)或触发设备(例如,触发设备308)。在一些示例中,该设备位于现场。在一些示例中,该设备位于远离现场的位置处。在一些示例中,响应于由设备获得的用户输入来生成触发。例如,用户可以按下或以其他方式选择与服务器计算机相关联的应用或网站的图形界面的虚拟按钮,并且设备可以响应于对虚拟按钮的选择而生成触发。在其他示例中,用户可以选择物理按钮,执行一个或多个手势输入,说出一个或多个语音输入和/或使用另一选择机制来生成触发。
在一些示例中,触发可以由设备基于在事件期间的时刻的检测和事件期间用户的特征中的至少一者或多者来自动生成。例如,事件期间可能导致触发自动生成的时刻或事件发生可以包括体育赛事事件期间的得分变化、体育赛事事件期间的运动员替换、体育赛事事件期间的处罚、事件期间的重大时间变化、事件期间的音频水平。事件期间位于现场的设备的用户或远程观察事件的用户的特征可以包括与用户相关联的生物测定事件、用户的移动、用户的音频水平、其任何组合和/或其他合适的用户特征。
在框704处,过程700包括(例如,通过服务器计算机或其他设备或系统)获得由位于现场的多个媒体捕获设备捕获的媒体的媒体片段。在一些示例中,如上所述,过程700可以包括(例如,通过服务器计算机或其他设备或系统)获得由位于现场的单个媒体捕获设备捕获的一个或多个媒体片段。所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发。例如,可以响应于检测到的触发来捕获、记录和/或发送所述至少一个媒体片段到服务器计算机。在一些情况下,(例如,通过服务器计算机或其他设备或系统)不获得不对应于触发的媒体片段。例如,在一些情况下,(例如,通过服务器计算机或其他设备或系统)仅获得已为其生成触发的媒体片段。
在一些示例中,可以通过从多个媒体捕获设备(或者从单个媒体捕获)接收的媒体流中提取媒体片段来(例如,通过服务器计算机或其他设备或系统)获得媒体片段。例如,获得媒体片段可以包括:接收由多个媒体捕获设备中的第一媒体捕获设备捕获的第一媒体流;接收由多个媒体捕获设备中的第二媒体捕获设备捕获的第二媒体流;以及从第一媒体流中提取第一媒体片段和从第二媒体流中提取第二媒体片段。在另一示例中,获得媒体片段可以包括:接收由第一媒体捕获设备捕获的第一媒体流;接收由第一媒体捕获设备捕获的第二媒体流;以及从第一媒体流中提取第一媒体片段和从第二媒体流中提取第二媒体片段。
在一些示例中,响应于发送到媒体捕获设备的触发,(例如,通过服务器计算机或其他设备或系统)可以获得媒体片段。例如,响应于(例如,从媒体系统、媒体捕获设备、用户设备和/或触发设备)接收到触发,媒体捕获设备可以向服务器计算机(或其他设备或系统)发送媒体片段。在一个说明性示例中,触发可以是第一触发,在这种情况下过程700还可以包括检测与现场的事件相关联的第二触发。在这样的示例中,(例如,由服务器计算机或其他设备或系统获得的)第一媒体片段可以对应于第一触发,并且(例如,由服务器计算机或其他设备或系统获得的)第二媒体片段可以对应于第二触发。继续该示例,获得媒体片段可以包括(例如,通过服务器计算机或其他设备或系统)向多个媒体捕获设备中的第一媒体捕获设备发送第一触发。第一触发使第一媒体片段从由第一媒体捕获设备捕获的媒体中被提取出。服务器计算机(或其他设备或系统)还可以将第二触发发送到多个媒体捕获设备中的第一媒体捕获设备和第二媒体捕获设备中的至少一个,其中,第二触发使第二媒体片段从由第一媒体捕获设备和第二媒体捕获设备中的至少一个捕获的媒体中被提取出。例如,可以将第二触发发送到第一媒体捕获设备、第二媒体捕获设备或第一和第二媒体捕获设备两者。第一媒体捕获设备、第二媒体捕获设备或者第一和第二媒体捕获设备两者可以从捕获的媒体中提取第二媒体片段。服务器计算机(或其他设备或系统)可以从第一媒体捕获设备和第二媒体捕获设备中的至少一个接收提取的第一媒体片段和提取的第二媒体片段。
在一些示例中,过程700可以(例如,通过服务器计算机或其他设备或系统)将第一触发和第二触发与现场的事件中的时间相关联。在这些示例中,获得的媒体片段对应于与第一触发和第二触发相关联的时间。与触发关联的时间可用于确定基于该触发要提取的特定媒体片段。
在框706,过程700包括(例如,通过服务器计算机或其他设备或系统)确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量。可以基于在媒体片段中捕获的对象的第一运动,基于用于捕获媒体片段的媒体捕获设备的第二运动,或者基于第一运动和第二运动两者,来确定媒体片段的质量度量。在一些情况下,除了第一运动和/或第二运动以外或者作为替代,媒体片段的质量度量可以是基于媒体片段中对象的存在(例如,媒体片段中一个人的存在、媒体片段中一个运动员的运动衫号码或其他对象的存在)。
在框708,过程700包括从获得的媒体片段中选择媒体片段的子集。可以基于针对所获得的媒体片段中的每个媒体片段确定的一个或多个质量度量来选择媒体片段的子集。例如,可以分析获得的不同媒体片段的质量度量,以确定哪些媒体片段具有最高的质量。在一些情况下,还基于与媒体片段的子集中的每个媒体片段相关联的触发数目来选择媒体片段的子集。
在一些示例中,过程700可以通过获得由第一媒体捕获设备捕获的事件的第一媒体片段并获得由第二媒体捕获设备捕获的事件的第二媒体片段,来从获得的媒体片段中选择媒体片段的子集。在一些示例中,第一媒体片段和第二媒体片段可以由第一媒体捕获设备捕获。可以(例如,通过位于不同位置的第一和第二媒体捕获设备)同时从事件中的不同视角捕获第一媒体片段和第二媒体片段。过程700可以确定在第一媒体片段中捕获的一个或多个对象的运动量大于在第二媒体片段中捕获的一个或多个对象的运动量。过程700可以基于在第一媒体片段中捕获的一个或多个对象的运动量大于在第二媒体片段中捕获的一个或多个对象的运动量来选择第一媒体片段。在一些情况下,如上所述,运动得分可以用于选择媒体片段的子集。例如,具有较高运动得分的媒体片段可以被优先用于媒体内容汇集中。
在框710,过程700包括生成包括媒体片段子集的媒体片段汇集。在一些示例中,过程700可以包括将媒体片段汇集提供给一个或多个设备。
在一些示例中,使用本文公开的技术来生成媒体内容的过程可以执行比上面针对图7描述的操作更少或更多的操作。例如,在一些示例中,过程可以包括(例如,通过服务器计算机或其他设备或系统)获得由位于现场的一个媒体捕获设备捕获的或由多个媒体捕获设备捕获的媒体的一个或多个媒体片段。可以(例如,通过服务器计算机或其他设备或系统)获得一个或多个触发,也可以不获得所述一个或多个触发。当检测到触发时,所获得的媒体片段中的至少一个媒体片段可以对应于所检测到的触发。此外,当获得触发时,可以不获得与触发不对应的媒体片段。该过程可以包括确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量。
(例如,通过服务器计算机或其他设备或系统)可以确定本文公开的任何质量度量。在一个说明性示例中,可以基于在媒体片段中捕获的对象的第一运动和用于捕获媒体片段的媒体捕获设备的第二运动中的至少一者来确定媒体片段的至少一个质量度量。在一些情况下,该过程可以包括基于为获得的媒体片段的每个媒体片段确定的一个或多个质量度量,从获得的媒体片段中选择媒体片段子集。例如,如上所述,可以从媒体片段中选择具有最高质量的媒体片段子集。该过程可以包括(例如,通过服务器计算机或其他设备或系统)生成包括该媒体片段子集的媒体片段汇集。
上面(例如,针对图7和上述其他示例)描述的示例可以被单独地或以任何组合来实现。
在一些示例中,过程700和/或本文描述的其他过程可以由计算设备或装置执行。例如,过程700可以由服务器计算机或公开为能够执行用于生成媒体内容的过程的操作的其他系统来执行。在一个说明性示例中,过程700和/或本文描述的其他过程可以由图3所示的媒体系统302(例如,媒体系统302中包括的一个或多个服务器计算机或其他设备或系统)执行。计算设备可以包括任何合适的设备,例如移动设备(例如,移动电话)、可穿戴设备、服务器(例如,在软件即服务(SaaS)系统或其他基于服务器的系统中)和/或具有执行过程700和/或本文所述的其他过程的资源能力的任何其他计算设备。在一些情况下,计算设备或装置可以包括各种组件,例如一个或多个输入设备,一个或多个处理器,一个或多个微处理器,一个或多个微型计算机,一个或多个输出设备和/或被配置为执行过程700和/或本文所述的其他过程的步骤的设备的其他组件。该计算设备可以包括被配置为存储数据(例如,媒体数据、触发数据、认证数据和/或任何其他合适的数据)的存储器以及被配置为处理该数据的一个或多个处理器。该计算设备还可以包括被配置为传送数据的一个或多个网络接口。网络接口可以被配置为传送基于网络的数据(例如,基于互联网协议(IP)的数据或其他合适的网络数据)。在一些实施方式中,计算设备还可以包括显示器。
计算设备的组件可以在电路中实现。例如,组件可以包括和/或可以使用电子电路或其他电子硬件来实现,所述电子电路或其他电子硬件可以包括一个或多个可编程电子电路(例如,微处理器、图形处理单元(GPU)、数字信号处理器(DSP)、中央处理单元(CPU)和/或其他合适的电子电路),并且/或者可以包括和/或使用计算机软件、固件或其任何组合来实现,以执行本文所述的各种操作。计算设备还可以包括显示器(作为输出设备的示例或作为输出设备的补充)、被配置为传送和/或接收数据的网络接口、其任何组合和/或其他组件。网络接口可以被配置为传送和/或接收基于互联网协议(IP)的数据或其他类型的数据。
过程700被示出为流程图或逻辑流图,其操作表示可以以硬件、计算机指令或其组合来实现的一系列操作。在计算机指令的情景中,所述操作表示存储在一个或多个计算机可读存储介质上的计算机可执行指令,所述计算机可执行指令在由一个或多个处理器执行时执行所述的操作。通常,计算机可执行指令包括执行特定功能或实现特定数据类型的例程、程序、对象、组件、数据结构等。描述操作的顺序不旨在被理解为限制,并且可以以任何顺序和/或并行地组合任意数量的所述操作以实现处理。
另外,过程700可以在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可以被实现为共同在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序、或一个或多个应用)、硬件或其组合。如上所述,代码可以例如以包括可由一个或多个处理器执行的多个指令的计算机程序的形式存储在计算机可读或机器可读存储介质上。计算机可读或机器可读存储介质可以是非暂态的。
图8示出了计算系统800的架构,其中系统800的组件使用诸如总线的连接805彼此进行电通信。示例性系统800包括处理单元(CPU或处理器)810和系统连接805,系统连接805将包括诸如只读存储器(ROM)820和随机存取存储器(RAM)825之类的系统存储器815的各种系统组件耦合至处理器810。系统800可以包括高速存储器的高速缓存,其与处理器810直接相连、紧密相邻或被集成为处理器810的一部分。系统800可以通过处理器810将数据从存储器815和/或存储设备830复制到高速缓存812以进行快速访问。以这种方式,高速缓存可以提供性能提升,从而避免了处理器810在等待数据时的延迟。这些模块和其他模块可以控制或被配置为控制处理器810以执行各种动作。其他系统存储器815也可以供使用。存储器815可以包括具有不同性能特性的多种不同类型的存储器。处理器810可以包括任何通用处理器和硬件或软件服务,例如存储在存储设备830中的服务1 832、服务2 834和服务3 836,其被配置为控制处理器810以及专用处理器,其中在实际的处理器设计中并入有软件指令。处理器810可以是完全独立的计算系统,包含多个核或处理器、总线、存储器控制器、高速缓存等。多核处理器可以是对称的或非对称的。
为了使用户能够与计算设备800交互,输入设备845可以表示任意数目的输入机构,例如用于语音的麦克风、用于手势或图形输入的触敏屏幕、键盘、鼠标、运动输入、语音等等。输出设备835也可以是本领域技术人员已知的许多输出机构中的一个或多个。在一些实例中,多模态系统可以使用户能够提供多种类型的输入以与计算设备800通信。通信接口840通常可以支配和管理用户输入和系统输出。对于在任何特定硬件布置上的操作没有限制,因此在开发它们时,此处的基本特征可以很容易替换为改进的硬件或固件布置。
存储设备830是非易失性存储器,并且可以是硬盘或可以存储可由计算机访问的数据的其他类型的计算机可读介质,例如,磁带、闪速存储器卡、固态存储设备、数字通用盘、盒式磁带、随机存取存储器(RAM)825、只读存储器(ROM)820及其混合。
存储设备830可以包括用于控制处理器810的服务832、834、836。可以构想到其他硬件或软件模块。存储设备830可以连接到系统连接805。在一方面,执行特定功能的硬件模块可以包括与必要的硬件组件(例如,处理器810、连接805、输出设备835等)结合存储在计算机可读介质中以执行该功能的软件组件。
为了说明的清楚起见,在一些情况下,本技术可以被呈示为包括各个功能块,这些功能块包括以软件或硬件和软件的组合体现的方法的形式包括设备、设备组件、步骤或例程的功能块。
在一些实施例中,计算机可读存储设备、介质和存储器可以包括包含比特流等的电缆或无线信号。然而,当提及时,非暂态计算机可读存储介质明确地排除诸如能量、载波信号、电磁波和信号本身之类的介质。
可以使用存储在计算机可读介质中或以其他方式从计算机可读介质中可访问的计算机可执行指令来实现根据上述示例的方法。这些指令可以包括例如引起或以其他方式配置通用计算机、专用计算机或专用处理设备以执行特定功能或功能组的指令和数据。通过网络可以访问部分计算机资源。计算机可执行指令可以是例如二进制,诸如汇编语言之类的中间格式指令,固件或源代码。可用于存储指令、所用信息和/或在根据所述示例的方法期间创建的信息的计算机可读介质的示例包括磁盘或光盘、闪速存储器、设有非易失性存储器的USB设备、网络存储设备等。
与本文公开的实施例结合描述的各种说明性的逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件、固件或其组合。为了清楚地说明硬件和软件的这种可互换性,各种说明性的组件、块、模块、电路和步骤通常根据其功能在上文中已经被描述了。这种功能被实现为硬件还是软件取决于特定应用和在总系统上施加的设计约束。技术人员可以针对每一种特定应用用不同的方式来实现描述的功能,但是,这种实现决定不应该被解释为导致脱离于本申请的范围。
实现根据这些公开的方法或过程的设备可以包括硬件、固件和/或软件,并且可以采用多种形式因素中的任何一种。这样的形式因素的典型示例包括膝上型计算机、智能电话、小形式因素的个人计算机、个人数字助理、机架安装设备、独立设备等。本文描述的功能也可以体现在外围设备或附加卡中。作为进一步的示例,这种功能还可以在单个芯片中执行的不同芯片或不同过程当中的电路板上实现。
本文描述的技术还可以以电子硬件、计算机软件、固件或其任何组合来实现。这样的技术可以在诸如通用计算机、手持式无线通信设备或具有多种用途的集成电路设备的各种设备中的任何一种中实现,所述用途包括在手持式无线通信设备和其他设备中的应用。被描述为模块或组件的任何特征都可以在集成逻辑设备中一起实现,也可以分别作为离散但可互操作的逻辑设备来实现。如果以软件实现,则所述技术可至少部分地由计算机可读数据存储介质来实现,所述计算机可读数据存储介质包括程序代码,所述程序代码包括在被执行时执行上述一种或多种方法的指令。计算机可读数据存储介质可以形成计算机程序产品的一部分,该计算机程序产品可以包括包装材料。该计算机可读介质可以包括存储器或数据存储介质,例如,诸如同步动态随机存取存储器(SDRAM)之类的随机存取存储器(RAM),只读存储器(ROM),非易失性随机存取存储器(NVRAM),电可擦可编程只读存储器(EEPROM),闪速存储器,磁或光数据存储介质等。另外或可替代地,该技术可以至少部分地通过计算机可读通信介质来实现,该计算机可读通信介质以可以由计算机访问、读取和/或执行的指令或数据结构(例如,传播的信号或波)的形式承载或传送程序代码。
程序代码可以由处理器执行,该处理器可以包括一个或多个处理器(例如一个或多个数字信号处理器(DSP)),通用微处理器,专用集成电路(ASIC),地点可编程逻辑阵列(FPGA)或其他等效的集成或离散逻辑电路。这样的处理器可以被配置为执行本公开中描述的任何技术。通用处理器可以是微处理器,但是,在可替代的方案中,处理器可以是任何传统的处理器、控制器、微控制器或状态机。处理器也可以被实现为计算设备的组合(例如,DSP和微处理器的组合)、多个微处理器、与DSP核结合的一个或多个微处理器、或者任何其他的此类配置。因此,本文所使用的术语“处理器”可以指任何前述结构,前述结构的任何组合,或适合于实现本文描述的技术的任何其他结构或装置。
指令、用于传达此类指令的介质、用于执行它们的计算资源以及用于支持此类计算资源的其他结构是用于提供这些公开中所描述的功能的手段。
尽管使用各种示例和其他信息来解释所附权利要求的范围内的各个方面,但是基于此类示例中的特定特征或布置,不应该暗示对权利要求的限制,因为本领域的普通技术人员将能够使用这些示例来推导各种各样的实施方式。此外,尽管可能已经以特定于结构特征和/或方法步骤的示例的语言描述了一些主题,但是应当理解,所附权利要求书中定义的主题不必限于这些描述的特征或动作。例如,这种功能可以被不同地分布在除本文所标识的组件之外的组件中或在其中执行。确切地说,所描述的特征和步骤被公开为在所附权利要求的范围内的系统和方法的组件的示例。
记载集合中的“至少一个”和/或集合中的“一个或多个”的权利要求语言或其他语言指示该集合中的一个成员或集合中的多个成员(以任何组合)满足权利要求。例如,陈述“A和B中的至少一个”的权利要求语言意指A、B或A和B。在另一示例中,陈述“A、B和C中的至少一个”的权利要求语言意指A,B,C,或A和B,或A和C,或B和C或A和B和C。语言“集合中的至少一个”和/或“集合中的一个或多个”不将该集合限制为集合中列出的项目。例如,陈述“A和B中的至少一个”的权利要求语言可以意指A,B或A和B,并且可以还包括未在A和B的集合中列出的项目。
在将组件描述为“被配置为”执行某些操作的情况下,这种配置可以例如通过设计电子电路或其他硬件以执行该操作,通过对可编程电子电路(例如微处理器或其他合适的电子电路)进行编程以执行该操作或其任何组合来实现。
本领域普通技术人员将会认识到,本文所使用的小于(“<”)和大于(“>”)符号或术语可以分别被小于或等于(“≤”)且大于或等于(“≥”)符号替换,而没有脱离本描述的范围。
Claims (19)
1.一种用于生成媒体内容的方法,所述方法包括:
由服务器计算机检测来自设备的触发,该触发与现场的事件相关联,其中所述设备不捕获用于服务器计算机的媒体片段;
由服务器计算机获得由位于现场的多个媒体捕获设备捕获的媒体的媒体片段,所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发,其中服务器计算机不获得与触发不对应的媒体片段;
由服务器计算机确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量,其中基于在媒体片段中捕获的对象的第一运动和用于捕获所述媒体片段的媒体捕获设备的第二运动中的至少一者来确定所述媒体片段的一个或多个质量度量;
从所获得的媒体片段中选择媒体片段子集,所述媒体片段子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的,并且所述媒体片段子集是进一步基于与所述媒体片段子集中的每个媒体片段相关联的触发的数目选择的;以及
生成包括所述媒体片段子集的媒体片段的汇集。
2.根据权利要求1所述的方法,其中,所述触发是响应于由所述设备获得的用户输入而生成的。
3.根据权利要求1所述的方法,其中,所述触发是由所述设备基于所述事件期间的时刻的检测和所述事件期间的用户的特征中的至少一者或多者而自动生成的。
4.根据权利要求1所述的方法,其中,获得所述媒体片段包括:
接收由所述多个媒体捕获设备中的第一媒体捕获设备捕获的第一媒体流;
接收由所述多个媒体捕获设备中的第二媒体捕获设备捕获的第二媒体流;以及
从第一媒体流中提取第一媒体片段并从第二媒体流中提取第二媒体片段。
5.根据权利要求1所述的方法,其中所述触发是第一触发,并且所述方法还包括检测第二触发,该第二触发与现场的所述事件相关联,其中第一媒体片段对应于第一触发并且第二媒体片段对应于第二触发。
6.根据权利要求5所述的方法,其中,获得所述媒体片段包括:
向所述多个媒体捕获设备中的第一媒体捕获设备发送第一触发,该第一触发使得从第一媒体捕获设备所捕获的媒体中提取第一媒体片段;
向所述多个媒体捕获设备中的第一媒体捕获设备和第二媒体捕获设备中的至少一个发送第二触发,该第二触发使得从第一媒体捕获设备和第二媒体捕获设备中的至少一个捕获的媒体中提取第二媒体片段;以及
从第一媒体捕获设备和第二媒体捕获设备中的至少一个接收提取的第一媒体片段和提取的第二媒体片段。
7.根据权利要求5所述的方法,还包括由服务器计算机将第一触发和第二触发与现场的所述事件中的时间相关联,其中所获得的媒体片段对应于与第一触发和第二触发相关联的时间。
8.根据权利要求1所述的方法,其中,所述媒体片段的所述一个或多个质量度量还基于所述媒体片段中的对象的存在。
9.根据权利要求1所述的方法,其中,从所获得的媒体片段中选择所述媒体片段子集包括:
获得由第一媒体捕获设备捕获的所述事件的第一媒体片段;
获得由第二媒体捕获设备捕获的所述事件的第二媒体片段,第一媒体片段和第二媒体片段是同时从所述事件的不同视角捕获的;
确定在第一媒体片段中捕获的一个或多个对象的运动量大于在第二媒体片段中捕获的一个或多个对象的运动量;以及
基于在第一媒体片段中捕获的所述一个或多个对象的运动量大于在第二媒体片段中捕获的所述一个或多个对象的运动量而选择第一媒体片段。
10.根据权利要求1所述的方法,还包括将媒体片段的所述汇集提供给一个或多个设备。
11.根据权利要求1所述的方法,其中,所述设备位于现场。
12.根据权利要求1所述的方法,其中,所述设备位于远离现场的位置处。
13.一种用于生成媒体内容的系统,包括:
存储器,被配置为存储媒体数据;和
一个或多个处理器,与所述存储器耦接并且被配置为:
检测来自设备的触发,所述触发与现场的事件相关联,其中所述设备不捕获用于所述系统的媒体片段;
获得由位于现场的多个媒体捕获设备捕获的媒体的媒体片段,所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发,其中所述系统不获得与触发不对应的媒体片段;
确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量,其中基于在媒体片段中捕获的对象的第一运动和用于捕获所述媒体片段的媒体捕获设备的第二运动中的至少一者,确定所述媒体片段的一个或多个质量度量;
从所获得的媒体片段中选择媒体片段子集,所述媒体片段子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的,并且所述媒体片段子集是进一步基于与所述媒体片段子集中的每个媒体片段相关联的触发的数目选择的;以及
生成包括所述媒体片段子集的媒体片段的汇集。
14.根据权利要求13所述的系统,其中,获得所述媒体片段包括:
接收由所述多个媒体捕获设备中的第一媒体捕获设备捕获的第一媒体流;
接收由所述多个媒体捕获设备中的第二媒体捕获设备捕获的第二媒体流;以及
从第一媒体流中提取第一媒体片段并从第二媒体流中提取第二媒体片段。
15.根据权利要求13所述的系统,其中所述触发是第一触发,并且其中所述一个或多个处理器被配置为检测第二触发,所述第二触发与现场处的所述事件相关联,其中第一媒体片段对应于第一触发并且第二媒体片段对应于第二触发。
16.根据权利要求15所述的系统,其中,获得所述媒体片段包括:
向所述多个媒体捕获设备中的第一媒体捕获设备发送第一触发,该第一触发使得从第一媒体捕获设备所捕获的媒体中提取第一媒体片段;
向所述多个媒体捕获设备中的第一媒体捕获设备和第二媒体捕获设备中的至少一个发送第二触发,该第二触发使得从第一媒体捕获设备和第二媒体捕获设备中的至少一个捕获的媒体中提取第二媒体片段;以及
从第一媒体捕获设备和第二媒体捕获设备中的至少一个接收提取的第一媒体片段和提取的第二媒体片段。
17.根据权利要求15所述的系统,其中所述一个或多个处理器被配置为将第一触发和第二触发与现场的所述事件中的时间相关联,其中所获得的媒体片段对应于与第一触发和第二触发相关联的时间。
18.一种服务器计算机的非暂态计算机可读介质,所述非暂态计算机可读介质上存储有指令,所述指令在由一个或多个处理器执行时使得所述一个或多个处理器:
检测来自设备的触发,所述触发与现场的事件相关联,其中所述设备不捕获用于服务器计算机的媒体片段;
获得由位于现场的多个媒体捕获设备捕获的媒体的媒体片段,所获得的媒体片段中的至少一个媒体片段对应于所检测到的触发,其中服务器计算机不获得与触发不对应的媒体片段;
确定所获得的媒体片段中的每个媒体片段的一个或多个质量度量,其中基于在媒体片段中捕获的对象的第一运动和用于捕获所述媒体片段的媒体捕获设备的第二运动中的至少一者,确定所述媒体片段的一个或多个质量度量;
从所获得的媒体片段中选择媒体片段子集,所述媒体片段子集是基于为所获得的媒体片段中的每个媒体片段确定的所述一个或多个质量度量而选择的,并且所述媒体片段子集是进一步基于与所述媒体片段子集中的每个媒体片段相关联的触发的数目选择的;以及
生成包括所述媒体片段子集的媒体片段的汇集。
19.根据权利要求18所述的非暂态计算机可读介质,其中,获得所述媒体片段包括:
接收由所述多个媒体捕获设备中的第一媒体捕获设备捕获的第一媒体流;
接收由所述多个媒体捕获设备中的第二媒体捕获设备捕获的第二媒体流;以及
从第一媒体流中提取第一媒体片段并从第二媒体流中提取第二媒体片段。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311168562.2A CN117041694A (zh) | 2018-09-28 | 2019-09-26 | 用于生成媒体内容的技术 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/145,774 US10872240B2 (en) | 2018-09-28 | 2018-09-28 | Systems and methods for generating media content |
US16/145,774 | 2018-09-28 | ||
PCT/US2019/053137 WO2020069116A1 (en) | 2018-09-28 | 2019-09-26 | Techniques for generating media content |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311168562.2A Division CN117041694A (zh) | 2018-09-28 | 2019-09-26 | 用于生成媒体内容的技术 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112753228A CN112753228A (zh) | 2021-05-04 |
CN112753228B true CN112753228B (zh) | 2023-09-29 |
Family
ID=68165874
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980063064.7A Active CN112753228B (zh) | 2018-09-28 | 2019-09-26 | 用于生成媒体内容的技术 |
CN202311168562.2A Pending CN117041694A (zh) | 2018-09-28 | 2019-09-26 | 用于生成媒体内容的技术 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311168562.2A Pending CN117041694A (zh) | 2018-09-28 | 2019-09-26 | 用于生成媒体内容的技术 |
Country Status (8)
Country | Link |
---|---|
US (4) | US10872240B2 (zh) |
EP (1) | EP3857906A1 (zh) |
CN (2) | CN112753228B (zh) |
AU (1) | AU2019348010B2 (zh) |
BR (1) | BR112021005620A2 (zh) |
CA (1) | CA3114105A1 (zh) |
MX (1) | MX2021003560A (zh) |
WO (1) | WO2020069116A1 (zh) |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9754338B2 (en) | 2015-10-09 | 2017-09-05 | Gt Gettaxi Limited | System to facilitate a correct identification of a service provider |
US10636108B2 (en) | 2016-09-30 | 2020-04-28 | Lyft, Inc. | Identifying matched requestors and providers |
US10554783B2 (en) | 2016-12-30 | 2020-02-04 | Lyft, Inc. | Navigation using proximity information |
US11475409B2 (en) | 2017-06-07 | 2022-10-18 | Digital Seat Media, Inc. | Method and system for digital record verification |
US11206432B1 (en) | 2017-06-07 | 2021-12-21 | Digital Seat Media, Inc. | System and method for providing synchronized interactive multimedia content to mobile devices based on geolocation of a vehicle |
WO2019191708A1 (en) * | 2018-03-30 | 2019-10-03 | Realnetworks, Inc. | Socially annotated audiovisual content |
US10872240B2 (en) | 2018-09-28 | 2020-12-22 | Opentv, Inc. | Systems and methods for generating media content |
US11010627B2 (en) | 2019-01-25 | 2021-05-18 | Gracenote, Inc. | Methods and systems for scoreboard text region detection |
US11087161B2 (en) | 2019-01-25 | 2021-08-10 | Gracenote, Inc. | Methods and systems for determining accuracy of sport-related information extracted from digital video frames |
US10997424B2 (en) | 2019-01-25 | 2021-05-04 | Gracenote, Inc. | Methods and systems for sport data extraction |
US11036995B2 (en) | 2019-01-25 | 2021-06-15 | Gracenote, Inc. | Methods and systems for scoreboard region detection |
US11805283B2 (en) | 2019-01-25 | 2023-10-31 | Gracenote, Inc. | Methods and systems for extracting sport-related information from digital video frames |
US11182768B2 (en) | 2019-03-06 | 2021-11-23 | Digital Seat Media, Inc. | System and method for location-based individualized content and mobile wallet offers |
US11910452B2 (en) | 2019-05-28 | 2024-02-20 | Lyft, Inc. | Automatically connecting wireless computing devices based on recurring wireless signal detections |
US11596853B2 (en) * | 2020-03-03 | 2023-03-07 | Thomas J. McWilliams | Integrated sports hub application |
USD997988S1 (en) | 2020-03-30 | 2023-09-05 | Lyft, Inc. | Transportation communication device |
US11887386B1 (en) * | 2020-03-30 | 2024-01-30 | Lyft, Inc. | Utilizing an intelligent in-cabin media capture device in conjunction with a transportation matching system |
US11657337B2 (en) | 2020-04-27 | 2023-05-23 | Digital Seat Media, Inc. | System and method for exchanging tickets via a machine-readable code |
US11488273B2 (en) | 2020-04-27 | 2022-11-01 | Digital Seat Media, Inc. | System and platform for engaging educational institutions and stakeholders |
US11494737B2 (en) | 2020-04-27 | 2022-11-08 | Digital Seat Media, Inc. | Interactive and dynamic digital event program |
WO2021222934A1 (en) | 2020-04-27 | 2021-11-04 | Digital Seat Media Inc. | Method and system for digital record verification |
US11481807B2 (en) | 2020-04-27 | 2022-10-25 | Digital Seat Media, Inc. | Delivery of dynamic content based upon predetermined thresholds |
WO2022232769A1 (en) | 2021-04-27 | 2022-11-03 | Digital Seat Media, Inc. | Systems and methods for delivering augmented reality content |
US11799940B1 (en) * | 2021-09-28 | 2023-10-24 | Amazon Technologies, Inc. | Techniques for upload prioritization of content |
CN114339067A (zh) * | 2021-11-15 | 2022-04-12 | 华能国际电力股份有限公司上海石洞口第二电厂 | 基于5g环境下的多通道图像及视频流同步与分布式处理方法及系统 |
SE545897C2 (en) * | 2022-02-04 | 2024-03-05 | Livearena Tech Ab | System and method for producing a shared video stream |
US11895368B2 (en) * | 2022-03-04 | 2024-02-06 | Humane, Inc. | Generating, storing, and presenting content based on a memory metric |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106164977A (zh) * | 2013-12-17 | 2016-11-23 | 英特尔公司 | 照相机阵列分析机制 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6822693B2 (en) * | 2000-12-23 | 2004-11-23 | International Business Machines Corporation | Television tuner that changes the rendering of a digital television broadcast according to information displayed on a scoreboard during a sporting event |
US20020194608A1 (en) * | 2001-04-26 | 2002-12-19 | Goldhor Richard S. | Method and apparatus for a playback enhancement system implementing a "Say Again" feature |
EP2408193A3 (en) * | 2004-04-16 | 2014-01-15 | James A. Aman | Visible and non-visible light sensing camera for videoing and object tracking |
US7542588B2 (en) * | 2004-04-30 | 2009-06-02 | International Business Machines Corporation | System and method for assuring high resolution imaging of distinctive characteristics of a moving object |
US20050272496A1 (en) * | 2004-06-03 | 2005-12-08 | Reinish Israel B | Automated game system for use on golf driving ranges and in other arena-based sports |
US8611723B2 (en) * | 2006-09-06 | 2013-12-17 | James Andrew Aman | System for relating scoreboard information with event video |
US9141859B2 (en) * | 2008-11-17 | 2015-09-22 | Liveclips Llc | Method and system for segmenting and transmitting on-demand live-action video in real-time |
US9141860B2 (en) * | 2008-11-17 | 2015-09-22 | Liveclips Llc | Method and system for segmenting and transmitting on-demand live-action video in real-time |
US9071868B2 (en) * | 2009-05-29 | 2015-06-30 | Cognitive Networks, Inc. | Systems and methods for improving server and client performance in fingerprint ACR systems |
CA2844605C (en) * | 2011-08-10 | 2016-10-25 | Lg Electronics Inc. | Method for transmitting broadcast service, method for receiving broadcast service, and apparatus for receiving broadcast service |
US9596398B2 (en) * | 2011-09-02 | 2017-03-14 | Microsoft Technology Licensing, Llc | Automatic image capture |
US20130268962A1 (en) * | 2012-04-10 | 2013-10-10 | Shawn Andrew SNIDER | Integration of social media with live events |
US9503645B2 (en) * | 2012-05-24 | 2016-11-22 | Mediatek Inc. | Preview system for concurrently displaying multiple preview images generated based on input image generated by image capture apparatus and related preview method thereof |
US9786324B2 (en) * | 2014-03-17 | 2017-10-10 | Clipcast Technologies, LLC | Media clip creation and distribution systems, apparatus, and methods |
US9685194B2 (en) * | 2014-07-23 | 2017-06-20 | Gopro, Inc. | Voice-based video tagging |
US20160034913A1 (en) * | 2014-07-30 | 2016-02-04 | Hewlett-Packard Development Company, L.P. | Selection of a frame for authentication |
US10225583B2 (en) * | 2014-08-01 | 2019-03-05 | Realnetworks, Inc. | Video-segment identification systems and methods |
EP3262643A4 (en) | 2015-02-24 | 2019-02-20 | Plaay, LLC | SYSTEM AND METHOD FOR CREATING A VIDEO OF SPORTS |
US10819943B2 (en) * | 2015-05-07 | 2020-10-27 | Magna Electronics Inc. | Vehicle vision system with incident recording function |
US10560609B2 (en) * | 2016-11-04 | 2020-02-11 | Karl Storz Endoscopy-America, Inc. | System and related method for synchronized capture of data by multiple network-connected capture devices |
US10390109B2 (en) * | 2017-08-17 | 2019-08-20 | Crystal Computer Corporation | System and method for synchronizing metadata with audiovisual content |
US20190188475A1 (en) * | 2017-12-15 | 2019-06-20 | SpokeHub, Inc. | Social media systems and methods |
US11166051B1 (en) * | 2018-08-31 | 2021-11-02 | Amazon Technologies, Inc. | Automatically generating content streams based on subscription criteria |
US10872240B2 (en) | 2018-09-28 | 2020-12-22 | Opentv, Inc. | Systems and methods for generating media content |
-
2018
- 2018-09-28 US US16/145,774 patent/US10872240B2/en active Active
-
2019
- 2019-09-26 MX MX2021003560A patent/MX2021003560A/es unknown
- 2019-09-26 BR BR112021005620-3A patent/BR112021005620A2/pt unknown
- 2019-09-26 AU AU2019348010A patent/AU2019348010B2/en active Active
- 2019-09-26 CA CA3114105A patent/CA3114105A1/en active Pending
- 2019-09-26 WO PCT/US2019/053137 patent/WO2020069116A1/en active Application Filing
- 2019-09-26 EP EP19783934.3A patent/EP3857906A1/en active Pending
- 2019-09-26 CN CN201980063064.7A patent/CN112753228B/zh active Active
- 2019-09-26 CN CN202311168562.2A patent/CN117041694A/zh active Pending
-
2020
- 2020-11-19 US US16/953,035 patent/US11423653B2/en active Active
-
2022
- 2022-07-11 US US17/861,677 patent/US11887369B2/en active Active
-
2023
- 2023-12-18 US US18/542,952 patent/US20240193948A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106164977A (zh) * | 2013-12-17 | 2016-11-23 | 英特尔公司 | 照相机阵列分析机制 |
Also Published As
Publication number | Publication date |
---|---|
US20200104601A1 (en) | 2020-04-02 |
US11887369B2 (en) | 2024-01-30 |
AU2019348010A1 (en) | 2021-04-08 |
AU2019348010B2 (en) | 2024-09-12 |
CA3114105A1 (en) | 2020-04-02 |
US20240193948A1 (en) | 2024-06-13 |
CN117041694A (zh) | 2023-11-10 |
BR112021005620A2 (pt) | 2021-06-22 |
WO2020069116A1 (en) | 2020-04-02 |
US20230005265A1 (en) | 2023-01-05 |
US10872240B2 (en) | 2020-12-22 |
US11423653B2 (en) | 2022-08-23 |
MX2021003560A (es) | 2021-08-16 |
US20210150219A1 (en) | 2021-05-20 |
CN112753228A (zh) | 2021-05-04 |
EP3857906A1 (en) | 2021-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112753228B (zh) | 用于生成媒体内容的技术 | |
US9436875B2 (en) | Method and apparatus for semantic extraction and video remix creation | |
US20160225410A1 (en) | Action camera content management system | |
US9094571B2 (en) | Video chatting method and system | |
CN104169995B (zh) | 信息处理设备、信息处理系统 | |
WO2016169432A1 (zh) | 身份验证方法、装置及终端 | |
CN109951654A (zh) | 一种视频合成的方法、模型训练的方法以及相关装置 | |
CN110572711B (zh) | 视频封面生成方法、装置、计算机设备及存储介质 | |
JP6561241B2 (ja) | サーバ装置、動画配信システム、それに用いられる制御方法及びコンピュータプログラム | |
WO2015134537A1 (en) | Generation of video based on spherical content | |
US10088901B2 (en) | Display device and operating method thereof | |
JP6354461B2 (ja) | フィードバック提供方法、システム、および解析装置 | |
CN109871834A (zh) | 信息处理方法和装置 | |
JP6649231B2 (ja) | 検索装置、検索方法およびプログラム | |
WO2020052062A1 (zh) | 检测方法和装置 | |
WO2020221121A1 (zh) | 视频查询方法、装置、设备及存储介质 | |
CN112287771A (zh) | 用于检测视频事件的方法、装置、服务器和介质 | |
CN112511889B (zh) | 视频播放方法、装置、终端及存储介质 | |
JPWO2019187493A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN108540825A (zh) | 一种直播处理方法和装置、一种用于直播处理的装置 | |
US10569135B2 (en) | Analysis device, recording medium, and analysis method | |
US20230056531A1 (en) | Methods and Systems for Utilizing Live Embedded Tracking Data within a Live Sports Video Stream | |
CN116193049A (zh) | 视频处理方法、装置、计算机设备和存储介质 | |
KR20180053221A (ko) | 전자 장치 및 그의 제어 방법 | |
WO2024169730A1 (zh) | 视频处理方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |