CN105765959A - 用于制作视频作品的方法和系统 - Google Patents

用于制作视频作品的方法和系统 Download PDF

Info

Publication number
CN105765959A
CN105765959A CN201480048007.9A CN201480048007A CN105765959A CN 105765959 A CN105765959 A CN 105765959A CN 201480048007 A CN201480048007 A CN 201480048007A CN 105765959 A CN105765959 A CN 105765959A
Authority
CN
China
Prior art keywords
picture frame
event
module
frame
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480048007.9A
Other languages
English (en)
Other versions
CN105765959B (zh
Inventor
塞尔希·萨加斯
琼·本纳萨尔
安托万·瓦尔维尔德
杰勒德·托伦特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaProduccion SL
Original Assignee
MediaProduccion SL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaProduccion SL filed Critical MediaProduccion SL
Publication of CN105765959A publication Critical patent/CN105765959A/zh
Application granted granted Critical
Publication of CN105765959B publication Critical patent/CN105765959B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20112—Image segmentation details
    • G06T2207/20132—Image cropping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30221—Sports video; Sports image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41—Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种用于生成事件的视频作品的方法和系统，其可以自动地并并实时地实现，且具有最少的操作者的干预，该方法包括：接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于事件的视图；接收与事件相关联的至少一个预定条件；基于至少一个预定条件选择至少多个图像帧中的一个的部分，用于生成至少一个输出图像帧，从至少一个输出图像帧中生成视频作品。

Description

用于制作视频作品的方法和系统
技术领域
本发明涉及一种用于生成视频作品的方法和系统。
在实施例中，本发明特别涉及一种用于生成全景视频的方法和系统，所述全景视频用于生成公益事件的视频作品，并具有最小或无操作员干预和/或在事件发生时实时直播。
背景技术
许多公益事件的电视覆盖区，包括体育事件，如足球(英式足球)比赛，通常需要许多视频摄像机和许多摄影师。在一个足球(英式足球)比赛的示例中，每个操作摄影机的摄影师会跟随运动场上和场下的事件，通过移动或通过缩放摄像机以当球、球员或观众在场上或场下移动时对其进行跟踪他们。拍摄的图像的视频信号然后将发送到控制中心，在这里导演能够查看每个视频信号的图像。导演还能够与摄像师沟通以提供指令，其用于指示特定的摄像机如何进行操作，和能够选择或组合视频信号，以制作用于广播节目的演示。这样的广播操作必然需要大量的人力、设备及技术支持；所有这些都增加了制作该广播节目的财政费用。特别地，如用于拍摄宽视场的视图的事件所使用广角光学的设备是非常昂贵的。
对于有足够财政支持的大型事件，用于制作视频广播所需的大量资源不是主要问题。然而，对于小规模的事件或有限的资金后盾的事件，广播制作的过高成本通常意味着该事件不被覆盖，因而不能进行电视转播。
对于小规模的事件或不享有广泛的传播流行的事件的主办方，能够进行电视转播的事件在许多情况下增加了事件或主办方的曝光度。进而，增加曝光度可吸引公众的兴趣，这可有助于提高事件的知名度，并随后可以吸引赞助商和资助基金。
发明内容
因此，需要一种改进的方法和系统，其用于降低制作事件的视频作品的成本和资源，将适合用于广播。
根据本发明的另一个方面，提供一种用于生成事件的视频作品的方法，所述方法包括：接收事件的多个分量视频信号，每一个分量视频信号包括多个分量图像帧，其中，每个分量图像帧对应于所述事件的全景图的一个部分；将每个视频信号的时间上对应的分量图像帧拼接在一起以生成多个全景图像帧；基于与事件相关联的至少一个预定条件选择每个全景图像帧的部分，以生成多个输出图像帧；从所述多个输出图像帧中生成视频作品。
因此本发明提供一种无需昂贵的广角光学设备而生成宽视场图像帧的方法。该方法还使得被制作的视频作品能够具有最小的或者没有操作员干预，并且可以实时地自动执行以拍摄各种各样的事件的视频图象。
在实施例中，预定条件中的一个是选择具有与事件相关联的感兴趣区域的每个全景图像帧的部分事件。
可替换地或另外地，选择的步骤进一步包括识别在至少一个图像帧中的至少一个图像对象，并且其中预定条件中的一个是选择至少一个全景图像帧的部分，其包含至少一个图像对象。特别是，对于在至少一个全景图像帧中多于一个的所识别的图像对象，选择的步骤进一步包括：确定在所述至少一个全景图像帧中的图像对象的位置；识别在至少一个全景图像帧中位置的分布；并确定与事件相关联的预期分布与所识别的分布的偏差；其中预定条件中的一个是选择具有最小偏差的至少一个全景图像帧的部分。通过选择包括图像对象的部分，这些实施例的方法能够模拟移动摄像机的效果。此外，或替代地，该方法还包括从所述至少一个全景图像帧中提取的背景数据，其中，识别的步骤基于所提取的背景数据。该方法还可进一步包括确定至少一个全景图像帧中的密度图来指示具有大量的图像对象是靠近彼此的全景图像帧的区域，其中，识别的步骤至少基于密度图。提取背景数据和密度图的供给有利于通过对比背景特征识别图像对象的步骤。
优选地，所选择的部分的大小因不同的全景图像帧而不同。可替换地或另外地，所选部分的位置相对于对应的全景图像帧中因不同的全景图像帧而不同。大小和所选择的部分的位置的改变进一步促使模拟缩放和移动摄像机的效果。
在其他实施例中，拼接步骤进一步包括校正至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的分量图像帧的颜色信息。拼接步骤可进一步包括校准一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的分量图像帧的亮度级。这些供给使图像帧无缝地拼接在一起。
在一些其他实施例中，该方法进一步包括：生成与该事件相关联的元数据；根据元数据制作视觉元素；并将视觉元素并入至视频作品中。替换地或另外地，该方法进一步包括：接收至少一个音频信号；将至少一个音频信号与视频作品结合；并生成音频-视频作品。这些供给通过提供给观众以与事件相关联的附加信息增强视频作品。
根据本发明的另一个方面，提供了一种用于生成事件的视频作品的系统，所述系统包括：拍摄模块，其可操作地用于接收事件的多个分量视频信号，每个分量视频信号包括多个分量图像帧，其中，每个分量图像帧对应于事件的一个全景视图的部分；拼接模块，其可操作地用于拼接每个视频信号的暂时对应的图像帧在一起以生成多个全景图像帧；操作模块，其可操作地基于与事件相关联的至少一个预定条件选择每个全景图像帧的部分事件，以生成多个输出图像帧；制作模块，其可操作地用于从多个输出图像帧中生成视频作品。
在实施例中，预定的条件中的一个是选择具有与事件相关联的感兴趣的区域的每个全景图像帧的部分。
可替换地或另外地，所述选择模块，其可操作地用于识别在至少一个全景图像帧中的至少一个图像对象，以及在其中预定条件中的一个是选择含有至少一个图像对象的一个图像帧的整个或部分。特别地，对于在至少一个全景图像帧中多于一个的所识别的图像对象，选择模块可操作地：确定在至少一个全景图像帧中的图像对象的位置；识别在至少一个全景图像帧中的位置的分布；并确定所识别的分布与期望分布的偏差；其中预定条件中的一个是选择至少一个具有最小偏差的全景图像帧的部分。此外或可替换地，所述系统进一步包括提取模块，其可操作地用于从至少一个全景图像帧中提取背景数据，其中，选择模块操作用于评估背景数据以识别至少一个图像对象。所述系统还可进一步包括图形模块，其可操作地用于确定至少一个的全景图像帧的密度图来指示全景图像帧的区域，其中大量的图像对象彼此靠近，其中所述选择模块可操作地评估密度图来识别至少一个图像对象。
优选地，所选择的部分的大小因不同于其它的全景图像帧而不同。可替换地或另外地，关于相应的全景图像帧地所选部分的位置因不同于其它的全景图像帧而不同。
在其他实施例中，拼接模块可操作地校正至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的分量图像帧的颜色信息。拼接模块也可操作地校准至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的分量图像帧的亮度级。
在一些其它的实施例中，拍摄模块可操作地生成与事件相关联的元数据；并且制作模块可基于元数据操作用于制作视觉元素；并将视觉元素并入至视频作品中。可替换地或另外地，制作模块可操作地接收至少一个音频信号；将至少一个音频信号与视频作品结合；并生成音频-视频作品。
根据本发明的另一个方面，提供了一种用于生成事件的视频作品的方法，所述方法包括：接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于事件的一个视图；自动识别在至少一个图像帧中至少一个图像对象；自动选择包含至少一个图像对象的至少一个图像帧，用于生成多个输出图像帧；并且从多个输出图像帧中自动生成视频作品。
根据本发明的另一个方面，提供了一种用于生成事件的视频作品的系统，所述系统包括：拍摄模块，其可操作地用于接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于事件的一个视图；选择模块，其可操作地用于自动识别至少一个图像帧中的至少一个图像的对象及自动选择包含至少一个图像对象的至少一个图像帧，用于生成多个输出图像帧；制作模块，其可操作地用于从多个输出图像帧中自动生成视频作品。
附图说明
本发明的实施例将通过结合附图的示例示例的方式进行描述，其中：
图1是两个可选的摄像机的设置的图示；
图2是用于生成视频作品的系统的示意图；
图3是一个视频信号的图像帧被拼接到另一个视频信号的图像帧的示意图；
图4是选择的全景图像帧的部分的示意图；
图5是一个输出视频信号的示意图；和
图6a至图6c为视频作品的示意图。
具体实施方式
根据本发明的一个实施例的一种用于生成事件的视频作品的系统在图2中示出。通常，本发明的系统的实施例包括多个彼此通信的模块并能通过计算机硬件或软件来实现。所述模块也可以由单个模块或作为较大模块的子模块实现。所述系统设置为接收由多个位于如足球(英式足球)比赛事件举行的地理位置的视频摄像机拍摄的视频信号流。
所述视频摄像机可以用最少的人为干预进行远程或本地操作以便使系统能自动实时制作期望的视频作品。事实上，正如下面所描述的，一旦系统已经建立，其就可以在没有操作者进一步的干预下进行操作。在一些实施例中，视频信号流可以预先记录并且在事件发生后由系统接收。特别地，如图1所示，两个视频摄像机可以设置为靠近彼此，不管是并行的，如摄像机C1和C2，或并排的，如摄像机C3和C4，使得一台摄像机C1(C3)的视场与另一台摄影机C2(C4)的视场部分重叠。各个视频流随后可结合宽视场视场来生成单个视频流。更一般地，一些照相机可以以类似的方式部署，使得生成的宽视场的视频流覆盖整个感兴趣的区域，例如足球(英式足球)比赛的场地。
接着，宽视场的视频流可以被操纵。例如，对于视频流的某部分，视频流可以通过选择视场的部分进行操纵并且进一步操纵，以将所选择的部分从一个图像帧转移到另一个，用于模拟移动具有与同部分相同的视场的摄像机的效果。可替换地，或对于其它部分，视频流可以通过选择一个部分被操纵，其大小因不同图像帧而不同，以模拟缩放效果。选定的部分然后可以切割并连接在一起，以生成一个用于存储和/或广播的视频作品。
因此，可以理解为，宽视场的视频流可以提供很大的灵活性并促使从视频流中生成各种视频作品。如上所述，一旦系统已被建立则视频作品可自动地生成，从而避免高成本和常规系统的复杂性。
现在参照图2，本发明的一个实施例的系统10包括拍摄模块100、拼接模块200、选择模块300和一个制作模块400。如该图所示，每个模块被描绘为单独的实体。然而，应当理解，一些模块可以是一个更大的模块的子模块。例如，在一些实施例中，拼接模块200和选择模块300可以是虚拟摄像机模块202的子模块，也应被理解的是，模块和子模块可以通过硬件或软件来实现。
当如足球(英式足球)比赛的事件发生时，一些数字视频摄像机可以以上述方式来部署用于拍摄事件。在图2中所示的实施例中，拍摄模块100被配置为接收一个或多个由视频摄像机视频拍摄的信号120，无论是在从通信地耦合到拍摄模块100的视频摄像机直接实时地或通过预先记录和存储所拍摄的视频信号。拍摄模块100，在一些实施例中，也配置为将接收到的视频信号120转换为适合由系统10使用的的格式。
正如本领域技术人员可以理解的，视频信号可以是模拟的或数字的，并包括一系列图像帧。本领域技术人员将认为，每个视频信号的图像帧具有一个角/场的视图，其取决于视频摄像机的光学元件的特性，如透镜的焦距或成像传感器的大小。
通常，由拍摄模块100接收的视频信号120包括多个图像帧，其中，每个图像从相应的事件的视图中被拍摄。由拍摄模块100接收的一些视频信号，如图2中所示的分量视频信号122-1到122-n，可以与全景视场相关。这就是说，由拍摄模块100接收的视频信号的图像帧可被连接或拼接到另一个视频信号的在时间上对应的图像帧，以生成一个全景视频信号，其中全景视频信号的图像帧具有一个视场，该图比每各单独视频信号的图像帧的视场更宽。分量视频信号122-1到122-n可以从彼此相邻并行排列或在一个高于一个地并排排列的多个摄像机获得，并且被校准以使得摄像机的视场的边缘对应于相邻摄像机的视场的边缘或使得摄像机的视场部分地与相邻的摄像机的视场重叠。
如图2中所示，拍摄模块100被布置为用于接收一个或更多分量视频信号122-1到122-n，其中每一个均与全景视场有关。在一些实施例中，当接收到分量视频信号122-1到122-n后，其经历诸如颜色校正和校准以均衡每个视频信号的颜色色调和亮度水平的一个或多个预处理步骤。此后，分量视频信号122-1到122-n被传送至拼接模块200，其设置为可操作地结合分量视频信号122-1到122-n的相应的图像帧以生成全景视频信号。例如，在一些实施例中，拼接模块200接收分量视频信号122-1到122-n并且可操作地将一个分量视频信号的图像帧与其他分量视频信号的时间上对应的图像帧通过任何合适的方法拼接在一起，如使用单性的或零视差的技术，以生成用于全景视频信号220的全景图像帧。图3示意性地示出了拼接在一起的两个时间上对应的图像的帧。
在图3中示意性地示出一个双分量视频信号的示例，分量视频信号122-1由分量图像帧122-11到122-1n构成，并且分量视频信号122-2由分量图像帧122-21到122-2n构成。在这些实施例中，分量图像帧122-1a到122-1n覆盖一个特定的视场和分量图像帧122-21到122-n覆盖一个视场，其与图像帧122-11到122-1n的视场一小部分重叠。在拼接过程中，分量视频信号122-1的分量图像帧与分量视频信号122-2的时间上对应分量图像帧在重叠部分结合，以生成用于全景视频信号220的全景图像帧220-1...220-n。作为解释，图3示出了描绘在特定时间的一个情景的分量图像帧122-11和描绘在与分量图像帧122-11相同的时间内的另一个情景的分量图像帧122-21，重叠在部分122'处。在拼接过程中，分量图像帧122-11和分量图像帧122-21在重叠部分122'中拼接在一起以生成全景视频信号220的全景图像帧220。另一全景视频信号220的全景图像帧220-2到220-n以类似方式生成。
在一些实施例中，分量视频信号122-1和分量视频信号122-2可以经历一个或多个预处理步骤。例如，拍摄分量视频信号122-1的摄像机的曝光设置可与拍摄分量视频信号122-2的摄像机的曝光设置少量的不同。在这种情况下，期望的是相对于彼此调整在各个视频信号中描绘的图像，以便使图像帧无缝地接合在一起。因此，在这些实施例中，拼接模块200被设置为可操作地校正要拼接拼接在一起的分量视频信号的分量图像帧的颜色信息。此外，或可替换地，拼接模块200也布置为可操作地校准要被拼接在一起的视频信号的分量图像帧的亮度级。校正颜色信息和校准的亮度级先于将图像帧拼接一起然后可确保在全景图像帧的一侧的颜色和亮度水平与全景图像帧的另一侧的相匹配，使得被结合在一起的图像帧的缝尽可能感觉不到。
应当理解的是，虽然只有两个分量视频信号122-1、122-2在图3中示出，任何数量的适当对准的分量视频信号122-1到122-n可以被拼接在一起以生成全景视频信号220。还应当理解的是，多于一个的全景视频信号可以以相同的方式生成。
返回并参照图2，一旦全景视频信号220已经生成，它就被传送给选择模块300。选择模块300被设置为用于根据与事件相关联的预定规则和条件来操纵其接收的视频信号。例如，全景图像帧220-1到220-n可以描绘足球(英式足球)比赛的行为，并且预定规则和条件要求模拟跟踪在一定的时间周期内在全景图像帧220-1到220-n中所描绘的足球的运动的效果。
作为说明，图4示出了全景图像帧220-1到220n，其描绘了具有从一个帧到另一个帧位置的改变的足球的场景。选择模块300可操作地分析全景图像帧220-1到220-n，通过使用的任何合适的图像分析和跟踪的方法来识别作为移动目标的足球，并确定每个图像帧中足球的位置。基于该位置，选择模块300然后能够确定足球轨迹。然后，通过设置预定条件中的一个，其关于选择包含足球的图像帧的部分，选择模块300能够通过选择一个部分，其包括位于在每部分中的特定的相对位置的足球来模拟跟踪足球的效果。通常，根据与拍摄的事件相关的至少一个预定条件，选择模块300可操作地选择它接收的任何数量的视频信号的任何数量的图像帧的整个或部分，以生成相应数量的输出图像帧。如在图4中所示的图示，在一些实施例中，选择模块300可操作地识别在全景图像帧220-1中的足球，选择部分222-1以包括足球，并提取部分222-1，以生成一个单独的输出图像帧320-1。同样地，相同的过程可以应用于其他全景图像帧以生成输出图像帧320-2到320-n以形成一个输出视频信号320。
虽然只有一个图像对象在图4中示出，应当理解的是，预定规则和条件不局限于跟踪一个运动图像的对象及选择模块300可操作地跟踪多个图像对象。还应当理解的是，选择模块300可以用于追踪任意数量的图像对象或感兴趣的区域。此外，一些实施例的选择模块300也可操作地确定在全景图像帧中的图像对象的位置，并识别这些图像对象是怎样分布在全景图像帧中。那么，对于图像对象具有预期的分布的事件，选择模块可操作地确定图像对象的位置的分布与期望分布的偏差。预定条件中的一个可以被设定为选择偏差最小的部分。例如，选择模块300能够识别观众在运动足球场作为移动物体的移动，并识别观众的移动的分布以与在体育场周围移动的人浪的分布相匹配。在这样的示例中，选择模块300可操作地选择全景图像帧的部分来跟踪人浪的移动。
应当理解的是，通过选择全景图像帧220-1...220-n的一个部分221-1到222-n以包括一个移动物体，在输出图像帧320-1到320-n中被观察到的影像相当于通过移动具有与输出图像帧320-1到320-n相同的视场的视频摄像机拍摄的视频图像。在一些实施例中，选择模块300可以进一步设置为改变选定部分的大小，以便模拟缩放的效果。例如，选择模块300可设置为选择一个逐渐变小的部分，以创造放大效果或选择一个逐渐变大的部分，以创造缩小的效果。
返回并参照图2，为了促进识别在由选择模块300接收的全景图像帧220-1到220-n中的对象或感兴趣的区域的任务，一些实施例的系统10进一步包括提取模块500和图形模块600。
提取模块500设置为可操作地识别不论在全景图像信号220的图像帧中还是在与背景相关联的分量视频信号122-1到122-n中的特征，并且用于提取代表这些特征的图像数据520。背景图像数据520被传送到选择模块300进行评估，以方便选择模块300区分前景图像对象和背景特征。
图形模块600设置为可操作地分析全景图像信号220的图像帧或在分量视频信号122-1到122-n中识别感兴趣的一个或多个图像对象。一旦图像对象被识别，图形模块600确定图像对象的位置，生成密度图620，并在密度图620中分配指令例如颜色，其用于指示具有大量图像对象靠近彼此的图像帧的区域。类似地，图形模块600还可以在密度图620中分配指令，其用于指示有很少或没有图像对象的图像帧的区域。完成的密度图620随后被传送到选择模块300进行评估，以促使选择模块300区分在前景中的图像对象与背景特征，并促使选择模块300确定图像对象是怎样分布在图像帧中的。
应该理解的是，提取模块500可以在与图形模块600结合来实现。也应该理解的是，提取模块500可以被实现为一种图形模块的替代，反之亦然。
仍参照图2，一旦输出视频信号320生成，它就被传送给制作模块400进行编辑。例如，不希望其包括输出视频信号320的整个长度用于广播。在这个示例中，希望仅包括一个部分，或输出视频信号320一些部分。因此，制作模块400设置为可操作地选择输出图像帧320-1到320-n的一些或所有，以生成一个视频作品420。在实施例中，如图5所示，制作模块400可操作地从输出视频信号320的不同段中选择输出图像帧并将所述段相结合以生成视频作品420。正如图5所示，输出视频信号320包括期望段322、324、326、328，其由不期望的段分隔。制作模块400可操作地提取这些段的输出图像帧，并将它们结合起来以生成视频作品420，如图6a所示。
在一些实施例中，希望具有立即地或在随后的时间重复一个或多个段。希望慢动作重复一个段。因此，在一些实施例中，在图6b和图6c中所示，制作模块可操作地生成具有一个或多个段322，其作为慢动作段322-SloMo重复，或一个段322，其随后重复到一个或多个不同的段。
更通常地，制作模块400可操作地从它接收的输出图像帧中生成的视频作品。
再次参照图2，一旦视频作品420生成，它可被直接发送用于广播或者可以在广播之前被发送用于储存或进一步处理。
在某些情况下，要被覆盖的事件可具有与所拍摄的视频信号相关联的辅助数据，并且希望将这些合并到视频作品420中以增强观看体验。例如，希望将足球(英式足球)比赛的进行时间和分数线添加到视频作品中，使得观看者可以根据获知的得分进行互动。因此，如图2所示，一些实施例的拍摄模块100进一步设置为可操作地接收与事件相关联的辅助信息140。辅助信息140可以，例如，从外部传感器、计时设备、得分保持设备或任何其它合适的设备中收集。拍摄模块140接着生成与辅助信息140相关联的元数据142并且将元数据142传送到制作模块400。制作模块400可操作地生成一个视觉元素，如在一个图像帧的角落中显示分数和足球(英式足球)比赛的进行时间的元素，并且将视觉元素合并到视频作品中。
在其他情况下，希望将音频信息合并到视频作品420中。因此，在上述的系统10的一些实施方案中，所述制作模块400设置为可操作地接收一个或多个音频信号160，并且可操作地将音频信号160合并至视频作品420中。
在一些可替换的实施例中，拍摄模块100也可操作地从不与全景视场相关联的各个摄像机中接收视频信号，如图2所示的视频信号124。在这些实施例中，这些视频信号124、126被传送到选择模块200，绕过拼接模块300。一旦由选择模块300接收，应当理解为这些视频信号124、126将以一个与上述用于全景视频信号220的类似的方式被处理。
通过利用如上所述生成的全景视频图像帧，以及通过模拟移动和缩放的效果，本发明的实施例能够生成一个由固定摄像机呈现的视频，所述固定摄像机需要很少或几乎不需操作员的干预。如本文中所描述的全景视频图像帧的利用率也提供了一种具有宽视图的视频，其无需使用昂贵的广角光学元件。所述方法和系统可预配置为自动地和实时进行操作以便最小化对资源的需求。
在其他不同实施例中的系统10，选择模块300进一步可操作地接收并存储用于生成视频作品的预定规则和条件。具体地，选择模块300接收并存储与该要被拍摄的事件相关的预定条件。预定条件可以通过硬件或软件来实现，并且在组装时或组装之后可被加载到系统10。一旦从拼接模块200或从拍摄模块100中接收到视频信号，选择模块300从任何适当数量的所接收的视频信号的图像帧中基于所述预定条件选择图像帧的全部或部分。当作出选择时，选择模块300选择性地可操作地跟踪任意数量的在图像帧中描绘的对象的运动、颜色、亮度及对比度。所选择的图像帧和/或图像帧的部分被传送到制作模块400作为输出视频信号320的输出图像帧。制作模块400接着使用输出视频信号320，以生成视频作品420。
可选择地，拼接模块200或拍摄模块100中的视频信号被传送到提取模块500、图形模块600和选择模块300。
提取模块500可操作地分析所接收的视频信号的图像帧，并识别在与该被拍摄的事件的背景相关联的图像帧中的特征。图像数据520代表这些背景特征，其从所接收的视频信号中提取出来并被传送到选择模块300。选择模块300评估在视频信号旁边的图像数据520，所述视频信号由选择模块300在做出选择时接收。图像数据520使得选择模块300识别相对于背景更容易移动的任何物体，从促使了视频作品420实时地生成。
图形模块600可操作为用于分析所接收的信号的图像帧，并识别感兴趣的一个或多个图像对象。一旦图像对象被识别，图形模块600确定该图像对象的位置，生成一个密度图620，并在密度图620中分配指令如颜色，用于指示图像帧的区域，在其中大量的图像对象是靠近彼此。类似地，图形模块600也可以在密度图620中分配指令，用于指示有很少或没有图像对象的图像帧的区域。完成的密度图620随后传送到选择模块300进行评估，以促使选择模块300区分在前景中的图像对象与背景特征，并促使选择模块300确定图像对象是怎样分布在图像帧中的。
这些不同的实施例中，预定规则和条件通常涉及物理属性和要被拍摄的事件的各方面。例如，当要拍摄的事件是一个足球(英式足球)比赛，肯定的是，事件包括由各十一名队员组成的两个队，裁判和球。在这个示例中，选择模块300可操作为基于形状和颜色来识别每个运动员、裁判和足球。另外地，足球比赛的行为通常发生在足球的一定距离内。因此，预定条件的一个示例是选择包括足球的和包围足球的预定距离内的区域中的图像帧的部分。在足球的预定距离范围内存在其中一对(即都是具有特定颜色的对象)的特定数量的成员的地方也可能会出现动作，如在反击期间。因此，预定条件的另一实施例是选择相比另一个队的运动员数量，选择包含在足球的预定距离范围内的一个队的一定数量的足球运动员的图像帧的部分。其它预定条件的示例包括，但不限于此，选择包含一个或多个特定的运动员的图像帧的部分，选择在足球在同一位置的图像帧的部分，并选择部包括裁判的图像帧的部分。更一般地，并且可被本领域技术人员理解的是，预定条件的这些实施例可适于其他体育赛事，例如但不限于此，橄榄球、高尔夫球、网球、篮球、曲棍球、板球、排球、橄榄球和棒球。
对于一些事件，其为固有，在一个场或具有已知的大小和标记的区域发生的行为。例如，如果要拍摄的事件是一场赛跑，图像对象，即竞争对手如运动员、赛马、赛车、摩托车比赛、自行车比赛，或任何其他车的比赛，其移动和遵循的预定路径是固有的，例如赛车路线或赛车场的赛道。因此，预定的条件的另一实例是选择包括至少一个跟随预定路径图像对象的图像帧的部分。比赛中最有趣的动作，其特征为大比例的竞争者集中在赛车场的赛道的一小部分。因此，预定条件的另一实例是选择具有高密度的图像对象的图像帧的部分。可选择地，选择模块300可操作地基于颜色和对比度区分不同的图像对象，如移动车辆，并且预定条件的另一实例是选择图像帧的部分，其包括在多个图像对象中任何一个或一组图像对象。
在这些不同的实施例的其它示例中，要被拍摄的事件，其特征为亮度在图像帧的区域的变化。例如，对于事件，如戏剧、歌剧或任何其他的舞台表演，行为的特征通常在于相对高亮度的区域，如朝向一个剧院舞台的区域的聚光灯。因此，预定条件的另一实例是选择包含对应于聚光灯的亮区域的图像帧的一个部分。在这些示例中，在图像帧中的图像对象可以是在剧院舞台上演员/歌手解剖特征及行为特征在于演员/歌手面部动作，如嘴唇动作。相应地，选择模块300可操作地识别这些面部动作，通过分析所接收的图像帧的颜色和/或对比度，以及预定条件的另一实例是选择包括至少一个所识别的面部动作的图像帧的一个部分。
在这些不同的实施例中，多于一个的预定条件在给定图像帧中满足。因此，这些实施例的预定条件被选择地排名。如果由选择模块300接收的图像帧满足多个预定条件，选择模块300基于所述排名最高的预定条件生成视频作品420。还应当理解的是，上述预定条件可以以任何合适的组合来单独地或共同地实现。此外，应该理解的是，一些上述预定条件比其他取决于视频作品420的有意的最终用户更适合。因此，这些更适合的预定条件可实现用于特殊的有意的最终用户。例如，在视频作品420有意的最终用户是足球队的教练，对于视频作品420期望包括图像帧，其包括足球场的整个区域，以指导分析足球比赛的各个方面。在这样的示例中，优选的预定条件是选择包含足球场的整个区域的图像帧的部分。在另一示例中，有意的最终用户是对特定运动员感兴趣的足球侦察员，对于视频作品420期望包括包含特定运动员的图像帧。在这样的示例中，优选的预定条件是选择包含特定图象对象的图像帧的部分。
在这些不同的实施方案中，本发明的系统10能够生生成事件的视频作品，其包括以最少的人工干预自动地移动和缩放的效果。基于上述预定条件通过生成视频制作420，系统10能够确定要被包括在视频作品420中的所接收的视频信号的图像帧的部分，无需进一步人工输入。
在本发明的前述实施例中，用于生成视频作品的方法和系统已经被描述为适合于公众兴趣的事件，例如足球比赛。应被本领域技术人员理解的是，本发明并不限定于公众兴趣的事件，并也适用于其他事件。还应当理解的是，视频制作的目的不受限于广播，并且可用于其它目的，包括流和私人观看。
本发明的实施例具体参考示出的示例进行了描述。然而，可以理解的是，在所附权利要求的范围内的示例的各种变化和修改是可能的。

Claims (54)

1.一种用于生成事件的视频作品的方法，所述方法包括：
接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于所述事件的视图；
接收与所述事件相关联的至少一个预定条件；
基于所述至少一个预定条件选择所述多个图像帧中的至少一个的部分，以生成至少一个输出图像帧；以及
从所述至少一个输出图像帧中生成视频作品。
2.根据权利要求1所述的方法，其中所述选择步骤进一步包括识别在所述多个图像帧中的至少一个中的至少一个图像对象。
3.根据权利要求2所述的方法，其中所述预定条件中的一个用于选择包含所述至少一个图像对象的所述至少一个图像帧的部分。
4.根据权利要求2或3所述的方法，其中所述选择步骤包括确定至少一个识别的图像对象从一个图像帧移动到另一个的速度。
5.根据权利要求4所述的方法，其中所述预定条件中的一个用于基于所确定的所述至少一个图像对象的速度来选择所述至少一个图像帧的部分。
6.根据权利要求2到5中任一项所述的方法，其中，对于在所述至少一个图像帧中多于一个的所识别的图像对象，所述选择步骤进一步包括：
确定在所述至少一个图像帧中的所述图像对象的位置；
识别在所述至少一个图像帧中的所述位置的分布；和
确定与所述事件相关联的预期分布与所识别的分布的偏差；
其中所述预定条件中的一个用于选择具有最小偏差的所述至少一个图像帧的部分。
7.根据权利要求6所述的方法，其进一步包括从所述至少一个图像帧中提取背景数据，其中所述识别步骤至少基于所提取的背景数据。
8.根据权利要求2到7中任一项所述的方法，其进一步包括确定所述至少一个图像帧的密度图来指示所述至少一个图像帧的具有大量图像对象彼此靠近的区域，其中，所述识别步骤至少基于所述密度图。
9.根据前述权利要求中任意一项所述的方法，其中所述选择步骤包括识别在所述多个图像帧中的至少一个中的至少一个相对高亮度的区域。
10.根据权利要求9所述的方法，其中所述预定条件中的一个为选择包括至少一个相对高亮度的区域的所述至少一个图像帧的的部分。
11.根据前述权利要求中任意一项所述的方法，其中所选择部分的大小因不同图像帧而不同。
12.根据前述权利要求中任意一项所述的方法，其进一步包括：
生成与所述事件相关联的元数据；
制作与所述元数据对应的视觉元素；和
将所述视觉元素并入所述视频作品中。
13.根据前述权利要求中任意一项所述的方法，其进一步包括：
接收至少一个音频信号；
将所述至少一个音频信号与所述视频作品结合；和
生成音频-视频作品。
14.一种用于生成事件的视频作品的系统，所述系统包括：
拍摄模块，其可操作地用于接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于所述事件的视图；
选择模块，其可操作地用于接收与所述事件相关联的至少一个预定条件，并且其可操作地用于基于所述至少一个预定条件选择所述多个图像帧中的至少一个的部分，以生成至少一个输出图像帧；和
制作模块，其可操作地用于从所述至少一个输出图像帧中生成视频作品。
15.根据权利要求14所述的系统，其中所述选择模块可操作地用于识别在所述至少一个图像帧中的至少一个图像对象。
16.根据权利要求15所述的系统，其中所述预定条件中的一个为选择包含所述至少一个图像对象的所述至少一个图像帧的部分。
17.根据权利要求15或16所述的系统，其中所述选择模块可操作地用于确定至少一个识别的图像对象从一个图像帧移动到另一个的速度。
18.根据权利要求17所述的系统，其中所述预定条件中的一个用于基于所确定的所述至少一个图像对象的速度选择所述至少一个图像帧的部分。
19.根据权利要求15到18中任一项所述的系统，其中，对于在所述至少一个图像帧中的多于一个的所识别的图像对象，所述选择模块可操作地用于：
确定在所述至少一个图像帧中的所述图像对象的位置；
识别在所述至少一个图像帧中的所述位置的分布；和
确定事件预期分布与所识别的分布的偏差；
其中所述预定条件中的一个是选择具有最小偏差的所述至少一个图像帧的部分。
20.根据权利要求15到19中任一项所述的系统，进一步包括提取模块，其可操作地用于从所述至少一个图像帧中提取背景数据，其中所述选择模块可操作地用于评估背景数据以识别所述至少一个图像对象。
21.根据权利要求15到20中任一项所述的系统，进一步包括图形模块，其可操作地用于确定所述至少一个的图像帧的密度图来指示具有大量的图像对象彼此靠近的所述图像帧的区域，其中所述选择模块可操作地用于评估所述密度图来识别至少一个对象。
22.根据权利要求14到21中任一项所述的系统，其中所述选择模块可操作地用于在所述至少一个图像帧中识别至少一个相对高亮度的区域。
23.根据权利要求22所述的系统，其中所述预定条件中的一个为选择包括所述至少一个相对高亮度的区域的所述至少一个图像帧的部分。
24.根据权利要求14到23中任一项所述的系统，其中所选择部分的大小因不同图像帧而不同。
25.根据权利要求14到24中任一项所述的系统，其中：
拍摄模块可操作地生成与所述事件相关联的元数据；和
制作模块可操作地基于所述元数据制作视觉元素，并将所述视觉元素并入视频制作。
26.根据权利要求14到25任一项所述的系统，其中制作模块可操作地用于：
接收至少一个语音信号；
将所述至少一个语音信号与所述视频作品结合；和
生成语音-视频作品。
27.一种用于生成事件的视频作品的方法，所述方法包括：
接收事件的多个分量视频信号，每一个分量视频信号包括多个分量图像帧，其中，每个分量图像帧对应于所述事件的全景图的部分；
将每个视频信号的时间上对应的分量图像帧拼接在一起以生成多个全景图像帧；
基于与所述事件相关联的至少一个预定条件选择每个全景图像帧的部分，以生成多个输出图像帧；
从所述多个输出图像帧中生成视频作品。
28.根据权利要求27所述的方法，其中所述预定条件中的一个为选择包含与所述事件相关联的感兴趣的区域的至少一个全景图像帧的部分。
29.根据权利要求27或28所述的方法，其中所述选择步骤进一步包括识别在至少一个全景图像帧中的至少一个图像对象，并且其中所述预定条件中的一个为选择包含至少一个图像对象的至少一个全景图像帧的部分。
30.根据权利要求29所述的方法，其中，对于在至少一个全景图像帧中多于一个的所识别的图像对象，所述选择步骤进一步包括：
确定在所述至少一个全景图像帧中的所述图像对象的位置；
识别在所述至少一个全景图像帧中所述位置的分布；和
确定与所述事件相关联的预期分布与所识别的分布的偏差；
其中所述预定条件中的一个是选择具有最小偏差的所述至少一个全景图像帧的部分。
31.根据权利要求29或30所述的方法，其进一步包括从至少一个所述全景图像帧中提取背景数据，其中所述识别步骤至少基于所提取的背景数据。
32.根据权利要求29到41中任一项所述的方法，进一步包括确定至少一个所述全景图像帧的密度图来指示具有大量的图像对象靠近彼此的所述全景图像帧的区域其中，所述识别步骤至少基于所述密度图。
33.根据前述权利要求中任一项所述的方法，其中所选择部分的大小因不同全景图像帧而不同。
34.根据权利要求27到33中任一项所述的方法，其中所选部分的位置相对于相应的全景图像帧因不同全景图像帧而不同。
35.根据权利要求27到34中任一项所述的方法，其中所述拼接步骤进一步包括校正至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的所述分量图像帧的颜色信息。
36.根据权利要求27到35中任一项所述的方法，其中所述拼接步骤进一步包括校准至少一个分量视频信号的所述分量图像帧相对于至少另一个分量视频信号的所述分量图像帧的亮度级。
37.根据权利要求27到36中任一项所述的方法，进一步包括生成与所述事件相关联的元数据；
产生与所述元数据对应的视觉元素；和
将所述视觉元素并入至所述视频作品。
38.根据权利要求27到37中任一项所述的方法，进一步包括
接收至少一个语音信号；
将所述至少一个语音信号与所述视频作品结合；和
生成语音-视频作品。
39.一种用于生成事件的视频作品的系统，所述系统包括：
拍摄模块，其可操作地用于接收所述事件的多个分量视频信号，每一个分量视频信号包括多个分量图像帧，其中，每个分量图像帧对应于所述事件的全景图的部分；
拼接模块，其可操作地用于将每个视频信号的时间上对应的分量图像帧拼接在一起以生成多个全景图像帧；
选择模块，其可操作地用于基于与所述事件相关联的至少一个预定条件选择每个全景图像帧的部分，以生成多个输出图像帧；
制作模块，其可操作地用于从所述多个输出图像帧中生成视频作品。
40.根据权利要求39所述的系统，其中所述预定条件中的一个为选择包含与所述事件相关联的感兴趣的区域的至少一个全景图像帧的部分。
41.根据权利要求39或40所述的系统，其中所述选择模块可操作地识别在所述至少一个全景图像帧中的至少一个图像对象，并且其中所述预定条件中的一个为选择包含所述至少一个图像对象的所述至少一个全景图像帧的部分。
42.根据权利要求41所述的系统，其中，对于在至少一个全景图像帧中多于一个的所识别的图像对象，所述选择模块可操作地用于：
确定在所述至少一个全景图像帧中的所述图像对象的位置；
识别在所述至少一个全景图像帧中所述位置的分布；和
确定事件预期分布与所识别的分布的偏差；
其中所述预定条件中的一个是选择具有最小偏差的至少一个全景图像帧的部分。
43.根据权利要求41或42所述的系统，进一步包括提取模块，其可操作地从所述至少一个全景图像帧中提取背景数据，其中所述选择模块可操作地评估背景数据以识别所述至少一个图像对象。
44.根据权利要求41到18中任一项所述的系统，进一步包括图形模块，其可操作地用于确定至少一个全景图像帧的密度图来指示具有大量的图像对象靠近彼此的至少一个全景图像帧的区域，其中所述选择模块可操作地评估密度图以识别所述至少一个图像对象。
45.根据权利要求39到44中任一项所述的系统，其中所选择部分的大小因不同全景图像帧而不同。
46.根据权利要求39到45中任一项所述的系统，其中所选部分的位置关于对应的全景图像帧因不同全景图像帧而不同。
47.根据权利要求39到46中任一项所述的系统，其中所述拼接模块进一步包括校正至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的所述分量图像帧的颜色信息。
48.根据权利要求39到47中任一项所述的系统，其中所述拼接模块进一步包括校准至少一个分量视频信号的分量图像帧相对于至少另一个分量视频信号的所述分量图像帧的亮度级。
49.根据权利要求39到48中任一项所述的系统，其中
拍摄模块，其可操作地生成与所述事件相关联的元数据；
制作模块，其可操作地基于所述元数据生成视觉元素，并将所述视觉元素并入至视频作品中。
50.根据权利要求39到49中任一项所述的系统，其中制作模块可用于：
接收至少一个语音信号；
将所述至少一个语音信号与视频作品结合；和
生成语音-视频作品。
51.一种用于生成事件的视频作品的方法，所述方法包括：
接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于所述事件的视图；
自动地识别在至少一个图像帧中的至少一个图像对象；
自动地选择包含至少一个图像对象的至少一个图像帧，以生成多个输出图像帧；
自动地从所述多个输出图像帧中生成视频作品。
52.一种用于生成事件的视频作品的系统，所述系统包括：
拍摄模块，其可操作地接收事件的多个视频信号，每个视频信号包括多个图像帧，其中，每个图像帧对应于所述事件的视图；
选择模块，其可操作地自动地识别在至少一个图像帧中的至少一个图像对象并自动地选择包含至少一个图像对象的至少一个图像帧，以生成多个输出图像帧；
制作模块，其可操作地从所述多个输出图像帧中生成视频作品。
53.一种生成事件的视频作品的方法，大体上参考附图在上文描述。
54.一种生成事件的视频作品的装置，大体上参考附图在上文描述。
CN201480048007.9A 2013-08-29 2014-07-22 用于制作视频作品的方法和系统 Active CN105765959B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1315416.6A GB2517730A (en) 2013-08-29 2013-08-29 A method and system for producing a video production
GB1315416.6 2013-08-29
PCT/EP2014/065715 WO2015028203A1 (en) 2013-08-29 2014-07-22 A method and system for producing a video production

Publications (2)

Publication Number Publication Date
CN105765959A true CN105765959A (zh) 2016-07-13
CN105765959B CN105765959B (zh) 2020-06-30

Family

ID=49397019

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480048007.9A Active CN105765959B (zh) 2013-08-29 2014-07-22 用于制作视频作品的方法和系统

Country Status (19)

Country Link
US (1) US10666861B2 (zh)
EP (1) EP3039854B1 (zh)
JP (1) JP6580045B2 (zh)
KR (1) KR102189139B1 (zh)
CN (1) CN105765959B (zh)
AU (1) AU2014314567B2 (zh)
BR (1) BR112016003927B1 (zh)
CA (1) CA2921264C (zh)
DK (1) DK3039854T3 (zh)
ES (1) ES2805800T3 (zh)
GB (1) GB2517730A (zh)
HR (1) HRP20201098T1 (zh)
HU (1) HUE050838T2 (zh)
MX (1) MX366918B (zh)
PL (1) PL3039854T3 (zh)
PT (1) PT3039854T (zh)
RU (1) RU2666137C2 (zh)
SI (1) SI3039854T1 (zh)
WO (1) WO2015028203A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107333031A (zh) * 2017-07-27 2017-11-07 李静雯 一种适用于校园足球比赛的多路视频自动编辑方法
CN107835434A (zh) * 2017-06-09 2018-03-23 越野族（北京）传媒科技有限公司 赛事宽视角直播设备和相关联的直播系统和方法
WO2019137166A1 (zh) * 2018-01-10 2019-07-18 Oppo广东移动通信有限公司 视频制作方法、装置、存储介质及电子设备
CN110300288A (zh) * 2019-07-29 2019-10-01 富咖科技(大连)有限公司 一种用于摸摸动物园游玩的视频自动采集与合成方法

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6904954B2 (ja) * 2015-12-04 2021-07-21 スリング メディア, エルエルシー.Sling Media, Llc. ネットワークベースのイベント記録
KR102609477B1 (ko) 2017-02-06 2023-12-04 삼성전자주식회사 파노라마 이미지 또는 동영상을 생성하는 전자 장치 및 그 방법
JP6766707B2 (ja) * 2017-03-10 2020-10-14 株式会社Ｊｖｃケンウッド 映像処理装置、マルチカメラシステム、映像処理方法、及び映像処理プログラム
JP6965975B2 (ja) * 2017-03-10 2021-11-10 株式会社Ｊｖｃケンウッド 映像処理装置、マルチカメラシステム、映像処理方法、及び映像処理プログラム
US20190191110A1 (en) * 2017-12-18 2019-06-20 Facebook, Inc. Apparatuses, systems, and methods for an enhanced field-of-view imaging system
US10523976B2 (en) * 2018-01-09 2019-12-31 Facebook, Inc. Wearable cameras
EP3741101A1 (en) 2018-01-19 2020-11-25 Veo Technologies Aps A computer-implemented method for automated detection of a moving area of interest in a video stream of field sports with a common object of interest
CN114641983A (zh) * 2019-12-09 2022-06-17 核心光电有限公司 用于获得智能全景图像的系统及方法
CA3237494A1 (en) * 2021-11-08 2023-05-11 ORB Reality LLC Systems and methods for providing rapid content switching in media assets featuring multiple content streams that are delivered over computer networks
CN114339067A (zh) * 2021-11-15 2022-04-12 华能国际电力股份有限公司上海石洞口第二电厂 基于5g环境下的多通道图像及视频流同步与分布式处理方法及系统
KR20230131601A (ko) * 2022-03-07 2023-09-14 한화비전 주식회사 파노라마 감시 영상의 생성

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1480450A2 (en) * 2003-05-20 2004-11-24 British Broadcasting Corporation Automated video production
US20040233274A1 (en) * 2000-07-07 2004-11-25 Microsoft Corporation Panoramic video
CN101601277A (zh) * 2006-12-06 2009-12-09 索尼英国有限公司 用于生成图像内容的方法和装置
US20110317982A1 (en) * 2009-02-27 2011-12-29 Li-Qun Xu Video segmentation
US20120057852A1 (en) * 2009-05-07 2012-03-08 Christophe Devleeschouwer Systems and methods for the autonomous production of videos from multi-sensored data
US20130070047A1 (en) * 2011-09-16 2013-03-21 Jay J. DiGIOVANNI Low Scale Production System and Method

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5657073A (en) * 1995-06-01 1997-08-12 Panoramic Viewing Systems, Inc. Seamless multi-camera panoramic imaging with distortion correction and selectable field of view
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6526161B1 (en) * 1999-08-30 2003-02-25 Koninklijke Philips Electronics N.V. System and method for biometrics-based facial feature extraction
MXPA02004015A (es) * 1999-10-22 2003-09-25 Activesky Inc Un sistema de video orientado a los objetos.
AU2001277259A1 (en) * 2000-06-30 2002-01-14 The Muller Sports Group, Inc. Sporting events broadcasting system
DE60123786T2 (de) * 2001-08-29 2007-03-15 Dartfish Sa Verfahren und System zur automatischen Produktion von Videosequenzen
AU2003280516A1 (en) * 2002-07-01 2004-01-19 The Regents Of The University Of California Digital processing of video images
CA2563478A1 (en) * 2004-04-16 2005-10-27 James A. Aman Automatic event videoing, tracking and content generation system
JP2005333552A (ja) * 2004-05-21 2005-12-02 Viewplus Inc パノラマ映像配信システム
JP4649640B2 (ja) * 2004-11-18 2011-03-16 学校法人慶應義塾 画像処理方法、画像処理装置、及びコンテンツ作成システム
US8004558B2 (en) * 2005-04-07 2011-08-23 Axis Engineering Technologies, Inc. Stereoscopic wide field of view imaging system
JP4464902B2 (ja) * 2005-11-09 2010-05-19 日本放送協会 カメラ制御装置およびカメラ制御プログラム
WO2008004150A2 (en) * 2006-06-30 2008-01-10 Nxp B.V. A method and device for video stitching
EP2479993A3 (en) * 2006-12-04 2013-12-11 Lynx System Developers, Inc. Autonomous systems and methods for still and moving picture production
WO2008068456A2 (en) * 2006-12-06 2008-06-12 Sony United Kingdom Limited A method and an apparatus for generating image content
JP2008244922A (ja) * 2007-03-28 2008-10-09 Mitsubishi Electric Corp 映像生成方法及び映像生成装置
US8238719B2 (en) * 2007-05-08 2012-08-07 Cyberlink Corp. Method for processing a sports video and apparatus thereof
GB2452512B (en) * 2007-09-05 2012-02-29 Sony Corp Apparatus and method of object tracking
GB2452510A (en) * 2007-09-05 2009-03-11 Sony Corp System For Communicating A Three Dimensional Representation Of A Sporting Event
GB2452508A (en) * 2007-09-05 2009-03-11 Sony Corp Generating a three-dimensional representation of a sports game
JP2009071478A (ja) * 2007-09-12 2009-04-02 Sharp Corp 情報通信端末および情報通信システム
US8791984B2 (en) * 2007-11-16 2014-07-29 Scallop Imaging, Llc Digital security camera
JP5007681B2 (ja) * 2008-02-14 2012-08-22 ソニー株式会社 放送システム
US9031279B2 (en) * 2008-07-09 2015-05-12 Disney Enterprises, Inc. Multiple-object tracking and team identification for game strategy analysis
JP4715909B2 (ja) * 2008-12-04 2011-07-06 ソニー株式会社 画像処理装置及び方法、画像処理システム、並びに、画像処理プログラム
JP2010232814A (ja) * 2009-03-26 2010-10-14 Nikon Corp 映像編集プログラムおよび映像編集装置
EP2449760A1 (en) * 2009-06-29 2012-05-09 Bosch Security Systems, Inc. Omni-directional intelligent autotour and situational aware dome surveillance camera system and method
WO2011069021A2 (en) * 2009-12-02 2011-06-09 Qualcomm Incorporated Improving performance of image recognition algorithms by pruning features, image scaling, and spatially constrained feature matching
WO2011091604A1 (zh) * 2010-01-29 2011-08-04 华为终端有限公司 视频通信的方法、装置和系统
US8503539B2 (en) * 2010-02-26 2013-08-06 Bao Tran High definition personal computer (PC) cam
US8548269B2 (en) * 2010-12-17 2013-10-01 Microsoft Corporation Seamless left/right views for 360-degree stereoscopic video

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040233274A1 (en) * 2000-07-07 2004-11-25 Microsoft Corporation Panoramic video
EP1480450A2 (en) * 2003-05-20 2004-11-24 British Broadcasting Corporation Automated video production
CN101601277A (zh) * 2006-12-06 2009-12-09 索尼英国有限公司 用于生成图像内容的方法和装置
US20110317982A1 (en) * 2009-02-27 2011-12-29 Li-Qun Xu Video segmentation
US20120057852A1 (en) * 2009-05-07 2012-03-08 Christophe Devleeschouwer Systems and methods for the autonomous production of videos from multi-sensored data
US20130070047A1 (en) * 2011-09-16 2013-03-21 Jay J. DiGIOVANNI Low Scale Production System and Method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107835434A (zh) * 2017-06-09 2018-03-23 越野族（北京）传媒科技有限公司 赛事宽视角直播设备和相关联的直播系统和方法
CN107333031A (zh) * 2017-07-27 2017-11-07 李静雯 一种适用于校园足球比赛的多路视频自动编辑方法
CN107333031B (zh) * 2017-07-27 2020-09-01 李静雯 一种适用于校园足球比赛的多路视频自动编辑方法
WO2019137166A1 (zh) * 2018-01-10 2019-07-18 Oppo广东移动通信有限公司 视频制作方法、装置、存储介质及电子设备
US11297225B2 (en) 2018-01-10 2022-04-05 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Video producing method, apparatus, storage medium, and electronic device
CN110300288A (zh) * 2019-07-29 2019-10-01 富咖科技(大连)有限公司 一种用于摸摸动物园游玩的视频自动采集与合成方法

Also Published As

Publication number Publication date
JP6580045B2 (ja) 2019-09-25
AU2014314567B2 (en) 2017-07-27
CA2921264A1 (en) 2015-03-05
JP2016536897A (ja) 2016-11-24
US10666861B2 (en) 2020-05-26
BR112016003927A2 (zh) 2017-08-22
GB201315416D0 (en) 2013-10-16
GB2517730A (en) 2015-03-04
CN105765959B (zh) 2020-06-30
BR112016003927B1 (pt) 2023-04-11
DK3039854T3 (da) 2020-07-27
AU2014314567A1 (en) 2016-03-17
MX2016002606A (es) 2016-09-08
WO2015028203A1 (en) 2015-03-05
RU2666137C2 (ru) 2018-09-06
RU2016110470A (ru) 2017-10-02
HUE050838T2 (hu) 2021-01-28
CA2921264C (en) 2023-10-03
PL3039854T3 (pl) 2020-11-30
ES2805800T3 (es) 2021-02-15
KR102189139B1 (ko) 2020-12-10
EP3039854B1 (en) 2020-04-15
SI3039854T1 (sl) 2020-11-30
MX366918B (es) 2019-07-30
US20160212337A1 (en) 2016-07-21
HRP20201098T1 (hr) 2021-02-05
EP3039854A1 (en) 2016-07-06
PT3039854T (pt) 2020-07-20
KR20160048178A (ko) 2016-05-03

Similar Documents

Publication Publication Date Title
CN105765959A (zh) 用于制作视频作品的方法和系统
ES2845933T3 (es) Método y sistema de producción automática de televisión
US9298986B2 (en) Systems and methods for video processing
US8970666B2 (en) Low scale production system and method
US20170178688A1 (en) System and method for communicating video of a sporting event
US6517353B1 (en) Pictorial tour process and applications thereof
CN107005654A (zh) 用于光学跟踪运动场地中的运动员的系统和方法
CN112533003B (zh) 一种视频处理系统、装置、方法
JP2009505553A (ja) ビデオストリームへの視覚効果の挿入を管理するためのシステムおよび方法
CN105635675A (zh) 一种全景播放方法和装置
KR101164894B1 (ko) 경기 참여자 관점의 야구공 영상생성 장치, 시스템, 및 그 방법의 기록매체
KR102184383B1 (ko) 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법
Naruo et al. Development of Technology for Generating Panorama and Visualization Using Two-viewpoint Images
KR20220055694A (ko) 미디어커머스 활용 스포츠 중계 시스템
GB2589903A (en) A device, computer program and method
CH708267B1 (fr) Mise en évidence d'un participant associé à une action ou un résultat sportif.
Rosario Aranda Getting beyond limits
JP2002271774A (ja) 個別動画像情報配信サービスシステム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant