CN114788293A - 制作电影、电视节目和多媒体内容的制作即服务系统 - Google Patents

制作电影、电视节目和多媒体内容的制作即服务系统 Download PDF

Info

Publication number
CN114788293A
CN114788293A CN201980098650.5A CN201980098650A CN114788293A CN 114788293 A CN114788293 A CN 114788293A CN 201980098650 A CN201980098650 A CN 201980098650A CN 114788293 A CN114788293 A CN 114788293A
Authority
CN
China
Prior art keywords
production
movie
editing
duration
storyline
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980098650.5A
Other languages
English (en)
Other versions
CN114788293B (zh
Inventor
吴秀波
吴熙东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Weizhong Zhimei Film And Television Technology Co
Original Assignee
Weizhong Zhimei Film And Television Technology Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Weizhong Zhimei Film And Television Technology Co filed Critical Weizhong Zhimei Film And Television Technology Co
Publication of CN114788293A publication Critical patent/CN114788293A/zh
Application granted granted Critical
Publication of CN114788293B publication Critical patent/CN114788293B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2228—Video assist systems used in motion picture production, e.g. video cameras connected to viewfinders of motion picture cameras or related video signal processing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

描述了与电影、电视节目或多媒体内容的制作相关的方法、装置和系统。在一个示例方面，一种用于制作电影的系统包括前期制作子系统，该前期制作子系统被配置为从用户接收关于电影的故事情节、摄像机、全体演员和其他资产的信息。前期制作子系统被配置成生成对应于一个或多个场景的一个或多个机器可读剧本。该系统包括制作子系统，该制作子系统被配置为从前期制作系统接收剧本，以确定场景中的约束。制作子系统还被配置为根据故事情节来确定摄像机和全体演员的动作以获得片段。该系统包括设备管理子系统和后期制作编辑系统，设备管理子系统被配置为基于由制作系统确定的动作来控制摄像机和全体演员，后期制作编辑系统被配置为从制作子系统接收片段以执行视频和音频编辑。

Description

制作电影、电视节目和多媒体内容的制作即服务系统
技术领域
本专利文档涉及动画、视频、电影或多媒体产品的制作，该多媒体产品包括运动图像和相关的在线发行或流服务。
背景技术
制作电影或电视节目是一个劳动密集型和成本高昂的过程。例如，一部电影的整个制作过程可能需要一年多的时间，并且需要大量工作人员的协作。复杂而漫长的电影制作过程抬高了制作成本。例如，如今一部故事片的制作成本可以从数千万美元到数亿美元不等。电视制作可能比大多数电影制作便宜，但仍然需要大量的成本。电影和电视节目制作的劳动密集性和高成本是向消费者提供许多内容的障碍，并且在电影和电视制作和发行中的各种过程日益数字化和云技术进步的时代中继续存在。电影或电视节目的商业成功往往会受到许多因素的影响，因此可能会有很大的风险。例如，盗版是全球电影和电视节目制作的重大风险。在预定上映前的内容泄露可能会导致毁灭性的财务结果，甚至影响故事情节，尤其是对于一部电视剧。
随着网络通信和数字编辑的发展，内容发布变得越来越流行。如今，制作和共享视频剪辑可以经由计算机和通信网络以相对较低的成本轻松完成。然而，对于包括一些低预算电影和视频项目在内的一系列电影和视频制作项目来说，电影和电视制作仍然是一项复杂且昂贵的任务。
发明内容
本文描述了用于提供用于制作电影和视频的基于云的制作服务的技术、子系统和系统，该基于云的制作服务包括从故事到最终电影内容递送的端到端或全服务电影制作云服务。所公开的技术和系统可用于各种实施例中，以经由数字分析和数字智能来降低前期制作计划、制作和后期制作编辑中的复杂性、时间和成本，从而允许内容的高效制作或创建，包括内容的近乎实时的发行，诸如实时电影广播。由于所公开的技术和系统的云和自动化性质，用户不需要掌握复杂的计算硬件或软件知识。因此，非专业人士能够在不深入参与电影制作的技术方面的情况下制作电影。
附图说明
图1图示了电影制作过程中的各个阶段。
图2图示了根据本技术的一个或多个实施例的电影制作系统的示例架构。
图3是根据本技术使用MPUS的示例前期制作过程的流程图表示。
图4A图示了根据本技术的剧本的示例层次。
图4B图示了根据本技术的示例故事板。
图5图示了根据本技术的基于云的电影编辑系统(CFES)的示例分布式架构。
图6是根据本技术的用于制作电影的方法的流程图表示。
图7是图示可用于实现本公开技术的各个部分的计算机系统或其他控制设备的架构的示例的框图。
具体实施方式
电影和电视节目制作是一个复杂的过程，涉及许多组件和操作，并且往往是劳动密集型和昂贵的。本专利文档中公开的各种制作技术和系统的示例可以用于经由在一个或多个通信网络或系统中联网的计算机处理器、计算机服务器和计算机存储来利用计算技术，以分布式方式向用户或实体提供基于云的电影制作服务。在一些方面，本专利文档中公开的制作技术和系统的实现方式可以提供类似于软件即服务(SaaS)的基于云的服务特征，并因此可以被称为电影制作即服务(MPaaS)。以下部分以电影制作为例，并且许多公开的特征可应用于电视节目制作和具有数字运动图像的其他多媒体的制作。
图1图示了电影制作过程中的各个阶段。电影制作项目从开发阶段102开始，在开发阶段102中，基于想法、故事、书或现有剧本来开发剧本。前期制作阶段104主要专注在计划上。这是确定预算、设置初步制作时间表和选择全体演员的阶段。在前期制作阶段结束时，详细的电影剧本被制作出，并且可以被制作过程中的所有后期阶段所依赖。制作阶段106在全体演员被雇用和所有资产(装备、材料等)得到保障之后开始。在这个阶段，重要的是在拍摄前保持计划，这样主要的摄影才能尽可能顺利和有效地进行。后期制作阶段108通常在制作阶段106完成后开始，但是这两个阶段可以重叠。典型的后期制作任务包括编辑、数字化片段、压缩和/或色彩校正。在当今的各种电影制作中，数字视频摄像机和数字录音设备被用来以数字形式捕捉所有的图像和声音，以用于后期制作编辑。完成的影片是数字的(包括一个或多个数字文件)，并在发行阶段110发行给观众。
电影剧本通常包含不同地理位置的场景。每个场景依次包含多个镜头，并且每个镜头需要多个需要同步的摄像机。协调多个摄像机从一个场景/镜头到另一个场景/镜头，或者从一个位置到另一个位置可能会很混乱。此外，在后期制作阶段，先进的编辑技术增加了计算机化处理的难度，因为许多先进的编辑技术需要适应人类感知的微妙场景变化。
本专利文档包括可以在各种实施例中实现的技术和系统，以经由云计算和服务来自动化图1中的整个或部分制作过程。本专利文档中公开的技术和系统的实现方式可以用于减少电影制作中的人工劳动，通过使电影制作的某些方面标准化来提高效率，并保持预算和时间线在可控范围内。所公开的技术和系统为非专业人员提供了分布式平台和服务，以与传统制作相比用最少的专业知识、工具、装备和软件制作低预算的电影和电视内容。该系统还使广播实时电影成为可能。虽然所公开的技术和系统能够在减少人工干预的情况下实现电影制作，但是提供了用户界面以在各个阶段合并来自导演和编辑的艺术输入，来促进和增强艺术创新和创造性贡献，并为参与电影制作的人提供灵活性。
图2图示了根据本技术的一个或多个实施例的电影制作系统200的示例架构。电影制作系统示例200包括四个主要子系统：电影前期制作用户服务(MPUS)201、终端设备管理系统(EDMS)203、电影制作指导系统(MPDS)205和基于云的影片编辑系统(CFES)207。电影制作系统200可以在主子系统中包括用于存储电影制作的数字数据的数字存储，并且还可以包括用于存储电影数据的附加存储209。系统200还可以包括内容递送系统(CDS)211，以提供内容的实时或准实时发行。在一些实现方式中，电影制作系统200可以作为完整系统提供给用户，作为制作电影或电视节目的完整系统；而在其他实现方式中，系统200中的一个或多个子系统可以被用户访问，以促进电影或电视节目的特定制作的部分。
下面进一步详细讨论子系统和组件的一些技术细节的示例。
电影前期制作用户服务(MPUS)系统
前期制作阶段的一个重要方面是电影制作的计划，包括定义整个工作范围的操作。可能的故障点也会被识别和解决，否则制作过程中的后续阶段可能会迅速失控。MPUS提供了基于网络的用户界面，指导用户完成前期制作过程。基于影片的类型或视觉风格，MPUS可以为场景生成机器可读剧本，并为用户确定初步的制作时间表。
图3是根据本技术使用MPUS的示例前期制作过程的流程图表示。
在操作301中，基于在开发阶段中开发的故事情节来确定类型(喜剧、浪漫、动作、戏剧、恐怖、纪录片等)或视觉风格。MPUS可以通过分析故事(例如，给定传统电影剧本)自动确定类型或视觉风格。或者，用户可以经由基于网络的界面手动指定作品的类型。
在操作303中，MPUS可以为集成的分段或场景预填充几个模板，这些模板共同开发和呈现故事情节。在一些实施例中，MPUS可以为每个类型提供10到20个模板。用户可以选择期望的模板进行修改，或者可以创建新的模板供将来使用。模板允许用户专注于每个制作项目的具体需求，而不是被迫考虑前期制作计划中的所有方面。
在操作305中，用户经由MPUS的用户界面向MPUS提供角色、演员以及其他全体演员息。
在操作307中，用户在(多个)所选模板下为故事情节设计场景。在一些实施例中，MPUS可以自动提供模板场景。用户可以直接使用模板场景，或者按照用户认为合适的方式进行必要或期望的调整。
在操作309中，用户向MPUS提供场景的地理位置。在一些实施例中，MPUS还可以基于故事情节提出关于场景位置的建议。
在操作311中，用户注册用于制作的用户设备，包括摄像机、音频设备以及其他存储或网络设备。MPUS在生成剧本时包含设备信息，从而允许MPDS和EDMS在后续阶段中控制设备。
在操作313，用户可以预加载电影资产的子集，诸如音乐、背景视频或广告剪辑。关于资产的信息也包括在由MPUS生成的剧本中，以允许CFES使用资产执行编辑。
基于在上述操作中获得的信息，MPUS可以生成一个或多个机器可读剧本以用于制作阶段。这种机器可读剧本可以用不同的语言来描述，包括但不限于可扩展标记语言(XML)和/或JavaScript对象表示法(JSON)。在一些实施例中，被称为影片指导标记语言(FDML)的单独语言可以被设计成适应电影制作的特定要求。表1图示了根据本技术的实施例的FDML中的机器可读剧本的示例。
表1FDML中的机器可读剧本的示例
Figure BDA0003480031810000051
Figure BDA0003480031810000061
Figure BDA0003480031810000071
与一些传统的电影剧本相比，上面示例中的FDML剧本包括关于装备、全体演员和场景的详细信息。在一些实施例中，MPUS可以分层次组织这样的机器可读剧本。图4A图示了根据本技术的机器可读剧本的示例层次。顶层剧本401包括两个场景：场景1和场景2。每个场景可以包括多个镜头，例如镜头1和镜头2。或者，每个场景可以包括多个子场景，诸如场景2A和2B，其进一步包括一个或多个镜头。
例如，表1中所示的机器可读剧本可以是顶层剧本，它提供了电影中要使用的资产的总体描述。在一些实施例中，可以为电影的每个场景或镜头生成单独的机器可读剧本。剧本的结构包括以下一些重要方面：
1.顶层机器可读剧本描述了电影中涉及的所有设备和人员。
2.顶层机器可读剧本描述了电影中的所有场景。每个场景可以有多个子场景(例如场景ID 1和场景ID 2)，并且每个场景可以有多个镜头。请注意，每个镜头都是在一个位置中的连续拍摄时段。
3.对于每个镜头，都描述了镜头所需的所有设备和人员。
4.在一些实施例中，剧本包括每个镜头中的演员的所有台词。台词可以从故事情节或传统导演的剧本中自动提取。该剧本还可以包括基于对摄像机和台词的快速分析的初步编辑信息。例如，系统可以确定摄像机和台词之间的对应关系，从而添加简单的编辑指令来合成镜头。如表1所示，场景的镜头1可以在演员对应的台词之前，在Cl和C2两个位置处进行剪切。如果影片编辑想要有更多的艺术剪切，而不是依赖系统的自动编辑，他或她可以定义剪切需要在剧本中的什么地方和什么时候进行。
5.对于每个镜头，剧本还可以包括描述镜头长度的初步开始时间和持续时间。可以基于场景和/或镜头的依赖性来确定开始时间。例如，整个电影的第一个镜头的开始时间为0。系统可以自动提供估计的镜头的持续时间，或者接受用户输入作为估计的镜头持续时间(例如，100秒)。镜头2在镜头1之后开始，并且其开始时间被设置为紧接在镜头1(例如，100)之后。镜头2的持续时间也可以由系统自动估计或由用户输入。
6.每个镜头都与故事板相关联。故事板可以基于剧本中的信息(诸如摄像机数量、角色、场景故事情节等)生成。例如，MPUS可以基于镜头中的对话和/或动作来确定摄像机的放置和/或移动。图4B图示了与场景1的镜头1相关联的示例故事板。如表1所示，镜头1包括三个摄像机：A、B和C。剧本描述了每个摄像机的属性，诸如摄像机的方向和角度。在一些实施例中，剧本进一步描述了镜头期间摄像机的移动，诸如摄像机路径以及摄像机的角速度和/或速度。在一些实施例中，MPUS可以生成描述镜头的内容的相关故事板图像。例如，动画图像(诸如图形交换格式(GIF)图像)可以用作故事板图像来演示镜头中的演员之间的交互。
7.如果其他资产(诸如音乐、背景视频或广告剪辑)已预加载到系统中，(多个)剧本还可以描述何时以及如何使用这些资产。例如，剧本可以指示电影广告何时可以插入到镜头中。在后期制作编辑阶段，可以基于剧本将广告放置在场景中。
MPDS-电影制作指导系统
MPDS子系统在自动化MPaaS电影制作中充当导演的角色；它是基于云的电影制作和广播系统的大脑。在传统的电影制作中，在电影拍摄期间协调所有装备和人员可能会很混乱。由于缺乏协调，同一个场景可能不得不拍摄很多次。MPDS对于协调如此复杂的团队工作以减少或消除重拍至关重要，特别是对于实时制作。
为了使计算机服务能够执行导演的工作，服务器需要了解故事以及装备和人员的整体知识。MPUS生成的剧本完美地服务于这个功能。在MPUS生成关于场景的一个或多个剧本之后，剧本被加载到MPDS以进行进一步处理。
基于场景/镜头的地理位置、所需装备和所涉及的人员，MPDS可以确定各种场景中的依赖性和/或约束。例如，不共享任何人员或装备的场景可以并行拍摄。当两个场景具有重叠的装备和/或人员时，MPDS还可以确定转移装备和/或人员所需的最短时间，从而对场景的顺序施加一些约束。这种确定和约束可以被传送回MPUS，以促进生成初步的时间表，从而帮助用户确定整个制作过程中的预算和其他因素。
在制作期间，MPDS可以准确地确定每个镜头和每个场景的开始时间和持续时间，并进行相应的调整。例如，基于男演员和/或女演员的说话速度，系统可以调整镜头的初步持续时间。可以相应地更新后续镜头和/或场景的开始时间和持续时间。在一些实施例中，系统可以提供提示，该提示指示由于这种调整导致的电影的总时间线和/或预算的改变。用户可以选择缩短或延长一些后续场景，以与前期制作计划保持一致，或者采用新的时间线，而不管个别演员造成的变化。每个场景的准确开始时间和持续时间对于在制作阶段之后编辑电影也是必不可少的。
使用剧本，MPDS可以控制其他子系统来执行电影制作。例如，MPDS可以指示EDMS系统控制每个场景的装备和人员。在一些实施例中，大型LED电子广告牌可用于向人员显示镜头的所有指令和台词。因为剧本包括关于每个场景的摄像机的信息，摄像机可以根据剧本(例如，经由编程的小车和起重机)自动移动和/或旋转。因此，需要最少的用户干预来获得每个镜头。
EDMS-终端设备管理系统
EDMS是代理服务器，它接收来自MPDS的指令，并在电影拍摄期间将指令转发给所有终端设备和人员。由于EDMS实时控制终端设备，(多个)EDMS服务器和场景位置之间的接近可以减少或消除不必要的网络延迟，从而实现实时性能。
在某些实现方式中，EDMS可用于提供以下一些或全部服务来管理终端设备和人员：
1.设备注册。一旦设备打开，它就会与最近的EDMS服务器通信进行身份验证。仅允许用户注册的设备连接到服务器。
2.设备控制。EDMS基于MPUS生成的机器可读剧本获得关于设备和人员的信息。对于每一个特定的镜头，EDMS向终端设备和人员发送指令，以便这些设备和人员可以采取行动。例如，EDMS可以向工作人员提示镜头的台词，或者控制摄像机的移动和/或旋转。
3.设备同步。在制作阶段将所有设备同步到准确的时间，以便在后期制作阶段中进行准确编辑，这一点至关重要。通常，准确的影片剪切需要视频帧内的准确度(25/30帧/秒)。在一些实现方式中，网络定时协议(NTP)可以用于同步目的。例如，同步服务器(例如NTP服务器)可以包含在MPaaS系统中，以使终端设备与CFES同步。实时流式传输中的实时传输协议(RTP)流的时间戳或非实时批量传输中的多媒体容器的时间戳被用于准确的影片编辑。
4.设备的位置服务。当终端设备开启位置服务时，EDMS可以获得终端设备的当前位置。然后，EDMS可以控制设备从一个场景位置到另一个场景位置的移动。信息可以传输到MPDS，以进一步确定设备的移动。
5.设备跟踪。EDMS收集设备活动并跟踪所有活动的时间戳。它可以向MPDS报告活动和相关时间戳，以促进后期制作阶段中的操作。如上所述，MPDS更新机器可读剧本中后续场景的时间估计，以便基于来自EDMS的时间戳进行更准确的时间估计。
6.编码支持。EMDS还控制终端设备媒体编码。视频编解码器(诸如流行的Η.264和MPEG4)使用各种种类的帧，诸如帧内编码帧(I帧)、预测帧(P帧)和双向预测帧(B帧)。影片编辑只能从I帧开始。影片剪切的频率很大程度上取决于场景的种类。例如，动作场景通常具有最高的剪切频率。由于更高的I帧速率会增加上行链路网络需求，因此还需要考虑网络带宽以进行内容的实时广播。因此，MPDS决定在指定时间段内所需的I帧数量，以确保影片的正确编辑。EDMS可以基于(例如，包括在机器可读剧本中的)MPDS指令在终端设备上配置编码设置。
基于云的影片编辑系统(CFES)
CFES以自动化方式执行大部分后期制作活动。CFES必须与诸如摄像机和录音设备的终端设备同步。它可以在电影拍摄完成后对所有多媒体内容进行操作，也可以在现场捕捉内容时对从终端设备流式传输的多媒体内容进行实时操作。如果用户出于艺术考虑决定添加附加的编辑，则CFES还允许以手动方式执行编辑。在各种实现方式中，CFES可以被设计成提供四个主要功能：电影编辑、音频编辑、多媒体质量增强和广告插入。下面详细讨论每个功能：
影片编辑
影片编辑被认为是一个高度创造性和艺术性的过程，并且通常由人工编辑执行。然而，在一些电影制作中，这种编辑过程，无论是部分还是全部，都可以通过使用数字分析和软件进行计算机化。例如，一些低成本影片通常不需要复杂的编辑技术。作为另一个示例，实时电影广播不能承受由手动编辑引起的长延迟。因此，CFES适用于在这种情况下自动执行影片编辑。随着媒体处理技术的进步，CFES还可以采用先进的算法来实现艺术编辑。
在一些实施例中，CFES可以执行镜头的基本编辑。举个例子，镜头包括几个演员之间的对话。该镜头由多个对应的摄像机记录，如表1所示。给定来自多个摄像机的片段，CFES可以检测当前正在说话的演员，并在摄像机朝向演员的情况下选对应的片段。更多的艺术影片剪切技术(如蒙太奇)可以通过各种方式实现。在一些实现方式中，系统可以基于人工智能学习来选择与人类感情产生共鸣的片段。在一些实现方式中，CFES基于FDML电影剧本中的指令来编辑镜头。如上所述，指令可以由用户插入或者由系统基于故事情节自动生成。例如，机器可读剧本可以定义当人A正在进行戏剧性的陈述时，人B的面部表情发生变化。因此，必须在人A所说的句子的中间进行剪切。
CFES可以进一步接收来自MPDS的指令来执行编辑。例如，一旦镜头完成，MPDS可以将时间戳信息插入到机器可读剧本中。基于时间戳，CFES可以确定何时以及如何剪辑片段以连接多个场景。对于实时或伪实时制作，CFES可以使用机器可读剧本中描述的约束，并在场景之间存在依赖关系时添加内容。例如，场景A和场景B两者都需要相同的装备和人员。将装备和个人从(场景A的)位置A转移到(场景B的)位置B需要时间间隔T。部分基于来自MPDS的指令，CFES可以智能地确定可以添加什么内容(例如，广告剪辑、背景故事、另一个场景等)来填补间隔Τ并相应地执行编辑。
音频编辑
与视频编辑相比，音频编辑不太复杂，因为对于低预算电影，每个位置可能只有一个音频流。在某些情况下，涉及多个演员的对话可能发生在不同的位置(例如，电话对话)。CFES可以被设计成部分基于机器可读场景剧本来确定它需要将音频流拼凑在一起。机器可读剧本中的时间戳信息可用于同步音频流，并允许CFES相应地执行音频编辑。
多媒体质量增强
多媒体质量增强是实时电影制作/广播所独有的。与在设备上记录高清(HD)视频和音频的传统电影制作相比，实时电影制作/广播需要在制作完成后通过网络即时发行。传输HD视频对网络提出了极高的带宽要求，这在许多环境下并不总是可行的。因此，期望在发行之前压缩视频数据并对压缩后的数据执行质量增强。
在线电影发行
返回参考图2，电影制作系统200包括内容递送系统(CDS)211，以直接向消费者(例如，基于支付或基于订阅)或向在线电影和电视节目服务提供商(例如，网飞)提供内容的实时或准实时发行，该在线电影和电视节目服务提供商使用他们的服务平台以给他们的客户递送电影。在一些实现方式中，CDS211可以是允许其他人授权访问的接口，并且可以包括一个或多个服务器以形成内容递送网络。要经由CDS 211发行的内容可以存储在用于存储电影制作的数字数据的主子系统中的数字存储中和/或存储在附加存储209中。
在实现系统200时，可以通过操作与一个或多个通信网络通信的一个或多个计算机来制作、编辑和递送诸如电影或电视节目的多媒体数字内容，该一个或多个计算机被配置为从用户接收关于多媒体数字内容的故事情节、摄像机、全体演员和其他资产的信息，在捕捉基于故事情节执行的动作的视频和声音时向摄像机提供控制命令，并且编辑所捕捉的视频以制作多媒体数字内容。在一些应用中，CDS 211可以被配置成在制作多媒体数字内容之后立即通过网络发行多媒体数字内容。在其他应用中，CDS 211可以被配置为开始通过网络发行多媒体数字内容的开始部分，同时仍正在制作多媒体数字内容的后面部分。这种内容递送模式可用于递送电视节目或其他内容，其中及时递送是非常期望或有益的，并且由于系统200内置的自动化特征和功能而成为可能。
CDS 211可以被设计成允许发行具有某些定制特征的相同电影或电视节目，这些定制特征是基于要递送的内容的接收者而唯一提供的。这个特征的一个示例是在相同的电视节目或电影被递送给不同观众群时系统200为相同的电视节目或电影提供不同的产品放置的能力。
广告插入
广告或产品可以以各种方式合并或嵌入到电影、电视节目或视频中，以提供嵌入式营销。一种常用的技术是产品放置，其中名牌产品可以显示在镜头中或包含在音轨中。经由图像或音频的各种现有产品放置技术缺乏灵活性，趋向于昂贵，并且通常不提供用于在制作之后交替产品放置的灵活手段。图2中的CFES 207可以用于以比电影或电视制作中的各种产品放置技术灵活得多的方式实现广告插入或产品放置。例如，在一些传统的电影制作中，广告(如广告牌或品牌名称)在完成镜头后不能被轻易更改。利用CFES系统207，机器可读剧本可以包括广告的占位符。参考表1中所示的示例，场景ID 2包括两个广告。CFES207可以确定如何编辑镜头以包括相关产品。例如，电影可以在制作阶段在没有任何广告内容的情况下拍摄。在后期制作阶段，CFES207可以基于特定发行(例如向特定人口群体的营销)编辑原始片段(例如，珍妮的手腕)以包括期望的广告内容(例如，手表)。
使用FDML剧本可以很容易地实现对广告供应商的修改。基于FDML剧本中广告占位符的描述，CFES定位镜头并用指定的广告内容替换原始图像或音频(例如，将圆柱形饮料从可口可乐切换到百事可乐)。CFES可以进一步检测镜头之间的依赖性，以确保可以在多个镜头和/或场景中一致地合并广告。例如，CFES可以在场景ID 2的所有镜头中检测珍妮的手腕，并将手表添加到显示珍妮手腕的所有片段中。
除了上面讨论的三个主要功能之外，CFES还可以执行其他编辑功能，诸如基于MPDS指令向蓝屏添加背景视频、添加文本、添加音乐。
图5图示了根据本技术的CFES的示例分布式架构500。在该架构500中，一些影片编辑功能可以由一个或多个边缘影片编辑服务器501来执行。例如，在特定位置拍摄的场景可以由位于该位置附近的对应边缘影片编辑服务器编辑。边缘编辑服务器501和场景位置之间的接近允许在没有太多网络延迟的情况下完成初步编辑。如果电影正在以近乎实时的方式或者在完成最终电影编辑后立即广播，则边缘CFES服务器尤其重要。对于非实时后期制作编辑，这种边缘CFES服务器可能不是必需的，因为所有记录的多媒体内容将被收集到单个云位置以进行处理。中央影片编辑服务器503可以整合来自边缘影片编辑服务器的编辑过的片段以用于进一步处理(例如，跨多个位置中的场景进行编辑)。然后，在与来自音频编辑服务器509和音频增强服务器511的编辑过的音频流混合之前，完全编辑过的片段被发送到视频增强服务器505以执行压缩和其他增强。一旦增强完成，广告插入服务器513用期望的广告内容替换片段的选择部分。广告插入服务器513还可以拍摄具有现有的广告内容的片段，并用另一个品牌来替换它们。
注意，图5中的每个块代表逻辑功能实体，而不是物理实体。基于成本、技术、网络和规模考虑，逻辑实体可以组合成一个物理实体，或可以分成不同的实体。从一个物理实体到另一个物理实体的数据流可以是流式传输以进行实时处理，且或者可以是批量传输以进行离线处理。
图6是用于制作电影的方法600的示例的流程图表示。方法600包括，在操作602，经由基于网络的用户界面，从用户接收关于故事情节、摄像机、麦克风、全体演员和其他资产的信息。方法600包括，在操作604，基于故事情节确定一个或多个场景。方法600包括，在操作606，生成对应于一个或多个场景的一个或多个机器可读剧本。每个机器可读剧本包括关于对应场景的对应摄像机、全体演员和资产的信息。方法600包括，在操作608，基于一个或多个机器可读剧本指导摄像机和全体演员，以获得一个或多个场景的片段。方法600包括，在操作610，对片段执行视频和音频编辑以获得电影。方法600还包括，在操作612，在获得片段之后的期望持续时间(例如，30分钟)内，通过网络发行电影。
图7是图示可用于实现本公开的技术的各个部分的计算机系统或其他控制设备700的架构的示例的框图。计算机系统700包括经由互连725连接的一个或多个处理器705和存储器710。互连725可以代表由适当的桥接器、适配器或控制器连接的任何一个或多个单独的物理总线、点对点连接或两者。因此，互连725可以包括例如系统总线、外围组件互连(PCI)总线、超传输或工业标准架构(ISA)总线、小型计算机系统接口(SCSI)总线、通用串行总线(USB)、IIC(I2C)总线或电气和电子工程师协会(IEEE)标准674总线，有时称为“火线”
(多个)处理器705可以包括中央处理单元(CPU)，以控制例如主机计算机的整体操作。在某些实施例中，(多个)处理器705通过执行存储在存储器710中的软件或固件来实现这一点。(多个)处理器705可以是或可以包括一个或多个可编程的通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑器件等(PLD)等，或此类设备的组合。
存储器710可以是或包括计算机系统的主存储器。存储器710代表任何合适形式的随机存取存储器(RAM)、只读存储器(ROM)、闪速存储器等，或者此类设备的组合。在使用中，存储器710尤其可以包含一组机器指令，当由处理器705执行时，该组机器指令使处理器705执行操作以实现本公开技术的实施例。
(可选的)网络适配器715也通过互连725连接到(多个)处理器705。网络适配器715为计算机系统700提供了与远程设备(诸如存储客户端和/或其他存储服务器)通信的能力，并且可以是例如以太网适配器或光纤通道适配器。
因此很明显，在本文公开的基于云的电影制作系统和技术的帮助下，可以以低得多的成本和高得多的速度制作电影、电视节目或视频。重复和耗时的计划可以被自动化和针对每个故事情节的修改所取代。分布式架构允许在拍摄场景附近执行后期制作编辑，使得电影可以在完成后立即发行(例如，在摄像机拍摄完成后的30分钟到一小时内)。后期制作时间短，可以大大降低内容泄露的风险，从而保护整个制作团队的艺术作品和经济利益。所公开的基于云的电影制作系统和技术也可以通过利用诸如5G和未来网络的通信网络中的不断增加的通信速度和带宽来改进。
上述示例表明，本专利文档中公开的用于基于云计算和在线访问的电影、电视节目和其他多媒体的制作的技术和系统，可以用于增强电影和电视制作公司的现有制作，以减少劳动力和成本，来提供在各种传统电影或电视制作过程中不具备的灵活性和特征。此外，所公开的技术和系统可以用于简化制作过程，并且因此使得能够进行电影和视频的业余制作。使用所公开的技术，可以用几千美元(甚至几百美元)制作电影，而不是花费至少50万美元来制作最低成本的电影。低成本可以激励一大群艺术家制作有趣的内容，这可能潜在地带来千亿美元的产业。可以实现本专利文档中公开的技术和系统使得电影制作即服务(MPaaS)能够允许专业制作公司更好地利用电影制作技术，并且还允许大众市场中的更多用户能够评估这种技术。
本专利文档中描述的主题和功能操作的实现方式可以在各种系统、数字电子电路中实现，或者在计算机软件、固件或硬件中实现，包括本说明书中公开的结构及其结构等同物，或者在它们中的一个或多个的组合中实现。本说明书中描述的主题的实现方式可以被实现为一个或多个计算机程序产品，例如，编码在有形和非暂时性计算机可读介质上的计算机程序指令的一个或多个模块，该一个或多个模块用于由数据处理装置进行或控制数据处理装置的操作。计算机可读介质可以是机器可读存储设备、机器可读存储衬底、存储器设备、影响机器可读传播信号的物质组合物，或者它们中的一个或多个的组合。术语“数据处理单元”或“数据处理装置”涵盖用于处理数据的所有装置、设备和机器，包括例如可编程处理器、计算机或多个处理器或计算机。除了硬件之外，该装置可以包括为所讨论的计算机程序创建执行环境的代码，例如，构成处理器固件、协议栈、数据库管理系统、操作系统或它们中的一个或多个的组合的代码。
计算机程序(也称为程序、软件、软件应用、机器可读剧本或代码)可以用任何形式的编程语言编写，包括编译或解释语言，并且它可以以任何形式部署，包括作为独立程序或作为模块、组件、子例程或适合在计算环境中使用的其他单元。计算机程序不一定对应于文件系统中的文件。程序可以存储在保存其他程序或数据的文件的部分(例如，存储在标记语言文档中的一个或多个剧本)中，存储在专用于所讨论的程序的单个文件中，或者存储在多个协调文件(例如，存储一个或多个模块、子程序或部分代码的文件)中。计算机程序可以被部署为在一台计算机上或位于一个站点或分布在多个站点并通过通信网络互连的多台计算机上执行。
本说明书中描述的过程和逻辑流程可以由执行一个或多个计算机程序的一个或多个可编程处理器来执行，以通过对输入数据进行操作并生成输出来执行功能。这些过程和逻辑流程也可以由专用逻辑电路来执行，并且装置也可以被实现为专用逻辑电路，例如，现场可编程门阵列(FPGA)或专用集成电路(ASIC)。
举例来说，适合于执行计算机程序的处理器包括通用和专用微处理器两者，以及任何类型的数字计算机的任何一个或多个处理器。通常，处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于执行指令的处理器和用于存储指令和数据的一个或多个存储器设备。通常，计算机还将包括或可操作地耦合以从用于存储数据的一个或多个大容量存储设备(例如磁盘、磁光盘或光盘)接收数据或向其传输数据，或两者。然而，计算机不需要有这样的设备。适于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储器设备，包括例如半导体存储器设备(例如EPROM、EEPROM和闪速存储器设备)。处理器和存储器可以由专用逻辑电路来补充或合并在其中。
说明书连同附图仅被认为是示例性的，其中示例性意味着示例。如本文所使用的，单数形式“一”、“一个”和“该”旨在也包括复数形式，除非上下文另有明确指示。此外，“或”的使用旨在包括“和/或”，除非上下文另有明确指示。
虽然本专利文档包含许多细节，但这些不应被解释为对任何发明的范围或可能要求保护的内容的限制，而是对可能特定于特定发明的特定实施例的特征的描述。本专利文档中在单独实施例的上下文中描述的某些特征也可以在单个实施例中组合实现。相反，在单个实施例的上下文中描述的各种特征也可以在多个实施例中单独或以任何合适的子组合来实现。此外，尽管特征可以在上面被描述为在某些组合中起作用，并且甚至最初被这样要求保护，但是在一些情况下，来自所要求保护的组合的一个或多个特征可以从该组合中删除，并且所要求保护的组合可以指向子组合或子组合的变化。
类似地，虽然在附图中以特定顺序描述了操作，但是这不应该被理解为要求以所示的特定顺序或按顺序执行这些操作，或者要求执行所有示出的操作，以获得期望的结果。此外，本专利文档中描述的实施例中的各种系统组件的分离不应被理解为在所有实施例中都需要这种分离。
仅描述了几个实现方式和示例，并且可以基于本专利文档中描述和示出的内容进行其他实现方式、增强和变化。

Claims (23)

1.一种用于制作包括电影的多媒体数字内容的系统，包括：
前期制作子系统，被配置为从用户接收关于所述电影的故事情节、摄像机、全体演员和其他资产的信息，所述前期制作子系统被配置为基于所述故事情节确定一个或多个场景并生成对应于所述一个或多个场景的一个或多个机器可读剧本；
制作子系统，被配置为从所述前期制作系统接收所述一个或多个机器可读剧本，以确定所述一个或多个场景中的约束，所述制作子系统还被配置为根据所述故事情节来确定所述摄像机和所述全体演员的动作以获得片段；
设备管理子系统，被配置为基于由所述制作系统确定的动作来控制所述摄像机和所述全体演员；以及
后期制作编辑系统，被配置为从所述制作子系统接收所述片段以执行视频和音频编辑，所述后期制作编辑系统包括位于所述场景附近的一个或多个边缘编辑服务器和被配置为整合来自所述一个或多个边缘编辑服务器的编辑过的片段以制作所述电影的中央编辑服务器。
2.根据权利要求1所述的系统，其中，所述前期制作子系统包括用于从所述用户接收所述信息的基于网络的用户界面。
3.根据权利要求1或2所述的系统，其中，所述前期制作子系统被配置为基于所述故事情节来确定所述电影的类型，并提供用于前期制作计划的一个或多个模板。
4.根据权利要求1至3中任一项所述的系统，其中，所述前期制作子系统被配置为基于由所述制作子系统确定的所述一个或多个场景中的所述约束来生成制作时间表。
5.根据权利要求1至4中任一项所述的系统，其中，所述制作子系统被配置为分析每个场景的摄像机、全体演员和资产，以确定所述一个或多个场景中的所述约束。
6.根据权利要求1至5中任一项所述的系统，其中，每个场景包括一个或多个镜头，每个镜头是一个位置中的连续拍摄时段，并且其中所述一个或多个机器可读剧本中的每一个包括每个镜头的开始时间和持续时间。
7.根据权利要求6所述的系统，其中，所述制作子系统被配置为在拍摄期间调整镜头的所述开始时间和所述持续时间，并且更新后续镜头的所述开始时间和所述持续时间。
8.根据权利要求1至7中任一项所述的系统，还包括同步服务器，所述同步服务器被配置为使所述摄像机与所述后期制作编辑系统同步。
9.根据权利要求1至8中任一项所述的系统，还包括内容递送系统，所述内容递送系统被配置为在由所述制作子系统获得所述片段之后的第一持续时间内通过一个或多个通信信道发行所述电影。
10.根据权利要求9所述的系统，其中，所述第一持续时间在30分钟至1小时的范围内。
11.一种用于制作电影的方法，包括：
经由基于网络的用户界面从用户接收关于所述电影的故事情节、摄像机、全体演员和其他资产的信息；
基于所述故事情节确定一个或多个场景；
生成对应于所述一个或多个场景的一个或多个机器可读剧本，所述剧本包括关于对应场景的对应摄像机、全体演员、资产和编辑指令的信息；
基于所述一个或多个机器可读剧本来指导所述摄像机和所述全体演员，以根据所述故事情节获得片段；
根据所述剧本中的所述编辑指令对所述片段执行视频和音频编辑以获得所述电影；以及
在获得所述片段之后的第一持续时间内通过网络发行所述电影。
12.根据权利要求11所述的方法，包括：
基于所述故事情节来确定所述电影的类型；以及
使用所述类型生成一个或多个模板。
13.根据权利要求11或12所述的方法，包括：
分析所述一个或多个场景中的每一个的摄像机、全体演员和资产；以及
基于所述一个或多个机器可读剧本中的信息来确定所述一个或多个场景中的约束。
14.根据权利要求11至13中任一项所述的方法，其中，每个剧本包括每个场景中的镜头的开始时间和持续时间，并且所述方法还包括：
在拍摄期间调整所述镜头的所述开始时间和所述持续时间，以及
调整所述电影的后续镜头的所述开始时间和所述持续时间。
15.根据权利要求14所述的方法，包括：
基于所述一个或多个场景中的所述约束生成制作时间表。
16.根据权利要求14或15所述的方法，包括：
基于所调整的镜头的持续时间来确定对所述制作时间表的影响；以及
向所述用户提供提示以指示所述影响。
17.根据权利要求14至16中任一项所述的方法，其中，部分地基于所述一个或多个机器可读剧本中的每一个中的所述开始时间和所述持续时间来同步所述片段。
18.根据权利要求11至17中任一项所述的方法，其中，所述第一持续时间在30分钟至1小时的范围内。
19.一种其上存储有处理器代码的非暂时性计算机可读介质，所述处理器代码包括用于执行权利要求9至18中任一项所述的方法的程序代码。
20.一种用于为电影或电视节目提供制作即服务(MPaaS)的系统，包括如本专利文档中所公开或说明的过程或特征。
21.一种用于制作包括电影或电视节目的多媒体数字内容的系统，包括：
与一个或多个通信网络通信的一个或多个计算机，所述一个或多个计算机被配置为从用户接收关于所述多媒体数字内容的故事情节、摄像机、全体演员和其他资产的信息，所述一个或多个计算机被配置为在捕捉基于所述故事情节执行的动作的视频和声音时向摄像机提供控制命令，并且编辑所捕捉的视频以制作所述多媒体数字内容。
22.根据权利要求21所述的系统，还包括：
内容递送系统，被配置为在制作所述多媒体数字内容之后立即通过网络发行所述多媒体数字内容。
23.根据权利要求21所述的系统，还包括：
内容递送系统，被配置为开始通过网络发行所述多媒体数字内容的开始部分，同时仍正在制作所述多媒体数字内容的后面部分。
CN201980098650.5A 2019-06-11 2019-06-11 用于制作包括电影的多媒体数字内容的系统、方法和介质 Active CN114788293B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2019/090722 WO2020248124A1 (en) 2019-06-11 2019-06-11 Production-as-service systems for making movies, tv shows and multimedia contents

Publications (2)

Publication Number Publication Date
CN114788293A true CN114788293A (zh) 2022-07-22
CN114788293B CN114788293B (zh) 2023-07-14

Family

ID=71611850

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980098650.5A Active CN114788293B (zh) 2019-06-11 2019-06-11 用于制作包括电影的多媒体数字内容的系统、方法和介质

Country Status (4)

Country Link
US (2) US10721377B1 (zh)
EP (1) EP3984235A4 (zh)
CN (1) CN114788293B (zh)
WO (1) WO2020248124A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117336539A (zh) * 2023-09-28 2024-01-02 北京风平智能科技有限公司 一种用于短视频ip打造的视频脚本生产方法及系统
CN117521813A (zh) * 2023-11-20 2024-02-06 中诚华隆计算机技术有限公司 基于知识图谱的剧本生成方法、装置、设备及芯片

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10715883B2 (en) 2017-09-06 2020-07-14 Rovi Guides, Inc. Systems and methods for generating summaries of missed portions of media assets
US11252483B2 (en) * 2018-11-29 2022-02-15 Rovi Guides, Inc. Systems and methods for summarizing missed portions of storylines
WO2020248124A1 (en) 2019-06-11 2020-12-17 WeMovie Technologies Production-as-service systems for making movies, tv shows and multimedia contents
WO2021022499A1 (en) 2019-08-07 2021-02-11 WeMovie Technologies Adaptive marketing in cloud-based content production
WO2021068105A1 (en) * 2019-10-08 2021-04-15 WeMovie Technologies Pre-production systems for making movies, tv shows and multimedia contents
WO2021225608A1 (en) 2020-05-08 2021-11-11 WeMovie Technologies Fully automated post-production editing for movies, tv shows and multimedia contents
US11070888B1 (en) 2020-08-27 2021-07-20 WeMovie Technologies Content structure aware multimedia streaming service for movies, TV shows and multimedia contents
EP4232979A4 (en) * 2020-10-26 2024-10-16 Showrunnr Inc SYSTEM FOR SYNCHRONIZING ENTERTAINMENT PRODUCTION RESOURCE SUPPLY WITH PRODUCTION PROJECT PLANNING
US11812121B2 (en) 2020-10-28 2023-11-07 WeMovie Technologies Automated post-production editing for user-generated multimedia contents
IT202000025888A1 (it) * 2020-10-30 2022-04-30 Gobee S R L Metodo e sistema per comporre automaticamente un filmato
US11330154B1 (en) 2021-07-23 2022-05-10 WeMovie Technologies Automated coordination in multimedia content production
US20230026479A1 (en) * 2021-07-24 2023-01-26 ReelwUrld, Inc. Crowdsourced Cinematic Universe Model
CN114066308B (zh) * 2021-11-29 2022-08-12 重庆允成互联网科技有限公司 生产工单调整方法、装置以及电子设备
US11321639B1 (en) 2021-12-13 2022-05-03 WeMovie Technologies Automated evaluation of acting performance using cloud services
WO2023223401A1 (ja) * 2022-05-17 2023-11-23 さくら映機株式会社 リアルタイム編集システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101316362A (zh) * 2007-05-29 2008-12-03 中国科学院计算技术研究所 一种基于故事情节发展模型分析的电影动作场景检测方法
US20130151970A1 (en) * 2011-06-03 2013-06-13 Maha Achour System and Methods for Distributed Multimedia Production
CN108447129A (zh) * 2017-12-27 2018-08-24 广东鸿威国际会展集团有限公司 一种在线三维编辑方法及系统
CN109783659A (zh) * 2017-10-06 2019-05-21 迪斯尼企业公司 基于自然语言处理和2d/3d预可视化的自动化故事板

Family Cites Families (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5960074A (en) 1996-09-23 1999-09-28 Curtis Clark Mobile tele-computer network for motion picture, television and tv advertising production
JP2000101647A (ja) 1998-09-25 2000-04-07 Matsushita Electric Ind Co Ltd データ送信方法、データ送信装置、及びデータ送信プログラムを記録した記録媒体
US8560951B1 (en) * 1998-12-18 2013-10-15 Thomson Licensing System and method for real time video production and distribution
US20020099577A1 (en) 1999-12-01 2002-07-25 Stuart Black Virtual production link system
US6789109B2 (en) 2001-02-22 2004-09-07 Sony Corporation Collaborative computer-based production system including annotation, versioning and remote interaction
US20030061610A1 (en) 2001-03-27 2003-03-27 Errico James H. Audiovisual management system
JP2003044579A (ja) * 2001-07-30 2003-02-14 Matsushita Electric Ind Co Ltd シナリオ情報解析装置及びシナリオ情報解析方法
JP4218264B2 (ja) * 2002-06-25 2009-02-04 ソニー株式会社 コンテンツ作成システム、コンテンツ企画作成プログラム、プログラム記録媒体、撮像装置、撮像方法、撮像プログラム
EP1631962A1 (en) 2003-05-26 2006-03-08 Koninklijke Philips Electronics N.V. System and method for generating audio-visual summaries for audio-visual program content
US10726822B2 (en) * 2004-09-27 2020-07-28 Soundstreak, Llc Method and apparatus for remote digital content monitoring and management
US20060251382A1 (en) 2005-05-09 2006-11-09 Microsoft Corporation System and method for automatic video editing using object recognition
US20060282785A1 (en) 2005-06-09 2006-12-14 Sbc Knowledge Ventures, L.P. System and method of displaying content in display windows
US8687016B2 (en) 2005-06-10 2014-04-01 Hewlett-Packard Development Company, L.P. Method and system for enhancing the quality of video prompts in an interactive media response system
KR100957902B1 (ko) * 2005-10-27 2010-05-13 미쓰비시덴키 가부시키가이샤 영상 요약 장치
US9196304B2 (en) * 2006-01-26 2015-11-24 Sony Corporation Method and system for providing dailies and edited video to users
US20080036917A1 (en) 2006-04-07 2008-02-14 Mark Pascarella Methods and systems for generating and delivering navigatable composite videos
US8006189B2 (en) 2006-06-22 2011-08-23 Dachs Eric B System and method for web based collaboration using digital media
US20080033801A1 (en) 2006-07-14 2008-02-07 Vulano Group, Inc. System for dynamic personalized object placement in a multi-media program
US20080101476A1 (en) 2006-11-01 2008-05-01 Qualcomm Incorporated Video coding rate adaptation to reduce packetization overhead
US8934717B2 (en) 2007-06-05 2015-01-13 Intellectual Ventures Fund 83 Llc Automatic story creation using semantic classifiers for digital assets and associated metadata
EP2179599A4 (en) 2007-07-27 2011-09-14 Deluxe Digital Studios Inc METHOD AND SYSTEMS FOR USE IN THE INDIVIDUAL ADJUSTMENT OF DISPLAYED CONTENT IN CONNECTION WITH A PORTABLE STORAGE MEDIUM
CN101365094A (zh) 2007-08-08 2009-02-11 宋亚民 一种影视情境广告的发布、植入、制作方法及其系统
US8521842B2 (en) 2008-02-29 2013-08-27 Microsoft Corporation Delivering composite media to a client application
EP2324417A4 (en) 2008-07-08 2012-01-11 Sceneplay Inc SYSTEM AND METHOD FOR PRODUCING MEDIA
KR101516850B1 (ko) 2008-12-10 2015-05-04 뮤비 테크놀로지스 피티이 엘티디. 여러 개 비디오 클립을 인터커팅하여 새로운 비디오 제작 생성기
US10531062B2 (en) 2009-10-13 2020-01-07 Vincent Pace Stereographic cinematography metadata recording
US9955206B2 (en) 2009-11-13 2018-04-24 The Relay Group Company Video synchronized merchandising systems and methods
US20110206351A1 (en) 2010-02-25 2011-08-25 Tal Givoli Video processing system and a method for editing a video asset
US8422852B2 (en) 2010-04-09 2013-04-16 Microsoft Corporation Automated story generation
US9191639B2 (en) 2010-04-12 2015-11-17 Adobe Systems Incorporated Method and apparatus for generating video descriptions
US9253548B2 (en) 2010-05-27 2016-02-02 Adobe Systems Incorporated Optimizing caches for media streaming
US9646209B2 (en) 2010-08-26 2017-05-09 Blast Motion Inc. Sensor and media event detection and tagging system
WO2013070802A1 (en) 2011-11-07 2013-05-16 Finitiv Corporation System and method for indexing and annotation of video content
US9106812B1 (en) * 2011-12-29 2015-08-11 Amazon Technologies, Inc. Automated creation of storyboards from screenplays
US20130232178A1 (en) * 2012-03-01 2013-09-05 Sony Pictures Technologies, Inc. Connecting storyboard system to editorial system
US9998722B2 (en) * 2012-03-13 2018-06-12 Tapshot, Inc. System and method for guided video creation
US20140328570A1 (en) 2013-01-09 2014-11-06 Sri International Identifying, describing, and sharing salient events in images and videos
US9661047B2 (en) * 2012-04-30 2017-05-23 Mobilatv Ltd. Method and system for central utilization of remotely generated large media data streams despite network bandwidth limitations
US20140082079A1 (en) 2012-09-14 2014-03-20 UmiCam Incorporated System and method for the collaborative recording, uploading and sharing of multimedia content over a computer network
US9516078B2 (en) 2012-10-26 2016-12-06 Cisco Technology, Inc. System and method for providing intelligent chunk duration
US20140132841A1 (en) * 2012-11-13 2014-05-15 Wymsee Systems and methods for digitally organizing the physical production for media productions
US9020325B2 (en) 2012-11-14 2015-04-28 Storyvine, LLC Storyboard-directed video production from shared and individualized assets
US20140242560A1 (en) 2013-02-15 2014-08-28 Emotient Facial expression training using feedback from automatic facial expression recognition
US8910201B1 (en) 2013-03-11 2014-12-09 Amazon Technologies, Inc. Product placement in digital content
EP2992530A2 (en) * 2013-05-02 2016-03-09 Waterston Entertainment (Pty) Ltd. System and method for incorporating digital footage into a digital cinematographic template
US20150012325A1 (en) * 2013-07-08 2015-01-08 Stephanie Lynn Maher Social media and e-commerce film planning system and process
US9747946B2 (en) 2013-08-08 2017-08-29 Nbcuniversal Media, Llc Method and system for sourcing and editing live video
WO2015038749A1 (en) 2013-09-13 2015-03-19 Arris Enterprises, Inc. Content based video content segmentation
CN103888785A (zh) 2014-03-10 2014-06-25 百度在线网络技术（北京）有限公司 信息的提供方法和装置
US20150281710A1 (en) * 2014-03-31 2015-10-01 Gopro, Inc. Distributed video processing in a cloud environment
US9405979B2 (en) 2014-04-10 2016-08-02 Smartvue Corporation Systems and methods for automated cloud-based analytics and 3-dimensional (3D) display for surveillance systems
US10496945B2 (en) * 2014-06-17 2019-12-03 Fox Digital Enterprises, Inc. Online global planning system for international theater post production and enterprise operations
US9478059B2 (en) 2014-07-28 2016-10-25 PocketGems, Inc. Animated audiovisual experiences driven by scripts
US20160050465A1 (en) * 2014-08-18 2016-02-18 Groopic, Inc. Dynamically targeted ad augmentation in video
WO2016073417A2 (en) 2014-11-03 2016-05-12 Dibzit.Com, Inc. System and method for identifying and using objects in video
US20160132546A1 (en) * 2014-11-10 2016-05-12 Andrea Keating Data Analytics System
CN104581222A (zh) 2015-01-05 2015-04-29 李伟贤 一种在视频中快速识别广告位并嵌入广告的方法
US20160323483A1 (en) * 2015-04-28 2016-11-03 Invent.ly LLC Automatically generating notes and annotating multimedia content specific to a video production
US10747801B2 (en) 2015-07-13 2020-08-18 Disney Enterprises, Inc. Media content ontology
US10469802B2 (en) 2015-08-11 2019-11-05 Avaya Inc. Disturbance detection in video communications
US10290320B2 (en) 2015-12-09 2019-05-14 Verizon Patent And Licensing Inc. Automatic media summary creation systems and methods
US20170178346A1 (en) 2015-12-16 2017-06-22 High School Cube, Llc Neural network architecture for analyzing video data
EP3246724A1 (en) 2016-05-19 2017-11-22 Nokia Technologies Oy A method, apparatus, system and computer program for controlling a positioning module and/or an audio capture module
US10204274B2 (en) 2016-06-29 2019-02-12 Cellular South, Inc. Video to data
CN109478400B (zh) * 2016-07-22 2023-07-07 杜比实验室特许公司 现场音乐表演的多媒体内容的基于网络的处理及分布
KR102028198B1 (ko) 2017-01-26 2019-10-04 한국전자통신연구원 동영상 장면과 메타데이터 저작 방법
JP6729517B2 (ja) 2017-08-02 2020-07-22 ヤマハ株式会社 学習モデル生成方法、学習モデル生成装置、プログラムおよび自動演奏ロボット
US11115666B2 (en) 2017-08-03 2021-09-07 At&T Intellectual Property I, L.P. Semantic video encoding
US10057537B1 (en) * 2017-08-18 2018-08-21 Prime Focus Technologies, Inc. System and method for source script and video synchronization interface
CN109905732A (zh) 2017-12-07 2019-06-18 北京雷石天地电子技术有限公司 在视频中植入广告的方法及装置
US10798271B2 (en) * 2018-01-05 2020-10-06 Netflix, Inc. Detecting errors in the timing between subtitles and shot changes
US11295783B2 (en) 2018-04-05 2022-04-05 Tvu Networks Corporation Methods, apparatus, and systems for AI-assisted or automatic video production
US11594028B2 (en) 2018-05-18 2023-02-28 Stats Llc Video processing for enabling sports highlights generation
US11010645B2 (en) 2018-08-27 2021-05-18 TalkMeUp Interactive artificial intelligence analytical system
US11195554B2 (en) 2019-03-25 2021-12-07 Rovi Guides, Inc. Systems and methods for creating customized content
US20200364668A1 (en) * 2019-05-17 2020-11-19 Furkan Altunkaynak Online Platform for Media Content Organization and Film Direction
WO2020248124A1 (en) 2019-06-11 2020-12-17 WeMovie Technologies Production-as-service systems for making movies, tv shows and multimedia contents
US11314828B2 (en) 2019-07-12 2022-04-26 Iq2 Holdings, Inc. Dynamic and personalized product placement in electronic files
WO2021022499A1 (en) 2019-08-07 2021-02-11 WeMovie Technologies Adaptive marketing in cloud-based content production
US10958619B1 (en) 2019-09-16 2021-03-23 World Cinema, Inc. System and method for private media casting on a shared network
WO2021068105A1 (en) 2019-10-08 2021-04-15 WeMovie Technologies Pre-production systems for making movies, tv shows and multimedia contents
WO2021074721A2 (en) 2019-10-15 2021-04-22 Indian Institute Of Technology Bombay System for automatic assessment of fluency in spoken language and a method thereof
US11394875B2 (en) 2019-12-11 2022-07-19 At&T Intellectual Property I, L.P. Content capture service
WO2021225608A1 (en) 2020-05-08 2021-11-11 WeMovie Technologies Fully automated post-production editing for movies, tv shows and multimedia contents
US11070888B1 (en) 2020-08-27 2021-07-20 WeMovie Technologies Content structure aware multimedia streaming service for movies, TV shows and multimedia contents
US11166086B1 (en) 2020-10-28 2021-11-02 WeMovie Technologies Automated post-production editing for user-generated multimedia contents

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101316362A (zh) * 2007-05-29 2008-12-03 中国科学院计算技术研究所 一种基于故事情节发展模型分析的电影动作场景检测方法
US20130151970A1 (en) * 2011-06-03 2013-06-13 Maha Achour System and Methods for Distributed Multimedia Production
CN109783659A (zh) * 2017-10-06 2019-05-21 迪斯尼企业公司 基于自然语言处理和2d/3d预可视化的自动化故事板
CN108447129A (zh) * 2017-12-27 2018-08-24 广东鸿威国际会展集团有限公司 一种在线三维编辑方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117336539A (zh) * 2023-09-28 2024-01-02 北京风平智能科技有限公司 一种用于短视频ip打造的视频脚本生产方法及系统
CN117336539B (zh) * 2023-09-28 2024-05-14 北京风平智能科技有限公司 一种用于短视频ip打造的视频脚本生产方法及系统
CN117521813A (zh) * 2023-11-20 2024-02-06 中诚华隆计算机技术有限公司 基于知识图谱的剧本生成方法、装置、设备及芯片
CN117521813B (zh) * 2023-11-20 2024-05-28 中诚华隆计算机技术有限公司 基于知识图谱的剧本生成方法、装置、设备及芯片

Also Published As

Publication number Publication date
EP3984235A1 (en) 2022-04-20
WO2020248124A1 (en) 2020-12-17
US20200396357A1 (en) 2020-12-17
CN114788293B (zh) 2023-07-14
EP3984235A4 (en) 2022-12-28
US11736654B2 (en) 2023-08-22
US10721377B1 (en) 2020-07-21

Similar Documents

Publication Publication Date Title
CN114788293B (zh) 用于制作包括电影的多媒体数字内容的系统、方法和介质
US11570525B2 (en) Adaptive marketing in cloud-based content production
US11468914B2 (en) System and method of generating video from video clips based on moments of interest within the video clips
US11315602B2 (en) Fully automated post-production editing for movies, TV shows and multimedia contents
US10123070B2 (en) Method and system for central utilization of remotely generated large media data streams despite network bandwidth limitations
CN107172476B (zh) 一种交互式脚本录制视频简历的系统及实现方法
US11107503B2 (en) Pre-production systems for making movies, TV shows and multimedia contents
US8341525B1 (en) System and methods for collaborative online multimedia production
US11812121B2 (en) Automated post-production editing for user-generated multimedia contents
US11166086B1 (en) Automated post-production editing for user-generated multimedia contents
Schofield et al. Bootlegger: turning fans into film crew
US9473756B2 (en) Systems and methods for generation of composite video from multiple asynchronously recorded input streams
US10687093B2 (en) Social-media-based TV show production, distribution, and broadcast system
Ohanian How artificial intelligence and machine learning may eventually change content creation methodologies
CN116830195B (zh) 用户生成的多媒体内容的自动化后期制作编辑
van Deventer et al. Media orchestration between streams and devices via new MPEG timed metadata
Van Rijsselbergen et al. Enabling universal media experiences through semantic adaptation in the creative drama productionworkflow
Fleming Focus on advertising

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant