CN107078996A - 用于处理与在线游戏相关的媒体流的方法、系统和节点 - Google Patents

用于处理与在线游戏相关的媒体流的方法、系统和节点 Download PDF

Info

Publication number
CN107078996A
CN107078996A CN201480082047.5A CN201480082047A CN107078996A CN 107078996 A CN107078996 A CN 107078996A CN 201480082047 A CN201480082047 A CN 201480082047A CN 107078996 A CN107078996 A CN 107078996A
Authority
CN
China
Prior art keywords
game
video camera
virtual video
media stream
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480082047.5A
Other languages
English (en)
Inventor
朱利恩·米恰特
约尼·梅恩佩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN107078996A publication Critical patent/CN107078996A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5258—Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/49—Saving the game status; Pausing or ending the game
    • A63F13/497—Partially or entirely replaying previous game actions
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5252—Changing parameters of virtual cameras using two or more virtual cameras concurrently or sequentially, e.g. automatically switching between fixed virtual cameras when a character changes room or displaying a rear-mirror view in a car-driving game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/86—Watching games played by other players
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开涉及在用于处理与由游戏云系统(20)提供的在线游戏相关的媒体流的系统(10)中执行的方法(40)。所述系统(10)包括至少一个节点(11，12)。所述方法(40)包括向游戏云系统(20)发送包括与至少一个虚拟摄像机相关的数据的消息(41)，以及从游戏云系统(20)接收(42)由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。本公开还涉及相应的系统、计算机程序和计算机程序产品，以及游戏引擎和游戏引擎中的方法。

Description

用于处理与在线游戏相关的媒体流的方法、系统和节点
技术领域
本文公开的技术总体涉及在线游戏领域，具体涉及与这种在线游戏相关的媒体流的处理。
背景技术
“云游戏”(也称为点播游戏和在线游戏)是用于描述在线游戏分发的形式的总称，其旨在向终端用户提供使用各种设备的游戏的无摩擦和直接的可玩性。目前有两种主要类型的云游戏：基于视频流的云游戏和基于文件流的云游戏。
基于视频流的云游戏是一种利用宽带连接、大型服务器群集、加密和压缩，将游戏内容流传输到用户设备的游戏服务。这允许通过使用瘦客户端将游戏直接和点播流传输到计算机、控制台和移动设备上，类似于视频点播。因此用户可以在不下载或安装实际游戏的情况下玩游戏。实际游戏取而代之地存储在运营商或游戏公司的服务器上，并被直接流传输到例如通过瘦客户端访问服务器的计算机。来自用户(玩家)的动作，即输入(例如按下控制和按钮)被直接传送到服务器，并记录在服务器中，然后服务器发回游戏对玩家输入的响应。
游戏内容不存储在订户的硬盘驱动器上，并且游戏代码执行主要在服务器集群处发生。因此，订户可以使用比游戏通常所需更弱的计算机来玩游戏，因为服务器群集群来完成所有高性能操作。让服务器来执行通常由终端用户的计算机完成的所需处理，在很大程度上使得用户设备的能力并不重要。
基于文件流的云游戏(也称为渐进式下载)将运行实际游戏的瘦客户端部署在用户的游戏设备(例如移动设备，个人计算机(PC)或控制台)上。最初，下载游戏的一小部分(通常小于总游戏大小的5％)，使得玩家可以快速开始玩。剩余的游戏内容在游戏时下载到终端用户的设备。这允许无延时地用低带宽互联网连接来即时访问游戏。云用于提供流传输游戏内容和处理密集数据分析的可缩放方式。
基于文件流的云游戏需要具有操作游戏的硬件能力的用户设备。下载的游戏内容通常存储在将其高速缓存的终端用户的设备上。
视频游戏广播允许玩家记录和流传输和/或广播其玩游戏过程。存在视频游戏广播服务，其中人们广播自己在玩游戏和/或谈论游戏，而其他人(观看者)观看他们并同时就此进行聊天，或者观看“精彩片段”(通常是所记录的视频的一部分)。这种服务越来越流行。
发明内容
在如今的直播游戏流传输服务中，只广播玩家所看到的，而这可能不是理解或欣赏整个游戏状态的最佳观看角度、最佳位置等。此外，玩家通常控制视频质量和格式，因此可能不会给出最佳的呈现、音频和/或视频质量。这可能进一步降低观看者的体验。期望改善观看者的体验。
本公开的目的在于解决或至少减轻上述问题中的至少一个。
根据第一方面，该目的通过在用于处理与游戏云系统提供的在线游戏有关的媒体流的系统中执行的方法来实现。该系统包括至少一个节点。该方法包括向游戏云系统发送包括与至少一个虚拟摄像机相关的数据的消息，以及从游戏云系统接收由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。
该方法能够改善观看者的体验并且能够使游戏事件的广播更容易跟踪。这是通过实现例如观看方向和位置的选择的方法来实现的。通过发送对该选择进行定义的数据，即与虚拟摄像机有关的数据，来做出这种选择。该方法为游戏广播的制作人提供了控制虚拟摄像机、添加事件、修改图形等的手段。因此，可以使游戏事件更具吸引力。此外，该方法使得能够提供更好的视图、具有不同摄像机角度的回放/慢动作等，由此提供对整个游戏过程的更好理解，从而提供更好的观看者体验。
根据第二方面，该目的通过用于处理与游戏云系统提供的在线游戏相关的媒体流的系统来实现。该系统包括至少一个节点并且被配置为：向游戏云系统发送包括与至少一个虚拟摄像机相关的数据的消息，以及从游戏云系统接收由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。
根据第三方面，该目的通过用于处理与游戏云系统提供的在线游戏有关的媒体流的系统的计算机程序来实现。该计算机程序包括计算机程序代码，所述计算机程序代码当在系统的至少一个处理器上执行时，使得所述系统执行如上所述的方法。
根据第四方面，该目标通过计算机程序产品来实现，所述计算机程序产品包括上述计算机程序和存储有上述计算机程序的计算机可读装置。
根据第五方面，该目的通过在用于提供与在线游戏相关的媒体流的游戏引擎中执行的方法来实现。该方法包括从节点接收包括与至少一个虚拟摄像机相关的数据的消息；基于接收到的数据提供至少一个虚拟摄像机；呈现由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流；以及向所述节点发送至少一个第一媒体流。
根据第六方面，该目的通过用于提供与在线游戏相关的媒体流的游戏引擎来实现。游戏引擎被配置为从节点接收包括与至少一个虚拟摄像机相关的数据的消息；基于接收到的数据提供至少一个虚拟摄像机；呈现由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流，以及向所述节点发送所述至少一个第一媒体流。
根据第八方面，该目的通过用于游戏引擎的计算机程序来实现，所述游戏引擎用于提供与在线游戏相关的媒体流，所述计算机程序包括计算机程序代码，所述计算机程序代码当在游戏引擎的至少一个处理器上执行时使得游戏引擎执行上述方法。
根据第九方面，该目标通过计算机程序产品来实现，所述计算机程序产品包括上述计算机程序和存储有上述计算机程序的计算机可读装置。
此外，当阅读以下描述和附图时，本公开的其他特征和优点将变得清楚。
附图说明
图1示意性地示出了可以实现本公开的实施例的环境。
图2示出了根据本公开的方面来实现的特征。
图3是示出了提供用于广播的游戏事件的方面的序列图。
图4示出了在根据本公开的系统中的方法的步骤的流程图。
图5示意性地示出了用于实现本公开的实施例的系统和装置。
图6示出了在根据本公开的游戏引擎中的方法的步骤的流程图。
图7示意性地示出了用于实现本公开的实施例的游戏引擎。
具体实施方式
在以下描述中，出于说明而非限制的目的，阐述具体细节，例如特定架构、接口、技术等，以提供完全的理解。在其他实例中省略了对公知设备、电路和方法的详细描述，以避免以因为不必要的细节使描述不清楚。在本说明书全文中，同样的附图标记指代相同或相似的元素。
可以预见，视频游戏广播将改变，并且将越来越像一个表演、事件或电影制作，在这种意义上，游戏的玩家将主要是“演员”，而其他人或实体将像今天的摄像师那样工作。为了提高观看者的体验，根据本公开的一个方面，包括电影导演、摄像师等的制作团队(虚拟或真实)能够从玩家的流、评论者的视频等中创建原始内容，并且能够创建新的玩游戏视频。
如前所述，今天，在正在进行的游戏的虚拟游戏场中，观看者可能没有的最佳“位置”。如果有更好的观察点，观看者可能能够更好地理解游戏。观看者还可能错过游戏的重要时刻。在本公开的各个方面中，通过提供用于改善观看者体验的手段，消除或至少减轻了这些缺点以及其他缺点。
现有技术的上述缺点的简单示例是游戏角色进入空房间。玩家可以广播在他的屏幕上呈现的内容，并且游戏角色通常看到的(对于第一人称游戏)是空房间。然而，对于观看者来说，更好的是可视化则可能是看到角色进入房间。根据本教导，这种可视化可以通过将虚拟摄像机放置在房间中、地板上，指向进入房间的角色来给出。此外，想象太阳强烈地照耀在角色的背后；由于背光，观看者将仅而看到角色的轮廓。这种视觉对玩家来说可能不是很好，但对观看游戏的人来说可能不错。
在各个方面中，通过定义在用于游戏事件的云系统的不同元素之间的多个控制信道，本公开给予例如“电影导演”的人自由，以及选择玩游戏过程的不同视点和其他选项的能力。该“电影导演”可以是计算机程序和/或设备形式的虚拟“电影导演”，或真实的电影导演。
图1示意性地示出了可以实现本公开的实施例的环境。具体地，示出了根据本公开的一个方面的架构、控制信道和媒体信道。用于游戏事件的基于云的控制系统1包括游戏电影制作(GFP)系统10、游戏云系统(GCS)20和视频流传输服务30。基于云的控制系统1可以包括游戏事件广播中的虚拟摄像机，其中虚拟摄像机可以被真实或虚拟的摄像师控制。通过计算机程序和/或设备，可以将“虚拟摄像师”实现为“电影导演”。
示出了参与由GCS20提供的当前游戏的多个玩家，第一玩家P1、第二玩家P2，...和第n玩家PN。每个玩家P1、P2、...、PN可以控制(“是”)游戏中的相应角色C1、C2，...、CN。每个角色具有部分由玩家控制的相关联的虚拟摄像机，玩游戏过程是基于玩家的输入来呈现的。角色(有时也被称为虚拟形象)可以被视为例如由玩家控制的三维游戏世界中的虚拟演员。针对这种控制，玩家P1、P2、...、PN例如通过使用输入设备(例如移动操纵杆、按压按钮等)来输入命令。命令在控制数据流中被传送到GCS 20的游戏引擎21。从每个玩家P1、P2、...、PN到每个相应的角色C1、C2，...、CN的虚线表示控制数据流。从而第一玩家P1的角色C1可以被控制，并且例如在游戏场景内移动，执行游戏内的各种动作。来自玩家的控制命令和动作被发送到游戏引擎21或相关服务器，并且可以被记录和存储在存储器中。
GCS 20可以包括游戏引擎21，游戏引擎21发送回游戏针对玩家输入的响应(如从游戏的每个角色C1、C2，...、CN到相应玩家P1，P2，...，PN的实线所示)，然后玩家再对该响应进行动作。游戏引擎21和玩家之间的控制数据流可以例如包括元数据，比如位置、动作等。GCS 20可以包括例如一个或多个web服务器22和任何数量的其他服务器和/或服务器集群。
玩家P1、P2、...、PN可以记录并流传输和/或广播他的玩游戏过程。游戏记录的这种呈现可以在玩家的设备2中本地执行，或者可以从GCS20接收这种记录。虽然用户设备2被示为仅用于第一玩家P1，但是每个玩家都具有能够玩游戏的某种类型的设备。该设备2可以例如包括计算机、游戏控制台、移动通信设备等。
玩家可以从游戏引擎21接收包括例如与玩游戏相关的音频和视频在内的媒体流，如从角色C1到第一玩家P1的实线所示。注意，所示出的角色仅用于说明目的，并且GCS 20(例如其游戏引擎21)接收/发送/创建与包括角色的游戏相关的媒体流。
例如，第N个玩家PN可以选择将从游戏引擎21转发的与游戏相关的他的媒体流发送到视频流服务30，如从角色N到视频流服务30(例如到其视频流服务器31)的实线所示。玩家P1、P2、...、PN可以发送来自游戏内和来自外部摄像机(网络摄像头)和麦克风的视频和音频流。例如，第二玩家P2可以使用网络摄像头来拍摄玩游戏时的自己，并且将网络摄像头视频流发送到视频流服务30，如从第二玩家P2到视频流服务30的实线所示。
如果呈现不在本地完成，例如在云游戏中完成，则玩家P1、P2、...、PN可以从GCS20(例如，其游戏引擎21)接收相应的一个或多个媒体流(例如，如图所示的视频流)。
GCS 20可以包括用于提供游戏的若干服务器。在一个实施例中，GCS 20仅包括游戏引擎21，例如游戏引擎服务器。在图中示出了一个游戏引擎21，但是可以认识到，GCS 20可以包括任何数量的处理设备(例如服务器)和用于存储与玩家P1、P2、...、PN相关的数据的存储器设备(例如游戏引擎服务器集群)。注意，在该上下文中，游戏引擎包括实现例如视频游戏的创建和开发的软件框架。游戏引擎21可以包括用于呈现2维(2D)或3维(3D)图形的呈现引擎，游戏引擎21可以用于处理声音、脚本、流传输、存储器管理等。术语“游戏引擎”通常被解释为负责游戏机制的软件，并且可以在服务器(例如游戏引擎21)中提供。这在本领域是已知的，将不进一步详细描述。
GCS 20可以接收和存储所有玩家的数据，并(最终)针对一些设备来呈现和流传输游戏。图1中通过从第N个玩家角色CN到视频流服务30的实线示出了针对第N个玩家的这种流传输的示例。
在本公开的一个方面中，GCS 20还呈现虚拟摄像机VC1、VC2、VCN，并且将它们流传输(即，根据它们的设置，对由虚拟摄像机呈现的视图的流媒体进行流传输)到GFP 10，具体地，流传输到GFP 10的虚拟摄像机设备CM1、CM2、...、CMM 11。
视频流服务(VSS)30可以包括一个或多个处理设备(例如视频流服务器31)以及存储器设备。VSS 30可以直接从玩家和从GCS 20接收媒体流。VSS 30还可以对媒体流执行一些处理，例如执行切换、混合和转码。VSS 30还包括用于向若干观看者V1、V2、...、VK发送媒体流的装置。
观看者V1、V2、...、VK具有用户设备3(例如计算机)，并且可以使用它来选择要观看的视频游戏流。观看者V1、V2、...、VK可以从VSS 30接收媒体流。在一个方面，观看者可以直接连接到GCS 20，并且接收游戏状态和呈现选项，例如观看游戏事件的预定义位置。游戏状态可以被视为例如定义游戏属性(例如，参与玩家的列表、玩家的分数、角色的位置等)的游戏状态，实质上保持跟踪在玩游戏期间改变的所有属性。
在本公开的一个方面中，观看者V1、V2、...、VK可以与GFP 10交互，例如通过对游戏中的未来发展进行投票。例如，他们可以对在游戏中给予玩家角色C1、C2，...、CN的虚拟礼物(例如新武器)进行投票。
在本公开的一个方面，VSS 30还可以与GFP 10交互，例如通过向GFP 10(例如其导演设备12)提供与VSS 30发送给观看者的流有关的统计数据。例如，GFP 10可以利用该信息来决定在可能有观看者的区域广播。
注意，观看者V1、V2、...、VK的数量通常比玩家P1、P2、...、PN的数量高得多，即K＞＞N。
GFP 10可以创建一个或多个媒体流并将它们发送到VSS 30，例如其视频流服务器31。
在一个方面，GFP 10包括电影导演设备12，电影导演设备12可以被视为实现(自动)执行电影制作的电影导演的任务的虚拟人的设备。电影导演设备12可以被配置为从用户(例如电影导演)接收输入用于编辑媒体流，或者电影导演设备12可以自动执行电影导演任务，比如编辑等。电影导演设备12可以从其用户和/或从虚拟摄像机装置CM1、CM2、...、CMM和/或从观看者V1、V2、...、VK和/或从GCS 20的任何设备(例如游戏引擎21)接收输入流。电影导演设备12可以处理输入流以便创建所需的输出流。该处理可以包括选择特定媒体流，编辑所选的媒体流，切换，混合等。再次注意，处理可以被用户(例如电影导演)控制，或者处理可以被配置和自动化。
GFP 10还可以包括从虚拟摄像机VC1、VC2、...、VCN接收媒体流的虚拟摄像机设备CM1、CM2、...、CMM 11。虚拟摄像机设备的数量M可以但不必等于虚拟摄像机的数量N.一个虚拟摄像机设备11可以用于控制一个或多个虚拟摄像机并从它们接收媒体流。
虚拟摄像机设备CM1、CM2、...、CMM，11可以被视为实现与电影制作的摄像师的功能相对应的功能。因此，虚拟摄像机设备CM1、CM2、...、CMM可以被视为虚拟摄像师，或者被视为基于游戏事件来制作电影的一个或多个人(例如摄像师)的输入装置。虚拟摄像机设备11，CM1、CM2、...、CMM可以包括处理单元，例如服务器。虚拟摄像机设备11，CM1、CM2、...、CMM可以包括用于接收用户输入(例如，定义要请求或要删除的某个虚拟摄像机)的输入设备。虚拟摄像机设备11，CM1、CM2、...、CMM还可以被配置为与导演设备12通信，例如从其接收指令。因此，虚拟摄像机设备11，CM1、CM2、...、CMM可以被视为是从导演设备12接收指令和/或从用户(例如摄像师)接收输入的自动摄像师，而用户又相应地从电影导演接收命令。虚拟摄像机设备11，CM1、CM2、...、CMM可以控制在GCS 20中提供的多个虚拟摄像机。
GFP 10还可以包括附加的处理装置，例如一个或多个服务器13和诸如交换机的设备(如附图标记14所示)。这些附加的处理装置可以被配置为从观看者V1、V2、...、VK接收输入，例如稍后描述的投票输入。
图2示出了根据本公开的方面来实现的特征。GFP 10可以从GCS 20接收游戏的游戏竞技场或游戏世界的各种类型的特殊图形表示。这种特殊的图形表示(例如通过网页来实现)允许导演容易地看到、选择和控制GCS20的虚拟摄像机。图2示出了用于控制虚拟摄像机的界面25看起来是什么样子的示例。例如，GFP 10可以接收游戏中的虚拟摄像机Cam-1、Cam-2、Cam-3、Cam-4、Cam-5、Cam-6、Cam-7的2D地图，如图2所示。使用界面25，导演可以容易地移动虚拟摄像机，选择摄像机使得其可以转动、倾斜、缩放等，改变它们的方向，添加新摄像机，移除旧摄像机，点击摄像机以查看并修改其设置等。这提供了一种容易且全面的控制虚拟摄像机的方式。
GFP 10(例如其导演设备12)可以执行诸如运行重放、添加图形、修改图形和应用审查的任务。此外，GFP 10可以接收从GCS 20接收的所有虚拟摄像机信号的马赛克视图。例如，所有相应虚拟摄像机信号的小视图可以同时显示在屏幕上。这有助于用户控制虚拟摄像机。
对于通过在本地或在GCS 20中运行游戏引擎来跟踪游戏事件的观看者V1、V2、...、VK，GFP 10还可以控制这些观看者的游戏引擎。一个示例是GFP 10影响观看者从哪个位置跟踪游戏的能力(例如，选择虚拟观众席的位置)。
在一个方面，摄像师可以是自动化的，并且游戏引擎21可以向GFP 10(例如其导演设备12)发送来自多个不同角度的媒体流(例如视频流)，所述视频由游戏引擎21选择。导演设备12的用户(导演)可以被提供有界面并且看到马赛克布局，并且可以选择向观看者广播哪一个摄像机。导演可以能够动态地新的虚拟摄像机，并且还可以通过转动、倾斜和缩放来控制任何单个虚拟摄像机。游戏引擎21可以生成特殊视图(例如在网页上呈现)，所述特殊视图示出了游戏竞技场上的虚拟摄像机的位置，从而允许导演例如选择和调整任何摄像机。注意，在该上下文中，导演可以通过使用用于向导演设备12输入指令的输入设备来进行这样的动作。在其他实施例中，导演的功能是自动化的；导演可以被视为预编程的虚拟导演。
在电影制作中，由电影导演来选择摄像机角度、摄像机位置等，这通常不由演员来选择。与此一致，根据本公开的一个方面，允许电影导演通过创建在GCS 20中运行的虚拟摄像机来指挥“表演”，其中，根据经由导演设备12输入的导演命令，所述虚拟摄像机可以被控制摄像机设备CM1、CM2、...、CMM的摄像师来控制。
游戏引擎21可以保持过去几分钟期间在游戏中发生的情况的记录。这允许导演回放在游戏中发生的事件，甚至从最初没有虚拟摄像机的角度来回放。导演还可以从物理摄像机(例如玩家P1、P2、...、PN的网络摄像机)接收媒体流。然后，导演可以在广播视频流的角落里添加在小窗口中显示玩家面部的真实视频。
另一个网络摄像头相关特征包括来自玩家的网络摄像头的视频流，以用于识别玩家的面部表情。然后，可以将玩家的面部表情反映在游戏中的角色的脸上。此特征允许导演例如在回放期间聚焦到角色的脸。为了实现该特征，GFP 10可以直接从玩家(图1中未示出)接收相应玩家的视频流。然后，导演可以(通过导演设备12)添加和/或修改GCS 20的游戏引擎21通过使用玩家的视频流呈现和发送到GFP 10的图形。作为具体示例，导演可以修改角色的面部表情以进行重放，使情境更有戏剧性。如果已知有儿童在观看游戏事件，则导演还可以能够审查一些暴力动作。导演还可以创建针对儿童的特定媒体流，例如，省略某些动作。
以下，描述由本公开提供的一些控制信道。一个或多个示例性控制信道可以以任何组合方式使用，以实现本公开的各种实施例。
例如，控制信道可以采取以下形式：
·用户设备2和在GCS 20内运行的web服务器22之间的WebSocket连接。此选项假定用户正在使用Web浏览器。
·Web实时通信(WebRTC)数据信道连接。此选项也假定用户正在使用Web浏览器。
·例如使用HTTP长轮询实现的双向超文本传输协议(HTTP)连接。此选项也假定用户使用Web浏览器。
·常规传输控制协议(TCP)、用户数据报文协议(UDP)或流控制传输协议(SCTP)连接。该替代方案通常可以由原生应用(即不基于web的应用)来使用。
在控制信道内使用的信令协议例如可以包括会话发起协议(SIP)、可扩展消息和呈现协议(XMPP)、HTTP或私有协议。
控制信道协议消息的有效载荷可以使用任何合适的格式，其示例包括JavaScript对象符号(JSON)和可扩展标记语言(XML)。为了简单起见，在说明书的剩余部分中，假设使用HTTP和JSON，但是已认识到可以替代地使用其他格式。
本发明提供至少以下控制信道：
·GFP/GCS信道，这是GFP 10和GCS 20之间的信道。GFP/GCS信道可以用于控制虚拟摄像机和图形引擎。
·CMx/GCS信道，这是虚拟摄像机设备11和GCS 20之间的信道。CMx/GCS通道可以用于控制虚拟摄像机。
·GFP/观看者信道，这是GFP 10(例如其导演设备12)和观看者Vx之间的信道。GFP/观看者信道可以用于控制观看者的基于本地/基于云的游戏引擎。GFP/观看者信道适用于在游戏引擎内跟随游戏的那些观看者。
·观看者/GFP信道，这是观看者和GFP 10(例如其导演设备12)之间的信道。观看者/GFP信道可以被观看者用于向GFP 10发送反馈和与GFP 10交互。
接下来给出可以包括在以上所例示的控制信道的控制信道消息中的数据。以下给出在控制信道消息中交换的数据的具体示例，但是应当注意，可以交换其他数据，并且本公开不限于以下示例。
GFP/GCS信道
·与添加、删除、改变虚拟摄像机有关的数据
·与设置虚拟摄像机的位置、方向和/或设置(如焦距、镜头等)相关的数据
·与其他呈现选项相关的数据，例如视频分辨率，呈现和编码帧速率，类型：2D、3D、高动态范围(HDR)、游戏时间(用于回放)等。HDR成像是在成像和摄影中使用的一组技术，用于再现比使用标准数字成像或照相技术所能实现的更大的亮度动态范围。
·与其他游戏选项相关的数据，例如要显示的图形等。如上所述，导演可以修改角色的面部表情以进行回放，使情境更有戏剧性。如果导演知道有儿童在观看事件，则导演还可以审查一些暴力动作。
以下给出将新的虚拟摄像机添加到游戏竞技场的控制信道消息的示例。该示例假设使用JSON作为有效载荷的格式，使用超文本传输协议(HTTP)作为控制信道协议，以及GCS20提供用于操纵虚拟摄像机的RESTful应用编程接口(API)。表示状态转移(REST)是万维网(WWW)的抽象，并且如果符合一些约束(包括例如客户端-服务器、无状态、可高速缓存的约束，这些都是本领域技术人员已知的)，web服务可以被表示为RESTful。
上述用于添加新的虚拟摄像机的控制信道消息的示例：
上述示例将具有用户指定标识符“John′s camera”的虚拟摄像机添加到游戏竞技场的三维坐标空间中的特定坐标(x，y，z)。添加的虚拟摄像机使用缩放等级3，指向水平轴上的30度方向，并且在竖直轴上向上倾斜10度。此外，在示例中指定了一些附加选项(帧率、编解码器、分辨率)。
GCS/GFP信道
·GFP 10可以接收媒体流、马赛克视频流、特殊图形表示、来自玩家的流等。
·通常，GCS 20以非常高的质量(原始或轻度压缩的视频)将虚拟摄像机的视频流发送到GFP 10。然而，如果GFP 10和GCS 20之间的网络带宽有限，也可以通过实时传输协议(RTP)发送常规压缩的视频。
CMx/GCS通道
在CMx(Cameraman-X)和GCS 20之间的控制信道上承载的消息中交换的数据可以包括但不限于：
·虚拟摄像机位置、方向和设置(焦距、镜头等)
·其他呈现选项(大小、呈现和编码帧率、类型：(2D、3D、HDR等))
GFP/观看者频道
在GFP/观看者控制信道消息中交换的数据可以包括但不限于：
·第一用例：使用GCS 20传播GFP设置：GFP 10控制GCS中的云呈现选项，并且GCS20将这些选项发送到本地游戏呈现引擎(GE)。
·第二用例：绕过GCS/Vx并在GFP 10和本地游戏引擎(即用户设备2)之间创建直接数据信道。
观看者/GFP信道
在控制信道消息中交换的数据可以包括但不限于：
·投票、评论等
以下举例说明一些控制逻辑。
添加/移除虚拟摄像机
为了添加和移除虚拟摄像机，游戏引擎21可以提供GFP 10可用来在游戏的游戏竞技场内添加和控制虚拟摄像机的API(参见例如图2的示例和相关文本)。当导演添加新的摄像机时，游戏引擎21发起新的视频流并开始将其发送给导演。视频流的参数在GFP/GCS控制信道上协商。
选择回放
GFP 10发送针对来自所选虚拟摄像机的视频流的具有选定时间和速度(例如可以是慢动作)的回放请求。GFP 10(例如，其导演设备12或虚拟摄像机设备11)可以预先或在回放期间即时地指定摄像机位置。然后，GCS 20创建GFP 10可以广播或提供由例如VSS 30进行广播的流。为此，GCS 20需要存储某一时间段期间的游戏状态，例如最后30秒，并且考虑GCS 20的的可用存储器、存储装置和其他容量限制，如果可能的话存储更多。
下面的示例假定GFP/GCS控制通道使用HTTP上的JSON作为协议，并且假定GCS向GFP提供RESTful API。该示例示出了请求从时刻456秒开始、0.2x倍速的5秒慢动作回放的控制信道消息可以是什么样子。
图3是示出了游戏事件的各个方面的序列图。具体地，图3是示出了提供用于广播的游戏事件的方面的序列图。
GCS 20(例如其游戏引擎21)可以向GFP 10(例如其虚拟摄像机设备11)提供(箭头100)游戏世界中的虚拟摄像机的特殊图形表示。在提供特殊图形表示之前，可以有从GFP10到GCS 20的针对这种表示的请求(未示出)。
GFP 10管理(101)虚拟摄像机，例如使用接收到的图形表示。已经给出了这种管理的示例，并且包括例如移除虚拟摄像机、添加虚拟摄像机、改变虚拟摄像机的设置等。
GFP 10可以确定，为了给接收游戏事件的广播的观看者创造更好的观看者体验，需要对现有虚拟摄像机进行新的设置或者添加新的虚拟摄像机。然后，为了实现这种愿望，GFP 10(例如其虚拟摄像机设备11)可以向GCS 20(例如其游戏引擎21)发送(箭头102)包括相关虚拟摄像机数据的控制消息。
作为响应，GCS 20呈现所请求的虚拟摄像机并开始向GFP 10发送媒体流。此外，GFP 10可以从玩家设备2接收(箭头104)媒体流。
GFP 10处理(箭头105)媒体流，以产生适于向观看者广播的游戏事件电影。
产生的游戏事件电影可以被提供(箭头106)到VSS 30，VSS 30向观看者设备3广播(箭头107)游戏事件电影。还可以想到，GFP 10处理(箭头108)针对观看者设备3的广播。
GFP 10可以从使用观看者设备3的观看者接收(箭头109)输入，例如投票给玩家礼物。
图4示出了在根据本公开的系统10中的方法的步骤的流程图。已描述的特征可以以不同的方式组合，以下给出其示例。
提供了方法40，其可以在用于处理与游戏云系统20提供的在线游戏相关的媒体流的系统10中执行。系统10可以例如包括已经例如结合图1描述的游戏电影制作。系统10包括至少一个节点11、12，例如一个或多个虚拟摄像机设备CM1、CM2、...、CMM和/或一个或多个导演设备12。
方法40包括向游戏云系统20发送41包括与至少一个虚拟摄像机相关的数据的消息。
方法40包括从游戏云系统20接收42由至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。
根据方法40，想制作与在线游戏相关的电影的用户可以使用虚拟摄像机设备CM1、CM2、...、CMM来发送包括与虚拟摄像机相关的数据的消息，消息数据定义新的虚拟摄像机。然后，作为响应，用户可以接收由所述消息定义的虚拟摄像机捕获的与游戏相关的媒体流。
在一个实施例中，系统10包括虚拟摄像机设备CM1、CM2、...、CMM。在其他实施例中，系统10包括一个或多个虚拟摄像机设备CM1、CM2、...、CMM和一个或多个导演设备12。
方法40能够改善观看者的体验，并且由于可以进行选择，例如导演或电影制作人通过发送与虚拟摄像机有关的数据来选择观看方向和位置，使得更容易跟踪游戏广播。
在一个实施例中，方法40包括：
-选择43至少一个第一媒体流中的一个或多个，以及
-编辑44至少一个第一媒体流中所选择的一个或多个，创建至少一个第二媒体流。
实现该实施例的系统10可以包括虚拟摄像机设备11和导演设备12，其中，发送41和接收42的步骤在虚拟摄像机设备11中执行，并且选择43和编辑44在导演设备12中执行。导演设备12可以从虚拟摄像机设备11接收所有第一媒体流，然后选择43第一媒体流中一个或多个，对其进行编辑44。通过配置导演设备12以某种方式处理第一媒体流(例如，基于诸如投票的观看者输入，和/或通过添加图形以突出显示媒体流中示出的对象)来将这种编辑44自动化，这仅是一些示例。在其他实施例中，这种编辑44包括在导演设备12中接收来自用户(导演)的输入并基于该输入执行编辑。例如，用户可以输入用于修改图形、添加事件等的一组指令。在另一实施例中，导演设备12和虚拟摄像机设备11是集成单元。
借助该方法，通过提供用于添加交互性特征、回放、慢动作等的装置，使得游戏事件呈现得更具吸引力。此外，方法40为所要广播的游戏电影的制作人提供了控制虚拟摄像机、添加事件、修改图形等的手段。观看者不再如现有技术那样只是看到每个单独玩家正在做或看什么，本公开使得能够用不同的摄像机角度等提供更好的视图、回放/慢动作，以便理解整个游戏进程并因此改善观看者体验。
在各种实施例中，编辑44包括以下一项或多项：修改图形，添加事件，添加事件的慢动作回放，添加以选定的时间和速度从选择的虚拟摄像机捕获的事件的重放，混合，切换，添加与在线游戏玩家相关的视频流，审查所述至少一个第一媒体流的部分。如上所述，该编辑动作可以基于用户输入来实现或者通过被编程到导演设备12中的某些动作来自动化。
在上述实施例的变型中，方法40包括提供45所创建的至少一个第二媒体流用于广播。系统10(例如导演设备12)可以向视频流服务30提供与由至少一个虚拟摄像机捕获的与在线游戏相关的一个或多个第一媒体流，和/或创建的至少一个第二媒体流。视频流服务30可以以任何已知的方式广播接收的媒体流。
在各种实施例中，方法40包括从游戏云系统20请求一个或多个附加的虚拟摄像机并接收相应的第一媒体流，和/或请求对现有虚拟摄像机的改变。
在各种实施例中，方法40包括从游戏云系统20接收配置的虚拟摄像机的图形表示25。
在上述实施例的变型中，方法40包括提供图形表示25作为用于从用户接收输入的接口。该实施例可以例如如参考图2所示和所描述的来实现。
在各种实施例中，至少一个第一媒体流包括捕获在线游戏的事件的至少一个虚拟摄像机信号。
在各种实施例中，与至少一个虚拟摄像机相关的数据包括以下各项中的一个或多个：虚拟摄像机的添加，虚拟摄像机的删除，虚拟摄像机的设置的改变，在线游戏内的虚拟摄像机的位置的设置，在线游戏内的虚拟摄像机的方向的设置，所请求事件的时间和回放速度的设置，虚拟摄像机的设置，焦距，镜头类型，第一媒体流的帧的大小，选择要或不要由游戏云系统20呈现的图形组件，呈现帧速率，编码帧速率，包括二维、三维或高动态范围在内的呈现类型。
图5示意性地示出了用于实现本公开的实施例的系统10，具体示出了装置11、12。系统10(例如如前所述的GFC)包括至少一个节点11、12，例如虚拟摄像机设备11和/或导演设备12。如前所述，系统10还可以包括附加的节点，并且还要注意，这些功能可以集成到单个节点中。在下文中，用单个节点描述和示出系统10的特征，但是应当理解，系统10提供的各种特征和功能可以分布在系统10的不同节点11、12上。
节点11、12包括至少一个处理器60，该处理器包括能够执行存储在存储器61中的软件指令(因而可以是计算机程序产品61)的中央处理单元(CPU)、多处理器、微控制器、数字信号处理器(DSP)、专用集成电路等中的一个或多个的任何组合。处理器60可以被配置为执行例如结合图4所描述的方法的各种实施例中的任一个。
节点11、12包括一个或多个输入/输出装置63(在图5中表示为In/Out)。当系统10包括多个节点时，例如一个虚拟摄像机设备11和一个导演设备12，这两个节点包括用于相互通信的装置。该装置可以例如包括接口、协议、线缆等。节点11、12还可以包括用于与游戏云系统20的游戏引擎21通信的接口。附加地，输入装置可以包括用于从用户接收输入的装置，例如，键盘、鼠标、触摸板、轨迹点等的形式。
节点11、12还可以包括显示器64，显示器64可以包括图形用户界面。显示器还可以是用户输入装置，例如触摸屏。显示器64上可以显示用户界面，例如参考图2描述的用户界面。
节点11、12还可以包括虚拟摄像机管理装置70，所述虚拟摄像机管理装置70可以例如包括用于提供消息的装置，该消息包括与要以某种方式呈现、移除或改变的虚拟摄像机相关的数据。虚拟摄像机管理装置70还可以包括用于以上述方式编辑接收到的媒体流的装置，例如处理电路。
存储器61可以例如是随机存取存储器(RAM)、只读存储器(ROM)、闪存、磁带、压缩盘(CD)-ROM、数字通用盘(DVD)、蓝光盘等的任何组合。存储器61还可以包括持久存储设备，其例如可以是磁存储器、光存储器、固态存储器或甚至远程安装存储器中的任意单独一个或组合。
还提供用于在处理器60中软件指令的执行期间读取和/或存储数据的数据存储器(未示出)。数据存储器可以是随机访问存储器(RAM)和只读存储器(ROM)的任意组合。
系统10可以被实现为单个节点或多个节点，并且系统10可以使用功能模块和/或软件指令(例如在处理器中执行的计算机程序)来实现，和/或可以使用硬件(例如专用集成电路、现场可编程门阵列、离散逻辑组件等)来实现。
提供了一种用于处理与由游戏云系统20提供的在线游戏相关的媒体流的系统10，系统10包括至少一个节点11、12。系统10被配置为：
-向游戏云系统20发送包括与至少一个虚拟摄像机相关的数据的消息，以及
-从游戏云系统20接收由至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。
系统10被配置为：例如，通过包括一个或多个处理器和存储器，执行参考图4在各种实施例中描述的方法40，其中，存储器包含可由处理器执行，从而系统10可操作为执行所述方法的指令。
在一个实施例中，系统10被配置为选择至少一个第一媒体流中的一个或多个，并编辑至少第一媒体流中所选择的一个或多个，从而创建至少一个第二媒体流。
在上述实施例的变型中，系统10被配置为通过执行以下操作中的一个或多个来进行编辑：修改图形，添加事件，添加事件的慢动作回放，添加以选定的时间和速度从选择的虚拟摄像机捕获的事件的重放，混合，切换，添加与在线游戏玩家相关的视频流，审查所述至少一个第一媒体流的部分。
在一个实施例中，系统10被配置为提供所创建的至少一个第二媒体流用于广播。
在一个实施例中，系统10被配置为从游戏云系统20请求一个或多个附加的虚拟摄像机和接收相应的第一媒体流，和/或请求对现有虚拟摄像机的改变。
在一个实施例中，系统10被配置为从游戏云系统20接收配置的虚拟摄像机的图形表示25。
在上述实施例的变型中，系统10被配置为提供图形表示25作为用于从用户接收输入的接口。
在一个实施例中，至少一个第一媒体流包括捕获在线游戏的事件的至少一个虚拟摄像机信号。
在各种实施例中，与至少一个虚拟摄像机相关的数据包括以下各项中的一个或多个：虚拟摄像机的添加，虚拟摄像机的删除，虚拟摄像机的设置的改变，在线游戏内的虚拟摄像机的位置的设置，在线游戏内的虚拟摄像机的方向的设置，所请求事件的时间和回放速度的设置，虚拟摄像机的设置，焦距，镜头类型，第一媒体流的帧的大小，选择要或不要由游戏云系统20呈现的图形组件，呈现帧速率，编码帧速率，包括二维、三维或高动态范围在内的呈现类型。
本公开还包括用于实现上述方法的计算机程序62。计算机程序62可以用在系统10的至少一个节点11、12中，用于处理与由游戏云系统20提供的在线游戏相关的媒体流，计算机程序62包括计算机程序代码，所述计算机程序代码当在至少一个节点11、12的至少一个处理器60上执行时使得节点11、12执行如例如结合图4所描述的方法40。
本公开还包括计算机程序产品61，所述计算机程序产品81包括上述计算机程序62和有存储计算机程序62的计算机可读装置。
在一个方面中，本公开提供了一种用于处理与由游戏云系统20提供的在线游戏相关的媒体流的系统10(包括一个或多个节点)。系统10包括至少一个节点11、12，所述至少一个节点包括用于向游戏云系统20发送包括与至少一个虚拟摄像机有关的数据的消息的第一装置。这种第一装置可以例如通过虚拟摄像机管理装置70和/或针对游戏云系统20的接口装置(例如输入/输出装置63)来实现。这种第一装置可以包括各种处理电路，例如，用于发送消息的处理电路。
系统10包括用于从游戏云系统20接收由至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流的第二装置。这种第二装置可以通过接口装置(例如输入/输出装置63)和/或通过用于接收至少一个这样的第一媒体流的处理电路来实现。
系统10还可以包括用于选择至少一个第一媒体流中的一个或多个的第三装置。这种第三装置可以例如通过适于选择的处理电路(例如虚拟摄像机管理装置70)来实现。在其他情况下，这种第三装置可以包括适于接收和处理用户输入的处理电路，其中，用户输入与对特定第一媒体流的选择相关。
系统10还可以包括用于编辑至少一个第一媒体流中所选择的一个或多个，创建至少一个第二媒体流的第四装置。这种第四装置可以例如通过适于编辑的处理电路(例如虚拟摄像机管理装置70)来实现。
系统10可以还包括用于实现本公开的各种实施例的附加装置。
例如，如所述，本公开提供新的控制信道和架构，其使得直播游戏流事件的专业制作得到实现。由本公开实现和提供的虚拟摄像机允许电影导演看到他想要的，以他想要的方式拍摄，并且因此创建他自己的节目，专注在游戏的不同部分并改变呈现设置。本公开还实现了诸如回放、慢动作、游戏图形的操纵和观看者交互的附加特征。所描述的控制信道的引入和使用允许实现这些新特征。
图6示出了在根据本公开的游戏引擎21中的方法的步骤的流程图。已描述的特征可以以不同的方式组合，以下给出其示例。
方法50可以在游戏引擎21中执行，用于提供与在线游戏相关的媒体流。方法50包括从节点11、12接收51包括与至少一个虚拟摄像机相关的数据的消息。
方法50包括基于接收到的数据提供52至少一个虚拟摄像机。
方法50包括呈现53由至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流。
方法50包括向节点11、12发送54至少一个第一媒体流。
在一个实施例中，方法50包括向节点11、12提供配置的虚拟摄像机的图形表示25。
图7示意性地示出了用于实现本公开的实施例的游戏引擎21、22。游戏引擎21、22可以例如包括服务器或其他处理设备。因此，游戏引擎21被提供用于提供与在线游戏相关的媒体流。游戏引擎21被配置为：
-从节点11、12接收包括与至少一个虚拟摄像机相关的数据的消息，
-基于接收到的数据提供至少一个虚拟摄像机，
-呈现由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流，以及
-向节点11、12发送至少一个第一媒体流。
游戏引擎21被配置为：例如，通过包括一个或多个处理器和存储器，执行参考图6在各种实施例中描述的方法50，其中，存储器包含可由处理器执行，从而游戏引擎21可操作为执行所述方法的指令。
在实施例中，游戏引擎21被配置为向节点11、12提供配置的虚拟摄像机的图形表示25。
游戏引擎21包括至少一个处理器80，所述处理器包括能够执行存储在存储器81中的软件指令(因而可以是计算机程序产品81)的中央处理单元(CPU)、多处理器、微控制器、数字信号处理器(DSP)、专用集成电路等中的一个或多个的任何组合。处理器80可以被配置为执行例如结合图6所描述的方法的各种实施例中的任一个。
存储器81可以例如是随机存取存储器(RAM)、只读存储器(ROM)、闪存、磁带、压缩盘(CD)-ROM、数字通用盘(DVD)、蓝光盘等的任何组合。存储器61还可以包括持久存储设备，其例如可以是磁存储器、光存储器、固态存储器或甚至远程安装存储器中的任意单独一个或组合。
还提供用于在处理器80中软件指令的执行期间读取和/或存储数据的数据存储器(未示出)。数据存储器可以是随机访问存储器(RAM)和只读存储器(ROM)的任意组合。
游戏引擎21包括一个或多个输入/输出装置83(在图7中表示为In/Out)。该装置可以例如包括接口、协议、线缆等。游戏引擎21还可以包括用于与游戏云系统20的一个或多个节点11、12通信的接口。附加地，输入装置可以包括用于从用户接收输入的装置，例如，键盘、鼠标、触摸板、轨迹点等的形式。
游戏引擎21还可以包括虚拟摄像机管理器85，所述虚拟摄像机管理器85可以例如包括用于根据接收到的数据呈现虚拟摄像机和/或移除现有的虚拟摄像机，或根据接收到的数据改变虚拟摄像机的设置的装置，例如处理电路。
游戏引擎21还可以包括用于呈现的图形处理单元(GPU)84，也称为图形引擎。也就是说，通过计算机程序从所谓场景文件中的一个或多个2D或3D模型生成图像的处理。这种模型的结果也可以称为呈现。使用实时应用和摄像机规格发送的当前环境的动画参数和描述来呈现场景。摄像机规格基于对当前事件的描述加上动画的现状来产生。GPU 84的功能和实现是已知的，不再更详细地描述。
游戏引擎21还可以包括用于向玩家提供游戏的附加的装置，该装置是已知的，这里不再描述。
本公开还包括用于实现上述方法的计算机程序82。计算机程序82可以在游戏引擎21中使用，用于提供与在线游戏相关的媒体流。计算机程序82包括计算机程序代码，所述计算机程序代码当在游戏引擎21的至少一个处理器80上执行时，使得游戏引擎21执行如上结合图6所述的方法50。
本公开还包括计算机程序产品81，所述计算机程序产品81包括上述计算机程序82和有存储计算机程序82的计算机可读装置。
在一方面中，本公开提供了一种用于提供与在线游戏相关的媒体流的游戏引擎21。游戏引擎21包括用于从节点11、12接收包括与至少一个虚拟摄像机相关的数据的消息的第一装置。这种第一装置可以例如通过接口装置(例如输入/输出装置83)来实现。这种第一装置可以包括各种处理电路，例如，用于接收的处理电路。
游戏引擎21可以包括用于基于接收到的数据提供至少一个虚拟摄像机的第二装置。这种第二装置可以例如包括虚拟摄像机管理器85，所述虚拟摄像机管理器85例如包括适于通过使用存储在存储器中的程序代码、基于接收到的数据来提供这种虚拟摄像机的处理电路。
游戏引擎21可以包括用于呈现由至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流的第三装置。这种第三装置可以例如通过图形处理单元84、和/或虚拟摄像机管理器85、和/或适于通过使用存储在存储器中的程序代码来执行这样呈现的处理电路来实现。
游戏引擎21可以包括用于向节点11、12发送至少一个第一媒体流的第四装置。这种第四装置可以例如通过用于发送这种媒体流的接口装置(例如输入/输出装置83)和/或处理电路来实现。
游戏引擎21可以包括用于向节点11、12提供配置的虚拟摄像机的图形表示25的第五装置。这种第五装置同样可以包括虚拟摄像机管理器85，所述虚拟摄像机管理器85例如包括适于通过使用存储在存储器中的程序代码来提供这种图形表示的处理电路和/或用于与节点11、12通信的输入/输出装置83。
游戏引擎21还可以包括用于实现本公开的各种实施例的附加装置。
上文中已参考一些实施例主要地描述了本发明。然而，本领域技术人员应理解，本文公开之外的在如由所附权利要求限定的本发明的范围之内的其它实施例同样是可能的。

Claims (26)

1.一种在用于处理与由游戏云系统(20)提供的在线游戏相关的媒体流的系统(10)中执行的方法(40)，所述系统(10)包括至少一个节点(11，12)，所述方法(40)包括：
向所述游戏云系统(20)发送(41)包括与至少一个虚拟摄像机相关的数据的消息，以及
从所述游戏云系统(20)接收(42)由所述至少一个虚拟摄像机捕获的与所述在线游戏相关的至少一个第一媒体流。
2.根据权利要求1所述的方法(40)，包括：
选择(43)所述至少一个第一媒体流中的一个或多个，以及
编辑(44)所述至少一个第一媒体流中所选择的一个或多个，以创建至少一个第二媒体流。
3.如权利要求2所述的方法(40)，其中，所述编辑(44)包括以下一项或多项：修改图形，添加事件，添加事件的慢动作回放，添加以选定的时间和速度从选择的虚拟摄像机捕获的事件的重放，混合，切换，添加与在线游戏玩家相关的视频流，审查所述至少一个第一媒体流的部分。
4.根据权利要求2或3所述的方法(40)，包括：
提供(45)所创建的至少一个第二媒体流用于广播。
5.根据前述权利要求中任一项所述的方法(40)，包括从所述游戏云系统(20)请求一个或多个附加的虚拟摄像机和接收相应的第一媒体流，和/或请求对现有虚拟摄像机的改变。
6.根据前述权利要求中任一项所述的方法(40)，包括从所述游戏云系统(20)接收配置的虚拟摄像机的图形表示(25)。
7.根据权利要求6所述的方法(40)，包括提供所述图形表示(25)作为用于从用户接收输入的接口。
8.根据前述权利要求中任一项所述的方法(40)，其中，所述至少一个第一媒体流包括捕获所述在线游戏的事件的至少一个虚拟摄像机信号。
9.根据前述权利要求中任一项所述的方法(40)，其中，与所述至少一个虚拟摄像机相关的数据包括以下一项或多项：虚拟摄像机的添加，虚拟摄像机的删除，虚拟摄像机的设置的改变，在线游戏内的虚拟摄像机的位置的设置，在线游戏内的虚拟摄像机的方向的设置，所请求事件的时间和回放速度的设置，虚拟摄像机的设置，焦距，镜头类型，第一媒体流的帧的大小，选择要或不要由所述游戏云系统(20)呈现的图形组件，呈现帧速率，编码帧速率，包括二维、三维或高动态范围在内的呈现类型。
10.一种用于处理与由游戏云系统(20)提供的在线游戏相关的媒体流的系统(10)，所述系统(10)包括至少一个节点(11，12)并且被配置为：
向所述游戏云系统(20)发送包括与至少一个虚拟摄像机相关的数据的消息，以及
从所述游戏云系统(20)接收由所述至少一个虚拟摄像机捕获的与所述在线游戏相关的至少一个第一媒体流。
11.根据权利要求10所述的系统(10)，被配置为选择所述至少一个第一媒体流中的一个或多个，以及编辑所述至少一个第一媒体流中所选择的一个或多个，以创建至少一个第二媒体流。
12.根据权利要求11所述的系统(10)，其中，所述系统(10)被配置为通过执行以下各项中的一个或多个来进行编辑：修改图形，添加事件，添加事件的慢动作回放，添加以选定的时间和速度从选择的虚拟摄像机捕获的事件的重放，混合，切换，添加与在线游戏玩家相关的视频流，审查所述至少一个第一媒体流的部分。
13.根据权利要求12所述的系统(10)，被配置为提供所创建的至少一个第二媒体流用于广播。
14.根据权利要求10至13中任一项所述的系统(10)，被配置为从所述游戏云系统(20)请求一个或多个附加的虚拟摄像机并接收相应的第一媒体流，和/或请求对现有虚拟摄像机的改变。
15.根据权利要求10至14中任一项所述的系统(10)，被配置为从所述游戏云系统(20)接收配置的虚拟摄像机的图形表示(25)。
16.根据权利要求15所述的系统(10)，被配置为提供所述图形表示(25)作为用于从用户接收输入的接口。
17.根据权利要求10至16中任一项所述的系统(10)，其中，所述至少一个第一媒体流包括捕获所述在线游戏的事件的至少一个虚拟摄像机信号。
18.根据权利要求10至17中任一项所述的系统(10)，其中，与所述至少一个虚拟摄像机相关的数据包括以下一项或多项：虚拟摄像机的添加，虚拟摄像机的删除，虚拟摄像机的设置的改变，在线游戏内的虚拟摄像机的位置的设置，在线游戏内的虚拟摄像机的方向的设置，所请求事件的时间和回放速度的设置，虚拟摄像机的设置，焦距，镜头类型，第一媒体流的帧的大小，选择要或不要由所述游戏云系统(20)呈现的图形组件，呈现帧速率，编码帧速率，包括二维、三维或高动态范围在内的呈现类型。
19.一种用于系统(10)的计算机程序(62)，所述系统(10)包括至少一个节点(11，12)，用于处理与由游戏云系统(20)提供的在线游戏相关的媒体流，所述计算机程序(62)包括计算机程序代码，所述计算机程序代码当在所述系统(10)的至少一个处理器上执行时使得所述系统(10)执行根据权利要求1-9中任一项所述的方法(40)。
20.一种计算机程序产品(61)，包括根据权利要求19所述的计算机程序(62)和存储有所述计算机程序(62)的计算机可读装置。
21.一种在用于提供与在线游戏相关的媒体流的游戏引擎(21)中执行的方法(50)，所述方法(50)包括：
从节点(11，12)接收(51)包括与至少一个虚拟摄像机相关的数据的消息，
基于接收到的数据提供(52)至少一个虚拟摄像机，
呈现(53)由所述至少一个虚拟摄像机捕获的与所述在线游戏相关的至少一个第一媒体流，以及
向节点(11，12)发送(54)所述至少一个第一媒体流。
22.根据权利要求21所述的方法(50)，包括向所述节点(11，12)提供配置的虚拟摄像机的图形表示(25)。
23.一种用于提供与在线游戏相关的媒体流的游戏引擎(21)，所述游戏引擎(21)被配置为：
从节点(11，12)接收包括与至少一个虚拟摄像机相关的数据的消息，
-基于接收到的数据提供至少一个虚拟摄像机，
-呈现由所述至少一个虚拟摄像机捕获的与在线游戏相关的至少一个第一媒体流，以及
向所述节点(11，12)发送所述至少一个第一媒体流。
24.根据权利要求23所述的游戏引擎(21)，被配置为向所述节点(11，12)提供配置的虚拟摄像机的图形表示(25)。
25.一种用于游戏引擎(21)的计算机程序(82)，所述游戏引擎(21)用于提供与在线游戏相关的媒体流，所述计算机程序(82)包括计算机程序代码，所述计算机程序代码当在所述游戏引擎(21)的至少一个处理器上执行时使得所述游戏引擎(21)执行根据权利要求21至22中任一项所述的方法(50)。
26.一种计算机程序产品(81)，包括根据权利要求25所述的计算机程序(82)和存储有所述计算机程序(82)的计算机可读装置。
CN201480082047.5A 2014-09-24 2014-09-24 用于处理与在线游戏相关的媒体流的方法、系统和节点 Pending CN107078996A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/SE2014/051095 WO2016048204A1 (en) 2014-09-24 2014-09-24 Methods, system and nodes for handling media streams relating to an online game

Publications (1)

Publication Number Publication Date
CN107078996A true CN107078996A (zh) 2017-08-18

Family

ID=51690425

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480082047.5A Pending CN107078996A (zh) 2014-09-24 2014-09-24 用于处理与在线游戏相关的媒体流的方法、系统和节点

Country Status (3)

Country Link
US (1) US20170282075A1 (zh)
CN (1) CN107078996A (zh)
WO (1) WO2016048204A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108632633A (zh) * 2018-04-28 2018-10-09 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN108632632A (zh) * 2018-04-28 2018-10-09 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN110719532A (zh) * 2018-02-23 2020-01-21 索尼互动娱乐欧洲有限公司 映射虚拟环境的装置和方法
CN110898427A (zh) * 2019-11-26 2020-03-24 上海米哈游网络科技股份有限公司 一种游戏回放方法、装置、电子设备及存储介质
CN112354177A (zh) * 2020-09-30 2021-02-12 江苏视博云信息技术有限公司 基于webrtc的云游戏即时启动方法、装置及系统
CN112843733A (zh) * 2020-12-31 2021-05-28 上海米哈游天命科技有限公司 拍摄图像的方法、装置、电子设备及存储介质
CN112843695A (zh) * 2020-12-31 2021-05-28 上海米哈游天命科技有限公司 拍摄图像的方法、装置、电子设备及存储介质

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10403022B1 (en) * 2015-05-06 2019-09-03 Amazon Technologies, Inc. Rendering of a virtual environment
US10506470B2 (en) * 2015-06-09 2019-12-10 Sony Corporation Control device, base station, terminal device, and control method
US10549204B2 (en) * 2015-09-30 2020-02-04 Sony Interactive Entertainment America Llc Systems and methods for providing augmented data-feed for game play re-creation and dynamic replay entry points
US10237319B2 (en) 2015-10-14 2019-03-19 Google Llc Capture, recording, and streaming of media content
US10449448B2 (en) * 2015-10-15 2019-10-22 Sony Interactive Entertainment America Llc Method for improving game streaming performance in the cloud
US10623525B2 (en) * 2016-06-23 2020-04-14 DISH Technologies L.L.C. Methods, systems, and apparatus for presenting participant information associated with a media stream
US10974140B1 (en) 2016-08-10 2021-04-13 Amazon Technologies, Inc. Streaming video game statistics
US10389935B2 (en) * 2016-12-13 2019-08-20 Canon Kabushiki Kaisha Method, system and apparatus for configuring a virtual camera
US10471360B2 (en) * 2017-03-06 2019-11-12 Sony Interactive Entertainment LLC User-driven spectator channel for live game play in multi-player games
US20190019376A1 (en) * 2017-07-11 2019-01-17 Versaci Interactive Gaming, Inc. Gaming methods and systems
CN108156414B (zh) * 2017-12-27 2020-10-02 惠州Tcl家电集团有限公司 WebRTC数据编码方法、设备及计算机可读存储介质
US10818142B2 (en) 2018-02-28 2020-10-27 Sony Interactive Entertainment LLC Creation of winner tournaments with fandom influence
US10765938B2 (en) * 2018-02-28 2020-09-08 Sony Interactive Entertainment LLC De-interleaving gameplay data
US10792576B2 (en) 2018-02-28 2020-10-06 Sony Interactive Entertainment LLC Player to spectator handoff and other spectator controls
US11065548B2 (en) 2018-02-28 2021-07-20 Sony Interactive Entertainment LLC Statistical driven tournaments
US10953335B2 (en) 2018-02-28 2021-03-23 Sony Interactive Entertainment Inc. Online tournament integration
US10792577B2 (en) 2018-02-28 2020-10-06 Sony Interactive Entertainment LLC Discovery and detection of events in interactive content
US10765957B2 (en) 2018-02-28 2020-09-08 Sony Interactive Entertainment LLC Integrating commentary content and gameplay content over a multi-user platform
US10814228B2 (en) 2018-02-28 2020-10-27 Sony Interactive Entertainment LLC Statistically defined game channels
US10953322B2 (en) 2018-02-28 2021-03-23 Sony Interactive Entertainment LLC Scaled VR engagement and views in an e-sports event
GB2578592B (en) * 2018-10-31 2023-07-05 Sony Interactive Entertainment Inc Apparatus and method of video playback
US10688390B2 (en) 2018-11-05 2020-06-23 Sony Interactive Entertainment LLC Crowd-sourced cloud gaming using peer-to-peer streaming
JP6726322B1 (ja) * 2019-01-11 2020-07-22 株式会社コロプラ ゲームプログラム、方法、および情報処理装置
JP7305599B2 (ja) * 2019-01-11 2023-07-10 株式会社コロプラ プログラム
US10974153B2 (en) * 2019-01-17 2021-04-13 Disney Enterprises, Inc. Streamable compressed geometry for live broadcast
JP6726345B1 (ja) * 2019-08-30 2020-07-22 株式会社コロプラ プログラム、方法、および端末装置
CN111432276A (zh) * 2020-03-27 2020-07-17 北京奇艺世纪科技有限公司 一种游戏引擎、互动视频交互方法和电子设备
CN111787111B (zh) * 2020-07-03 2023-08-04 珠海金山数字网络科技有限公司 一种基于云游戏的数据传输方法及装置
JP2022025468A (ja) * 2020-07-29 2022-02-10 株式会社AniCast RM アニメーション制作システム
CN111800521A (zh) * 2020-09-08 2020-10-20 武汉中科通达高新技术股份有限公司 一种前端设备控制方法及装置
EP4271495A1 (en) * 2020-12-31 2023-11-08 Sony Interactive Entertainment Inc. Data display overlays for esport streams
US11617946B1 (en) 2021-06-29 2023-04-04 Amazon Technologies, Inc. Video game streaming with dynamic range conversion
US11666823B1 (en) 2021-06-29 2023-06-06 Amazon Technologies, Inc. Video game streaming with dynamic range conversion
US11612812B1 (en) * 2021-06-29 2023-03-28 Amazon Technologies, Inc. Video game streaming with dynamic range conversion
US11638872B1 (en) * 2021-10-18 2023-05-02 Electronic Arts Inc. Videographer mode in online games

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101790405A (zh) * 2007-09-14 2010-07-28 索尼爱立信移动通讯有限公司 用于更新移动设备上的多人游戏会话的方法
CN101889274A (zh) * 2007-12-05 2010-11-17 生命力有限公司 使用流动互动式视频来主机代管和广播虚拟事件
CN101961554A (zh) * 2009-07-21 2011-02-02 科乐美数码娱乐株式会社 视频游戏装置、游戏图像显示方法、信息存储介质和网络游戏系统
CN102458594A (zh) * 2009-04-07 2012-05-16 美国索尼电脑娱乐公司 模拟虚拟照相机的性能
US20120120201A1 (en) * 2010-07-26 2012-05-17 Matthew Ward Method of integrating ad hoc camera networks in interactive mesh systems
CN103189112A (zh) * 2010-07-01 2013-07-03 环球网络游戏服务公司 具有真实数据的在线游戏
CN103200202A (zh) * 2013-04-22 2013-07-10 四三九九网络股份有限公司 一种结合邮件订阅广播活动的方法和装置
US20140038708A1 (en) * 2012-07-31 2014-02-06 Cbs Interactive Inc. Virtual viewpoint management system
US20140113718A1 (en) * 2012-04-26 2014-04-24 Riot Games, Inc. Systems and methods that enable a spectator's experience for online active games
CN103826711A (zh) * 2011-07-22 2014-05-28 格里奇索弗特公司 用于游戏环境的游戏辅助系统
US20140274387A1 (en) * 2013-03-15 2014-09-18 Electronic Arts, Inc. Systems and methods for indicating events in game video

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9266017B1 (en) * 2008-12-03 2016-02-23 Electronic Arts Inc. Virtual playbook with user controls
US20140018157A1 (en) * 2012-07-13 2014-01-16 Mark Kern Reward-based features for videogame observers
JP6319952B2 (ja) * 2013-05-31 2018-05-09 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
US9392248B2 (en) * 2013-06-11 2016-07-12 Google Inc. Dynamic POV composite 3D video system
JP2015026172A (ja) * 2013-07-25 2015-02-05 株式会社スクウェア・エニックス 画像処理プログラムおよび画像処理装置
US9626737B2 (en) * 2013-11-15 2017-04-18 Canon Information And Imaging Solutions, Inc. Devices, systems, and methods for examining the interactions of objects in an enhanced scene
US9849384B1 (en) * 2014-12-16 2017-12-26 Amazon Technologies, Inc. Viewport selection system

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101790405A (zh) * 2007-09-14 2010-07-28 索尼爱立信移动通讯有限公司 用于更新移动设备上的多人游戏会话的方法
CN101889274A (zh) * 2007-12-05 2010-11-17 生命力有限公司 使用流动互动式视频来主机代管和广播虚拟事件
CN102458594A (zh) * 2009-04-07 2012-05-16 美国索尼电脑娱乐公司 模拟虚拟照相机的性能
CN101961554A (zh) * 2009-07-21 2011-02-02 科乐美数码娱乐株式会社 视频游戏装置、游戏图像显示方法、信息存储介质和网络游戏系统
CN103189112A (zh) * 2010-07-01 2013-07-03 环球网络游戏服务公司 具有真实数据的在线游戏
US20120120201A1 (en) * 2010-07-26 2012-05-17 Matthew Ward Method of integrating ad hoc camera networks in interactive mesh systems
CN103826711A (zh) * 2011-07-22 2014-05-28 格里奇索弗特公司 用于游戏环境的游戏辅助系统
US20140113718A1 (en) * 2012-04-26 2014-04-24 Riot Games, Inc. Systems and methods that enable a spectator's experience for online active games
US20140038708A1 (en) * 2012-07-31 2014-02-06 Cbs Interactive Inc. Virtual viewpoint management system
US20140274387A1 (en) * 2013-03-15 2014-09-18 Electronic Arts, Inc. Systems and methods for indicating events in game video
CN103200202A (zh) * 2013-04-22 2013-07-10 四三九九网络股份有限公司 一种结合邮件订阅广播活动的方法和装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110719532A (zh) * 2018-02-23 2020-01-21 索尼互动娱乐欧洲有限公司 映射虚拟环境的装置和方法
CN110719532B (zh) * 2018-02-23 2023-10-31 索尼互动娱乐欧洲有限公司 映射虚拟环境的装置和方法
CN108632633A (zh) * 2018-04-28 2018-10-09 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN108632632A (zh) * 2018-04-28 2018-10-09 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN108632633B (zh) * 2018-04-28 2021-08-10 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN108632632B (zh) * 2018-04-28 2021-12-10 网易（杭州）网络有限公司 一种网络直播的数据处理方法和装置
CN110898427A (zh) * 2019-11-26 2020-03-24 上海米哈游网络科技股份有限公司 一种游戏回放方法、装置、电子设备及存储介质
CN110898427B (zh) * 2019-11-26 2023-11-03 上海米哈游网络科技股份有限公司 一种游戏回放方法、装置、电子设备及存储介质
CN112354177A (zh) * 2020-09-30 2021-02-12 江苏视博云信息技术有限公司 基于webrtc的云游戏即时启动方法、装置及系统
CN112843733A (zh) * 2020-12-31 2021-05-28 上海米哈游天命科技有限公司 拍摄图像的方法、装置、电子设备及存储介质
CN112843695A (zh) * 2020-12-31 2021-05-28 上海米哈游天命科技有限公司 拍摄图像的方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2016048204A1 (en) 2016-03-31
US20170282075A1 (en) 2017-10-05

Similar Documents

Publication Publication Date Title
CN107078996A (zh) 用于处理与在线游戏相关的媒体流的方法、系统和节点
US9573062B1 (en) Methods and systems for virtual reality streaming and replay of computer video games
US9782678B2 (en) Methods and systems for computer video game streaming, highlight, and replay
US10673918B2 (en) System and method for providing a real-time three-dimensional digital impact virtual audience
JP7135141B2 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
CN103886009B (zh) 基于所记录的游戏玩法自动产生为云游戏建议的小游戏
KR101604250B1 (ko) 게임 동영상 추천 서비스 제공 방법
CN108986192B (zh) 用于直播的数据处理方法及装置
US20080268961A1 (en) Method of creating video in a virtual world and method of distributing and using same
WO2020022405A1 (ja) ３次元コンテンツ配信システム、３次元コンテンツ配信方法、コンピュータプログラム
US11399053B2 (en) System and method for providing a real-time digital virtual audience
WO2018063957A1 (en) Methods and systems for virtual reality streaming and replay of computer video games
KR20210084248A (ko) Vr 컨텐츠 중계 플랫폼 제공 방법 및 그 장치
WO2018106461A1 (en) Methods and systems for computer video game streaming, highlight, and replay
US11102265B2 (en) System and method for providing a real-time digital virtual audience
AU2015398537B2 (en) Video editor servers, video editing methods, client devices, and methods for controlling a client device
KR101153952B1 (ko) 애니메이션 액션 체험 컨텐츠 서비스 시스템 및 방법
US11895164B1 (en) Digital automation of virtual events
JP6578079B1 (ja) 端末、サーバおよびプログラム
KR101743874B1 (ko) 복수의 공연객체들의 협업을 이용한 동영상 컨텐츠 생성 시스템 및 방법
Whitford Ambisonic-centred location sound recording-reinvigorating the Observational Documentary genre?
Cha A Study on the Technology and the Case of Virtual Reality Image Contents Creation
CN114172953A (zh) 基于云计算的mr混合现实景区的云导览方法
Ursu et al. Enhancing Social Communication and Belonging by Integrating TV Narrativity and Game-Play
Cardinal Entertainment Technology in the Internet Age: 2014 Recap

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170818