CN117677429A - 用于云游戏的直通装置及用于处理的方法 - Google Patents

Abstract

提供用于处理通过网络从云游戏系统流式传输的视频游戏的方法及系统。所述方法包括通过与经由直通装置连接到显示屏幕的流式传输装置相关联的用户界面来接收针对游戏会话的选择视频游戏的指示。所述方法包括从所述直通装置的游戏流式传输逻辑接收所述游戏会话为活动的信号。在一个实施例中，所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供所述显示屏幕渲染，并且在所述云游戏系统执行所述视频游戏时由所述游戏流式传输逻辑接收用户输入以驱动所述视频游戏的交互性。

Description

用于云游戏的直通装置及用于处理的方法

1.技术领域

本公开总体上涉及流式传输视频游戏，且更特定来说涉及用于处理通过网络从云游戏系统流式传输的视频游戏的方法及系统。

背景技术

2.相关技术描述

多年来，视频游戏行业经历了许多改变。特定来说，与云游戏相关的技术正在改进并改变视频游戏的播放、分发及销售的方式。现今，云游戏系统允许玩家通过网络来访问及玩视频游戏，而不必将视频游戏下载到任何游戏控制台或装置上。与视频游戏在玩家的视频游戏控制台上本地地运行的传统游戏方式相反，云游戏系统不需要昂贵的视频游戏控制台或功能强大的计算机来执行视频游戏。而是，云游戏系统可以在远程服务器上进行视频游戏，并将所述视频游戏直接流式传输到玩家的装置上。为此，开发人员一直在寻求开发能够改进云游戏的复杂操作的方法。

视频游戏行业的一个日益增长的趋势是改进并开发将改进云游戏系统的独特方法，并为玩家提供访问云游戏的有效方式。随着诸如AppleTM TV、RokuTM流式传输媒体播放器、AmazonTM Fire TV Stick、GoogleTM ChromecastTM等第三方流式传输装置的流行，流式传输装置可以提供对各种媒体内容的访问，然而，流式传输装置可能不支持并促进云游戏。例如，消费者可以使用其RokuTM流式传输媒体播放器来流式传输各种媒体内容，并访问有限数目的视频游戏。不幸的是，RokuTM流式传输媒体播放器及其他流式传输装置可能无法支持需要非常低等待时间的视频解码及高处理能力来对视频游戏流进行有效解码的云游戏。由于传统流式传输装置具有有限处理能力，所以流式传输装置不能对从所述云游戏系统传输的高质量视频游戏流进行有效解码。作为结果，对于可能希望通过其流式传输装置从云游戏系统访问视频游戏的消费者来说，云游戏可能是不可访问的。

正是在此背景下，产生了本公开的实施方式。

发明内容

本公开的实施方式包括与处理通过网络从云游戏系统流式传输的视频游戏相关的方法、系统及装置。在一个实施例中，直通装置可以与用户的流式传输装置(例如，AppleTM TV、RokuTM流式传输媒体播放器、AmazonTM Fire TV Stick、GoogleTMChromecastTM等)集成，以向所述用户提供对所述云游戏系统上的视频游戏的访问。以这种方式，所述用户的所述流式传输装置不需要用任何定制的硬件或软件集成来修改。利用连接到所述用户的流式传输装置的直通装置，用户可以通过所述流式传输装置的用户界面来快速访问云游戏。在一些实施例中，用户可以继续使用其优选流式传输装置及其对应用户界面来访问各种流式传输娱乐服务(例如，NetflixTM、HuluTM、AmazonTM Prime Video、YouTubeTM等)以及来自云游戏系统的视频游戏。

因此，用户可以使用连接到其优选流式传输装置的直通装置以有效方式在观看媒体内容与云游戏之间进行无缝切换。在一些实施例中，支持云游戏所需的各种操作，并且所述操作可以由所述直通装置而不是所述流式传输装置来执行。例如，所述直通装置可以包括能有助于低等待时间视频解码、高处理能力、经由蓝牙与装置进行无线连接、与云游戏服务器进行无线连接、低等待时间的控制器输入及视频帧处理、提供视频帧以供视频显示装置渲染等的操作。

在一个实施例中，提供了一种用于处理通过网络从云游戏系统流式传输的视频游戏的方法。所述方法包括通过与经由直通装置连接到显示屏幕的流式传输装置相关联的用户界面来接收针对游戏会话的选择视频游戏的指示。所述方法包括从所述直通装置的游戏流式传输逻辑接收所述游戏会话为活动的信号。在一个实施例中，所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供所述显示屏幕渲染，并且在所述云游戏系统执行所述视频游戏时由所述游戏流式传输逻辑接收用户输入以驱动所述视频游戏的交互性。

在另一实施例中，提供了一种用于通过网络从云游戏系统流式传输视频游戏的直通装置。所述直通装置包括HDMI输出端口。所述直通装置包括HDMI输入端口。所述直通装置包括直通逻辑。所述直通装置包括游戏流式传输逻辑。所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供所述显示屏幕渲染。

依据以下结合附图的以示例方式图解说明本公开的原理的具体实施方式，本公开的其他方面及优点将变得显而易见。

附图说明

通过结合附图参考以下描述，可更好地理解本公开，在附图中：

图1图解说明根据本公开的实施方式的被配置为使用经由直通装置连接到显示屏幕的流式传输装置将来自云计算及游戏提供商的视频游戏及来自娱乐服务提供商的媒体内容流式传输到用户的系统的实施例。

图2图解说明根据本公开的实施方式的直通装置以及连接到显示屏幕以便于进行云游戏及便于流式传输媒体内容的流式传输装置的实施例。

图3图解说明根据本公开的实施方式的直通装置的实施例。

图4图解说明根据本公开的实施方式的在直通装置未被激活时HDMI信号从流式传输装置流动到直通装置及显示屏幕中的实施例。

图5图解说明根据本公开的实施方式的流式传输装置的用户界面以及在用户选择PlayStation Now应用来发起游戏会话之后对应PlayStation Now界面的实施例。

图6图解说明根据本公开的实施方式的被配置为流式传输用户从云计算及游戏提供商选择的视频游戏的系统的实施例。

图7图解说明根据本公开的实施方式的从云计算及游戏提供商流式传输所选择视频游戏并在用户的显示屏幕上显示所选择视频游戏的实施例。

图8图解说明根据本公开的实施方式的控制器无线地连接到直通装置的实施例。

图9图解说明根据本公开的实施方式的用于处理通过网络从云游戏系统流式传输的视频游戏的方法。

图10图解说明可以用于执行本公开的各种实施例的各方面的示例性装置的部件。

具体实施方式

本公开的以下实施方式提供了用于处理通过网络从云游戏系统流式传输的视频游戏的方法、系统及装置。在一个实施例中，直通装置可以与用户的流式传输装置(例如，AppleTM TV、RokuTM流式传输媒体播放器、AmazonTM Fire TV Stick、GoogleTMChromecastTM等)集成，以向所述用户提供对所述云游戏系统上的视频游戏的访问。在一个实施例中，由于直通装置与流式传输装置彼此连接，所以所述装置可以一起工作，以向用户提供对来自云游戏系统的云游戏及来自各种流式传输娱乐服务(例如，NetflixTM、HuluTM、AmazonTM Prime Video、YouTubeTM等)的媒体内容的访问。这为消费者从云游戏系统流式传输视频游戏而无需放弃其优选流式传输装置提供了一种无缝方式。例如，用户可能拥有用于流式传输来自各种娱乐服务的媒体内容的RokuTM流式传输媒体播放器。为了从云游戏系统访问视频游戏，用户可以简单地将直通装置连接到其Roku流式传输媒体播放器。

在一个实施例中，可以通过经由与Roku流式传输媒体播放器相关联的用户界面选择视频游戏或与视频游戏相关联的应用(例如，PlayStationTM Now应用)来激活直通装置。一旦选择了视频游戏，游戏会话就会是活动的，并且直通装置被配置为接收视频游戏的压缩流以进行解码并显示在用户的显示屏幕上。一般来说，本文中所描述的方法提供了一种用于将直通装置与用户的流式传输装置集成使得可以在不对用户的流式传输装置进行任何硬件或软件修改的情况下访问云游戏的方式。

以示例的方式，公开了一种方法，其实行用于处理通过网络从云游戏系统流式传输的视频游戏的方法。所述方法包括通过与经由直通装置连接到显示屏幕的流式传输装置相关联的用户界面来接收针对游戏会话的选择视频游戏的指示。在一个示例中，用户可能正在其RokuTM流式传输装置上观看电影。在电影结束之后，用户可能想要在云游戏系统上玩视频游戏。为了发起游戏会话，用户可以在RokuTM流式传输装置的界面上选择视频游戏来开始玩游戏。

在另一实施例中，所述方法可以还包括从所述直通装置的游戏流式传输逻辑接收所述游戏会话为活动的信号。在一个示例中，所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供所述显示屏幕渲染，并且在所述云游戏系统执行所述视频游戏时由所述游戏流式传输逻辑接收用户输入以驱动所述视频游戏的交互性。然而，对于本领域的技术人员将显而易见的是，可以在没有当前描述的具体细节的一些或全部的情况下实践本公开。在其他情况下，没有详细地描述所熟知的过程操作，以免不必要地使本公开模糊。

根据一个实施例，公开了一种用于通过网络从云游戏系统向用户流式传输在线视频游戏的系统。在一个实施例中，所述系统包括经由直通装置连接到显示屏幕的流式传输装置。在一个实施例中，直通装置可以向用户提供对云游戏的访问。例如，当直通装置未被激活时，用户可以流式传输并观看来自通过流式传输装置而可用的任何娱乐流式传输服务(例如，NetflixTM、HuluTM、AmazonTM PrimeTM VideoTM、YouTubeTM等)的媒体内容。为了激活并启用用于云游戏的直通装置，用户可以通过流式传输装置的用户界面来选择视频游戏或与视频游戏相关联的应用。

在一个实施例中，当直通装置被激活时，用户可以访问并玩云游戏系统上可用的多个视频游戏。在一些实施例中，直通装置被配置为执行能够促进云游戏的多个操作，诸如接收视频游戏的压缩流、对视频游戏的压缩流进行解码、提供图像数据以供显示屏幕渲染、接收用于驱动视频游戏的交互性的用户输入等。以这种方式，用户可以将直通装置用于云游戏，同时允许用户继续使用其流式传输装置以对来自各种流式传输娱乐服务的媒体内容进行流式传输。

考虑到以上概述，下文提供了数个示例性附图以促进对示例性实施例的理解。

图1图解说明被配置为使用经由直通装置104连接到显示屏幕116的流式传输装置106将来自云计算及游戏提供商114的视频游戏以及来自娱乐服务提供商的媒体内容流式传输到用户102的系统的实施例。在一个实施例中，图1图解说明用户102、直通装置104、流式传输装置106、网络110、云计算及游戏提供商114以及显示屏幕116。如图1中所图解说明，用户102被展示为使用控制器108来探索与流式传输装置106相关联的用户界面112上的各种特征。在一些实施例中，用户界面112可以显示在另一或任何其他装置的移动装置上，诸如个人计算机、膝上型计算机、平板计算机、监视器及控制台/PC装备、电视及控制台装备、外围装置、平板电脑、瘦客户端、机顶盒、网络装置/器具等。

在一个实施例中，流式传输装置106通过网络110无线地连接到娱乐服务提供商(未展示)。在一些实施例中，娱乐服务提供商可以流式传输多个媒体内容，并向用户提供对多个媒体内容的访问。例如，流式传输装置106可以是媒体流式传输装置，诸如AppleTM TV、RokuTM流式传输媒体播放器、AmazonTM Fire TV Stick、GoogleTM ChromecastTM等。每一流式传输装置106可以提供不同娱乐服务，并向用户提供不同用户界面。

例如，在一个实施例中，如图1中所图解说明，流式传输装置106的用户界面112可以包括用于访问不同类型的流式传输娱乐服务的多个应用。如所图解说明，主页菜单124可以包括用户102可以访问的各种应用118a到118n。主页菜单124包括PlayStation Now应用118a、音乐应用118b、电影应用118c、新闻应用118d、体育应用118e、电视节目应用118f、卡通应用118g及互联网应用118n。在一个实施例中，用户界面112可以包括允许用户102快速搜索特定应用、媒体内容或视频游戏的搜索122特征。在其他实施例中，用户界面112可以包括设置120特征，所述特征允许用户配置与流式传输装置相关联的各种特征，例如，音频设置、显示设置、账户设置等。应当理解，主页菜单124及用户界面112可以采用各种形式及布局，并且提供此图解说明以展示与流式传输装置106的界面相关联的交互性质。

在一些实施例中，直通装置104可以为用户102启用云游戏。如图1中所展示，在一个实施例中，直通装置104可以连接到显示屏幕116的输入端，并且流式传输装置106可以连接到直通装置104的输入端。当用户102与流式传输装置106的用户界面112交互时，用户可以具有选择视频游戏或与视频游戏相关联的应用(例如，PlayStationTM Now 118a或其他视频游戏访问应用)的选项，这可以发起游戏会话或生成请求模仿游戏会话的信号。如果选择了视频游戏或与视频游戏相关联的应用，那么直通装置104被激活，并且信号被发送到云计算及游戏提供商114，所述云计算及游戏提供商发起或致使开始处理所选择视频游戏的请求。

在一个实施例中，云计算及游戏提供商114维护并执行由用户102玩的视频游戏。在一些实施例中，云计算及游戏提供商114被配置为通过网络112从由用户102操作的控制器108接收输入。当用户102与视频游戏交互时，用户经由控制器108提供输入，并且游戏命令被发送到云计算及游戏提供商114。在一些实施例中，云计算及游戏提供商114被配置为处理输入以影响正在执行的视频游戏的游戏状态。来自正在执行的视频游戏的输出(诸如视频数据、音频数据)被压缩并被传输到直通装置104以进行解码。在一些实施例中，直通装置104被配置为接收视频游戏的压缩流并对所述压缩流进行解码。在一个实施例中，视频游戏流可以在显示屏幕116和/或诸如监视器或电视的单独装置上呈现给用户102。

在一些实施例中，直通装置104可以在不将流式传输装置106连接到直通装置104的情况下操作。在一个实施例中，当直通装置104连接到显示屏幕116时，与直通装置104相关联的用户界面112显示在显示屏幕上。在一个实施例中，与直通装置104相关联的用户界面112可以包括游戏目录应用，所述游戏目录应用向用户提供可用于进行云游戏的视频游戏的列表。例如，如果用户决定将流式传输装置106与直通装置104分离，那么与直通装置104相关联的用户界面将出现在显示器上，而不是与流式传输装置106相关联的用户界面。以这种方式，直通装置104被配置为在不将流式传输装置106连接到直通装置104的情况下独立操作。换句话说，即使直通装置104在没有使流式传输装置106连接到直通装置的情况下连接到显示屏幕116，用户仍然可以访问云游戏。

图2图解说明直通装置104以及连接到显示屏幕116以便于进行云游戏及便于流式传输媒体内容的流式传输装置106的实施例。在一些实施例中，直通装置104可以与流式传输装置106集成，以向用户提供对云游戏系统上的视频游戏的访问。如图2中所图解说明，直通装置104的HDMI输出端口连接到显示屏幕116的HDMI输入端口，并且流式传输装置106的HDMI输出端口连接到直通装置104的HDMI输入端口。

在一个实施例中，流式传输装置106可以包括天线206、装置流式传输服务208及装置逻辑210。在一个实施例中，天线206被配置为提供无线互联网接入。在一些实施例中，流式传输装置106的装置流式传输服务208可以经由多个应用118a到118n向用户102提供对各种内容的访问。在一个实施例中，应用118a到118n可以包括诸如视频游戏、电影、体育、音乐、直播TV等内容。在一些实施例中，装置逻辑210被配置为处理从装置流式传输服务208的服务器接收的数据。在一个实施例中，装置逻辑210被配置为确定并解密用户选择了应用118a到118n中的哪一个。响应于所选择应用118，装置逻辑210向对应装置流式传输服务提供商发送信号来请求所选择内容的视频流。

例如，用户102可以选择应用118来观看电影，其中向对应装置流式传输服务提供商发送对电影的流的请求。然后，电影的流由流式传输装置106传输并接收以进行解码，所述解码可以显示在显示屏幕116上。在另一实施例中，用户102可以选择视频游戏(例如，PSNowTM应用)来发起游戏会话，在所述游戏会话中，向云计算及游戏提供商114发送对所选择视频游戏的流的请求。

如图2中所图解说明，如果用户102选择了PlayStation Now 118a应用或视频游戏来发起游戏会话，那么第一HDMI信号212a从流式传输装置106被传输，并由直通装置104的游戏流式传输逻辑204来接收以供处理。在一个实施例中，对PlayStation Now 118a应用或视频游戏的选择激活直通装置104，其中直通装置104的游戏流式传输逻辑204接收并处理第一HDMI信号212a。在一个实施例中，第一HDMI信号212a可以包括视频游戏的压缩流，所述压缩流可以由游戏流式传输逻辑204来解码并被提供到显示屏幕116以渲染所选择视频游戏。

如图2中进一步所图解说明，如果用户102选择了不包括云游戏视频游戏的应用(例如，NetflixTM、HuluTM、AmazonTM Prime Video等)，那么第二HDMI信号212b从流式传输装置106被传输，并由直通装置104的直通逻辑202来接收。在一个实施例中，第二HDMI信号212b可以包括由用户选择的媒体内容的压缩流。由于第二HDMI信号212b通过直通逻辑202，所以直通装置104未被激活，这导致第二HDMI信号212b未被接触到，就好像流式传输装置106未连接到直通装置104一样。换句话说，直通逻辑202将在直通装置104不进行任何处理的情况下允许第二HDMI信号212b通过。在此实施例中，用户可以与其流式传输装置106进行交互，就像他们传统上好像直通装置104不存在一样。一旦显示屏幕116接收到第二HDMI信号212b，显示屏幕就可以使用所选择媒体内容来进行渲染。

在一些实施例中，直通装置104可以包括高分辨率升级模块。在一个实施例中，高分辨率升级模块被配置为从流式传输装置106接收HDMI信号以供处理来生成HDMI信号的更高分辨率输出。在一个实施例中，高分辨率升级模块可以并入有人工智能算法，所述算法被配置为使用HDMI信号来预测更高分辨率输出。例如，来自流式传输装置的HDMI信号可以是1080p分辨率的电影。当高分辨率升级模块接收到该HDMI信号时，所述模块被配置为将HDMI信号转换为更高质量，诸如4K分辨率。

图3图解说明根据本公开的实施方式的直通装置104的实施例。在一个实施例中，直通装置104包括HDMI输入端口302、HDMI输出端口304、直通逻辑202及游戏流式传输逻辑204。在一个实施例中，直通装置104的HDMI输出端口304可以连接到显示屏幕116的HDMI输入端口。在另一实施例中，诸如AppleTM TV、RokuTM、FireTVTM、有线电视盒、蓝光播放器等流式传输装置106的输出端可以连接到直通装置104的HDMI输入端口302。因此，用户102拥有或偏好的现有流式传输装置可以与直通装置104集成，以向用户102提供从云游戏系统对视频游戏的访问。

在一些实施例中，在与从云游戏系统流式传输的视频游戏不相关联的媒体应用的操作期间(例如电影、音乐、直播TV等)，媒体内容的HDMI信号通过直通逻辑202。在一个实施例中，当HDMI信号通过直通逻辑202时，直通装置104保持不活动，并且流式传输装置106在不受直通装置104任何中断的情况下操作。换句话说，流式传输装置106就像直通装置104与流式传输装置106没有连接一样操作。在其他实施例中，直通逻辑202可以处理与HDMI信号相关联的数据。例如，用户102可能正在使用流式传输装置106来观看直播TV。HDMI信号可以包括指示用户102通常在晚上观看大学篮球及曲棍球的数据。因此，可以处理通过直通逻辑202接收的数据，以确定用户行为并确定用户可能有兴趣观看的媒体内容的类型。

在一些实施例中，当用户选择与云游戏视频游戏相关联的应用时，直通装置104被激活，这导致HDMI信号通过游戏流式传输逻辑204以供游戏流式传输逻辑204处理。在一个实施例中，当直通装置104被激活时，直通装置104被配置为与云计算及游戏提供商114连接并通信。在一个示例中，游戏流式传输逻辑204可以包括被配置为支持云游戏的多个操作，诸如蓝牙模块306、视频解码器308操作、流式传输播放器310操作及游戏目录312。在一个实施例中，蓝牙模块306可以实现到各种类型的装置的无线连接。例如，蓝牙模块306可以允许用户102的控制器108与直通装置102无线地连接。

在一个实施例中，视频解码器308操作可以被配置为对视频游戏的压缩流进行解码，以便渲染解压缩的视频图像来显示在显示屏幕116上。在一些实施例中，视频解码器308可以包括用于将各个视频帧存储在直通装置104的接收缓冲器中的操作。在一些实施例中，流式传输播放器310操作可以被配置为与云计算及游戏提供商114通信，以请求由用户102选择的视频游戏。例如，当用户102通过与流式传输装置相关联的用户界面来选择视频游戏时，云计算及游戏提供商114自动开始将所选择视频游戏流式传输到直通装置104。

在一个实施例中，游戏目录312可以充当用户102的主要用户界面。例如，如果流式传输装置与直通装置断开连接或分离，那么直通装置被配置为在没有流式传输装置的情况下独立操作。在此实施例中，与直通装置相关联的用户界面可以包括用户可选择的游戏目录312应用。

图4图解说明当直通装置104未被激活时HDMI信号302从流式传输装置106流动到直通装置104及显示屏幕116中的实施例。在一个实施例中，流式传输装置106可以是诸如AppleTM TV、RokuTM媒体播放器、FireTVTM等装置，所述装置被配置为接收由用户选择的媒体内容(例如，电影、音乐、直播TV等)的视频流。在一些实施例中，流式传输装置106被配置为处理视频流并输出HDMI视频信号302。如图4中所展示，HDMI视频信号302从流式传输装置106流动，并由直通装置104来接收。在直通装置接收到HDMI视频信号302之后，HDMI视频信号302流动到显示屏幕116，诸如TV、监视器、投影仪等，所述HDMI视频信号由显示屏幕116来处理并渲染。在图4中所展示的所图解说明示例中，HDMI视频信号302不间断地流经直通装置104。在所图解说明实施例中，用户可以将其现有流式传输装置106连接到直通装置104，并且在不受直通装置104的任何干扰的情况下继续使用如其先前具有的其流式传输装置106。

在另一实施例中，选择与视频游戏不相关联的应用(例如，音乐、直播TV、电影等)致使游戏会话不活动(例如，直通装置104没有被激活)。在一些实施例中，这致使与所选择应用相关联的HDMI信号302不间断地通过直通逻辑202以供显示屏幕116渲染。

在一个实施例中，接通显示屏幕116将触发直通装置104提供电力并接通流式传输装置106。在一个实施例中，当流式传输装置106被接通时，所述流式传输装置可以生成输出HDMI视频信号302，所述输出HDMI视频信号流经直通装置104并到达显示屏幕116，所述输出HDMI视频信号由显示屏幕116来处理及渲染。作为结果，显示屏幕116可以包括与流式传输装置106相关联的用户界面，并且用户可以观看通过流式传输装置106而可用的多个应用并与所述应用交互。

例如，用户102拥有Roku流式传输装置，并且所述Roku流式传输装置经由直通装置104连接到显示屏幕116。当用户102接通显示屏幕116时，显示与Roku流式传输装置相关联的用户界面，并且用户102可以经由用户界面与一个或多个应用交互，例如，启动应用、观看视频、听音乐等。如果用户想要使用电影应用(例如，NetflixTM)来观看电影，那么用户可以从电影应用选择电影。所选择电影将导致电影从与电影应用相关联的相应服务器流式传输。当所选择电影流式传输到Roku流式传输装置并显示在显示屏幕116上时，直通装置104保持不活动且不干扰视频流。

图5图解说明在流式传输装置106的用户界面112以及在用户102选择PlayStationNow应用118n来发起游戏会话之后对应PlayStation Now界面506的实施例。在一个实施例中，流式传输装置106(例如，Roku流式传输媒体播放器)的用户界面112呈现在用户的移动电话、显示屏幕116或任何其他装置上。在一个实施例中，装置流式传输服务208可以提供用户界面112。在所图解说明示例中，用户界面112包括多个应用118a到118n。如所图解说明，应用可以包括体育应用118a、电影应用118b、视频应用118c及PlayStationTM Now应用118n。在其他实施例中，用户界面112可以包括菜单502，其包括多个类别504a到504n。应当理解，用户界面112可以采取各种形式及布局，并且提供此图解说明以展示特定类型的流式传输装置的交互性质。

如图5中进一步所图解说明，在用户102选择PlayStationTM Now应用118n之后，对PlayStation Now应用118n的选择激活直通装置104，并且PlayStation Now界面506呈现在用户的显示屏幕116上。在一些实施例中，PlayStationTM Now界面506包括呈现给用户以供选择的多个视频游戏508a到508n。在一个实施例中，多个视频游戏508a到508n被存储并且可以从与云计算及游戏提供商114相关联的视频游戏服务器被检索。在其他实施例中，多个视频游戏508a到508n被存储并且可以从存储在直通装置104的游戏流式传输逻辑204中的游戏目录312被检索。

例如，如图5中所展示，PlayStation Now界面506包括用户可以选择的六个不同视频游戏508a到508n(例如，滑雪板游戏2021、营救任务、真人格斗锦标赛、你赢了游戏、世界棒球大赛、日本赛车)。在一些实施例中，当用户选择视频游戏508来开始游戏会话时，选择视频游戏致使直通装置104的激活。直通装置104可以开始从与云计算及游戏提供商114相关联的视频游戏服务器接收所选择视频游戏的压缩流并对所述压缩流进行处理。

图6图解说明被配置为流式传输由用户从云计算及游戏提供商114选择的视频游戏的系统的实施例。如所图解说明，流式传输装置106经由直通装置104连接到显示屏幕116。在一个实施例中，在用户102通过PlayStation Now界面506(或用户界面112)选择视频游戏508c(例如，真人格斗锦标赛)以开始游戏会话之后，所述选择导致信号602被传输到直通装置104以致使直通装置104的激活。在一些实施例中，直通装置104的流式传输播放器310操作包括通信接口604。在一些实施例中，通信接口604可以包括被配置为便于通过网络110与云计算及游戏提供商114通信的操作。

例如，当用户选择视频游戏时，通信接口604可以被配置为与云计算及游戏114通信，这可以包括发送指示向云计算及游戏114通知用户请求了进行游戏会话的特定视频游戏508。响应于所述请求，云计算及游戏114将视频游戏的压缩流传输到直通装置104，以供直通装置104的视频解码器308操作进行解码。在一个实施例中，选择视频游戏可以导致将视频游戏的压缩流从云计算及游戏提供商114的服务器传输到接收缓冲器，以供游戏流式传输逻辑进行解码。这可以帮助消除在视频游戏流的传输期间可能出现的等待时间及延迟。

在一些实施例中，如图6中所图解说明，用户102的控制器108可以通过直通装置104的蓝牙模块306无线地连接到直通装置104。在一个实施例中，用户可以经由控制器108来提供输入，并且游戏命令被发送到云计算及游戏提供商114以对输入进行处理。

图7图解说明从云计算及游戏提供商114流式传输所选择视频游戏并在用户的显示屏幕116上显示所选择视频游戏的实施例。在图7中所展示的实施例中，直通装置104连接到显示屏幕116，并且流式传输装置106连接到直通装置104。在一个实施例中，在将开始所选择视频游戏的游戏会话的请求发送到云计算及游戏114提供商之后，云计算及游戏114提供商将视频游戏的流传输到直通装置104，所述流被接收并被解码。在一个实施例中，在对视频游戏流进行解码之后，直通装置104被配置为提供图像数据以供显示屏幕116渲染。

在图7中所展示的所图解说明示例中，显示屏幕116被展示显示视频游戏的游戏场景702(例如，游戏3：真人格斗锦标赛)。特定来说，游戏场景702描绘第一格斗者与第二格斗者之间的武术格斗，其中用户102控制第一格斗者的游戏动作。在一些实施例中，在用户玩游戏期间，当用户经由控制器108提供输入来控制第一格斗者的游戏动作时，用户的输入由直通装置104接收，所述直通装置在云计算及游戏114提供商执行视频游戏的同时驱动视频游戏的交互性。

在一些实施例中，在游戏会话结束之后，直通装置104可以被去激活，并且用户界面112在显示屏幕116上显示给用户。在一个实施例中，用户可以通过选择用户界面112或应用118上的视频游戏来发起另一游戏会话，以观看由一个或多个流式传输娱乐服务提供的特定类型的媒体内容。

图8图解说明控制器108无线地连接到直通装置104的实施例。如上所述，在一个实施例中，直通装置104可以包括蓝牙模块306，所述蓝牙模块能够无线连接到各种装置，诸如控制器108。在用户玩游戏期间，当用户经由控制器108来提供输入时，所述输入被传输到直通装置104，以由直通装置104的游戏流式传输逻辑204处理来驱动视频游戏的交互性。由用户102提供的输入被进一步传输到云计算及游戏114提供商，其中云计算及游戏114提供商被配置为处理所述输入来影响正在执行的视频游戏的游戏状态。

在一些实施例中，图8中所展示的控制器108可以包括用户可选择的输入按钮(例如，PSNowTM按钮)。在一个实施例中，当用户选择输入按钮(例如，PS Now按钮)时，直通装置104被激活，这可以导致视频游戏服务器将视频游戏的压缩流传输到直通装置104，以供直通装置104的游戏流式传输逻辑处理。在一个实施例中，PS Now按钮是可使用装置所选择的用户界面选择图标。

图9图解说明用于处理通过网络从云游戏系统流式传输的视频游戏的方法。在一个实施例中，图9中所描述的方法通过将用户的现有流式传输装置106与直通装置104集成来向用户提供对云游戏的访问。在一个实施例中，所述方法包括操作902，所述操作被配置为通过与流式传输装置106相关联的用户界面112来接收针对游戏会话的选择视频游戏的指示，所述流式传输装置经由直通装置104连接到显示屏幕116。如上所述，用户界面可以显示在另一或任何其他装置的移动装置上，诸如个人计算机、膝上型计算机、平板计算机、监视器及控制台/PC装备、电视及控制台装备、外围装置、平板电脑、瘦客户端、机顶盒、网络装置/器具等。

在一些实施例中，流式传输装置106可以是媒体流式传输装置，例如AppleTV、RokuTM流式传输媒体播放器、AmazonTM FireTV Stick、GoogleTM ChromecastTM等。当流式传输装置106连接到直通装置104时，直通装置104可以包括被配置为处理并促进云游戏的多个操作。在一个实施例中，流式传输装置106包括对应装置流式传输服务208，其可以向用户提供对多个应用118及用户界面112的访问。在一些实施例中，用户界面112可以包括用于访问不同类型的流式传输娱乐服务的各种应用，例如，视频游戏、音乐、电影、新闻、体育、电视节目等。在一个实施例中，选择视频游戏或任何其他类型的应用可以导致信号被发送到云游戏系统或流式传输娱乐服务系统，以向相应系统通知用户已经选择了应用。

所述方法流向操作904，其中所述操作被配置为从直通装置的游戏流式传输逻辑接收游戏会话为活动的信号。在一个实施例中，操作904可以包括被配置为接收视频游戏的压缩流的游戏流式传输逻辑204。在一些实施例中，游戏流式传输逻辑204可以包括被配置为对视频游戏的压缩流进行解码的视频解码器308操作。在对视频游戏的压缩流进行解码之后，操作904被配置为向显示屏幕116提供图像数据以供渲染视频游戏场景。在其他实施例中，当用户玩视频游戏并经由控制器106提供输入时，操作904被配置为在云游戏系统执行所述视频游戏时接收用户的输入以驱动视频游戏的交互性。

图10图解说明可以用于执行本公开的各种实施例的各方面的示例性装置1000的部件。此框图图解说明装置1000，所述装置可以合并或者可以是适合于实践本公开的实施例的个人计算机、视频游戏控制台、个人数字助理、服务器或其他数字装置。装置1000包括用于运行软件应用及可选地操作系统的中央处理单元(CPU)1002。CPU 1002可以由一个或多个同构或异构处理核心构成。例如，CPU 1002是具有一个或多个处理核心的一个或多个通用微处理器。另外的实施例可以使用具有微处理器架构的一个或多个CPU来实施，所述微处理器架构特别适于高度并行且计算密集的应用，诸如处理解释查询、识别上下文相关资源以及立即在视频游戏中实施及渲染上下文相关资源的操作。装置1000可以在玩游戏片段的玩家的本地(例如，游戏控制台)，或者相对于玩家在远程(例如，后端服务器处理器)，或者是在游戏云系统中使用虚拟化来向客户端远程流式传输游戏进行的许多服务器中的一者。

存储器1004存储应用及数据以供CPU 1002使用。存储装置1006提供用于应用及数据的非易失性存储装置及其他计算机可读介质，并且可包括固定磁盘驱动器、可移除磁盘驱动器、闪存存储器装置以及CD-ROM、DVD-ROM、蓝光、HD-DVD或其他光学存储装置以及信号传输与存储介质。用户输入装置1008将来自一个或多个用户的用户输入传递到装置1000，所述装置的示例可以包括键盘、鼠标、操纵杆、触摸板、触摸屏、静态或视频记录器/相机、用于辨识手势的追踪装置和/或传声器。网络接口1014允许装置1000经由电子通信网络与其他计算机系统通信，并且可以包括在局域网及诸如互联网的广域网上的有线或无线通信。音频处理器1012适于从由CPU 1002、存储器1004和/或存储装置1006提供的指令和/或数据生成模拟音频输出或数字音频输出。装置1000的部件(包括CPU 1002、存储器1004、数据存储装置1006、用户输入装置1008、网络接口1010及音频处理器1012)经由一根或多根数据总线1022来连接。

图形子系统1020与数据总线1022以及装置1000的部件进行进一步连接。图形子系统1020包括图形处理单元(GPU)1016及图形存储器1018。图形存储器1018包括用于存储输出图像的每一像素的像素数据的显示存储器(例如，帧缓冲器)。图形存储器1018可以与GPU1008集成在同一装置中、作为单独装置与GPU 1016连接和/或在存储器1004内实施。可将像素数据从CPU 1002直接提供到图形存储器1018。另一选择是，CPU 1002为GPU 1016提供限定所期望输出图像的数据和/或指令，GPU 1016依据所述数据和/或指令来产生一个或多个输出图像的像素数据。限定所期望输出图像的数据和/或指令可存储在存储器1004和/或图形存储器1018中。在实施例中，GPU 1016包括依据限定场景的几何形状、照明、阴影、纹理、运动和/或相机参数的指令及数据来生成输出图像的像素数据的3D渲染能力。GPU 1016可还包括能够执行着色器程序的一个或多个可编程执行单元。

图形子系统1014周期性地从图形存储器1018输出图像的像素数据，以在显示装置1010上显示。显示装置1010可以是能够响应于来自装置1000的信号来显示视觉信息的任何装置，包括CRT、LCD、等离子体及OLED显示器。装置1000可向显示装置1010提供例如模拟或数字信号。

应当注意，在广阔的地理区域上传递的访问服务(诸如提供对当前实施例的游戏的访问)经常使用云计算。云计算是一种计算类型，其中通过互联网提供动态可扩展且通常虚拟化的资源作为服务。用户不需要成为在支持他们的“云”中的技术基础设施方面的专家。云计算可以被划分成不同服务，诸如基础设施即服务(IaaS)、平台即服务(PaaS)及软件即服务(SaaS)。云计算服务通常提供在线的从web浏览器访问的常用应用(诸如视频游戏)，而软件及数据则存储在云中的服务器上。基于计算机网络图中如何描绘互联网，术语云被用作互联网的隐喻，并且是对其隐藏的复杂基础设施的抽象。

在一些实施例中，游戏服务器可用于执行视频游戏玩家的持续时间信息平台的操作。通过互联网玩的大多数视频游戏都是经由与所述游戏服务器的连接来操作的。通常，游戏使用从玩家收集数据并将所述数据分发给其他玩家的专用服务器应用。在其他实施例中，视频游戏可由分布式游戏引擎来执行。在这些实施例中，所述分布式游戏引擎可在多个处理实体(PE)上执行，使得每一PE执行视频游戏在上面运行的给定游戏引擎的功能片段。游戏引擎将每一处理实体简单地视为计算节点。游戏引擎通常执行一系列功能多样的操作以执行视频游戏应用以及用户体验的额外服务。例如，游戏引擎实施游戏逻辑，执行游戏计算、物理效果、几何变换、渲染、照明、阴影、音频以及额外游戏内或游戏相关服务。额外服务可包括例如消息传送、社交实用程序、音频通信、游戏进行重播功能、帮助功能等。虽然游戏引擎有时可在由特定服务器的管理程序虚拟化的操作系统上执行，但是在其他实施例中，游戏引擎本身分布在多个处理实体当中，所述处理实体中的每一者可驻留在数据中心的不同服务器单元上。

根据此实施例，取决于每一游戏引擎片段的需要，用于执行的相应处理实体可以是服务器单元、虚拟机或容器。例如，如果游戏引擎片段负责相机变换，那么可向此特定游戏引擎片段提供与图形处理单元(GPU)相关联的虚拟机，因为所述虚拟机将进行大量相对简单的数学运算(例如，矩阵变换)。可向要求更少但更复杂的操作的其他游戏引擎片段提供与一个或多个更高功率中央处理单元(CPU)相关联的处理实体。

通过分布所述游戏引擎，所述游戏引擎设置有不受物理服务器单元的能力约束的弹性计算性质。替代地，在需要时，向游戏引擎提供更多或更少的计算节点以满足视频游戏的需求。从视频游戏及视频游戏玩家的角度看，跨越多个计算节点而分布的游戏引擎与在单个处理实体上执行的非分布式游戏引擎没有区别，因为游戏引擎管理器或监督程序分发工作负荷并无缝地整合结果以便为最终用户提供视频游戏输出分量。

用户使用客户端装置来访问远程服务，所述客户端装置至少包括CPU、显示器及I/O。所述客户端装置可以是PC、移动电话、笔记型计算机、PDA等。在一个实施例中，在游戏服务器上执行的网络辨识客户端使用的装置类型并调整所采用的通信方法。在其他情形中，客户端装置使用诸如html的标准通信方法来通过互联网访问游戏服务器上的应用。

应了解，可以针对特定平台及特定相关联控制器装置而开发给定视频游戏或游戏应用。然而，当经由如本文所呈现的游戏云系统使此种游戏可用时，用户可以用不同控制器装置来访问视频游戏。例如，可能已经针对游戏控制台及其相关联控制器开发了游戏，而用户可能正在使用键盘及鼠标从个人计算机访问游戏的基于云的版本。在此种场景中，输入参数配置可限定从用户的可用控制器装置(在此情形中，键盘及鼠标)生成的输入到可接受以执行视频游戏的输入的映射。

在另一示例中，用户可以经由平板计算装置、触摸屏智能电话或其他触摸屏驱动装置来访问云游戏系统。在这种情形中，客户端装置与控制器装置一起集成在同一装置中，其中借助于检测到的触摸屏输入/手势来提供输入。对于这种装置，输入参数配置可限定与视频游戏的游戏输入相对应的特定触摸屏输入。例如，在视频游戏的运行期间，可能显示或覆盖按钮、方向键或其他类型的输入元件以指示触摸屏上用户可触摸来生成游戏输入的位置。手势(诸如在特定方向上的轻扫或具体触摸运动)也可被检测为游戏输入。在一个实施例中，可向用户提供指导，指示如何经由触摸屏幕提供用于游戏进行的输入，例如在开始视频游戏的游戏进行之前提供指导，以便使用户适应触摸屏幕上的控件的操作。

在一些实施例中，客户端装置用作控制器装置的连接点。也就是说，控制器装置经由无线或有线连接与客户端装置通信以将来自控制器装置的输入传输到客户端装置。客户端装置可继而处理这些输入，并且然后通过网络(例如，通过诸如路由器的本地联网装置访问的网络)将输入数据传输到云游戏服务器。然而，在其他实施例中，控制器本身可以是联网装置，具有经由网络直接将输入传递到云游戏服务器的能力，而无需首先通过客户端装置来传输此类输入。例如，控制器可以连接到本地联网装置(诸如上述路由器)以向云游戏服务器发送数据及从云游戏服务器接收数据。因此，虽然可能仍要求客户端装置接收来自基于云的视频游戏的视频输出并将其渲染在本地显示器上，但可通过允许控制器通过网络直接地向游戏云服务器发送输入从而绕过客户端装置来减少输入等待时间。

在一个实施例中，联网控制器及客户端装置可以被配置为将某些类型的输入直接地从控制器发送到云游戏服务器，并且经由客户端装置来发送其他类型的输入。例如，其检测不依赖于控制器本身以外的任何额外硬件或处理的输入可以经由网络从控制器直接发送到云游戏服务器，从而绕过客户端装置。此类输入可以包括按钮输入、操纵杆输入、嵌入式运动检测输入(例如，加速度计、磁力计、陀螺仪)等。然而，利用额外硬件或需要由客户端装置进行处理的输入可以由客户端装置发送到云游戏服务器。这些输入可能包括从游戏环境捕获的视频或音频，所述视频或音频可以在发送到云游戏服务器之前由客户端装置进行处理。另外，来自控制器的运动检测硬件的输入可以由客户端装置结合所捕获视频进行处理，以检测控制器的位置及运动，随后客户端装置会将所述位置及运动传递到云游戏服务器。应当了解，根据各种实施例，控制器装置还可以从客户端装置或直接从云游戏服务器接收数据(例如，反馈数据)。

应当理解，可以使用本文中所公开的各种特征将本文中所定义的各种实施例组合或组装成具体实施方式。因此，所提供的示例只是一些可能示例，而不限于可通过组合各种元件来限定更多实施方式的各种实施方式。在一些示例中，在不脱离所公开或等效实施方式的精神的情况下，一些实施方式可以包括更少的元件。

本公开的实施例可以用包括手持式装置、微处理器系统、基于微处理器的或可编程的消费型电子产品、小型计算机、大型计算机等等的各种计算机系统配置来实践。还可在分布式计算环境中实践本公开的实施例，在所述分布式计算环境中，通过基于有线的网络或无线网络链接的远程处理装置来执行任务。

尽管以具体次序描述了方法操作，但是应当理解，可在操作之间执行其他内务操作，或者可调整操作，使得所述内务操作在稍微不同时间发生，或者操作可分布在允许以与处理相关联的各种间隔发生处理操作的系统中，只要以所期望方式执行遥测及游戏状态数据的处理来生成经修改游戏状态即可。

一个或多个实施例还可被制作为计算机可读介质上的计算机可读代码。计算机可读介质是可以存储数据的任何数据存储装置，所述数据随后可以由计算机系统读取。计算机可读介质的示例包括硬盘驱动器、网络附接存储装置(NAS)、只读存储器、随机存取存储器、CD-ROM、CD-R、CD-RW、磁带以及其他光学及非光学数据存储装置。计算机可读介质可以包括分布在联网耦合的计算机系统上的计算机可读有形介质，使得以分布式方式来存储并执行计算机可读代码。

在一个实施例中，视频游戏在游戏机、个人计算机上本地地执行或者在服务器上执行。在一些情形中，视频游戏由数据中心的一个或多个服务器执行。当执行视频游戏时，视频游戏的一些实例可以是视频游戏的模拟。例如，视频游戏可由生成视频游戏的模拟的环境或服务器执行。在一些实施例中，模拟是视频游戏的实例。在其他实施例中，模拟可以由模拟器产生。在任一情形中，如果视频游戏被表示为模拟，那么能够执行所述模拟以渲染可由用户输入交互地流式传输、执行和/或控制的交互内容。

尽管出于清楚理解的目的而略微详细地描述了前述实施例，但将显而易见的是，可在所附权利要求书的范围内实践某些改变及修改。因此，本实施例被认为是说明性的而非限制性的，并且所述实施例不限于本文中所给出的细节，而是可在所附权利要求书的范围及等效范围内进行修改。

Claims (20)

1.一种用于处理通过网络从云游戏系统流式传输的视频游戏的计算机实施方法，其包括：

通过与经由直通装置连接到显示屏幕的流式传输装置相关联的用户界面来接收针对游戏会话的选择所述视频游戏的指示；以及

从所述直通装置的游戏流式传输逻辑接收所述游戏会话为活动的信号，所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供所述显示屏幕渲染，并且在所述云游戏系统执行所述视频游戏时由所述游戏流式传输逻辑接收用户输入以驱动所述视频游戏的交互性。

2.根据权利要求1所述的计算机实施方法，其中所述选择所述视频游戏激活所述直通装置，以通过所述游戏流式传输逻辑来处理所述视频游戏的所述压缩流。

3.根据权利要求1所述的计算机实施方法，其中选择与所述视频游戏不相关联的应用致使所述游戏会话不活动，所述选择与所述视频游戏不相关联的所述应用致使与所选择应用相关联的HDMI信号通过直通逻辑以供所述显示屏幕渲染。

4.根据权利要求1所述的计算机实施方法，其中所述用户界面呈现在移动装置或连接到所述流式传输装置的装置的屏幕上。

5.根据权利要求1所述的计算机实施方法，其中所述视频游戏是从与所述云游戏系统相关联的一个或多个视频游戏服务器传输的，所述一个或多个视频游戏服务器是能通过互联网进行访问的数据中心的一部分。

6.根据权利要求1所述的计算机实施方法，其中从在所述直通装置的所述游戏流式传输逻辑中进行高速缓存的游戏目录检索所述视频游戏，所述游戏目录使用从所述云游戏系统的一个或多个服务器接收的数据来更新。

7.根据权利要求1所述的计算机实施方法，其中与流式传输装置相关联的所述用户界面使得用户能够从与所述流式传输装置相关联的多个应用进行选择，所述多个应用包括由一个或多个流式传输娱乐服务提供的媒体内容，其中所述媒体内容由所述流式传输装置通过互联网来接收。

8.根据权利要求1所述的计算机实施方法，其中所述用户输入是经由控制器装置或通过所述直通装置的蓝牙模块无线地连接到所述直通装置的装置从用户接收的。

9.根据权利要求1所述的计算机实施方法，其中选择控制器装置上的输入按钮激活所述直通装置，以供所述游戏流式传输逻辑处理所述视频游戏的所述压缩流。

10.根据权利要求1所述的计算机实施方法，其中将所述流式传输装置从所述直通装置分离致使与所述直通装置相关联的用户界面显示在移动装置上，与所述直通装置相关联的所述用户界面提供能选择的游戏目录应用。

11.根据权利要求1所述的计算机实施方法，其中所述视频游戏的所述压缩流被高速缓存在所述直通装置的接收缓冲器中，以供所述游戏流式传输逻辑的视频解码器模块解码。

12.根据权利要求1所述的计算机实施方法，其中选择所述视频游戏致使将所述视频游戏的所述压缩流从所述云游戏系统的服务器传输到所述直通装置的接收缓冲器以供所述游戏流式传输逻辑解码的请求。

13.一种用于通过网络从云游戏系统流式传输视频游戏的直通装置，其包括：

HDMI输出端口；

HDMI输入端口；

直通逻辑；以及

游戏流式传输逻辑，所述游戏流式传输逻辑被配置为接收所述视频游戏的压缩流，对所述视频游戏的所述压缩流进行解码，并提供图像数据以供显示屏幕渲染。

14.根据权利要求13所述的直通装置，其中所述直通装置的所述HDMI输出端口连接到显示屏幕的HDMI输入端口。

15.根据权利要求13所述的直通装置，其中流式传输装置的HDMI输出端口连接到所述直通装置的所述HDMI输入端口。

16.根据权利要求13所述的直通装置，其中所述直通装置是响应于通过与经由所述直通装置连接到显示屏幕的流式传输装置相关联的用户界面来选择视频游戏而被激活的，所述激活所述直通装置使得所述视频游戏的所述压缩流能够由所述游戏流式传输逻辑来处理。

17.根据权利要求16所述的直通装置，其中所述用户界面呈现在移动装置或连接到所述直通装置的装置的屏幕上。

18.根据权利要求13所述的直通装置，其中选择与所述视频游戏不相关联的应用致使所述直通装置不活动，所述选择所述应用致使与所选择应用相关联的HDMI信号通过所述直通逻辑以供所述显示屏幕渲染。

19.根据权利要求13所述的直通装置，其中所述云游戏系统的服务器将所述视频游戏的所述压缩流传输到所述直通装置的接收缓冲器，以供所述游戏流式传输逻辑的视频解码器模块解码。

20.根据权利要求13所述的直通装置，其中所述直通装置还包括高分辨率升级模块，所述高分辨率升级模块被配置为从流式传输装置接收HDMI信号以供处理来生成所述HDMI信号的更高图像质量。