CN113453059B - 云游戏数据处理方法、装置、设备以及介质 - Google Patents

云游戏数据处理方法、装置、设备以及介质 Download PDF

Info

Publication number
CN113453059B
CN113453059B CN202110708086.3A CN202110708086A CN113453059B CN 113453059 B CN113453059 B CN 113453059B CN 202110708086 A CN202110708086 A CN 202110708086A CN 113453059 B CN113453059 B CN 113453059B
Authority
CN
China
Prior art keywords
game
cloud
stream data
area
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110708086.3A
Other languages
English (en)
Other versions
CN113453059A (zh
Inventor
袁俊晓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Tencent Computer Systems Co Ltd
Original Assignee
Shenzhen Tencent Computer Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Tencent Computer Systems Co Ltd filed Critical Shenzhen Tencent Computer Systems Co Ltd
Priority to CN202110708086.3A priority Critical patent/CN113453059B/zh
Publication of CN113453059A publication Critical patent/CN113453059A/zh
Application granted granted Critical
Publication of CN113453059B publication Critical patent/CN113453059B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45Controlling the progress of the video game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781Games

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供了一种云游戏数据处理方法、装置、设备以及介质,该方法包括:在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。采用本申请实施例,可以丰富云游戏的使用方式,并提高云游戏的使用率。

Description

云游戏数据处理方法、装置、设备以及介质
技术领域
本申请涉及互联网技术领域,尤其涉及一种云游戏数据处理方法、装置、设备以及介质。
背景技术
云游戏是以云计算为基础的游戏方式,在云游戏的运行模式下,所有游戏都在服务器端运行,并将渲染完毕后的游戏画面压缩后通过网络传送给用户。目前的云游戏使用场景中,用户启动客户端中的云游戏A后,云服务器就可以启动该云游戏A对应的安卓容器,该安卓容器可以承担该云游戏A的渲染工作,并将渲染好的云游戏视频流下发给客户端,在客户端中播放该云游戏A的视频流。在上述现有技术中,客户端在同一时间仅能播放一个云游戏的视频流,即仅支持用户同时体验一个云游戏;当用户想要从云游戏A切换至云游戏B时,需要退出正在体验的云游戏A之后再启动云游戏B,想要再次切换至云游戏A时,需要退出正在体验的云游戏B之后再重新启动云游戏A,并重新向云服务器拉取视频流,造成云游戏的使用方式单一,且会降低云游戏的使用率。
发明内容
本申请实施例提供一种云游戏数据处理方法、装置、设备以及介质,可以丰富云游戏的使用方式,并提高云游戏的使用率。
本申请实施例一方面提供了一种云游戏数据处理方法,包括:
在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
本申请实施例一方面提供了一种云游戏数据处理方法,包括:
响应于终端设备的服务请求,向终端设备发送游戏页面;游戏页面包括用于输出第一云游戏所对应的第一视频流数据的主区域,以及用于输出第二云游戏所对应的第二视频流数据的第一辅区域,第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,更新游戏页面,向终端设备发送更新后的游戏页面;更新后的游戏页面包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
本申请实施例一方面提供了一种云游戏数据处理装置,包括:
输出模块,用于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
切换模块,用于响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
其中,输出模块还用于:
当主区域用于输出第一视频流数据时,获取第一云游戏对应的第一音频流数据,在主区域中播放第一音频流数据。
其中,该装置还包括:
云游戏显示模块,用于显示K个云游戏;K为大于1的正整数;
第一选取模块,用于响应针对K个云游戏的第一选取操作,在K个云游戏中,确定第一选取操作所触发的第一云游戏和第二云游戏,为第一云游戏添加主标识信息;主标识信息用于指示第一云游戏对应的第一视频流数据将被展示于主区域中;
云游戏启动模块,用于响应针对第一云游戏和第二云游戏的启动操作,启动第一云游戏和第二云游戏。
其中,该装置还包括:
列表显示模块,用于响应针对游戏页面的触发操作,显示云游戏列表;云游戏列表包括K个云游戏中除第一云游戏和第二云游戏之外的云游戏,K为大于1的正整数;
第二选取模块,用于响应针对云游戏列表的第二选取操作,启动第二选取操作所触发的第三云游戏,显示针对第三云游戏的显示区域提示信息;显示区域提示信息包括第一确认控件;
第一主画面确定模块,用于响应针对第一确认控件的触发操作,在游戏页面中添加第二辅区域,将主区域中的第二视频流数据切换输出至第二辅区域,在主区域中输出第三云游戏对应的第三视频流数据;第二辅区域与第一辅区域互不重叠。
其中,显示区域提示信息还包括第二确认控件;
该装置还包括:
第二主画面确定模块,用于响应针对第二确认控件的触发操作,在游戏页面中添加第三辅区域,在第三辅区域中输出第三云游戏对应的第三视频流数据,在主区域中继续输出第二视频流数据;第三辅区域与第一辅区域互不重叠。
其中,该装置还包括:
退出提示模块,用于响应针对游戏页面的退出操作,显示游戏退出提示信息;游戏退出提示信息包括保活控件;
页面隐藏模块,用于响应针对保活控件的触发操作,隐藏显示游戏页面;
第三选取操作,用于响应针对K个云游戏的第三选取操作,启动第三选取操作所触发的第四云游戏;K为大于1的正整数;
页面恢复模块,用于恢复游戏页面,在游戏页面中输出第一视频流数据、第二视频流数据,以及第四云游戏对应的第四视频流数据。
其中,游戏退出提示信息还包括关闭控件;
该装置还包括:
游戏退出模块,用于响应针对关闭控件的触发操作,关闭游戏页面,退出第一云游戏和第二云游戏。
其中,该装置还包括:
拖动模块,用于响应针对第一辅区域的拖动操作,在游戏页面中,将第一辅区域移动至拖动操作所确定的区域位置。
其中,该装置还包括:
尺寸调整模块,用于响应针对第一辅区域的尺寸调整操作,在游戏页面中,将第一辅区域的显示尺寸调整至尺寸调整操作所确定的目标尺寸,根据目标尺寸调整第一辅区域中所包含的第一视频流数据的显示尺寸。
其中,第一辅区域所包含的第二云游戏的数量为M个,M为正整数;
该装置还包括:
游戏分类模块,用于根据M个第二云游戏分别对应的类别标签,对M个第二云游戏所对应的第二视频流数据进行分类,得到N个视频流数据集合;一个视频流数据集合中所包含的第二视频流数据具有相同的类别标签,N为小于或等于M的正整数;
子区域新建模块,用于在第一辅区域中创建N个游戏子区域,建立N个游戏子区域与N个视频流数据集合之间的对应关系,基于对应关系,在N个游戏子区域中输出N个数据集合所包含的视频流数据;
则切换模块包括:
视频选取单元,用于响应针对第一辅区域中的目标游戏子区域的游戏触发操作,在目标游戏子区域所输出的第二视频流数据中,将游戏触发操作所确定的第二视频流数据确定为目标视频流数据;目标游戏子区域属于N个游戏子区域;
游戏切换显示单元,用于将目标视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
其中,游戏页面包括辅区域查看控件;
输出模块包括:
视频输出单元,用于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据;
辅区域显示单元,用于响应针对辅区域查看控件的查看操作,在游戏页面中显示第一辅区域,在第一辅区域中显示第二云游戏对应的第二视频流数据;
时长统计单元,用于统计第一辅区域在游戏页面中的显示时长,当显示时长达到时长阈值时,取消显示第一辅区域。
其中,该装置还包括:
标识显示模块,用于当检测到第一辅区域中的第一云游戏结束游戏任务时,在第一辅区域中显示针对第一视频流数据的切换标识信息;切换标识信息用于指示将第一云游戏对应的第一视频流数据重新切换输出至主区域。
本申请实施例一方面提供了一种云游戏数据处理装置,包括:
服务响应模块,用于响应于终端设备的服务请求,向终端设备发送游戏页面;游戏页面包括用于输出第一云游戏所对应的第一视频流数据的主区域,以及用于输出第二云游戏所对应的第二视频流数据的第一辅区域,第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
页面更新模块,用于当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,更新游戏页面,向终端设备发送更新后的游戏页面;更新后的游戏页面包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
其中,该装置还包括:
容器启动模块,用于接收第一云游戏对应的第一参数信息,以及第二云游戏对应的第二参数信息,根据第一参数信息启动与第一云游戏相匹配的第一容器,根据第二参数信息启动与第二云游戏相匹配的第二容器;
第一渲染模块,用于通过第一容器,对第一云游戏中的游戏场景数据进行渲染,得到渲染后的第一视频流数据和第一音频流数据;
第二渲染模块,用于通过第二容器,对第二云游戏中的游戏场景数据进行渲染,得到渲染后的第二视频流数据和第二音频流数据;
数据合并模块,用于当第一参数信息包括主标识信息时,将第二视频流数据合并至第一视频流数据,得到组合视频流数据,对组合视频流数据和第一音频流数据进行合并,生成游戏页面。
其中,容器启动模块包括:
权限确认单元,用于当第一参数信息和第二参数信息均满足试玩权限时,获取第一参数信息中的第一游戏标识,以及第二参数信息中的第二游戏标识;
容器启动单元,用于启动第一游戏标识对应的第一容器,以及第二游戏标识对应的第二容器。
其中,该装置还包括:
停止渲染模块,用于统计第一云游戏对应的游戏试玩时长,当游戏试玩时长达到第一云游戏对应的试玩时长阈值时,停止对第一云游戏中的游戏场景数据进行渲染。
本申请实施例一方面提供了一种计算机设备,包括存储器和处理器,存储器与处理器相连,存储器用于存储计算机程序,处理器用于调用计算机程序,以使得该计算机设备执行本申请实施例中上述一方面提供的方法。
本申请实施例一方面提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序适于由处理器加载并执行,以使得具有处理器的计算机设备执行本申请实施例中上述一方面提供的方法。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述一方面提供的方法。
本申请实施例可以在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据,其中第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;进而可以响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。可见,在云游戏场景中,可以将第一云游戏对应的第一视频流数据,以及第二云游戏对应的第二视频流数据展示在同一个游戏页面中,即用户可以同时体验多个云游戏,可以提高云游戏的使用率;在该游戏页面中还可以实时切换不同云游戏的视频流数据,进而可以丰富云游戏的使用方式。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种云游戏的处理系统的架构图;
图2是本申请实施例提供的一种云游戏场景示意图;
图3是本申请实施例提供的一种云游戏数据处理方法的流程示意图;
图4a和图4b是本申请实施例提供的一种移动辅区域位置的界面示意图;
图5是本申请实施例提供的一种游戏页面中的辅区域的位置示意图;
图6是本申请实施例提供的一种调整辅区域的显示尺寸的界面示意图;
图7是本申请实施例提供的一种游戏页面中的辅区域的展示示意图;
图8是本申请实施例提供的一种游戏页面中的辅区域的展示示意图;
图9是本申请实施例提供的一种启动云游戏的界面示意图;
图10是本申请实施例提供的一种启动云游戏的界面示意图;
图11是本申请实施例提供的一种云游戏数据处理方法的流程示意图;
图12是本申请实施例提供的一种不同云游戏的视频流数据之间的合并示意图;
图13是本申请实施例提供的一种云游戏的处理流程示意图;
图14是本申请实施例提供的一种云游戏数据处理装置的结构示意图;
图15是本申请实施例提供的一种云游戏数据处理装置的结构示意图;
图16是本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例涉及云技术(cloud technology)、云计算(cloud computing)、云游戏(cloud gaming)以及区块链(Block chain)。其中,云技术是指在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。云技术是基于云计算商业模式应用的网络技术、信息技术、整合技术、管理平台技术、应用技术等的总称,可以组成资源池,按需所用,灵活便利。云计算技术将变成重要支撑。技术网络系统的后台服务需要大量的计算、存储资源,如视频网站、图片类网站和更多的门户网站。伴随着互联网行业的高度发展和应用,将来每个物品都有可能存在自己的识别标志,都需要传输到后台系统进行逻辑处理,不同程度级别的数据将会分开处理,各类行业数据皆需要强大的系统后盾支撑,只能通过云计算来实现。
云计算是一种计算模式,它将计算任务分布在大量计算机构成的资源池上,使各种应用系统能够根据需要获取计算力、存储空间和信息服务。提供资源的网络被称为“云”。“云”中的资源在使用者看来是可以无限扩展的,并且可以随时获取,按需使用,随时扩展,按使用付费。作为云计算的基础能力提供商,会建立云计算资源池(简称云平台,一般称为IaaS(Infrastructure as a Service,基础设施即服务)平台,在资源池中部署多种类型的虚拟资源,供外部客户选择使用。云计算资源池中主要包括:计算设备(为虚拟化机器,包含操作系统)、存储设备、网络设备。在云游戏场景中,云服务器可以采用云计算将用户正在体验的云游戏场景渲染为音视频流,该音视频流可以传输至用户终端进行播放。
云游戏又可称为游戏点播(gaming on demand),是一种以云计算技术为基础的在线游戏技术。云游戏技术使图形处理与数据运算能力相对有限的轻端设备(thin client)能运行高品质游戏。在云游戏场景下,游戏并不在用户游戏终端,而是在云服务器中运行,并由云服务器将游戏场景渲染为视频音频流,通过网络传输给用户游戏终端。用户游戏终端无需拥有强大的图形运算与数据处理能力,仅需拥有基本的流媒体播放能力与获取用户输入指令并发送给云服务器的能力即可。用户在体验云游戏时,其本质是在对云游戏的游戏流(音频流和视频流)数据进行操作。
区块链是分布式数据存储,点对点传输,共识机制,加密算法等计算机技术的新型应用模型。区块链本质上是一个去中心化的数据库,是一串使用密码学相关联产生的数据块(又称区块),各个数据块之间通过随机散列(也称哈希算法)实现链接,后一个区块包含了前一个区块的加密散列、相应时间戳记以及交易数据(通常用默克尔树(Merkle tree)算法计算的散列值表示),这样的设计使得区块内容具有难以篡改的特性。用区块链技术所串接的分布式账本能让两方有效纪录交易,且可永久查验此交易。在云游戏场景中,可以将云游戏的游戏标识、用户标识以及云游戏的使用信息等数据上传至区块链,为后续统计云游戏的使用次数(云游戏的推广情况)提供真实可靠的信息记载。
本申请实施例还涉及如下几个概念:
长连接:长连接是指在一个连接上可以连续发送多个数据包,在连接保持期间,如果没有数据包发送,需要双方发送链路检测包。
Android(安卓)容器:Android容器可以是指将Android打包到容器镜像中,并通过标准容器镜像进行发布,载体可以是任意的支持OCI(Open Container Initiative,开放容器计划)标准的容器外壳,因此可以很轻松地通过k8s(kubernetes,可以是指为容器服务而生的一个可移植容器的编排管理工具)来运维,借助于k8s强大的运维工具,在云上可以运行几千台服务器集群。
分辨率:分辨率可以理解为屏幕分辨率,是指屏幕图像的精密度,该分辨率可以用于表示显示器所能显示的像素的多少,是终端(例如,手机)的重要参数之一,通常可以是指终端屏幕的宽和高。
请参见图1,图1是本申请实施例提供的一种云游戏的处理系统的架构图。如图1所示,该云游戏的处理系统可以包括终端设备10a、服务器10b以及云服务器10c。图1所示的云游戏的处理系统中终端设备和云服务器的数量仅为举例,例如,终端设备和云服务器的数量可以为多个,本申请不对终端设备和云服务器的数量进行限定。其中,终端设备10a可以是指玩家所使用的设备,此处的玩家可以是指已经体验过云游戏或者请求体验云游戏的用户,该终端设备10a中可以安装有一个或多个游戏客户端,每个游戏客户端可以集成有一个或者多个云游戏,本申请实施例中所涉及的游戏客户端均为具备云游戏能力的客户端;服务器10b可以是指游戏客户端对应的后台服务器,该服务器10b可以用于存储云游戏对应的游戏标识(Identity document,ID)、用户标识(ID)、用户试玩时长等信息。终端设备10a可以包括但不限于:智能手机(如Android手机、iOS手机等)、台式电脑、平板电脑、便携式个人计算机、移动互联网设备(Mobile Internet Devices,MID)以及可穿戴设备(例如智能手表、智能手环等)等设备,本申请实施例并不对终端设备10a的类型进行限定。服务器10b和云服务器10c均可以是独立的物理服务器,也可以是由多个物理服务器构成的服务器集群或者分布式系统,云服务器10c可以提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务。如图1所示,终端设备10a、服务器10b以及云服务器10c之间可以通过有线或无线方式进行直接或间接地通信连接,本申请实施例并不对终端设备10a、服务器10b以及云服务器10c之间的连接方式进行限定。
在图1所示的云游戏的处理系统中,云游戏的处理流程可以包括:终端设备10a可以分别与服务器10b、云服务器10c之间建立长连接,服务器10b与云服务器10c之间也可以建立长连接,即终端设备10a、服务器10b以及云服务器10c之间可以一直保持通信状态,终端设备10a可以通过游戏客户端启动用户所选择的一个或者多个云游戏,将需要启动的一个或多个云游戏所对应的游戏ID、用户ID等信息传输至服务器10b;进而服务器10b可以将游戏ID、用户ID等信息传递给云服务器10c,云服务器10c可以根据接收到的信息启动游戏ID对应的容器(例如,安卓容器),通过该容器内的渲染技术可以开始渲染云游戏中的游戏场景数据,以得到该云游戏对应的音频流数据和视频流数据。
由于用户可能想要同时体验多个云游戏,即终端设备10a需要同时启动多个云游戏,因此可以在云服务器10c侧新增云端设备管理系统,在该云端设备管理系统中,可以对启动的多个云游戏所对应的视频流数据进行合并,如从启动的多个云游戏中确定处于主画面的云游戏A,将其余云游戏的视频流数据合并到云游戏A的视频流数据中,即将其余云游戏的游戏画面填充到云游戏A的游戏画面上,得到合并后的云游戏视频流数据,进而可以将合并后的云游戏视频流数据下发至游戏客户端,并在终端设备10a中进行展示,即在终端设备10a的同一个页面中可以同时显示多个云游戏分别对应的游戏画面。
另外,终端设备10a可以通过所安装的游戏客户端与云服务器10c进行交互,获取包含一个或多个云游戏视频流的游戏页面,并向用户展示该游戏页面;游戏客户端可以测听用户在游戏页面中的各种操作(例如,针对云游戏执行的启动操作、针对云游戏执行的主画面确认操作、位置拖动操作,针对云游戏的切换操作等),并将这些操作发送至云服务器10c。云服务器10c通过与终端设备10a中的游戏客户端进行交互,可以响应于游戏客户端的各种请求为游戏客户端提供相应的云服务,此处的请求可以包括页面获取请求、操作请求等,提供的云服务可以包括提供游戏客户端所需的云游戏相关的各种页面,对不同云游戏的切换服务等。
请参见图2,图2是本申请实施例提供的一种云游戏场景示意图。如图2所示的当前界面可以为云服务页面20a,当用户所使用的终端设备(例如,上述图1所示的终端设备10a)中安装有游戏客户端时,该用户可以启动该终端设备中所安装的游戏客户端,进入游戏客户端的云服务页面20a;该云服务页面20a可以显示游戏客户端中集成的所有云游戏,例如游戏客户端所集成的云游戏可以包括云游戏1,云游戏2,云游戏3,云游戏4,……。当然,云服务页面20a中还可以为用户提供云游戏分类功能,如精品推荐,休闲类,竞技类,……,这样可以对游戏客户端所集成的所有云游戏进行筛选,有利于用户快速找到自己想要体验的云游戏;当用户对云服务页面20a中的精品推荐选项执行触发操作时,游戏客户端可以响应针对精品推荐选项的触发操作,根据每个云游戏分别对应的使用率、当前用户体验过的云游戏等信息,从游戏客户端所集成的所有云游戏中筛选出用户可能感兴趣的云游戏,并在云服务页面20a中对筛选出的云游戏进行推荐显示;当用户对云服务页面20a中的休闲类选项执行触发操作时,游戏客户端可以响应针对休闲类选项的触发操作,从游戏客户端所集成的所有云游戏中筛选出游戏类型属于休闲类游戏的云游戏,并在云服务页面20a中对筛选出的休闲类云游戏进行显示;当用户对云服务页面20a中的竞技类选项执行触发操作时,游戏客户端可以响应针对竞技类选项的触发操作,从游戏客户端所集成的所有云游戏中筛选出游戏类型属于竞技类游戏的云游戏,并在云服务页面20a中对筛选出的竞技类云游戏进行显示等。
当用户想要同时体验多个云游戏时,该用户可以在云服务页面20a中选择多个云游戏,并对所选择的多个云游戏同时执行启动操作,例如,用户可以长按云服务页面20a中的任意一个云游戏(当终端设备检测到用户在终端屏幕的接触点处于某个云游戏所在的区域时,可以统计用户按压终端屏幕的时长,若按压时长大于时长阈值,则可以将用户的此次操作称为长按操作),触发该云服务页面20a中的云游戏多选功能,此时用户可以在云服务页面20a中选择自己想要体验的云游戏,如选择云游戏1、云游戏2以及云游戏4。当用户完成云游戏的选择,并对云服务页面20a中的启动控件20b执行触发操作时,终端设备可以响应针对启动控件20b的触发操作(启动操作),在云服务页面20a中显示提示页面20c,该提示页面20c可以用于为用户提供指定游戏主画面的功能,如在该提示页面20c中可以显示用户所选择的云游戏1、云游戏2、云游戏4,以及确定控件等,此处的游戏主画面可以理解为:在用户同时体验多个云游戏时,可以选择其中一个云游戏作为主游戏,该主游戏所对应的游戏画面可以显示于整个游戏页面20d中(游戏主画面的显示尺寸可以大于其余云游戏的游戏画面的显示尺寸),其中主游戏对应的音频流数据也可以与视频流数据进行同步输出。
进一步地,当用户在提示页面20c中选择云游戏1,并对确定控件执行触发操作(例如,点击操作)时,终端设备可以同时启动云游戏1、云游戏2以及云游戏4,并通过游戏客户端所对应的后台服务器(如上述1所示的服务器10b)向云服务器传递上述三个云游戏(云游戏1、云游戏2、云游戏4)所对应的游戏ID、用户ID以及权重信息。其中,当用户在提示页面20c选择云游戏1作为游戏主画面时,可以为云游戏1添加主标识信息,该主标识信息可以展示于游戏客户端(如在游戏客户端中为云游戏1添加“主画面”等字符标记,或者为云游戏1添加文字说明等);当然,该主标识信息可以无需展示于游戏客户端,只需在后台数据中为云游戏1添加主标识信息,以区分云游戏1与其余所启动的云游戏。游戏客户端的后台服务器可以根据该主标识信息,为用户所启动的云游戏设置权重信息;在用户所启动的云游戏1、云游戏2以及云游戏4中,可以为携带主标识信息的云游戏1设置最高的权重信息,而云游戏2和云游戏4的权重信息可以相同,或者可以根据用户的选择顺序来确定,例如,先选择的云游戏可以具有更高的权重信息,当用户在云服务页面20a中选择云游戏的顺序为:云游戏2,云游戏1,云游戏4时,可以确定携带主标识信息的云游戏1的权重信息高于云游戏2的权重信息,云游戏2的权重信息高于或等于云游戏4的权重信息;本申请实施例中,只要确保用户所指定的游戏主画面具有最高的权重信息,不限定所启动的其余云游戏的权重信息之间的排序。需要说明的是,各云游戏所对应的权重信息可以用于指示云服务器在渲染游戏页面时,以携带最高权重信息的云游戏1作为游戏主画面,将其余云游戏的游戏画面合并至游戏主画面。通过为启动的各个云游戏设置权重信息,可以快速确定各个云游戏在游戏页面中的展示尺寸,使得云游戏1的展示尺寸大于其余云游戏的展示尺寸,进而在保证用户同时观看各个云游戏的游戏画面的同时,通过更大的展示尺寸可以增强用户与云游戏1之间的交互。
云服务器在获取到游戏ID、用户ID以及权重信息后,可以启动云游戏1对应的容器1,云游戏2对应的容器2,云游戏4对应的容器4,此处的容器1、容器2以及容器4均可以为安卓容器。通过容器1中的渲染技术可以对云游戏1的游戏场景进行渲染,生成该云游戏1对应的视频流数据和音频流数据;同理,通过容器2中的渲染技术可以生成云游戏2对应的视频流数据和音频流数据,通过容器4中的渲染技术可以生成云游戏4对应的视频流数据和音频流数据;其中,云游戏所对应的视频流数据可以由该云游戏中的一系列连续的图像帧数据组成,该视频流数据中的图像帧数据可以依次展示于游戏客户端中;云游戏所对应的音频流数据可以由该云游戏中的一系列连续的音频帧数据组成,当该云游戏作为游戏主画面时,可以在游戏页面中持续播放该云游戏所对应的音频流数据中的一系列音频帧数据。进一步地,云服务器可以将云游戏1、云游戏2以及云游戏4所对应的视频流数据和音频流数据传输至云端设备管理系统,云端设备管理系统可以将云游戏1、云游戏2以及云游戏4所对应的视频流进行合并,把云游戏2和云游戏4所对应的视频流合并到云游戏1所对应的视频流上。换言之,可以将云游戏2和云游戏4所对应的视频流中的帧数据填充到云游戏1所对应的游戏画面中,得到合并后的云游戏视频流数据,进而可以将合并后的云游戏视频流数据与云游戏1的音频流数据进行合并,生成游戏页面20d,该游戏页面20d可以下发至终端设备。需要说明的是,对于未被用户指定为游戏主画面的云游戏,它们的音频流数据均不会被合并至游戏页面,即游戏页面20d可以包括用户所启动的所有云游戏对应的视频流数据,但仅包含指定为主游戏的云游戏1所对应的音频流数据。
终端设备可以向云服务器请求获取游戏页面20d,并将该游戏页面20d展示给用户,该游戏页面20d可以包括主区域20e和辅区域20f,在主区域20e中可以输出云游戏1对应的视频流数据和音频流数据,即在主区域20e中显示云游戏1对应的游戏画面;在辅区域20f中可以输出云游戏2和云游戏4分别对应的视频流,即在辅区域20f中显示云游戏2和云游戏4分别对应的游戏画面,辅区域20f中的云游戏可以为处于保活状态的挂机游戏。用户可以对主区域20e和辅区域20e中所显示的游戏画面进行实时切换,当用户对辅区域20f中的云游戏2所对应的游戏画面执行触发操作时,游戏客户端可以响应针对云游戏2所对应的游戏画面的触发操作,将游戏2所对应的游戏画面切换显示至主区域20e,并在主区域20e中播放该云游戏2对应的音频流数据;与此同时,将云游戏1所对应的游戏画面切换显示至辅区域20f,并停止播放该云游戏1对应的音频流数据。换言之,用户只需对位于辅区域20f中的游戏画面执行触发操作(例如,点击操作),就可以实现不同云游戏之间的游戏画面交换过程,进而可以提高不同云游戏之间的切换效率,从而可以提高云游戏的使用率。
请参见图3,图3是本申请实施例提供的一种云游戏数据处理方法的流程示意图。该云游戏数据处理方法可以由上述图1所示的终端设备10a执行;如图3所示,该云游戏数据处理方法可以包括以下步骤S101-步骤S102:
步骤S101,在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸。
具体的,当用户想要同时体验多个不同的云游戏时,可以通过自己使用的终端设备启动多个云游戏,此时多个云游戏所对应的游戏画面都可以渲染在同一个游戏页面(例如,上述图2所对应实施例中的游戏页面20d)中,用户在这一个游戏页面中可以同时体验多个云游戏。当用户在终端设备中同时体验第一云游戏和第二云游戏时,游戏页面中可以显示第一云游戏和第二云游戏分别对应的游戏画面,即该游戏页面可以同时输出第一云游戏和第二云游戏分别对应的视频流数据;为便于理解,后续可以将第一云游戏对应的视频流数据称为第一视频流数据,将第二云游戏对应的视频流数据称为第二视频流数据。其中,上述游戏页面可以被划分为主区域和辅区域(为方面描述,此处的辅区域可以称为第一辅区域),主区域在游戏页面中的显示尺寸大于第一辅区域在游戏页面中的显示尺寸,主区域和第一辅区域可以用于输出不同的云游戏所对应的视频流数据;对于主区域具体用于输出哪一个云游戏对应的视频流数据,可以由用户来指定,若用户在启动第一云游戏和第二云游戏时,指定第一云游戏作为游戏主画面,则终端设备在启动第一云游戏和第二云游戏后,可以在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在第一辅区域中输出第二云游戏对应的第二视频流数据。可以理解的是,各个云游戏所对应的视频流数据都是由多帧图片数据整合而成的,上述游戏页面可以理解为在第一视频流数据的图像帧数据中,预留一个区域进行第二视频流数据的图像帧数据的填充,这个预留的区域可以称为第一辅区域。
可选的,当游戏页面中的主区域用于输出第一视频流数据时,终端设备可以获取第一云游戏对应的第一音频流数据,并在主区域中同步播放第一音频流数据。换言之,对于主区域中所展示的第一云游戏,其对应的第一音频流数据可以与第一视频流数据进行同步输出;对于第一辅区域中所展示的第二云游戏,不能在游戏页面中播放第二云游戏对应的第二音频流数据。
可选的,用户启动第一云游戏和第二云游戏的过程可以包括:用户可以启动终端设备中所安装的游戏客户端,该游戏客户端中可以集成有K个云游戏,该N可以为大于1的正整数,如K可以取值为2,3,……,在该游戏客户端中可以显示K个云游戏;当用户对游戏客户端中的K个云游戏执行选取操作时,终端设备可以响应针对K个云游戏的第一选取操作,在游戏客户端的K个云游戏中,确定第一选取操作所确定的第一云游戏和第二云游戏,为第一云游戏添加主标识信息,进而可以响应针对第一云游戏和第二云游戏的启动操作,启动第一云游戏和第二云游戏。其中,该主标识信息可以用于指示第一云游戏对应的第一视频流数据将被展示于主区域中;换言之,该主标识信息可以作为为所启动的第一云游戏和第二云游戏设置权重信息的依据,携带主标识信息的第一云游戏的权重信息可以高于未携带主标识信息的第二云游戏的权重信息;该主标识信息可以展示在终端设备中,也可以不在终端设备中进行展示,仅在后台数据中对第一云游戏添加主标识信息,该主标识信息包括但不限于:“主画面”字符标记、文字说明、特殊符号(例如,五角星、三角形等符号标记)、显示颜色(例如,区分于其余云游戏的显示颜色);本申请实施例对主标识信息的类型不做限定。通过从所启动的多个云游戏中选择一个云游戏添加主标识信息,可以对所启动的多个云游戏进行区分,并从多个云游戏中快速确定用户想要进行游戏交互的第一云游戏,进而可以提高用户与第一云游戏之间的游戏交互效率。
其中,上述第一选取操作可以为多选操作,即用户想要同时体验第一云游戏和第二云游戏时,可以在游戏客户端所集成的K个云游戏中选择第一云游戏和第二云游戏,并在第一云游戏和第二云游戏中指定第一云游戏为游戏主画面,此时终端设备可以为第一云游戏添加主标识信息;当用户对第一云游戏和第二云游戏执行启动操作时,终端设备可以通过游戏客户端启动第一云游戏和第二云游戏,进而可以在游戏客户端中显示上述包含第一视频流数据和第二视频流数据的游戏页面。可选的,用户在选择第一云游戏和第二云游戏的当前页面中,直接指定将第一云游戏作为游戏主画面,以便于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据。可选的,用户在选择第一云游戏和第二云游戏时,可以暂时不指定哪一个云游戏为游戏主画面,而是直接对第一云游戏和第二云游戏执行启动操作,终端设备在检测到用户的启动操作后,可以在游戏客户端中弹出提示页面,在该提示页面中用户可以指定将第一云游戏作为游戏主画面并进行确认,进而可以在游戏客户端中显示包含第一视频流数据和第二视频流数据的游戏页面(具体如上述图2所示);本申请对用户指定游戏主画面的方式以及时机不做限定。
可选的,用户可以在游戏页面中移动第一辅区域的位置。当用户对游戏页面中的第一辅区域执行拖动操作时,终端设备可以响应针对第一辅区域的拖动操作,在该游戏页面中,将第一辅区域移动至拖动操作所确定的区域位置。用户在拖动第一辅区域的过程中,终端设备可以实时测听用户在终端屏幕上的手势轨迹,进而记录第一辅区域在游戏页面中需要拖动的坐标位置,并将该坐标位置上传至云服务器,云服务器可以在云端设备管理系统中,根据该坐标位置调整第一辅区域中的第一视频流数据合并至第二视频流数据中的位置,即基于终端设备上传的坐标位置,实时调整第一辅区域中的第一云游戏在游戏页面中的画面显示位置,生成新的游戏页面,并将新的游戏页面返回给终端设备,在终端设备中可以将返回的新的游戏页面展示给用户。本申请实施例中,用户可以根据自身习惯对游戏页面中的第一辅区域进行拖拉,可以丰富多个云游戏在游戏页面中的展示形式。
请一并参见图4a和图4b,图4a和图4b是本申请实施例提供的一种移动辅区域位置的界面示意图。如图4a所示的游戏页面30a中可以输出云游戏1、云游戏2以及云游戏3分别对应的视频流数据,其中云游戏1可以作为第一云游戏展示于游戏页面30a的主区域中,云游戏2和云游戏3都作为第二云游戏展示于游戏页面30a的第一辅区域中,此时的第一辅区域包括云游戏2和云游戏3分别对应的游戏画面,且此时的第一辅区域位于游戏页面30a中的区域位置30b;当用户对游戏页面30a中的第一辅区域执行拖动操作(例如,按住第一辅区域并拖动)时,终端设备可以响应针对第一辅区域的拖动操作,根据用户的拖动轨迹,在游戏页面30a中显示第一辅区域;若用户停止拖动时,第一辅区域停止在游戏页面30a中的区域位置30c,则可以将第一辅区域移动至区域位置30c进行显示。其中,在用户完成对第一辅区域的拖动操作后,第一辅区域可以从游戏页面30a中的区域位置30b移动至区域位置30c,而第一辅区域在游戏页面30a中的移动轨迹与用户的拖动轨迹相同,如第一辅区域从区域位置30b移动至区域位置30c的轨迹可以为轨迹30d、轨迹30e、轨迹30f等轨迹中的任意一条轨迹。
需要说明的是,若第一辅区域包括两个及两个以上云游戏的游戏画面,且第一辅区域靠近游戏页面30a的短边(例如,BC边、AD边),则可以将第一辅区域中的游戏画面进行列排列,如区域位置30c处展示的云游戏2和云游戏3;若第一辅区域包括两个及两个以上云游戏的游戏画面,且第一辅区域靠近游戏页面30a的长边(例如,AB边、DC边,可以通过计算第一辅区域的中心点与各边的距离来确定第一辅区域更靠近哪一条边),则可以将第一辅区域中的游戏画面进行行排列,如图4b所示,当用户停止拖动第一辅区域时,第一辅区域停止在游戏页面30a中的区域位置30g时,可以在区域位置30g处展示第一辅区域,且第一辅区域中的云游戏2和云游戏3以行排列的形式进行展示。
可选的,请一并参见图5,图5是本申请实施例提供的一种游戏页面中的辅区域的位置示意图。如图5所示,可以在游戏页面40a中预先设置4个用于显示第一辅区域的候选区域,分别为候选区域40b、候选区域40c、候选区域40d以及候选区域40f。当用户拖动游戏页面40a中的第一辅区域时,第一辅区域的中心点不处于上述候选区域40b、候选区域40c、候选区域40d以及候选区域40f中的任意一个候选区域范围内,可以确定此次拖动失败,第一辅区域返回至拖动之前的位置;当用户停止拖动游戏页面40a中的第一辅区域时,第一辅区域的中心点处于上述候选区域40b、候选区域40c、候选区域40d以及候选区域40f中的任意一个候选区域范围内,可以确定此次拖动成功,第一辅区域可以移动至拖动停止时所在的候选区域内,如用户停止拖动时,第一辅区域的中心点位于候选区域40f的范围内,可以将第一辅区域移动至候选区域40f进行展示。
可选的,用户还可以在游戏页面中他手动调整第一辅区域的显示尺寸。当用户对游戏页面中的第一辅区域进行尺寸调整时,终端设备可以响应针对第一辅区域的尺寸调整操作,在游戏页面中,将第一辅区域的显示尺寸调整至尺寸调整操作所确定的目标尺寸,根据目标尺寸调整第一辅区域中所包含的第一视频流数据的显示尺寸;其中,尺寸调整操作可以包括但不限于:对第一辅区域的边进行拉取,手动输入针对第一辅区域的宽和高,通过手势进行尺寸调整(例如,用户可以将两根手指放在游戏页面的第一辅区域上,通过改变两根手指之间的距离,以调整第一辅区域在游戏页面中的显示尺寸)。可选的,当第一辅区域中包含多个云游戏所对应的游戏画面时,用户可以只对第一辅区域中的一个游戏画面进行尺寸调整,即第一辅区域中所包含的游戏画面可以具有不同的显示尺寸;或者,用户在对其中一个游戏画面进行尺寸调整时,第一辅区域中的其余游戏画面均可以进行同步调整,即第一辅区域中所包含的游戏画面均保持相同的显示尺寸。用户对第一辅区域进行尺寸调整的过程中,终端设备可以实时测听用户在终端屏幕上的用户手势或触发操作范围等信息,并将用户手势或触发操作范围等信息转换为指令信息,将指令信息上传至云服务器,云服务器可以在云端设备管理系统中,根据指令信息调整第一辅区域中的第一视频流数据合并至第二视频流数据中的区域范围,生成新的游戏页面,将新的游戏页面返回至终端设备,在该终端设备中可以将新的游戏页面展示给用户。本申请实施例中,用户可以根据实际需求对游戏页面中的第一辅区域进行尺寸调整,可以丰富多个云游戏在游戏页面中的展示形式,并增强用户在同时体验多个云游戏时的操作性和互动性。
可选的,请参见图6,图6是本申请实施例提供的一种调整辅区域的显示尺寸的界面示意图。如图6所示,游戏页面50a可以输出云游戏1(第一云游戏)、云游戏2以及云游戏3分别对应的视频流数据,在第一辅区域50b中显示第二云游戏(包括云游戏2和云游戏3)所对应的游戏画面。当用户选中第一辅区域50b的对角,并沿着箭头50c的方向进行拉取时,终端设备可以响应该用户针对第一辅区域50b的拉取操作(可以理解为上述尺寸调整操作),扩大第一辅区域50b的显示尺寸,当用户停止拉取时,可以停止调整第一辅区域50b的显示尺寸,调整显示尺寸后的第一辅区域如第一辅区域50d所示。可选的,当用户沿着箭头50c的反方向进行拉取时,可以缩小第一辅区域50b的显示尺寸。
可选的,若第一辅区域用户包含M个第二云游戏(M为正整数,如M可以取值为1,2,…)分别对应的第二视频流数据时,根据M个第二云游戏分别对应的类别标签,对M个第二云游戏所对应的第二视频流数据进行分类,得到N个视频流数据集合;一个视频流数据集合中可以包括一个或者多个第二云游戏对应的第二视频流数据,同一个视频流数据集合中所包含的所有第二视频流数据具有相同的类别标签,N为小于或等于M的正整数;在第一辅区域中创建N个游戏子区域,建立N个游戏子区域与N个视频流数据集合之间的对应关系,基于对应关系,在N个游戏子区域中输出N个数据集合所包含的视频流数据;一个游戏子区域可以用于输出一个视频流数据集合中所包含的每个第二云游戏分别对应的第二视频流数据。换言之,在第二辅区域中,可以对M个第二云游戏进行分类,具有相同类别标签的第二云游戏可以划分到同一个集合中,具有不同类别标签的第二云游戏需要划分到不同的集合中,此处的游戏子区域类似于文件夹的功能,将具有相同类别标签的第二云游戏进行集中展示,将具有不同类别标签的第二云游戏进行分散展示,可以提高针对游戏页面中所包含的N个第二云游戏的管理有效性。
请一并参见图7,图7是本申请实施例提供的一种游戏页面中的辅区域的展示示意图。如图7所示的游戏页面60a的主区域用于输出云游戏1(即上述第一云游戏)对应的视频流数据,游戏页面60a中的第一辅区域60b可以包括5个第二云游戏,分别为云游戏2、云游戏3、云游戏4、云游戏5以及云游戏6。若云游戏2、云游戏3以及云游戏4所对应的类别标签均为:休闲,云游戏5和云游戏6所对应的类别标签均为:竞技,则可以将云游戏2、云游戏3以及云游戏4分别对应的视频流数据组成视频流数据集合1,在第一辅区域60b中创建游戏子区域60c,在游戏子区域60c中输出云游戏2、云游戏3以及云游戏4分别对应的视频流数据;同理,可以将云游戏5和云游戏6所对应的视频流数据组成视频流数据集合2,在第一辅区域60b中创建游戏子区域60d,在游戏子区域60d中输出云游戏5和云游戏6分别对应的视频流数据。
可选的,在游戏页面中可以采用沉浸式体验,在游戏页面中增加一个辅区域查看控件(例如,一个按钮),用户可以通过触发该辅区域查看控件,来控制第一辅区域在游戏页面中的显示状态。在触发辅区域查看控件之前,游戏页面可以显示第一云游戏对应的游戏画面和辅区域查看控件,即在游戏页面的主区域中输出第一云游戏对应的第一视频流数据;当用户对辅区域查看控件执行触发操作时,终端设备可以响应针对辅区域查看控件的查看操作,在游戏页面中显示第一辅区域,在第一辅区域中显示第二云游戏对应的第二视频流数据;统计第一辅区域在游戏页面中的显示时长,当显示时长达到时长阈值时,取消显示第一辅区域。
可选的,用户可以再次触发辅区域查看控件,或者点击游戏页面的任一位置,在游戏页面中取消显示第一辅区域;或者可以统计第一辅区域每一次在游戏页面中的显示时长,当显示时长超过时长阈值(例如,10秒)时,可以自动取消显示第一辅区域,此处的显示时长可以从第一辅区域在游戏页面中进行显示起开始计时,在游戏页面中取消显示后,该次统计的显示时长会被清除;第一辅区域下一次显示于游戏页面中时,可以进行新一轮的显示时长统计。
请一并参见图8,图8是本申请实施例提供的一种游戏页面中的辅区域的展示示意图。如图8所示的游戏页面70a中的主区域用于输出云游戏1(即上述第一云游戏)对应的视频流数据,在该游戏页面70a中还包括按钮70b(上述辅区域查看控件);当用户对按钮70b执行触发操作时,终端设备可以响应针对按钮70b的触发操作(例如,点击操作,目的在于查看第一辅区域中所输出的第二视频流数据),在游戏页面70a中显示第一辅区域70c,在该第一辅区域70a中输出云游戏2和云游戏3分别对应的视频流数据,此处的云游戏2和云游戏3可以称为第二云游戏。
可选的,可以在游戏页面中隐藏显示第一辅区域,当用户接触终端屏幕,且接触点处于触发区域时,可以在游戏页面中显示第一辅区域,在第一辅区域中输出第二云游戏对应的第二视频流数据;当接触点离开触发区域时,在游戏页面中取消显示第一辅区域;上述触发区域可以为第一辅区域在游戏页面中的显示区域。
步骤S102,响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
具体的,在游戏页面中,用户可以对主区域中的第一视频流数据和第一辅区域中的第二视频流数据进行切换。当用户对第一辅区域中的第二视频流数据执行触发操作时,终端设备可以响应针对第一辅区域中的游戏触发操作,将游戏触发操作所触发的第二视频流数据切换输出至主区域,将原本处于主区域中的第一视频流数据切换输出至第一辅区域。可以理解的是,用户可以根据自身游戏体验效果,实时切换主区域和第一辅区域中的云游戏。
可选的,若在切换之前,主区域中正在播放第一云游戏对应的第一音频流数据,则在第一视频流数据切换至第一辅区域后,取消播放第一音频流数据,切换成第二云游戏对应的第二音频流数据。
可选的,若第一辅区域包括N个游戏子区域,每个游戏子区域中均可以包括一个或多个第二视频流数据,则用户可以对第一辅区域中的任意一个第二视频流数据执行游戏触发操作。终端设备可以响应针对第一辅区域中的目标游戏子区域的游戏触发操作,在目标游戏子区域所输出的第二视频流数据中,将游戏触发操作所确定的第二视频流数据确定为目标视频流数据,其中目标游戏子区域为N个游戏子区域中的任意一个游戏子区域;进而可以将目标视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。换言之,第一辅区域中包含多个第二视频流数据时,每次切换都只能选择第一辅区域中的一个第二视频流数据,与主区域中的第一视频流数据进行切换。
可选的,若用户在体验第一云游戏和第二云游戏的过程中,还想要启动一个新的云游戏,此时用户可以对游戏页面执行触发操作,此处的触发操作可以包括但不限于:点击游戏页面,触发游戏页面中的新增游戏控件;其中,该新增游戏控件可以为显示于游戏页面中的一个功能控件,通过触发该新增游戏控件,用户可以直接在游戏页面中启动新的云游戏,而无需退出当前游戏页面,或者最小化游戏页面,可以提高云游戏的启动效率。终端设备可以响应针对游戏页面的触发操作,显示云游戏列表,该云游戏列表可以包括K个云游戏中除第一云游戏和第二云游戏之外的其余云游戏;响应针对云游戏列表的第二选取操作,启动第二选取操作所触发的第三云游戏,显示针对第三云游戏的显示区域提示信息;显示区域提示信息包括第一确认控件(例如,“是”控件)和第二确认控件(例如,“否”控件);当用户对显示区域提示信息中的第一确认控件执行触发操作时,终端设备可以响应针对第一确认控件的触发操作,在游戏页面中添加第二辅区域,将主区域中的第二视频流数据切换输出至第二辅区域,在主区域中输出第三云游戏对应的第三视频流数据,第二辅区域与第一辅区域互不重叠;当用户对显示区域提示信息中的第二确认控件执行触发操作时,终端设备可以响应针对第二确认控件的触发操作,在游戏页面中添加第三辅区域,在第三辅区域中输出第三云游戏对应的第三视频流数据,在主区域中继续输出第二视频流数据,第三辅区域与第一辅区域互不重叠。其中,第二辅区域和第三辅区域可以看成是同一个辅区域,其作用是为了显示新启动的云游戏所对应的视频流数据,即在游戏页面中增加一个游戏画面。
请一并参见图9,图9是本申请实施例提供的一种启动云游戏的界面示意图。如图9所示的游戏页面80a中的主区域用于输出云游戏1对应的视频流数据,游戏页面80a中的第一辅区域80b用于输出云游戏2对应的视频流数据。当用户还想要启动新的云游戏时,可以点击游戏页面80a(可以理解为对游戏页面80a执行触发操作),在该游戏页面80a中显示云游戏列表80c,该云游戏列表80c中可以包括终端设备所安装的游戏客户端中所有未启动的云游戏,如云游戏列表80c可以包括:云游戏3,云游戏4,云游戏5,云游戏6等,云游戏列表80c中的每个云游戏均可以对应一个启动控件。当用户对选中云游戏3,并对云游戏3所对应的启动控件执行触发操作时,终端设备可以响应针对云游戏3的启动操作,启动云游戏3,在游戏页面80a中取消显示云游戏列表80c,同时可以弹出显示区域提示信息80e(如“选择当前游戏为游戏主画面”,此处的当前游戏应当为终端设备刚启动的云游戏3),在该显示区域提示信息80e中可以包括“是”控件(上述第一确认控件)和“否”控件(上述第二确认控件)。
当用户对区域提示信息80e中的“是”控件执行触发操作时,终端设备可以响应针对“是”控件的触发操作,在游戏页面80a中增加第二辅区域80d,将云游戏1对应的视频流数据切换输出至第二辅区域80d,在游戏页面80a的主区域中输出云游戏3对应的视频流数据(上述第三视频流数据)。当用户对区域提示信息80e中的“否”控件执行触发操作时,终端设备可以响应针对“否”控件的触发操作,在游戏页面80a中增加第二辅区域80d,在第二辅区域80d中输出云游戏3对应的视频流数据,在游戏页面80a的主区域中继续输出云游戏1对应的视频流数据。
可选的,用户还可以通知云服务器将游戏页面中的云游戏处于保活状态,进而对游戏页面进行最小化处理,随后可以启动新的云游戏。当用户对游戏页面中的关闭控件执行触发操作时,终端设备可以响应针对游戏页面的退出操作,显示游戏退出提示信息,该游戏退出提示信息可以包括保活控件和关闭控件。当用户对游戏退出提示信息中的保活控件执行触发操作时,终端设备可以响应针对保活控件的触发操作,隐藏显示游戏页面,进而可以响应针对K个云游戏的第三选取操作,启动第三选取操作所触发的第四云游戏,恢复游戏页面,在游戏页面中输出第一视频流数据、第二视频流数据,以及第四云游戏对应的第四视频流数据;恢复游戏页面后,同样可以显示区域提示信息,以指示用户从第一云游戏、第二云游戏以及第二云游戏中选择游戏主画面,具体操作过程可以参见上述图9所对应实施例中的描述。当用户对游戏推出提示信息中的关闭控件执行触发操作时,终端设备可以响应针对关闭控件的触发操作,关闭游戏页面,退出第一云游戏和第二云游戏。通过在游戏客户端设置保活控件,可以为用户在游戏客户端中同时启动多个云游戏提供功能支撑,若用户正在体验一个或多个云游戏时需要暂时退出当前显示的游戏页面,在该游戏客户端中执行其余操作(例如,需要查看游戏客户端中的消息通知等),可以将游戏客户端中所启动的一个或多个云游戏保持在保活状态,当用户完成其余操作后想要重新体验上述一个或多个云游戏时,可以直接恢复游戏页面,避免对游戏客户端中的云游戏进行反复启动,进而可以减少游戏客户端中云游戏的启动准备时间,从而可以提高云游戏的使用效率。
请一并参见图10,图10是本申请实施例提供的一种启动云游戏的界面示意图。如图10所示的游戏页面90a中的主区域用于输出云游戏1对应的视频流数据,游戏页面90a中的第一辅区域90b用于输出云游戏2对应的视频流数据。当用户还想要启动新的云游戏时,可以对游戏页面90a中的关闭控件90c执行触发操作,终端设备可以响应针对关闭控件90c的触发操作,在游戏页面90a中显示游戏退出提示信息90e(例如“确定要退出游戏吗”),该游戏退出提示信息90e可以包括关闭控件和保活控件。当用户对保活控件执行触发操作时,终端设备可以隐藏显示游戏页面90a,返回至游戏客户端的云服务页面90f,该云服务页面90f中可以显示游戏客户端所集成的所有云游戏,对于已经启动的云游戏,可以为其添加“已启动”标识,如云游戏1和云游戏2;对于未启动的云游戏,每个未启动的云游戏均可以对应一个启动控件,当用户选中云游戏4,并对云游戏4对应的启动控件执行触发操作时,终端设备可以响应针对云游戏4的触发操作,启动云游戏4,进而可以为用户提供区域显示提示信息,当用户选择云游戏4作为游戏主画面时,可以在游戏页面90a中新增一个辅区域90g,将云游戏1对应的视频流数据切换显示至辅区域90g,在游戏页面90a的主区域中输出云游戏4对应的视频流数据(上述第四视频流数据)。
可选的,可以增加图像识别服务,通过该图像识别服务实时检测各辅区域中的视频流数据,当通过图像识别服务检测到各辅区域中存在云游戏完成游戏任务,则可以在该云游戏对应的视频画面中添加切换标识信息,以提示用户可以将该云游戏切换输出至主区域。例如,当检测到第一辅区域中的第一云游戏结束游戏任务时,可以在第一辅区域中显示针对第一视频流数据的切换标识信息,该切换标识信息用于指示将第一云游戏对应的第一视频流数据重新切换输出至主区域。举例来说,用户体验主区域中的云游戏A时开启了一个任务并开始打怪,此时用户可以将游戏B切换显示至主区域,开始体验游戏B,此时游戏A的游戏画面可以被图像识别服务进行实时监测;当检测到游戏A的游戏画面完成打怪时,可以在游戏A的游戏画面中添加切换标识信息,以提示用户游戏A的打怪任务已完成,可以将游戏A重新切换至主区域,开始新的游戏任务。其中,切换标识信息可以包括但不限于:圆点(为了突出显示该圆点,可以具有不同于游戏画面的颜色)、语音播报信息、对相应的游戏画面边框进行加粗显示、对相应的游戏画面进行闪动;本申请实施例对切换标识信息在其对应的游戏画面中的显示形式和显示位置不做限定。通过为结束游戏任务的第一云游戏所对应的第一视频流数据添加切换标识信息,实时提醒用户对第一辅区域中的第一视频流数据进行画面切换,可以避免用户错过第一云游戏中新的游戏任务的开启时间,或者减少用户由于无法确定游戏任务进程而反复切换游戏画面的次数,提高了用户在体验云游戏时的操作性和互动性,更适配云游戏场景的用户体验需求,提升了云游戏的使用体验。
本申请实施例中,通过对第一云游戏和第二云游戏所对应的视频流数据进行合并,将第一云游戏对应的第一视频流数据,以及第二云游戏对应的第二视频流数据展示在同一个游戏页面中,即用户可以通过一个终端设备就可以同时体验多个云游戏,可以提高云游戏的使用率;用户可以在该游戏页面中实时切换多个云游戏的视频流数据,即实时切换多个云游戏所对应的游戏画面,进而可以丰富云游戏的使用方式,提升了云游戏的体验和玩法。
请参见图11,图11是本申请实施例提供的一种云游戏数据处理方法的流程示意图。该云游戏数据处理方法可以由上述图1所示的云服务器10c执行;如图11所示,该云游戏数据处理方法可以包括以下步骤S201-步骤S206:
步骤S201,接收第一云游戏对应的第一参数信息,以及第二云游戏对应的第二参数信息,根据第一参数信息启动与第一云游戏相匹配的第一容器,根据第二参数信息启动与第二云游戏相匹配的第二容器。
具体的,当终端设备同时启动第一云游戏和第二云游戏时,终端设备可以将第一云游戏对应的第一游戏标识(ID)、第二云游戏对应的第二游戏标识以及登录第一云游戏和第二云游戏的用户标识等参数信息传递给游戏客户端对应的后台服务器(也可以称为客户端服务器)。游戏客户端的用户数据均存储在客户端服务器,因此客户端服务器可以根据游戏标识和用户标识,确定用户标识针对各个云游戏的试玩权限,还可以根据主标识信息确定各个云游戏分别对应的权重信息,如携带主标识信息的云游戏具有最高的权重信息,未携带主标识信息的云游戏的权重信息可以相同,也可以不相同。客户端服务器可以将第一游戏标识、用户标识以及第一云游戏的权重信息等基础信息,作为第一云游戏对应的第一参数信息,将第二游戏标识、用户标识以及第二云游戏的权重信息等基础信息,作为第二云游戏对应的第二参数信息;进而可以将第一参数信息和第二参数信息传递给云服务器。可选的,传递给云服务器的第一参数信息中可以不包括第一云游戏的权重信息,并将主标识信息添加至第一参数信息;传递给云服务器的第二参数信息中可以不包括第二云游戏的权重信息;后续可以根据参数信息中是否包含主标识信息,来确定作为游戏主画面的云游戏。
云服务器可以接收第一参数信息和第二参数信息,当第一参数信息满足第一云游戏的试玩权限时,可以获取第一参数信息中的第一游戏标识,启动第一游戏标识对应的第一容器;当第二参数信息满足第二云游戏的试玩权限时,可以获取第二参数信息中的第二游戏标识,启动第二游戏标识对应的第二容器。其中,一个云游戏可以对应一个容器,在容器中可以进行云游戏的初始化工作,容器的渲染技术可以采用容器内渲染的技术,在容器内可以直接访问GPU(graphics processing unit,图像处理器),GPU具有高并发的计算能力,可以直接在容器内完成渲染,进而可以提升渲染性能,降低渲染带来的延迟,一个容器可以理解为一个完整的系统。
步骤S202,通过第一容器,对第一云游戏中的游戏场景数据进行渲染,得到渲染后的第一视频流数据和第一音频流数据。
具体的,在启动第一容器后,可以在第一容器内进行第一云游戏的初始化工作,采用第一容器内的渲染技术,对第一云游戏中的游戏场景数据进行渲染,输出第一云游戏对应的第一视频流数据和第一音频流数据。
步骤S203,通过第二容器,对第二云游戏中的游戏场景数据进行渲染,得到渲染后的第二视频流数据和第二音频流数据。
具体的,在启动第二容器后,可以在第二容器内进行第二云游戏的初始化工作,采用第二容器内的渲染技术,对第二云游戏中的游戏场景数据进行渲染,输出第二云游戏对应的第二视频流数据和第二音频流数据。
步骤S204,当第一参数信息包括主标识信息时,将第二视频流数据合并至第一视频流数据,得到组合视频流数据,对组合视频流数据和第一音频流数据进行合并,生成游戏页面。
具体的,云服务器可以将第一容器输出的第一视频流数据和第一音频流数据,以及第二容器输出的第二视频流数据和第二音频流数据均传输至云端设备管理系统,该云端设备管理系统可以用于管理游戏客户端中所启动的所有云游戏所对应的音频流数据和视频流数据。当第一参数信息包括主标识信息时,可以确定第一云游戏的权重信息高于第二云游戏的权重信息,该第一云游戏可以作为游戏主画面。可选的,第一参数信息可以包含第一云游戏的权重信息,第二参数信息可以包含第二云游戏的权重信息,当第一参数信息中的权重信息高于第二参数信息中的权重信息时,可以将第一云游戏作为游戏主画面。
进一步地,通过云端设备管理设备,将第二云游戏的第二视频流数据合并至第一云游戏的第一视频流数据,生成组合视频流数据,还可以对组合视频流数据和第一音频流数据进行合并,生成游戏页面,该游戏页面可以下发至游戏客户端,并在终端设备中展示给用户。
步骤S205,响应于终端设备的服务请求,向终端设备发送游戏页面;游戏页面包括用于输出第一云游戏所对应的第一视频流数据的主区域,以及用于输出第二云游戏所对应的第二视频流数据的第一辅区域,第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸。
具体的,当云服务器接收到终端设备的服务请求时,该云服务器可以将生成的游戏页面返回至终端设备;其中,该游戏页面可以包括用于输出第一视频数据的主区域,以及用于输出第二视频流数据的第一辅区域;另外,游戏页面的主区域中还可以播放第一云游戏对应的第一音频流数据,第一云游戏和第二云游戏为不同的云游戏,主区域在游戏页面中的显示尺寸大于第一辅区域在游戏页面中的显示尺寸。
步骤S206,当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,更新游戏页面,向终端设备发送更新后的游戏页面;更新后的游戏页面包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
具体的,当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,云服务器可以接收终端设备发送的切换指令,对游戏页面进行更新,得到更新后的游戏页面,并将更新后的游戏页面返回至终端设备;其中,更新后的游戏页面可以包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
其中,游戏页面的更新过程可以包括:通过云端设备管理系统,将第一视频流数据合并至第二视频流数据,生成更新后的组合视频流数据,还可以对更新后的组合视频流数据和第二音频流数据进行合并,生成更新后的游戏页面。
可选的,云服务器可以统计第一云游戏对应的游戏试玩时长,当游戏试玩时长达到第一云游戏对应的试玩时长阈值时,停止对第一云游戏中的游戏场景数据进行渲染。例如,用户只能试玩第一云游戏1个小时,当用户玩到一个小时时,该用户无法再继续进行游戏,此时云服务器可以停止渲染第一云游戏中的游戏场景数据。
可选的,当用户想要同时体验不同游戏客户端中的云游戏时,可以分别进入不同的游戏客户端,并启动相应的云游戏;如可以启动游戏客户端1中的游戏1与游戏客户端中的游戏2,游戏客户端1和游戏客户端2均可以与云服务器进行交互,云服务器可以启动游戏1对应的容器1,以及游戏2对应的容器2;通过容器1可以输出游戏1对应的视频流数据1和音频流数据1,通过容器2可以输出游戏2对应的视频流数据2和音频流数据2,通过云端设备管理系统,可以将视频流数据2合并至视频流数据1(此处可以将游戏1作为祝游戏画面),生成独立于游戏客户端1和游戏客户端2的游戏页面。
请一并参见图12,图12是本申请实施例提供的一种不同云游戏的视频流数据之间的合并示意图。如图12所示的第一视频流数据为第一云游戏的视频流数据,第一视频流数据可以包括视频帧T1、视频帧T2、视频帧T3、视频帧T4、视频帧T5等一系列视频帧;如图12所示的第二视频流数据为第二云游戏的视频流数据,第二视频流数据可以包括视频帧Z1、视频帧Z2、视频帧Z3、视频帧Z4、视频帧Z5等一系列视频帧。当第一云游戏作为游戏主画面时,通过云端设备管理系统,可以将第二视频流数据中的视频帧Z1合并至第一视频流数据中的视频帧T1,生成视频画面100a;同理,可以依次将第二视频流数据中的视频帧合并至第一视频流数据中的视频帧,生成多个游戏画面,直至云服务器接收到终端设备的切换指令。
当终端设备所显示的游戏页面包括视频帧T3和视频帧Z3时,该终端设备向云服务器发送切换指令,云服务器可以将第二云游戏切换为游戏主画面,通过云端设备管理系统,将第一视频流数据中的视频帧T4合并至第二视频流数据中的视频帧Z4,生成更新后的视频画面100b;同理,可以依次将第一视频流数据中的后续视频帧合并至第二视频流数据中的后续视频帧,以生成多个更新后的视频画面,直至再次接收到终端设备的切换指令。
可选的,用户对游戏页面的任何操作,均可以被终端设备检测到,当终端设备检测到用户对游戏页面的操作(例如,游戏切换操作、尺寸调整操作、拖动操作等)时,均可以向云服务器发送相应的指令,云服务器可以将指令传输给云端设备管理系统,以使云端设备管理系统对当前游戏页面进行更新。
请参见图13,图13是本申请实施例提供的一种云游戏的处理流程示意图。如图13所示,云游戏的处理流程可以通过具有云游戏能力的客户端(可以称为游戏客户端)、客户端服务器(游戏客户端所对应的后台服务器)、云服务器(也可以称为云游戏服务器)以及云端设备管理系统之间的交互来实现。
如图13所示,游戏客户端可以同时启动多个云游戏,开始执行初始化操作,并与客户端服务器建立长连接,保持数据之间的通信。游戏客户端可以向客户端服务器传递一些基础参数,这些基础参数可以包括:启动的多个云游戏分别对应的游戏ID,用户ID,多个云游戏分别对应的权重信息(云服务器可以根据权重信息来确定游戏主画面)等。另外,游戏客户端还可以保持测听客户端服务器的指令信息,该指令信息可以包括用户时长不够,用户网络异常,云游戏设备异常等信息,以便作出相应的业务操作;如游戏客户端测听到客户端服务器的指令信息为用户网络异常时,停止更新游戏客户端中的游戏页面。
其中,游戏客户端可以先后启动多个云游戏,如游戏客户端在启动游戏A后,还想要启动游戏B,则可以通过信令通道通知云服务器需要将游戏A设置为保活状态,然后可以最小化游戏A;进而可以启动游戏B,在多个云游戏所对应的权重信息中,将最高的权重信息所对应的云游戏确定为游戏主画面,其中,最高的权重信息所对应的云游戏为携带主标识信息的云游戏。
客户端服务器可以与云服务器建立长连接。客户端服务器接收到游戏客户端传递的基础参数后,可以将用户的基础信息传递给云服务器。云服务器可以包括多个容器,每个容器内均可以执行云游戏的初始化工作。在容器内可以直接访问GPU,GPU具有高并发的计算能力,可以直接在容器内完成渲染,并且可以提升渲染性能。
云服务器可以启动多个云游戏分别对应的容器。云服务器接收到客户端服务器传递的用户信息、设备信息后,可以启动多个云游戏分别对应的容器;由于云服务器中存在很多个虚拟的容器可以供外部启动,根据传递的游戏ID启动对应的容器,每个容器均可以输出对应云游戏所对应的游戏画面,得到云游戏对应的视频流数据,还可以输出云游戏对应的音频流数据;因此,云服务器可以获取多路音视频流数据,每个云游戏均可以对应一路音视频流数据。
云服务器可以将多个云游戏分别对应的音视频流数据均传输至云端设备管理系统,在该云端设备管理系统中,可以执行以下步骤S301-步骤S304:
步骤S301,对各个云游戏所对应的参数信息进行整理判断。
具体的,云端设备管理系统可以接收云服务器传递的多路音视频流数据,进而可以根据每路音视频流数据中的数据类型(type类型),将每一路音视频流数据拆分为音频流数据和视频流数据。另外,还可以根据每个云游戏分别对应的权重信息,确定作为游戏主画面的云游戏。
步骤S302,合并各个云游戏的音频流数据。
具体的,可以对多个云游戏分别对应的音频流数据进行音频处理。由于用户在体验云游戏A时,在游戏页面中无需播放其余云游戏(例如,云游戏B)的音频流数据。因此,云端设备管理系统可以根据每个云游戏分别对应的权重信息,确定作为游戏主画面的云游戏,可以将权重信息最高的云游戏所对应的音频流数据保留下来,其余云游戏所对应的音频流数据均不作处理。为便于描述,后续将权重信息最高的云游戏称为主游戏。
步骤S303,合并各个云游戏的视频流数据。
具体的,可以对多个云游戏分别对应的视频流数据进行视频处理。两路或者多路视频流数据的合并过程,其本质是将两路或者多路视频流数据中的视频帧进行整合。在对两路或者多路视频流数据中的视频帧进行整合的过程中,可以无需对齐视频流数据的时间戳,可以在主游戏的视频帧中,将一片区域进行其余云游戏视频帧的填充,得到组合视频流数据,以便于在游戏页面中实时切换多个云游戏所对应的游戏画面。用户可以根据自身习惯对除主游戏之外的其余云游戏的游戏画面进行拖拉,以更改其余云游戏的游戏画面在游戏页面中的位置,游戏客户端可以记录用户在终端屏幕中的手势轨迹,同时记录用户所拖动的游戏画面的坐标位置,并将坐标位置上报至云端设备管理系统,这样云端设备管理系统可以根据上报的坐标位置,实时进行游戏画面的位置调整。
步骤S304,合并主游戏的音频流数据和各个云游戏的视频流数据。
具体的,可以将保留下来的音频流数据(即主游戏对应的音频流数据)与上述步骤S303中所得到的组合视频流数据进行合并,得到合并后的音视频流数据,合并后的音视频流数据可以下发至游戏客户端,并在游戏客户端的游戏页面中输出合并后的音视频流数据。
通过云端设备管理系统输出合并后的音视频流数据后,可以将合并后的音视频流数据返回给云服务器,云服务器可以把最新的音视频流数据下发给游戏客户端。当然,云服务器需要在接收到游戏客户端的服务请求(例如,数据拉去请求)时,将最新的音视频流数据下发给游戏客户端。
云服务器从云端设备管理系统中获取到最新的第一帧数据(例如,图像帧数据)时,可以通知客户端服务器,云游戏所对应的容器已经准备完成,以便客户端服务器可以开始进行相关数据的记录和处理,例如,记录用户游玩时长,用户剩余时长等。由于用户同时体验多个云游戏,所以客户端服务器需要同时对多个云游戏进行时长记录。
客户端服务器可以通知游戏客户端,云游戏已经准备完成,游戏客户端可以获取多个云游戏所对应的合并后的音视频流数据;游戏客户端可以做业务处理,比如结束进度,优化业务等,游戏客户端可以直接从云服务器中获取渲染完成的视频流数据,并在本地进行展示。
游戏客户端完成初始化工作后,若接收到客户端服务器的指令,且该指令用于指示游戏客户端可以开始获取各个云游戏所对应的视频流数据,则游戏客户端可以通过接口向云服务器拉取合并后的音视频流数据,并且实时和云服务器进行交互,不断地获取最新的视频流数据,并在游戏客户端中展示给用户。游戏客户端在本地可以通过流媒体播放器进行音视频流的播放。其中,流媒体播放器的原理与通用的视频播放器的原理是一致的,都是在获取到服务器的帧数据后,在帧缓冲区中把帧数据渲染到屏幕上。其中,为方便游戏客户端与云服务器之间的通信,游戏客户端同样可以与云服务器建立长连接。
在云游戏的操作过程中,游戏客户端需要把用户的操作指令通过通道传递给云服务器,因此游戏客户端在测听到用户不同的手势或者点击操作时,可以将用户的手势或点击操作转化为指令信息,并将这些指令信息传递给云服务器。可选的,云服务器可以通过测听用户手势和点击区域范围,把更新后的音视频流数据上传到游戏客户端;例如,若用户在体验游戏A时想要切换到游戏B,则用户可以点击游戏B,云服务器可以检测到用户点击了游戏B,可以将游戏B的权重信息更新为最高的权重信息,通过云端设备管理系统,将游戏B的视频流数据作为游戏主画面,其余云游戏的视频流数据需要这是点击游戏B,检测到点击了游戏B,将游戏合并至游戏B的视频流数据上,音频处理过程中可以仅保留游戏B的音频流数据。
本申请实施例中,通过对第一云游戏和第二云游戏所对应的视频流数据进行合并,将第一云游戏对应的第一视频流数据,以及第二云游戏对应的第二视频流数据展示在同一个游戏页面中,即用户可以通过一个终端设备就可以同时体验多个云游戏,可以提高云游戏的使用率;用户可以在该游戏页面中实时切换多个云游戏的视频流数据,即实时切换多个云游戏所对应的游戏画面,进而可以丰富云游戏的使用方式,提升了云游戏的体验和玩法。
请参见图14,图14是本申请实施例提供的一种云游戏数据处理装置的结构示意图。可以理解地,该云游戏数据处理装置可以搭载在上述方法实施例中的终端设备上,例如图1所示的终端设备10a。如图14所示,云游戏数据处理装置1可以包括:输出模块101,切换模块102;
输出模块101,用于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
切换模块102,用于响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
可选的,输出模块101还用于:
当主区域用于输出第一视频流数据时,获取第一云游戏对应的第一音频流数据,在主区域中播放第一音频流数据。
其中,输出模块101,切换模块102的具体功能实现方式可以参见上述图3所对应实施例中的步骤S101-步骤S102,这里不再进行赘述。
在一些可行的实施方式中,云游戏数据处理装置1还可以包括:云游戏显示模块103,第一选取模块104,云游戏启动模块105;
云游戏显示模块103,用于显示K个云游戏;K为大于1的正整数;
第一选取模块104,用于响应针对K个云游戏的第一选取操作,在K个云游戏中,确定第一选取操作所触发的第一云游戏和第二云游戏,为第一云游戏添加主标识信息;主标识信息用于指示第一云游戏对应的第一视频流数据将被展示于主区域中;
云游戏启动模块105,用于响应针对第一云游戏和第二云游戏的启动操作,启动第一云游戏和第二云游戏。
其中,云游戏显示模块103,第一选取模块104,云游戏启动模块105的具体功能实现方式可以参见上述图3所对应实施例中的步骤S101,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置1还可以包括:列表显示模块106,第二选取模块107,第一主画面确定模块108;
列表显示模块106,用于响应针对游戏页面的触发操作,显示云游戏列表;云游戏列表包括K个云游戏中除第一云游戏和第二云游戏之外的云游戏,K为大于1的正整数;
第二选取模块107,用于响应针对云游戏列表的第二选取操作,启动第二选取操作所触发的第三云游戏,显示针对第三云游戏的显示区域提示信息;显示区域提示信息包括第一确认控件;
第一主画面确定模块108,用于响应针对第一确认控件的触发操作,在游戏页面中添加第二辅区域,将主区域中的第二视频流数据切换输出至第二辅区域,在主区域中输出第三云游戏对应的第三视频流数据;第二辅区域与第一辅区域互不重叠。
其中,显示区域提示信息还可以包括第二确认控件;
该云游戏数据处理装置1还可以包括:第二主画面确定模块109;
第二主画面确定模块109,用于响应针对第二确认控件的触发操作,在游戏页面中添加第三辅区域,在第三辅区域中输出第三云游戏对应的第三视频流数据,在主区域中继续输出第二视频流数据;第三辅区域与第一辅区域互不重叠。
其中,列表显示模块106,第二选取模块107,第一主画面确定模块108,第二主画面确定模块109的具体功能实现方式可以参见上述图3所对应实施例中的步骤S102,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置1还可以包括:退出提示模块110,页面隐藏模块111,第三选取操作112,页面恢复模块113;
退出提示模块110,用于响应针对游戏页面的退出操作,显示游戏退出提示信息;游戏退出提示信息包括保活控件;
页面隐藏模块111,用于响应针对保活控件的触发操作,隐藏显示游戏页面;
第三选取操作112,用于响应针对K个云游戏的第三选取操作,启动第三选取操作所触发的第四云游戏;K为大于1的正整数;
页面恢复模块113,用于恢复游戏页面,在游戏页面中输出第一视频流数据、第二视频流数据,以及第四云游戏对应的第四视频流数据。
其中,游戏退出提示信息还可以包括关闭控件;
该云游戏数据处理装置1还可以包括:游戏退出模块114;
游戏退出模块114,用于响应针对关闭控件的触发操作,关闭游戏页面,退出第一云游戏和第二云游戏。
其中,退出提示模块110,页面隐藏模块111,第三选取操作112,页面恢复模块113,游戏退出模块114的具体功能实现方式可以参见上述图3所对应实施例中的步骤S102,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置1还可以包括:拖动模块115,尺寸调整模块116;
拖动模块115,用于响应针对第一辅区域的拖动操作,在游戏页面中,将第一辅区域移动至拖动操作所确定的区域位置。
尺寸调整模块116,用于响应针对第一辅区域的尺寸调整操作,在游戏页面中,将第一辅区域的显示尺寸调整至尺寸调整操作所确定的目标尺寸,根据目标尺寸调整第一辅区域中所包含的第一视频流数据的显示尺寸。
其中,拖动模块115,尺寸调整模块116的具体功能实现方式可以参见上述图3所对应实施例中的步骤S102,这里不再进行赘述。
在一些可行的实施方式中,第一辅区域所包含的第二云游戏的数量为M个,M为正整数;
该云游戏数据处理装置1还可以包括:游戏分类模块117,子区域新建模块118;
游戏分类模块117,用于根据M个第二云游戏分别对应的类别标签,对M个第二云游戏所对应的第二视频流数据进行分类,得到N个视频流数据集合;一个视频流数据集合中所包含的第二视频流数据具有相同的类别标签,N为小于或等于M的正整数;
子区域新建模块118,用于在第一辅区域中创建N个游戏子区域,建立N个游戏子区域与N个视频流数据集合之间的对应关系,基于对应关系,在N个游戏子区域中输出N个数据集合所包含的视频流数据;
则切换模块102可以包括:视频选取单元1021,游戏切换显示单元1022;
视频选取单元1021,用于响应针对第一辅区域中的目标游戏子区域的游戏触发操作,在目标游戏子区域所输出的第二视频流数据中,将游戏触发操作所确定的第二视频流数据确定为目标视频流数据;目标游戏子区域属于N个游戏子区域;
游戏切换显示单元1022,用于将目标视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
其中,游戏分类模块117,子区域新建模块118,视频选取单元1021,游戏切换显示单元1022的具体功能实现方式可以参见上述图3所对应实施例中的步骤S101-步骤S102,这里不再进行赘述。
在一些可行的实施方式中,游戏页面可以包括辅区域查看控件;
输出模块101可以包括:视频输出单元1011,辅区域显示单元1012,时长统计单元1013;
视频输出单元1011,用于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据;
辅区域显示单元1012,用于响应针对辅区域查看控件的查看操作,在游戏页面中显示第一辅区域,在第一辅区域中显示第二云游戏对应的第二视频流数据;
时长统计单元1013,用于统计第一辅区域在游戏页面中的显示时长,当显示时长达到时长阈值时,取消显示第一辅区域。
其中,视频输出单元1011,辅区域显示单元1012,时长统计单元1013的具体功能实现方式可以参见上述图3所对应实施例中的步骤S101,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置还可以包括:标识显示模块119;
标识显示模块119,用于当检测到第一辅区域中的第一云游戏结束游戏任务时,在第一辅区域中显示针对第一视频流数据的切换标识信息;切换标识信息用于指示将第一云游戏对应的第一视频流数据重新切换输出至主区域。
其中,标识显示模块119的具体功能实现方式可以参见上述图3所对应实施例中的步骤S102,这里不再进行赘述。
本申请实施例中,通过对第一云游戏和第二云游戏所对应的视频流数据进行合并,将第一云游戏对应的第一视频流数据,以及第二云游戏对应的第二视频流数据展示在同一个游戏页面中,即用户可以通过一个终端设备就可以同时体验多个云游戏,可以提高云游戏的使用率;用户可以在该游戏页面中实时切换多个云游戏的视频流数据,即实时切换多个云游戏所对应的游戏画面,进而可以丰富云游戏的使用方式,提升了云游戏的体验和玩法。
请参见图15,图15是本申请实施例提供的一种云游戏数据处理装置的结构示意图。可以理解地,该云游戏数据处理装置可以搭载在上述方法实施例中的云服务器上,例如图1所示的云服务器10c。如图15所示,云游戏数据处理装置2可以包括:输出模块101,切换模块102;
本申请实施例一方面提供了一种云游戏数据处理装置,包括:服务响应模块201,页面更新模块202;
服务响应模块201,用于响应于终端设备的服务请求,向终端设备发送游戏页面;游戏页面包括用于输出第一云游戏所对应的第一视频流数据的主区域,以及用于输出第二云游戏所对应的第二视频流数据的第一辅区域,第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
页面更新模块202,用于当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,更新游戏页面,向终端设备发送更新后的游戏页面;更新后的游戏页面包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
其中,服务响应模块201,页面更新模块202的具体功能实现方式可以参见上述图11所对应实施例中的步骤S205-步骤S206,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置2还可以包括:容器启动模块203,第一渲染模块204,第二渲染模块205,数据合并模块206;
容器启动模块203,用于接收第一云游戏对应的第一参数信息,以及第二云游戏对应的第二参数信息,根据第一参数信息启动与第一云游戏相匹配的第一容器,根据第二参数信息启动与第二云游戏相匹配的第二容器;
第一渲染模块204,用于通过第一容器,对第一云游戏中的游戏场景数据进行渲染,得到渲染后的第一视频流数据和第一音频流数据;
第二渲染模块205,用于通过第二容器,对第二云游戏中的游戏场景数据进行渲染,得到渲染后的第二视频流数据和第二音频流数据;
数据合并模块206,用于当第一参数信息包括主标识信息时,将第二视频流数据合并至第一视频流数据,得到组合视频流数据,对组合视频流数据和第一音频流数据进行合并,生成游戏页面。
可选的,容器启动模块203可以包括:权限确认单元2031,容器启动单元2032;
权限确认单元2031,用于当第一参数信息和第二参数信息均满足试玩权限时,获取第一参数信息中的第一游戏标识,以及第二参数信息中的第二游戏标识;
容器启动单元2032,用于启动第一游戏标识对应的第一容器,以及第二游戏标识对应的第二容器。
其中,容器启动模块203,第一渲染模块204,第二渲染模块205,数据合并模块206的具体功能实现方式可以参见上述图11所对应实施例中的步骤S201-步骤S204,这里不再进行赘述。
在一些可行的实施方式中,该云游戏数据处理装置2还可以包括:停止渲染模块207;
停止渲染模块207,用于统计第一云游戏对应的游戏试玩时长,当游戏试玩时长达到第一云游戏对应的试玩时长阈值时,停止对第一云游戏中的游戏场景数据进行渲染。
其中,停止渲染模块207的具体功能实现方式可以参见上述图11所对应实施例中的步骤S206,这里不再进行赘述。
本申请实施例中,通过对第一云游戏和第二云游戏所对应的视频流数据进行合并,将第一云游戏对应的第一视频流数据,以及第二云游戏对应的第二视频流数据展示在同一个游戏页面中,即用户可以通过一个终端设备就可以同时体验多个云游戏,可以提高云游戏的使用率;用户可以在该游戏页面中实时切换多个云游戏的视频流数据,即实时切换多个云游戏所对应的游戏画面,进而可以丰富云游戏的使用方式,提升了云游戏的体验和玩法。
请参见图16,图16是本申请实施例提供的一种计算机设备的结构示意图。如图16所示,该计算机设备1000可以包括:处理器1001,网络接口1004和存储器1005,此外,上述计算机设备1000还可以包括:用户接口1003,和至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。可选的,网络接口1004可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器1005还可以是至少一个位于远离前述处理器1001的存储装置。如图16所示,作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
在如图16所示的计算机设备1000中,网络接口1004可提供网络通讯功能;而用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的设备控制应用程序。
在一个实施例中,计算机设备1000可以是图1所示的终端设备10a;该计算机设备可以通过处理器1001来实现:
在游戏页面的主区域中输出第一云游戏对应的第一视频流数据,在游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据;第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
响应针对第一辅区域的游戏触发操作,将游戏触发操作所确定的第二视频流数据切换输出至主区域,将第一视频流数据切换输出至第一辅区域。
可选的,在一个实施例中,计算机设备1000可以是图1所示的云服务器10c;该计算机设备可以通过处理器1001来实现:
响应于终端设备的服务请求,向终端设备发送游戏页面;游戏页面包括用于输出第一云游戏所对应的第一视频流数据的主区域,以及用于输出第二云游戏所对应的第二视频流数据的第一辅区域,第一云游戏和第二云游戏分别为终端设备所启动的不同的云游戏,主区域的显示尺寸大于第一辅区域的显示尺寸;
当终端设备选中第一辅区域中的第二云游戏并发送切换指令时,更新游戏页面,向终端设备发送更新后的游戏页面;更新后的游戏页面包括用于输出第二视频流数据的主区域,以及用于输出第一视频流数据的第一辅区域。
应当理解,本申请实施例中所描述的计算机设备1000可执行前文图3和图11任一个所对应实施例中对云游戏数据处理方法的描述,也可执行前文图14所对应实施例中对云游戏数据处理装置1,以及图15所对应实施例中对云游戏数据处理装置2的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
此外,这里需要指出的是:本申请实施例还提供了一种计算机可读存储介质,且计算机可读存储介质中存储有前文提及的云游戏数据处理装置1和云游戏数据处理装置2所执行的计算机程序,且计算机程序包括程序指令,当处理器执行程序指令时,能够执行前文图3和图11任一个所对应实施例中对云游戏数据处理方法的描述,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机可读存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述。作为示例,程序指令可被部署在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行,分布在多个地点且通过通信网络互连的多个计算设备可以组成区块链系统。
此外,需要说明的是:本申请实施例还提供了一种计算机程序产品或计算机程序,该计算机程序产品或者计算机程序可以包括计算机指令,该计算机指令可以存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器可以执行该计算机指令,使得该计算机设备执行前文图3和图11任一个所对应实施例中对云游戏数据处理方法的描述,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机程序产品或者计算机程序实施例中未披露的技术细节,请参照本申请方法实施例的描述。
需要说明的是,对于前述的各个方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,计算机程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,存储介质可为磁碟、光盘、只读存储器(Read-Only Memory,ROM)或随机存储器(Random Access Memory,RAM)等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (19)

1.一种云游戏数据处理方法,其特征在于,包括:
在游戏页面的主区域中输出第一云游戏对应的第一视频流数据以及所述第一云游戏对应的第一音频流数据,在所述游戏页面的第一辅区域中输出M个第二云游戏对应的第二视频流数据;所述第一云游戏和所述M个第二云游戏分别为终端设备所启动的不同的云游戏,所述游戏页面是通过将所述第二视频流数据填充至所述第一视频流数据所得到的,所述主区域的显示尺寸大于所述第一辅区域的显示尺寸;所述第一辅区域包括N个游戏子区域,一个游戏子区域包括同一个类别标签对应的第二云游戏,所述第一辅区域中的所述M个第二云游戏对应的第二视频流数据的尺寸是进行同步调整的,M和N均为正整数且N小于或等于M;
响应针对所述第一辅区域的游戏触发操作,将所述游戏触发操作所确定的第二视频流数据切换输出至所述主区域,将所述第一视频流数据切换输出至所述第一云游戏对应的类别标签在所述第一辅区域中所属的游戏子区域,在所述主区域中取消播放所述第一云游戏的第一音频流数据,播放所述游戏触发操作所确定的第二云游戏对应的第二音频流数据。
2.根据权利要求1所述的方法,其特征在于,还包括:
显示K个云游戏;所述K为大于1的正整数;
响应针对所述K个云游戏的第一选取操作,在所述K个云游戏中,确定所述第一选取操作所触发的第一云游戏和第二云游戏,为所述第一云游戏添加主标识信息;所述主标识信息用于指示所述第一云游戏对应的第一视频流数据将被展示于所述主区域中;
响应针对所述第一云游戏和所述第二云游戏的启动操作,启动所述第一云游戏和所述第二云游戏。
3.根据权利要求1所述的方法,其特征在于,还包括:
响应针对所述游戏页面的触发操作,显示云游戏列表;所述云游戏列表包括K个云游戏中除所述第一云游戏和所述第二云游戏之外的云游戏,所述K为大于1的正整数;
响应针对所述云游戏列表的第二选取操作,启动所述第二选取操作所触发的第三云游戏,显示针对所述第三云游戏的显示区域提示信息;所述显示区域提示信息包括第一确认控件;
响应针对所述第一确认控件的触发操作,在所述游戏页面中添加第二辅区域,将所述主区域中的第二视频流数据切换输出至所述第二辅区域,在所述主区域中输出所述第三云游戏对应的第三视频流数据;所述第二辅区域与所述第一辅区域互不重叠。
4.根据权利要求3所述的方法,其特征在于,所述显示区域提示信息还包括第二确认控件;
所述方法还包括:
响应针对所述第二确认控件的触发操作,在所述游戏页面中添加第三辅区域,在所述第三辅区域中输出所述第三云游戏对应的第三视频流数据,在所述主区域中继续输出所述第二视频流数据;所述第三辅区域与所述第一辅区域互不重叠。
5.根据权利要求1所述的方法,其特征在于,还包括:
响应针对所述游戏页面的退出操作,显示游戏退出提示信息;所述游戏退出提示信息包括保活控件;
响应针对所述保活控件的触发操作,隐藏显示所述游戏页面;
响应针对K个云游戏的第三选取操作,启动所述第三选取操作所触发的第四云游戏;所述K为大于1的正整数;
恢复所述游戏页面,在所述游戏页面中输出所述第一视频流数据、第二视频流数据,以及所述第四云游戏对应的第四视频流数据。
6.根据权利要求5所述的方法,其特征在于,所述游戏退出提示信息还包括关闭控件;
所述方法还包括:
响应针对所述关闭控件的触发操作,关闭所述游戏页面,退出所述第一云游戏和所述第二云游戏。
7.根据权利要求1所述的方法,其特征在于,还包括:
响应针对所述第一辅区域的拖动操作,在所述游戏页面中,将所述第一辅区域移动至所述拖动操作所确定的区域位置。
8.根据权利要求1所述的方法,其特征在于,还包括:
响应针对所述第一辅区域的尺寸调整操作,在所述游戏页面中,将所述第一辅区域的显示尺寸调整至所述尺寸调整操作所确定的目标尺寸,根据所述目标尺寸调整所述第一辅区域中所包含的第一视频流数据的显示尺寸。
9.根据权利要求1所述的方法,其特征在于,所述第一辅区域所包含的第二云游戏的数量为M个,所述M为正整数;
所述方法还包括:
根据M个第二云游戏分别对应的类别标签,对所述M个第二云游戏所对应的第二视频流数据进行分类,得到N个视频流数据集合;一个视频流数据集合中所包含的第二视频流数据具有相同的类别标签,所述N为小于或等于所述M的正整数;
在所述第一辅区域中创建N个游戏子区域,建立所述N个游戏子区域与所述N个视频流数据集合之间的对应关系,基于所述对应关系,在所述N个游戏子区域中输出所述N个视频流数据集合所包含的视频流数据;
则所述响应针对所述第一辅区域的游戏触发操作,将所述游戏触发操作所确定的第二视频流数据切换输出至所述主区域,将所述第一视频流数据切换输出至所述第一云游戏对应的类别标签在所述第一辅区域中所属的游戏子区域,包括:
响应针对所述第一辅区域中的目标游戏子区域的游戏触发操作,在所述目标游戏子区域所输出的第二视频流数据中,将所述游戏触发操作所确定的第二视频流数据确定为目标视频流数据;所述目标游戏子区域属于所述N个游戏子区域;
将所述目标视频流数据切换输出至所述主区域,将所述第一视频流数据切换输出至所述第一云游戏对应的类别标签在所述第一辅区域中所属的游戏子区域。
10.根据权利要求1所述的方法,其特征在于,所述游戏页面包括辅区域查看控件;
所述在游戏页面的主区域中输出第一云游戏对应的第一视频流数据以及所述第一云游戏对应的第一音频流数据,在所述游戏页面的第一辅区域中输出第二云游戏对应的第二视频流数据,包括:
在游戏页面的主区域中输出第一云游戏对应的第一视频流数据以及所述第一云游戏对应的第一音频流数据;
响应针对所述辅区域查看控件的查看操作,在所述游戏页面中显示所述第一辅区域,在所述第一辅区域中显示所述第二云游戏对应的第二视频流数据;
统计所述第一辅区域在所述游戏页面中的显示时长,当所述显示时长达到时长阈值时,取消显示所述第一辅区域。
11.根据权利要求1所述的方法,其特征在于,还包括:
当检测到所述第一辅区域中的第一云游戏结束游戏任务时,在所述第一辅区域中显示针对所述第一视频流数据的切换标识信息;所述切换标识信息用于指示将所述第一云游戏对应的第一视频流数据重新切换输出至所述主区域。
12.一种云游戏数据处理方法,其特征在于,包括:
响应于终端设备的服务请求,向所述终端设备发送游戏页面;所述游戏页面包括用于输出第一云游戏所对应的第一视频流数据和所述第一云游戏所对应的第一音频流数据的主区域,以及用于输出M个第二云游戏所对应的第二视频流数据的第一辅区域,所述游戏页面是通过将所述第二视频流数据填充至所述第一视频流数据所得到的,所述第一云游戏和所述M个第二云游戏分别为终端设备所启动的不同的云游戏,所述主区域的显示尺寸大于所述第一辅区域的显示尺寸;所述第一辅区域包括N个游戏子区域,一个游戏子区域包括同一个类别标签对应的第二云游戏,所述第一辅区域中的所述M个第二云游戏对应的第二视频流数据的尺寸是进行同步调整的,M和N均为正整数且N小于或等于M;
当所述终端设备选中所述第一辅区域中的第二云游戏并发送切换指令时,更新所述游戏页面,向所述终端设备发送更新后的游戏页面;所述更新后的游戏页面包括用于输出所述切换指令所指示的第二云游戏对应的第二视频流数据和第二音频流数据的主区域,以及用于输出所述第一视频流数据和M-1个第二云游戏对应的第二视频流数据的第一辅区域,所述M-1个第二云游戏包括所述M个第二云游戏中除所述切换指令所指示的第二云游戏之外的第二云游戏。
13.根据权利要求12所述的方法,其特征在于,还包括:
接收所述第一云游戏对应的第一参数信息,以及所述第二云游戏对应的第二参数信息,根据所述第一参数信息启动与所述第一云游戏相匹配的第一容器,根据所述第二参数信息启动与所述第二云游戏相匹配的第二容器;
通过所述第一容器,对所述第一云游戏中的游戏场景数据进行渲染,得到渲染后的第一视频流数据和第一音频流数据;
通过所述第二容器,对所述第二云游戏中的游戏场景数据进行渲染,得到渲染后的第二视频流数据和第二音频流数据;
当所述第一参数信息包括主标识信息时,将所述第二视频流数据合并至所述第一视频流数据,得到组合视频流数据,对所述组合视频流数据和所述第一音频流数据进行合并,生成所述游戏页面。
14.根据权利要求13所述的方法,其特征在于,所述根据所述第一参数信息启动与所述第一云游戏相匹配的第一容器,根据所述第二参数信息启动与所述第二云游戏相匹配的第二容器,包括:
当所述第一参数信息和所述第二参数信息均满足试玩权限时,获取所述第一参数信息中的第一游戏标识,以及所述第二参数信息中的第二游戏标识;
启动所述第一游戏标识对应的第一容器,以及所述第二游戏标识对应的第二容器。
15.根据权利要求12所述的方法,其特征在于,还包括:
统计所述第一云游戏对应的游戏试玩时长,当所述游戏试玩时长达到所述第一云游戏对应的试玩时长阈值时,停止对所述第一云游戏中的游戏场景数据进行渲染。
16.一种云游戏数据处理装置,其特征在于,包括:
输出模块,用于在游戏页面的主区域中输出第一云游戏对应的第一视频流数据以及所述第一云游戏对应的第一音频流数据,在所述游戏页面的第一辅区域中输出M个第二云游戏对应的第二视频流数据;所述第一云游戏和所述M个第二云游戏分别为终端设备所启动的不同的云游戏,所述游戏页面是通过将所述第二视频流数据填充至所述第一视频流数据所得到的,所述主区域的显示尺寸大于所述第一辅区域的显示尺寸;所述第一辅区域包括N个游戏子区域,一个游戏子区域包括同一个类别标签对应的第二云游戏,所述第一辅区域中的所述M个第二云游戏对应的第二视频流数据的尺寸是进行同步调整的,M和N均为正整数且N小于或等于M;
切换模块,用于响应针对所述第一辅区域的游戏触发操作,将所述游戏触发操作所确定的第二视频流数据切换输出至所述主区域,将所述第一视频流数据切换输出至所述第一云游戏对应的类别标签在所述第一辅区域中所属的游戏子区域,在所述主区域中取消播放所述第一云游戏的第一音频流数据,播放所述游戏触发操作所确定的第二云游戏对应的第二音频流数据。
17.一种云游戏数据处理装置,其特征在于,包括:
服务响应模块,用于响应于终端设备的服务请求,向所述终端设备发送游戏页面;所述游戏页面包括用于输出第一云游戏所对应的第一视频流数据和所述第一云游戏所对应的第一音频流数据的主区域,以及用于输出M个第二云游戏所对应的第二视频流数据的第一辅区域,所述游戏页面是通过将所述第二视频流数据填充至所述第一视频流数据所得到的,所述第一云游戏和所述M个第二云游戏分别为终端设备所启动的不同的云游戏,所述主区域的显示尺寸大于所述第一辅区域的显示尺寸;所述第一辅区域包括N个游戏子区域,一个游戏子区域包括同一个类别标签对应的第二云游戏,所述第一辅区域中的所述M个第二云游戏对应的第二视频流数据的尺寸是进行同步调整的,M和N均为正整数且N小于或等于M;
页面更新模块,用于当所述终端设备选中所述第一辅区域中的第二云游戏并发送切换指令时,更新所述游戏页面,向所述终端设备发送更新后的游戏页面;所述更新后的游戏页面包括用于输出所述切换指令所指示的第二云游戏对应的第二视频流数据和所述第二云游戏所对应的第二音频流数据的主区域,以及用于输出所述第一视频流数据和M-1个第二云游戏对应的第二视频流数据的第一辅区域,所述M-1个第二云游戏包括所述M个第二云游戏中除所述切换指令所指示的第二云游戏之外的第二云游戏。
18.一种计算机设备,其特征在于,包括存储器和处理器;
所述存储器与所述处理器相连,所述存储器用于存储计算机程序,所述处理器用于调用所述计算机程序,以使得所述计算机设备执行权利要求1-15任一项所述的方法。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,所述计算机程序适于由处理器加载并执行,以使得具有所述处理器的计算机设备执行权利要求1-15任一项所述的方法。
CN202110708086.3A 2021-06-24 2021-06-24 云游戏数据处理方法、装置、设备以及介质 Active CN113453059B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110708086.3A CN113453059B (zh) 2021-06-24 2021-06-24 云游戏数据处理方法、装置、设备以及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110708086.3A CN113453059B (zh) 2021-06-24 2021-06-24 云游戏数据处理方法、装置、设备以及介质

Publications (2)

Publication Number Publication Date
CN113453059A CN113453059A (zh) 2021-09-28
CN113453059B true CN113453059B (zh) 2022-12-09

Family

ID=77812693

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110708086.3A Active CN113453059B (zh) 2021-06-24 2021-06-24 云游戏数据处理方法、装置、设备以及介质

Country Status (1)

Country Link
CN (1) CN113453059B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7248857B1 (ja) * 2022-09-29 2023-03-29 Kddi株式会社 端末装置、仮想空間サービス管理装置及び仮想空間サービス制御方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888440A (zh) * 2012-12-21 2014-06-25 索尼电脑娱乐美国公司 基于云的游戏切片生成和即玩型无障碍社交共享
CN105511778A (zh) * 2015-11-25 2016-04-20 网易(杭州)网络有限公司 一种控制多个游戏画面显示的交互方法及装置
JP2016087215A (ja) * 2014-11-07 2016-05-23 株式会社タイトー ゲームシステム及びコンピュータプログラム
TWM524213U (zh) * 2015-12-18 2016-06-21 Bingotimes Digital Technology Co Ltd 可同時進行多種遊戲之遊戲機控制裝置
CN109739630A (zh) * 2018-12-29 2019-05-10 努比亚技术有限公司 游戏切换方法、移动终端及计算机可读存储介质
JP2019180491A (ja) * 2018-04-02 2019-10-24 天下数位科技股▲ふん▼有限公司 ゲーム情報画面切り換えシステム
CN111991803A (zh) * 2020-08-28 2020-11-27 厦门雅基软件有限公司 云端游戏切换方法、装置及计算机可读存储介质
WO2021029756A1 (ko) * 2019-08-09 2021-02-18 주식회사 볼트홀 응용 프로그램의 스트리밍 영상 제공 장치 및 방법
CN112416497A (zh) * 2020-11-25 2021-02-26 西安万像电子科技有限公司 图像的显示处理方法及装置、点播系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109522482B (zh) * 2018-11-13 2021-03-12 Oppo广东移动通信有限公司 游戏应用分类页面显示方法、装置、存储介质及终端
US10773162B1 (en) * 2018-12-21 2020-09-15 Electronic Arts Inc. Systems and methods for separable foreground and background rendering
KR102231875B1 (ko) * 2019-08-09 2021-03-26 주식회사 볼트홀 응용 프로그램의 스트리밍 영상 제공 장치 및 방법
CN111544886B (zh) * 2020-04-30 2021-07-09 腾讯科技(深圳)有限公司 一种画面显示的方法以及相关装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888440A (zh) * 2012-12-21 2014-06-25 索尼电脑娱乐美国公司 基于云的游戏切片生成和即玩型无障碍社交共享
JP2016087215A (ja) * 2014-11-07 2016-05-23 株式会社タイトー ゲームシステム及びコンピュータプログラム
CN105511778A (zh) * 2015-11-25 2016-04-20 网易(杭州)网络有限公司 一种控制多个游戏画面显示的交互方法及装置
TWM524213U (zh) * 2015-12-18 2016-06-21 Bingotimes Digital Technology Co Ltd 可同時進行多種遊戲之遊戲機控制裝置
JP2019180491A (ja) * 2018-04-02 2019-10-24 天下数位科技股▲ふん▼有限公司 ゲーム情報画面切り換えシステム
CN109739630A (zh) * 2018-12-29 2019-05-10 努比亚技术有限公司 游戏切换方法、移动终端及计算机可读存储介质
WO2021029756A1 (ko) * 2019-08-09 2021-02-18 주식회사 볼트홀 응용 프로그램의 스트리밍 영상 제공 장치 및 방법
CN111991803A (zh) * 2020-08-28 2020-11-27 厦门雅基软件有限公司 云端游戏切换方法、装置及计算机可读存储介质
CN112416497A (zh) * 2020-11-25 2021-02-26 西安万像电子科技有限公司 图像的显示处理方法及装置、点播系统

Also Published As

Publication number Publication date
CN113453059A (zh) 2021-09-28

Similar Documents

Publication Publication Date Title
US11439919B2 (en) Integrating commentary content and gameplay content over a multi-user platform
CN113423018B (zh) 一种游戏数据处理方法、装置及存储介质
US20200298125A1 (en) Personalized User Interface Based on In-Application Behavior
US10271013B2 (en) Display control method and apparatus
US11417341B2 (en) Method and system for processing comment information
CN1819648B (zh) 处理视频效果的方法和系统
CN112995759A (zh) 互动业务处理方法、系统、装置、设备及存储介质
JP6089828B2 (ja) 情報処理システムおよび情報処理方法
CN106658211A (zh) 在视频串流中实现的交互式应用程序
CN113457123A (zh) 基于云游戏的互动方法、装置、电子设备及可读存储介质
CN109495427B (zh) 多媒体数据展示方法、装置、存储介质和计算机设备
CN106105172A (zh) 突出显示未查看的视频消息
CN110602529B (zh) 直播监控方法、装置、电子设备和机器可读存储介质
CN112969093A (zh) 互动业务处理方法、装置、设备及存储介质
CN113453059B (zh) 云游戏数据处理方法、装置、设备以及介质
CN111031399B (zh) 弹幕处理方法和系统
US11483535B2 (en) Synchronizing secondary audiovisual content based on frame transitions in streaming content
US20240137617A1 (en) Video playing method and apparatus, and storage medium
CN116758201B (zh) 三维场景的渲染处理方法、设备、系统及计算机存储介质
CN110300118B (zh) 流媒体处理方法、装置及存储介质
CN115243063B (zh) 视频流的处理方法、处理装置以及处理系统
CN114071170B (zh) 一种网络直播互动方法及设备
CN109999490B (zh) 一种降低联网云应用延迟的方法及系统
KR20220146801A (ko) 싱글 스트림을 이용하여 관심 영역 고화질 영상을 제공하는 방법, 컴퓨터 장치, 및 컴퓨터 프로그램
CN117876559B (zh) 基于云渲染的虚拟场景双模式运行方法、系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40052347

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant