CN112354185A - 云游戏控制系统和云游戏控制方法 - Google Patents

云游戏控制系统和云游戏控制方法 Download PDF

Info

Publication number
CN112354185A
CN112354185A CN202011367734.5A CN202011367734A CN112354185A CN 112354185 A CN112354185 A CN 112354185A CN 202011367734 A CN202011367734 A CN 202011367734A CN 112354185 A CN112354185 A CN 112354185A
Authority
CN
China
Prior art keywords
cloud game
human body
image
cloud
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011367734.5A
Other languages
English (en)
Inventor
张忠义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202011367734.5A priority Critical patent/CN112354185A/zh
Publication of CN112354185A publication Critical patent/CN112354185A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55Controlling game characters or game objects based on the game progress
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/63Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor by the player, e.g. authoring using a level editor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供一种云游戏控制系统和云游戏控制方法,涉及数据处理技术领域。该系统包括:云游戏客户端,用于获取用户的人体姿态,并将人体姿态发送至云游戏服务器;云游戏服务器,用于接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。本公开可以通过获取用户的人体姿态对云游戏进行控制,实现在云游戏平台进行体感游戏的目标。

Description

云游戏控制系统和云游戏控制方法
技术领域
本公开涉及数据处理技术领域,具体涉及一种云游戏控制系统和云游戏控制方法。
背景技术
云游戏是一种不依赖于物理主机的云端游戏平台,它将游戏中大部分的处理、渲染工作都交给了遍布各地的服务器,使得游戏可以在服务器中运行。理想状态下,用户只要确保足够的本地带宽和网络连接,就可以在电视、PC、平板乃至是手机屏幕上畅玩各种游戏,实现跨平台无缝连接,而不用再下载体积庞大的安装包到本地,也不用再被本地硬件的算力所束缚。
发明内容
本公开的目的在于提供一种云游戏控制系统和云游戏控制方法,进而实现云端体感游戏的控制。
根据本公开的第一方面,提供一种云游戏控制系统,包括:云游戏客户端,用于获取用户的人体姿态,并将人体姿态发送至云游戏服务器;云游戏服务器,用于接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。
根据本公开的第二方面,提供一种云游戏控制方法,应用于上述云游戏控制系统,方法包括:云游戏客户端获取用户的人体姿态,并将人体姿态发送至云游戏服务器;云游戏服务器接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。
根据本公开的第三方面,提供一种计算机可读介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述的方法。
根据本公开的第四方面,提供一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行时,使得一个或多个处理器实现上述的方法。
本公开的一种实施例所提供的云游戏控制系统,通过云游戏客户端获取用户的人体姿态,并将人体姿态发送至云游戏服务器,云游戏服务器接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。本公开实施例的云游戏控制系统,可以通过获取用户的人体姿态对云游戏进行控制,实现在云游戏平台进行体感游戏的目标。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1示出了可以应用本公开实施例的一种示例性系统架构的示意图;
图2示出了可以应用本公开实施例的一种电子设备的示意图;
图3示意性示出本公开示例性实施例中一种云游戏控制系统的组成示意图;
图4示意性示出本公开示例性实施例中一种云游戏客户端的组成示意图;
图5示意性示出本公开示例性实施例中一种信息获取模块的组成示意图;
图6示出了一种人体骨骼关键点的示意图;
图7示意性示出本公开示例性实施例中一种云游戏服务器的组成示意图;
图8示意性示出本公开示例性实施例中一种数据生成模块的组成示意图;
图9示意性示出本公开示例性实施例中一种云游戏控制系统的架构示意图;
图10示意性示出本公开示例性实施例中一种云游戏控制方法的流程图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
图1示出了可以应用本公开实施例的一种云游戏控制系统及方法的示例性应用环境的示意图。
如图1所示,系统架构100可以包括终端设备101、102、103中的一个或多个,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路(包括实时通信链路(Real-Time Communication,RTC))或者光纤电缆等等。终端设备101、102、103可以是各种数据处理功能的电子设备,包括但不限于台式计算机、便携式计算机、智能手机、电视和平板电脑等等。应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。比如服务器105可以是多个服务器组成的服务器集群等。
本公开实施例所提供的云游戏控制系统中的云游戏客户端一般设置于终端设备101、102、103中,相应地,云游戏客户端执行的方法一般由终端设备101、102、103执行。本公开实施例所提供的云游戏服务器一般设置于服务器105中,相应的,云游戏服务器执行的方法一般由服务器105执行,本示例性实施例中对此不做特殊限定。。
本公开的示例性实施方式提供一种可以作为云游戏客户端的电子设备,其可以是图1中的终端设备101、102、103。
下面以图2中的移动终端200为例,对电子设备的构造进行示例性说明。本领域技术人员应当理解,除了特别用于移动目的的部件之外,图2中的构造也能够应用于固定类型的设备。在另一些实施方式中,移动终端200可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。各部件间的接口连接关系只是示意性示出,并不构成对移动终端200的结构限定。在另一些实施方式中,移动终端200也可以采用与图2不同的接口连接方式,或多种接口连接方式的组合。
如图2所示,移动终端200具体可以包括:处理器210、内部存储器221、外部存储器接口222、通用串行总线(Universal Serial Bus,USB)接口230、充电管理模块240、电源管理模块241、电池242、天线1、天线2、移动通信模块250、无线通信模块260、音频模块270、扬声器271、受话器272、麦克风273、耳机接口274、传感器模块280、显示屏290、摄像模组291、指示器292、马达293、按键294以及用户标识模块(subscriber identification module,SIM)卡接口295等。其中传感器模块280可以包括深度传感器2801、压力传感器2802、陀螺仪传感器2803等。
处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(Application Processor,AP)、调制解调处理器、图形处理器(Graphics ProcessingUnit,GPU)、图像信号处理器(Image Signal Processor,ISP)、控制器、视频编解码器、数字信号处理器(Digital Signal Processor,DSP)、基带处理器和/或神经网络处理器(Neural-Network Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
NPU为神经网络(Neural-Network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现移动终端200的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。在一些实施例中,NPU可以作为图像检测模块,对姿态图像进行关键点检测,得到姿态关键点数据。
移动终端200通过GPU、显示屏290及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏290和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。在一些实施例中,GPU、显示屏290及应用处理器可以作为多媒体装置对接收到的多媒体数据进行播放。
移动终端200可以通过ISP、摄像模组291、视频编解码器、GPU、显示屏290及应用处理器等实现拍摄功能。其中,ISP用于处理摄像模组291反馈的数据;摄像模组291用于捕获静态图像或视频;数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号;视频编解码器用于对数字视频压缩或解压缩,移动终端200还可以支持一种或多种视频编解码器。在一些实施例中,上述摄像模组可以作为摄像模块,用于采集用户的姿态图像。
移动终端200可以通过音频模块270、扬声器271、受话器272、麦克风273、耳机接口274及应用处理器等实现音频功能。例如音乐播放、录音等。在一些实施例中,可以通过实现上述音频功能的设备播放音频类的多媒体数据。
深度传感器2801用于获取景物的深度信息。在一些实施例中,深度传感器可以设置于摄像模组291,在采集用户的姿态图像时,可以同时采集姿态图像对应的深度信息,得到更加精确的姿态关键点数据。
云游戏是一种不依赖于物理主机的云端游戏平台,它将游戏中大部分的处理、渲染工作都交给了遍布各地的服务器,使得游戏可以在服务器中运行。然而,在相关技术中,云游戏仅支持通过鼠标、键盘、游戏手柄、触摸屏等设备进行操作的端游、手游、主机游戏,并不支持需要用户通过肢体动作来进行的体感游戏的操作。
基于上述一个或多个问题,本示例实施方式提供了一种云游戏控制系统。参照图3所示,该系统300包括云游戏客户端310、云游戏服务器320。
其中,云游戏客户端310可以用于获取用户的人体姿态,并将人体姿态发送至云游戏服务器。
在一示例性实施例中,参照图4所示,云游戏客户端310可以包括信息获取模块410和第一传输模块420。其中,信息获取模块410用于获取用户的人体姿态,第一传输模块420则用于将人体姿态发送至云游戏服务器。需要说明的是,信息获取模块410可以包括外设的动态控制器,健身环等用于采集用户的人体姿态的设备,第一传输模块420传输的过程可以通过网络实时传输进行。例如,可以通过RTC进行传输。
此外,在一示例性实施例中,人体姿态可以包括姿态关键点数据。此时,参照图5所示,上述云游戏客户端310可以包括图像获取模块510和图像检测模块520。其中,图像获取模块510可以用于获取用户的姿态图像。例如,图像获取模块510可以获取其它设备采集的用户的姿态图像;图像检测模块520可以用于对姿态图像进行关键点检测,得到姿态关键点数据。
举例而言,姿态关键点数据可以包括人体骨骼关键点数据。其中,人体骨骼关键点可以如图6所示;也可以包括不同游戏实例中预先设定的关键点对应的关键点数据,例如,在一些游戏实例中,仅需要用户的面部数据,因此可以预先设定用户面部的几个关键点。此时,可以通过AI检测等算法对姿态图像进行人体骨骼关键点检测,或者面部关键点检测。
需要说明的,不同游戏实例中虚拟游戏角色的类型可能不同,例如虚拟游戏角色可以是人形的,还可以是动物形的,还可以是车形的。因此,在进行关键点检测时,可以根据不同游戏实例进行不同方式的采集。例如,在虚拟游戏角色为车形的,可以将人体重心作为关键点进行检测。
进一步的,在一示例性实施例中,云游戏控制系统还可以包括摄像模块。摄像模块可以用于采集用户的姿态图像,并将姿态图像发送至图像获取模块。具体的,摄像模块可以包括各种类型的摄像模组。例如,可以是景深摄像头、多目摄像头等,还可以是深度传感器与普通摄像头共同组成的摄像模组。需要说明的是,在云游戏控制系统包括摄像模块时,摄像模块可以设置于云游戏客户端,也可以单独设置。
举例而言,在摄像模组为景深摄像头或多目摄像头时,可以通过摄像模组获取用户的3D画面,然后通过关键点检测算法得到用户肢体结构中各个关键点的三维空间坐标,并将各个关键点的空间坐标作为姿态关键点数据传输至云游戏服务器进处理。
通过将采集得到的用户的姿态图像转换为姿态关键点数据后,对姿态关键点数据进行传输,相对直接传输姿态图像而言,可以避免传输图像导致的数据量大,节约了网络的上行带宽。此外,由于可以将姿态图像转换为姿态关键点数据后再进行传输,因此可以支持各种不同类型的摄像头采集到的画面,可以在适用更广的应用场景。
继续参照图3所示,云游戏服务器320可以用于接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。
在一示例性实施例中,参照图7所示,云游戏服务器320可以包括第二传输模块710和数据生成模块720。其中,第二传输模块710可以用于接收人体姿态;以及将多媒体数据发送至云游戏客户端,。需要说明的是,第二传输模块710传输的过程也可以通过网络实时传输进行。例如,可以通过RTC进行传输;数据生成模块720可以用于根据人体姿态生成目标游戏实例对应的多媒体数据。
在一示例性实施例中,数据生成模块720参照图8所示,可以包括图像生成单元810,实例控制单元820和多媒体生成单元830。其中,图像生成单元810可以用于基于人体姿态生成目标游戏实例对应的对象姿态图像;实例控制单元820可以用于根据对象姿态图像控制目标游戏实例中,用户对应的虚拟游戏角色的姿态;多媒体生成单元830可以用于基于控制的过程生成目标游戏实例对应的多媒体数据。
具体的,在云游戏服务器320收到人体姿态后,图像生成单元810可以根据人体姿态生成目标游戏实例对应的对象姿态图像。其中,对象姿态图像是指目标游戏实例中控制对象对应的姿态图像。例如,在目标游戏实例中,虚拟游戏角色均为人形时,可以直接根据姿态关键点数据生成人体姿态图像;再如,虚拟游戏角色均为车形时,可以根据姿态关键点数据生成车姿态图像。
需要说明的是,在一些游戏实例中,可能同时存在多种类型的虚拟游戏角色,此时可以根据用户当前控制的虚拟游戏角色生成对应的对象姿态图像。例如,在目标游戏实例同时包括人形虚拟角色和动物形虚拟角色时,可以先确定用户当前控制的虚拟游戏角色是人形还是动物形,然后根据确定的类型生成对应的对象姿态图像。
此外,在同时存在多种类型的虚拟游戏角色时,为了实现上述过程,在用户选定控制的虚拟游戏角色时,可以根据该虚拟游戏角色确定需要采集的姿态关键点数据,也可以提前采集所有类型的虚拟游戏角色所需要的姿态关键点数据,在生成对象姿态图像时,根据各虚拟游戏角色需要的姿态关键点数据不同对姿态关键点数据进行筛选,本公开对实现上述过程的方式不做特殊限定。
随后,实例控制单元820可以根据图像生成单元810生成的对象姿态图像对目标游戏实例中,用户对应的虚拟游戏角色的姿态进行控制。此时,多媒体生成单元830可以生成控制过程中目标游戏实例对应的多媒体数据。
其中,上述多媒体数据包括但不限于目标游戏实例在控制过程中的音频和视频数据。在多媒体数据包括音频和视频时,多媒体生成单元830可以通过编码过程生成音视频数据流,然后通过第二传输模块710将音视频数据流实时传输给云游戏客户端。
需要说明的是,在云游戏客户端对多媒体数据进行播放时,可以通过设置有云游戏客户端的设备中包括的多媒体装置进行播放。例如,在以手机为云游戏客户端时,可以直接通过手机屏幕和手机音频模块等多媒体装置对多媒体数据进行播放;云游戏客户端还可以将多媒体数据发送至外设的多媒体装置进行播放。例如,在以手机为云游戏客户端时,用户可能觉得手机屏幕过小,因此可以将多媒体数据发送至电视,通过电视的多媒体装置对多媒体数据进行播放。
以下参照图9所示,对本公开实施例的技术方案进行详细说明。
通过摄像头采集用户的姿态图像,将采集到的姿态图像发送给云游戏客户端;云游戏客户端中的图像检测模块利用人体骨骼关键点检测算法对姿态图像进行检测,得到用户的人体骨骼关键点数据;然后云游戏客户端中的第一传输单元通过RTC数据传输通道将人体骨骼关键点数据实时传输至云游戏服务器;云游戏服务器中的图像生成单元根据人体骨骼关键点数据生成人体姿态图像;云游戏服务器中的实例控制单元根据人体姿态图像控制虚拟游戏角色;在上述实例控制单元控制的过程中,云游戏服务器中的多媒体生成单元对目标游戏实例的声音和画面进行编码生成音视频流;然后第二传输单元通过RTC媒体传输通道将音视频流发送至云游戏客户端;云游戏客户端得到音视频流后,将其发送至多媒体装置进行播放。
综上,本示例性实施方式中,提供了一种支持体感游戏的云游戏控制系统,用户可以在没有游戏主机的情况下,仅通过云游戏客户端进行体感游戏。云游戏客户端可以是PC、手机、电视、机顶盒等各种设备。用户只需要登陆云游戏服务器就可以随时玩各款体感游戏,不需要购买相应的游戏主机。
此外,通过将摄像模块采集到的图像转换为姿态关键点数据进行传输,使得云游戏控制系统可以支持各种不同类型的摄像头采集到的画面,适用范围更广;同时,姿态关键点数据仅仅是各个关键点的数据,相对于图像而言,数据量更小,因此可以节省网络的上行带宽。
进一步的,参考图10所示,本示例的实施方式中还提供一种云游戏控制方法,应用于上述云游戏控制系统中,该方法包括以下步骤S1010至S1020。
在步骤S1010中,云游戏客户端获取用户的人体姿态,并将人体姿态发送至云游戏服务器。
在一示例性实施例中,在人体姿态包括姿态关键点数据时,可以通过获取用户的姿态图像,并对姿态图像进行关键点检测的方式,将姿态图像转换为姿态关键点数据,进而发送至云游戏服务器中进行处理。
需要说明的,不同游戏实例中虚拟游戏角色的类型可能不同,例如虚拟游戏角色可以是人形的,还可以是动物形的,还可以是车形的。因此,在进行关键点检测时,可以根据不同游戏实例进行不同方式的采集。例如,在虚拟游戏角色为车形的,可以将人体重心作为关键点进行检测。
需要说明的是,上述用户的姿态图像可以是云游戏控制系统以外的设备带有的摄像模组采集,并发送至云游戏控制系统中的。例如,在云游戏客户端为电视时,若电视本身没有摄像头,则可以通过与电视在相同网络下手机的摄像头的进行图像采集,并将图像通过网络发送至电视;此外,在云游戏控制系统中包括摄像模块时,也可以通过云游戏控制系统中的摄像模块直接采集用户的姿态图像。例如,在云游戏客户端为手机时,可以通过手机自身的摄像模组进行图像采集。
具体的,摄像模块可以包括各种类型的摄像模组。例如,可以是景深摄像头、多目摄像头等,还可以是深度传感器与普通摄像头共同组成的摄像模组。需要说明的是,在云游戏控制系统包括摄像模块时,摄像模块可以设置于云游戏客户端,也可以单独设置。
举例而言,在摄像模组为景深摄像头或多目摄像头时,可以通过摄像模组获取用户的3D画面,然后通过关键点检测算法得到用户肢体结构中各个关键点的三维空间坐标,并将各个关键点的空间坐标作为姿态关键点数据传输至云游戏服务器进处理。
通过将采集得到的用户的姿态图像转换为姿态关键点数据后,对姿态关键点数据进行传输,相对直接传输姿态图像而言,可以避免传输图像导致的数据量大,节约了网络的上行带宽。此外,由于可以将姿态图像转换为姿态关键点数据后再进行传输,因此可以支持各种不同类型的摄像头采集到的画面,可以在适用更广的应用场景。
在步骤S1020中,云游戏服务器接收人体姿态,根据人体姿态生成目标游戏实例对应的多媒体数据,并将多媒体数据发送至云游戏客户端,以使云游戏客户端对多媒体数据进行播放。
在一示例性实施例中,在根据人体姿态生成目标游戏实例对应的多媒体数据时,可以先基于人体姿态生成目标游戏实例对应的对象姿态图像,然后根据对象姿态图像控制目标游戏实例中用户对应的虚拟游戏角色的姿态,并基于控制的过程生成目标游戏实例对应的多媒体数据。
其中,对象姿态图像是指目标游戏实例中控制对象对应的姿态图像。例如,在目标游戏实例中,虚拟游戏角色均为人形时,可以直接根据姿态关键点数据生成人体姿态图像;再如,虚拟游戏角色均为车形时,可以根据姿态关键点数据生成车姿态图像。
需要说明的是,在一些游戏实例中,可能同时存在多种类型的虚拟游戏角色,此时可以根据用户当前控制的虚拟游戏角色生成对应的对象姿态图像。例如,在目标游戏实例同时包括人形虚拟角色和动物形虚拟角色时,可以先确定用户当前控制的虚拟游戏角色是人形还是动物形,然后根据确定的类型生成对应的对象姿态图像。
此外,在同时存在多种类型的虚拟游戏角色时,为了实现上述过程,在用户选定控制的虚拟游戏角色时,可以根据该虚拟游戏角色确定需要采集的姿态关键点数据,也可以提前采集所有类型的虚拟游戏角色所需要的姿态关键点数据,在生成对象姿态图像时,根据各虚拟游戏角色需要的姿态关键点数据不同对姿态关键点数据进行筛选,本公开对实现上述过程的方式不做特殊限定。
其中,上述多媒体数据包括但不限于目标游戏实例在控制过程中的音频和视频数据。在多媒体数据包括音频和视频时,可以通过编码过程生成音视频数据流,然后将音视频数据流实时传输给对应的云游戏客户端,以使云游戏客户端可以对多媒体数据进行播放。
需要说明的是,在云游戏客户端对多媒体数据进行播放时,可以通过设置有云游戏客户端的设备中包括的多媒体装置进行播放。例如,在以手机为云游戏客户端时,可以直接通过手机屏幕和手机音频模块等多媒体装置对多媒体数据进行播放;云游戏客户端还可以将多媒体数据发送至外设的多媒体装置进行播放。例如,在以手机为云游戏客户端时,用户可能觉得手机屏幕过小,因此可以将多媒体数据发送至电视,通过电视的多媒体装置对多媒体数据进行播放。
需要注意的是,上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
上述方法中各步骤的具体细节在系统部分实施方式中已经详细说明,未披露的细节内容可以参见方法部分的实施方式内容,因而不再赘述。
所属技术领域的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。

Claims (10)

1.一种云游戏控制系统,其特征在于,包括:
云游戏客户端,用于获取用户的人体姿态,并将所述人体姿态发送至云游戏服务器;
云游戏服务器,用于接收所述人体姿态,根据所述人体姿态生成目标游戏实例对应的多媒体数据,并将所述多媒体数据发送至所述云游戏客户端,以使所述云游戏客户端对所述多媒体数据进行播放。
2.根据权利要求1所述的系统,其特征在于,所述云游戏客户端包括:
信息获取模块,用于获取所述用户的人体姿态;
第一传输模块,用于将所述人体姿态发送至所述云游戏服务器。
3.根据权利要求1所述的系统,其特征在于,所述人体姿态包括姿态关键点数据,所述云游戏客户端包括:
图像获取模块,用于获取所述用户的姿态图像;
图像检测模块,用于对所述姿态图像进行关键点检测,得到所述姿态关键点数据。
4.根据权利要求3所述的系统,其特征在于,所述云游戏控制系统还包括:
摄像模块,用于采集所述用户的姿态图像,并将所述姿态图像发送至所述图像获取模块。
5.根据权利要求1所述的系统,其特征在于,所述云游戏服务器包括:
第二传输模块,用于接收所述人体姿态;以及将所述多媒体数据发送至所述云游戏客户端;
数据生成模块,用于根据所述人体姿态生成所述目标游戏实例对应的多媒体数据。
6.根据权利要求4所述的系统,其特征在于,所述数据生成模块包括:
图像生成单元,用于基于所述人体姿态生成目标游戏实例对应的对象姿态图像;
实例控制单元,用于根据所述对象姿态图像控制所述目标游戏实例中,所述用户对应的虚拟游戏角色的姿态;
多媒体生成单元,用于基于所述控制的过程生成所述目标游戏实例对应的多媒体数据。
7.一种云游戏控制方法,其特征在于,应用于云游戏控制系统,所述方法包括:
云游戏客户端获取用户的人体姿态,并将所述人体姿态发送至云游戏服务器;
所述云游戏服务器接收所述人体姿态,根据所述人体姿态生成目标游戏实例对应的多媒体数据,并将所述多媒体数据发送至所述云游戏客户端,以使所述云游戏客户端对所述多媒体数据进行播放。
8.根据权利要求7所述的方法,其特征在于,所述人体姿态包括姿态关键点数据;
所述获取用户的人体姿态,包括:
获取所述用户的姿态图像;
对所述姿态图像进行关键点检测,得到所述姿态关键点数据。
9.根据权利要求8所述的方法,其特征在于,所述云游戏控制系统包括摄像模块;所述获取所述用户的姿态图像,包括:
利用所述摄像模块采集所述用户的姿态图像。
10.根据权利要求7所述的方法,其特征在于,所述根据所述人体姿态生成目标游戏实例对应的多媒体数据,包括:
基于所述人体姿态生成目标游戏实例对应的对象姿态图像;
根据所述对象姿态图像控制所述目标游戏实例中,所述用户对应的虚拟游戏角色的姿态;
基于所述控制的过程生成所述目标游戏实例对应的多媒体数据。
CN202011367734.5A 2020-11-27 2020-11-27 云游戏控制系统和云游戏控制方法 Pending CN112354185A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011367734.5A CN112354185A (zh) 2020-11-27 2020-11-27 云游戏控制系统和云游戏控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011367734.5A CN112354185A (zh) 2020-11-27 2020-11-27 云游戏控制系统和云游戏控制方法

Publications (1)

Publication Number Publication Date
CN112354185A true CN112354185A (zh) 2021-02-12

Family

ID=74536322

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011367734.5A Pending CN112354185A (zh) 2020-11-27 2020-11-27 云游戏控制系统和云游戏控制方法

Country Status (1)

Country Link
CN (1) CN112354185A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112973110A (zh) * 2021-03-19 2021-06-18 深圳创维-Rgb电子有限公司 云游戏控制方法、装置、网络电视及计算机可读存储介质
CN113476830A (zh) * 2021-07-26 2021-10-08 西安万像电子科技有限公司 云游戏数据处理方法、装置、游戏终端及处理器

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102728058A (zh) * 2011-04-02 2012-10-17 德信互动科技(北京)有限公司 基于云的游戏实现系统
CN108845670A (zh) * 2018-06-27 2018-11-20 苏州馨镜家园软件科技有限公司 一种基于体感设备的在线虚拟健身娱乐系统及方法
CN110830772A (zh) * 2019-11-18 2020-02-21 智锐达仪器科技南通有限公司 一种厨房视频分析资源调度方法、装置及系统
CN111790145A (zh) * 2019-09-10 2020-10-20 厦门雅基软件有限公司 数据处理的方法、装置、云游戏引擎及计算机存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102728058A (zh) * 2011-04-02 2012-10-17 德信互动科技(北京)有限公司 基于云的游戏实现系统
CN108845670A (zh) * 2018-06-27 2018-11-20 苏州馨镜家园软件科技有限公司 一种基于体感设备的在线虚拟健身娱乐系统及方法
CN111790145A (zh) * 2019-09-10 2020-10-20 厦门雅基软件有限公司 数据处理的方法、装置、云游戏引擎及计算机存储介质
CN110830772A (zh) * 2019-11-18 2020-02-21 智锐达仪器科技南通有限公司 一种厨房视频分析资源调度方法、装置及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
方圆圆著: "《人脸识别与美颜算法实战 基于Python、机器学习与深度学习》", 30 April 2020 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112973110A (zh) * 2021-03-19 2021-06-18 深圳创维-Rgb电子有限公司 云游戏控制方法、装置、网络电视及计算机可读存储介质
CN113476830A (zh) * 2021-07-26 2021-10-08 西安万像电子科技有限公司 云游戏数据处理方法、装置、游戏终端及处理器

Similar Documents

Publication Publication Date Title
CN111445583B (zh) 增强现实处理方法及装置、存储介质和电子设备
CN111866483B (zh) 颜色还原方法及装置、计算机可读介质和电子设备
CN113426117B (zh) 虚拟相机拍摄参数获取方法、装置、电子设备和存储介质
CN110213485B (zh) 一种图像处理方法及终端
CN112927362A (zh) 地图重建方法及装置、计算机可读介质和电子设备
WO2022252823A1 (zh) 直播视频生成方法及装置
CN110178158A (zh) 信息处理装置、信息处理方法和程序
CN112354185A (zh) 云游戏控制系统和云游戏控制方法
CN113038165B (zh) 确定编码参数组的方法、设备及存储介质
CN112533017A (zh) 直播方法、装置、终端及存储介质
CN113223129A (zh) 一种图像渲染方法、电子设备及系统
CN110956571B (zh) 基于slam进行虚实融合的方法及电子设备
CN112581571A (zh) 虚拟形象模型的控制方法、装置、电子设备及存储介质
KR20050082559A (ko) 댄스 학습 시스템, 이를 이용한 인터넷 커뮤니티 서비스시스템과 인터넷 커뮤니티 서비스 방법, 댄스 학습 방법및 상기 방법들을 실행하는 프로그램을 기록한 컴퓨터로읽을 수 있는 기록매체
WO2017061890A1 (en) Wireless full body motion control sensor
WO2020062998A1 (zh) 图像处理方法、存储介质及电子设备
JP6807744B2 (ja) 画像表示方法及び装置
CN111385481A (zh) 图像处理方法及装置、电子设备及存储介质
CN112559795A (zh) 歌曲播放方法、歌曲推荐方法、装置及系统
CN113014960A (zh) 一种在线制作视频的方法、装置及存储介质
CN116703995A (zh) 视频虚化处理方法和装置
CN110312144B (zh) 进行直播的方法、装置、终端和存储介质
CN111757005A (zh) 拍摄控制方法及装置、计算机可读介质和电子设备
CN113298013A (zh) 运动动作矫正方法、装置、存储介质及电子设备
CN111982293A (zh) 体温测量方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination