CN109005424B - 对象的控制方法、装置及系统、存储介质、电子装置 - Google Patents

对象的控制方法、装置及系统、存储介质、电子装置 Download PDF

Info

Publication number
CN109005424B
CN109005424B CN201810942450.0A CN201810942450A CN109005424B CN 109005424 B CN109005424 B CN 109005424B CN 201810942450 A CN201810942450 A CN 201810942450A CN 109005424 B CN109005424 B CN 109005424B
Authority
CN
China
Prior art keywords
terminal
target
application
streaming media
media information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810942450.0A
Other languages
English (en)
Other versions
CN109005424A (zh
Inventor
肖望忠
伍海君
林森
詹庆丰
周灵通
陈鲲鹏
张文斐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Chengdu Co Ltd
Original Assignee
Tencent Technology Chengdu Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Chengdu Co Ltd filed Critical Tencent Technology Chengdu Co Ltd
Priority to CN201810942450.0A priority Critical patent/CN109005424B/zh
Publication of CN109005424A publication Critical patent/CN109005424A/zh
Application granted granted Critical
Publication of CN109005424B publication Critical patent/CN109005424B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种对象的控制方法、装置及系统、存储介质、电子装置。其中，该方法包括：获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端；在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，目标指令用于操控虚拟场景中的目标对象。本发明解决了相关技术中构建虚拟场景模拟系统的成本较高的技术问题。

Description

对象的控制方法、装置及系统、存储介质、电子装置
技术领域
本发明涉及互联网领域，具体而言，涉及一种对象的控制方法、装置及系统、存储介质、电子装置。
背景技术
随着多媒体技术的发展和无线网络的普及，人们的娱乐活动变得越来越丰富，如通过媒体设备联网玩游戏、通过电脑玩单机或者联网游戏，游戏类型多种多样，如弹幕射击游戏、冒险游戏、模拟游戏、角色扮演游戏、休闲棋牌游戏和其它游戏等。
为了追求较为出色的游戏体验，玩家往往选择在大型显示设备上体验游戏，此时需要玩家购买专用的游戏主机和大型显示器，将游戏主机和大型显示器相连接，以构建游戏娱乐系统，通过显示器输出游戏娱乐的虚拟场景的游戏画面，该游戏体验需要玩家投入较大的资金成本来购买设备。
类似地，在军事模拟、虚拟社交场景模拟等领域，也存在类似的问题，需要用户购买专用设备才能实现军事虚拟场景的模拟和虚拟社交场景的模拟。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种对象的控制方法、装置及系统、存储介质、电子装置，以至少解决相关技术中构建虚拟场景模拟系统的成本较高的技术问题。
根据本发明实施例的一个方面，提供了一种对象的控制方法，包括：获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；在第二终端上播放目标流媒体信息，其中，第二终端和第一终端为不同终端；在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
根据本发明实施例的一个方面，提供了一种对象的控制方法，包括：获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；向第二终端发送目标流媒体信息，其中，第二终端和第一终端为不同终端；在向第二终端发送目标流媒体信息的过程中，获取第二终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
根据本发明实施例的另一方面，还提供了一种对象的控制装置，包括：第一获取单元，用于获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；播放单元，用于在第二终端上播放目标流媒体信息，其中，第二终端和第一终端为不同终端；第一发送单元，用于在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
根据本发明实施例的另一方面，还提供了一种对象的控制装置，包括：第二获取单元，用于获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；第二发送单元，用于向第二终端发送目标流媒体信息，其中，第二终端和第一终端为不同终端；第三获取单元，用于在向第二终端发送目标流媒体信息的过程中，获取第二终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
根据本发明实施例的另一方面，还提供了一种存储介质，该存储介质包括存储的程序，程序运行时执行上述的方法。
根据本发明实施例的另一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器通过计算机程序执行上述的方法。
在本发明实施例中，获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端；在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，目标指令用于操控虚拟场景中的目标对象，在构建用于进行游戏、军事场景模拟、社交场景模拟的系统时，可以利用已有的通用性设备，如手机、平板电脑等作为系统中的第一终端，在第一终端上提供虚拟场景的第一应用，并将模拟的虚拟场景的目标流媒体信息即时地传输到第二终端(即显示终端)进行显示，而无需购买专用设备，可以解决相关技术中构建虚拟场景模拟系统的成本较高的技术问题，进而达到降低构建虚拟场景模拟系统的成本的技术效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的对象的控制方法的硬件环境的示意图；
图2是根据本发明实施例的一种可选的对象的控制方法的流程图；
图3是根据本发明实施例的一种可选的对象的控制方法的流程图；
图4是根据本发明实施例的一种可选的操控组件的示意图；
图5是根据本发明实施例的一种可选的对象的控制系统的示意图；
图6是根据本发明实施例的一种可选的对象的控制方法的示意图；
图7是根据本发明实施例的一种可选的对象的控制方法的流程图；
图8是根据本发明实施例的一种可选的对象的控制方法的流程图；
图9是根据本发明实施例的一种可选的对象的控制装置的示意图；
以及
图10是根据本发明实施例的一种终端的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先，在对本发明实施例进行描述的过程中出现的部分名词或者术语适用于如下解释：
相关技术中，在构建游戏娱乐系统时，玩家购买的专用游戏主机可以为SteamLink等设备，专用游戏主机可以通过串流技术在显示器上玩游戏，在游戏过程中，专用游戏主机可以是一个小盒子设备，这个设备有一个视频适配接口(如HDMI口、VGA口)接到显示器来显示画面，同时可通过蓝牙连接游戏手柄。
在上述技术方案中，游戏主机是一个专用设备，所以用户必须购买这个设备，从而增加了游戏成本，为了解决上述问题，根据本发明实施例的一方面，提供了一种对象的控制方法的方法实施例，而本申请提供的方法是基于软件的，用户可以直接利用现有的硬件，比如机顶盒、智能电视、手机等智能设备，通过安装一个用于实现本申请方法的应用就可以在其他设备(如智能电视)玩前述智能设备上安装的游戏。
可选地，在本实施例中，上述对象的控制方法可以应用于如图1所示的由第一终端101和第二终端103所构成的硬件环境中，可选地，本申请的硬件环境还可包括服务器105。如图1所示，第一终端101通过局域网与第二终端103进行连接，第一终端101通过网络与服务器105连接，上述网络包括但不限于：广域网、城域网或局域网，第一终端101并不限定于PC、手机、平板电脑等，第二终端103包括但不局限于智能显示器、智能电视等。服务器105可通过网络与第一终端101进行连接，可用于为终端或终端上安装的客户端提供服务(如游戏服务、应用服务等)，可在服务上或独立于服务器设置数据库107，用于为服务器105提供数据存储服务。
本发明实施例的对象的控制方法可以由第二终端103来执行。图2是根据本发明实施例的一种可选的对象的控制方法的流程图，如图2所示，该方法可以包括以下步骤：
步骤S202，第二终端获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。
上述的第一终端上安装有第三应用，第三应用是指具有虚拟场景的应用，如提供游戏虚拟场景的游戏应用、提供社交虚拟场景的社交应用、提供军事虚拟场景的军事战争模拟等应用，游戏应用包括但不局限于冒险游戏、模拟游戏、角色扮演游戏、MOBA类游戏和其它游戏。
在第三应用利用自带的渲染引擎、第一终端上的系统底层的渲染引擎或第一终端上安装的其他应用携带的渲染引擎对虚拟场景进行画面渲染时，在第一应用中可获取第三应用渲染得到的流媒体信息，即得到前述的目标流媒体信息。
在第一应用得到上述目标流媒体信息时，第一终端可以主动传输或被动请求的方式将得到的目标流媒体信息即时地传输给第二终端。
上述的目标流媒体信息包括持续的编码后的音频帧和/或编码后的视频帧。
步骤S204，在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端，此处的不同终端主要是指不同类型的终端，如操作系统类型不同或者操作系统不兼容的终端，如第一终端为采用Windows操作系统的终端，而第二终端为采用其他操作系统(如安卓、IOS等)的终端。
第一终端和第二终端为不同类型的终端，第一终端可以为用户的已有终端，如手机、平板电脑、计算机PC(即个人计算机personal computer)等通用设备(而非专用游戏设备)，第二终端为已有的可显示内容的终端，如传统电视、智能电视、智能显示器等。
步骤S206，在第二终端播放目标流媒体信息的过程中，第二终端向第一终端发送目标指令，目标指令用于操控虚拟场景中的目标对象。
上述实施例以本发明实施例的对象的控制方法由第二终端103来执行为例进行说明，本发明实施例的对象的控制方法也可以由第一终端101来执行，可包括如图3所示的如下步骤：
步骤S302，第一终端获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。
对于第一终端而言，第一应用可以通过截屏、通过显卡提供的视频获取接口等方式获取前述的目标流媒体信息。
步骤S304，第一终端向第二终端发送目标流媒体信息，第二终端和第一终端为不同终端。
步骤S306，在向第二终端发送目标流媒体信息的过程中，第一终端获取第二终端发送目标指令，按照目标指令的指示操控虚拟场景中的目标对象。
需要说明的是，本申请对图2所示步骤中术语的解释同样适用于图3所示步骤中的相同术语。
采用本申请的技术方案，可以利用已有的第一终端(如手机)和第二终端(如智能电视)组成一个系统，通过第一终端来安装第一应用，以提供虚拟场景，该当玩家在虚拟场景中执行相关任务(如游戏任务、军事模拟任务、社交任务等)时，通过第二终端输出实时采集到的目标流媒体信息(即相关任务的实时画面)，与此同时，玩家还可借助于第二终端向第一终端发送目标指令，通过目标指令控制在虚拟场景中执行相关任务的目标对象。
上述实施例以本发明实施例的对象的控制方法由第二终端103来执行为例进行说明，本发明实施例的对象的控制方法也可以由第一终端101来执行，还可以是由第一终端101和第二终端103共同执行。其中，第一终端101或第二终端103执行本发明实施例的对象的控制方法也可以是由安装在其上的客户端来执行。
通过上述步骤S202至步骤S206，在构建用于进行游戏、军事场景模拟、社交场景模拟的系统时，可以利用已有的通用性设备，如手机、平板电脑等作为系统中的第一终端，在第一终端上提供虚拟场景的第一应用，并将模拟的虚拟场景的目标流媒体信息即时地传输到第二终端(即显示终端)进行显示，而无需购买专用设备，可以解决相关技术中构建虚拟场景模拟系统的成本较高的技术问题，进而达到降低构建虚拟场景模拟系统的成本的技术效果。
采用本申请的技术方案，可实现能终端设备在局域网玩游戏、参与模拟的军事任务、参与模拟的社交任务等，而不借助于额外硬件，降低了系统构建成本。
本申请提供的技术方案可以软件的形式安装在终端设备上，可利用安装的软件取代游戏专用设备，如第二终端上的执行步骤S202至步骤S206的第二应用，第一终端上执行步骤S302至步骤S306的第三应用(如称为wegame，第三应用可以继承在第一应用中、或以独立应用的形式存在、或集成在第一终端的系统内)，第三应用在第一应用启动后，开始捕捉屏幕，并发送第二应用进行显示，同时，第二应用把手柄的控制事件传输给第三应用。下面结合图2和图3所示的步骤，以将本申请的技术方案应用于游戏中为例进一步详述本申请的技术方案。
在步骤S302提供的技术方案中，第一终端获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。例如，第一终端可使用串流的方式，将电脑等第二终端的画面或声音捕获成音视频流(即目标流媒体信息)，然后通过局域网络将音视频流传输到其他端(即第二终端)显示。
可选地，获取目标流媒体信息包括：获取对虚拟场景进行渲染得到的音频信息和视频信息，此处的视频信息是指对目标对象所在区域的虚拟场景进行渲染得到的视频信息，如，第一终端可通过捕获桌面，并通过将其转换为目标流媒体信息中的视频帧这一方式完成取图，然后将视频帧编码，以获得更小的存储大小，音频信息包括指虚拟场景中在目标对象的听力范围内的音频信息、使用第一终端的玩家的好友发送的音频信息、第一应用触发的所有玩家或者指定玩家(包括使用第一终端的玩家)的音频信息；第一终端对音频信息和视频信息进行编码得到目标流媒体信息。
在步骤S304提供的技术方案中，第一终端向第二终端发送目标流媒体信息，第二终端和第一终端为同一局域网中的不同终端，此处的局域网是在一个局部的地理范围内(如一个学校、工厂、机关或者家庭内)的设备通过路由器互联构成的网络。
可选地，第一终端向第二终端发送目标流媒体信息时，可建立第一终端与第二终端在局域网内的第一通信连接，在建立第一终端与第二终端在局域网内的第一通信连接的过程中，第一终端获取第二应用发送的第一通信连接的建立请求，第二应用是第二终端上安装的与第一应用适配的应用，然后向第二终端发送建立请求的响应消息，以在局域网内建立第一终端上的第一应用与第二终端上的第二应用之间的第一通信连接；然后通过该第一通信连接向第二终端发送目标流媒体信息。
在上述实施例中，第一终端上的第一应用相当于服务端软件，用于向第二终端提供游戏服务等服务的接口，第二终端上的第二应用相当于客户端软件，用于与第一应用适配使用，二者互相配合，将第一应用的流媒体信息传输到第二终端显示，与此同时，将通过第二终端获取到的目标指令传输给第一终端。
在步骤S202提供的技术方案中，第二终端获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。
第二终端在获取目标流媒体信息的过程中，为了建立第二终端与第一终端在局域网内的第一通信连接，可通过第二应用向第一终端发送第一通信连接的建立请求，在接收到第一终端对建立请求的响应消息的情况下，在局域网内建立第二终端上的第二应用与第一终端上的第一应用之间的第一通信连接；然后通过第一通信连接获取第一终端发送的目标流媒体信息。
在步骤S204提供的技术方案中，在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端。
需要说明的是，第二应用在第二终端上可以客户端或底层服务的形式存在，在第二终端上播放目标流媒体信息可包括：利用流媒体信息解码器对获取到的目标流媒体信息进行解码得到音频信息和视频信息；在第二终端的视频客户端(可以为上述第二应用的客户端或者其他视频客户端)上播放解码得到的视频信息，在第二终端的视频客户端播放视频信息的同时，按照视频信息相同的播放进度来播放音频信息。
可选地，为了保证数据的安全性，在第一应用中设置为第一算法，用于生成一个随机数，并利用该随机数生成加密秘钥，在发送目标流媒体信息时，利用对该加密秘钥对目标流媒体信息进行加密，在步骤S202中，获取到目标流媒体信息时还获取到上述的随机数，在第二应用中设置有第二算法，第二算法利用该随机数生成与加密密钥对应的解密秘钥，以在利用流媒体信息解码器对获取到的目标流媒体信息进行解码得到音频信息和视频信息之前，对目标流媒体信息进行解密，然后解码。
需要说明的是，为了避免秘钥被破解，第一应用每间隔固定时长(如10分钟)，会重新生成上述随机数，以重新生成加密秘钥，然后重复前述步骤。
在步骤S206提供的技术方案中，在第二终端播放目标流媒体信息的过程中，第二终端向第一终端发送目标指令，通过目标指令操控虚拟场景中的目标对象。
在上述实施例中，向第一终端发送目标指令包括：监测在操控组件上的目标操作，操控组件与第二终端第二通信连接，操控组件可以为第二终端的一部分(如遥控器、摄像头、触控屏、声控组件等)，还可以为与第二终端通信连接的独立设备，如蓝牙游戏手柄、有线游戏手柄、甚至利用手机等智能设备模拟出来的手柄(如图4所示)等；在监测到在操控组件上的目标操作的情况下，通过第二终端将与目标操作对应的目标指令发送给第一终端。
可选地，若上述操控组件为与第二终端独立的组件，在向第一终端发送目标指令之前，可监测操控组件是否与第二终端建立有第二通信连接；在监测到操控组件与第二终端建立有第二通信连接的情况，向第一终端发送操控组件的注册信息，注册信息用于指示将操控组件作为操控虚拟场景中的目标对象的组件。
相应地，对于第一终端而言，在获取第二终端发送目标指令之前，可获取第二终端发送的操控组件的注册信息，注册信息用于指示将操控组件作为操控虚拟场景中的目标对象的组件；需要说明的是，不同类型的操控组件所需的驱动是不同的，在接收到注册信息时，可下载并安装与注册信息所指示的操控组件所匹配的驱动。
当上述的操控组件连接至第二终端(如机顶盒等智能设备)的时候，第二应用就会发送消息通知第一终端(如电脑)上的第一应用(如wegame)，第一终端就会安装一个与操控组件匹配的驱动程序，然后第一应用就可以收到第二应用发送的手柄事件，并写入驱动，通过驱动通知游戏应用该手柄事件，而不用在游戏应用中进行手柄事件的适配，使得兼容性更好，对游戏应用来说，相当于操控组件直接插在第一终端上。
在步骤S306提供的技术方案中，在向第二终端发送目标流媒体信息的过程中，第一终端获取第二终端发送目标指令，按照目标指令的指示操控虚拟场景中的目标对象。
作为一种可选的实施例，下面继续以将本申请的技术方案应用于游戏应用为例进一步详述本申请的技术方案。
在相关技术中，Steam Link可以通过串流技术在电视上玩电脑的游戏，但是它是一个专用设备，这个设备有一个HDMI口接到电视来显示画面。由于Steam Link是一个游戏专用设备，所以用户必须购买这个设备，而本申请提供的方法是基于软件实现的，用户可以直接通过该软件利用现有的硬件，比如机顶盒、智能电视、手机等智能设备，通过安装一个第二应用就可以玩电脑上的游戏，电脑上可安装相应的客户端(即第一应用的客户端)。
相关技术中的Steam Link是基于硬件的，缺点是成本高，需要额外的设备，而本申请的技术方案是基于软件的，可利用现有的智能设备，成本低。
实现本申请的技术方案的系统参见图5，包括：
第一终端(如PC)，第一终端用于采集第一应用对虚拟场景进行渲染得到的目标流媒体信息，第一应用(如服务端软件)安装在第一终端上。
第二终端(如智能电视)，第二终端用于在播放从第一终端获取的目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象，第二终端和第一终端为不同终端。
第二终端上可安装第二应用(如客户端软件)，并通过连接的游戏手柄来参与游戏。其相当于是一种基于软件的远程控制游戏的玩法，大致实现原理是参见图6：
步骤11，PC端不断的捕获桌面来完成取图，然后进行视频编码以形成视频流；
步骤12，PC端不断的采集声卡，然后音频编码形成音频流。
步骤13，利用局域网的高速网络将音视频流(即目标流媒体信息)传到终端；
步骤14，终端将视频流和音频流分别解码，并播放解码出的画面和声音；
步骤15，游戏手柄连接到终端(可蓝牙或USB形式连接)，终端不断接收游戏手柄事件(即持续的手柄输入事件)，并传输对应的目标指令到PC端；
步骤16，PC端通过虚拟驱动技术，模拟一个真的设备向操作系统重放事件(即目标指令对应的手柄事件)；
步骤17，游戏内部逻辑会接收到事件并做出正确的响应。
图7示出了实现本申请技术方案的总体时序：
步骤S702，在手柄通过USB或蓝牙等方式连接终端时，终端向PC注册手柄；
步骤S704，PC端根据收到的注册信息安装对应的虚拟驱动；
步骤S706，返回“手柄注册成功”的信息给终端；
步骤S708，终端向PC请求音视频推流；
步骤S710，PC启动音视频推流服务；
步骤S712，PC返回音视频参数给终端；
步骤S714，终端向PC发送手柄控制指令；
步骤S716，PC向终端推送音视频流。
实现本申请技术方案的总体流程参见图8：
步骤S802，PC端安装虚拟驱动；
步骤S804，PC启动推流服务；
步骤S806，PC端推送音视频流到智能电视终端；
步骤S808，玩家通过客户端发送控制指令来参与游戏；
步骤S810，PC发送参与游戏的音视频到客户端播放；
步骤S812，判断游戏是否结束，若是则执行步骤S814否则回到步骤S806；
步骤S814，停止游戏。
以下是PC端如何处理画面声音部分的流程图：
步骤21，PC端接收智能电视终端的客户端连接；
步骤22，PC端启动推流服务；
步骤23，PC端捕捉桌面的画面和声音；
步骤24，PC端将画面和声音编码为音视频流中的音视频帧；
步骤25，PC端将音视频流发送给客户端；
步骤26，判断游戏是否结束，若是则执行步骤27，否则回到步骤23；
步骤27，结束推流服务。
以下是智能电视端如何处理画面声音部分的流程图：
步骤31，客户端连接到服务器PC端；
步骤32，客户端向PC端请求音视频；
步骤33，客户端接收音视频流中的音视频帧；
步骤34，在客户端解码音视频帧；
步骤35，客户端播放音视频帧；
步骤36，判断游戏是否结束，若是则执行步骤37，否则回到步骤33；
步骤37，停止对游戏画面的显示。
以下是智能电视端的控制指令部分的流程图：
步骤41，在客户端中监听手柄插拔事件；
步骤42，在监测到手柄接入的情况下，向PC端注册该手柄；
步骤43，在客户端中捕获手柄指令(即目标指令)；
步骤44，客户端将手柄指令发送给PC；
步骤45，判断手柄指令是否结束，若是则执行步骤46，否则回到步骤43；
步骤46，停止对手柄指令的捕获。
以下是智PC端的控制指令部分的流程图：
步骤51，通过客户端监听手柄插拔事件；
步骤52，在监听到手柄接入的情况下，PC端获取客户端发送的该手柄的注册信息；
步骤53，通过客户端中捕获手柄指令；
步骤54，PC端获取客户端发送的手柄指令；
步骤55，判断手柄指令是否结束，若是则执行步骤56，否则回到步骤53；
步骤56，停止对手柄指令的执行。
采用本申请的技术方案，可利用局域网的低延迟高速的将游戏的画面和声音实时传送给智能终端，然后使用虚拟驱动模拟实际手柄控制PC游戏，实现了终端设备在局域网玩PC游戏，而不借助额外硬件，降低了成本。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
根据本发明实施例的另一个方面，还提供了一种用于实施上述对象的控制方法的对象的控制装置。图9是根据本发明实施例的一种可选的对象的控制装置的示意图，如图9所示，该装置可以包括：第一获取单元901、播放单元903以及第一发送单元905。
第一获取单元901，用于获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。
上述的第一终端上安装有第三应用，第三应用是指具有虚拟场景的应用，如提供游戏虚拟场景的游戏应用、提供社交虚拟场景的社交应用、提供军事虚拟场景的军事战争模拟等应用，游戏应用包括但不局限于冒险游戏、模拟游戏、角色扮演游戏、MOBA类游戏和其它游戏。
在第三应用利用自带的渲染引擎、第一终端上的系统底层的渲染引擎或第一终端上安装的其他应用携带的渲染引擎对虚拟场景进行画面渲染时，在第一应用中可获取第三应用渲染得到的流媒体信息，即得到前述的目标流媒体信息。
在第一应用得到上述目标流媒体信息时，第一终端可以主动传输或被动请求的方式将得到的目标流媒体信息即时地传输给第二终端。
上述的目标流媒体信息包括持续的编码后的音频帧和/或编码后的视频帧。
播放单元903，用于在第二终端上播放目标流媒体信息，其中，第二终端和第一终端为不同终端。
第一终端和第二终端为不同类型的终端，第一终端可以为用户的已有终端，如手机、平板电脑、计算机PC(即个人计算机personal computer)等通用设备(而非专用游戏设备)，第二终端为已有的可显示内容的终端，如传统电视、智能电视、智能显示器等。
第一发送单元905，用于在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
需要说明的是，该实施例中的第一获取单元901可以用于执行本申请实施例中的步骤S202，该实施例中的播放单元903可以用于执行本申请实施例中的步骤S204，该实施例中的第一发送单元905可以用于执行本申请实施例中的步骤S206。
此处需要说明的是，上述模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在如图1所示的硬件环境中，可以通过软件实现，也可以通过硬件实现。
通过上述模块，获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端；在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，目标指令用于操控虚拟场景中的目标对象，在构建用于进行游戏、军事场景模拟、社交场景模拟的系统时，可以利用已有的通用性设备，如手机、平板电脑等作为系统中的第一终端，在第一终端上提供虚拟场景的第一应用，并将模拟的虚拟场景的目标流媒体信息即时地传输到第二终端(即显示终端)进行显示，而无需购买专用设备，可以解决相关技术中构建虚拟场景模拟系统的成本较高的技术问题，进而达到降低构建虚拟场景模拟系统的成本的技术效果。
可选地，第一获取单元包括：第一建立模块，用于建立第二终端与第一终端在局域网内的第一通信连接；获取模块，用于通过第一通信连接获取第一终端发送的目标流媒体信息。
可选地，第一建立模块还可用于：通过第二应用向第一终端发送第一通信连接的建立请求，其中，第二应用是第二终端上安装的与第一应用适配的应用；在接收到第一终端对建立请求的响应消息的情况下，在局域网内建立第二终端上的第二应用与第一终端上的第一应用之间的第一通信连接。
可选地，第一发送单元包括：第一监测模块，用于监测在操控组件上的目标操作，其中，操控组件与第二终端第二通信连接；第一发送模块，用于在监测到目标操作的情况下，通过第二终端将与目标操作对应的目标指令发送给第一终端。
可选地，第一发送单元还可包括：第二监测模块，用于监测操控组件是否与第二终端建立有第二通信连接；第二发送模块，用于在监测到操控组件与第二终端建立有第二通信连接的情况，向第一终端发送操控组件的注册信息，其中，注册信息用于指示将操控组件作为操控虚拟场景中的目标对象的组件。
可选地，播放单元包括：解码模块，用于对获取到的目标流媒体信息进行解码得到音频信息和视频信息；播放模块，用于在第二终端播放视频信息的同时，按照视频信息相同的播放进度来播放音频信息。
根据本发明实施例的另一个方面，还提供了一种用于实施上述对象的控制方法的对象的控制装置。该装置可以包括：第二获取单元11、第二发送单元13以及第三获取单元15。
第二获取单元11，用于获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上。
第二发送单元13，用于向第二终端发送目标流媒体信息，其中，第二终端和第一终端为不同终端。
第三获取单元15，用于在向第二终端发送目标流媒体信息的过程中，获取第二终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
需要说明的是，该实施例中的第二获取单元11可以用于执行本申请实施例中的步骤S302，该实施例中的第二发送单元13可以用于执行本申请实施例中的步骤S304，该实施例中的第三获取单元15可以用于执行本申请实施例中的步骤S306。
可选地，第二发送单元包括：第二建立模块，用于建立第一终端与第二终端在局域网内的第一通信连接；第三发送模块，用于通过第一通信连接向第二终端发送目标流媒体信息。
上述的第二建立模块还可用于：获取第二应用发送的第一通信连接的建立请求，其中，第二应用是第二终端上安装的与第一应用适配的应用；向第二终端发送建立请求的响应消息，以在局域网内建立第一终端上的第一应用与第二终端上的第二应用之间的第一通信连接。
可选地，第三获取单元在获取第二终端发送目标指令之前，还可用于：获取第二终端发送的操控组件的注册信息，其中，注册信息用于指示将操控组件作为操控虚拟场景中的目标对象的组件；下载并安装与注册信息所指示的操控组件所匹配的驱动。
可选地，第二获取单元还可用于：获取对虚拟场景进行渲染得到的音频信息和视频信息；对音频信息和视频信息进行编码得到目标流媒体信息。
本申请提供的技术方案可以软件的形式安装在终端设备上，可利用安装的软件取代游戏专用设备，如第二终端上的执行步骤S202至步骤S206的第二应用，第一终端上执行步骤S302至步骤S306的第三应用(如称为wegame，第三应用可以继承在第一应用中、或以独立应用的形式存在、或集成在第一终端的系统内)，第三应用在第一应用启动后，开始捕捉屏幕，并发送第二应用进行显示，同时，第二应用把手柄的控制事件传输给第三应用。
采用本申请的技术方案，可利用局域网的低延迟高速的将游戏的画面和声音实时传送给智能终端，然后使用虚拟驱动模拟实际手柄控制PC游戏，实现了终端设备在局域网玩PC游戏，而不借助额外硬件，降低了成本。
此处需要说明的是，上述模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在如图1所示的硬件环境中，可以通过软件实现，也可以通过硬件实现，其中，硬件环境包括网络环境。
根据本发明实施例的另一个方面，还提供了一种用于实施上述对象的控制方法的服务器或终端。
图10是根据本发明实施例的一种终端的结构框图，如图10所示，该终端可以包括：一个或多个(图10中仅示出一个)处理器1001、存储器1003、以及传输装置1005，如图10所示，该终端还可以包括输入输出设备1007。
其中，存储器1003可用于存储软件程序以及模块，如本发明实施例中的对象的控制方法和装置对应的程序指令/模块，处理器1001通过运行存储在存储器1003内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的对象的控制方法。存储器1003可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器1003可进一步包括相对于处理器1001远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述的传输装置1005用于经由一个网络接收或者发送数据，还可以用于处理器与存储器之间的数据传输。上述的网络具体实例可包括有线网络及无线网络。在一个实例中，传输装置1005包括一个网络适配器(Network Interface Controller，NIC)，其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中，传输装置1005为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
其中，具体地，存储器1003用于存储应用程序。
处理器1001可以通过传输装置1005调用存储器1003存储的应用程序，以执行下述步骤：
获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；
在第二终端上播放目标流媒体信息，其中，第二终端和第一终端为不同终端；
在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
处理器1001还用于执行下述步骤：
通过第二应用向第一终端发送第一通信连接的建立请求，其中，第二应用是第二终端上安装的与第一应用适配的应用；
在接收到第一终端对建立请求的响应消息的情况下，在局域网内建立第二终端上的第二应用与第一终端上的第一应用之间的第一通信连接。
采用本发明实施例，获取目标流媒体信息，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；在第二终端上播放目标流媒体信息，第二终端和第一终端为不同终端；在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，目标指令用于操控虚拟场景中的目标对象，在构建用于进行游戏、军事场景模拟、社交场景模拟的系统时，可以利用已有的通用性设备，如手机、平板电脑等作为系统中的第一终端，在第一终端上提供虚拟场景的第一应用，并将模拟的虚拟场景的目标流媒体信息即时地传输到第二终端(即显示终端)进行显示，而无需购买专用设备，可以解决相关技术中构建虚拟场景模拟系统的成本较高的技术问题，进而达到降低构建虚拟场景模拟系统的成本的技术效果。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例在此不再赘述。
本领域普通技术人员可以理解，图10所示的结构仅为示意，终端可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile InternetDevices，MID)、PAD等终端设备。图10其并不对上述电子装置的结构造成限定。例如，终端还可包括比图10中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图10所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(RandomAccess Memory，RAM)、磁盘或光盘等。
本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以用于执行对象的控制方法的程序代码。
可选地，在本实施例中，上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：
S12，获取目标流媒体信息，其中，目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，第一应用安装在第一终端上；
S14，在第二终端上播放目标流媒体信息，其中，第二终端和第一终端为不同终端；
S16，在第二终端播放目标流媒体信息的过程中，向第一终端发送目标指令，其中，目标指令用于操控虚拟场景中的目标对象。
可选地，存储介质还被设置为存储用于执行以下步骤的程序代码：
S22，通过第二应用向第一终端发送第一通信连接的建立请求，其中，第二应用是第二终端上安装的与第一应用适配的应用；
S24，在接收到第一终端对建立请求的响应消息的情况下，在局域网内建立第二终端上的第二应用与第一终端上的第一应用之间的第一通信连接。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例在此不再赘述。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (14)

1.一种对象的控制方法，其特征在于，包括：
获取目标流媒体信息，其中，所述目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，所述第一应用安装在第一终端上，用于提供虚拟场景；
在第二终端上播放所述目标流媒体信息，其中，所述第二终端和所述第一终端为不同终端；
当操控组件是独立设备时，监测操控组件是否与所述第二终端建立有第二通信连接；所述独立设备为与所述第二终端独立的组件；
在监测到所述操控组件与所述第二终端建立有所述第二通信连接的情况，向所述第一终端发送所述操控组件的注册信息，其中，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件；
向第一终端上的第一应用发送消息通知，其中，所述消息通知用于使所述第一终端下载并安装与所述注册消息所指示的操控组件所匹配的驱动，不同类型的操控组件对应不同的驱动；
在所述第二终端播放所述目标流媒体信息的过程中，向所述第一终端发送目标指令，其中，所述目标指令用于操控所述虚拟场景中的目标对象；
所述第一终端上的第一应用将所述目标指令对应的目标操作事件写入所述驱动，通过所述驱动，根据所述目标操作事件操控所述目标对象。
2.根据权利要求1所述的方法，其特征在于，获取目标流媒体信息包括：
建立所述第二终端与所述第一终端在局域网内的第一通信连接；
通过所述第一通信连接获取所述第一终端发送的所述目标流媒体信息。
3.根据权利要求2所述的方法，其特征在于，建立所述第二终端与所述第一终端在局域网内的第一通信连接包括：
通过第二应用向所述第一终端发送所述第一通信连接的建立请求，其中，所述第二应用是所述第二终端上安装的与所述第一应用适配的应用；
在接收到所述第一终端对所述建立请求的响应消息的情况下，在所述局域网内建立所述第二终端上的所述第二应用与所述第一终端上的所述第一应用之间的所述第一通信连接。
4.根据权利要求1至3中任意一项所述的方法，其特征在于，向所述第一终端发送目标指令包括：
监测在操控组件上的目标操作，其中，所述操控组件与所述第二终端建立有第二通信连接；
在监测到所述目标操作的情况下，通过所述第二终端将与所述目标操作对应的所述目标指令发送给所述第一终端。
5.根据权利要求1至3中任意一项所述的方法，其特征在于，在第二终端上播放所述目标流媒体信息包括：
对获取到的所述目标流媒体信息进行解码得到音频信息和视频信息；
在所述第二终端播放所述视频信息的同时，按照所述视频信息相同的播放进度来播放所述音频信息。
6.一种对象的控制方法，其特征在于，包括：
获取目标流媒体信息，其中，所述目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，所述第一应用安装在第一终端上，用于提供虚拟场景；
向第二终端发送所述目标流媒体信息，其中，所述第二终端和所述第一终端为不同终端；
当操控组件是独立设备时，获取所述第二终端发送的操控组件的注册信息，其中，所述独立设备为与所述第二终端独立的组件，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件；
接收第二终端上的第二应用发送的消息通知，其中，所述消息通知用于使所述第一终端下载并安装与所述注册消息所指示的操控组件所匹配的驱动，不同类型的操控组件对应不同的驱动；
在向所述第二终端发送所述目标流媒体信息的过程中，获取所述第二终端发送目标指令，其中，所述目标指令用于操控所述虚拟场景中的目标对象，将所述目标指令对应的目标操作事件写入所述驱动，并通过所述驱动，根据所述目标操作事件操控所述目标对象。
7.根据权利要求6所述的方法，其特征在于，向第二终端发送所述目标流媒体信息包括：
建立所述第一终端与所述第二终端在局域网内的第一通信连接；
通过所述第一通信连接向所述第二终端发送所述目标流媒体信息。
8.根据权利要求7所述的方法，其特征在于，建立所述第一终端与所述第二终端在局域网内的第一通信连接包括：
获取第二应用发送的所述第一通信连接的建立请求，其中，所述第二应用是所述第二终端上安装的与所述第一应用适配的应用；
向所述第二终端发送所述建立请求的响应消息，以在所述局域网内建立所述第一终端上的所述第一应用与所述第二终端上的所述第二应用之间的所述第一通信连接。
9.根据权利要求6所述的方法，其特征在于，获取目标流媒体信息包括：
获取对所述虚拟场景进行渲染得到的音频信息和视频信息；
对所述音频信息和所述视频信息进行编码得到所述目标流媒体信息。
10.一种对象的控制装置，其特征在于，包括：
第一获取单元，用于获取目标流媒体信息，其中，所述目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，所述第一应用安装在第一终端上，用于提供虚拟场景；
播放单元，用于在第二终端上播放所述目标流媒体信息，其中，所述第二终端和所述第一终端为不同终端；
第一发送单元，用于在所述第二终端播放所述目标流媒体信息的过程中，向所述第一终端发送目标指令，其中，所述目标指令用于操控所述虚拟场景中的目标对象；
第一发送单元包括：第二监测模块，用于当操控组件是独立设备时，监测操控组件是否与第二终端建立有第二通信连接，所述独立设备为与所述第二终端独立的组件；第二发送模块，用于在监测到操控组件与第二终端建立有第二通信连接的情况，向第一终端发送操控组件的注册信息，以及用于向第一终端上的第一应用发送消息通知；
其中，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件，所述消息通知用于使所述第一终端下载并安装与所述注册消息所指示的操控组件所匹配的驱动，不同类型的操控组件对应不同的驱动，进而使第一终端上的第一应用能够将所述目标指令对应的目标操作事件写入所述驱动，并通过所述驱动，根据所述目标操作事件操控所述目标对象。
11.一种对象的控制装置，其特征在于，包括：
第二获取单元，用于获取目标流媒体信息，其中，所述目标流媒体信息为第一应用对虚拟场景进行渲染得到的流媒体信息，所述第一应用安装在第一终端上，用于提供虚拟场景；
第二发送单元，用于向第二终端发送所述目标流媒体信息，其中，所述第二终端和所述第一终端为不同终端；
第三获取单元，用于当操控组件是独立设备时，获取所述第二终端发送的操控组件的注册信息，其中，所述独立设备为与所述第二终端独立的组件，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件；用于接收第二终端上的第二应用发送的消息通知，所述消息通知用于使所述第一终端下载并安装与所述注册消息所指示的操控组件所匹配的驱动，不同类型的操控组件对应不同的驱动；以及用于在向所述第二终端发送所述目标流媒体信息的过程中，获取所述第二终端发送目标指令，其中，所述目标指令用于操控所述虚拟场景中的目标对象，将所述目标指令对应的目标操作事件写入所述驱动，并通过所述驱动，根据所述目标操作事件操控所述目标对象。
12.一种对象的控制系统，其特征在于，包括：
第一终端，所述第一终端用于采集第一应用对虚拟场景进行渲染得到的目标流媒体信息，其中，所述第一应用安装在第一终端上，用于提供虚拟场景，以及用于获取第二终端发送的操控组件的注册信息，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件；
第二终端，所述第二终端用于当操控组件是独立设备时，监测操控组件是否与所述第二终端建立有第二通信连接，所述独立设备为与所述第二终端独立的组件；在监测到所述操控组件与所述第二终端建立有所述第二通信连接的情况，向所述第一终端发送所述操控组件的注册信息，其中，所述注册信息用于指示将所述操控组件作为操控所述虚拟场景中的目标对象的组件；向第一终端上的第一应用发送消息通知，其中，所述消息通知用于使所述第一终端下载并安装与所述注册消息所指示的操控组件所匹配的驱动，不同类型的操控组件对应不同的驱动；以及在播放从所述第一终端获取的所述目标流媒体信息的过程中，向所述第一终端发送目标指令，其中，所述目标指令用于操控所述虚拟场景中的目标对象，所述第二终端和所述第一终端为不同终端；
所述第一终端还用于将所述目标指令对应的目标操作事件写入所述驱动，通过所述驱动，根据所述目标操作事件操控所述目标对象。
13.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序运行时执行上述权利要求1至9任一项中所述的方法。
14.一种电子装置，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器通过所述计算机程序执行上述权利要求1至9任一项中所述的方法。
CN201810942450.0A 2018-08-17 2018-08-17 对象的控制方法、装置及系统、存储介质、电子装置 Active CN109005424B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810942450.0A CN109005424B (zh) 2018-08-17 2018-08-17 对象的控制方法、装置及系统、存储介质、电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810942450.0A CN109005424B (zh) 2018-08-17 2018-08-17 对象的控制方法、装置及系统、存储介质、电子装置

Publications (2)

Publication Number Publication Date
CN109005424A CN109005424A (zh) 2018-12-14
CN109005424B true CN109005424B (zh) 2021-07-16

Family

ID=64593068

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810942450.0A Active CN109005424B (zh) 2018-08-17 2018-08-17 对象的控制方法、装置及系统、存储介质、电子装置

Country Status (1)

Country Link
CN (1) CN109005424B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111147916A (zh) * 2019-12-31 2020-05-12 北京比利信息技术有限公司 跨平台服务系统、方法、设备和存储介质
CN113543364A (zh) * 2020-04-20 2021-10-22 阿里巴巴集团控股有限公司 代理服务方法、投屏方法、终端设备、电子设备和存储介质
CN111970573A (zh) * 2020-07-27 2020-11-20 西安万像电子科技有限公司 云游戏方法和系统
CN112121406A (zh) * 2020-09-22 2020-12-25 北京完美赤金科技有限公司 对象的控制方法和装置、存储介质、电子装置
CN113633970B (zh) * 2021-08-18 2024-03-08 腾讯科技(成都)有限公司 动作效果的显示方法、装置、设备及介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES1069493Y (es) * 2006-02-23 2009-07-03 Game Concepts Ltd Maquina de juegos
CN101764920B (zh) * 2009-12-02 2012-12-26 陈奎林 一种家用影视设备的控制系统及方法
CN102098581A (zh) * 2010-12-22 2011-06-15 青岛海信宽带多媒体技术有限公司 一种电视游戏的实现方法及实现装置
CN102291610A (zh) * 2011-09-02 2011-12-21 广东中大讯通软件科技有限公司 一种基于三网融合的数字家庭机顶盒
CN103316472B (zh) * 2013-05-17 2015-12-23 南京睿悦信息技术有限公司 一种基于蓝牙手柄的Android设备游戏平台系统及其实现方法
CN103399705A (zh) * 2013-07-19 2013-11-20 北京小米科技有限责任公司 遥控终端设备的方法、装置和设备
US9619029B2 (en) * 2013-11-14 2017-04-11 Immersion Corporation Haptic trigger control system
US20160260319A1 (en) * 2015-03-04 2016-09-08 Aquimo, Llc Method and system for a control device to connect to and control a display device
CN104932926B (zh) * 2015-07-09 2018-01-12 上海联彤网络通讯技术有限公司 智能操作系统平台中实现设备与驱动动态匹配的系统及方法
CN106371935A (zh) * 2016-08-26 2017-02-01 上海浮罗创业投资有限公司 游戏操控界面的获取方法及装置
JP6383815B2 (ja) * 2017-01-06 2018-08-29 任天堂株式会社 ゲームシステム、ゲーム装置およびゲームコントローラ
CN107256135A (zh) * 2017-06-07 2017-10-17 黄之 一种屏幕显示信息的处理、显示方法及系统
CN107995508A (zh) * 2017-12-04 2018-05-04 深圳华影芯科技有限公司 一种全新的iOS/Android系统智能终端镜像同屏方法及设备

Also Published As

Publication number Publication date
CN109005424A (zh) 2018-12-14

Similar Documents

Publication Publication Date Title
CN109005424B (zh) 对象的控制方法、装置及系统、存储介质、电子装置
EP3600580B1 (en) Personalized user interface based on in-application behavior
US20200086213A1 (en) Web-Based Game Controller
JP5987060B2 (ja) ゲームシステム、ゲーム装置、制御方法、プログラム及び記録媒体
US9873045B2 (en) Systems and methods for a unified game experience
US10039979B2 (en) Capturing asynchronous commentary to pre-recorded gameplay
EP2574382B1 (en) Video game assistance system and method
CN109906107A (zh) 基于浏览器的云游戏
CN109152955A (zh) 云游戏中的用户保存数据管理
CN113965811A (zh) 播放控制方法和装置、存储介质及电子装置
CN105983233B (zh) 游戏历程记录装置、游戏历程记录方法及游戏历程互动方法
JP5947876B2 (ja) 情報処理システム、情報処理方法、情報処理プログラム、情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体、情報処理装置
CN111803923A (zh) 基于云手机系统的游戏共享方法、电子设备、存储介质
CN112672200A (zh) 视频生成方法和装置、电子设备和存储介质
JP6379107B2 (ja) 情報処理装置並びにその制御方法、及びプログラム
CN111803954A (zh) 基于云手机的游戏直播方法、电子设备、存储介质
WO2010029024A1 (en) Electronic gaming system and method
JP6200062B2 (ja) 情報処理装置、制御方法、プログラム及び記録媒体
CN114288639A (zh) 画面显示方法、提供方法、装置、设备及存储介质
CN113274727A (zh) 直播交互方法、装置和存储介质及电子设备
CN116980706A (zh) 视频播放方法和装置、存储介质及电子设备
CN110292777B (zh) 一种游戏作弊检测方法及装置
CN113613029B (zh) 直播画面显示方法、装置和存储介质及电子设备
JP6755720B2 (ja) ゲームプログラム及び記録媒体
US20070021212A1 (en) Persistent and effecient game architecture

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant