多端间操作映射控制系统、方法及计算机可读存储介质
技术领域
本发明涉及近场控制领域,尤其涉及一种多端间操作映射控制系统、方法及计算机可读存储介质。
背景技术
随着智能终端的快速发展,在智能终端上运行游戏类应用程序,并体验游戏类应用程序的快感成为了许多智能终端用户的惯常操作。
受限于智能终端的硬件配置,用户对于游戏类的体验分为了两种,通过智能终端体验画质要求较小、配置要求较小、便携性强、可在任何场合任何时间运行的轻游戏,以及通过家用电脑体验画质要求较高、配置要求较高、需在限定场合运行的重量级游戏。在体验这类需在家用电脑上运行的游戏时,需要使用安装在家用电脑上的键盘、鼠标、手柄等进行游戏指令的输入,由于此类输入设备靠近于家用电脑及家用电脑的屏幕,长时间使用会对用户的眼睛造成一定的伤害,并且使用键盘也会对习惯于使用智能终端或者手柄的玩家带来一定的操作难度。
由此,不少游戏开放了可接收与家用电脑无线连接的手柄的指令接口,但这样的条件下,要求用户需配备有此类的无线手柄才可支持。
因此,需要一种仅利用用户最常持有的智能终端,便可对家用电脑内运行的游戏进行操作的映射控制系统,在低延迟下,用户可将智能终端作为游戏指令的输入端口。
发明内容
为了克服上述技术缺陷,本发明的目的在于提供一种多端间操作映射控制系统、方法及计算机可读存储介质,可帮助用户在仅持有智能终端时向家用电脑输入游戏类的操作指令,更为方便地体验重量级游戏。
本发明公开了一种多端间操作映射控制系统,包括通信连接的第一终端及第二终端,第一终端包括显示单元,以显示操作内容,第一终端内具有对象模块、服务器模块及处理模块,对象模块分别与处理模块及显示单元连接,接收处理模块的控制信号以形成对象动作,并将对象动作发送至显示单元以显示,服务器模块包括:
框架单元,内设有框架参数;
构建单元,与框架单元连接获取框架参数并搭建一基于局域网的服务器;
处理单元,与构建单元连接,获取第一终端于局域网内的网络地址,并发送至显示单元供显示;
第二终端内具有网络模块、客户端模块及操作模块,网络模块根据网络地址与服务器模块通信连接,操作模块接收操作指令,并将操作指令发送至客户端模块,客户端模块包括:
映射单元,接收操作指令,并识别操作指令对应操作模块上的操作键位,形成操作信号;
网络模块基于局域网将操作信号发送至服务器模块,服务器模块转发操作信号至处理模块,处理模块根据操作信号形成对应于第一终端上的控制键位的控制信号。
优选地,操作模块包括触摸屏;
客户端模块于触摸屏上显示操作键位的位置;
于操作键位的位置处,触摸屏接收操作指令。
优选地,操作模块还包括安装在第二终端上或套设在第二终端外的控制手柄,控制手柄上设有按键;
客户端模块将按键分别映射至操作键位,使得按键代替操作键位接收操作指令。
优选地,处理模块获取与对象模块连接的第一终端上的应用程序接口,处理模块将控制信号发送至应用程序接口,使得对象模块接收包含模拟控制键位的操作键位的控制信号。
优选地,服务器模块包括封装单元及交互单元;
封装单元将框架单元、构建单元及处理单元封装合一,并根据激活指令激活;
交互单元于封装单元激活后于显示单元上显示一包括网络地址的交互界面。
本发明还公开了一种多端间操作映射控制方法,包括以下步骤:
第一终端内设有框架参数,并根据框架参数搭建一基于局域网的服务器;
第一终端的显示单元接收网络地址并显示;
第二终端根据网络地址与第一终端通信连接,并接收于操作模块上操作的操作指令;
第二终端内的客户端模块识别操作指令对应操作模块上的操作键位,以形成操作信号;
第二终端基于局域网将操作信号发送至服务器,第一终端内的处理模块根据操作信号形成对应于第一终端上的控制键位的控制信号;
处理模块将控制信号发送至第一终端内的对象模块,对象模块根据控制信号形成对象动作并在显示单元上显示。
优选地,第二终端内的处理模块根据操作信号形成对应于第一终端上的控制键位的控制信号的步骤包括:
处理模块获取与对象模块连接的第一终端上的应用程序接口;
处理模块将控制信号发送至应用程序接口;
对象模块自应用程序接口接收包含模拟控制键位的操作键位的控制信号。
本发明又公开了一种计算机可读存储介质,其上存储有计算机程序,计算机程序包括第一程序及第二程序,第一程序被第一终端内的处理器执行时实现以下步骤:
于第一终端内设置框架参数,并根据框架参数搭建一基于局域网的服务器;
控制第一终端的显示单元接收网络地址并显示;
接收一发自于第二终端的操作信号;
根据操作信号形成对应于第一终端上的控制键位的控制信号;
将控制信号发送至第一终端内的对象模块,对象模块根据控制信号形成对象动作并在显示单元上显示;
第二程序程序被第二终端内的处理器执行时实现以下步骤:
根据一网络地址与一第一终端通信连接,并接收于操作模块上操作的操作指令;
识别操作指令对应操作模块上的操作键位,以形成操作信号;
基于局域网将操作信号发送至第一终端。
采用了上述技术方案后,与现有技术相比,具有以下有益效果:
1.基于局域网连接,第一终端与第二终端间的信号传输可将延迟降到最低,体验与第一终端外接有线控制器的体验无差;
2.使用如智能终端的第二终端便可实现向如家用电脑的第一终端输入操作指令,降低了在家用电脑上的配置要求;
3.第二终端的操作习惯更符合用户的操作习惯,扩大了第一终端上对象模块的受众面。
附图说明
图1为符合本发明一实施例中多端映射控制系统的系统结构示意图;
图2为符合本发明第一优选实施例中多端映射控制系统的系统结构示意图;
图3为符合本发明第二优选实施例中多端映射控制系统的系统结构示意图;
图4为符合本发明一实施例中经多端映射控制方法的流程示意图。
具体实施方式
以下结合附图与具体实施例进一步阐述本发明的优点。
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本发明的描述中,需要理解的是,术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明的描述中,除非另有规定和限定,需要说明的是,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是机械连接或电连接,也可以是两个元件内部的连通,可以是直接相连,也可以通过中间媒介间接相连,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
参阅图1,为符合本发明一实施例中多端间操作映射控制系统的结构示意图,在该实施例中,第一终端,如家用电脑、主机类游戏机、笔记本电脑等,与第二终端,如智能手机、智能平板电脑、智能穿戴式设备等建立通信连接,且用户于第二终端上的操作,将被映射至第一终端上,并在第一终端的显示单元显示用户的操作所对应的操作内容,以告知用户其输入的操作是否已被执行,且被正确无误地执行。
为实现上述映射关系,第一终端内包括有:
-对象模块
对象模块为运行在第一终端内,用户期望控制的底层对象,其可以是运行在第一终端上的应用程序、文件、音视频等。当对象模块在第一终端上运行时,其需要接受相应的控制指令,以被告知下一步的执行动作。可以理解的是,在接收到相应的控制指令后,对象模块内的对象将执行相应的对象动作,例如应用程序为游戏类应用程序时,对象则为游戏类应用程序内的人物,根据控制指令执行移动、攻击、退出等操作,对象模块为音视频时,则执行快进、快退、播放、退出等操作。上述操作过程及操作结果将在显示单元上显示,以作为第一终端对于用户输入操作指令的响应和反馈。
-服务器模块
为实现与第二终端的通信连接,且考虑到用户在使用时,通常在第一终端的附近持有第二终端作指令输入,因此,第一终端与第二终端间建立的,更为基于近场的局域网连接,则在该实施例中,服务器模块进一步包括了框架单元、构建单元及处理单元。
框架单元用于设置框架参数,框架参数的设置可由用户手动输入相应的网络信息,或是自动地根据第一终端的运行状态,如网络连接状态、硬件配置等生成框架参数。一具体实施例中,框架单元可为基于springboot构建的项目,springboot本身作为微服务的框架,可根据用户的编译目的执行。因此在springboot下,接收用户所输入的相应参数即可。
构建单元与框架单元连接后,获取框架参数并搭建一基于局域网的服务器。搭建的具体过程,同样可由基于springboot构建的项目实现,基于springboot编译的项目,通过java命令启动后,便可实现服务器模块包括的各单元所需执行的命令。
处理单元,在构建单元建立基于局域网的服务器后,获取第一终端于局域网内的网络地址,并发送至显示单元供显示。可以理解的是,在第一终端内所搭建的服务器为一具有服务器属性的服务,而非搭建一实体的服务器,且由于该服务器基于局域网,其在局域网内的网络性质可由用户在框架单元侧设置框架参数时预先设置即可,如在配置框架参数时,对基于该框架参数所建立的服务器的网络地址可配置为1.1.1.1,或出于网络信道冲突的考虑,可配置为192.168.1.X等。预先配置的网络地址在服务器搭建后由处理单元获得,并发送至显示单元显示后,用户便可在显示单元上观察到在第一终端内,已建立有服务器,且该服务器于局域网内的地址也已被告知。也就是说,多端连接链路内的第一终端在局域网的位置已清楚。
-处理模块
第一终端内的处理模块用作为控制对象模块的运行状态、操作状态,将向对象模块发送控制信号,对象模块根据控制信号内包括的控制动作执行相应的对象动作,也就是说,对象模块内的对象所呈现的任何动作或操作,均将由处理模块形成和控制。对于控制信号的变化就等同于对对象模块内的对象动作的变化。
对应地,第二终端为与第一终端建立通信连接,包括:
-网络模块
网络模块为安装在第二终端内,通过第二终端内的各类通讯天线与第一终端通信连接的模块,其根据显示单元现实的网络地址,与服务器模块建立点对点的通信连接。具体操作时,用户可持有第二终端,在持有第一终端显示的网络地址后,在第二终端内输入该网络地址,网络模块具有目标地址后,加入局域网(通过无线连接的方式),并通过网络地址直接与服务器模块对接,从而建立了第一终端与第二终端的通信连接。
-操作模块
根据上文所述,第二终端所接收的用户操作,将映射至第一终端上。因此第二终端包括有操作模块,用户在操作模块上的滑动、点触、长按等即为向操作模块输入操作指令。可以理解的是,上述操作指令并非无序的、杂乱的操作指令,而是用户期望第一终端内的对象模块所执行的操作指令。因此,操作模块可操作的操作键位,与对象模块可执行的操作对应。举例来说,操作键位可包括上下左右的十字虚拟键、十字实体键、操作四键(△□○×)、开始停止的start键,或其他turbo键、shift键、home键等等。根据对象模块的所需操作,操作模块可相应的增加或减少操作键位,以符合对象模块的需求。
-客户端模块
客户端模块类比于对象模块,其运行在第二终端上,可视化地呈现操作模块,即操作面模块在客户端模块内显示,使得用户具有操作指令的输入对象。当用户对操作模块操作时,将被客户端模块捕捉,以识别用户对操作模块的操作指令,以及对操作模块内每一操作键位的操作顺序和操作动作作识别。
捕捉完毕后,客户端模块内包括的映射单元将操作指令转化为操作信号,通过网络模块发送至服务器模块。服务器模块则进而将操作信号转发至处理模块,处理模块接收到操作信号后,将操作信号内包括的对于每一个操作键位的操作转化为对第一终端上的控制键位的控制信号。具体地,操作信号包括对“上”键的3秒触发,处理模块识别到操作信号内的该操作后,将添加至控制信号内,并对该操作转化为第一终端的鼠标向前滑动3秒,使得操作信号内的操作映射至第一终端上的相应操作。待对象模块接收到控制信号,执行相应的操作后,对于用户而言,所实现的为其在操作模块上的操作,所形成的对象动作,等同于其在第一终端的控制键位上的操作。通过第二终端的操作模块映射至第一终端的控制键位的效果,实现了用户使用第二终端便可对第一终端上运行的应用程序进行控制。且由于第一终端与第二终端基于局域网连接,网络模块与服务器模块间的通信传输基本无延迟,信号稳定,不会出现对象动作的反馈远滞后于操作指令的形成的现象。
实施例一
参阅图2,在第一实施例中,主要通过表现为智能终端的第二终端的触摸屏实现对对象模块的操作映射。具体地,操作模块包括触摸屏,用户在第二终端的触摸屏上的点触、滑动操作,即为向第二终端输入操作指令。触摸屏除接收操作指令外,还将用于显示客户端模块的操作键位的位置,作为客户端模块向用户交互的方式,操作键位在触摸屏上的显示将告知其操作的具体位置。通过对于操作键位的可视化,一方面用户可了解操作指令的输入位置,给到用户更好的代入感,另一方面更方便了客户端模块对于操作指令的识别,通过限制化的可操作区域,对于操作指令的起始点、操作时间、截止点等关键要素更好地捕捉。
在该实施例中,用户在触摸屏上,对已显示的操作键位快速点触、滑动、长按等操作指令的输入,客户端模块将直接捕捉,并形成操作指令,经由网络模块发送至在第一终端上运行的服务器模块,再如上文所述的,通过处理模块的处理转化为对对象模块的控制。也就是说,用户仅通过如智能终端的第二终端,便可对运行在第一终端上的大型游戏作出控制。
实施例二
在该实施例中,考虑到某些用户更为习惯使用的为外部的辅助工具,如游戏手柄等,操作模块还包括了一控制手柄,控制手柄上设有实体的按键。用户通过对按键的短摁和长摁向控制手柄输入操作。这类的控制手柄通常安装在第二终端上,或是可作为外部辅助设备,套设在第二终端外,并与第二终端通过蓝牙连接,将其所接受到的对于按键的操作发送至第二终端。对此,由于用户不再使用触摸屏作为操作的输入接口,因此,客户端模块将额外增加将按键分别与操作键位映射的工序。具体地,在控制手柄与第二终端蓝牙连接后,第二终端需识别控制手柄的型号、驱动等,控制手柄也将向第二终端发送自身具有的按键,及各按键被触发后具有的不同电平。客户端模块在接收到控制手柄的信息后,首先将按键映射至原交互在触摸屏上的操作键位(当操作键位的数量不足,或配置与按键不同时,可灵活调整),使得按键与操作键位呈一一对应的关系。待上述配置完毕后,按键将代替操作键位接收用户的操作指令。当控制手柄向客户端模块发送按键被触发的状态后,客户端模块便可将按键的受控情况转化为操作键位(可以隐藏状态)的受控情况,而后执行如实施例一的映射关系。
以使用某厂商的游戏手柄作为控制手柄为例,游戏手柄套设在智能手机外,与智能手机蓝牙连接后,在智能手机内的游戏模式(已预先配置完毕)内添加该客户端模块,启动游戏模式后,可在游戏模式内进入按键设置,将游戏手柄的按键(以交互形态显示)拖放至客户端模块的操作键位内,从而完成预先的映射配置。
在上述实施例一或实施例二中,处理模块为将操作键位所接收的操作指令映射到实际并不具有的控制键位,即模拟控制键位所接收的操作指令时,首先将获取对象模块连接的第一终端上的应用程序接口(API),以第一终端原使用鼠标和键盘为例。作为常用的输入设备,鼠标和键盘的触发经第一终端的处理器识别后,将与对象模块的API直连,向对象模块发送操作指令。而在本实施例中,处理模块主动地将控制信号发送至对象模块的API,并在控制信号内,具有模拟鼠标和键盘操作的操作信息,使得对象模块所接收的仍识别为鼠标和键盘操作,实为触模拟鼠标和键盘操作的触摸屏或控制手柄接收的操作指令。通过调用第一终端的服务器接口,以及对象模块对应的API,便可实现多端间的映射关系。
一优选实施例中,服务器模块包括封装单元及交互单元。封装单元将框架单元、构建单元及处理单元封装合一,如以.exe的应用程序形式安装在第一终端上,用户激活该应用程序时,便视为对服务器模块发送激活指令,使得构建单元根据框架参数搭建服务器或服务器服务。同时,交互单元在封装单元激活后,于显示单元上显示一包括网络地址的交互界面,以可视化的形式告知用户所建立的服务器或服务器服务在局域网内的位置。交互界面可以是某个网页,即应用程序被激活后,将跳转至一网页,网页上显示网络地址。
通过上述配置,一方面借助于局域网,可实现用户持有智能终端代替游戏手柄,对家用电脑上的对象进行低延迟、无线化的操作控制,另一方面,降低了家用电脑上大型游戏类应用程序的准入门槛和操作门槛,降低用户的准备成本。
参阅图4,为本发明一优选实施例中多端间操作映射控制方法,包括以下步骤:第一终端,如家用电脑、笔记本电脑内设有框架参数,并根据框架参数搭建一基于局域网的服务器;第一终端的显示单元接收网络地址并显示,以告知用户向第一终端连接时的连接地址;第二终端根据网络地址与第一终端通信连接,并接收于操作模块上操作的操作指令;第二终端内的客户端模块识别操作指令对应操作模块上的操作键位,以形成操作信号;第二终端基于局域网将操作信号发送至服务器,第一终端内的处理模块根据操作信号形成对应于第一终端上的控制键位的控制信号;处理模块将控制信号发送至第一终端内的对象模块,对象模块根据控制信号形成对象动作并在显示单元上显示。
进一步地优选地,第二终端内的处理模块根据操作信号形成对应于第一终端上的控制键位的控制信号的步骤包括:处理模块获取与对象模块连接的第一终端上的应用程序接口;处理模块将控制信号发送至应用程序接口;对象模块自应用程序接口接收包含模拟控制键位的操作键位的控制信号。
本发明还公开了一种计算机可读存储介质,其上存储有计算机程序,计算机程序包括第一程序及第二程序,第一程序安装在第一终端内,被第一终端内的处理器执行时实现以下步骤:于第一终端内设置框架参数,并根据框架参数搭建一基于局域网的服务器;控制第一终端的显示单元接收网络地址并显示;接收一发自于第二终端的操作信号;根据操作信号形成对应于第一终端上的控制键位的控制信号;将控制信号发送至第一终端内的对象模块,对象模块根据控制信号形成对象动作并在显示单元上显示。第二程序安装在第二终端内,被第二终端内的处理器执行时实现以下步骤:根据一网络地址与一第一终端通信连接,并接收于操作模块上操作的操作指令;识别操作指令对应操作模块上的操作键位,以形成操作信号;基于局域网将操作信号发送至第一终端。
智能终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的智能终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是智能终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
应当注意的是,本发明的实施例有较佳的实施性,且并非对本发明作任何形式的限制,任何熟悉该领域的技术人员可能利用上述揭示的技术内容变更或修饰为等同的有效实施例,但凡未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何修改或等同变化及修饰,均仍属于本发明技术方案的范围内。