CN111263004B - 终端控制方法、装置、计算机设备和存储介质 - Google Patents

终端控制方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN111263004B
CN111263004B CN202010070565.2A CN202010070565A CN111263004B CN 111263004 B CN111263004 B CN 111263004B CN 202010070565 A CN202010070565 A CN 202010070565A CN 111263004 B CN111263004 B CN 111263004B
Authority
CN
China
Prior art keywords
interface
touch
controlled terminal
terminal
response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010070565.2A
Other languages
English (en)
Other versions
CN111263004A (zh
Inventor
赵宁
许仁
周枫
王伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
VDL Industry Shenzhen Co Ltd
Original Assignee
VDL Industry Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by VDL Industry Shenzhen Co Ltd filed Critical VDL Industry Shenzhen Co Ltd
Priority to CN202010070565.2A priority Critical patent/CN111263004B/zh
Publication of CN111263004A publication Critical patent/CN111263004A/zh
Application granted granted Critical
Publication of CN111263004B publication Critical patent/CN111263004B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/44Program or device authentication
    • G06F21/445Program or device authentication by mutual authentication, e.g. between devices or programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2133Verifying human interaction, e.g., Captcha

Abstract

本申请涉及一种终端控制方法、装置、计算机设备和存储介质。所述方法包括:响应控制终端的选定操作,获取选定的已连接受控终端,提取预存的受控终端的第一交互界面,将第一交互界面发送至控制终端,使得控制终端根据第一交互界面渲染得到第二交互界面。接收控制终端发送的对第二交互界面的触控操作,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面,将第一触控响应界面发送至控制终端,使得控制终端根据第一触控响应界面渲染得到第二触控响应界面,并显示。采用本方法无需受控终端和控制中心实时建立连接,可将受控终端的操作界面相关数据存储至控制中心,从而提高远程控制操作的通信效率。

Description

终端控制方法、装置、计算机设备和存储介质
技术领域
本申请涉及通信领域,特别是涉及一种终端控制方法、装置、计算机设备和存储介质。
背景技术
随着通信技术的发展,以及人们日常工作或生活中对数据通信的需求变得多样化。以用户需求为远程处理事务为例,为满足远程处理事务的用户需求,出现了远程控制技术,用户可在主控终端实现对受控终端的远程控制。
传统上,受控终端实时生成其当前显示界面数据,并将界面实时发送给主控终端。主控终端接收并显示受控终端发送的界面数据,获取由用户触发的对应于界面数据的操作信号,并根据上述操作信号生成远程控制指令。主控终端通过将远程控制指令发送给受控终端,使得受控终端可根据远程控制指令执行相应的操作。
然而传统的实现方案在进行远程控制的时候,需要所涉及的各个设备实时进行连接,且保持良好的通信状态,而当受控终端无法联网,断开了与控制终端的连接时,则无法实现远程控制操作,导致通信效率较低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高通信效率的终端控制方法、装置、计算机设备和存储介质。
一种终端控制方法,所述方法包括:
响应控制终端的选定操作,获取选定的已连接受控终端;
提取预存的所述受控终端的第一交互界面;
将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
接收所述控制终端发送的对所述第二交互界面的触控操作;
获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示。
在其中一个实施例中,在所述提取预存的所述受控终端存储第一交互界面之前,还包括:
获取所述受控终端存储的界面数据;所述界面数据包括操作界面、界面操作和响应界面;
根据所述受控终端的编号为各所述界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储。
在其中一个实施例中,所述操作界面为第二交互界面、所述界面操作为对所述第二交互界面的触控操作、所述响应界面为与第一触控响应界面;所述获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面,包括:
获取所述触控操作对应的触控操作信息;所述触控操作信息包括受控终端的编号;
根据所述触控操作信息确定所述触控操作的识别标识;
控制对应编号的所述受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面;
将从所述受控终端存储的界面数据中查找到的与所述识别标识对应的响应界面,确定为第一触控响应界面。
在其中一个实施例中,所述方法还包括:
当对应编号的所述受控终端存储的界面数据中不存在与所述识别标识对应的响应界面时,将所述触控操作发送至对应编号的所述受控终端,使得对应编号的所述受控终端响应所述触控操作,生成对应的第一触控响应界面。
一种终端控制方法,所述方法包括:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面。
在其中一个实施例中,在所述当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端之后,还包括:
触发身份认证操作,并获取与所述身份认证操作对应的认证信息;
将所述认证信息发送至所述控制中心,使得所述控制中心对所述认证信息进行验证;
或将所述认证信息经所述控制中心发送至对应的受控终端,使得所述受控终端对所述认证信息进行验证。
一种终端控制装置,所述装置包括:
已连接受控终端选定模块,用于响应控制终端的选定操作,获取选定的已连接受控终端;
第一交互界面提取模块,用于提取预存的所述受控终端的第一交互界面;
第一交互界面发送模块,用于将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
触控操作接收模块,用于接收所述控制终端发送的对所述第二交互界面的触控操作;
第一触控响应界面获取模块,用于获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
第一触控响应界面发送模块,用于将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示。
一种终端控制装置,所述装置包括:
连接模块,用于与控制中心建立连接;
已连接受控终端确定模块,用于当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
第二交互界面生成模块,用于接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;
触控操作发送模块,用于当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
第二触控响应界面生成模块,用于获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
响应控制终端的选定操作,获取选定的已连接受控终端;
提取预存的所述受控终端的第一交互界面;
将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
接收所述控制终端发送的对所述第二交互界面的触控操作;
获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
响应控制终端的选定操作,获取选定的已连接受控终端;
提取预存的所述受控终端的第一交互界面;
将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
接收所述控制终端发送的对所述第二交互界面的触控操作;
获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面。
上述终端控制方法、装置、计算机设备和存储介质,控制中心通过响应控制终端的选定操作,获取选定的已连接受控终端,并提取受控终端的第一交互界面,无需受控终端和控制中心实时建立连接,可将受控终端的操作界面相关数据存储至控制中心。控制终端通过获取控制中心发送的第一交互界面,根据第一交互界面渲染得到第二交互界面,并接收控制终端发送的对第二交互界面的触控操作。控制中心通过获取触控操作的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。控制终端通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
附图说明
图1为一个实施例中终端控制方法的应用环境图;
图2为一个实施例中终端控制方法的流程示意图;
图3为一个实施例中得到第一触控响应界面的步骤的流程示意图;
图4为另一个实施例中终端控制方法的流程示意图;
图5为一个实施例中终端控制方法的时序图;
图6为一个实施例中终端控制方法的软件架构示意图;
图7为一个实施例中终端控制装置的结构框图;
图8为另一个实施例中终端控制装置的结构框图;
图9为一个实施例中控制终端的产品结构示意图;
图10为一个实施例中计算机设备的内部结构图;
图11为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的终端控制方法,可以应用于如图1所示的应用环境中。其中,控制终端102通过网络与控制中心104进行通信,受控终端106通过网络与控制中心104进行通信。其中,控制中心104响应控制终端102的选定操作,并获取选定的已连接受控终端106,提取预存的受控终端106的第一交互界面,并将第一交互界面发送至控制终端102,控制终端102通过接收控制中心104发送的与受控终端106对应的第一交互界面,并根据第一交互界面渲染得到第二交互界面。当在控制终端102检测到用户触发的对第二交互界面的触控操作时,将触控操作对应的触控操作信息发送至控制中心104,控制中心104接收对第二交互界面的触控操作,并获取触控操作对应的触控操作信息,根据触控操作信息控制受控终端106进行触控响应,得到第一触控响应界面。控制中心102将第一触控响应界面发送至控制终端102,控制终端102接收第一触控响应界面,并根据第一触控响应界面渲染得到第二触控响应界面,并显示第二触控响应界面。其中,控制终端102和受控终端106可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种终端控制方法,以该方法应用于图1中的控制中心为例进行说明,包括以下步骤:
步骤S202,响应控制终端的选定操作,获取选定的已连接受控终端。
具体地,控制中心通过响应用户在控制终端的选定操作,获取用户在控制终端选定的已连接受控终端。其中,受控终端可以是移动终端设备,比如智能手机,个人电脑或平板电脑,以及智能手环等便携式可穿戴设备等。受控终端可以是在此次远程控制操作之前,已与控制终端建立连接并接受控制终端远程操作的历史设备,或存在于可连接设备列表,但未进行连接或进行远程控制操作的待连接设备。
其中,受控终端可通过TCP/IP协议、HTTP协议、MQTT以及或自定义协议等通信方式与控制中心建立连接,并进行数据传输。
步骤S204,提取预存的受控终端的第一交互界面。
具体地,受控终端通过对当前的显示操作界面进行截屏操作,得到界面截屏数据,并根据界面截屏数据得到第一交互界面。其中,界面截屏数据包括截取屏幕用户界面的数据、屏幕尺寸以及分辨率等。
进一步地,受控终端将得到的第一交互界面发送至控制中心,控制中心将得到的第一交互界面和受控终端的编号进行关联预存。在响应控制终端的选定操作时,控制中心可根据用户在控制终端的选定操作,获取选定的已连接受控终端,进而根据已连接受控终端的编号,从预存的数据中提取与受控终端编号关联的第一交互界面数据。
步骤S206,将第一交互界面发送至控制终端,使得控制终端根据第一交互界面渲染得到第二交互界面。
具体地,控制中心通过将第一交互界面发送至控制终端,控制终端接收第一交互界面,获取第一交互界面的界面数据、屏幕尺寸和分辨率,并根据自身屏幕尺寸和分辨率,对第一交互界面进行调整和处理,得到渲染后的第二交互界面。
进一步地,控制终端根据自身界面的分辨率对第一交互界面的界面数据进行等比缩放,得到第二交互界面。当控制终端的界面的分辨率与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二交互界面,并对第二交互界面进行显示。
例如,所连接的受控终端的第一交互界面分辨率为2048×1536像素,若控制终端的界面分辨率为1024×768像素,可以将第一交互界面等比例缩小到原来的50%,得到第二交互界面。若控制终端的界面分辨率为1024×800像素,可以先将第一交互界面等比例缩小到原来的50%,显示在控制终端界面的中心处,然后在空白部分填充黑色,得到第二交互界面。
步骤S208,接收控制终端发送的对第二交互界面的触控操作。
具体地,用户在控制终端执行的触控操作包括点击、长按、滑动、缩放以及多点触控等,控制中心可接收控制终端发送的对第二交互界面的触控操作。
其中,用户可以通过手指或书写笔在第二交互界面上点击软件图标打开软件,在软件打开之后点击软件中的各个控件,或者在软件打开之后的操作界面中通过书写进行触控操作。
例如,在第二交互界面坐标为(1600,600)像素的位置有微信图标,用户可以点击微信图标,在打开的微信中点击各个控件,或者在微信对话框中输入文字。在执行上述触控操作后,控制终端将上述针对第二交互界面的触控操作发送至控制中心。
步骤S210,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。
具体地,触控操作对应的触控操作信息,包括受控终端的编号。通过获取触控操作对应的触控操作信息,提取受控终端的编号,并控制对应编号的受控终端进行触控响应,从受控终端存储的界面数据查找对应的响应界面,生成第一触控响应界面。
进一步地,比如第一交互界面为显示的某相册中第01张图像的界面,操作信息为向右滑动操作,或者为对界面某一位置的点击操作,远程控制中心可得到该操作信息后,可获知该滑动操作或对该位置的点击操作表示为“显示下一张”的指令,该指令对应于该相册中的02张图像,可将显示02张图像的界面作为所确定的第一触控响应界面。
步骤S212,将第一触控响应界面发送至控制终端,使得控制终端根据第一触控响应界面渲染得到第二触控响应界面,并显示。
具体地,控制中心将第一触控响应界面发送至控制终端,控制终端接收第一触控响应界面,并获取第一触控响应界面的界面数据、屏幕尺寸和分辨率,并根据自身屏幕尺寸和分辨率,对第一触控响应界面进行调整和处理,得到渲染后的第二触控响应界面。
其中,控制终端根据自身界面的分辨率对第一触控响应界面的界面数据进行等比缩放,得到第二触控响应界面。当控制终端的界面的分辨率与第一触控响应界面的分辨率不成等比例时,可以先对第一触控响应界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二触控响应界面,并对第二触控响应界面进行显示。
进一步地,控制中心包括消息中间件、后端服务器和前端服务器。消息中间件基于TCP/IP协议与受控终端建立连接,接收受控终端发送的第一触控响应界面,并将第一触控响应界面通过TCP/IP协议传输至后端服务器。后端服务器通过Websocket协议将第一触控响应界面传输至前端服务器,前端服务器根据控制终端的分辨率以及屏幕尺寸大小对第一触控响应界面进行渲染处理,使得渲染得到第二触控响应界面图像适应于控制终端。控制终端通过HTTP协议从控制中心的前端服务器中获取渲染后的第二触控响应界面。其中,控制中心是通过HTTP或Restful接口,接收控制终端检测到的用户触发的触控操控的坐标、压力、时长等信息,后端服务再通过消息中间件将该信息发送给被控终端。
上述终端控制方法中,控制中心通过响应控制终端的选定操作,获取选定的已连接受控终端,并提取受控终端的第一交互界面,无需受控终端和控制中心实时建立连接,可将受控终端的操作界面相关数据存储至控制中心。控制终端通过获取控制中心发送的第一交互界面,根据第一交互界面渲染得到第二交互界面,并接收控制终端发送的对第二交互界面的触控操作。控制中心通过获取触控操作的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。控制终端通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
在一个实施例中,如图3所示,得到第一触控响应界面的步骤,即获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面的步骤,具体包括以下S302至S308的步骤:
步骤S302,获取触控操作对应的触控操作信息,触控操作信息包括受控终端的编号。
具体地,控制中心通过获取触控操作对应的触控操作信息,包括提取受控终端的编号,以及确定触控操作的操作类型以及操作轨迹等,根据触控操作的操作类型控制对应编号的受控终端进行触控响应,使得受控终端执行相应触控操作类型的触控操作。同时控制中心通过根据触控操作的操作轨迹,控制对应编号的受控终端执行触控操作得到对应的操作轨迹。
步骤S304,根据触控操作信息确定触控操作的识别标识。
具体地,触控操作信息包括触控操作的识别标识,触控操作的识别标识用于确定操作界面、界面操作和响应界面,根据触控操作的识别标识可确定需要执行的触控操作,以及执行该触控操作的操作界面,以及执行该触控操作后得到的具体响应界面。
步骤S306,控制对应编号的受控终端进行触控响应,并从受控终端存储的界面数据查找对应的响应界面。
具体地,控制中心根据触控操作的操作类型控制对应编号的受控终端进行触控响应,使得受控终端执行相应触控操作类型的触控操作。同时控制中心通过根据触控操作的操作轨迹,控制对应编号的受控终端执行触控操作得到对应的操作轨迹。
进一步地,比如第一交互界面为显示的某相册中第05张图像的界面,操作信息为向右滑动操作,或者为对界面某一位置的点击操作,远程控制中心可得到该操作信息后,可获知该滑动操作或对该位置的点击操作表示为“显示下一张”的指令,该指令对应于该相册中的06张图像,可将显示06张图像的界面作为所确定的第一触控响应界面。
步骤S308,将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面。
具体地,控制中心基于所确定的触控操作的识别标识,从受控终端存储的界面数据中查找对应的响应界面,确定为第一触控界面。
在一个实施例中,在提取预存的受控终端存储第一交互界面之前,还包括:
获取受控终端存储的界面数据,其中,界面数据包括操作界面、界面操作和响应界面。根据受控终端的编号为各界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储。
其中,受控终端的编号用于确定待进行触控的受控终端,操作界面为待进行触控操作的显示界面,相同标识的界面操作执行于对应的显示操作界面上,得到执行该界面操作后的响应界面。
在一个实施例中,当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,将触控操作发送至对应编号的受控终端,使得对应编号的受控终端响应触控操作,生成对应的第一触控响应界面。
具体地,由于控制中心并无法存储受控终端上的所有显示数据,或者有部分的功能必须要受控终端根据触控操作来执行才能生成相关的触控响应界面。当控制中心不存在对应的第一触控响应界面时,向控制终端反馈无法执行该触控操作的信息。控制终端收到该反馈信息后,可以选择是否仍要执行对被控终端的操作。
进一步地,当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,控制中心通过将第一交互界面或者第一交互界面的标识发送给受控终端,使得受控终端可进入该第一交互界面,并将触控操作发送至受控终端,使得受控终端在第一交互界面上执行该触控操作,生成第一触控响应界面,并将第一触控响应界面发送给远程控制中心。
上述得到第一触控响应界面的步骤中,控制中心通过获取触控操作对应的触控操作信息,并根据触控操作信息确定触控操作的识别标识。通过控制对应编号的受控终端进行触控响应,并将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面。当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,将触控操作发送至对应编号的受控终端,使得对应编号的受控终端响应触控操作,生成对应的第一触控响应界面。可实时得到与触控操作对应的触控响应界面,无需重复执行数据查找或获取操作,进一步提高工作效率。
在一个实施例中,如图4所示,提供了一种终端控制方法,以该方法应用于图1中的控制终端为例进行说明,包括以下步骤:
步骤S402,与控制中心建立连接。
具体地,控制终端基于预设通信方式与控制中心建立连接,其中,预设通信方式包括WiFi通信、蓝牙通信、自定义2.4G通信和5G通信等。控制终端和控制中心之间的通信距离在相应预设通信方式的通信范围内,两者可通过各预设通信方式实现数据传输。
步骤S404,当检测到用户触发的选定操作时,根据选定操作选定已连接受控终端。
具体地,当检测到用户触发的选定操作时,根据选定操作从预设的可见设备列表中选定已连接受控终端。其中,受控终端可以是移动终端设备,比如智能手机,个人电脑或平板电脑,以及智能手环等便携式可穿戴设备等。受控终端可以是在此次远程控制操作之前,已与控制终端建立连接并接受控制终端远程操作的历史设备,或存在于可连接设备列表,但未进行连接或进行远程控制操作的待连接设备。
步骤S406,接收控制中心发送的与受控终端对应的第一交互界面,并根据第一交互界面渲染得到第二交互界面。
具体地,接收控制中心发送的与受控终端对应的第一交互界面,并获取第一交互界面的界面数据、屏幕尺寸和分辨率,并根据自身屏幕尺寸和分辨率,对第一交互界面进行调整和处理,得到渲染后的第二交互界面。
进一步地,控制终端根据自身界面的分辨率对第一交互界面的界面数据进行等比缩放,得到第二交互界面。当控制终端的界面的分辨率与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二交互界面,并对第二交互界面进行显示。
步骤S408,当检测到用户触发的对第二交互界面的触控操作时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。
具体地,当检测到用户触发的对第二交互界面的触控操作时,控制终端将触控操作对应的触控操作信息发送至控制中心。控制中心通过从触控操作对应的触控操作信息中提取受控终端的编号,并控制对应编号的受控终端进行触控响应,从受控终端存储的界面数据查找对应的响应界面,生成第一触控响应界面。
其中,通过截取受控终端的触控响应界面图像,将该触控响应界面图像作为第一触控响应界面,或者,读取受控终端触控响应界面的分辨率、颜色和文字等信息,根据这些信息得到第一触控响应界面。
进一步地,对于受控终端,可以对其整个触控响应界面进行截屏操作,将截屏结果作为第一触控响应界面。或者,读取受控终端的触控响应界面信息,包括分辨率2048×1536像素,触控响应所显示的文字内容和位置,触控响应所显示的图像颜色和位置等,根据上述触控响应界面信息得到第一触控响应界面。
步骤S410,获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面,并显示第二触控响应界面。
具体地,控制终端接收控制中心发送的第一触控响应界面,并获取第一触控响应界面的界面数据、屏幕尺寸和分辨率,根据自身屏幕尺寸和分辨率,对第一触控响应界面进行调整和处理,得到渲染后的第二触控响应界面。
其中,控制终端根据自身界面的分辨率对第一触控响应界面的界面数据进行等比缩放,得到第二触控响应界面。当控制终端的界面的分辨率与第一触控响应界面的分辨率不成等比例时,可以先对第一触控响应界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二触控响应界面,并对第二触控响应界面进行显示。
上述终端控制方法中,控制终端通过与控制中心建立连接,并在检测到用户触发的选定操作时,根据选定操作选定的已连接受控终端。通过接收控制中心发送的与受控终端对应的第一交互界面,根据第一交互界面渲染得到第二交互界面。当检测到用户触发的对第二交互界面的触控操时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
在一个实施例中,在当检测到用户触发的选定操作时,根据选定操作选定已连接受控终端之后,还包括:
触发身份认证操作,并获取与身份认证操作对应的认证信息;
将认证信息发送至控制中心,使得控制中心对认证信息进行验证;
或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。
具体地,当用户在控制终端触发选定操作时,根据选定操作选定已连接受控终端,同时触发身份认证操作,进行授权认证。通过获取用户输入的与身份认证操作对应的认证信息,可以包括认证密码、指纹或人脸等认证信息,并将认证信息发送至控制中心,控制中心根据预存的受控终端的属性信息,对认证信息进行验证。
进一步地,控制终端可以将认证信息通过控制中心发送至对应的受控终端,使得受控终端根据预存的自身属性信息,对认证信息进行验证。
上述终端控制方法中,通过触发身份认证操作,获取与身份认证操作对应的认证信息,并将认证信息发送至控制中心,使得控制中心对认证信息进行验证,或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。实现对控制终端进行远程操作的用户进行验证,在认证通过后,才可开始对受控终端的远程操作,避免出现误操作的情况,降低远程操作过程的误操作率。
在一个实施例中,如图5所示,提供了一种终端控制方法的时序图,终端控制流程可以包括以下步骤:
步骤S501,控制终端与控制中心建立连接。
步骤S502,控制中心与受控终端建立连接。
步骤S503,当在控制终端检测到用户的选定操作时,根据选定操作选定已连接受控终端。
步骤S504,控制中心响应控制终端的选定操作,获取选定的已连接受控终端。
步骤S505,控制中心提取预存的受控终端的第一交互界面。
步骤S506,控制中心将第一交互界面发送至控制终端。
步骤S507,控制终端接收控制中心发送的第一交互界面,并根据第一交互界面渲染得到第二交互界面。
步骤S508,当在控制终端检测到用户触发的对第二交互界面的触控操作时,将与触控操作对应的触控操作信息发送至控制中心。
步骤S509,控制中心接收控制终端发送的对第二交互界面的触控操作,并获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应。
步骤S510,受控终端根据触控操作信息进行触控响应,得到第一触控响应界面。
步骤S511,控制中心获取受控终端的第一触控响应界面。
步骤S512,控制中心将第一触控响应界面发送至控制终端。
步骤S513,控制终端接收第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面。
步骤S514,控制终端显示第二触控响应界面。
上述终端控制方法,控制中心通过响应控制终端的选定操作,获取选定的已连接受控终端,并提取受控终端的第一交互界面,无需受控终端和控制中心实时建立连接,可将受控终端的操作界面相关数据存储至控制中心。控制终端通过获取控制中心发送的第一交互界面,根据第一交互界面渲染得到第二交互界面,并接收控制终端发送的对第二交互界面的触控操作。控制中心通过获取触控操作的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。控制终端通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
在一个实施例中,如图6所示,提供了一种终端控制方法的软件架构示意图。图中包括有智能手板602、云计算服务器604和平板电脑606,其中智能手板602为控制终端,云计算服务器604为控制中心,平板电脑606为受控终端。其中,云计算服务器604包括消息中间件608、前端服务器610、后端服务器612和数据库614。
其中,消息中间件基于TCP/IP协议与受控终端建立连接,接收受控终端发送的第一触控响应界面,并将第一触控响应界面通过TCP/IP协议传输至后端服务器。后端服务器通过Websocket协议将第一触控响应界面传输至前端服务器,前端服务器对第一触控响应界面进行渲染得到第二触控响应界面,并将第二触控响应界面发送至控制终端。
参照图6,平板电脑606上运行街区屏幕UI和touch(触摸)事件等数据的软件,经由4G/5G网络,通过TCP/IP协议承载私有协议数据,与云计算服务器604建立连接。云计算服务器604中,消息中间件608高效分发数据,后端服务器612与前端服务器610通过Websocket协议进行双向通信,在平板电脑606侧,云计算服务器604高效传递交互界面截屏数据或触控响应界面截屏数据渲染前端服务器610。在智能手板602侧,云计算服务器604高效接收智能手板602的请求接收前端服务器610的触控操作数据,通过TCP/IP发送给消息中间件608,消息中间件608高效分发数据,将数据用TCP/IP协议承载私有协议进行数据封装,转发给平板电脑606。智能手板602通过HTTP或RESTful(REpresentational State Transfer,表现层状态转化)接口访问前端服务器610和后端服务器612提供的Web服务,可对平板电脑606进行操作并通过云计算服务器604将触控操作数据高效转发给平板电脑606,实现操作和计算的网络化。
应该理解的是,虽然图2-5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-5中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种终端控制装置,包括:已连接受控终端选定模块702、第一交互界面提取模块704、第一交互界面发送模块706、触控操作接收模块708、第一触控响应界面获取模块710以及第一触控响应界面发送模块712,其中:
已连接受控终端选定模块702,用于响应控制终端的选定操作,获取选定的已连接受控终端。
第一交互界面提取模块704,用于提取预存的受控终端的第一交互界面。
第一交互界面发送模块706,用于将第一交互界面发送至控制终端,使得控制终端根据第一交互界面渲染得到第二交互界面。
触控操作接收模块708,用于接收控制终端发送的对第二交互界面的触控操作。
第一触控响应界面获取模块710,用于获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。
第一触控响应界面发送模块712,用于将第一触控响应界面发送至控制终端,使得控制终端根据第一触控响应界面渲染得到第二触控响应界面,并显示。
上述终端控制装置中,控制中心通过响应控制终端的选定操作,获取选定的已连接受控终端,并提取受控终端的第一交互界面,无需受控终端和控制中心实时建立连接,可将受控终端的操作界面相关数据存储至控制中心。控制终端通过获取控制中心发送的第一交互界面,根据第一交互界面渲染得到第二交互界面,并接收控制终端发送的对第二交互界面的触控操作。控制中心通过获取触控操作的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。控制终端通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
在一个实施例中,第一触控响应界面获取模块,还用于:
获取触控操作对应的触控操作信息,触控操作信息包括受控终端的编号;根据触控操作信息确定触控操作的识别标识;控制对应编号的受控终端进行触控响应,并从受控终端存储的界面数据查找对应的响应界面;将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面;
还用于:
当对应编号的所述受控终端存储的界面数据中不存在与所述识别标识对应的响应界面时,将所述触控操作发送至对应编号的所述受控终端,使得对应编号的所述受控终端响应所述触控操作,生成对应的第一触控响应界面。
上述第一触控响应界面获取模块,控制中心通过获取触控操作对应的触控操作信息,并根据触控操作信息确定触控操作的识别标识。通过控制对应编号的受控终端进行触控响应,并将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面。当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,将触控操作发送至对应编号的受控终端,使得对应编号的受控终端响应触控操作,生成对应的第一触控响应界面。可实时得到与触控操作对应的触控响应界面,无需重复执行数据查找或获取操作,进一步提高工作效率。
在一个实施例中,如图8所示,提供了一种终端控制装置,包括:连接模块802、已连接受控终端确定模块804、第二交互界面生成模块806、触控操作发送模块808以及第二触控响应界面生成模块810,其中:
连接模块802,用于与控制中心建立连接。
已连接受控终端确定模块804,用于当检测到用户触发的选定操作时,根据选定操作选定已连接受控终端。
第二交互界面生成模块806,用于接收控制中心发送的与受控终端对应的第一交互界面,并根据第一交互界面渲染得到第二交互界面。
触控操作发送模块808,用于当检测到用户触发的对第二交互界面的触控操作时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。
第二触控响应界面生成模块810,用于获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面,并显示第二触控响应界面。
上述终端控制装置中,控制终端通过与控制中心建立连接,并在检测到用户触发的选定操作时,根据选定操作选定的已连接受控终端。通过接收控制中心发送的与受控终端对应的第一交互界面,根据第一交互界面渲染得到第二交互界面。当检测到用户触发的对第二交互界面的触控操时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面。通过获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面并展示,无需实时从受控终端获取界面数据,从而提高了远程控制操作的通信效率。
在一个实施例中,提供了一种终端控制装置,还包括身份认证模块,用于:
触发身份认证操作,并获取与身份认证操作对应的认证信息;将认证信息发送至控制中心,使得控制中心对认证信息进行验证;或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。
上述终端控制装置,通过触发身份认证操作,获取与身份认证操作对应的认证信息,并将认证信息发送至控制中心,使得控制中心对认证信息进行验证,或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。实现对控制终端进行远程操作的用户进行验证,在认证通过后,才可开始对受控终端的远程操作,避免出现误操作的情况,降低远程操作过程的误操作率。
在一个实施例中,如图9所示,提供了一种控制终端的产品结构示意图,该终端为控制终端,包括:
无线通信接口916,用于通过无线通信的方式与受控终端建立连接;
触控显示屏902,用于显示第二交互界面;
触控显示屏902,用于接收用户针对第二交互界面进行的触控操作;
处理器906,用于根据触控操作,控制受控终端进行触控响应以显示第一触控响应界面;
触控显示屏902,用于显示第二触控响应界面。
参照图9,无线通信接口916可以为3G/4G/5G网络、Wi-Fi或蓝牙天线接口,触控显示屏902可以为OLED(Organic Light-Emitting Diode,有机发光二极管)和玻璃(或蓝宝石)盖板,处理器906在PCBA(Printed Circuit Board+Assembly,印刷电路板装配)上装配有高通APQ8053。此外,终端还包括有隔板904,电池908(容量1000mAh,1.0mm),USB接口910(Type C),不锈钢中框912和后盖板914,后盖板914可以为OLED和玻璃(或蓝宝石)盖板。由于未设计话筒和摄像头等部件,对话功能可以通过蓝牙耳麦来实现,摄影可以由腕表来实现。
终端厚度可以为4mm。对于网络手机、网络视屏终端、游戏终端和智能手表的各种延展(例如生物检测)等手板终端,可以采用5-6吋屏;对于家居管理板、读书板、游戏板、微信板、社交板和作业板等智能家居终端,可以采用7-14吋屏;对于教学板、课本板、考试板、会议板、航空板、高铁板和单向保密信息板等智能教学、会议、航空和高铁类终端,也可以采用7-14吋屏;对于办公桌板、投影显示板、点餐板、公交车站板、家用电器板、智能家具板、酒吧互动板、户外天然场景影视互动板和演唱会竞技运动聚焦板等智能表面终端,可以采用5-105吋屏。
上述终端可以确保触控和显示功能的良好实现,通过受控终端和/或控制中心来实现数据处理和存储等功能,在功能上将触控和显示与其他功能相剥离。由于不需要实现数据处理和存储等功能,相比于传统终端,上述终端可以以较轻的重量、较小的体积和较薄的厚度实现各种复杂的功能,解决了传统通信系统中终端重量和体积较大、便携性较差的问题。
进一步地,由于使用开放式的通讯平台,可以不依托于任何一家手机品牌,也无需得到运营商许可,直接通过无线通信网络或云等开放平台来进行通信,避免了现有终端品牌和运营商配置门槛引起的复杂问题。
关于终端控制装置的具体限定可以参见上文中对于终端控制方法的限定,在此不再赘述。上述终端控制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是控制中心,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储交互界面数据以及响应界面数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种终端控制方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是控制终端,其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种终端控制方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图10和图11中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
响应控制终端的选定操作,获取选定的已连接受控终端;
提取预存的受控终端的第一交互界面;
将第一交互界面发送至控制终端,使得控制终端根据第一交互界面渲染得到第二交互界面;
接收控制终端发送的对第二交互界面的触控操作;
获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面;
将第一触控响应界面发送至控制终端,使得控制终端根据第一触控响应界面渲染得到第二触控响应界面,并显示。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取受控终端存储的界面数据;界面数据包括操作界面、界面操作和响应界面;
根据受控终端的编号为各界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取触控操作对应的触控操作信息;触控操作信息包括受控终端的编号;
根据触控操作信息确定触控操作的识别标识;
控制对应编号的受控终端进行触控响应,并从受控终端存储的界面数据查找对应的响应界面;
将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,将触控操作发送至对应编号的受控终端,使得对应编号的受控终端响应触控操作,生成对应的第一触控响应界面。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据选定操作选定已连接受控终端;
接收控制中心发送的与受控终端对应的第一交互界面,并根据第一交互界面渲染得到第二交互界面;
当检测到用户触发的对第二交互界面的触控操作时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面;
获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面,并显示第二触控响应界面。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
触发身份认证操作,并获取与身份认证操作对应的认证信息;
将认证信息发送至控制中心,使得控制中心对认证信息进行验证;
或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
响应控制终端的选定操作,获取选定的已连接受控终端;
提取预存的受控终端的第一交互界面;
将第一交互界面发送至控制终端,使得控制终端根据第一交互界面渲染得到第二交互界面;
接收控制终端发送的对第二交互界面的触控操作;
获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面;
将第一触控响应界面发送至控制终端,使得控制终端根据第一触控响应界面渲染得到第二触控响应界面,并显示。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取受控终端存储的界面数据;界面数据包括操作界面、界面操作和响应界面;
根据受控终端的编号为各界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取触控操作对应的触控操作信息;触控操作信息包括受控终端的编号;
根据触控操作信息确定触控操作的识别标识;
控制对应编号的受控终端进行触控响应,并从受控终端存储的界面数据查找对应的响应界面;
将从受控终端存储的界面数据中查找到的与识别标识对应的响应界面,确定为第一触控响应界面。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当对应编号的受控终端存储的界面数据中不存在与识别标识对应的响应界面时,将触控操作发送至对应编号的受控终端,使得对应编号的受控终端响应触控操作,生成对应的第一触控响应界面。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据选定操作选定已连接受控终端;
接收控制中心发送的与受控终端对应的第一交互界面,并根据第一交互界面渲染得到第二交互界面;
当检测到用户触发的对第二交互界面的触控操作时,将触控操作对应的触控操作信息发送至控制中心,使得控制中心根据触控操作信息控制受控终端进行触控响应,得到第一触控响应界面;
获取第一触控响应界面,根据第一触控响应界面渲染得到第二触控响应界面,并显示第二触控响应界面。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
触发身份认证操作,并获取与身份认证操作对应的认证信息;
将认证信息发送至控制中心,使得控制中心对认证信息进行验证;
或将认证信息经控制中心发送至对应的受控终端,使得受控终端对认证信息进行验证。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种终端控制方法,所述方法包括:
响应控制终端的选定操作,获取选定的已连接受控终端;
获取所述受控终端存储的界面数据;所述界面数据包括操作界面、界面操作和响应界面;所述操作界面为第二交互界面、所述界面操作为对所述第二交互界面的触控操作、所述响应界面为第一触控响应界面;
根据所述受控终端的编号为各所述界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储;
提取预存的所述受控终端的第一交互界面;
将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
接收所述控制终端发送的对所述第二交互界面的触控操作;
获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示;
所述获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面,包括:
获取所述触控操作对应的触控操作信息;所述触控操作信息包括受控终端的编号;
根据所述触控操作信息确定所述触控操作的识别标识;
控制对应编号的所述受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面;
将从所述受控终端存储的界面数据中查找到的与所述识别标识对应的响应界面,确定为第一触控响应界面;
所述提取预存的所述受控终端的第一交互界面,包括:
将所述第一交互界面和所述受控终端的编号进行关联预存;根据已连接受控终端的编号,从预存数据中提取与所述已连接的受控终端的编号关联的第一交互界面。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当对应编号的所述受控终端存储的界面数据中不存在与所述识别标识对应的响应界面时,将所述触控操作发送至对应编号的所述受控终端,使得对应编号的所述受控终端响应所述触控操作,生成对应的第一触控响应界面。
3.根据权利要求1所述的方法,其特征在于,所述受控终端的第一交互界面,根据所述受控终端对当前的显示操作界面进行截屏操作,得到的界面截屏数据生成;所述界面截屏数据包括截取屏幕用户界面的界面数据、屏幕尺寸以及分辨率。
4.一种终端控制方法,所述方法包括:
与控制中心建立连接;
当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
获取所述已连接受控终端的界面数据;所述界面数据包括操作界面、界面操作和响应界面;所述操作界面为第二交互界面、所述界面操作为对所述第二交互界面的触控操作、所述响应界面为第一触控响应界面;
根据所述受控终端的编号为各所述界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储;
接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;所述第一交互界面为根据已连接受控终端的编号从预存数据中提取得到;
当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面;
所述使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面,包括:使得所述控制中心根据所述触控操作信息确定所述触控操作的识别标识;控制对应编号的所述受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面;将从所述受控终端存储的界面数据中查找到的与所述识别标识对应的响应界面,确定为第一触控响应界面。
5.根据权利要求4所述的方法,其特征在于,在所述当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端之后,还包括:
触发身份认证操作,并获取与所述身份认证操作对应的认证信息;
将所述认证信息发送至所述控制中心,使得所述控制中心对所述认证信息进行验证;
或将所述认证信息经所述控制中心发送至对应的受控终端,使得所述受控终端对所述认证信息进行验证。
6.根据权利要求4所述的方法,其特征在于,所述接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面,包括:
接收所述控制中心发送的与所述受控终端对应的第一交互界面;
获取所述第一交互界面的界面数据、屏幕尺寸和分辨率,并根据所述屏幕尺寸和分辨率,对第一交互界面进行调整和处理,得到渲染后的第二交互界面。
7.一种终端控制装置,其特征在于,所述装置包括:
已连接受控终端选定模块,用于响应控制终端的选定操作,获取选定的已连接受控终端;
第一交互界面提取模块,用于提取预存的所述受控终端的第一交互界面;
第一交互界面发送模块,用于将所述第一交互界面发送至控制终端,使得所述控制终端根据所述第一交互界面渲染得到第二交互界面;
触控操作接收模块,用于接收所述控制终端发送的对所述第二交互界面的触控操作;
第一触控响应界面获取模块,用于获取所述触控操作对应的触控操作信息,并根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
第一触控响应界面发送模块,用于将所述第一触控响应界面发送至所述控制终端,使得所述控制终端根据所述第一触控响应界面渲染得到第二触控响应界面,并显示;
所述第一触控响应界面获取模块,还用于:获取所述触控操作对应的触控操作信息;所述触控操作信息包括受控终端的编号;根据所述触控操作信息确定所述触控操作的识别标识;控制对应编号的所述受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面;将从所述受控终端存储的界面数据中查找到的与所述识别标识对应的响应界面,确定为第一触控响应界面;
所述第一交互界面提取模块还用于:将所述第一交互界面和所述受控终端的编号进行关联预存;根据已连接受控终端的编号,从预存数据中提取与所述已连接的受控终端的编号关联的第一交互界面;
还包括:用于获取所述受控终端存储的界面数据;所述界面数据包括操作界面、界面操作和响应界面;所述操作界面为第二交互界面、所述界面操作为对所述第二交互界面的触控操作、所述响应界面为与第一触控响应界面;以及根据所述受控终端的编号为各所述界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储的模块。
8.一种终端控制装置,其特征在于,所述装置包括:
连接模块,用于与控制中心建立连接;
已连接受控终端确定模块,用于当检测到用户触发的选定操作时,根据所述选定操作选定已连接受控终端;
第二交互界面生成模块,用于接收所述控制中心发送的与所述受控终端对应的第一交互界面,并根据所述第一交互界面渲染得到第二交互界面;所述第一交互界面为根据已连接受控终端的编号从预存数据中提取得到;
触控操作发送模块,用于当检测到用户触发的对所述第二交互界面的触控操作时,将所述触控操作对应的触控操作信息发送至所述控制中心,使得所述控制中心根据所述触控操作信息控制所述受控终端进行触控响应,得到第一触控响应界面;
第二触控响应界面生成模块,用于获取所述第一触控响应界面,根据所述第一触控响应界面渲染得到第二触控响应界面,并显示所述第二触控响应界面;
所述触控操作发送模块,还用于:使得所述控制中心根据所述触控操作信息确定所述触控操作的识别标识;控制对应编号的所述受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面;将从所述受控终端存储的界面数据中查找到的与所述识别标识对应的响应界面,确定为第一触控响应界面;
还包括:用于获取所述已连接受控终端的界面数据;所述界面数据包括操作界面、界面操作和响应界面;所述操作界面为第二交互界面、所述界面操作为对所述第二交互界面的触控操作、所述响应界面为与第一触控响应界面;以及根据所述受控终端的编号为各所述界面数据添加识别标识,并将具有相同识别标识的操作界面、界面操作以及响应界面关联存储的模块。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
CN202010070565.2A 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质 Active CN111263004B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010070565.2A CN111263004B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010070565.2A CN111263004B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN111263004A CN111263004A (zh) 2020-06-09
CN111263004B true CN111263004B (zh) 2021-06-18

Family

ID=70947919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010070565.2A Active CN111263004B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN111263004B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114780192A (zh) * 2022-04-22 2022-07-22 维沃移动通信有限公司 远程协助方法、远程协助装置和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105160854A (zh) * 2015-09-16 2015-12-16 小米科技有限责任公司 设备控制方法、装置和终端设备
CN106572139A (zh) * 2015-10-13 2017-04-19 阿里巴巴集团控股有限公司 多终端控制方法、终端、服务器和系统
CN108897596A (zh) * 2018-07-05 2018-11-27 北京景行锐创软件有限公司 一种图形界面传输方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101718894B1 (ko) * 2011-11-29 2017-03-23 삼성전자주식회사 기기 제어를 위한 유저 인터페이스 제공 시스템 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105160854A (zh) * 2015-09-16 2015-12-16 小米科技有限责任公司 设备控制方法、装置和终端设备
CN106572139A (zh) * 2015-10-13 2017-04-19 阿里巴巴集团控股有限公司 多终端控制方法、终端、服务器和系统
CN108897596A (zh) * 2018-07-05 2018-11-27 北京景行锐创软件有限公司 一种图形界面传输方法及装置

Also Published As

Publication number Publication date
CN111263004A (zh) 2020-06-09

Similar Documents

Publication Publication Date Title
CN111273850B (zh) 终端控制方法、装置、计算机设备和存储介质
CN111290695B (zh) 基于优先级控制的终端控制方法、装置和终端
CN111417028B (zh) 信息处理方法、装置、存储介质及电子设备
CN111314441B (zh) 基于多区域控制的终端控制方法、装置和终端
CN111309226B (zh) 基于通信质量的终端控制方法、装置、终端和计算机设备
US11102450B2 (en) Device and method of displaying images
CN111324248A (zh) 终端控制方法、装置、终端、计算机设备和存储介质
CN110121146B (zh) 信息共享方法、装置及相关设备
CN110601959B (zh) 会话消息显示方法、装置、终端及存储介质
US11553157B2 (en) Device and method of displaying images
US20150249696A1 (en) Transmission terminal, transmission system, transmission method, and recording medium storing transmission control program
US9729826B2 (en) Communication management system, communication system, and communication management method
CN113573090A (zh) 游戏直播中的内容显示方法、装置、系统和存储介质
CN113490010A (zh) 基于直播视频的互动方法、装置、设备及存储介质
CN111263004B (zh) 终端控制方法、装置、计算机设备和存储介质
CN110457602A (zh) 一种基于人脸识别的交友方法与装置
US10318989B2 (en) Information providing method and system using signage device
CN107924298A (zh) 用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序
US20150249695A1 (en) Transmission terminal, transmission system, transmission method, and recording medium storing transmission control program
EP3125493A1 (en) Terminal, communication method, and carrier means
CN111314442B (zh) 基于分时控制的终端控制方法、装置、终端和计算机设备
CN106656725B (zh) 智能终端、服务器及信息更新系统
US9762859B2 (en) Shared communication terminal, communication system, and communication method
CN106254953B (zh) 一种图片显示方法及装置、图片接收终端
EP3125494A1 (en) Terminal, communication method, and carrier means

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant