CN111314441A - 基于多区域控制的终端控制方法、装置和终端 - Google Patents

基于多区域控制的终端控制方法、装置和终端 Download PDF

Info

Publication number
CN111314441A
CN111314441A CN202010070257.XA CN202010070257A CN111314441A CN 111314441 A CN111314441 A CN 111314441A CN 202010070257 A CN202010070257 A CN 202010070257A CN 111314441 A CN111314441 A CN 111314441A
Authority
CN
China
Prior art keywords
terminal
control
interface
touch
controlled terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010070257.XA
Other languages
English (en)
Other versions
CN111314441B (zh
Inventor
赵宁
许仁
周枫
王伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
VDL Industry Shenzhen Co Ltd
Original Assignee
VDL Industry Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by VDL Industry Shenzhen Co Ltd filed Critical VDL Industry Shenzhen Co Ltd
Priority to CN202010070257.XA priority Critical patent/CN111314441B/zh
Publication of CN111314441A publication Critical patent/CN111314441A/zh
Application granted granted Critical
Publication of CN111314441B publication Critical patent/CN111314441B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Abstract

本申请涉及一种基于多区域控制的终端控制方法、装置、终端、计算机设备和存储介质,方法包括:获取控制终端发送的携带控制终端的身份认证信息操控请求和页面划分信息,当根据身份认证信息完成对控制终端的身份认证时,根据页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端,接收各控制终端发送的用户针对各局部交互界面的触控操作数据,识别各触控操作数据的优先级,根据优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。本申请还提供一种基于多区域控制的终端控制方法、装置、计算机设备和存储介质。上述能够实现多个控制终端的协同操作,提高远程控制效率。

Description

基于多区域控制的终端控制方法、装置和终端
技术领域
本申请涉及通信技术领域,特别是涉及一种基于多区域控制的终端控制方法、装置、终端、计算机设备和存储介质。
背景技术
随着信息社会的发展和人们生活水平的提高,电子设备已成为人们日常生活的不可或缺的一部分。人们对于电子设备的要求也越来越多,于是,出现了远程控制技术,远程控制技术的出现给人们的生活带来了巨大的便利,如人们可在任意地点对电视机以及空调等家电用品进行远程控制。
但是,目前的远程控制技术中,多是某个用户通过相关应用程序或软件实现对某个受控终端的远程操作,当遇到大型、复杂的需要远程控制的项目,在受控终端上进行全局加载显示该项目的速度都较慢,进而使得远程控制的效率低。因此,目前的远程控制技术还存在控制效率不高的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高控制效率的基于多区域控制的终端控制方法、装置、终端、计算机设备和存储介质。
一种基于多区域控制的终端控制方法,应用于受控终端,受控终端与至少两个控制终端连接,方法包括:
获取控制终端发送的操控请求和页面划分信息,操控请求携带控制终端的身份认证信息;
当根据身份认证信息完成对控制终端的身份认证时,根据页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端;
接收各控制终端发送的用户针对各局部交互界面的触控操作数据;
识别各触控操作数据的优先级,根据优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
在一个实施例中,触控操作数据包括操作者身份信息、操作应用以及操作类型;
识别各触控操作数据的优先级包括:
基于操作者身份信息、操作应用以及操作类型进行加权求和,确定各触控操作数据的优先级。
在一个实施例中,接收各控制终端发送的用户针对交互界面的触控操作数据包括:
当接收到任一控制终端发送的用户针对局部交互界面的触控操作数据时,锁定当前时间周期内该控制终端对该交互界面的唯一操作权限。
在一个实施例中,发送对应的触控响应界面至各控制终端之后,还包括:
发送操作者信息至各控制终端,操作者信息包括产生对应的触控响应界面的触控操作数据的数据发送端以及数据发送端对应操控的局部交互界面信息。
一种基于多区域控制的终端控制装置,装置包括:
数据获取模块,用于获取控制终端发送的操控请求和页面划分信息,操控请求携带控制终端的身份认证信息;
数据发送模块,用于当根据身份认证信息完成对控制终端的身份认证时,根据页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端;
数据接收模块,用于接收各控制终端发送的用户针对各局部交互界面的触控操作数据;
数据响应模块,用于识别各触控操作数据的优先级,根据优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述基于多区域控制的终端控制方法中的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述基于多区域控制的终端控制方法中的步骤。
上述基于多区域控制的终端控制方法、装置、计算机设备和存储介质,受控终端与多个控制终端连接,获取控制终端发送的操控请求和页面划分信息,完成身份认证后,根据页面划分信息发送局部交互界面至对应的控制终端,进一步接收各控制终端发送的触控操作数据,根据识别出的触控操作数据的优先级依次响应各触控响应操作数据,生成、并发送对应的触控响应界面各控制终端。上述方案,受控终端根据页面划分信息将自身的交互界面分区域发送给多个控制终端,使得多个控制终端能够以共同协作的方式,共同完成远程操作,提高远程控制效率。
一种基于多区域控制的终端控制方法,应用于控制终端,方法包括:
获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,操控请求携带身份认证信息;
接收受控终端根据身份认证信息和页面划分信息反馈的局部交互界面,显示局部交互界面,局部交互界面为受控终端被至少两个控制终端操控的交互界面的局部界面;
响应用户对局部交互界面的触控操作,得到触控操作数据;
将触控操作数据发送至受控终端;
获取受控终端的触控响应界面,显示触控响应界面,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应触控操作数据生成。
在一个实施例中,接收受控终端根据身份认证信息和页面划分信息反馈的局部交互界面包括:
获取受控终端根据身份认证信息和页面划分信息反馈的局部交互界面数据;
对局部交互界面数据进行处理,得到局部交互界面配置数据;
根据局部交互界面配置数据,配置局部交互界面。
在一个实施例中,获取受控终端的触控响应界面包括:
获取受控终端响应触控操作数据后显示的触控响应窗口数据;
对触控响应窗口数据进行处理,得到触控响应界面配置数据;
根据触控响应界面配置数据,配置触控响应界面。
在一个实施例中,获取受控终端的交互界面之前,还包括:
发送连接请求至受控终端,操控请求携带身份信息;
接收受控终端根据身份信息反馈的连接许可消息,建立与受控终端的连接。
在一个实施例中,还包括:
通过控制中心与受控终端建立连接,控制中心用于将控制终端传输的数据转发至受控终端,以及将受控终端传输的数据转发至控制终端,实现控制终端与受控终端的通信。
在一个实施例中,显示的交互界面和显示的触控响应界面与控制终端的屏幕尺寸相匹配。
一种基于多区域控制的终端控制装置,装置包括:
页面划分信息处理模块,用于获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,操控请求携带身份认证信息;
第一界面显示模块,用于接收受控终端根据身份认证信息和页面划分信息反馈的局部交互界面,显示局部交互界面,局部交互界面为受控终端被至少两个控制终端操控的交互界面的局部界面;
触控操作响应模块,用于响应用户对交互界面的触控操作,得到触控操作数据;
触控操作数据发送模块,用于将触控操作数据发送至受控终端;
第二界面显示模块,用于获取受控终端的触控响应界面,显示触控响应界面,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应触控操作数据生成。
一种终端,包括:通讯模块、触控显示模块和处理器;
通讯模块与受控终端建立连接,处理器获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,接收受控终端反馈的局部交互界面,将局部交互界面发送至触控显示模块,触控显示模块接收、并显示局部交互界面,响应用户对局部交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至处理器,处理器获取、并发送触控操作数据至受控终端,获取受控终端的触控响应界面、并将触控响应界面发送至触控显示模块,触控显示模块接收、并显示触控响应界面,其中,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应该触控操作数据生成。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述基于多区域控制的终端控制方法中的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述基于多区域控制的终端控制方法中的步骤。
上述基于多区域控制的终端控制方法、装置、终端、计算机设备和存储介质中,获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,以获取受控终端反馈的局部交互界面,同时显示该局部交互界面,进而通过响应用户在局部交互界面上的触控操作,发送触控操作数据至受控终端,获取受控终端按照识别出的触控操作数据的优先级,响应该触控操作数据生成的触控响应界面。上述方案,受控终端根据页面划分信息将自身的交互界面分区域发送给多个控制终端,使得多个控制终端能够以共同协作的方式,共同完成远程操作,提高远程控制效率。
附图说明
图1为一个实施例中基于多区域控制的终端控制方法的应用环境图;
图2为一个实施例中基于多区域控制的终端控制方法的流程示意图;
图3为一个实施例中基于多区域控制的终端控制方法的流程示意图;
图4为另一个实施例中基于多区域控制的终端控制方法的详细流程示意图;
图5为一个实施例中多个控制终端协同控制一个受控终端的应用场景图;
图6为另一个实施例中基于多区域控制的终端控制方法的应用环境图;
图7为一个实施例中基于多区域控制的终端控制方法的软件架构图;
图8为一个实施例中终端的结构框图;
图9为另一个实施例中终端的详细结构框图;
图10为一个实施例中基于多区域控制的终端控制装置的结构框图;
图11为另一个实施例中基于多区域控制的终端控制装置的结构框图;
图12为另一个实施例中基于多区域控制的终端控制装置的详细结构框图;
图13为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的基于多区域控制的终端控制方法,可以应用于如图1所示的应用环境图中。在该应用环境中,包括有多个控制终端202和受控终端204。其中,控制终端202具有触控和显示功能。触控功能为用户在触控屏上通过触摸或书写笔书写来控制操作界面,显示功能包括显示操作界面和触控响应界面,触控响应界面为触控操作之后,显示相应的触控响应的界面。其中,受控终端204为多个控制终端202所控制的终端,受控终端204与控制终端202进行无线通信,受控终端204在完成对控制终端202的身份认证后,将当前正在被其他控制终端操控的交互界面通过无线链路传输给控制终端202,并识别控制终端202发送的触控操作数据的优先级,根据优先级做出触控响应,生成对应的触控响应界面,将触控响应界面发送给控制终端202。其中,控制终端202和受控终端204可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。
在一个实施例中,如图2所示,本申请还提供了一种基于多区域控制的终端控制方法,该方法仍可以应用于图1所示的应用环境图中。以该方法应用于图1中的受控终端204为例进行说明,包括以下步骤:
步骤S200,获取控制终端发送的操控请求和页面划分信息,操控请求携带控制终端的身份认证信息。
页面划分信息用于指导受控终端204将自身的交互界面划分为多个区域,得到多个局部交互界面,其具体可以包括坐标范围与控制终端的身份标识的对应关系。取受控终端的界面的左上角为坐标原点,如坐标范围[0,0]~[200,200]对应控制终端a,坐标范围[201,201]~[400,400]对应控制终端b。在实际应用中,可以是用户操作控制终端A(该控制终端可具有较高权限),在控制终端A的引导操作中逐步进入“分区域多对一操控模式”。比如控制终端A在接收了用户选择的连接受控终端后,可进一步提供操控模式选项,使用户选择“分区域多对一操控模式”。用户通过该模式,设置目前与受控终端202连接的各控制终端的操控权限,即将受控终端的交互界面划分为多个区域,并为各控制终端分配相应的操作区域,得到页面划分信息,以使各控制终端各自操控受控终端202的交互界面的一个区域,共同协作完成对受控终端的控制。在其他实施例中,还可以是由一个控制终端操作一个区域,另外2个控制终端共同操作另一区域,划分模式具体可根据实际情况而定,在此不做限定。
具体的,可以是至少两个用户均于控制终端202进行操作以实现多个用户同时控制一台被控终端,各控制终端202都与受控终端204连接,且控制终端202与受控终端204都预设有远程操控系统或远程操作应用程序,通过该操作系统/应用程序,可实现对受控终端的控制。可以理解的是,在步骤S100之前,控制终端202与受控终端204已建立连接。具体的,可通过3G、4G、2.4G、5G、Wi-Fi(Wireless Fidelity,无线保真)通信或蓝牙通信等无线通信方式建立连接。若用户想要对受控终端204进行远程操控,可通过控制终端202发送携带身份认证信息的操控请求至受控终端204,接收该操控请求。具体的,身份认证信息可以是受控终端204完成对控制终端202的身份认证允许确认建立连接时生成,其包括但不限于经受控终端204认证的身份代码或身份标识,例如“001”。
步骤S400,当根据身份认证信息完成对控制终端的身份认证时,根据页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端。
身份认证信息即指经受控终端202认证过的能够表征控制终端的信息。身份认证信息以身份代码为例,身份认证方式可以是于数据库表中查找是否存在该身份代码,若存在,则认证通过。身份认证同样不限于字符串密码验证、指纹验证、人脸验证、虹膜验证等验证方式。其中,交互界面可以为受控终端204上所显示的被至少两个控制终端202共享的操作界面,具体可以是当前显示的操作界面,也可以是控制终端202指定要操作的应用的界面。例如,可以是某个大型且复杂的施工操作图。当完成对控制终端的身份认证后,则根据页面划分信息(如坐标范围[0,0]~[200,200]对应控制终端a,坐标范围[201,201]~[400,400]对应控制终端b),对应的将该施工操作图的界面划分为多个局部交互界面,如[0,0]~[200,200]-局部交互界面1-控制终端a,坐标范围[201,201]~[400,400]-局部交互界面2-控制终端b,然后将各局部交互界面数据发送给对应的控制终端。
步骤S600,接收各控制终端发送的用户针对各局部交互界面的触控操作数据。
具体实施时,用户可以通过手指或触控笔在控制终端202的交互界面上进行触控操作,触控操作可以包括点击、长按、滑动、缩放以及多点触控等操作。控制终端202接收并记录触控操作,得到触控操作数据,将触控操作数据发送至受控终端204。具体的,触控操作数据包括操作者身份信息、操作应用、触控操作时间、触控点坐标,触控时长以及触控压力信息等。
步骤S800,识别各触控操作数据的优先级,根据优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
具体实施时,在接收到一个或多个触控操作数据时,刻根据预设的优先级算法识别出各触控操作数据的优先级,确定各触控操作数据的执行顺序,然后按照该执行顺序依次响应各触控操作数据,根据该触控操作数据中的触控坐标、触控时长、触控压力等信息执行相应操作,更新了自身对应的操作界面(程序运行窗口),生成对应的触控响应界面,并将触控响应界面发送至各控制终端,以使各控制终端能同步接收到其最新的操作界面。具体的,受控终端204生成的触控响应界面可以是将所有触控操作数据都响应完后,得到的一个最终的触控响应界面,也可以是逐个响应触控操作数据得到的并实时发送的多个触控响应界面。当完成触控响应操作之后,同步更新其自身的交互界面。
具体实施时,响应触控操作包括多种情形。以排序后的触控操作依次为触控操作1、触控操作2、触控操作3、…触控操作n为例进行说明:
情形1、若检测到接收到的触控操作之间无冲突,则可按照顺序依次执行触控操作1~n,并执行完触控操作n后生成的最终界面n作为第一触控响应界面;或者将每个触控操作所生成的界面(即界面1、界面2…界面n)都作为触控响应界面,依次发送给各控制终端;
情形2、若检测到接收到的触控操作之间有冲突,则仅响应触控时间最早的触控操作1,将生成的界面1作为触控响应界面。或者响应前几个无冲突的操作,生成响应界面,比如前触控操作1~5的操作无冲突,到了触控操作6时产生了冲突,此时则仅响应触控操作1~5即可。在当前控制终端A还未发送触控操作数据之前,受控终端204可实时接收其他控制终端的触控操作,并做出响应,将响应后的界面作为触控响应界面发送给控制终端A。若用户想要继续对受控终端的操作,可再次在触控响应界面上进行触控操作,然后通过控制终端202将触控操作数据再次发送给受控终端204,再次接收受控终端204发送的触控响应界面(与上一次的触控响应界面不同),跟用户正常在移动终端如手机上进行触控操作进行操作的体验感差不多。
上述基于多区域控制的终端控制方法中,受控终端与多个控制终端连接,获取控制终端发送的操控请求和页面划分信息,完成身份认证后,根据页面划分信息发送局部交互界面至对应的控制终端,进一步接收各控制终端发送的触控操作数据,根据识别出的触控操作数据的优先级依次响应各触控响应操作数据,生成、并发送对应的触控响应界面各控制终端。上述方案,受控终端根据页面划分信息将自身的交互界面分区域发送给多个控制终端,使得多个控制终端能够以共同协作的方式,共同完成远程操作,提高远程控制效率。
在一个实施例中,触控操作数据包括操作者身份信息、操作应用以及操作类型;识别各触控操作数据的优先级包括:基于操作者身份信息、操作应用以及操作类型进行加权求和,确定各触控操作数据的优先级。
控制终端202在响应用户的触控操作时,会记录操作者的身份信息(管理员或普通用户)、操作类型(长按操作、点击操作以及滑动操作等)、操作时长以及操作应用(QQ或微信)等,根据记录下的触控操作,生成触控操作数据。受控终端204在接收到触控操作数据后,根据其中的操作者身份信息、操作应用以及操作类型进行加权求和,确定各触控操作数据的优先级。
具体的,可以包括以下几种方式:
1)针对操作不同的应用,可以预设每个应用之间的优先级,比如对应用A的操作的优先权要大于对应用B的操控的优先权;
2)针对操作相同的应用,可以设定不同操作类型的优先级,比如滑动操作的优先级大于点击操作的优先级,长按操作的优先级大于滑动操作的优先级;
3)针对不同的操作者,同样也可以设定操作优先级,比如具有管理员权限的用户,其操作优先级要大于普通用户的优先级;
工作人员可根据上述几种方式于受控终端204可设置相关的算法,比如可按照操作者身份、操作所作用的应用/进程以及操作类型等因子,设置对应的权重,对其加权求和,确定优先级。得到的总数值越高,则其优先级也越大。本实施例中,通过确定各触控操作数据的优先级能够高效且有条理的响应触控操作数据。
在一个实施例中,发送对应的触控响应界面至各控制终端之后,还包括:发送操控者信息至各控制终端,操作者信息包括产生对应的触控响应界面的触控操作数据的数据发送端以及数据发送端对应操控的局部交互界面信息。
在实际应用中,除发送对应的触控响应界面至控制终端之外,还可发送操作者信息,该操作者信息包括产生对应的触控响应界面的触控操作数据的数据发送端以及数据发送端对应操控的局部交互界面信息,以使各控制终端知晓各控制终端所操控的是哪一部分局部交互界面,进行了哪些相关的操作。此外,还可以发送包括当前时间周期内发送触控操作数据的控制终端的身份信息(即当前的其他控制终端的身份信息),以便各控制终端能够知晓当前除自身之外正在操控受控终端202的其他控制终端。
在一个实施例中,接收各控制终端发送的用户针对各交互界面的触控操作数据包括:当接收到任一控制终端发送的用户针对交互界面的触控操作数据时,锁定当前时间周期内该控制终端对该交互界面的唯一操作权限。
在实际应用中,针对在短时间内接收到多个不同控制终端发送过来的对同一交互界面的触控操作,为了减少触控操作数据的冲突,可在当接收到任一控制终端发送的用户针对某个交互界面的触控操作数据时,锁定当前时间周期内该控制终端对该交互界面的唯一操作权限,停止接收其他控制终端对发送的触控操作数据,进一步的,还可给其他控制终端发送禁止操作消息,以使其他控制终端的用户停止对该交互界面的操作,当该用户停止对该交互界面的触控操作时,则解除上述唯一操作权限,允许接收其他控制终端发送的触控操作数据,进一步,还可发送操作许可消息至其他控制终端,以便其他控制终端的用户及时进行操作。本实施例中,通过锁定操作权限,能够减少触控操作数据的冲突,保证数据交互的流畅性。
在一个实施例中,如图3所示,提供了一种基于多区域控制的终端控制方法,以该方法应用于图1中的控制终端202为例进行说明,包括以下步骤:
步骤S100,获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,操控请求携带身份认证信息。
具体实施时,可以是至少两个用户均于控制终端202进行操作以实现多个用户同时控制一台被控终端。同样的,各控制终端202都与受控终端204连接,且控制终端202与受控终端204都预设有远程操控系统或远程操作应用程序,通过该操作系统/应用程序,可实现对受控终端的控制。在实际应用中,可以是用户操作控制终端A(该控制终端可具有较高权限),在控制终端A的引导操作中逐步进入“分区域多对一操控模式”。比如控制终端A在接收了用户选择的连接受控终端后,可进一步提供操控模式选项,使用户选择“分区域多对一操控模式”。为了能够精确地对受控终端204的交互界面进行划分,用户可通过该模式获取受控终端204的完整的交互界面(当然也可不获取完整的交互界面信息),设置目前与受控终端202连接的各控制终端的操控权限,即将受控终端的交互界面划分为多个区域,并为各控制终端分配相应的操作区域,得到页面划分信息(包括坐标范围与控制终端的身份标识的对应关系),以使各控制终端各自操控受控终端202交互界面的一个区域,共同协作完成对受控终端204的控制。具体的,以受控终端204的界面的左上角为坐标原点,如设置控制终端a控制坐标范围[0,0]-[200,200],控制终端b对应控制坐标范围[201,201]-[400,400],以此方式将受控终端204的交互界面划分为多个区域。
可以理解的是,在步骤S100之前,控制终端202与受控终端204已建立连接。具体的,可通过3G、4G、2.4G、5G、Wi-Fi(Wireless Fidelity,无线保真)通信或蓝牙通信等无线通信方式建立连接。当与受控终端204建立连接后,若用户想要对受控终端进行远程操控,可发送携带身份认证信息的操控请求至受控终端204,以获取受控终端204根据身份认证信息发送的当前时间的交互界面。具体的,身份认证信息可以是受控终端204完成对控制终端202的身份认证允许确认建立连接时生成,其包括但不限于经受控终端204认证的身份代码或身份标识,例如“001”。
步骤S300,接收受控终端根据身份认证信息和页面划分信息反馈的交互界面,显示交互界面,交互界面为当前被至少两个控制终端操控的界面。
当受控终端204根据身份认证信息完成身份认证后,则根据页面划分信息将自身待传输的交互界面(可以包括当前显示的操作界面或是控制终端指定要操作的界面)划分为多个局部交互界面,将各局部交互界面发送至控制终端202,获取受控终端204发送的交互界面。具体实现时,交互界面的获取方式可以是截取受控终端204的操作界面图像,将该操作界面图像作为交互界面,或者,截取受控终端204屏幕UI(User Interface,用户界面)数据、屏幕尺寸、分辨率等数据,根据这些数据得到交互界面。例如,对于受控终端204,可以对其整个操作界面进行截屏操作,将截屏结果作为交互界面。也可以是读取受控终端204的操作界面参数,得到分辨率2048×1536像素,当操作界面左上角为坐标原点时,软件图标(例如微信图标)位于坐标(1600,600)像素处,根据分辨率、图标类型和图标位置,可以得到交互界面。当得到受控终端204的交互界面后,可以直接显示该交互界面,也可以根据其屏幕分辨率大小和屏幕的尺寸大小,对交互界面进行一定的缩放、截取和填充等处理或渲染处理,得到与控制终端202屏幕尺寸数据相匹配的交互界面,然后显示该与控制终端202的屏幕尺寸数据相匹配的交互界面。进一步的,用户可以调整每个显示后的交互界面的大小。可以理解的是,在控制终端A之前与受控终端204建立连接的控制终端,均是通过同样的方式获取受控终端204发送的交互界面。同样的,交互界面的几种表现形式在前述实施例中已有详细说明,在此不再赘述。
步骤S500,响应用户对局部交互界面的触控操作,得到触控操作数据。
其中,触控操作为用户在控制终端202的局部交互界面上通过触摸或触控笔书写来控制操作界面的操作。具体实施时,用户可以通过手指或书写笔在控制终端202的局部交互界面上点击软件图标打开软件,在软件打开之后点击软件中的各个控件,或者在软件打开之后的操作界面中进行触控操作,触控操作可以包括点击、长按、滑动、缩放以及多点触控等操作。控制终端202接收用户的触控操作,并记录用户触控操作时间、触控点坐标,触控时长以及触控压力信息等,得到触控操作数据。举例说明,若智能手板为控制终端202,平板电脑为受控终端204。平板电脑的第一局部交互界面分辨率为2048×1536像素,智能手板302的第二交互界面分辨率为1024×768像素,当用户需要开启微信时,在第二局部交互界面坐标为(500,200)处点击微信图标,根据第一局部交互界面与第二局部交互界面的比例,将触控操作数据变换为对第一局部交互界面坐标(1000,400)处的点击操作,然后将该触控操作数据通过网络发送给平板电脑,平板电脑在第一局部交互界面(1000,400)处进行触控响应。
步骤S700,将触控操作数据发送至受控终端。
各控制终端202在得到携带触控触控操作时间的触控操作数据后,可实时将触控操作数据发送至受控终端204,以便受控终端204按照触控操作时间进行分时控制,依次响应触控操作数据。
步骤S900,获取受控终端的触控响应界面,显示触控响应界面,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应触控操作数据生成。
其中,触控响应界面可为受控终端204由受控终端按照识别出的各触控操作数据的优先级,响应各触控操作数据生成的界面。具体的,优先级可根据操作应用、操作者以及操作时长等确定。在另一个实施例中,受控终端204的触控响应界面可以是将所有触控操作数据都响应完后,得到的一个最终的触控响应界面,也可以是每次响应触控操作数据得到的并实时发送的多个触控响应界面。具体实现中,触控响应界面的获取方式可以是截取受控终端204的触控响应界面图像,将该触控响应界面图像作为第一触控响应界面,或者,读取受控终端204触控响应界面的分辨率、颜色和文字等信息,根据这些信息得到第一触控响应界面。例如,对于受控终端204,可以对其整个触控响应界面进行截屏操作,将截屏结果作为第一触控响应界面。或者,读取受控终端204的触控响应界面信息,包括分辨率2048×1536像素,触控响应所显示的文字内容和位置,触控响应所显示的图像颜色和位置等,根据上述触控响应界面信息得到第一触控响应界面。在得到第一触控响应界面之后,可以根据控制终端202界面的分辨率对第一触控响应界面进行等比例缩放得到第二触控响应界面。例如,当控制终端202界面与第一触控响应界面的分辨率不成等比例时,可以先对第一触控响应界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二触控响应界面,然后对第二触控响应界面进行显示;若分辨率成等比例,则可直接将第一触控响应界面缩放成与屏幕尺寸大小相匹配的界面,得到第二触控响应界面,再于对应显示该第二触控响应界面,若分辨率正好相匹配,则可直接将第一触控响应界面作为第二触控响应界面,再于显示该第二触控响应界面。多个控制终端操控一个受控终端的应用场景可参考图5,进一步的,用户可以调整每个触控响应界面的大小。
上述基于多区域控制的终端控制方法中,获取用户设置的页面划分信息,发送页面划分信息和操控请求至受控终端,以获取受控终端反馈的局部交互界面,同时显示该局部交互界面,进而通过响应用户在局部交互界面上的触控操作,发送触控操作数据至受控终端,获取受控终端按照识别出的触控操作数据的优先级,响应该触控操作数据生成的触控响应界面。上述方案,受控终端根据页面划分信息将自身的交互界面分区域发送给多个控制终端,使得多个控制终端能够以共同协作的方式,共同完成远程操作,提高远程控制效率。
在一个实施例中,如图4所示,获取受控终端根据身份认证信息反馈的交互界面之前,还包括:步骤S050,发送连接请求至受控终端,连接请求携带身份信息,接收受控终端根据身份信息反馈的连接许可消息,建立与受控终端的连接。
具体实施时,控制终端202与受控终端204建立连接的过程可以是:控制终端202可选择需要连接的具体受控终端,比如是连接手机、电脑以及智能手环等智能设备。该智能设备可以是控制终端202之前已经连接过或进行过远程操控的历史记录中的智能设备,也可以是新的某一终端设备。
在实际应用中,可以是控制终端202开机进入显示界面,用户打开历史连接设备记录,从中选择具体待连接的受控终端进行连接,也可以是搜索当前可连接的受控终端,然后通过触控操作从中选择具体待连接的受控终端进行连接,此时,控制终端202响应用户触控操作,发送携带其身份信息的操控请求至已选择的受控终端204,受控终端204接收该请求,读取请求中的身份信息,并基于该身份信息进行身份认证或配对认证,若验证通过,则发送连接许可消息至控制终端202,以建立与控制终端202的连接。具体的,验证方式包括但不限于是字符串密码验证、指纹验证、人脸验证或虹膜验证等验证方式。
进一步的,受控终端204还可以设置控制终端202的操控权限,针对一些涉及隐私敏感或重要的操作,需要对控制终端202进行再次验证,或者,需要不同的访问权限才可访问。具体的,可通过3G、4G、5G、2.4G、Wi-Fi、蓝牙或自定义无线协议与所述受控终端建立连接。具体实现中,控制终端202与受控终端204之间的通信距离在Wi-Fi或蓝牙通信范围内,两者通过Wi-Fi、蓝牙或自定义无线协议实现数据的传输。由于使用的是Wi-Fi或蓝牙这样的通用平台,或者使用自定义无线协议,可以保持完全开放的操作环境,允许任何受控终端随时开发应用软件,能够满足通信产品日益复杂多样的功能需求。本实施例中,通过受控终端的验证之后,才允许建立连接,能够保证远程操作的规范性和安全性。
在一个实施例中,接收受控终端根据身份认证信息和页面划分信息反馈的局部交互界面包括:获取受控终端根据身份认证信息和页面划分信息反馈的局部交互界面数据,对局部交互界面数据进行处理,得到局部交互界面配置数据,根据局部交互界面配置数据,配置局部交互界面。
具体实现中,局部交互界面的获取可以是获取受控终端204完成身份认证后发送的局部交互界面的截图数据,也可以是获取受控终端204的局部交互界面数据,局部交互界面数据包括页面的各项属性信息和配置数据、屏幕UI数据、屏幕尺寸以及分辨率等。然后,控制终端202可根据自身屏幕尺寸,对局部交互界面数据进行缩放、截取或填充等处理,得到局部交互界面配置数据,根据局部交互界面配置数据,配置出对应的局部交互界面,进而于显示该局部交互界面。本实施例中,受控终端204的局部交互界面可以是除截屏数据之外的页面配置数据,能够精确配置并显示对应的受控终端204的交互界面。
在一个实施例中,获取受控终端的触控响应界面包括:获取对应的受控终端响应触控操作数据后显示的触控响应窗口数据,对触控响应窗口数据进行处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置触控响应界面。
当受控终端204按照触控操作的优先级对触控操作数据进行触控响应之后,可对应生成、并发送触控响应界面至各控制终端202,具体的,可以是发送触控响应界面的截图数据,也可以是发送触控响应窗口数据即受控终端204触控响应后的显示的部分操作界面的页面信息,包括页面的各项属性信息和配置数据、屏幕UI数据、屏幕尺寸以及分辨率等至控制终端202。然后,控制终端202可根据分屏区域的尺寸或屏幕尺寸,对触控响应窗口数据进行缩放、截取或填充等处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置出对应的触控响应界面,进而显示该触控响应界面。本实施例中,受控终端204的触控响应界面可以是除截屏数据之外的页面配置数据,能够精确配置并显示对应的受控终端204的触控响应界面。
在一个实施例中,显示的交互界面和显示的触控响应界面与控制终端的屏幕尺寸相匹配。
具体实施时,控制终端显示的局部交互界面和触控响应界面,可以为渲染后的界面,该界面与控制终端202的屏幕尺寸(分辨率)相匹配。具体的,渲染的动作既可以由受控终端204执行,也可以由控制终端202来执行。本实施例中,将界面渲染成与屏幕尺寸相匹配的界面,能够更加合理地显示界面数据,同时提高用户使用感。
在一个实施例中,还包括:通过控制中心与受控终端建立连接,控制中心用于将控制终端传输的数据转发至受控终端,以及将受控终端传输的数据转发至控制终端,实现控制终端与受控终端的通信。
如图6所示,本申请提供的基于多区域控制的终端控制方法,受控终端204与多个控制终端202的通信方式还可以是通过控制中心206建立连接,即控制中心206用于在控制终端和受控终端之间进行数据转发,控制中心206可以是服务器、云端(云计算服务器)以及电脑主机等,控制中心206还可以有多个,每个控制中心206独立运行,控制中心206与控制中心206之间可相互独立或者相互连接,此外,每个控制中心206还可以用独立的服务器或多个服务器组成的服务器集群来实现等。
具体实施时,可以是受控终端204预先与控制中心206建立连接,受控终端204可以预先将数据备份在控制中心206,且将其设置为可访问状态,或者,通过预先安装的远程操作应用程序/操作系统使受控终端204处于可控状态。控制终端202可向控制中心206发送自身的身份代码,控制中心206在接收并完成对身份代码的验证后与控制终端202建立连接。控制终端202通过控制中心206获取受控终端202的发送的局部交互界面,然后对应对局部交互界面进行显示。用户针对显示后的局部交互界面进行触控操作,控制终端202中预先设置有浏览器入口等用于接收用户触控操作的软件,控制终端202接收用户在具体局部交互界面的触控操作,记录用户触控操作时间、触控坐标、触控时长以及触控压力等信息,得到触控操作数据,将触控操作数据通过控制中心206转发至受控终端204。受控终端202接收触控操作数据,识别出各触控操作数据的优先级,根据优先级进行触控响应后生成触控响应界面,并将触控响应界面通过控制中心206发送至控制终端202。本实施例中,通过控制中心206建立与受控终端204的连接,能够减少数据存储空间,也能基于受控终端204于控制中心206备份的数据进行远程控制。
图7是一个实施例的一种基于多区域控制的终端控制方法的软件架构示意图,图中包括有智能手板702、云计算服务器704和平板电脑706,其中智能手板702为控制终端,云计算服务器704为控制中心,平板电脑706为受控终端。其中,云计算服务器704包括消息中间件708、前端服务710、后端服务712和数据库714。
参考图7,平板电脑706上运行街区屏幕UI和touch(触摸)事件等数据的软件,经由4G/5G网络,通过TCP(Transmission Control Protocol,传输控制协议)/IP(InternetProtocol Address,因特网互联协议)承载私有协议数据,与云计算服务器704建立连接。云计算服务器704中,消息中间件708高效分发数据,后端服务712与前端服务710通过Websocket协议进行双向通信。具体的,云计算服务器704在与智能手板702和平板电脑706进行信息传输时,是通过利用消息中间件708通过TCP/IP协议与平板电脑706进行通信,接收平板电脑706发送的操作界面(包括交互界面和触控响应界面),消息中间件708将操作界面通过TCP/IP协议传输给后端服务712,后端服务712再通过Websocket协议将操作界面传输给前端服务710,前端服务710根据智能手板702的分辨率、操控界面大小等对操作界面进行渲染处理,使渲染后的图像适应于智能手板702,智能手板702通过HTTP协议从前端服务710中主动获取渲染后的图像,云计算服务器704是通过HTTP或Restful接口,接收智能手板702发送的用户对手板显示的界面进行触控操作得到的包含触控时间、触控坐标、触控压力以及触控时长等触控操作数据,后端服务712再通过消息中间件708将该触控操作数据用TCP/IP协议承载私有协议进行数据封装,转发给平板电脑706。然后,后端服务712再通过消息中间件708将接收到的平板电脑706发送的触控响应界面发送至智能手板702。
应该理解的是,虽然图2-图4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-图4中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图8所示,提供了一种终端,包括:通讯模块510、触控显示模块520和处理器530,其中:
通讯模块510与受控终端建立连接,处理器530获取受控终端根据身份认证信息和页面划分信息反馈的局部交互界面,将局部交互界面发送至触控显示模块520,触控显示模块520接收、并显示局部交互界面,响应用户对局部交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至处理器530,处理器530获取、并发送触控操作数据至受控终端,获取受控终端的触控响应界面、并将触控响应界面发送至触控显示模块520,触控显示模块520接收、并显示触控响应界面,其中,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应触控操作数据生成。
在另一个实施例中,如图9所示,通讯模块510包含无线通信接口1616,触控显示模块520可以是触控显示屏1602。具体的,参考图11,无线通信接口1616可以为3G/4G/5G网络或Wi-Fi天线接口,触控显示屏1602可以为OLED(Organic Light-Emitting Diode,有机发光二极管)和玻璃(或蓝宝石)盖板,处理器可在PCBA(Printed Circuit Board+Assembly,印刷电路板装配)上装配有高通APQ8053。此外,终端还包括有隔板1604,电池1608(容量1000mAh,1.0mm),USB接口1610(Type C),不锈钢中框1612和后盖板1614,后盖板1614可以为OLED和玻璃(或蓝宝石)盖板。由于未设计话筒和摄像头等部件,对话功能可以通过蓝牙耳麦来实现,摄影可以由腕表来实现。
更具体的,终端厚度可以为4mm,前期可采用Wi-Fi和BT(Bit Torrent,比特洪流)的通信接口进行交互,后期可采用自主协议进行交互。对于网络手机、网络视屏终端、游戏终端和智能手表的各种延展(例如生物检测)等手板终端,可以采用5-6寸屏;对于家居管理板、读书板、游戏板、微信板、社交板和作业板等智能家居终端,可以采用7-14寸屏;对于教学板、课本板、考试板、会议板、航空板、高铁板和单向保密信息板等智能教学、会议、航空和高铁类终端,也可以采用7-14寸屏;对于办公桌板、投影显示板、点餐板、公交车站板、家用电器板、智能家具板、酒吧互动板、户外天然场景影视互动板和演唱会竞技运动聚焦板等智能表面终端,可以采用5-105吋屏。
上述终端可以确保触控和显示功能的良好实现,通过受控终端和/或控制中心来实现数据处理和存储等功能,在功能上将触控和显示与其他功能相剥离。由于不需要实现数据处理和存储等功能,相比于传统终端,上述终端可以以较轻的重量、较小的体积和较薄的厚度实现各种复杂的功能,解决了传统通信系统中终端重量和体积较大、便携性较差的问题。
进一步地,由于终端使用开放式的通讯平台,可以不依托于任何一家手机品牌,也无需得到运营商许可,直接通过无线通信网络或云等开放平台来进行通信,避免了现有终端品牌和运营商配置门槛引起的复杂问题。
在一个实施例中,如图10所示,提供了一种基于多区域控制的终端控制装置,包括:数据发送模块610、第一界面显示模块620、触控操作响应模块630、触控操作数据发送模块640和第二界面显示模块650,其中:
页面划分信息处理模块610,用于接收受控终端根据身份认证信息和页面划分信息反馈的局部交互界面,显示局部交互界面,局部交互界面为受控终端被至少两个控制终端操控的交互界面的局部界面;
第一界面显示模块620,用于获取受控终端根据身份认证信息反馈的交互界面,显示交互界面;
触控操作响应模块630,用于响应用户对交互界面的触控操作,得到触控操作数据;
触控操作数据发送模块640,用于将触控操作数据发送至受控终端;
第二界面显示模块650,用于获取受控终端的触控响应界面,显示触控响应界面,触控响应界面由受控终端按照识别出的触控操作数据的优先级,响应触控操作数据生成。
在一个实施例中,如图11所示,装置还包括数据连接模块660,用于发送连接请求至受控终端,操控请求携带身份信息,接收受控终端根据身份信息反馈的连接许可消息,建立与受控终端的连接。
在一个实施例中,如图11所示,装置还包括界面配置模块670,用于获取受控终端根据身份认证信息和页面划分信息反馈的局部交互界面数据,对局部交互界面数据进行处理,得到局部交互界面配置数据,根据各局部交互界面配置数据,配置局部交互界面。
在一个实施例中,界面配置模块670还用于获取对应的受控终端响应触控操作数据后显示的触控响应窗口数据,对触控响应窗口数据进行处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置触控响应界面。
在一个实施例中,数据连接模块660还用于通过控制中心与受控终端建立连接,控制中心用于将控制终端传输的数据转发至受控终端,以及将受控终端传输的数据转发至控制终端,实现控制终端与受控终端的通信。
关于基于多区域控制的终端控制装置的具体限定可以参见上文中对于基于多区域控制的终端控制方法的限定,在此不再赘述。上述基于多区域控制的终端控制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,如图12所示,提供了一种基于多区域控制的终端控制装置,包括:数据获取模块710、数据发送模块720、数据接收模块730以及数据响应模块740,其中:
数据获取模块710,用于获取控制终端发送的操控请求和页面划分信息,操控请求携带控制终端的身份认证信息;
数据发送模块720,用于当根据身份认证信息完成对控制终端的身份认证时,根据页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端;
数据接收模块730,用于接收各控制终端发送的用户针对局部交互界面的触控操作数据;
数据响应模块740,用于识别各触控操作数据的优先级,根据优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
在一个实施例中,数据发送模块720还用于发送操控者信息至各控制终端,操作者信息包括产生对应的触控响应界面的触控操作数据的数据发送端。
在一个实施例中,数据响应模块740还用于基于操作者身份信息、操作应用以及操作类型进行加权求和,确定各触控操作数据的优先级。
在一个实施例中,数据响应模块740还用于当接收到任一控制终端发送的用户针对交互界面的触控操作数据时,锁定当前时间周期内该控制终端对该交互界面的唯一操作权限。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图12所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种基于多区域控制的终端控制方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图12中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述基于多区域控制的终端控制方法中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述基于多区域控制的终端控制方法中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (15)

1.一种基于多区域控制的终端控制方法,应用于受控终端,所述受控终端与至少两个控制终端连接,方法包括:
获取控制终端发送的操控请求和页面划分信息,所述操控请求携带所述控制终端的身份认证信息;
当根据所述身份认证信息完成对所述控制终端的身份认证时,根据所述页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端;
接收各控制终端发送的用户针对各所述局部交互界面的触控操作数据;
识别各触控操作数据的优先级,根据所述优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
2.根据权利要求1所述的方法,其特征在于,所述触控操作数据包括操作者身份信息、操作应用以及操作类型;
所述识别各触控操作数据的优先级包括:
基于所述操作者身份信息、所述操作应用以及所述操作类型进行加权求和,确定各触控操作数据的优先级。
3.根据权利要求1所述的方法,其特征在于,所述接收各控制终端发送的用户针对所述交互界面的触控操作数据包括:
当接收到任一控制终端发送的用户针对局部交互界面的触控操作数据时,锁定当前时间周期内该控制终端对该交互界面的唯一操作权限。
4.根据权利要求1所述的方法,其特征在于,发送对应的触控响应界面至各控制终端之后,还包括:
发送操作者信息至各控制终端,所述操作者信息包括产生所述对应的触控响应界面的触控操作数据的数据发送端以及所述数据发送端对应操控的局部交互界面信息。
5.一种基于多区域控制的终端控制方法,应用于控制终端,所述方法包括:
获取用户设置的页面划分信息,发送所述页面划分信息和操控请求至受控终端,所述操控请求携带身份认证信息;
接收所述受控终端根据所述身份认证信息和所述页面划分信息反馈的局部交互界面,显示所述局部交互界面,所述局部交互界面为所述受控终端被至少两个控制终端操控的交互界面的局部界面;
响应用户对所述局部交互界面的触控操作,得到触控操作数据;
将所述触控操作数据发送至所述受控终端;
获取所述受控终端的触控响应界面,显示所述触控响应界面,所述触控响应界面由所述受控终端按照识别出的所述触控操作数据的优先级,响应所述触控操作数据生成。
6.根据权利要求5所述的方法,其特征在于,接收所述受控终端根据所述身份认证信息和所述页面划分信息反馈的局部交互界面包括:
获取所述受控终端根据所述身份认证信息和所述页面划分信息反馈的局部交互界面数据;
对所述局部交互界面数据进行处理,得到局部交互界面配置数据;
根据所述局部交互界面配置数据,配置局部交互界面。
7.根据权利要求5所述的方法,其特征在于,所述获取受控终端的触控响应界面包括:
获取所述受控终端响应所述触控操作数据后显示的触控响应窗口数据;
对所述触控响应窗口数据进行处理,得到触控响应界面配置数据;
根据所述触控响应界面配置数据,配置所述触控响应界面。
8.根据权利要求5至7任意一项所述的方法,其特征在于,所述获取受控终端的交互界面之前,还包括:
发送连接请求至所述受控终端,所述操控请求携带身份信息;
接收所述受控终端根据所述身份信息反馈的连接许可消息,建立与所述受控终端的连接。
9.根据权利要求5至7任意一项所述的方法,其特征在于,还包括:
通过控制中心与所述受控终端建立连接,所述控制中心用于将控制终端传输的数据转发至所述受控终端,以及将所述受控终端传输的数据转发至所述控制终端,实现所述控制终端与所述受控终端的通信。
10.根据权利要求5至7任意一项所述的方法,其特征在于,显示的交互界面和显示的触控响应界面与控制终端的屏幕尺寸相匹配。
11.一种基于多区域控制的终端控制装置,其特征在于,所述装置包括:
数据获取模块,用于获取控制终端发送的操控请求和页面划分信息,所述操控请求携带所述控制终端的身份认证信息;
数据发送模块,用于当根据所述身份认证信息完成对所述控制终端的身份认证时,根据所述页面划分信息,将待传输的交互界面划分为至少两个局部交互页面、并将各局部交互页面发送至对应的控制终端;
数据接收模块,用于接收各控制终端发送的用户针对各所述局部交互界面的触控操作数据;
数据响应模块,用于识别各触控操作数据的优先级,根据所述优先级响应各触控操作数据,生成、并发送对应的触控响应界面至各控制终端。
12.一种基于多区域控制的终端控制装置,其特征在于,所述装置包括:
页面划分信息处理模块,用于获取用户设置的页面划分信息,发送所述页面划分信息和操控请求至受控终端,所述操控请求携带身份认证信息;
第一界面显示模块,用于接收所述受控终端根据所述身份认证信息和所述页面划分信息反馈的局部交互界面,显示所述局部交互界面,所述局部交互界面为所述受控终端被至少两个控制终端操控的交互界面的局部界面;
触控操作响应模块,用于响应用户对所述交互界面的触控操作,得到触控操作数据;
触控操作数据发送模块,用于将所述触控操作数据发送至所述受控终端;
第二界面显示模块,用于获取所述受控终端的触控响应界面,显示所述触控响应界面,所述触控响应界面由所述受控终端按照识别出的所述触控操作数据的优先级,响应所述触控操作数据生成。
13.一种终端,其特征在于,包括:通讯模块、触控显示模块和处理器;
所述通讯模块与受控终端建立连接,所述处理器获取用户设置的页面划分信息,发送所述页面划分信息和操控请求至受控终端,接收所述受控终端反馈的局部交互界面,将所述局部交互界面发送至所述触控显示模块,所述触控显示模块接收、并显示所述局部交互界面,响应用户对所述局部交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至所述处理器,所述处理器获取、并发送所述触控操作数据至所述受控终端,获取所述受控终端的触控响应界面、并将所述触控响应界面发送至所述触控显示模块,所述触控显示模块接收、并显示所述触控响应界面,其中,所述触控响应界面由所述受控终端按照识别出的触控操作数据的优先级,响应该触控操作数据生成。
14.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至10中任一项所述方法的步骤。
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至10中任一项所述的方法的步骤。
CN202010070257.XA 2020-01-21 2020-01-21 基于多区域控制的终端控制方法、装置和终端 Active CN111314441B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010070257.XA CN111314441B (zh) 2020-01-21 2020-01-21 基于多区域控制的终端控制方法、装置和终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010070257.XA CN111314441B (zh) 2020-01-21 2020-01-21 基于多区域控制的终端控制方法、装置和终端

Publications (2)

Publication Number Publication Date
CN111314441A true CN111314441A (zh) 2020-06-19
CN111314441B CN111314441B (zh) 2022-10-11

Family

ID=71159804

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010070257.XA Active CN111314441B (zh) 2020-01-21 2020-01-21 基于多区域控制的终端控制方法、装置和终端

Country Status (1)

Country Link
CN (1) CN111314441B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111814220A (zh) * 2020-07-03 2020-10-23 重庆丰鼎科技有限责任公司 一种cae的云仿真实现方法
CN111880676A (zh) * 2020-06-22 2020-11-03 深圳市鸿合创新信息技术有限责任公司 一种分区触控方法、装置、电子设备及存储介质
CN114006893A (zh) * 2021-10-29 2022-02-01 平安银行股份有限公司 多端远程控制方法、装置、设备及存储介质
CN115134181A (zh) * 2022-05-23 2022-09-30 深圳绿米联创科技有限公司 设备控制方法、装置、设备、系统和存储介质
CN115484297A (zh) * 2022-08-02 2022-12-16 深圳市旭联信息技术有限公司 一种基于储能设备的交互系统及方法
WO2023165184A1 (zh) * 2022-03-01 2023-09-07 腾讯科技(深圳)有限公司 控制操作的执行方法和装置、存储介质及电子设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1759371A (zh) * 2003-03-18 2006-04-12 兄弟工业株式会社 显示控制设备及程序
CN103425453A (zh) * 2013-08-23 2013-12-04 广东欧珀移动通信有限公司 一种分屏显示方法和装置
CN103561220A (zh) * 2013-10-28 2014-02-05 三星电子(中国)研发中心 一种电视终端及其多屏显示和控制的方法
CN103634645A (zh) * 2013-12-10 2014-03-12 青岛海尔软件有限公司 利用手机控制智能电视的方法
CN104181902A (zh) * 2014-09-10 2014-12-03 杨坤华 智能家居及社会化服务控制系统
CN105760102A (zh) * 2014-09-22 2016-07-13 努比亚技术有限公司 终端交互控制方法、装置及应用程序交互控制方法
CN107515721A (zh) * 2017-08-04 2017-12-26 珠海市魅族科技有限公司 一种终端控制方法、装置及计算机装置、可读存储介质
CN108174032A (zh) * 2017-12-27 2018-06-15 南通科技职业学院 一种基于网络的智能手机远程控制计算机的方法
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质
CN109460170A (zh) * 2018-10-23 2019-03-12 努比亚技术有限公司 屏幕扩展及交互方法、终端及计算机可读存储介质
CN110488619A (zh) * 2019-07-29 2019-11-22 维达力实业(深圳)有限公司 家电设备的信息交互系统和家电设备的控制方法、装置
US20190370451A1 (en) * 2018-06-05 2019-12-05 Beijing Xiaomi Mobile Software Co., Ltd. Touch Response Method and Device

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1759371A (zh) * 2003-03-18 2006-04-12 兄弟工业株式会社 显示控制设备及程序
CN103425453A (zh) * 2013-08-23 2013-12-04 广东欧珀移动通信有限公司 一种分屏显示方法和装置
CN103561220A (zh) * 2013-10-28 2014-02-05 三星电子(中国)研发中心 一种电视终端及其多屏显示和控制的方法
CN103634645A (zh) * 2013-12-10 2014-03-12 青岛海尔软件有限公司 利用手机控制智能电视的方法
CN104181902A (zh) * 2014-09-10 2014-12-03 杨坤华 智能家居及社会化服务控制系统
CN105760102A (zh) * 2014-09-22 2016-07-13 努比亚技术有限公司 终端交互控制方法、装置及应用程序交互控制方法
CN107515721A (zh) * 2017-08-04 2017-12-26 珠海市魅族科技有限公司 一种终端控制方法、装置及计算机装置、可读存储介质
CN108174032A (zh) * 2017-12-27 2018-06-15 南通科技职业学院 一种基于网络的智能手机远程控制计算机的方法
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质
US20190370451A1 (en) * 2018-06-05 2019-12-05 Beijing Xiaomi Mobile Software Co., Ltd. Touch Response Method and Device
CN109460170A (zh) * 2018-10-23 2019-03-12 努比亚技术有限公司 屏幕扩展及交互方法、终端及计算机可读存储介质
CN110488619A (zh) * 2019-07-29 2019-11-22 维达力实业(深圳)有限公司 家电设备的信息交互系统和家电设备的控制方法、装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
王硕: ""基于FPGA的视频分割系统设计与实现"", 《中国硕士学位论文全文数据库信息科技辑》 *
许峰: ""同窗口分屏配置模式研究"", 《中国建设信息》 *
郭小琴: ""基于Android的大屏幕拼接显示系统研究与实现"", 《中国硕士学位论文全文数据库信息科技辑》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111880676A (zh) * 2020-06-22 2020-11-03 深圳市鸿合创新信息技术有限责任公司 一种分区触控方法、装置、电子设备及存储介质
CN111814220A (zh) * 2020-07-03 2020-10-23 重庆丰鼎科技有限责任公司 一种cae的云仿真实现方法
CN114006893A (zh) * 2021-10-29 2022-02-01 平安银行股份有限公司 多端远程控制方法、装置、设备及存储介质
CN114006893B (zh) * 2021-10-29 2024-02-09 平安银行股份有限公司 多端远程控制方法、装置、设备及存储介质
WO2023165184A1 (zh) * 2022-03-01 2023-09-07 腾讯科技(深圳)有限公司 控制操作的执行方法和装置、存储介质及电子设备
CN115134181A (zh) * 2022-05-23 2022-09-30 深圳绿米联创科技有限公司 设备控制方法、装置、设备、系统和存储介质
CN115134181B (zh) * 2022-05-23 2024-03-19 深圳绿米联创科技有限公司 设备控制方法、装置、设备、系统和存储介质
CN115484297A (zh) * 2022-08-02 2022-12-16 深圳市旭联信息技术有限公司 一种基于储能设备的交互系统及方法
CN115484297B (zh) * 2022-08-02 2023-09-08 深圳市旭联信息技术有限公司 一种基于储能设备的交互系统及方法

Also Published As

Publication number Publication date
CN111314441B (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
CN111314441B (zh) 基于多区域控制的终端控制方法、装置和终端
CN111290695B (zh) 基于优先级控制的终端控制方法、装置和终端
CN111309226B (zh) 基于通信质量的终端控制方法、装置、终端和计算机设备
TWI588776B (zh) 在行動裝置中到影像相關應用程式的進入點
CN111324248A (zh) 终端控制方法、装置、终端、计算机设备和存储介质
CN111273850B (zh) 终端控制方法、装置、计算机设备和存储介质
CN110166439B (zh) 设备共享方法、终端、路由器及服务器
KR102249197B1 (ko) 사용자 단말 장치, 통신 시스템 및 그 제어 방법
CN112996141B (zh) 分享图像的方法及电子设备
US11947998B2 (en) Display method and device
CN109639569B (zh) 一种社交通信方法及终端
CN114629932B (zh) 电子设备间的协同方法、电子设备及存储介质
CN111414097A (zh) 一种交互方法、交互系统和显示设备
CN115657918A (zh) 一种跨设备的对象拖拽方法及设备
CN104698728A (zh) 微型投影装置及其操作方法和操作装置
CN114760321B (zh) 设备数据同步方法、装置、终端设备和存储介质
CN111314442B (zh) 基于分时控制的终端控制方法、装置、终端和计算机设备
KR101178396B1 (ko) 이동 단말의 원격 표시 방법 및 이를 수행하는 장치
CN111263004B (zh) 终端控制方法、装置、计算机设备和存储介质
CN108012023B (zh) 一种通信消息处理方法及移动终端
WO2021072974A1 (zh) 终端控制方法、系统、装置、计算机设备和存储介质
KR20210001154A (ko) 단말기, 서버 및 그것의 동작 방법
CN114513479B (zh) 消息收发方法、装置、终端、服务器及存储介质
US20240020369A1 (en) Speech control system and method, apparatus, device, medium, and program product
US20240053950A1 (en) Display control system, display control method, and recording medium recording display control program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant