CN111309226A - 基于通信质量的终端控制方法、装置、终端和计算机设备 - Google Patents
基于通信质量的终端控制方法、装置、终端和计算机设备 Download PDFInfo
- Publication number
- CN111309226A CN111309226A CN202010070266.9A CN202010070266A CN111309226A CN 111309226 A CN111309226 A CN 111309226A CN 202010070266 A CN202010070266 A CN 202010070266A CN 111309226 A CN111309226 A CN 111309226A
- Authority
- CN
- China
- Prior art keywords
- touch
- data
- touch operation
- terminal
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000006854 communication Effects 0.000 title claims abstract description 124
- 238000004891 communication Methods 0.000 title claims abstract description 124
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000004044 response Effects 0.000 claims abstract description 133
- 230000002452 interceptive effect Effects 0.000 claims abstract description 130
- 238000012545 processing Methods 0.000 claims abstract description 39
- 238000004590 computer program Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 12
- 238000004806 packaging method and process Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 7
- 230000003993 interaction Effects 0.000 description 7
- 238000012795 verification Methods 0.000 description 6
- 238000009877 rendering Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 229910052594 sapphire Inorganic materials 0.000 description 2
- 239000010980 sapphire Substances 0.000 description 2
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请涉及一种基于通信质量的终端控制方法、装置、终端、计算机设备和存储介质,方法包括:获取至少两个受控终端的交互界面、对各交互界面进行分屏显示处理,响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据,获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端,获取对应的受控终端的触控响应界面,显示触控响应界面于对应的分屏区域。上述方案,控制终端根据通信质量,灵活发送触控操作数据,且用户无需携带受控终端,在控制终端的交互界面上进行操作,便能实现对多个受控终端的远程分屏控制,提高便携度。
Description
技术领域
本申请涉及通信技术领域,特别是涉及一种基于通信质量的终端控制方法、装置、终端、计算机设备和存储介质。
背景技术
随着信息社会的快速发展,通信系统中的移动终端的便携化已成必然趋势。移动手机和笔记本电脑等移动终端,在实现复杂多样的功能之余,还需要尽可能减小各个功能模块的重量和体积,以满足人们对移动终端的便携化需求。
目前,为了提高移动终端的便携性,有移动终端使用集成度高的处理器芯片代替复杂的电路结构的方式,也有降低移动终端如智能手机的机身的厚度,追求超薄机身的做法,减小移动终端的重量体积。
然而,上述方法对终端复杂度的改进效果有限,用户在实际的人机界面操作时,仍然需要携带主机体。比如,用户出门需要操作智能手机和平板电脑,需要同时携带智能手机和平板电脑,诸多不便。因此,通信终端设备在发展过程中,存在便携性不高的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高便携度的基于通信质量的终端控制方法、装置、终端、计算机设备和存储介质。
一种基于通信质量的终端控制方法,方法包括:
获取至少两个受控终端的交互界面,对各交互界面进行分屏显示处理;
响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据;
获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端;
获取受控终端的触控响应界面,显示触控响应界面于对应的分屏区域,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
在一个实施例中,基于当前通信质量数据,发送触控操作数据至受控终端包括:
若根据当前通信质量数据判断当前通信稳定时,获取已连接的受控终端的数量,将触控操作数据打包、并复制成与已连接的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包分别发送至各已连接的受控终端;
若根据当前通信质量数据判断当前通信稳定时,根据触控操作数据,确定触控操作所作用的受控终端的数量,将触控操作数据打包、并复制成与触控操作所作用的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包发送至各触控操作所作用的受控终端;
若根据当前通信质量判断当前通信不稳定时,解析触控操作数据,确定各触控操作与受控终端的对应关系,根据对应关系将各触控操作数据发送至对应的受控终端。
在一个实施例中,触控操作数据包括触控坐标;
根据触控操作数据,确定对应的受控终端包括:
根据触控坐标,确定用户触控的分屏区域;
根据分屏区域,确定对应的受控终端。
在一个实施例中,获取至少两个受控终端的交互界面之前,还包括:
发送连接请求至至少两个受控终端,连接请求携带身份认证信息;
接收各受控终端根据身份认证信息反馈的连接许可消息,建立与各受控终端的连接。
在一个实施例中,对各交互界面进行分屏显示处理包括:
获取已连接的受控终端的数量和各受控终端的身份标识信息;
根据已连接的受控终端的数量,确定分屏区域数量;
将屏幕划分为与分屏区域数量对应的分屏区域;
根据各受控终端的身份标识信息,将各交互界面显示于各分屏区域。
在一个实施例中,获取至少两个受控终端的交互界面包括:
获取至少两个受控终端的程序运行窗口数据;
对各程序运行窗口数据进行处理,得到多个交互界面配置数据;
根据各交互界面配置数据,配置对应的交互界面。
在一个实施例中,获取对应的受控终端的触控响应界面包括:
获取对应的受控终端响应触控操作数据后显示的目标程序运行窗口数据;
对目标程序运行窗口数据进行处理,得到触控响应界面配置数据;
根据触控响应界面配置数据,配置触控响应界面。
在一个实施例中,显示的交互界面和显示的触控响应界面与对应的分屏区域的尺寸相匹配。
在一个实施例中,还包括:
通过控制中心与至少两个受控终端建立连接,控制中心用于将控制终端传输的数据转发至各受控终端,以及将各受控终端传输的数据转发至控制终端,实现控制终端与各受控终端的通信。
一种基于通信质量的终端控制装置,装置包括:
第一分屏显示模块,用于获取至少两个受控终端的交互界面、对各交互界面进行分屏显示处理;
触控操作数据接收模块,用于响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据;;
控制模块,用于获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端;
第二分屏显示模块,用于获取对应的受控终端的触控响应界面,显示触控响应界面于对应的分屏区域,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
一种终端,包括:通讯模块、触控显示模块和处理器;
通讯模块与至少两个受控终端建立连接,处理器获取各受控终端的交互界面、并对各交互界面进行显示分屏处理,得到分屏显示界面配置数据,将分屏显示界面配置数据发送至触控显示模块,触控显示模块接收分屏显示界面配置数据,显示交互界面于对应的分屏区域,接收用户对分屏显示后的交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至处理器,处理器获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端,获取对应的受控终端的触控程序运行窗口数据,对触控程序运行窗口数据进行处理,得到触控响应界面配置数据、并将触控响应界面配置数据发送至触控显示模块,触控显示模块根据触控响应界面配置数据显示触控响应界面于对应的分屏区域,其中,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述基于通信质量的终端控制方法中的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述基于通信质量的终端控制方法中的步骤。
上述基于通信质量的终端控制方法、装置、终端、计算机设备和存储介质,通过在控制终端与多个受控终端之间建立连接,由控制终端获取各受控终端的交互界面,并对各交互界面进行分屏显示处理,使得能够在一台控制终端全面展示多个受控终端的屏幕数据,进而通过响应用户在分屏显示后的交互界面上的触控操作数据,根据当前通信质量数据,灵活地将触控操作数据发送至对应的受控终端,以获取受控终端根据触控操作进行触控响应后的触控响应界面,使得用户在控制终端的交互界面上进行操作,便能远程实现对多个受控终端的分屏控制。上述方案,无需携带受控终端,用控制终端与多个受控终端之间的交互代替了对控制终端的直接操作,减少了控制终端的存储空间,也提高了便携度。
附图说明
图1为一个实施例中基于通信质量的终端控制方法的应用环境图;
图2为一个实施例中基于通信质量的终端控制方法的流程示意图;
图3为一个实施例中控制终端进行分屏显示的示意图;
图4为另一个实施例中基于通信质量的终端控制方法的流程示意图;
图5为一个实施例中分屏显示处理步骤的流程示意图;
图6为另一个实施例中基于通信质量的终端控制方法的应用环境图;
图7为一个实施例中基于通信质量的终端控制方法的软件架构图;
图8为一个实施例中终端的结构框图;
图9为另一个实施例中终端的详细结构框图;
图10为一个实施例中基于通信质量的终端控制装置的结构框图;
图11为另一个实施例中基于通信质量的终端控制装置的结构框图;
图12为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的基于通信质量的终端控制方法,可以应用于如图1所示的应用环境中。在该应用环境中,包括有控制终端202和受控终端204。其中,控制终端202具有触控和显示功能。触控功能为用户在触控屏上通过触摸或书写笔书写来控制操作界面,显示功能包括显示操作界面和触控响应界面,触控响应界面为触控操作之后,显示相应的触控响应的界面。其中,受控终端204为控制终端202所控制的终端,受控终端204数量为多个,受控终端204与控制终端202进行无线通信,受控终端204将操作界面通过无线链路传输给控制终端202,并对于控制终端202的触控操作,做出触控响应,通过无线链路将触控响应界面传输给控制终端202。其中,控制终端202和受控终端204可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。
在一个实施例中,如图2所示,提供了一种基于通信质量的终端控制方法,以该方法应用于图1中的控制终端202为例进行说明,包括以下步骤:
步骤S200,获取至少两个受控终端的交互界面、对各交互界面进行分屏显示处理。
在实际应用中,控制终端202与受控终端204都预设有远程操控系统或远程操作应用程序,通过该操作系统/应用程序,可实现对受控终端的控制。控制终端202与受控终端204可通过3G、4G、2.4G、5G、Wi-Fi(Wireless Fidelity,无线保真)通信或蓝牙通信等无线通信方式建立连接。
其中,交互界面为受控终端204上所显示的操作界面,也可以是受控终端204在授权控制终端202远程操作后,通过运行对应的远程操作进程,进入类似于一种电脑“安全模式”的一种后台界面,进一步来说,该后台界面并不在受控终端204的当前界面显示,从而可以使得受控终端204在被控制终端202远程操控时,受控终端204的用户可以不受影响地进行自主操作。具体实现时,可以截取受控终端204的操作界面图像,将该操作界面图像作为交互界面,或者,截取受控终端204屏幕UI(User Interface,用户界面)数据、屏幕尺寸、分辨率等数据,根据这些数据得到交互界面。例如,对于受控终端204,可以对其整个操作界面进行截屏操作,将截屏结果作为交互界面。也可以是读取受控终端204的操作界面参数,得到分辨率2048×1536像素,当操作界面左上角为坐标原点时,软件图标(例如微信图标)位于坐标(1600,600)像素处,根据分辨率、图标类型和图标位置,可以得到交互界面。
分屏显示处理即指采用分屏技术,将控制终端的屏幕划分为多个分屏区域,然后将获取到的受控终端的交互界面显示于对应的分屏区域,以实现通过控制终端的屏幕全面查看受控终端的屏幕。具体实施时,分屏显示处理可以是获取各受控终端的操作界面的截图将其作为交互界面(视为第一交互界面),然后获取受控终端截取的交互界面的屏幕UI数据、屏幕尺寸、分辨率等数据,再基于上述数据结合其自身屏幕分辨率对交互界面进行等比例缩放或渲染,得到第二交互界面,再将第二交互界面显示于对应的分屏区域。具体的,分屏显示的示意图可参考图3。更具体的,当控制终端202本身的分辨率与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二交互界面,进而对第二交互界面进行显示;若分辨率成等比例,则可直接将第一交互界面缩放成与分屏区域尺寸大小相匹配的界面,得到第二交互界面;若分辨率正好相匹配,则可直接将第一交互界面作为第二交互界面,再于对应分屏区域显示该第二交互界面。例如,第一交互界面分辨率为2048×1536像素,若控制终端202界面分辨率为1024×768像素,可以将第一交互界面等比例缩小到原来的50%,得到第二交互界面;若控制终端202界面分辨率为1024×800像素,可以先将第一交互界面等比例缩小到原来的50%,显示在控制终端202界面的中心处,然后在空白部分填充黑色,得到第二交互界面。进一步的,为了方便用户能直观查看哪个分屏区域上显示的第二交互界面对应哪个受控终端,可以显示该受控终端的身份标识于分屏区域上,如可显示“您正在对XXX(身份标识信息)终端进行远程操作”等字样。在另一个实施例中,对交互界面的显示除分屏显示外,还可以是滑动切换等方式,通过滑动操作切换各交互界面。
步骤S400,响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据。
其中,触控操作为用户在分屏显示后的第二交互界面上通过触摸或书写笔书写来控制操作界面的操作。具体实施时,用户可以通过手指或书写笔在第二交互界面上点击软件图标打开软件,在软件打开之后点击软件中的各个控件,或者在软件打开之后的操作界面中通过书写进行触控操作,触控操作可以包括点击、长按、滑动、缩放以及多点触控等操作。例如,在第二交互界面中坐标为(1600,600)像素的位置有微信图标,用户可以点击微信图标,并在运行的微信中点击各个控件,或者在微信对话框中输入文字。在执行上述触控操作后,控制终端202接收上述触控操作,并记录用户触控点坐标,触控时长以及触控压力信息等,得到触控操作数据。此外,用户在触控操作过程中可能在一次触控操作的时候会触控到多个分屏区域,比如大幅滑动操作,其作用位置会涉及到多个分屏,则可以分以下两种方式进行处理:第一种、可于控制终端预先设置一次触控操作只能同时控制一个分屏,则当有个多屏操作时可以选择触控动作最早所作用的分屏,将该分屏作为所操作的分屏,而其他分屏则不做处理;第二种控制终端未做限定,则可以将所涉及到的所有分屏都作为触控操作的作用对象,按照触控时间先后进行处理。举例说明,若智能手板为控制终端,平板电脑为受控终端。平板电脑的第一交互界面分辨率为2048×1536像素,智能手板302的第二交互界面分辨率为1024×768像素,当用户需要开启微信时,在第二交互界面坐标为(500,200)处点击微信图标,根据第一交互界面与第二交互界面的比例,将触控操作数据变换为对第一交互界面坐标(1000,400)处的点击操作,然后将该触控操作数据通过网络发送给平板电脑,平板电脑在第一交互界面(1000,400)处进行触控响应。
步骤S600,获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端。
具体实现中,为保证数据传输的即时性,控制终端202在得到触控操作数据后,可根据当前通信质量的情况,选择不同的方式将触控操作数据发送至受控终端。通信质量数据可以包括数据传输速率、信号畸变率、差错率以及信道容量等。具体的,若通信质量好的情况下,则可传输的数据量较大,控制终端202无需对触控操作数据进行解析,只需将记录下的用户于分屏显示后的交互界面进行的所有触控操作数据发送至受控终端204即可,若通信质量不好的情况下,则表明可传输的数据量较小,控制终端202可将记录用户每次的触控操作的触控操作数据,实时发送至受控终端204,以此保证数据传输质量。
步骤S800,获取对应的受控终端的触控响应界面,显示触控响应界面于对应的分屏区域,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
其中,触控响应界面可为受控终端204根据接收到的触控操作数据进行触控响应后所显示的界面。具体实现中,可以截取受控终端204的触控响应界面图像,将该触控响应界面图像作为第一触控响应界面,或者,读取受控终端204触控响应界面的分辨率、颜色和文字等信息,根据这些信息得到第一触控响应界面。例如,对于受控终端204,可以对其整个触控响应界面进行截屏操作,将截屏结果作为第一触控响应界面。或者,读取受控终端204的触控响应界面信息,包括分辨率2048×1536像素,触控响应所显示的文字内容和位置,触控响应所显示的图像颜色和位置等,根据上述触控响应界面信息得到第一触控响应界面。在得到第一触控响应界面之后,可以根据控制终端202界面的分辨率对第一触控响应界面进行等比例缩放得到第二触控响应界面。例如,当控制终端202界面与第一触控响应界面的分辨率不成等比例时,可以先对第一触控响应界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二触控响应界面,然后对第二触控响应界面进行显示;若分辨率成等比例,则可直接将第一触控响应界面缩放成与分屏区域尺寸大小相匹配的界面,得到第二触控响应界面,再于对应分屏区域显示该第二触控响应界面,若分辨率正好相匹配,则可直接将第一触控响应界面作为第二触控响应界面,再于对应分屏区域显示该第二触控响应界面。进一步的,用户可以调整每个分屏区域的大小。若用户想要继续对受控终端204的操作,可再次在触控响应界面上进行触控操作,然后通过控制终端202将触控操作数据再次发送给受控终端204,再次接收受控终端204发送的触控响应界面(与上一次的触控响应界面不同),跟用户正常在移动终端如手机上进行触控操作进行操作的方式相差不多。
下面结合一个实例对控制终端显示触控响应界面进行说明,假设智能手板为控制终端,平板电脑为受控终端。平板电脑在接收到微信开启操作后,进行触控响应,得到微信开启界面,即受控终端的第一触控响应界面。通过网络将第一触控响应界面发送至智能手板。第一触控响应界面分辨率为2048×1536像素,若智能手板的界面分辨率为1024×768像素,可以将第一触控响应界面等比例缩小到原来的50%,得到第二触控响应界面;若智能手板界面分辨率为700×384像素,可以先将第一触控响应界面等比例缩小到原来的50%,显示在智能手板界面的中心处,然后在未显示部分填充黑色,得到第二触控响应界面。之后,智能手板对第二触控响应界面进行显示。
上述基于通信质量的终端控制方法中,通过在控制终端与多个受控终端之间建立连接,由控制终端获取各受控终端的交互界面,并对各交互界面进行分屏显示处理,使得能够在一台控制终端全面展示多个受控终端的屏幕数据,进而通过响应用户在分屏显示后的交互界面上的触控操作数据,根据当前通信质量数据,灵活地将触控操作数据发送至对应的受控终端,以获取受控终端根据触控操作进行触控响应后的触控响应界面,使得用户在控制终端的交互界面上进行操作,便能远程实现对多个受控终端的分屏控制。上述方案,无需携带受控终端,用控制终端与多个受控终端之间的交互代替了对控制终端的直接操作,减少了控制终端的存储空间,也提高了便携度。
在一个实施例中,如图4所示,获取至少两个受控终端的交互界面之前,还包括:步骤S100,发送连接请求至至少两个受控终端,连接请求携带身份认证信息,接收各受控终端根据身份认证信息反馈的连接许可消息,建立与各受控终端的连接。
具体实施时,控制终端202与受控终端204建立连接的过程可以是:控制终端202可选择需要连接的具体受控终端,比如是连接手机、电脑以及智能手环等智能设备。该智能设备可以是控制终端202之前已经连接过或进行过远程操控的历史记录中的智能设备,也可以是新的某一终端设备。
在实际应用中,可以是控制终端202开机进入显示界面,用户打开历史连接设备记录,从中选择具体待连接的受控终端进行连接,也可以是搜索当前可连接的受控终端,然后通过触控操作从中选择具体待连接的受控终端进行连接,此时,控制终端202响应用户触控操作,发送携带其身份认证信息的连接请求至受控终端204,受控终端204接收该请求,读取请求中的身份认证信息,并基于该身份认证信息进行身份认证或配对认证,若验证通过,则发送连接许可消息至控制终端202,以建立与控制终端202的连接。具体的,验证方式包括但不限于是字符串密码验证、指纹验证、人脸验证或虹膜验证等验证方式。受控终端204在接收到正确的认证信息后,可自动将交互界面发送给控制终端202,无需用户点击确认。
进一步的,受控终端204还可以设置控制终端202的操控权限,针对一些涉及隐私敏感或重要的操作,需要对控制终端202进行再次验证,或者,需要不同的访问权限才可访问。具体的,可通过3G、4G、5G、2.4G、Wi-Fi、蓝牙或自定义无线协议与所述受控终端建立连接。具体实现中,控制终端202与受控终端204之间的通信距离在Wi-Fi或蓝牙通信范围内,两者通过Wi-Fi、蓝牙或自定义无线协议实现数据的传输。由于使用的是Wi-Fi或蓝牙这样的通用平台,或者使用自定义无线协议,可以保持完全开放的操作环境,允许任何受控终端随时开发应用软件,能够满足通信产品日益复杂多样的功能需求。本实施例中,通过受控终端的验证之后,才允许建立连接,能够保证远程操作的规范性和安全性。
在一个实施例中,如图5所示,对各交互界面进行分屏显示处理包括:
步骤S120,获取已连接的受控终端的数量和各受控终端的身份标识信息;
步骤S140,根据已连接的受控终端的数量,确定分屏区域数量;
步骤S160,将屏幕划分为与分屏区域数量对应的分屏区域,根据各受控终端的身份标识信息,将各交互界面显示于各分屏区域。
在实际应用中,为保证分屏显示的准确性,对交互界面进行分屏显示处理可以是:当与多个受控终端204建立连接后,或者说用户选择了需要连接的受控终端204后,获取与自身建立连接的受控终端204的数量和身份标识信息(包括设备编号、MAC(Media AccessControl Address,媒体存取控制位址)地址以及其他能够唯一标识该受控终端的信息),然后根据已连接的受控终端的数量,确定分屏区域数量,再将屏幕划分为与分屏区域数量对应的分屏区域,比如连接了2个、3个或4个受控终端时,则将屏幕对应划分为1×2、1×3、2×2。完成屏幕的分屏之后,再根据各受控终端204的身份标识信息,将各交互界面显示与对应的分屏区域。具体的,可以是预设身份标识与分屏区域的对应关系,如分屏区域1(如坐标(0,0)~坐标(512,384)为分屏区域1)对应受控终端A,分屏区域2对应受控终端B,按照此关系和各交互界面携带的身份标识信息,完成各交互界面的分配显示,还可以是在按照接收到携带受控终端身份标识信息的交互界面的先后顺序,依次进行分屏显示,得到分屏区域与受控终端的对应关系(即各受控终端与坐标范围的对应关系)。得到分屏区域与受控终端的对应关系后,还可将分屏区域与受控终端的对应关系发送至各受控终端,以供受控终端明确其具体对应于哪个坐标范围区间。本实施例中,通过受控终端的数量和身份标识信息,完成交互界面的分屏显示,能够针对不同的情况灵活且准确地进行分屏显示。
在一个实施例中,基于当前通信质量数据,发送触控操作数据至受控终端包括:
若根据当前通信质量数据判断当前通信稳定时,获取已连接的受控终端的数量,将触控操作数据打包、并复制成与已连接的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包分别发送至各已连接的受控终端;
若根据当前通信质量数据判断当前通信稳定时,根据触控操作数据,确定触控操作所作用的受控终端的数量,将触控操作数据打包、并复制成与触控操作所作用的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包发送至各触控操作所作用的受控终端;
若根据当前通信质量判断当前通信不稳定时,解析触控操作数据,确定各触控操作与受控终端的对应关系,根据对应关系将各触控操作数据发送至对应的受控终端。
在实际应用中,根据通信质量数据发送触控操作数据可以包括如下三种方式:方式1、可将本次检测得到的所有触控操作数据打包,并复制成N份(N为当前已连接的所有受控终端204的数量),得到N份触控操作数据包,并给每个受控终端204发送一份触控操作数据包(包括不被操作的受控终端204,各受控终端204收到相同的触控操作信息),各受控终端204接收到触控操作数据包后,可根据其在分屏上的坐标范围、触控操作点的坐标识别该触控操作是否是对自身的处理,如果不是,则不必理会,如果是,则执行操作,生成相应的触控响应界面;方式2、将本次检测到的所有触控操作打包,并复制成M份(M为当前作用的受控终端204的数量),并给每个受控终端204发送一份触控操作数据包(不包括未被操作的受控终端204,各受控终端204收到相同的触控操作信息),各受控终端204接收到触控操作数据包后,解析出自身需要做出的响应,然后生成相应的触控响应界面(同样可以理解,各受控终端204做出的响应也并不相同);方式3、可在得到触控操作数据之后,解析触控操作数据,可根据触控操作数据中的触控坐标,检测用户所作用的具体的分屏区域,根据分屏区域确定用户所操控的受控终端204,进而识别出各个受控终端204需要做的触控操作,得到触控操作与受控终端204的对应关系,再根据对应关系,将各触控操作数据发送至对应的受控终端204(各受控终端204收到的触控操作信息并不一定相同),然后各受控终端204执行接收到的触控操作,并生成相应的触控响应界面。以上3种方式中,方式1、方式2需要传输的数据量相对较大,方式3传输的数据量较小,但方式1、2中,控制终端202不需要做过多的解析处理,将触控操作数据的解析工作交给了各个受控终端204,只需要记录触控操作数据,将其发给固定的受控终端204即可,而方式3则相反,控制终端202记录了触控操作后,还需要做一定的解析,识别出哪些触控操作是针对哪个受控终端的,仅向各个受控终端发送其需要执行的触控操作。基于此,可视通信质量数据来发送触控操作数据,具体的,当通信质量不稳定时,则选择方式3发送触控操作数据;当通信质量稳定时,则可以选择方式1或2发送触控操作数据。本实施例中,根据通信质量情况,能够灵活选择发送触控操作数据的方式,保证数据传输的效率。
在一个实施例中,获取至少两个受控终端的交互界面包括:获取至少两个受控终端的程序运行窗口数据,对各程序运行窗口数据进行处理,得到多个交互界面配置数据,根据各交互界面配置数据,配置对应的交互界面。
具体实现中,交互界面的获取可以是获取受控终端204发送的触控响应界面的截图数据,也可以是控制终端202获取受控终端204的程序运行窗口数据即受控终端204当前显示或在后台运行的程序的操作界面(窗口)的页面信息,包括页面的各项属性信息和配置数据、屏幕UI数据、屏幕尺寸以及分辨率等。然后,根据分屏区域的尺寸,对程序运行窗口数据进行缩放、截取或填充等处理,得到交互界面配置数据,根据交互界面配置数据,配置出对应的交互界面,进而于对应分屏区域显示该交互界面。本实施例中,受控终端204的交互界面可以是除截屏数据之外的页面配置数据,能够精确配置并显示对应的受控终端204的交互界面。
在一个实施例中,获取对应的受控终端的触控响应界面包括:获取对应的受控终端响应触控操作数据后显示的目标程序运行窗口数据,对目标程序运行窗口数据进行处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置触控响应界面。
当受控终端204接收触控操作数据进行触控响应之后,可对应生成并发送触控响应界面至控制终端202,具体的,可以是发送触控响应界面的截图数据,也可以是发送触控响应界面的程序运行窗口数据即受控终端204当前显示的或在后台运行的应用程序的操作页面(窗口)数据,包括页面的各项属性信息和配置数据、屏幕UI数据、屏幕尺寸以及分辨率等。然后,根据分屏区域的尺寸,对程序运行窗口数据进行缩放、截取或填充等处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置出对应的触控响应界面,然后进而于对应分屏区域显示该触控响应界面。本实施例中,受控终端204的触控响应界面可以是除截屏数据之外的页面配置数据,能够精确配置并显示对应的受控终端204的触控响应界面。
在一个实施例中,显示的交互界面和显示的触控响应界面与对应的分屏区域的尺寸相匹配。
具体实施时,每一个分屏区域(分屏界面)对应显示一个受控终端204的交互界面和触控响应界面。比如控制终端202连接的受控终端有3个,分别为受控终端A、受控终端B、受控终端C,则控制终端也有3个分屏界面,分别为分屏a、分屏b与分屏b,分屏a上显示的交互界面a即为将获取到的受控终端A的初始交互界面渲染后的界面,该界面与分屏区域尺寸相匹配,分屏b上显示的交互界面b即为将获取到的受控终端B的初始交互界面渲染后的界面,该界面与分屏区域尺寸相匹配,分屏c上显示的交互界面c即为将获取到的受控终端C的初始交互界面渲染后的界面,该界面与分屏区域尺寸相匹配。具体的,渲染的动作既可以由受控终端执行,也可以由控制终端来执行。本实施例中,将界面渲染成与分屏区域尺寸相匹配的界面,能够更加合理地显示界面数据,同时提高用户使用感。
在一个实施例中,还包括:通过控制中心与至少两个受控终端建立连接,控制中心用于将控制终端传输的数据转发至各受控终端,以及将各受控终端传输的数据转发至控制终端,实现控制终端与各受控终端的通信。
如图6所示,本申请提供的基于通信质量的终端控制方法,受控终端204与控制终端202的通信方式还可以是通过控制中心206建立连接,即控制中心206用于在控制终端和受控终端之间进行数据转发,控制中心206可以是服务器、云端(云计算服务器)以及电脑主机等,控制中心206还可以有多个,每个控制中心206独立运行,控制中心206与控制中心206之间可相互独立或者相互连接,此外,每个控制中心206还可以用独立的服务器或多个服务器组成的服务器集群来实现等。
具体实施时,可以是至少两个以上的受控终端204预先与控制中心206建立连接,受控终端204可以预先将数据备份在控制中心206,且将其设置为可访问状态,或者,通过预先安装的远程操作应用程序/操作系统使受控终端204处于可控状态。控制终端202可向控制中心206发送自身的身份代码,控制中心206在接收并完成对身份代码的验证后与控制终端202建立连接。控制终端202通过控制中心206获取至少两个受控终端202的交互界面,各交互界面携带有受控终端204的身份标识信息,然后根据上述身份标识信息对交互界面进行分屏显示处理,将各交互界面显示于各分屏区域。用户针对分屏显示后的交互界面进行触控操作,控制终端202中预先设置有浏览器入口等用于接收用户触控操作的软件,控制终端202接收用户在具体分屏的触控操作,记录用户触控的分屏区域以及分屏区域所对应的受控终端204的身份标识信息、触控坐标、触控时长以及触控压力等信息,得到触控操作数据,根据当前通信质量数据,将触控操作数据通过控制中心206转发至受控终端204。受控终端202根据接收到的触控操作数据进行触控响应后生成触控响应界面,并将触控响应界面通过控制中心206发送至控制终端202。本实施例中,通过控制中心建立与受控终端的连接,能够减少数据存储空间,也能基于受控终端于控制中心备份的数据进行远程控制。
图7是一个实施例的一种基于通信质量的终端控制方法的软件架构示意图,图中包括有智能手板702、云计算服务器704和平板电脑706,其中智能手板702为控制终端,云计算服务器704为控制中心,平板电脑706为受控终端。其中,云计算服务器704包括消息中间件708、前端服务710、后端服务712和数据库714。
参考图7,平板电脑706上运行街区屏幕UI和touch(触摸)事件等数据的软件,经由4G/5G网络,通过TCP(Transmission Control Protocol,传输控制协议)/IP(InternetProtocol Address,因特网互联协议)承载私有协议数据,与云计算服务器704建立连接。云计算服务器704中,消息中间件708高效分发数据,后端服务712与前端服务710通过Websocket协议进行双向通信。具体的,云计算服务器704在与智能手板702和平板电脑706进行信息传输时,具体是通过利用消息中间件708通过TCP/IP协议与平板电脑706进行通信,接收平板电脑706的操作界面(包括交互界面和触控响应界面),消息中间件708将操作界面通过TCP/IP协议传输给后端服务712,后端服务712再通过Websocket协议将操作界面传输给前端服务710,前端服务710根据智能手板702的分辨率、操控界面大小等对操作界面进行渲染处理,使渲染后的图像适应于智能手板702,智能手板702通过HTTP协议从前端服务710中主动获取渲染后的图像,云计算服务器704是通过HTTP或Restful接口接收智能手板702基于通信质量数据发送的用户对手板界面上的触控坐标、触控压力以及触控时长等触控操作数据,后端服务712再通过消息中间件708将该触控操作数据用TCP/IP协议承载私有协议进行数据封装,转发给平板电脑706。然后,后端服务712再通过消息中间件708将接收到的平板电脑706发送的触控响应界面发送至智能手板702。
应该理解的是,虽然图2、图4以及图5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2、图4以及图5中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图8所示,提供了一种终端,包括:通讯模块510、触控显示模块520和处理器530,其中:
通讯模块510与至少两个受控终端建立连接,处理器530获取各受控终端的交互界面、并对各交互界面进行显示分屏处理,得到分屏显示界面配置数据,将分屏显示界面配置数据发送至触控显示模块520,触控显示模块520接收分屏显示界面配置数据,显示交互界面于对应的分屏区域,接收用户对分屏显示后的交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至处理器530,处理器530获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端,获取对应的受控终端的触控程序运行窗口数据,对触控程序运行窗口数据进行处理,得到触控响应界面配置数据、并将触控响应界面配置数据发送至触控显示模块520,触控显示模块520根据触控响应界面配置数据显示触控响应界面于对应的分屏区域,其中,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
在另一个实施例中,如图9所示,通讯模块510包含无线通信接口1616,触控显示模块520可以是触控显示屏1602。具体的,参考图11,无线通信接口1616可以为3G/4G/5G网络或Wi-Fi天线接口,触控显示屏1602可以为OLED(Organic Light-Emitting Diode,有机发光二极管)和玻璃(或蓝宝石)盖板,处理器可在PCBA(Printed Circuit Board+Assembly,印刷电路板装配)上装配有高通APQ8053。此外,终端还包括有隔板1604,电池1608(容量1000mAh,1.0mm),USB接口1610(Type C),不锈钢中框1612和后盖板1614,后盖板1614可以为OLED和玻璃(或蓝宝石)盖板。由于未设计话筒和摄像头等部件,对话功能可以通过蓝牙耳麦来实现,摄影可以由腕表来实现。
更具体的,终端厚度可以为4mm,前期可采用Wi-Fi和BT(Bit Torrent,比特洪流)的通信接口进行交互,后期可采用自主协议进行交互。对于网络手机、网络视屏终端、游戏终端和智能手表的各种延展(例如生物检测)等手板终端,可以采用5-6寸屏;对于家居管理板、读书板、游戏板、微信板、社交板和作业板等智能家居终端,可以采用7-14寸屏;对于教学板、课本板、考试板、会议板、航空板、高铁板和单向保密信息板等智能教学、会议、航空和高铁类终端,也可以采用7-14寸屏;对于办公桌板、投影显示板、点餐板、公交车站板、家用电器板、智能家具板、酒吧互动板、户外天然场景影视互动板和演唱会竞技运动聚焦板等智能表面终端,可以采用5-105吋屏。
上述终端可以确保触控和显示功能的良好实现,通过受控终端和/或控制中心来实现数据处理和存储等功能,在功能上将触控和显示与其他功能相剥离。由于不需要实现数据处理和存储等功能,相比于传统终端,上述终端可以以较轻的重量、较小的体积和较薄的厚度实现各种复杂的功能,解决了传统通信系统中终端重量和体积较大、便携性较差的问题。
进一步地,由于终端使用开放式的通讯平台,可以不依托于任何一家手机品牌,也无需得到运营商许可,直接通过无线通信网络或云等开放平台来进行通信,避免了现有终端品牌和运营商配置门槛引起的复杂问题。
在一个实施例中,如图10所示,提供了一种基于通信质量的终端控制装置,包括:第一分屏显示模块610、触控操作数据接收模块620、控制模块630和第二分屏显示模块640,其中:
第一分屏显示模块610,用于获取至少两个受控终端的交互界面、对各交互界面进行分屏显示处理。
触控操作数据接收模块620,用于响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据。
控制模块630,用于获取当前通信质量数据,基于当前通信质量数据,发送触控操作数据至受控终端。
第二分屏显示模块640,用于获取对应的受控终端的触控响应界面,显示触控响应界面于对应的分屏区域,触控响应界面基于受控终端根据触控操作数据进行触控响应后得到。
在一个实施例中,控制模块630还用于若根据当前通信质量数据判断当前通信稳定时,获取已连接的受控终端的数量,将触控操作数据打包、并复制成与已连接的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包分别发送至各已连接的受控终端;若根据当前通信质量数据判断当前通信稳定时,根据触控操作数据,确定触控操作所作用的受控终端的数量,将触控操作数据打包、并复制成与触控操作所作用的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包发送至各触控操作所作用的受控终端;若根据当前通信质量判断当前通信不稳定时,解析触控操作数据,确定各触控操作与受控终端的对应关系,根据对应关系将各触控操作数据发送至对应的受控终端。
在一个实施例中,如图11所示,装置还包括数据连接模块650,用于发送连接请求至至少两个受控终端,连接请求携带身份认证信息,接收各受控终端根据身份认证信息反馈的连接许可消息,建立与各受控终端的连接。
在一个实施例中,第一分屏显示模块610还用于获取已连接的受控终端的数量和各受控终端的身份标识信息,根据已连接的受控终端的数量,确定分屏区域数量,将屏幕划分为与分屏区域数量对应的分屏区域,根据各受控终端的身份标识信息,将各交互界面显示于各分屏区域。
在一个实施例中,触控操作数据包括触控坐标;控制模块630还用于根据触控坐标,确定用户触控的分屏区域,根据分屏区域,确定对应的受控终端。
在一个实施例中,如图11所示,装置还包括界面配置模块660,用于获取至少两个受控终端的程序运行窗口数据,对各程序运行窗口数据进行处理,得到多个交互界面配置数据,根据各交互界面配置数据,配置对应的交互界面。
在一个实施例中,配置模块660还用于获取对应的受控终端响应触控操作数据后显示的目标程序运行窗口数据,对目标程序运行窗口数据进行处理,得到触控响应界面配置数据,根据触控响应界面配置数据,配置触控响应界面。
在一个实施例中,数据连接模块650还用于通过控制中心与至少两个受控终端建立连接,控制中心用于将控制终端传输的数据转发至各受控终端,以及将各受控终端传输的数据转发至控制终端,实现控制终端与各受控终端的通信。
关于基于通信质量的终端控制装置的具体限定可以参见上文中对于基于通信质量的终端控制方法的限定,在此不再赘述。上述基于通信质量的终端控制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图12所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种基于通信质量的终端控制方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图12中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述基于通信质量的终端控制方法中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述基于通信质量的终端控制方法中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (13)
1.一种基于通信质量的终端控制方法,所述方法包括:
获取至少两个受控终端的交互界面,对各所述交互界面进行分屏显示处理;
响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据;
获取当前通信质量数据,基于所述当前通信质量数据,发送所述触控操作数据至所述受控终端;
获取所述受控终端的触控响应界面,显示所述触控响应界面于对应的分屏区域,所述触控响应界面基于所述受控终端根据所述触控操作数据进行触控响应后得到。
2.根据权利要求1所述的方法,其特征在于,所述基于所述当前通信质量数据,发送所述触控操作数据至所述受控终端包括:
若根据所述当前通信质量数据判断当前通信稳定时,获取已连接的受控终端的数量,将所述触控操作数据打包、并复制成与所述已连接的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包分别发送至各已连接的受控终端;
若根据所述当前通信质量数据判断当前通信稳定时,根据所述触控操作数据,确定触控操作所作用的受控终端的数量,将所述触控操作数据打包、并复制成与所述触控操作所作用的受控终端的数量对应的多份触控操作数据包,将各触控操作数据包发送至各触控操作所作用的受控终端;
若根据所述当前通信质量判断当前通信不稳定时,解析触控操作数据,确定各触控操作与受控终端的对应关系,根据所述对应关系将各触控操作数据发送至对应的受控终端。
3.根据权利要求1所述的方法,其特征在于,所述触控操作数据包括触控坐标;
所述根据所述触控操作数据,确定对应的受控终端包括:
根据所述触控坐标,确定所述用户触控的分屏区域;
根据所述分屏区域,确定对应的受控终端。
4.根据权利要求1所述的方法,其特征在于,所述获取至少两个受控终端的交互界面之前,还包括:
发送连接请求至至少两个受控终端,所述连接请求携带身份认证信息;
接收各所述受控终端根据所述身份认证信息反馈的连接许可消息,建立与各所述受控终端的连接。
5.根据权利要求1所述的方法,其特征在于,对各交互界面进行分屏显示处理包括:
获取已连接的受控终端的数量和各所述受控终端的身份标识信息;
根据所述已连接的受控终端的数量,确定分屏区域数量;
将屏幕划分为与所述分屏区域数量对应的分屏区域;
根据各所述受控终端的身份标识信息,将各所述交互界面显示于各所述分屏区域。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述获取至少两个受控终端的交互界面包括:
获取至少两个受控终端的程序运行窗口数据;
对各所述程序运行窗口数据进行处理,得到多个交互界面配置数据;
根据各所述交互界面配置数据,配置对应的交互界面。
7.根据权利要求1至5任意一项所述的方法,其特征在于,所述获取对应的受控终端的触控响应界面包括:
获取对应的受控终端响应所述触控操作数据后显示的目标程序运行窗口数据;
对所述目标程序运行窗口数据进行处理,得到触控响应界面配置数据;
根据所述触控响应界面配置数据,配置所述触控响应界面。
8.根据权利要求1至5任意一项所述的方法,其特征在于,显示的交互界面和显示的触控响应界面与对应的分屏区域的尺寸相匹配。
9.根据权利要求1所述的方法,其特征在于,还包括:
通过控制中心与至少两个受控终端建立连接,所述控制中心用于将控制终端传输的数据转发至各受控终端,以及将各受控终端传输的数据转发至控制终端,实现所述控制终端与各所述受控终端的通信。
10.一种基于通信质量的终端控制装置,其特征在于,所述装置包括:
第一分屏显示模块,用于获取至少两个受控终端的交互界面、对各所述交互界面进行分屏显示处理;
触控操作数据接收模块,用于响应用户对分屏显示处理后的界面的触控操作,得到触控操作数据;;
控制模块,用于获取当前通信质量数据,基于所述当前通信质量数据,发送所述触控操作数据至所述受控终端;
第二分屏显示模块,用于获取对应的受控终端的触控响应界面,显示所述触控响应界面于对应的分屏区域,所述触控响应界面基于所述受控终端根据所述触控操作数据进行触控响应后得到。
11.一种终端,其特征在于,包括:通讯模块、触控显示模块和处理器;
所述通讯模块与至少两个受控终端建立连接,所述处理器获取各所述受控终端的交互界面、并对各所述交互界面进行显示分屏处理,得到分屏显示界面配置数据,将所述分屏显示界面配置数据发送至所述触控显示模块,所述触控显示模块接收所述分屏显示界面配置数据,显示交互界面于对应的分屏区域,接收用户对分屏显示后的交互界面的触控操作,得到触控操作数据,并将触控操作数据发送至所述处理器,所述处理器获取当前通信质量数据,基于所述当前通信质量数据,发送所述触控操作数据至所述受控终端,获取对应的受控终端的触控程序运行窗口数据,对所述触控程序运行窗口数据进行处理,得到触控响应界面配置数据、并将所述触控响应界面配置数据发送至所述触控显示模块,所述触控显示模块根据所述触控响应界面配置数据显示触控响应界面于对应的分屏区域,其中,所述触控响应界面基于所述受控终端根据所述触控操作数据进行触控响应后得到。
12.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至9中任一项所述方法的步骤。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至9中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010070266.9A CN111309226B (zh) | 2020-01-21 | 2020-01-21 | 基于通信质量的终端控制方法、装置、终端和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010070266.9A CN111309226B (zh) | 2020-01-21 | 2020-01-21 | 基于通信质量的终端控制方法、装置、终端和计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111309226A true CN111309226A (zh) | 2020-06-19 |
CN111309226B CN111309226B (zh) | 2023-11-28 |
Family
ID=71159786
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010070266.9A Active CN111309226B (zh) | 2020-01-21 | 2020-01-21 | 基于通信质量的终端控制方法、装置、终端和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111309226B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112732160A (zh) * | 2021-01-11 | 2021-04-30 | 微视显示器科技(深圳)有限公司 | 一种显示系统触控识别方法及显示系统 |
CN112732159A (zh) * | 2021-01-11 | 2021-04-30 | 微视显示器科技(深圳)有限公司 | 一种智能显示系统及控制方法 |
CN113064683A (zh) * | 2021-03-15 | 2021-07-02 | 无锡小天鹅电器有限公司 | 一种电控设备控制界面显示方法及系统、终端和电控设备 |
CN113535107A (zh) * | 2021-07-20 | 2021-10-22 | 深圳思特顺科技有限公司 | 一种显示设备的控制系统 |
CN113778358A (zh) * | 2021-08-11 | 2021-12-10 | 珠海格力电器股份有限公司 | 一种多屏交互的方法、装置、系统、电子设备及存储介质 |
CN114995735A (zh) * | 2022-04-22 | 2022-09-02 | 北京金山云网络技术有限公司 | 图像显示方法、系统、装置、电子设备及可读存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103246435A (zh) * | 2013-05-08 | 2013-08-14 | 天脉聚源(北京)传媒科技有限公司 | 一种基于反馈窗的互动方法及装置 |
CN104836672A (zh) * | 2014-02-10 | 2015-08-12 | 中国移动通信集团公司 | 多屏互动中数据传输的方法、装置、系统及终端设备 |
CN105681584A (zh) * | 2016-03-21 | 2016-06-15 | 珠海格力电器股份有限公司 | 移动终端的远程控制方法及装置 |
CN108111912A (zh) * | 2017-12-15 | 2018-06-01 | 深圳Tcl新技术有限公司 | 多屏互动中的图像传输方法、终端及存储介质 |
CN109167975A (zh) * | 2018-10-25 | 2019-01-08 | 上海哥瑞利软件有限公司 | 一种分屏控制系统 |
CN110349396A (zh) * | 2019-07-29 | 2019-10-18 | 维达力实业(深圳)有限公司 | 智能交互系统、交互终端及控制平台 |
CN110488619A (zh) * | 2019-07-29 | 2019-11-22 | 维达力实业(深圳)有限公司 | 家电设备的信息交互系统和家电设备的控制方法、装置 |
-
2020
- 2020-01-21 CN CN202010070266.9A patent/CN111309226B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103246435A (zh) * | 2013-05-08 | 2013-08-14 | 天脉聚源(北京)传媒科技有限公司 | 一种基于反馈窗的互动方法及装置 |
CN104836672A (zh) * | 2014-02-10 | 2015-08-12 | 中国移动通信集团公司 | 多屏互动中数据传输的方法、装置、系统及终端设备 |
CN105681584A (zh) * | 2016-03-21 | 2016-06-15 | 珠海格力电器股份有限公司 | 移动终端的远程控制方法及装置 |
CN108111912A (zh) * | 2017-12-15 | 2018-06-01 | 深圳Tcl新技术有限公司 | 多屏互动中的图像传输方法、终端及存储介质 |
CN109167975A (zh) * | 2018-10-25 | 2019-01-08 | 上海哥瑞利软件有限公司 | 一种分屏控制系统 |
CN110349396A (zh) * | 2019-07-29 | 2019-10-18 | 维达力实业(深圳)有限公司 | 智能交互系统、交互终端及控制平台 |
CN110488619A (zh) * | 2019-07-29 | 2019-11-22 | 维达力实业(深圳)有限公司 | 家电设备的信息交互系统和家电设备的控制方法、装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112732160A (zh) * | 2021-01-11 | 2021-04-30 | 微视显示器科技(深圳)有限公司 | 一种显示系统触控识别方法及显示系统 |
CN112732159A (zh) * | 2021-01-11 | 2021-04-30 | 微视显示器科技(深圳)有限公司 | 一种智能显示系统及控制方法 |
CN113064683A (zh) * | 2021-03-15 | 2021-07-02 | 无锡小天鹅电器有限公司 | 一种电控设备控制界面显示方法及系统、终端和电控设备 |
CN113064683B (zh) * | 2021-03-15 | 2023-12-05 | 无锡小天鹅电器有限公司 | 一种电控设备控制界面显示方法及系统、终端和电控设备 |
CN113535107A (zh) * | 2021-07-20 | 2021-10-22 | 深圳思特顺科技有限公司 | 一种显示设备的控制系统 |
CN113778358A (zh) * | 2021-08-11 | 2021-12-10 | 珠海格力电器股份有限公司 | 一种多屏交互的方法、装置、系统、电子设备及存储介质 |
CN114995735A (zh) * | 2022-04-22 | 2022-09-02 | 北京金山云网络技术有限公司 | 图像显示方法、系统、装置、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111309226B (zh) | 2023-11-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111309226B (zh) | 基于通信质量的终端控制方法、装置、终端和计算机设备 | |
CN111290695B (zh) | 基于优先级控制的终端控制方法、装置和终端 | |
CN111314441B (zh) | 基于多区域控制的终端控制方法、装置和终端 | |
CN111324248A (zh) | 终端控制方法、装置、终端、计算机设备和存储介质 | |
CN111273850B (zh) | 终端控制方法、装置、计算机设备和存储介质 | |
US20130262687A1 (en) | Connecting a mobile device as a remote control | |
US11947998B2 (en) | Display method and device | |
CN104731514B (zh) | 触摸操作区域单握触摸操作的识别方法及装置 | |
WO2019184631A1 (zh) | 信息处理方法和装置、计算机可读存储介质、终端 | |
CN111414097A (zh) | 一种交互方法、交互系统和显示设备 | |
CN112134788A (zh) | 事件处理方法、装置、存储介质、移动终端及电脑 | |
WO2019052319A1 (zh) | 数据传输方法、移动终端及计算机可读存储介质 | |
WO2015131813A1 (zh) | 一种进行设备操作的方法和系统 | |
WO2018107422A1 (zh) | 电子装置及信息读取控制方法 | |
CN114979730B (zh) | 传屏交互方法、装置、计算机设备和存储介质 | |
CN108762641B (zh) | 一种文本编辑方法及终端设备 | |
CN111314442B (zh) | 基于分时控制的终端控制方法、装置、终端和计算机设备 | |
EP2913753A1 (en) | Transmission terminal, transmission system, transmission method, and carrier means | |
WO2023186011A1 (zh) | 图像显示方法、装置及电子设备 | |
CN111159738B (zh) | 权限配置方法、应用登录方法及装置 | |
CN108769389B (zh) | 图片获取方法、装置、终端设备及存储介质 | |
CN111263004A (zh) | 终端控制方法、装置、计算机设备和存储介质 | |
CN113542206B (zh) | 一种图像处理方法、装置及计算机可读存储介质 | |
WO2021072974A1 (zh) | 终端控制方法、系统、装置、计算机设备和存储介质 | |
CN110717163B (zh) | 一种交互方法及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |