CN111273850B - 终端控制方法、装置、计算机设备和存储介质 - Google Patents

终端控制方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN111273850B
CN111273850B CN202010070281.3A CN202010070281A CN111273850B CN 111273850 B CN111273850 B CN 111273850B CN 202010070281 A CN202010070281 A CN 202010070281A CN 111273850 B CN111273850 B CN 111273850B
Authority
CN
China
Prior art keywords
controlled terminal
touch
interface
interactive interface
touch operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010070281.3A
Other languages
English (en)
Other versions
CN111273850A (zh
Inventor
赵宁
许仁
周枫
王伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vitalink Industry Shenzhen Co ltd
Original Assignee
Vitalink Industry Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vitalink Industry Shenzhen Co ltd filed Critical Vitalink Industry Shenzhen Co ltd
Priority to CN202010070281.3A priority Critical patent/CN111273850B/zh
Publication of CN111273850A publication Critical patent/CN111273850A/zh
Application granted granted Critical
Publication of CN111273850B publication Critical patent/CN111273850B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/452Remote windowing, e.g. X-Window System, desktop virtualisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/547Remote procedure calls [RPC]; Web services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/544Remote
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/545Gui

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及一种终端控制方法、装置、计算机设备和存储介质。所述方法包括:根据用户触发的选定操作,从受控终端列表中选定待连接的受控终端,向所选定的受控终端发送连接指令,当接收到所选定的受控终端的响应时,与所选定的受控终端建立连接。获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的触控操作时,获取对应的触控操作信息。根据触控操作信息控制受控终端进行触控响应,并获取受控终端进行触控响应后得到第一触控响应界面,对第一触控响应界面进行渲染得到第二触控响应界面并显示。采用本方法无需借助中间服务器,即实现控制终端对受控终端的完全控制,提高了远程交互的通信效率。

Description

终端控制方法、装置、计算机设备和存储介质
技术领域
本申请涉及通信技术领域,特别是涉及一种终端控制方法、装置、计算机设备和存储介质。
背景技术
随着通信技术的发展,以及人们日常工作或生活中对数据通信需求的多样化。以用户需求为远程处理事务为例,为满足远程处理事务的用户需求,出现了远程控制技术,用户可在主控终端向受控终端发送远程控制提示信息,实现远程交互控制。
传统上,控制终端可对与其建立远程辅助控制连接的受控终端进行远程交互控制。通过获取与控制终端建立远程辅助控制连接的受控终端的屏幕数据,并基于屏幕数据显示受控终端的操作界面。当检测到针对操作界面的触发操作后,获取基于触发操作所采集到的位置信息,并向受控终端发送位置信息,以供受控终端基于位置信息在操作界面中呈现提示信息,使得受控终端根据提示信息对目标位置执行操作。
然而,传统的实现方案在进行远程控制的时候,控制终端仅用于为受控终端提供远程辅助,受控终端根据受控终端发送的提示信息进行操作,当受控终端出现故障无法接收提示信息,或无法获取提示信息携带的操作时,则无法执行远程交互操作,导致通信效率较低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高远程交互通信效率的终端控制方法、装置、计算机设备和存储介质。
一种终端控制方法,所述方法包括:
当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;
向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;
对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示。
在其中一个实施例中,所述连接指令携带与身份认证操作对应的认证信息;所述向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接,包括:
向所选定的所述受控终端发送连接指令,使得所述受控终端响应所述连接指令,并对与所述身份认证操作对应的认证信息进行验证;
当接收到所述受控终端对所述连接指令的响应时,确定所述认证信息通过所述受控终端的验证,与所述受控终端建立连接。
在其中一个实施例中,所述触控操作信息包括触控操作类型以及触控操作轨迹;所述根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面,包括:
根据所述触控操作类型,控制所述受控终端执行对应触控操作类型的触控操作;
根据所述触控操作轨迹,控制所述受控终端执行所述触控操作得到对应的触控操作轨迹;
获取所述受控终端进行触控响应后得到的第一触控响应界面。
在其中一个实施例中,所述获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面,包括:
获取对所述受控终端的第一交互界面进行截屏的交互界面截屏数据;
根据所述交互界面截屏数据,确定所述受控终端的第一显示属性信息;
获取预设显示属性信息;
根据所述预设显示属性信息和所述受控终端的第一显示属性信息,对所述受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据;
根据处理后的交互界面截屏数据,得到对应的第二交互界面。
一种终端控制方法,所述方法包括:
当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端;
接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面。
在其中一个实施例中,所述接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面,包括:
接收所述控制终端发送的触控操作信息,并根据所述触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹;
根据所述触控操作类型进行触控响应,执行对应触控操作类型的触控操作;
根据所述触控操作轨迹进行触控响应,执行所述触控操作得到对应的触控操作轨迹;
生成第一触控响应界面。
一种终端控制装置,所述装置包括:
受控终端选定模块,用于当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;
受控终端连接模块,用于向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
第二交互界面生成模块,用于获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
触控操作信息获取模块,用于当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
第一触控响应界面获取模块,用于根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;
第二触控响应界面显示模块,用于对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示。
一种终端控制装置,所述装置包括:
控制终端连接模块,用于当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
第一交互界面生成模块,用于对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端;
第一触控响应界面生成模块,用于接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;
向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;
对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端;
接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;
向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;
对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端;
接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面。
上述终端控制方法、装置、计算机设备和存储介质,当在控制终端检测到用户触发的选定操作时,根据选定操作从预存的受控终端列表中选定待连接的受控终端,并向所选定的受控终端发送连接指令,受控终端接收并响应连接指令,与控制终端建立连接,实现了控制终端和受控终端的直接连接,无需借助中间服务器。控制终端通过获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应。通过获取受控终端根据触控操作信息进行触控响应生成第一触控响应界面,并对第一触控响应界面进行渲染得到第二触控响应界面,并对第二触控响应界面进行显示。实现了对受控终端的完全控制,避免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
附图说明
图1为一个实施例中终端控制方法的应用环境图;
图2为一个实施例中终端控制方法的流程示意图;
图3为一个实施例中得到第二交互界面的步骤的流程示意图;
图4为另一个实施例中终端控制方法的流程示意图;
图5为一个实施例中生成第一触控响应界面的步骤的流程示意图;
图6为一个实施例中终端控制方法的时序图;
图7为一个实施例中终端控制装置的结构框图;
图8为另一个实施例中终端控制装置的结构框图;
图9为一个实施例中控制终端的产品结构示意图;
图10为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的终端控制方法,可以应用于如图1所示的应用环境中。其中,控制终端102通过网络与受控终端104进行通信,该终端控制方法具体可以应用于图1中的控制终端102或受控终端104。其中,当在控制终端102检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端104。控制终端102向所选定的受控终端104发送连接指令,受控终端104接收并相应控制终端102发送的连接指令,当控制终端102接收到所选定的受控终端104的对连接指令的响应时,与所选定的受控终端104建立连接。控制终端102通过获取受控终端104的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息。控制终端102根据触控操作信息控制受控终端104进行触控响应,并获取受控终端104进行触控响应后得到第一触控响应界面,对第一触控响应界面进行渲染得到第二触控响应界面,并显示。其中,控制终端102和受控终端104可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。
在一个实施例中,如图2所示,提供了一种终端控制方法,以该方法应用于图1中的控制终端为例进行说明,包括以下步骤:
步骤S202,当检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端。
具体地,当在控制终端检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端。其中,受控终端可以是移动终端设备,比如智能手机,个人电脑或平板电脑,以及智能手环等便携式可穿戴设备等。预存的受控终端列表包括在此次远程控制操作之前,已与控制终端建立连接并接受控制终端远程操作的历史设备,或属于可连接状态,但未进行连接或进行远程控制操作的待连接设备。
其中,控制终端基于预设通信方式与受控终端建立连接,其中,预设通信方式包括WiFi通信、蓝牙通信、自定义2.4G通信和5G通信等。控制终端和受控终端之间的通信距离在相应预设通信方式的通信范围内,两者可通过各预设通信方式实现数据传输。
步骤S204,向所选定的受控终端发送连接指令,当接收到所选定的受控终端的对连接指令的响应时,与所选定的受控终端建立连接。
具体地,控制终端向所选定的受控终端发送连接指令,其中,连接指令携带与身份认证操作对应的认证信息,使得受控终端接收并响应连接指令,并对与身份认证操作对应的认证信息进行验证。当接收到受控终端对连接指令的响应时,确定认证信息通过受控终端的验证,与受控终端建立连接。
进一步地,针对身份信息的验证方式包括但不限于:字符串密码验证、人脸验证、指纹验证以及虹膜验证等。
步骤S206,获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面。
具体地,通过获取受控终端的第一交互界面,并获取第一交互界面的界面数据、屏幕尺寸和分辨率,并根据自身屏幕尺寸和分辨率,对第一交互界面进行调整和处理,得到渲染后的第二交互界面。
进一步地,控制终端根据自身界面的分辨率对第一交互界面的界面数据进行等比缩放,得到第二交互界面。当控制终端的界面的分辨率与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二交互界面,并对第二交互界面进行显示。
例如,所连接的受控终端的第一交互界面分辨率为2048×1536像素,若控制终端的界面分辨率为1024×768像素,可以将第一交互界面等比例缩小到原来的50%,得到第二交互界面。若控制终端的界面分辨率为1024×800像素,可以先将第一交互界面等比例缩小到原来的50%,显示在控制终端界面的中心处,然后在空白部分填充黑色,得到第二交互界面。
步骤S208,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息。
具体地,用户在控制终端执行的触控操作包括点击、长按、滑动、缩放以及多点触控等,其中,用户可以通过手指或书写笔在第二交互界面上点击软件图标打开软件,在软件打开之后点击软件中的各个控件,或者在软件打开之后的操作界面中通过书写进行触控操作。
例如,在第二交互界面坐标为(1600,600)像素的位置有微信图标,用户可以点击微信图标,在打开的微信中点击各个控件,或者在微信对话框中输入文字。在执行上述触控操作后,控制终端获取上述针对第二交互界面的触控操作,以及相应的触控操作信息。
步骤S210,根据触控操作信息控制受控终端进行触控响应,并获取受控终端进行触控响应后得到第一触控响应界面。
具体地,触控操作对应的触控操作信息包括受控终端的编号,通过获取触控操作对应的触控操作信息,提取受控终端的编号,并控制对应编号的受控终端进行触控响应,从受控终端存储的界面数据查找对应的响应界面,生成第一触控响应界面。
其中,通过截取受控终端的触控响应界面图像,将该触控响应界面图像作为第一触控响应界面,或者,读取受控终端触控响应界面的分辨率、颜色和文字等信息,根据这些信息得到第一触控响应界面。
进一步地,对于受控终端,可以对其整个触控响应界面进行截屏操作,将截屏结果作为第一触控响应界面。或者,读取受控终端的触控响应界面信息,包括分辨率2048×1536像素,触控响应所显示的文字内容和位置,触控响应所显示的图像颜色和位置等,根据上述触控响应界面信息得到第一触控响应界面。
步骤S212,对第一触控响应界面进行渲染得到第二触控响应界面,并显示。
具体地,触控操作信息包括触控操作类型以及触控操作轨迹,其中,触控操作类型包括点击、长按、滑动、缩放以及多点触控等,触控操作轨迹与各不同触控操作类型分别一一对应。控制终端根据触控操作类型,控制受控终端执行对应触控操作类型的触控操作。根据触控操作轨迹,控制受控终端执行触控操作得到对应的触控操作轨迹,并获取受控终端进行触控响应后得到的第一触控响应界面。
其中,控制终端还可通过获取第一触控响应界面的界面数据、屏幕尺寸和分辨率,并根据自身屏幕尺寸和分辨率,对第一触控响应界面进行调整和处理,得到渲染后的第二触控响应界面。
进一步地,控制终端根据自身界面的分辨率对第一触控响应界面的界面数据进行等比缩放,得到第二触控响应界面。当控制终端的界面的分辨率与第一触控响应界面的分辨率不成等比例时,可以先对第一触控响应界面进行等比例缩放,然后,根据缩放结果进行截取或填充等操作,得到第二触控响应界面,并对第二触控响应界面进行显示。
上述终端控制方法中,当在控制终端检测到用户触发的选定操作时,根据选定操作从预存的受控终端列表中选定待连接的受控终端,并向所选定的受控终端发送连接指令,受控终端接收并响应连接指令,与控制终端建立连接,实现了控制终端和受控终端的直接连接,无需借助中间服务器。控制终端通过获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应。通过获取受控终端根据触控操作信息进行触控响应生成第一触控响应界面,并对第一触控响应界面进行渲染得到第二触控响应界面,并对第二触控响应界面进行显示。实现了对受控终端的完全控制,避免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
在一个实施例中,如图3所示,得到第二交互界面的步骤,即获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,具体包括以下S302至S310的步骤:
步骤S302,获取对受控终端的第一交互界面进行截屏的交互界面截屏数据。
具体地,受控终端通过对第一交互界面进行截屏,得到相应的交互界面截屏数据,控制终端通过获取对受控终端的第一交互界面进行截屏的交互界面截屏数据,并提取交互界面截屏数据的屏幕UI数据、屏幕尺寸、分辨率等。
步骤S304,根据交互界面截屏数据,确定受控终端的第一显示属性信息。
具体地,控制终端通过获取对受控终端的第一交互界面进行截屏的交互界面截屏数据,并根据交互界面截屏数据提取到的屏幕UI数据、屏幕尺寸以及分辨率,确定受控终端的第一显示属性信息。
步骤S306,获取预设显示属性信息。
具体地,在获取受控终端的第一显示属性信息后,还需获取控制终端自身的预设显示属性信息,包括屏幕尺寸以及分辨率。
步骤S308,根据预设显示属性信息和受控终端的第一显示属性信息,对受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据。
具体地,根据控制终端自身的屏幕尺寸、分辨率,以及受控终端的屏幕UI数据、屏幕尺寸以及分辨率,对受控终端的交互界面揭破数据进行调整,得到处理后的交互界面截屏数据。
进一步地,根据第一交互界面和第二交互界面的尺寸,对交互界面截屏数据进行缩放、截取或填充等处理,得到处理后交互界面截屏数据。
其中,当控制终端的界面的分辨率与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放。
步骤S310,根据处理后的交互界面截屏数据,得到对应的第二交互界面。
具体地,根据控制终端的界面的分辨率对第一交互界面数据进行等比例缩放得到第二交互界面,当控制终端的界面与第一交互界面的分辨率不成等比例时,可以先对第一交互界面进行等比例缩放,根据缩放结果进行截取或填充等操作,得到第二交互界面,并对第二交互界面进行显示。
上述得到第二交互界面的步骤,通过获取对受控终端的第一交互界面进行截屏的交互界面截屏数据,并根据交互界面截屏数据,确定受控终端的第一显示属性信息。通过获取预设显示属性信息,并根据预设显示属性信息和受控终端的第一显示属性信息,对受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据,进而根据处理后的交互界面截屏数据,得到对应的第二交互界面。实现了根据控制终端的尺寸及分辨率等对第一交互界面的调整和配置,得到与控制终端匹配且可进行显示的第二交互界面,提供了更好的显示效果,避免出现数据显示不齐全的问题。
在一个实施例中,如图4所示,提供了另一种终端控制方法,以该方法应用于图1中的受控终端为例进行说明,包括以下步骤:
步骤S402,当接收到控制终端发送的连接指令时,响应连接指令,并与控制终端建立连接。
具体地,连接指令携带与身份认证操作对应的认证信息,受控终端到控制终端发送的连接指令时,接收并响应连接指令。通过对与身份认证操作对应的认证信息进行验证,确定认证信息通过验证,与控制终端建立连接。
其中,针对身份信息的验证方式包括但不限于:字符串密码验证、人脸验证、指纹验证以及虹膜验证等。
步骤S404,对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端。
具体地,受控终端对当前的显示界面进行截屏,得到当前界面的交互界面截屏数据,并根据交互界面截屏数据生成第一交互界面,并将第一交互界面发送至控制终端。其中,交互界面截屏数据包括屏幕UI数据、屏幕尺寸、分辨率等。
步骤S406,接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。
具体地,触控操作信息包括触控操作类型和触控操作轨迹,受控终端通过接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹。进而根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作,并根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹,生成第一触控响应界面。
进一步地,受控终端通过对其整个触控响应界面进行截屏操作,将截屏结果作为第一触控响应界面。或者,读取受控终端的触控响应界面信息,包括分辨率2048×1536像素,触控响应所显示的文字内容和位置,触控响应所显示的图像颜色和位置等,根据上述触控响应界面信息得到第一触控响应界面。
上述终端控制方法,当接收到控制终端发送的连接指令时,响应连接指令,并与控制终端建立连接。通过对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端,接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。实现了受控终端和控制终端的直接连接,无需借助其他中转服务器或者设备,且实现了控制终端对受控终端的全面控制,免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
在一个实施例中,如图5所示,生成第一触控响应界面的步骤,即接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面的步骤,具体包括以下S502至S508的步骤:
步骤S502,接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹。
具体地,触控操作信息包括触控操作的触控操作类型和触控操作轨迹。,其中,触控操作类型包括点击、长按、滑动、缩放以及多点触控等,触控操作轨迹与各不同触控操作类型分别一一对应。
进一步地,比如第一交互界面为显示的某相册中第05张图像的界面,操作信息为向右滑动操作,或者为对界面某一位置的点击操作,受控终端根据对应触控操作以及对应的触控操作信息,可获知该滑动操作或对该位置的点击操作表示为“显示下一张”的指令。
步骤S504,根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作。
具体地,受控终端根据触控操作类型进行响应,比如,当根据触控操作信息确定触控操作类型为点击时,体现在用户通过手指或书写笔在第二交互界面上点击软件图标打开软件,在软件打开之后点击软件中的各个控件,或者在软件打开之后的操作界面中通过书写进行触控操作。
步骤S506,根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹。
具体地,触控操作轨迹与相应触控操作类型的触控操作对应,比如当触控操作类型为缩放时,可以体现在用户对某一张图片的放大或缩小操作,通过记录用户对该图片进行放大的最大值和进行缩小的最小值,作为触控操作轨迹的阈值,包括最大值和最小值,同时记录用户在缩放过程中暂停的时间点,记录为中间点,各中间点均处于触控操作轨迹的两个阈值之间。
步骤S508,生成第一触控响应界面。
具体地,受控终端将根据控制终端的触控操作信息进行触控响应后的显示界面,确定为第一触控响应界面。
进一步地,比如第一交互界面为显示的某相册中第01张图像的界面,操作信息为向右滑动操作,或者为对界面某一位置的点击操作,远程控制中心可得到该操作信息后,可获知该滑动操作或对该位置的点击操作表示为“显示下一张”的指令,该指令对应于该相册中的02张图像,可将显示02张图像的界面作为所确定的第一触控响应界面。
上述生成第一触控响应界面的步骤,通过接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹。根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作,并根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹,并生成第一触控响应界面。可实时得到与触控操作对应的触控响应界面,无需重复执行数据查找或获取操作,进一步提高工作效率。
在一个实施例中,如图6所示,提供了一种终端控制方法的时序图,终端控制流程可以包括以下步骤:
步骤S601,当在控制终端检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端。
步骤S602,控制终端向所选定的受控终端发送连接指令。
步骤S603,受控终端接收控制终端发送的连接指令,并响应连接指令,与控制终端建立连接。
步骤S604,受控终端对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端。
步骤S605,控制终端接收受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面。
步骤S606,当在控制终端检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息。
步骤S607,控制终端将触控操作信息发送至受控终端。
步骤S608,受控终端接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。
步骤S609,控制终端获取受控终端进行触控响应后得到第一触控响应界面。
步骤S610,控制终端对第一触控响应界面进行渲染得到第二触控响应界面,并显示。
上述终端控制方法,当在控制终端检测到用户触发的选定操作时,根据选定操作从预存的受控终端列表中选定待连接的受控终端,并向所选定的受控终端发送连接指令,受控终端接收并响应连接指令,与控制终端建立连接,实现了控制终端和受控终端的直接连接,无需借助中间服务器。控制终端通过获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应。通过获取受控终端根据触控操作信息进行触控响应生成第一触控响应界面,并对第一触控响应界面进行渲染得到第二触控响应界面,并对第二触控响应界面进行显示。实现了对受控终端的完全控制,避免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
应该理解的是,虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-6中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种终端控制装置,包括:受控终端选定模块702、受控终端连接模块704、第二交互界面生成模块706、触控操作信息获取模块708、第一触控响应界面获取模块710以及第二触控响应界面显示模块712,其中:
受控终端选定模块702,用于当检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端。
受控终端连接模块704,用于向所选定的受控终端发送连接指令,当接收到所选定的受控终端的对连接指令的响应时,与所选定的受控终端建立连接。
第二交互界面生成模块706,用于获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面。
触控操作信息获取模块708,用于当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息。
第一触控响应界面获取模块710,用于根据触控操作信息控制受控终端进行触控响应,并获取受控终端进行触控响应后得到第一触控响应界面。
第二触控响应界面显示模块712,用于对第一触控响应界面进行渲染得到第二触控响应界面,并显示。
上述终端控制装置中,当在控制终端检测到用户触发的选定操作时,根据选定操作从预存的受控终端列表中选定待连接的受控终端,并向所选定的受控终端发送连接指令,受控终端接收并响应连接指令,与控制终端建立连接,实现了控制终端和受控终端的直接连接,无需借助中间服务器。控制终端通过获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面,当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息,并根据触控操作信息控制受控终端进行触控响应。通过获取受控终端根据触控操作信息进行触控响应生成第一触控响应界面,并对第一触控响应界面进行渲染得到第二触控响应界面,并对第二触控响应界面进行显示。实现了对受控终端的完全控制,避免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
在一个实施例中,第二交互界面生成模块,还用于:
获取对受控终端的第一交互界面进行截屏的交互界面截屏数据;根据交互界面截屏数据,确定受控终端的第一显示属性信息;获取预设显示属性信息;根据预设显示属性信息和受控终端的第一显示属性信息,对受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据;根据处理后的交互界面截屏数据,得到对应的第二交互界面。
上述第二交互界面生成模块中,通过获取对受控终端的第一交互界面进行截屏的交互界面截屏数据,并根据交互界面截屏数据,确定受控终端的第一显示属性信息。通过获取预设显示属性信息,并根据预设显示属性信息和受控终端的第一显示属性信息,对受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据,进而根据处理后的交互界面截屏数据,得到对应的第二交互界面。实现了根据控制终端的尺寸及分辨率等对第一交互界面的调整和配置,得到与控制终端匹配且可进行显示的第二交互界面,提供了更好的显示效果,避免出现数据显示不齐全的问题。
在一个实施例中,如图8所示,提供了一种终端控制装置,包括:控制终端连接模块802、第一交互界面生成模块804以及第一触控响应界面生成模块806,其中:
控制终端连接模块802,用于当接收到控制终端发送的连接指令时,响应连接指令,并与控制终端建立连接。
第一交互界面生成模块804,用于对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端。
第一触控响应界面生成模块806,用于接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。
上述终端控制装置中,当接收到控制终端发送的连接指令时,响应连接指令,并与控制终端建立连接。通过对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端,接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。实现了受控终端和控制终端的直接连接,无需借助其他中转服务器或者设备,且实现了控制终端对受控终端的全面控制,免出现受控终端无法接收或识别控制终端发送的提示信息而中断远程交互操作的情况,提高了远程交互的通信效率。
在一个实施例中,第一触控响应界面生成模块,还用于:
接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹;根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作;根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹;生成第一触控响应界面。
上述第一触控响应界面生成模块中,通过接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹。根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作,并根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹,并生成第一触控响应界面。可实时得到与触控操作对应的触控响应界面,无需重复执行数据查找或获取操作,进一步提高工作效率。
在一个实施例中,如图9所示,提供了一种控制终端的产品结构示意图,该终端为控制终端,包括:
无线通信接口916,用于通过无线通信的方式与受控终端建立连接;
触控显示屏902,用于显示第二交互界面;
触控显示屏902,用于接收用户针对第二交互界面进行的触控操作;
处理器906,用于根据触控操作,控制受控终端进行触控响应以显示第一触控响应界面;
触控显示屏902,用于显示第二触控响应界面。
参照图9,无线通信接口916可以为3G/4G/5G网络、Wi-Fi或蓝牙天线接口,触控显示屏902可以为OLED(Organic Light-Emitting Diode,有机发光二极管)和玻璃(或蓝宝石)盖板,处理器906在PCBA(Printed Circuit Board+Assembly,印刷电路板装配)上装配有高通APQ8053。此外,终端还包括有隔板904,电池908(容量1000mAh,1.0mm),USB接口910(Type C),不锈钢中框912和后盖板914,后盖板914可以为OLED和玻璃(或蓝宝石)盖板。由于未设计话筒和摄像头等部件,对话功能可以通过蓝牙耳麦来实现,摄影可以由腕表来实现。
终端厚度可以为4mm。对于网络手机、网络视屏终端、游戏终端和智能手表的各种延展(例如生物检测)等手板终端,可以采用5-6吋屏;对于家居管理板、读书板、游戏板、微信板、社交板和作业板等智能家居终端,可以采用7-14吋屏;对于教学板、课本板、考试板、会议板、航空板、高铁板和单向保密信息板等智能教学、会议、航空和高铁类终端,也可以采用7-14吋屏;对于办公桌板、投影显示板、点餐板、公交车站板、家用电器板、智能家具板、酒吧互动板、户外天然场景影视互动板和演唱会竞技运动聚焦板等智能表面终端,可以采用5-105吋屏。
上述终端可以确保触控和显示功能的良好实现,通过受控终端和/或控制中心来实现数据处理和存储等功能,在功能上将触控和显示与其他功能相剥离。由于不需要实现数据处理和存储等功能,相比于传统终端,上述终端可以以较轻的重量、较小的体积和较薄的厚度实现各种复杂的功能,解决了传统通信系统中终端重量和体积较大、便携性较差的问题。
进一步地,由于使用开放式的通讯平台,可以不依托于任何一家手机品牌,也无需得到运营商许可,直接通过无线通信网络或云等开放平台来进行通信,避免了现有终端品牌和运营商配置门槛引起的复杂问题。
关于终端控制装置的具体限定可以参见上文中对于终端控制方法的限定,在此不再赘述。上述终端控制装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是受控终端或者受控终端,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种终端控制方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
当检测到用户触发的选定操作时,根据选定操作,从预存的受控终端列表中选定待连接的受控终端;
向所选定的受控终端发送连接指令,当接收到所选定的受控终端的对连接指令的响应时,与所选定的受控终端建立连接;
获取受控终端的第一交互界面,并对第一交互界面进行渲染得到第二交互界面;
当检测到用户触发的对第二交互界面的触控操作时,获取触控操作对应的触控操作信息;
根据触控操作信息控制受控终端进行触控响应,并获取受控终端进行触控响应后得到第一触控响应界面;
对第一触控响应界面进行渲染得到第二触控响应界面,并显示。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
向所选定的受控终端发送连接指令,使得受控终端响应连接指令,并对与身份认证操作对应的认证信息进行验证;
当接收到受控终端对连接指令的响应时,确定认证信息通过受控终端的验证,与受控终端建立连接。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据触控操作类型,控制受控终端执行对应触控操作类型的触控操作;
根据触控操作轨迹,控制受控终端执行触控操作得到对应的触控操作轨迹;
获取受控终端进行触控响应后得到的第一触控响应界面。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取对受控终端的第一交互界面进行截屏的交互界面截屏数据;
根据交互界面截屏数据,确定受控终端的第一显示属性信息;
获取预设显示属性信息;
根据预设显示属性信息和受控终端的第一显示属性信息,对受控终端的交互界面截屏数据进行调整,得到处理后的交互界面截屏数据;
根据处理后的交互界面截屏数据,得到对应的第二交互界面。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
当接收到控制终端发送的连接指令时,响应连接指令,并与控制终端建立连接;
对当前的显示界面进行截屏生成第一交互界面,并将第一交互界面发送至控制终端;
接收控制终端发送触控操作信息,并根据触控操作信息进行触控响应,生成第一触控响应界面。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
接收控制终端发送的触控操作信息,并根据触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹;
根据触控操作类型进行触控响应,执行对应触控操作类型的触控操作;
根据触控操作轨迹进行触控响应,执行触控操作得到对应的触控操作轨迹;
生成第一触控响应界面。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种终端控制方法,所述方法包括:
当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;所述预存的受控终端列表包括在此次远程控制操作之前,已与控制终端建立连接并接受所述控制终端远程操作的历史设备;
向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;所述触控操作信息包括受控终端的编号;所述受控终端的编号用于指示对应编号的受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面,生成第一触控响应界面;
对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示;
所述获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面,包括:
获取对所述受控终端的第一交互界面进行截屏的交互界面截屏数据;所述交互界面截屏数据包括屏幕UI数据、屏幕尺寸、分辨率;
根据所述交互界面截屏数据,确定所述受控终端的第一显示属性信息;
获取预设显示属性信息;
根据所述预设显示属性信息和所述受控终端的第一显示属性信息,对所述受控终端的交互界面截屏数据进行等比例缩放,得到缩放结果,并根据所述缩放结果对所述交互界面截屏数据进行截取或填充操作,得到处理后的交互界面截屏数据;
根据处理后的交互界面截屏数据,得到对应的第二交互界面。
2.根据权利要求1所述的方法,其特征在于,所述连接指令携带与身份认证操作对应的认证信息;所述向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接,包括:
向所选定的所述受控终端发送连接指令,使得所述受控终端响应所述连接指令,并对与所述身份认证操作对应的认证信息进行验证;
当接收到所述受控终端对所述连接指令的响应时,确定所述认证信息通过所述受控终端的验证,与所述受控终端建立连接。
3.根据权利要求1所述的方法,其特征在于,所述触控操作信息包括触控操作类型以及触控操作轨迹;所述根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面,包括:
根据所述触控操作类型,控制所述受控终端执行对应触控操作类型的触控操作;
根据所述触控操作轨迹,控制所述受控终端执行所述触控操作得到对应的触控操作轨迹;
获取所述受控终端进行触控响应后得到的第一触控响应界面。
4.一种终端控制方法,所述方法包括:
当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端,并使得所述控制终端根据所述第一交互界面进行截屏的交互界面截屏数据确定第一显示属性信息,根据预设显示属性信息和所述第一显示属性信息对所述交互界面截屏数据进行等比例缩放,得到缩放结果,并根据所述缩放结果对所述交互界面截屏数据进行截取或填充操作,得到处理后的交互界面截屏数据,根据处理后的交互界面截屏数据,得到对应的第二交互界面,当检测到针对所述第二交互界面的触控操作时,获取与所述触控操作对应的触控操作信息;所述交互界面截屏数据包括屏幕UI数据、屏幕尺寸、分辨率;
接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面;所述触控操作信息包括受控终端的编号,所述编号用于从对应受控终端所存储的界面数据中查找对应的响应界面,生成第一触控响应界面。
5.根据权利要求4所述的方法,其特征在于,所述接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面,包括:
接收所述控制终端发送的触控操作信息,并根据所述触控操作信息确定对应触控操作的触控操作类型和触控操作轨迹;
根据所述触控操作类型进行触控响应,执行对应触控操作类型的触控操作;
根据所述触控操作轨迹进行触控响应,执行所述触控操作得到对应的触控操作轨迹;
生成第一触控响应界面。
6.一种终端控制装置,其特征在于,所述装置包括:
受控终端选定模块,用于当检测到用户触发的选定操作时,根据所述选定操作,从预存的受控终端列表中选定待连接的受控终端;所述预存的受控终端列表包括在此次远程控制操作之前,已与控制终端建立连接并接受所述控制终端远程操作的历史设备;
受控终端连接模块,用于向所选定的所述受控终端发送连接指令,当接收到所选定的所述受控终端的对所述连接指令的响应时,与所选定的所述受控终端建立连接;
第二交互界面生成模块,用于获取所述受控终端的第一交互界面,并对所述第一交互界面进行渲染得到第二交互界面;
触控操作信息获取模块,用于当检测到用户触发的对所述第二交互界面的触控操作时,获取所述触控操作对应的触控操作信息;
第一触控响应界面获取模块,用于根据所述触控操作信息控制所述受控终端进行触控响应,并获取所述受控终端进行触控响应后得到第一触控响应界面;所述触控操作信息包括受控终端的编号;所述受控终端的编号用于指示对应编号的受控终端进行触控响应,并从所述受控终端存储的界面数据查找对应的响应界面,生成第一触控响应界面;
第二触控响应界面显示模块,用于对所述第一触控响应界面进行渲染得到第二触控响应界面,并显示;
所述第二交互界面生成模块,还用于:获取对所述受控终端的第一交互界面进行截屏的交互界面截屏数据;所述交互界面截屏数据包括屏幕UI数据、屏幕尺寸、分辨率;根据所述交互界面截屏数据,确定所述受控终端的第一显示属性信息;获取预设显示属性信息;根据所述预设显示属性信息和所述受控终端的第一显示属性信息,对所述受控终端的交互界面截屏数据进行等比例缩放,得到缩放结果,并根据所述缩放结果对所述交互界面截屏数据进行截取或填充操作,得到处理后的交互界面截屏数据;根据处理后的交互界面截屏数据,得到对应的第二交互界面。
7.根据权利要求6所述的装置,其特征在于,所述连接指令携带与身份认证操作对应的认证信息;所述受控终端连接模块,还用于:
向所选定的所述受控终端发送连接指令,使得所述受控终端响应所述连接指令,并对与所述身份认证操作对应的认证信息进行验证;当接收到所述受控终端对所述连接指令的响应时,确定所述认证信息通过所述受控终端的验证,与所述受控终端建立连接。
8.一种终端控制装置,其特征在于,所述装置包括:
控制终端连接模块,用于当接收到控制终端发送的连接指令时,响应所述连接指令,并与所述控制终端建立连接;
第一交互界面生成模块,用于对当前的显示界面进行截屏生成第一交互界面,并将所述第一交互界面发送至所述控制终端,并使得所述控制终端根据所述第一交互界面进行截屏的交互界面截屏数据确定第一显示属性信息,根据预设显示属性信息和所述第一显示属性信息对所述交互界面截屏数据进行等比例缩放,得到缩放结果,并根据所述缩放结果对所述交互界面截屏数据进行截取或填充操作,得到处理后的交互界面截屏数据,根据处理后的交互界面截屏数据,得到对应的第二交互界面,当检测到针对所述第二交互界面的触控操作时,获取与所述触控操作对应的触控操作信息;所述交互界面截屏数据包括屏幕UI数据、屏幕尺寸、分辨率;
第一触控响应界面生成模块,用于接收所述控制终端发送触控操作信息,并根据所述触控操作信息进行触控响应,生成第一触控响应界面;所述触控操作信息包括受控终端的编号,所述编号用于从对应受控终端所存储的界面数据中查找对应的响应界面,生成第一触控响应界面。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。
CN202010070281.3A 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质 Active CN111273850B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010070281.3A CN111273850B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010070281.3A CN111273850B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN111273850A CN111273850A (zh) 2020-06-12
CN111273850B true CN111273850B (zh) 2022-01-21

Family

ID=71003307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010070281.3A Active CN111273850B (zh) 2020-01-21 2020-01-21 终端控制方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN111273850B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111773712A (zh) * 2020-07-20 2020-10-16 网易(杭州)网络有限公司 交互控制方法及装置、电子设备和计算机可读存储介质
CN112306610A (zh) * 2020-11-02 2021-02-02 北京字节跳动网络技术有限公司 终端控制方法、装置和电子设备
CN112202825A (zh) * 2020-12-09 2021-01-08 江苏北弓智能科技有限公司 一种远程移动云桌面传输系统及方法
CN113938510A (zh) * 2021-09-29 2022-01-14 青岛海信移动通信技术股份有限公司 一种终端设备和终端控制方法
CN114217892A (zh) * 2021-12-01 2022-03-22 深圳Tcl新技术有限公司 界面内容的截取方法、装置及计算机可读存储介质
CN115268754A (zh) * 2022-07-26 2022-11-01 京东方科技集团股份有限公司 显示终端的控制方法、系统、显示设备以及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103176690A (zh) * 2011-11-16 2013-06-26 索尼公司 显示控制设备、显示控制方法和程序
CN104348878A (zh) * 2013-08-06 2015-02-11 好看科技(深圳)有限公司 用于远程控制移动终端的方法、装置、移动终端及系统
CN104506907A (zh) * 2014-11-25 2015-04-08 上海众应信息科技有限公司 控制端与多个远程被控终端之间的交互操作方法及系统
CN105357214A (zh) * 2015-11-26 2016-02-24 东莞酷派软件技术有限公司 远程控制方法、远程控制装置、终端和远程控制系统
CN106873928A (zh) * 2016-10-31 2017-06-20 深圳市金立通信设备有限公司 远程控制方法以及终端
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质
CN110324221A (zh) * 2018-03-30 2019-10-11 欧姆龙株式会社 支持装置、计算机可读存储介质、设定方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8812615B2 (en) * 2009-02-17 2014-08-19 Canon Kabushiki Kaisha Remote control of a host computer
CN103744391A (zh) * 2013-12-31 2014-04-23 闻泰通讯股份有限公司 电子设备的远程控制系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103176690A (zh) * 2011-11-16 2013-06-26 索尼公司 显示控制设备、显示控制方法和程序
CN104348878A (zh) * 2013-08-06 2015-02-11 好看科技(深圳)有限公司 用于远程控制移动终端的方法、装置、移动终端及系统
CN104506907A (zh) * 2014-11-25 2015-04-08 上海众应信息科技有限公司 控制端与多个远程被控终端之间的交互操作方法及系统
CN105357214A (zh) * 2015-11-26 2016-02-24 东莞酷派软件技术有限公司 远程控制方法、远程控制装置、终端和远程控制系统
CN106873928A (zh) * 2016-10-31 2017-06-20 深圳市金立通信设备有限公司 远程控制方法以及终端
CN110324221A (zh) * 2018-03-30 2019-10-11 欧姆龙株式会社 支持装置、计算机可读存储介质、设定方法
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质

Also Published As

Publication number Publication date
CN111273850A (zh) 2020-06-12

Similar Documents

Publication Publication Date Title
CN111273850B (zh) 终端控制方法、装置、计算机设备和存储介质
US11838650B2 (en) Photographing using night shot mode processing and user interface
CN111290695B (zh) 基于优先级控制的终端控制方法、装置和终端
CN111417028B (zh) 信息处理方法、装置、存储介质及电子设备
CN105512086B (zh) 信息处理设备以及信息处理方法
CN111309226B (zh) 基于通信质量的终端控制方法、装置、终端和计算机设备
CN107682714B (zh) 一种获取在线视频截图的方法及装置
US11102450B2 (en) Device and method of displaying images
CN111314441B (zh) 基于多区域控制的终端控制方法、装置和终端
CN111324248A (zh) 终端控制方法、装置、终端、计算机设备和存储介质
US9509733B2 (en) Program, communication apparatus and control method
CN112312217A (zh) 一种图像编辑方法、装置、计算机设备和存储介质
US11553157B2 (en) Device and method of displaying images
US11620414B2 (en) Display apparatus, display method, and image processing system
CN113490010A (zh) 基于直播视频的互动方法、装置、设备及存储介质
CN113573090A (zh) 游戏直播中的内容显示方法、装置、系统和存储介质
CN110086998B (zh) 一种拍摄方法及终端
US20150249695A1 (en) Transmission terminal, transmission system, transmission method, and recording medium storing transmission control program
CN111263004B (zh) 终端控制方法、装置、计算机设备和存储介质
CN111314442B (zh) 基于分时控制的终端控制方法、装置、终端和计算机设备
CN115967854A (zh) 拍照方法、装置及电子设备
CN110764852B (zh) 一种截图方法、终端及计算机可读存储介质
WO2016088477A1 (ja) 情報処理装置、情報処理方法およびプログラム
CN112529770A (zh) 图像处理方法、装置、电子设备和可读存储介质
CN112565844A (zh) 视频通信方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant