CN112286621A - 一种远程界面生成方法、装置、电子设备及介质 - Google Patents
一种远程界面生成方法、装置、电子设备及介质 Download PDFInfo
- Publication number
- CN112286621A CN112286621A CN202011600136.8A CN202011600136A CN112286621A CN 112286621 A CN112286621 A CN 112286621A CN 202011600136 A CN202011600136 A CN 202011600136A CN 112286621 A CN112286621 A CN 112286621A
- Authority
- CN
- China
- Prior art keywords
- interface
- terminal
- node
- information
- change information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供的一种远程界面生成方法、装置、电子设备及介质,通过获取发生变化的界面节点,获取到所述界面节点发生变化的变化信息,作为第一变化信息,将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。通过只将界面中界面节点的组成元素中发生变化的变化信息发送至远程终端,且通过数据传输变化信息,可以大幅减少界面内容变化时发送的数据量,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
Description
技术领域
本发明涉及移动互联网技术领域,尤其涉及一种远程界面生成方法、装置、电子设备及介质。
背景技术
随着移动互联网中云计算技术产业的快速发展,远程界面在生产生活中的应用得到了越来越多的重视,为人们提供了全新的界面应用服务及实时的界面体验。
现有的远程界面的生成方法中,普遍采用了视频流的方式传输界面信息,即将终端界面上的图像进行压缩生成视频流,并通过显示通道传输到显示终端上,显示终端对视频流进行解码并显示,从而实现远程界面的显示。但由于使用视频流的方式传输界面信息,占用的带宽较高,无法保证在网络带宽波动较大或带宽较小的情况下为用户提供稳定可靠的远程界面。
由此可见,目前的远程界面生成方法使用视频流传输界面信息,具有带宽占用过高、无法提供稳定可靠的远程界面的特点,因此不能适应复杂的网络环境。
发明内容
本发明提供一种远程界面生成方法、装置、电子设备及介质,用以解决现有技术中远程界面生成方法使用视频流传输界面信息,具有带宽占用过高、无法提供稳定可靠的远程界面,因此不能适应复杂的网络环境的缺陷,实现大幅减少界面内容变化时发送的数据量,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
本发明提供一种远程界面生成方法,包括:
若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;
将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
根据本发明提供的一种远程界面生成方法,若当前第一终端打开的第一应用程序中界面发生变化之后,还包括:
若所述第一终端通过重启界面事件打开所述第一应用程序的界面,则获取每一界面节点的节点信息;其中,节点信息用于表示界面节点的每一组成元素的信息;
将所述节点信息发送到第二终端,以使第二终端根据所述节点信息生成所述第一应用程序的界面;
其中,所述重启界面事件包括以下至少一种:切换应用程序、打开新的应用程序、打开弹窗以覆盖所述第一应用程序的界面。
根据本发明提供的一种远程界面生成方法,还包括:
在所述第一终端打开所述第一应用程序之后,若所述第一终端发生所述重启界面事件,则向所述第二终端发送用于提示所述第一终端发生所述重启界面事件的提示信息。
根据本发明提供的一种远程界面生成方法,所述将所述第一变化信息发送至第二终端,包括:
将所述第一变化信息加入至准备列表中;
通过转移进程,利用锁机制将所述第一变化信息从所述准备列表中转移至发送列表中;
通过所述发送列表,将所述第一变化信息进行编码压缩,发送至所述第二终端。
根据本发明提供的一种远程界面生成方法,还包括:
所述第一终端接收第二终端发送的第二变化信息;所述第二变化信息包括第二终端打开的第二应用程序中界面节点的组成元素发生变化的集合;
根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面。
根据本发明提供的一种远程界面生成方法,所述根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面,包括:
若任一界面节点的第二变化信息中发生变化的组成元素为所述任一界面节点的部分组成元素,则获取最近一次生成与所述任一界面节点对应的界面时使用的节点信息,作为目标节点信息;
根据所述第二变化信息和所述目标节点信息生成第二终端中打开的第二应用程序变化后的界面。
根据本发明提供的一种远程界面生成方法,还包括:
在显示所述第二终端中打开的第二应用程序的界面过程中,若接收到第二终端发生重启界面事件的提示信息,则在接收到第二终端的重启界面中每一界面节点的节点信息,以及至少一次接收到发生变化的界面节点的变化信息后,清除所述第二应用程序的界面,并根据接收到的节点信息和变化信息生成所述重启界面。
本发明还提供一种远程界面生成系统,包括:
识别模块,用于若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
获取模块,用于获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;
发送模块,用于将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述远程界面生成方法的步骤。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述远程界面生成方法的步骤。
本发明提供的一种远程界面生成方法、装置、电子设备及介质,通过获取发生变化的界面节点,获取到所述界面节点发生变化的变化信息,作为第一变化信息,将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。通过只将界面中界面节点的组成元素中发生变化的变化信息发送至远程终端,且通过数据传输变化信息,可以大幅减少界面内容变化时发送的数据量,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的远程界面生成方法的流程示意图;
图2是本发明提供的远程界面生成装置的结构示意图;
图3是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供的远程界面生成系统可以安装在终端设备上,此时安装了该远程界面生成系统的终端可以作为发送界面数据的发送端,或者作为接收界面数据的显示端,本实施例对此不作具体限制。
以下以第一终端作为发送界面数据的发送端,第二终端作为接收界面数据并显示远程界面的的远程终端,对该远程界面生成方法进行说明。
下面结合图1描述本发明提供的远程界面生成方法。参见图1,所述远程界面生成方法包括:
步骤101:若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
步骤102:获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;
步骤103:将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
获取发生变化的界面节点前,会持续扫描第一终端打开的第一应用程序的界面,当界面发生变化时,对界面中的所有界面节点进行扫描,通过识别和查找,可以直接获取到发生了变化的界面节点。其中,发生变化的界面节点可以为当前界面上的所有节点,也可以为当前界面的一部分节点。
具体的,可以在第一终端的内存中常驻运行一个Service服务,该Service不带任何ui界面或悬浮窗口,该Service服务监控系统中任何普通App和系统App界面上的变化,包括顶部Bar、下部的nativeBar和App主界面等等所有界面,每当用户使用手指滑动、点击或者App主动发生自发的轮播切换变化时,就会发生App界面变化,App界面变化会触发Service服务对界面进行一次View节点(即界面节点)扫描,扫描识别查找出发生变化的View节点。
查找出内容发生变化的界面节点后,获取发生变化的界面节点中具体的发生了变化的组成元素;其中,界面节点中的组成元素有多种,具体可以包括界面节点中的背景颜色、背景形状、文本数据、文本颜色、坐标信息、图片缓冲信息等,以及每个界面节点所对应的唯一的编号信息。将每个界面节点中发生了变化的组成元素集合起来,作为该界面节点的变化信息,将所有发生变化的界面节点的变化信息结合集合起来作为当前界面的第一变化信息。
具体的,当前界面中发生变化的某一个界面节点中只有一个组成元素发生了变化时,只需要将该界面节点中发生了变化的一个组成元素集合至第一变化信息中。例如,当一个界面节点中的内容未发生变化,只是位置发生了变化时,只需要把该界面节点的坐标信息结合到第一变化信息中并发送至第二终端,以使得第二终端只对显示该界面节点内容的位置进行调整。
生成第一变化信息后,将该第一变化信息发送至第二终端,并使得第二终端可以对该第一变化信息进行解码,从而实现对界面的重绘,达到生成远程界面的目的。
本发明提供的一种远程界面生成方法,通过获取发生变化的界面节点,获取到所述界面节点发生变化的变化信息,作为第一变化信息,将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。通过只将界面中界面节点的组成元素中发生变化的变化信息发送至远程终端,且通过数据传输变化信息,可以大幅减少界面内容变化时发送的数据量,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
具体的,在第一终端的内存中常驻运行一个Service服务,并在内存中创建一个prepareList和一个sendList。
当扫描到发生变化的View节点信息后,针对该View节点生成唯一编号ID、backgroudDrawable(即背景颜色、背景形状等信息)、text数据(即文本数据)、textColor(即文本颜色)、Rect(即坐标信息)、image(即图片缓冲信息)等等信息,构成NodeInfo对象(即变化信息),并且把NodeInfo对象加入到prepareList中,通过Service服务将NodeInfo对象发送至远程终端中,并在sendList记录该NodeInfo对象的信息。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,还包括:
若所述第一终端通过重启界面事件打开所述第一应用程序的界面,则获取每一界面节点的节点信息;其中,节点信息用于表示界面节点的每一组成元素的信息;
将所述节点信息发送到第二终端,以使第二终端根据所述节点信息生成所述第一应用程序的界面;
其中,所述重启界面事件包括以下至少一种:切换应用程序、打开新的应用程序、打开弹窗以覆盖所述第一应用程序的界面。
第一终端发送重启界面事件时,即当前界面从另一个应用程序切换到第一应用程序,或者打开第一应用程序,再或者第一应用程序中出现了覆盖整个程序界面的弹窗时,当前界面中的所有界面节点的内容都发生了变化,此时需要获取所有界面节点中的所有组成元素的信息,即获得当前界面中每一个界面节点的节点信息。
将当前界面中的每一个界面节点的节点信息发送至第二终端,可以使得远第二终端对显示的远程界面的内容进行全面的更新,即生成第一应用程序的全新的界面。
本实施例中,在界面重启时通过获取每一个界面节点的节点信息并发送至第二终端,从而可以保证在第二终端上生成完整的重启后的界面,实现远程界面的界面显示的连续性,提高用户对于远程界面的使用体验。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,还包括:
在所述第一终端打开所述第一应用程序之后,若所述第一终端发生所述重启界面事件,则向所述第二终端发送用于提示所述第一终端发生所述重启界面事件的提示信息。
当发生重启界面事件时,在界面的切换过程中,当前界面的所有界面节点及界面节点中的信息都会发生变化,此时所产生的数据量很大,在向远程终端发送每一界面节点的节点信息时,可能会由于远程终端的解析速度较慢,造成远程终端无法及时解析完成所有数据并生成远程界面,此时会导致远程界面的卡顿或黑屏问题,影响用户的使用体验。
因此,在重启界面事件发生时,向远程终端发送一个重启界面事件的提示信息,以提示远程终端保持当前界面不发生变化;当该重启界面事件结束时,向远程终端发送新的第一变化信息,使得远程终端可以直接生成完整的第一应用程序的界面。
具体的,第一终端发生重启界面事件时,即当用户打开App、切换Activity或打开弹窗覆盖旧的页面时候,Service服务发出界面重加载的事件(即重启界面事件),此时会清除prepareList和sendList中的内容,清除的同时会发送清除事件(即提示信息)给接收终端系统。
本实施例中,通过在重启界面事件发生时发送一个重启界面事件的提示信息,可以使得远程终端直接生成完整的第一应用程序的界面,减少切换过程中的异常现象,提高用户的使用体验。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,所述将所述第一变化信息发送至第二终端,包括:
将所述第一变化信息加入至准备列表中;
通过转移进程,利用锁机制将所述第一变化信息从所述准备列表中转移至发送列表中;
通过所述发送列表,将所述第一变化信息进行编码压缩,发送至所述第二终端。
具体的,在内存中也建立一个translateThread(即转移进程)线程,且该线程在Service服务器启动的时候就创建,translateThread线程在Service服务器启动的时候就创建,translateThread使用一直持有prepareList(即准备列表)的引用,并且一直在读取prepareList链表中的对象,当prepareList中没有对象时,translateThread线程会进入睡眠状态,当Service服务扫描到发生变化的View节点并向prepareList加入新的NodeInfo对象后,会唤醒translateThread,translateThread利用锁机制从prepareList中读取一个NodeInfo对象并把该NodeInfo对象从prepareList中转移到sendList(即发送列表)中,然后service服务把该NodeInfo对象进行编码压缩通过socket发送到远程的另外一台终端设备(即远程终端)中。
本实施例中,通过转移线程,利用锁机制将第一变化信息转移到发送列表中并记录,可以在读取一个第一变化信息时不会影响其他的变化信息,节省内存使用,同时记录的第一变化信息有利于后续对界面变化内容的查看。
以下以第一终端作为接收界面数据并显示远程界面的的远程终端,第二终端作为发送界面数据的发送端,对该远程界面生成方法进行说明。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,还包括:
所述第一终端接收第二终端发送的第二变化信息;所述第二变化信息包括第二终端打开的第二应用程序中界面节点的组成元素发生变化的集合;
根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面。
当第一终端作为接收界面数据的显示端时,远程终端即为界面数据的发送端,此时远程终端根据打开第二应用程序时界面节点的变化信息生成第二变化信息,第一终端接收到第二变化信息时,解码该第二变化信息并生成远程终端的远程界面。
具体的,第一终端接收到NodeInfo数据后,使用该NodeInfo数据中进行重绘工作,达成远程界面的效果;其中,Rect数据表示重新绘制目标的坐标和大小,Rect依照发送终端的屏幕宽高和接收终端设备的屏幕的宽高尺寸进行还原计算,计算出新的坐标位置和分辨率宽高,解决第一终端和远程终端设备分辨率不一致造成的界面显示位置错误问题,再依照backgroundDrawable绘制背景图案,依照text绘制文字内容,如果绘制的目标不是文本,而是图形,则使用image图像来重新填充图片。
本实施例中,第一终端可以作为远程界面的显示端,通过第二变化信息中的组成元素进行远程界面的重绘,生成第二应用程序变化后的界面。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,所述根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面,包括:
若任一界面节点的第二变化信息中发生变化的组成元素为所述任一界面节点的部分组成元素,则获取最近一次生成与所述任一界面节点对应的界面时使用的节点信息,作为目标节点信息;
根据所述第二变化信息和所述目标节点信息生成第二终端中打开的第二应用程序变化后的界面。
当接收到的第二变化信息中发生变化的组成元素为任一界面节点的部分组成元素,说明该界面节点中只有部分组成元素的内容发生了变化,因此第一终端在显示第二应用程序变化后的界面时,针对该界面节点,只需要更改发生变化的组成元素即可。在界面节点的信息中,存在着该界面节点对应的唯一的编号信息,第一终端可以根据该编号信息确定该界面节点最近一次的节点信息作为目标节点信息,从而根据第二变化信息和所述目标节点信息生成远程终端中打开的第二应用程序变化后的界面。
例如,当界面数据的发送端产生滑动事件时,界面发生变化,Service服务器监控并接收到发生变化的View节点对应的NodeInfo数据,该数据保存在prepareList上,当translateThread取数据的时候会把取到的NodeInfo的id(即编号信息)与sendList链表上的已发送的NodeInfo 的id进行比较,如果id存在,则表示数据为该id对应的界面节点数据的更新,而不是新的View节点的加载,则只需要把更新的View节点的Rect位置基础数据发送出去,接收端接收数据后在本地找到之前的数据,对NodeInfo仅更新Rect数据,使用Rect数据进行绘制,而颜色、文本、背景、图片等不需要传输,最终减少发送的数据量。
本实施例中,通过获取第二变化信息和所述目标节点信息生成远程终端中打开的第二应用程序变化后的界面,可以大幅减少变化信息传输量,且不影响远程界面的生成及内容的完整性,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
进一步地,在上述实施例的基础上,根据本发明提供的一种远程界面生成方法,还包括:
在显示所述第二终端中打开的第二应用程序的界面过程中,若接收到第二终端发生重启界面事件的提示信息,则在接收到第二终端的重启界面中每一界面节点的节点信息,以及至少一次接收到发生变化的界面节点的变化信息后,清除所述第二应用程序的界面,并根据接收到的节点信息和变化信息生成所述重启界面。
在接收到界面数据的发送端发出的重启界面事件的提示信息时,第一终端不会立即将界面内容清除,而是在接收到远程终端的重启界面中每一界面节点的节点信息,以及至少一次接收到发生变化的界面节点的变化信息后,在将第二应用程序的界面清除,从而在界面显示方面不会由于第一终端的解析速度较慢,造成第一终端无法及时解析完成所有数据且无法生成远程界面的问题影响用户的使用体验。
具体的,接收端接收到清除事件后,接收端不会立马清除界面,而是等到下一个NodeInfo数据发送之后再清除界面,清除之后界面所有变化都会触发Service服务,所有View节点的NodeInfo都需要重新链接到链表中,传输也需要重新传输所有的NodeInfo节点。接收端接收后才开始清除已有的界面并绘制新的界面。
本实施例中,接收到重启界面事件的提示信息时不立即清除界面,可以在第一终端直接生成完整的第二应用程序的界面,减少界面整体切换过程中的异常现象,提高用户的使用体验。
下面对本发明提供的远程界面生成装置进行描述,下文描述的远程界面生成装置与上文描述的远程界面生成方法可相互对应参照。参见图2,远程界面生成装置包括识别模块201、获取模块202、发送模块203,其中:
识别模块201,用于若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
获取模块202,用于获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;
发送模块203,用于将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
本实施例提供的远程界面生成装置,适用于上述各实施例提供的远程界面生成方法,此处不再赘述。
本发明提供的一种远程界面生成装置,通过获取发生变化的界面节点,获取到所述界面节点发生变化的变化信息,作为第一变化信息,将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。通过只将界面中界面节点的组成元素中发生变化的变化信息发送至远程终端,且通过数据传输变化信息,可以大幅减少界面内容变化时发送的数据量,从而减少界面信息传输时的带宽占用量,可以在较窄的网络带宽下提供稳定可靠的远程界面,提高对复杂网络环境的适应性。
进一步地,根据本发明提供的一种远程界面生成方法,还包括:
若所述第一终端通过重启界面事件打开所述第一应用程序的界面,则获取每一界面节点的节点信息;其中,节点信息用于表示界面节点的每一组成元素的信息;
将所述节点信息发送到第二终端,以使第二终端根据所述节点信息生成所述第一应用程序的界面;
其中,所述重启界面事件包括以下至少一种:切换应用程序、打开新的应用程序、打开弹窗以覆盖所述第一应用程序的界面。
进一步地,根据本发明提供的一种远程界面生成方法,还包括:
在所述第一终端打开所述第一应用程序之后,若所述第一终端发生所述重启界面事件,则向所述第二终端发送用于提示所述第一终端发生所述重启界面事件的提示信息。
进一步地,根据本发明提供的一种远程界面生成方法,所述将所述第一变化信息发送至第二终端,包括:
将所述第一变化信息加入至准备列表中;
通过转移进程,利用锁机制将所述第一变化信息从所述准备列表中转移至发送列表中;
通过所述发送列表,将所述第一变化信息进行编码压缩,发送至所述第二终端。
进一步地,根据本发明提供的一种远程界面生成方法,还包括:
所述第一终端接收第二终端发送的第二变化信息;所述第二变化信息包括第二终端打开的第二应用程序中界面节点的组成元素发生变化的集合;
根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面。
进一步地,根据本发明提供的一种远程界面生成方法,所述根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面,包括:
若任一界面节点的第二变化信息中发生变化的组成元素为所述任一界面节点的部分组成元素,则获取最近一次生成与所述任一界面节点对应的界面时使用的节点信息,作为目标节点信息;
根据所述第二变化信息和所述目标节点信息生成第二终端中打开的第二应用程序变化后的界面。
进一步地,根据本发明提供的一种远程界面生成方法,还包括:
在显示所述第二终端中打开的第二应用程序的界面过程中,若接收到第二终端发生重启界面事件的提示信息,则在接收到第二终端的重启界面中每一界面节点的节点信息,以及至少一次接收到发生变化的界面节点的变化信息后,清除所述第二应用程序的界面,并根据接收到的节点信息和变化信息生成所述重启界面。
图3示例了一种电子设备的实体结构示意图,如图3所示,该电子设备可以包括:处理器(processor)310、通信接口(Communications Interface)320、存储器(memory)330和通信总线340,其中,处理器310,通信接口320,存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑指令,以执行远程界面生成方法,该方法包括:若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
此外,上述的存储器330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行远程界面生成方法,该方法包括:若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各提供的远程界面生成方法,该方法包括:若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种远程界面生成方法,其特征在于,包括:
若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发生变化的集合,所述组成元素用于表征所述界面节点的属性信息;
将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
2.根据权利要求1所述的一种远程界面生成方法,其特征在于,若当前第一终端打开的第一应用程序中界面发生变化之后,还包括:
若所述第一终端通过重启界面事件打开所述第一应用程序的界面,则获取每一界面节点的节点信息;其中,节点信息用于表示界面节点的每一组成元素的信息;
将所述节点信息发送到第二终端,以使第二终端根据所述节点信息生成所述第一应用程序的界面;
其中,所述重启界面事件包括以下至少一种:切换应用程序、打开新的应用程序、打开弹窗以覆盖所述第一应用程序的界面。
3.根据权利要求2所述的一种远程界面生成方法,其特征在于,还包括:
在所述第一终端打开所述第一应用程序之后,若所述第一终端发生所述重启界面事件,则向所述第二终端发送用于提示所述第一终端发生所述重启界面事件的提示信息。
4.根据权利要求1所述的一种远程界面生成方法,其特征在于,所述将所述第一变化信息发送至第二终端,包括:
将所述第一变化信息加入至准备列表中;
通过转移进程,利用锁机制将所述第一变化信息从所述准备列表中转移至发送列表中;
通过所述发送列表,将所述第一变化信息进行编码压缩,发送至所述第二终端。
5.根据权利要求1所述的一种远程界面生成方法,其特征在于,还包括:
所述第一终端接收第二终端发送的第二变化信息;所述第二变化信息包括第二终端打开的第二应用程序中界面节点的组成元素发生变化的集合;
根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面。
6.根据权利要求5所述的一种远程界面生成方法,其特征在于,所述根据所述第二变化信息生成第二终端中打开的第二应用程序变化后的界面,包括:
若任一界面节点的第二变化信息中发生变化的组成元素为所述任一界面节点的部分组成元素,则获取最近一次生成与所述任一界面节点对应的界面时使用的节点信息,作为目标节点信息;
根据所述第二变化信息和所述目标节点信息生成第二终端中打开的第二应用程序变化后的界面。
7.根据权利要求5所述的一种远程界面生成方法,其特征在于,还包括:
在显示所述第二终端中打开的第二应用程序的界面过程中,若接收到第二终端发生重启界面事件的提示信息,则在接收到第二终端的重启界面中每一界面节点的节点信息,以及至少一次接收到发生变化的界面节点的变化信息后,清除所述第二应用程序的界面,并根据接收到的节点信息和变化信息生成所述重启界面。
8.一种远程界面生成系统,其特征在于,包括:
识别模块,用于若第一终端打开的第一应用程序中界面发生变化,则获取发生变化的界面节点;
获取模块,用于获取所述界面节点发生变化的变化信息,作为第一变化信息;其中,所述第一变化信息包括在所述界面节点的组成元素发送变化的结合,所述组成元素用于表征界面节点的属性信息;
发送模块,用于将所述第一变化信息发送至第二终端,并在第二终端根据所述在所述界面节点的组成元素发生变化的集合生成所述第一应用程序变化后的界面。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述一种远程界面生成方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述一种远程界面生成方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011600136.8A CN112286621A (zh) | 2020-12-30 | 2020-12-30 | 一种远程界面生成方法、装置、电子设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011600136.8A CN112286621A (zh) | 2020-12-30 | 2020-12-30 | 一种远程界面生成方法、装置、电子设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112286621A true CN112286621A (zh) | 2021-01-29 |
Family
ID=74426664
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011600136.8A Pending CN112286621A (zh) | 2020-12-30 | 2020-12-30 | 一种远程界面生成方法、装置、电子设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112286621A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104395878A (zh) * | 2012-04-26 | 2015-03-04 | 利维帕尔森有限公司 | 动态用户界面定制 |
CN106325851A (zh) * | 2016-08-10 | 2017-01-11 | 复旦大学 | 一种Android应用交互式远程协作方法 |
CN106575232A (zh) * | 2014-08-22 | 2017-04-19 | 微软技术许可有限责任公司 | 图形用户界面的远程管理 |
CN109408086A (zh) * | 2018-09-28 | 2019-03-01 | 平安普惠企业管理有限公司 | App的界面更新方法、装置、计算机设备及存储介质 |
WO2020220272A1 (zh) * | 2019-04-30 | 2020-11-05 | Oppo广东移动通信有限公司 | 更改资源状态的方法、系统、终端及存储介质 |
CN111897612A (zh) * | 2020-07-31 | 2020-11-06 | 平安普惠企业管理有限公司 | 页面更新方法、装置、电子设备及存储介质 |
-
2020
- 2020-12-30 CN CN202011600136.8A patent/CN112286621A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104395878A (zh) * | 2012-04-26 | 2015-03-04 | 利维帕尔森有限公司 | 动态用户界面定制 |
CN106575232A (zh) * | 2014-08-22 | 2017-04-19 | 微软技术许可有限责任公司 | 图形用户界面的远程管理 |
CN106325851A (zh) * | 2016-08-10 | 2017-01-11 | 复旦大学 | 一种Android应用交互式远程协作方法 |
CN109408086A (zh) * | 2018-09-28 | 2019-03-01 | 平安普惠企业管理有限公司 | App的界面更新方法、装置、计算机设备及存储介质 |
WO2020220272A1 (zh) * | 2019-04-30 | 2020-11-05 | Oppo广东移动通信有限公司 | 更改资源状态的方法、系统、终端及存储介质 |
CN111897612A (zh) * | 2020-07-31 | 2020-11-06 | 平安普惠企业管理有限公司 | 页面更新方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108880921B (zh) | 网页监测方法、装置、存储介质及服务器 | |
CN113368492B (zh) | 渲染的方法、装置 | |
US20140052801A1 (en) | Method for transmitting messages in instant messaging, client and storage medium thereof | |
CN112114928B (zh) | 显示页面的处理方法和装置 | |
CN109545333A (zh) | Dicom影像显示、处理的方法及装置 | |
CN111915705A (zh) | 图片可视化编辑方法、装置、设备和介质 | |
CN112286621A (zh) | 一种远程界面生成方法、装置、电子设备及介质 | |
CN113934481A (zh) | 一种通知信息的推送方法、智能终端及存储介质 | |
CN111767492A (zh) | 图片加载方法、装置、计算机设备及存储介质 | |
CN110784773A (zh) | 弹幕生成方法、装置、电子设备及存储介质 | |
CN108132767B (zh) | 应用窗口预览方法和系统 | |
CN115643468A (zh) | 海报生成方法、装置、电子设备及存储介质 | |
US20150269131A1 (en) | Content conversion apparatus and method, and communication system | |
CN113127260B (zh) | 一种显示异常处理方法、装置、设备及介质 | |
CN116841660A (zh) | 数据传输方法、云桌面虚拟机、云终端及可读存储介质 | |
CN116204149B (zh) | 一种提升Android操作系统显示性能的方法 | |
CN113613043A (zh) | 屏幕显示和图像处理方法以及嵌入式设备和云服务器 | |
CN113297522A (zh) | 一种页面渲染方法、装置、电子设备及可读存储介质 | |
EP3783505A1 (en) | Webpage frame acquisition method, server and storage medium | |
CN112423005A (zh) | 直播中的消息展示方法、装置及电子设备 | |
CN112287263B (zh) | 网页显示方法、装置、系统及终端、计算机可读存储介质 | |
CN113672332B (zh) | 窗口显示方法、装置、设备、存储介质和程序 | |
CN115022204B (zh) | Rtc的传输时延检测方法、装置以及设备 | |
CN111800669B (zh) | 安卓系统下文本字幕的渲染方法和装置 | |
CN110895457B (zh) | 字符显示方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210129 |
|
RJ01 | Rejection of invention patent application after publication |