CN116743827B - 批量操控云手机的方法、服务器、触屏终端及存储介质 - Google Patents

批量操控云手机的方法、服务器、触屏终端及存储介质 Download PDF

Info

Publication number
CN116743827B
CN116743827B CN202311025985.9A CN202311025985A CN116743827B CN 116743827 B CN116743827 B CN 116743827B CN 202311025985 A CN202311025985 A CN 202311025985A CN 116743827 B CN116743827 B CN 116743827B
Authority
CN
China
Prior art keywords
mobile phone
cloud mobile
phone instance
instance
touch screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311025985.9A
Other languages
English (en)
Other versions
CN116743827A (zh
Inventor
胡云皓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Suzhou Software Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202311025985.9A priority Critical patent/CN116743827B/zh
Publication of CN116743827A publication Critical patent/CN116743827A/zh
Application granted granted Critical
Publication of CN116743827B publication Critical patent/CN116743827B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/40Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using virtualisation of network functions or resources, e.g. SDN or NFV entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请提供了一种批量操控云手机的方法、服务器、触屏终端及存储介质,涉及云手机虚拟化技术,其中,应用于服务器的方法包括:根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端;根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例;根据所述触屏终端上传的第二操控信息,发送与所述第二操控信息对应的操控指令;获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新。本申请有效避免了群控数量和群控质量(卡顿等)受限于终端性能的问题,且使操作更直观、灵活,并有利于保证操控的精准度。

Description

批量操控云手机的方法、服务器、触屏终端及存储介质
技术领域
本申请涉及ARM架构的云手机虚拟化技术,特别涉及一种批量操控云手机的方法、服务器、触屏终端及存储介质。
背景技术
云手机是在云上运行应用程序(Application,APP)的虚拟手机,由远程的云服务器提供手机处理器所需的算力,手机作为接收终端和网络设备。
现有的云手机解决方案,主要是基于ARM架构的虚拟化技术,在服务端虚拟出安卓系统手机的软硬件规格,然后分配给客户进行使用。其中,ARM架构,曾称进阶精简指令集机器(Advanced RISC Machine)更早称作Acorn RISC Machine,是一个32位精简指令集(Reduced Instruction Set Computer,RISC)处理器架构。客户通过手机或电脑客户端,以及网页、H5等终端入口,访问、操作手机系统,终端上行控制流,服务端下行音视频流以及控制反馈流,从而形成完整的交互闭环,完成游戏挂机、互联网营销以及仿真测试等多种场景。
目前的云手机批量操控的主要场景有两种,一种是基于个人计算机(PersonalComputer,PC)客户端,一种是基于移动客户端(触屏)。这两种场景下,主要使用的技术都是预定义宏命令以及批量实例选择。选择实例的方式,都是通过有序排列,进行点击选择。在用户完成批量选择后,需要通过菜单选择预定义的宏命令,该宏命令是系统预设的。当用户选择好需要执行的宏命令,服务端会将相关命令的执行发送到每个实例。
此中方式存在以下缺点:
(1)批量操控方式单一。现有云手机解决方案中的群控功能,用户只能通过预定义的宏命令进行预设的批量操控,实现固定有限的操作序列;
(2)在移动设备上的操作不直观。大部分的移动终端应用场景,由于近场操控,所以人机交互以更便捷的触屏为主。而现有技术方案中基于触屏的群控操作也还仅能通过下拉菜单项进行预置宏命令选择;
(3)批量操作的交互受限于终端性能。由于每台云手机实例展示,都是完整的视频流,因此对于流量带宽以及本地编解码的性能要求较高,并且当批量控制的云手机台数达到某个限制,群控会卡顿无法响应。
因此,如何增强云手机操控尤其是云手机的批量操控的性能,成为本领域技术人员的一主要研究方向。
发明内容
本申请实施例要达到的技术目的是提供一种批量操控云手机的方法、服务器、触屏终端及存储介质,用以解决现有技术中对云手机进行批量操控时存在操控方式单一、在移动设备上操作不直观,且操控数量和质量受终端性能限制的问题。
为解决上述技术问题,本申请实施例提供了一种批量操控云手机的方法,应用于服务器,包括:
根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新。
具体地,如上所述的方法,所述对所述目标视频流进行更新,包括:
根据所述主云手机实例对应的第一操控结果对各所述副云手机实例对应的第二操控结果进行相似性验证,得到各所述副云手机实例对应的验证结果;
根据所述第一操控结果以及所述验证结果为验证通过的所述第二操控结果对所述目标视频流进行更新。
进一步的,如上所述的方法,在得到各所述副云手机实例对应的验证结果之后,所述方法还包括:
向所述验证结果为验证失败的所述副云手机实例发送第一回溯指令,所述第一回溯指令用于使所述副云手机实例根据可逆操控指令堆栈回溯至接收到所述操控指令之前的状态。
具体地,如上所述的方法,还包括:
根据所述触屏终端上传的回溯操控信息,向目标云手机实例发送第二回溯指令,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态;
根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新。
进一步的,如上所述的方法,在发送回溯指令之前,还包括:
将所述操控指令压入与各所述云手机实例对应的操控指令堆栈;
获取与所述操控指令对应的用于进行回溯的可逆操控指令,并将所述可逆操控指令压入与各所述云手机实例对应的可逆操控指令堆栈,其中,当所述操控指令不可逆时,确定所述可逆操控指令为空指令。
具体地,如上所述的方法,所述通过叠加至少一个云手机实例的视频流,得到目标视频流,包括:
获取各所述云手机实例对应的位置信息,所述位置信息包括:坐标信息和深度信息;
根据所述位置信息对所述各所述云手机实例对应的视频流进行排列,得到视频排列信息;
根据所述视频排列信息对所述视频流进行拼接,得到发送至所述触屏终端的目标视频流。
具体地,如上所述的方法,所述方法包括:
根据所述触屏终端上传的第三操控信息,确定需要进行位置变动的目标云手机实例以及位置变动操作,所述第三操控信息为所述触屏终端响应用户的第三多触点操作产生;
根据所述位置变动操作改变所述目标云手机实例对应的第一位置信息,和/或,改变除所述目标云手机实例之外的至少一个所述云手机实例对应的第二位置信息;
基于改变后的所述第一位置信息和/或所述第二位置信息,更新所述目标视频流。
本申请的另一实施例还提供了一种批量操控云手机的方法,应用于触屏终端,包括:
响应用户的登陆操作,上传账号登陆信息至服务器;
根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
根据所述服务器实时发送的所述目标视频流进行显示更新。
具体地,如上所述的方法,还包括:
响应用户对至少一个所述云手机实例的回溯操作,上传回溯操控信息至所述服务器。
具体地,如上所述的方法,还包括:
响应用户对需要进行位置变动的目标云手机实例的第三多触点操作,上传第三操控信息至所述服务器。
本申请的再一实施例提供了一种服务器,包括:
第一处理模块,用于根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
第二处理模块,用于根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
第三处理模块,用于根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
第四处理模块,用于获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新。
本申请的又一实施例提供了一种触屏终端,包括:
第五处理模块,用于响应用户的登陆操作,上传账号登陆信息至服务器;
第六处理模块,用于根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
第七处理模块,用于响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
第八处理模块,用于响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
第九处理模块,用于根据所述服务器实时发送的所述目标视频流进行显示更新。
本申请的另一实施例提供了一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的应用于服务器的批量操控云手机的方法的步骤,或者,实现如上所述的应用于触屏终端的批量操控云手机的方法的步骤。
本申请的再一实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的应用于服务器的批量操控云手机的方法的步骤,或者,实现如上所述的应用于触屏终端的批量操控云手机的方法的步骤。
与现有技术相比,本申请实施例提供的批量操控云手机的方法、服务器、触屏终端及存储介质,至少具有以下有益效果:
通过叠加视频流的方式,将需要占用的多个视频通道合并为一个,并将视频流的渲染计算置于算力较强的云端,有效避免了群控数量和群控质量(卡顿等)受限于终端性能的问题,且基于多触点操作的方式获取用户操作,可以改变目前批量操作仅支持预定义宏命令的方式,使操作更直观、灵活,也便于支持用户的个性化批量操作,并有利于保证对云手机实例操控的精准度。
附图说明
图1为应用于服务器的批量操控云手机的方法的流程示意图之一;
图2为应用于服务器的批量操控云手机的方法的流程示意图之二;
图3为应用于服务器的批量操控云手机的方法的流程示意图之三;
图4为应用于服务器的批量操控云手机的方法的流程示意图之四;
图5为应用于服务器的批量操控云手机的方法的流程示意图之五;
图6为应用于服务器的批量操控云手机的方法的流程示意图之六;
图7为应用于触屏终端的批量操控云手机的方法的流程示意图;
图8为本申请中的服务器的结构示意图;
图9为本申请中的触屏终端的结构示意图;
图10为云手机实例视频流叠加的示意图;
图11为多触点操作示意图。
具体实施方式
为使本申请要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具体实施例进行详细描述。在下面的描述中,提供诸如具体的配置和组件的特定细节仅仅是为了帮助全面理解本申请的实施例。因此,本领域技术人员应该清楚,可以对这里描述的实施例进行各种改变和修改而不脱离本申请的范围和精神。另外,为了清楚和简洁,省略了对已知功能和构造的描述。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。
在本申请的各种实施例中,应理解,下述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A 和/或B,可以表示:单独存在A,同时存在A 和B,单独存在B 这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
在本申请所提供的实施例中,应理解,“与A 相应的B”表示B 与A 相关联,根据A可以确定B。但还应理解,根据A 确定B 并不意味着仅仅根据A 确定B,还可以根据A 和/或其它信息确定B。
参见图1,本申请的一实施例提供了一种批量操控云手机的方法,应用于服务器,包括:
步骤S101,根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
步骤S102,根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
步骤S103,根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
步骤S104,获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新。
在本实施例中,服务器在接收到触屏终端(在本实施例中尤指管理员用户的触屏终端)上传的账户登陆信息后,会确定该账户下的各云手机实例,并基于批处理的显示框架(Frame)对各云手机实例的视频流进行叠加,得到需要显示的单一视频流即目标视频流,并将该目标视频流发送至触屏终端进行显示,如图10所示;其中,显示框架中的显示方式可以用户喜好设置,包括但不限于平铺、叠放、九宫格、水平线性等。其中,显示框架可以根据各云手机实例的相对位置,进行实时渲染,并将渲染后的视频流推送至触屏终端。从而将群控的展示操控的渲染计算置于算力较强的云端,避免群控数量受限于终端性能。
在将目标视频流发送至触屏终端显示后,用户可根据后续需要进行批量操控的主云手机实例和/或副云手机实例,对触屏终端进行对应的第一多触点操作来选择对应的云手机实例,触屏终端响应用户的第一多触点操作,向服务器上传对应的第一次操控信息,进而服务器基于该第一操控信息确定需要进行操控的主云手机实例和/或副云手机实例。需要说明的是,该主云手机实例可以确定为与用户触发的主云手机实例确定按钮对应的云手机实例,或者,确定为用户选择的第一个云手机实例。
在确定需要进行批量操控的云手机实例后,触屏终端会响应用户对主云手机实例进行操控的第二多触点操作,向服务器上传第二操控信息,服务器根据该第二操控信息,会向主云手机实例和/或副云手机实例发送与第二操控信息对应的操控指令,以操控主云手机实例和/或副云手机实例执行与用户操作对应的步骤。其中操控指令为通过对操控进行指令封装得到,包括但不限于操控的起始位置,滑动轨迹以及按压力度等。
进一步的,会获取主云手机实例和/或副云手机实例执行操控指令后得到的操控结果,并基于该操控结果对目标视频流进行更新,由于目标视频流会实时发送至触屏终端,使得触屏终端的显示内容也同步更新。
需要说明的是,本文中所述的多触点操作是指通过单点和/或多点的组合实现,如图11所示,包括但不限于双指长按连续吸附实例、单指短按选择单个实例、双指连击全选、单指单击剔除、双指画闭环圆圈定范围等。更具体的,为避免多手指操控对单实例和多实例操控精确度的影响,可采用类似弹吉他的方式,以某手指压住固定位置(固定触点),另一个手指进行操控(动态触点)的组合方式,如点击、滑动、长按等,实现不同的操控。在一实施例中,当已选择多个云手机进行批量处理时,为区分批量操控和单独对主云手机的操控,因此确定批量操控和单独对主云手机的操控中的一个需要采用上述类似弹吉他的方式,即需要以某手指压住固定位置,另一个则不需要以某手指压住固定位置。
综上所述,本实施例通过叠加视频流的方式,将需要占用的多个视频通道合并为一个,并将视频流的渲染计算置于算力较强的云端,有效避免了群控数量和群控质量(卡顿等)受限于终端性能的问题,且基于多触点操作的方式获取用户操作,可以改变目前批量操作仅支持预定义宏命令的方式,使操作更直观、灵活,也便于支持用户的个性化批量操作,并有利于保证对云手机实例操控的精准度。
参见图2,具体地,如上所述的方法,所述对所述目标视频流进行更新,包括:
步骤S201,根据所述主云手机实例对应的第一操控结果对各所述副云手机实例对应的第二操控结果进行相似性验证,得到各所述副云手机实例对应的验证结果;
步骤S202,根据所述第一操控结果以及所述验证结果为验证通过的所述第二操控结果对所述目标视频流进行更新。
在本实施例中,在获取到主云手机实例对应的第一操控结果和各副云手机实例对应的第二操控结果后,会基于第一操控结果对第二操控结果进行相似性验证,以判断各副云手机实例是否对操控指令的执行达到预期,避免部分副云手机实例中由于对象的差异,无法响应与主云手机实例完全相同的操作。
其中,在一具体实施例中相似性验证为,通过人工智能(ArtificialIntelligence,AI)算法对各副云手机实例执行操控指令后的画面与主云手机实例执行操控指令后的画面进行相似性比对,当其相似性低于预设值(例如:80%)时,确定验证失败,否则确定验证通过。其中,AI算法主要为图像比对算法,即对统一指令执行后的界面进行哈希值计算和比较。
进而,根据第一操控结果以及验证结果为验证通过的第二操控结果对目标视频流进行更新,具体为更新各操控结果在目标视频流中的视频区域。
进一步的,如上所述的方法,在得到各所述副云手机实例对应的验证结果之后,所述方法还包括:
向所述验证结果为验证失败的所述副云手机实例发送第一回溯指令,所述第一回溯指令用于使所述副云手机实例根据可逆操控指令堆栈回溯至接收到所述操控指令之前的状态。
在本实施例中,对于验证结果为验证失败的副云手机实例,为保证后续操控不受当前验证失败的影响,需要对副云手机实例进行回溯,具体地为通过向验证失败的副云手机实例发送第一回溯指令,使副云手机实例根据可逆操控指令堆栈回溯至接收到操控指令之前的状态。其中,该可逆操控指令堆栈中的指令与接收到的操控指令对应,后续会对如何获取可逆操控指令堆栈进行详述,在此不再赘述。
进一步的,在回溯到之前的状态后,还可重新根据该操控指令再次执行,并对每次的操控结果进行验证,直至验证通过或执行到预设次数,并更新目标视频流,以避免偶然误差导致的执行错误。
参见图3,具体地,如上所述的方法,还包括:
步骤S301,根据所述触屏终端上传的回溯操控信息,向目标云手机实例发送第二回溯指令,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态;
步骤S302,根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新。
在本实施例中,用户还可根据需求对各云手机实例进行回溯,其中,用户在触屏终端选择需要进行回溯的目标云手机实例,该目标云手机实例可以与上述的主云手机实例和/或副云手机实例相同,也可不同。触屏终端响应用户的选择,生成回溯操控信息并发送至服务器,服务器根据该回溯操控信息确定需要进行回溯的目标云手机实例以及需要回溯到的预设状态,进而向目标云手机实例发送第二回溯指令,使目标云手机实例根据可逆操控指令堆栈回溯到对应的预设状态,进而服务器获取目标云手机实例回溯后的预设状态,并对目标视频流进行更新。其中,该可逆操控指令堆栈中的指令与接收到的操控指令对应,后续会对如何获取可逆操控指令堆栈进行详述,在此不再赘述。
需要说明的是,该预设状态包括但不限于目标云手机实例的出厂状态、本次账户登陆后的初始状态、某一次操控后的状态。
在一具体实施例中,管理员用户可将账户下的批量云手机实例分派给不同子账户,子账户用户可以操控分配到的云手机实例。管理账户批量操作手机将冻结子账户的使用,管理员用户选择批量手机实例后,可使用一键Home,将各云手机实例恢复到相同界面,便于进行触屏群控操作。
本申请采用的用户实例一键共享,不同于现有产品的一键新机,是基于本方案的批处理技术方案,在特定场景下,进行的云手机实例状态复原。针对在线教育中,实际操作教学,可使用该系统。即教师为批量控制管理员角色,下发多部云手机到个人账户,即学生终端上。教师可以为学生终端上进行安装APP以及演示操作、书写、画画以及交互。其分步骤操作也通过指令堆栈进行压栈记录,在必要的场景下,教师可冻结个人用户的操作,进行一键Home,即回溯操作指令,然后再进行统一教学内容。对于某些个人用户下的云手机实例,可以将实例进行调换,实现点对点分享。
参见图4,进一步的,如上所述的方法,在发送回溯指令之前,还包括:
步骤S401,将所述操控指令压入与各所述云手机实例对应的操控指令堆栈;
步骤S402,获取与所述操控指令对应的用于进行回溯的可逆操控指令,并将所述可逆操控指令压入与各所述云手机实例对应的可逆操控指令堆栈,其中,当所述操控指令不可逆时,确定所述可逆操控指令为空指令。
在本实施例中,各云手机实例(主云手机实例和/或副云手机实例)在接收到操控指令,会根据接收操控指令的时间,将操控指令压入对应的操控指令堆栈中,以便于后续进行历史查询等操作。
进一步的,还会根据各操控指令,获取其对应的用于进行回溯的可逆操控指令,并将其压入对应的可逆操控指令堆栈中,以便于在有回溯需求的情况下,可通过可逆操控指令堆栈中的各可逆操控指令进行回溯。需要说明的是,由于并非所有的操控指令均可逆,因此会在获取可逆操控指令时对操控指令进行是否可逆的判断,若其没有对应的可逆操控指令时,将所述空指令作为可逆操控指令压入可逆操控指令堆栈中。
其中,通过建立可逆操控指令堆栈可以解决各个云手机实例由于内容展现不同步,对宏命令、或是用户触屏操作序列的同步执行结果不可控的问题,给予各个云手机实例可回溯的指令序列,可让实例状态尽量回复到用户发起批量处理之前的状态。
参加图5,具体地,如上所述的方法,所述通过叠加至少一个云手机实例的视频流,得到目标视频流,包括:
步骤S501,获取各所述云手机实例对应的位置信息,所述位置信息包括:坐标信息和深度信息;
步骤S502,根据所述位置信息对所述各所述云手机实例对应的视频流进行排列,得到视频排列信息;
步骤S503,根据所述视频排列信息对所述视频流进行拼接,得到发送至所述触屏终端的目标视频流。
在本实施例中,对视频流的叠加处理进行了示例,其中,在获取到账户下的各云手机实例后,会进一步的根据预设的显示框架获取各云手机实例对应的位置信息,位置信息包括:坐标信息和深度信息。其中,坐标信息优选为各云手机画面对应的左上角和右下角的坐标,例如:。深度信息用于表示各个云手机画面的层次,其中,深度值可以为负数的整数,例如:初始值都为0,此时所有云手机实例并行排列,当用户操作某个云手机实例到前端时,将该实例的深度值置为最大,若操作多部云手机时,将该批实例的最前端的实例置为最大值,即大于之前位于最前端的实例深度值,其余实例保持相对位置不变。
根据上述得到的位置信息即可对各所述云手机实例对应的视频流进行基于显示框架的排列,得到视频排列信息;其中,上述获取位置信息和得到视频排列信息的步骤可通过在云手机架构的平台即服务(Platform as a Service,PaaS)层中增加实例叠加计算单元来实现。
另外,基于ARM的虚拟化Windows系统天然支持多开窗口,可充分实时展示多台云手机的实时画面。
进一步的,根据上述得到的视频排列信息对各云手机实例对应的视频流进行拼接,即可得到需要发送至触屏终端的目标视频流。即通过操作队列记录实例窗口的展示层次,并对于队列中的实例,在云端进行分缓存存储,并根据叠加遮盖的尺寸,支持对于被部分覆盖的实例窗口,进行部分展示。
参加图6,具体地,如上所述的方法,所述方法包括:
步骤S601,根据所述触屏终端上传的第三操控信息,确定需要进行位置变动的目标云手机实例以及位置变动操作,所述第三操控信息为所述触屏终端响应用户的第三多触点操作产生;
步骤S602,根据所述位置变动操作改变所述目标云手机实例对应的第一位置信息,和/或,改变除所述目标云手机实例之外的至少一个所述云手机实例对应的第二位置信息;
步骤S603,基于改变后的所述第一位置信息和/或所述第二位置信息,更新所述目标视频流。
在本实施例中,用户可基于需求对各云手机实例的位置等进行更改,其中,根据触屏终端上传的第三操控信息,确定用户需要进行位置变动的目标云手机实例以及位置变动操作,进而根据位置变动操作对目标云手机实例的第一位置信息,和/或,除目标云手机实例之外的至少一个云手机实例对应的第二位置信息进行改变,其中此处所述的除目标云手机实例之外的至少一个云手机实例用于指示与目标云手机实例进行位置变换存在互动的云手机实例,例如需要进行位置互换、位置顺沿等的云手机实例。进而根据改变后的所述第一位置信息和/或所述第二位置信息,即可对目标视频流进行更新,以得到最新的目标视频流。
需要说明的是,用户确定主云手机实例时,也可执行该操作。例如,在一实施例中,为便于用户对主云手机实例进行操作,会将确定的主云手机实例的位置移动至中央位置,和/或扩大其画面尺寸,此时即可通过上述操作对目标视频流进行更新。
参见图7,本申请的另一实施例还提供了一种批量操控云手机的方法,应用于触屏终端,包括:
步骤S701,响应用户的登陆操作,上传账号登陆信息至服务器;
步骤S702,根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
步骤S703,响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
步骤S704,响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
步骤S705,根据所述服务器实时发送的所述目标视频流进行显示更新。
在本实施例中,触屏终端在进行云手机实例操控时,首先响应用户的登陆操作,接收到用户输入的账户名及密码等信息,并将其作为账户登陆信息发送至服务器,以便服务器进行验证以及获取该账户(优选为管理员账户)对应的云手机实例。进而,在账户验证通过的情况下,接收服务器反馈的经过视频叠加后的目标视频流,并,基于该目标视频流显示与账户对应的至少一个云手机实例,如图10所示;
进而,响应用户选择云手机实例的第一多触点操作,上传第一操控信息至所述服务器,其中,该第一操控信息中包括需要进行操控的至少一个云手机实例,其中,根据预配置,至少一个云手机实例中的一个云手机实例为主云实施例,其他为副云手机实例。需要说明的是,该主云手机实例为与用户触发的主云手机实例确定按钮对应的云手机实例,或者,为用户选择的第一个云手机实例。进而便于服务器根据该第一操控信息确定需要进行操控的主云手机实例和/或副云手机实例。
进一步的,响应用户对主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器,以便于服务器根据第二操控信息对主云手机实例和/或副云手机实例进行对应的操控。其中,该第二操控信息包括但不限于操控的起始位置,滑动轨迹以及按压力度等。
更进一步的,根据服务器实时发送的目标视频流进行显示更新,以使用户及时了解各云手机实例的执行情况。
需要说明的是,本文中所述的多触点操作是指通过单点和/或多点的组合实现,如图11所示,包括但不限于双指长按连续吸附实例、单指短按选择单个实例、双指连击全选、单指单击剔除、双指画闭环圆圈定范围等。更具体的,为避免多手指对单实例和多实例操控精确度的影响,可采用类似弹吉他的方式,以某手指压住固定位置(固定触点),另一个手指进行操控(动态触点)的组合方式,如点击、滑动、长按等,实现不同的操控。在一实施例中,当已选择多个云手机进行批量处理时,为区分批量操控和单独对主云手机的操控,因此确定批量操控和单独对主云手机的操控中的一个需要采用上述类似弹吉他的方式,即需要以某手指压住固定位置,另一个则不需要以某手指压住固定位置。
综上所述,本实施例通过叠加视频流的方式,将需要占用的多个视频通道合并为一个,并将视频流的渲染计算置于算力较强的云端,有效避免了群控数量和群控质量(卡顿等)受限于终端性能的问题,且基于多触点操作的方式获取用户操作,可以改变目前批量操作仅支持预定义宏命令的方式,使操作更直观、灵活,也便于支持用户的个性化批量操作,且有利于保证对云手机实例操控的精准度。
具体地,如上所述的方法,还包括:
响应用户对至少一个所述云手机实例的回溯操作,上传回溯操控信息至所述服务器。
在本实施例中,触屏终端还会响应用户对至少一个云手机实例的回溯操作,上传回溯操控信息至所述服务器,以使服务器根据该回溯操控信息,向需要进行回溯的目标云手机实例发送对应的回溯指令,进一步的使目标云手机实例根据可逆操控指令堆栈回溯到对应的预设状态,且服务器可根据获取到的目标云手机实例回溯后的预设状态,并对目标视频流进行更新,从而使得触屏终端可基于更新后的目标视频流进行显示更新。
具体地,如上所述的方法,还包括:
响应用户对需要进行位置变动的目标云手机实例的第三多触点操作,上传第三操控信息至所述服务器。
在本实施例中,用户可基于需求对各云手机实例的位置等进行更改,其中,响应用户在触屏终端上对需要进行位置变动的目标云手机实例以及位置变动操作生成第三操控信息,并将第三操控信息上传至服务器,以使服务器根据第三操控信息,确定用户需要进行位置变动的目标云手机实例以及位置变动操作,并基于改变后的目标云手机实例和/或,除目标云手机实例之外的至少一个云手机实例,对目标视频流进行更新,进而触屏终端可以基于更新后的目标视频流进行显示更新。其中,此处所述的除目标云手机实例之外的至少一个云手机实例,用于指示与目标云手机实例进行位置变换存在互动的云手机实例,例如需要进行位置互换、位置顺沿等的云手机实例。
参见图8,本申请的再一实施例提供了一种服务器,包括:
第一处理模块801,用于根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
第二处理模块802,用于根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
第三处理模块803,用于根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
第四处理模块804,用于获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新。
具体地,如上所述的服务器,所述第四处理模块,包括:
第一处理单元,用于根据所述主云手机实例对应的第一操控结果对各所述副云手机实例对应的第二操控结果进行相似性验证,得到各所述副云手机实例对应的验证结果;
第二处理单元,用于根据所述第一操控结果以及所述验证结果为验证通过的所述第二操控结果对所述目标视频流进行更新。
进一步的,如上所述的服务器,所述第四处理模块还包括:
第三处理单元,用于向所述验证结果为验证失败的所述副云手机实例发送第一回溯指令,所述第一回溯指令用于使所述副云手机实例根据可逆操控指令堆栈回溯至接收到所述操控指令之前的状态。
具体地,如上所述的服务器,还包括:
第十处理模块,用于根据所述触屏终端上传的回溯操控信息,向目标云手机实例发送第二回溯指令,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态;
第十一处理模块,用于根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新。
进一步的,如上所述的服务器,还包括:
第十二处理模块,用于将所述操控指令压入与各所述云手机实例对应的操控指令堆栈;
第十三处理模块,用于获取与所述操控指令对应的用于进行回溯的可逆操控指令,并将所述可逆操控指令压入与各所述云手机实例对应的可逆操控指令堆栈,其中,当所述操控指令不可逆时,确定所述可逆操控指令为空指令。
具体地,如上所述的服务器,所述第一处理模块,包括:
第四处理单元,用于获取各所述云手机实例对应的位置信息,所述位置信息包括:坐标信息和深度信息;
第五处理单元,用于根据所述位置信息对所述各所述云手机实例对应的视频流进行排列,得到视频排列信息;
第六处理单元,用于根据所述视频排列信息对所述视频流进行拼接,得到发送至所述触屏终端的目标视频流。
具体地,如上所述的服务器,包括:
第十四处理模块,用于根据所述触屏终端上传的第三操控信息,确定需要进行位置变动的目标云手机实例以及位置变动操作,所述第三操控信息为所述触屏终端响应用户的第三多触点操作产生;
第十五处理模块,用于根据所述位置变动操作改变所述目标云手机实例对应的第一位置信息,和/或,改变除所述目标云手机实例之外的至少一个所述云手机实例对应的第二位置信息;
第十六处理模块,用于基于改变后的所述第一位置信息和/或所述第二位置信息,更新所述目标视频流。
本申请的服务器实施例是与上述应用于服务器的批量操控云手机的方法的实施例对应的服务器,上述方法实施例中的所有实现手段均适用于该服务器的实施例中,也能达到相同的技术效果。
参见图9本申请的又一实施例提供了一种触屏终端,包括:
第五处理模块901,用于响应用户的登陆操作,上传账号登陆信息至服务器;
第六处理模块902,用于根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
第七处理模块903,用于响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
第八处理模块904,用于响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
第九处理模块905,用于根据所述服务器实时发送的所述目标视频流进行显示更新。
具体地,如上所述的方法,还包括:
第十七处理模块,用于响应用户对至少一个所述云手机实例的回溯操作,上传回溯操控信息至所述服务器。
具体地,如上所述的方法,还包括:
第十八处理模块,用于响应用户对需要进行位置变动的目标云手机实例的第三多触点操作,上传第三操控信息至所述服务器。
本申请的触屏终端实施例是与上述应用于触屏终端的批量操控云手机的方法的实施例对应的触屏终端,上述方法实施例中的所有实现手段均适用于该触屏终端的实施例中,也能达到相同的技术效果。本申请的另一实施例提供了一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的应用于服务器的批量操控云手机的方法的步骤,或者,实现如上所述的应用于触屏终端的批量操控云手机的方法的步骤。
本申请的再一实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的应用于服务器的批量操控云手机的方法的步骤,或者,实现如上所触屏终端的批量操控云手机的方法的步骤。
此外,本申请可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施例和/或设置之间的关系。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含。
以上所述是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请所述原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (12)

1.一种批量操控云手机的方法,应用于服务器,其特征在于,包括:
根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新;
所述方法还包括:
根据所述触屏终端上传的回溯操控信息,向目标云手机实例发送第二回溯指令,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态;
根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新。
2.根据权利要求1所述的方法,其特征在于,所述对所述目标视频流进行更新,包括:
根据所述主云手机实例对应的第一操控结果对各所述副云手机实例对应的第二操控结果进行相似性验证,得到各所述副云手机实例对应的验证结果;
根据所述第一操控结果以及所述验证结果为验证通过的所述第二操控结果对所述目标视频流进行更新。
3.根据权利要求2所述的方法,其特征在于,在得到各所述副云手机实例对应的验证结果之后,所述方法还包括:
向所述验证结果为验证失败的所述副云手机实例发送第一回溯指令,所述第一回溯指令用于使所述副云手机实例根据可逆操控指令堆栈回溯至接收到所述操控指令之前的状态。
4.根据权利要求1或3所述的方法,其特征在于,在发送回溯指令之前,还包括:
将所述操控指令压入与各所述云手机实例对应的操控指令堆栈;
获取与所述操控指令对应的用于进行回溯的可逆操控指令,并将所述可逆操控指令压入与各所述云手机实例对应的可逆操控指令堆栈,其中,当所述操控指令不可逆时,确定所述可逆操控指令为空指令。
5.根据权利要求1所述的方法,其特征在于,所述通过叠加至少一个云手机实例的视频流,得到目标视频流,包括:
获取各所述云手机实例对应的位置信息,所述位置信息包括:坐标信息和深度信息;
根据所述位置信息对所述各所述云手机实例对应的视频流进行排列,得到视频排列信息;
根据所述视频排列信息对所述视频流进行拼接,得到发送至所述触屏终端的目标视频流。
6.根据权利要求5所述的方法,其特征在于,所述方法包括:
根据所述触屏终端上传的第三操控信息,确定需要进行位置变动的目标云手机实例以及位置变动操作,所述第三操控信息为所述触屏终端响应用户的第三多触点操作产生;
根据所述位置变动操作改变所述目标云手机实例对应的第一位置信息,和/或,改变除所述目标云手机实例之外的至少一个所述云手机实例对应的第二位置信息;
基于改变后的所述第一位置信息和/或所述第二位置信息,更新所述目标视频流。
7.一种批量操控云手机的方法,应用于触屏终端,其特征在于,包括:
响应用户的登陆操作,上传账号登陆信息至服务器;
根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
根据所述服务器实时发送的所述目标视频流进行显示更新;
所述方法,还包括:
响应用户对至少一个所述云手机实例的回溯操作,上传回溯操控信息至所述服务器,其中,所述回溯操控信息用于使所述服务器向目标云手机实例发送第二回溯指令,并根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态。
8.根据权利要求7所述的方法,其特征在于,还包括:
响应用户对需要进行位置变动的目标云手机实例的第三多触点操作,上传第三操控信息至所述服务器。
9.一种服务器,其特征在于,包括:
第一处理模块,用于根据触屏终端上传的账户登陆信息,通过叠加至少一个云手机实例的视频流,得到目标视频流,并发送至所述触屏终端,所述云手机实例与所述账户登陆信息对应;
第二处理模块,用于根据所述触屏终端上传的第一操控信息,确定需要进行操控的主云手机实例和/或副云手机实例,所述第一操控信息为所述触屏终端响应用户选择所述云手机实例的第一多触点操作产生;
第三处理模块,用于根据所述触屏终端上传的第二操控信息,对所述主云手机实例和/或所述副云手机实例发送与所述第二操控信息对应的操控指令,所述第二操控信息为所述触屏终端响应用户对所述主云手机实例进行操控的第二多触点操作产生;
第四处理模块,用于获取所述主云手机实例和/或所述副云手机实例根据所述操控指令得到的操控结果,并对所述目标视频流进行更新;
还包括:
第十处理模块,用于根据所述触屏终端上传的回溯操控信息,向目标云手机实例发送第二回溯指令,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态;
第十一处理模块,用于根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新。
10.一种触屏终端,其特征在于,包括:
第五处理模块,用于响应用户的登陆操作,上传账号登陆信息至服务器;
第六处理模块,用于根据所述服务器反馈的叠加后的目标视频流,显示至少一个云手机实例;
第七处理模块,用于响应用户选择所述云手机实例的第一多触点操作,上传第一操控信息至所述服务器;
第八处理模块,用于响应用户对所述云手机实例中的主云手机实例进行操控的第二多触点操作,上传第二操控信息至所述服务器;
第九处理模块,用于根据所述服务器实时发送的所述目标视频流进行显示更新;
还包括:
第十七处理模块,用于响应用户对至少一个所述云手机实例的回溯操作,上传回溯操控信息至所述服务器,其中,所述回溯操控信息用于使所述服务器向目标云手机实例发送第二回溯指令,并根据所述目标云手机实例回溯到的预设状态,对所述目标视频流进行更新,所述第二回溯指令用于使所述目标云手机实例根据可逆操控指令堆栈回溯到一预设状态。
11.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至6中任一项所述的批量操控云手机的方法的步骤,或者,实现如权利要求7或8中任一项所述的批量操控云手机的方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的批量操控云手机的方法的步骤,或者,实现如权利要求7或8中任一项所述的批量操控云手机的方法的步骤。
CN202311025985.9A 2023-08-15 2023-08-15 批量操控云手机的方法、服务器、触屏终端及存储介质 Active CN116743827B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311025985.9A CN116743827B (zh) 2023-08-15 2023-08-15 批量操控云手机的方法、服务器、触屏终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311025985.9A CN116743827B (zh) 2023-08-15 2023-08-15 批量操控云手机的方法、服务器、触屏终端及存储介质

Publications (2)

Publication Number Publication Date
CN116743827A CN116743827A (zh) 2023-09-12
CN116743827B true CN116743827B (zh) 2023-11-21

Family

ID=87904799

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311025985.9A Active CN116743827B (zh) 2023-08-15 2023-08-15 批量操控云手机的方法、服务器、触屏终端及存储介质

Country Status (1)

Country Link
CN (1) CN116743827B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112751932A (zh) * 2020-12-30 2021-05-04 北京云派网络科技有限公司 通过视频流及固定指令远程查看手机应用信息的方法
CN113032085A (zh) * 2019-12-24 2021-06-25 中兴通讯股份有限公司 云操作系统的管理方法、装置、服务器、管理系统及介质
CN113422839A (zh) * 2021-07-12 2021-09-21 中国电信股份有限公司 基于云计算的云手机系统及控制方法、介质及电子设备
CN113472956A (zh) * 2021-09-03 2021-10-01 北京健康之家科技有限公司 一种云手机管理方法及装置
CN114327201A (zh) * 2021-12-22 2022-04-12 奇安信科技集团股份有限公司 云手机操控方法、装置及计算机设备
CN115604862A (zh) * 2022-09-15 2023-01-13 中移互联网有限公司(Cn) 视频流传输方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113032085A (zh) * 2019-12-24 2021-06-25 中兴通讯股份有限公司 云操作系统的管理方法、装置、服务器、管理系统及介质
CN112751932A (zh) * 2020-12-30 2021-05-04 北京云派网络科技有限公司 通过视频流及固定指令远程查看手机应用信息的方法
CN113422839A (zh) * 2021-07-12 2021-09-21 中国电信股份有限公司 基于云计算的云手机系统及控制方法、介质及电子设备
CN113472956A (zh) * 2021-09-03 2021-10-01 北京健康之家科技有限公司 一种云手机管理方法及装置
CN114327201A (zh) * 2021-12-22 2022-04-12 奇安信科技集团股份有限公司 云手机操控方法、装置及计算机设备
CN115604862A (zh) * 2022-09-15 2023-01-13 中移互联网有限公司(Cn) 视频流传输方法及系统

Also Published As

Publication number Publication date
CN116743827A (zh) 2023-09-12

Similar Documents

Publication Publication Date Title
WO2021036594A1 (zh) 一种应用于投屏场景的控制方法以及相关设备
US9965151B2 (en) Systems and methods for graphical user interface interaction with cloud-based applications
WO2018040943A1 (zh) 显示数据的控制方法、装置和系统
US9569159B2 (en) Apparatus, systems and methods for presenting displayed image information of a mobile media device on a large display and control of the mobile media device therefrom
US9886189B2 (en) Systems and methods for object-based interaction with cloud-based applications
CN107977141B (zh) 交互控制方法、装置、电子设备及存储介质
US20130346858A1 (en) Remote Control of Audio Application and Associated Sub-Windows
CN107077348B (zh) 跨设备的经分割的应用呈现
CN106572139B (zh) 多终端控制方法、终端、服务器和系统
CN113741765B (zh) 页面跳转方法、装置、设备、存储介质和程序产品
US20240089529A1 (en) Content collaboration method and electronic device
WO2022161432A1 (zh) 显示控制方法、装置、电子设备及介质
US20230004281A1 (en) Intelligent interaction method and device, and storage medium
CN103777999A (zh) 安卓软件模拟方法及装置
CN106802762B (zh) 在虚拟会话中同步服务器侧键盘布局与客户端侧布局
CN111970546A (zh) 一种控制终端交互的方法、装置、电子设备和存储介质
JP2018525744A (ja) アプリケーション及びデータをタッチスクリーンコンピュータ間で相互共有する方法並びにこの方法を実施するコンピュータプログラム
CN116743827B (zh) 批量操控云手机的方法、服务器、触屏终端及存储介质
CN112274910A (zh) 虚拟按键配置方法、虚拟按键方法及相关装置
EP4290361A1 (en) Display control method and apparatus for pointer in window, device, and storage medium
CN114449355B (zh) 一种直播互动的方法、装置、设备及存储介质
CN114115673B (zh) 车载屏幕的控制方法
US11500606B2 (en) AR display device and method
CN103853470A (zh) 数据处理和显示方法、装置及系统
US9141443B2 (en) Method and system for integrating visual controls with legacy applications

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant