CN114968023A - 终端控制方法、装置、电子设备及存储介质 - Google Patents

终端控制方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114968023A
CN114968023A CN202210515920.1A CN202210515920A CN114968023A CN 114968023 A CN114968023 A CN 114968023A CN 202210515920 A CN202210515920 A CN 202210515920A CN 114968023 A CN114968023 A CN 114968023A
Authority
CN
China
Prior art keywords
terminal
image
dimensional menu
spliced
spliced image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210515920.1A
Other languages
English (en)
Inventor
陈囿任
曾令聪
王欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zhaolong Technology Co ltd
Original Assignee
PAX Computer Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PAX Computer Technology Shenzhen Co Ltd filed Critical PAX Computer Technology Shenzhen Co Ltd
Priority to CN202210515920.1A priority Critical patent/CN114968023A/zh
Publication of CN114968023A publication Critical patent/CN114968023A/zh
Priority to PCT/CN2023/082881 priority patent/WO2023216724A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请适用于控制领域,提供了一种终端控制方法,包括:接收到第二终端的控制请求时,若第一终端存在至少一个物理导航按键,则根据物理导航按键得到二维菜单;根据二维菜单以及第一终端的屏幕图像得到拼接图像;根据拼接图像接收第二终端的操作数据,生成并响应与操作数据对应的指令内容。本申请还提供一种终端控制装置、电子设备及存储介质。本申请旨在解决无法远程控制具有物理导航按键的POS机的问题。

Description

终端控制方法、装置、电子设备及存储介质
技术领域
本申请涉及控制领域,尤其涉及一种终端控制方法、装置、电子设备及存储介质。
背景技术
通过TCP/IP(传输控制协议/国际互联网协议)网络就可以实现远程POS终端与平板之间的屏幕画面的同步。平板控制POS终端的最大问题在于,平板上只能进行简单的操作,同步画面中只能操作POS机屏幕画面的内容,而物理导航按键的内容无法操作,从而导致现有技术方面在应用上受到非常大的限制,例如,需要远程控制POS终端的停止运行时,无法按到关机的按钮,进而无法命令POS终端关机。
发明内容
本申请的目的在于提出一种终端控制方法、装置、电子设备及存储介质,以使得用户可以在远程控制POS机完成相应指令。
第一方面,本申请提供了一种终端控制方法,控制方法由第一终端执行,采用了如下的技术方案:
接收到第二终端的控制请求时,若第一终端存在至少一个物理导航按键,则根据物理导航按键得到二维菜单;
根据二维菜单以及第一终端的屏幕图像得到拼接图像;
根据拼接图像接收第二终端的操作数据,生成并响应与操作数据对应的指令内容。
第二方面,本申请提供了一种终端控制方法,控制方法由第一终端执行,采用了如下的技术方案:
向第一终端发送控制请求;
接收第一终端返回的拼接图像,拼接图像包括第一终端的屏幕图像,以及第一终端的物理导航按键生成的二维图像;
基于拼接图像接收操作数据,将操作数据发送至第一终端,操作数据用于由第一终端根据拼接图像进行解析,得到并响应操作数据对应的指令内容。
第三方面,本申请提供了一种终端控制装置,采用了如下的技术方案:
一种终端控制装置,控制装置集成于第一终端,控制装置包括菜单生成模块、图像生成模块和指令生成模块。
菜单生成模块,用于接收到第二终端的控制请求时,若第一终端存在至少一个物理导航按键,则根据物理导航按键得到二维菜单;
图像生成模块,用于根据二维菜单以及第一终端的屏幕图像得到拼接图像;
指令生成模块,用于根据拼接图像接收第二终端的操作数据,生成并响应与操作数据对应的指令内容。
第四方面,本申请提供了一种电子设备,包括至少一个连接的处理器、存储器,其中,存储器用于存储计算机可读指令,处理器用于调用存储器中的计算机可读指令来执行上述的终端控制方法的步骤。
第五方面,本申请提供了一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序被处理器执行时实现如上述第一方面的方法的步骤。
第六方面,本申请提供了一种计算机程序产品,上述计算机程序产品包括计算机程序,上述计算机程序被一个或多个处理器执行时实现如上述第一方面的方法的步骤。
本申请与现有技术相比存在的有益效果是:本申请通过检测第一终端是否有物理导航按键,当检测到第一终端存在物理导航按键时,生成与物理导航按键对应的二维菜单,在让二维菜单与第一终端的屏幕图像进行拼接,得到拼接图像,通过拼接图像获取用户的控制指令,进而可以完成包括物理导航按键的第一终端,比如POS机等设备的远程控制。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的示例性系统架构图;
图2是本申请实施例提供的终端控制方法的流程示意图;
图3是本申请实施例提供的终端控制方法的二维菜单示意图;
图4是本申请实施例提供的终端控制方法的拼接图像示意图;
图5是本申请实施例提供的终端控制方法的另一种流程示意图;
图6是本申请实施例提供的终端控制装置的结构示意图;
图7是本申请实施例提供的电子设备的结构示意图。
具体实施方式
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同;本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在限制本申请;本申请的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。本申请的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
为了使本技术领域的人员更好地理解本申请方案,下面将结合附图,对本申请实施例中的技术方案进行清楚、完整地描述。
如图1所示,控制架构100可以包括智能手机设备101、平板电脑设备102、计算机设备103,网络104和POS机105。网络104用以在智能手机设备101、平板电脑设备102、计算机设备103和POS机105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用智能手机设备101、平板电脑设备102、计算机设备1033通过网络104与POS机105交互,以接收或发送消息等。智能手机设备101、平板电脑设备102、计算机设备103上可以安装有各种通讯客户端应用,例如网页浏览器应用、购物类应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
智能手机设备101、平板电脑设备102、计算机设备103可以是具有显示屏并且支持网页浏览的各种设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
需要说明的是,本申请实施例所提供的终端控制方法一般由第一终端执行,相应地,终端控制装置一般设置于第一终端中。所述第一终端可以为POS机等具有按键的、用于被远程控制的设备。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了本申请实施例所提供的终端控制方法的流程图。该终端控制方法,管理方法由第一终端执行,包括以下步骤:
步骤201,接收到第二终端的控制请求时,若第一终端存在至少一个物理导航按键,则根据物理导航按键得到二维菜单。
在本实施例中,第一终端可以为POS机等。所述第一终端可以为任意具有物理导航按键的设备。第二终端可以是任意终端设备,一般为移动终端等。其中,POS机可以为具有物理导航按键的设备,也可以为具有物理导航按键和虚拟按键的设备。物理导航按键可以为各种实体按键,可以包括但不限于物理键盘,按键以及按钮等。虚拟按键可以为POS机中的屏幕上显示的按键。如果POS机上有物理导航按键,可以在预先设定的物理导航按键与按键图形的对应关系表中,查找物理导航按键对应的按键图形。根据查找到的一个或者多个按键图形生成用于拼接的二维菜单。物理导航按键可以包括但不限于获取POS机的启动打印按键、开机按键以及扫描按键等。
如图3所示,图3为一种通过二维菜单得到的拼接图像的示意图,在拼接图像中,POS机中的屏蔽图像处于分割线以上的区域,分割线以下区域为二维菜单区域。二维菜单中的方框为物理导航按键所对应的按键图形生成。
在本实施例中,接收到第二终端的控制请求之前,先将移动终端/POS终端连接Wifi热点,确保两者同处同一局域网络中。移动终端运行客户端程序,POS终端运行服务器程序。移动终端通过APP程序向POS机的服务器程序发起控制请求。
步骤202,根据二维菜单以及第一终端的屏幕图像得到拼接图像。
在本实施例中,第一终端(POS机)可以通过实时采集的方式,获取第一终端的屏幕图像,将所采集的屏幕图像与生成的二维菜单进行拼接,得到拼接图像。由于不同的第一终端可能具有不同的物理导航按键数量和类型,因此,具有不同物理导航按键的第一终端,比如POS机可能生成不同样式的二维菜单,将所述二维菜单与所述屏幕图像拼接,得到如图3所示的拼接图像。
其中,拼接图像的尺寸,通常会大于第一终端的屏幕图像的尺寸。比如,二维菜单可以拼接在屏幕图像的下部或上部,此时,拼接图像的高度会大于屏幕图像的高度。二维菜单可以拼接在屏幕图像的左侧或右侧,此时拼接图像的宽度会大于屏幕图像的宽度。
步骤203,根据拼接图像接收第二终端的操作数据,生成并响应与操作数据对应的指令内容。
在本实施例中,本申请通过检测第一终端是否有物理导航按键,当检测到第一终端存在物理导航按键时,生成与物理导航按键对应的二维菜单,在让二维菜单与第一终端的屏幕图像进行拼接,得到拼接图像,通过拼接图像获取用户的控制指令,进而可以完成包括物理导航按键的第一终端,比如POS机等设备的远程控制。
在本实施例中,如图4所示,将每个物理导航按键对应的按键图形在二维菜单中按照一定顺序拼接起来得到拼接图像,将拼接图像发送至第二终端,使得第二终端可以显示该拼接图像。第二用户可以基于所显示的拼接图像,在拼接图像的屏蔽区域或二维菜单区域操作,并将操作数据发送至第一终端,第一终端通过解析得到第二终端的操作数据,执行相应的操作指令。从而使得用户可以在第二终端,比如移动终端中完成对第一终端,如POS机进行全面的控制,包括对第一终端的物理导航按键的控制。
例如,在第二终端的屏幕上显示拼接图像,用户在第二终端中点击二维菜单中的按键图像中的扫描按钮,可以根据用户在二维菜单中的操作生成操作指令,用于控制第一终端执行扫描动作。
在一些可选的实现方式中,根据拼接图像接收第二终端的操作数据,生成与操作数据对应的指令内容,包括:第一终端将拼接图像发送至第二终端,第一终端接收第二终端返回的操作数据,操作数据包括操作指令和操作位置,通过坐标转换确定操作指令在第一终端的指令内容。
上述实施方式中,作为第一终端的POS机将拼接图像发送给第二终端,当POS机接收到第二终端返回的操作位置在第二终端的屏幕上的第一坐标(x1,y1)后,判断第一坐标(x1,y1)是否处于拼接图像中的屏幕图像区域或二维图像区域,基于操作位置确定所触发的指令。
在一些可选的实现方式中,通过坐标转换确定操作指令在第一终端的指令内容,包括:
当判断操作位置位于二维菜单所在的区域时,根据二维菜单中的区域与物理导航按键指令的对应关系,确定操作指令在第一终端的物理导航按键指令;
当判断操作位置位于屏幕图像所在区域时,则根据拼接图像与第二终端显示的图像的坐标变换关系,确定操作位置在第一终端的屏幕图像中的位置。
上述实施方式中,在确定第二终端中的指令内容时,可以先确定拼接图像的坐标位置,二维菜单的坐标位置以及二维菜单中的按键图形的坐标位置。在接收到用户的操作指令时,获取用户操作指令的操作位置,将该操作位置与拼接图像的坐标位置、二维图像的坐标位置以及按键图像的坐标位置比对,根据比对结果,确定操作指令的指令内容。比如,当操作指令的操作位置位于二维菜单中的“扫描按键”的按键图形区域中,则确定该操作指令的指令内容为“扫描”指令。
在一些可选的实现方式中,根据至少一个物理导航按键得到二维菜单,包括:第一终端基于至少一个物理导航按键生成二维菜单;或者,第一终端将至少一个物理导航按键的数据发送至第二终端;第一终端接收第二终端返回的二维菜单。
上述实施方式中,二维菜单为物理导航按键区域,二维菜单可以在第一终端的POS机端生成,也能在第二终端的移动端生成。
第一终端可以根据所检测到的物理导航按键,查找相应的按键图形,将按键图形发送至第二终端,由第二终端根据按键图形生成二维菜单进行拼接。或者,第一终端可以将所检测到的物理导航按键发送给第二终端,由第二终端根据导航按键查找对应的按键图形,第二终端基于查找的按键图形,生成二维菜单。或者,也可以由第一终端根据检测到的物理导航按键查找对应的按键图形,基于所查找到的按键图形进行拼接得到拼接图像,将拼接图像发送至第二终端。
也就是说,根据二维菜单以及第一终端的屏幕图像得到拼接图像,包括:第一终端拼接二维菜单和第一终端的屏幕图像,生成拼接图像;
或者,将第一终端的屏幕图像以及二维菜单发送至第二终端,接收第二终端基于第一终端的屏幕图像以及二维菜单生成的拼接图像;
或者,检测到第二终端存在二维菜单,则将第一终端的屏幕图像发送至第二终端,接收第二终端基于第一终端的屏幕图像以及二维菜单生成的拼接图像。
上述实施方式中,拼接图像为控制设备中所显示的操作界面。操作界面可以在作为第一终端的POS机端生成,也能在作为第二终端的移动终端生成。在POS机上生成拼接图像,发送至第二终端显示,以便于通过第二终端接收包括对物理导航按键的操作指令。第一终端也可以将二维菜单和作为第一终端的POS机的屏幕图像,发送给作为第二终端的移动终端,通过移动终端生成拼接图像。或者,作为第二终端的移动终端可以接收第一终端所包括的物理导航按键生成二维菜单,第二终端只需要接收第一终端的屏幕图像,生成用于显示的拼接图像。通过上述方法完成了拼接图像的生成。
在一些可选的实现方式中,控制方法由第二终端执行,方法包括:
向第一终端发送控制请求;接收第一终端返回的拼接图像,拼接图像包括第一终端的屏幕图像,以及第一终端的物理导航按键生成的二维图像;基于拼接图像接收操作数据,将操作数据发送至第一终端,操作数据用于由第一终端根据拼接图像进行解析,得到并响应操作数据对应的指令内容。
上述实施方式中,作为第二终端的移动终端在收到POS终端发送的拼接图像数据后,调用移动终端系统接口,使用移动终端硬解码功能,将解码后录制数据渲染到UI界面显示控件上,用户就能在移动终端App的UI界面显示控件上实时看到POS终端屏幕以及二维菜单。进而可以通过UI界面可以接收到用户的输入信息,完成用户控制指令的输入。
在一些可选的实现方式中,在基于拼接图像接收操作数据之前,控制方法还包括:
获取拼接图像的第一尺寸,以及第二终端显示拼接图像的区域的第二尺寸;
根据第一尺寸和第二尺寸,对拼接图像进行尺寸变换,在第二终端显示拼接图像的区域显示变换后的拼接图像。
上述实施方式中,将拼接图像进行一定缩放,使得可以在两边屏幕中较好的呈现。
在一些可选的实现方式中,控制方法还包括:
检测第一终端的状态信息;
基于状态信息渲染至拼接图像中,比如,可以将第一终端的状态信息渲染至二维菜单中,通过二维菜单显示不同的状态。通过在第二终端显示所渲染的状态信息,使得作为第二终端的移动终端可以实时监控POS机的状态。
其中,作为第一终端的POS机的状态可以包括:
(1)、电池电量及是否充电中;
(2)、打印机状态:是否打印中、是否缺纸;
(3)、获取POS机的硬件和软件信息;
(4)、磁条阅读器状态:使用还是空闲;
(5)、IC卡读卡器状态:使用还是空闲;
(6)、射频卡读卡器状态:使用还是空闲。
作为第二终端的移动终端需要作为第一终端的POS机的某些状态时,可以主动向作为第一终端的POS机发起指令获取相应状态,即:作为第二终端的移动终端向作为第一终端的POS机发起Socket连接,连接成功后发送指令,POS机接收和解析指令,执行对应操作,调用POS机系统接口获取到相应状态后返回给移动终端。移动终端可在拼接图像对应的位置显示这状态信息。
在本申请提供的一种具体的实现方式中,移动终端与POS机的交互过程如图5所示,具体可以理解为:
1、先将移动终端/POS终端连接Wifi热点,确保两者同处同一局域网络中。
2、移动终端运行客户端程序,POS机运行服务器程序。
3、移动终端向POS机发起屏幕查看及控制指令。
4、POS机接收到控制指令后,通过系统接口判断是否有物理导航按键。
5、如果系统没有物理导航按键,POS机直接开启屏幕录制,应答屏幕宽高+屏幕录制数据流。
6、如果系统有物理导航按键,POS机按照物理导航按键的数量、预定的排布规则,绘制出物理导航键的按键图形,根据绘制好的按键图形生成二维菜单,将按照一定的算法与屏幕图像拼接中,形成拼接图像。
7、移动终端接收和解析应答数据。
8、移动终端根据接收到拼接图像的宽高按等比例进行缩放显示控件的大小,将屏幕录制数据流设置给显示控件进行显示。
9、移动终端开始检测显示控件是否被用户点击。
10、移动终端检测到用户点击了显示控件,获取显示控件被点击位置坐标,根据显示控件被点击位置和等比例两元素反向计算出被点击位置在POS机屏幕对应的坐标,并将POS机屏幕对应的坐标发送给POS机。
11、POS机接收移动终端发送的坐标,根据POS机是否为虚拟导航键进行区分处理。
12、如果POS机是虚拟导航键,此时POS机不存在物理导航按键。POS机直接调用系统接口将返回的坐标设置给系统,系统根据返回的坐标正确响应点击事件,不管返回的坐标属于虚拟导航键的区域还是其他的POS机屏幕所在的区域。
13、如果POS机不是虚拟导航键,即POS包括物理导航按键。POS机根据返回的坐标判断该坐标属于二维菜单还是POS机的屏幕,属于前者需运算出该坐标属于哪个物理导航键,再调用该物理导航键对应系统接口来响应该点击事件;属于后者则运算出返回的坐标在屏幕上真实坐标,调用系统接口将真实坐标设置给系统(系统接口跟第12)步一致),系统正确识别响应屏幕点击事件。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机可读指令来指令相关的硬件来完成,该计算机可读指令可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Onl9Memor9,ROM)等非易失性存储介质,或随机存储记忆体(Random Access Memor9,RAM)等。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
进一步参考图6,作为对上述图2所示方法的实现,本申请提供了一种终端控制装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图6所示,控制装置集成于第一终端,本实施例的终端控制装置600包括:菜单生成模块601、图像生成模块602以及指令生成模块603。其中:
菜单生成模块601,用于接收到第二终端的控制请求时,若第一终端存在至少一个物理导航按键,则根据物理导航按键得到二维菜单;
图像生成模块602,用于根据二维菜单以及第一终端的屏幕图像得到拼接图像;
指令生成模块603,用于根据拼接图像接收第二终端的操作数据,生成并响应与操作数据对应的指令内容。
在本实施例的一些可选的实现方式中,指令生成模块603,还包括:
第一处理单元,用于将拼接图像发送至第二终端;
第二处理单元,用于接收第二终端返回的操作数据,操作数据包括操作指令和操作位置,通过坐标转换确定操作指令在第一终端的指令内容。
在本实施例的一些可选的实现方式中,上述第二处理单元,还包括:
第一处理子单元,用于当判断操作位置位于二维菜单所在的区域时,根据二维菜单中的区域与物理导航按键指令的对应关系,确定操作指令在第一终端的物理导航按键指令;
第二处理子单元,用于当判断操作位置位于屏幕图像所在区域时,则根据拼接图像与第二终端显示的图像的坐标变换关系,确定操作位置在第一终端的屏幕图像中的位置。
在本实施例的一些可选的实现方式中,菜单生成模块601,还包括:
第三处理单元,用于基于至少一个物理导航按键生成二维菜单;
或者,将至少一个物理导航按键的数据发送至第二终端;
接收第二终端返回的二维菜单。
在本实施例的一些可选的实现方式中,图像生成模块602,还包括:
第四处理单元,用于拼接二维菜单和第一终端的屏幕图像,生成拼接图像;
或者,将第一终端的屏幕图像以及二维菜单发送至第二终端,接收第二终端基于第一终端的屏幕图像以及二维菜单生成的拼接图像;
或者,检测第二终端存在二维菜单,则将第一终端的屏幕图像发送至第二终端,接收第二终端基于第一终端的屏幕图像以及二维菜单生成的拼接图像。
在本实施例的一些可选的实现方式中,上述装置600还包括:
请求发送模块,用于向第一终端发送控制请求;
图像接收模块,用于接收第一终端返回的拼接图像,拼接图像包括第一终端的屏幕图像,以及第一终端的物理导航按键生成的二维图像;
指令发送模块,用于基于拼接图像接收操作数据,将操作数据发送至第一终端,操作数据用于由第一终端根据拼接图像进行解析,得到并响应操作数据对应的指令内容。
在本实施例的一些可选的实现方式中,上述装置600还包括:
拼接图像模块,用于获取拼接图像的第一尺寸,以及第二终端显示拼接图像的区域的第二尺寸;
尺寸变换模块,用于根据第一尺寸和第二尺寸,对拼接图像进行尺寸变换,在第二终端显示拼接图像的区域显示变换后的拼接图像。
为解决上述技术问题,本申请实施例还提供电子设备。具体请参阅图7,图7为本实施例电子设备基本结构框图。
电子设备7包括通过系统总线相互通信连接存储器701、处理器702。需要指出的是,图中仅示出了具有存储器701、处理器702的电子设备7,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。其中,本技术领域技术人员可以理解,这里的电子设备是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程门阵列(Field-Programmable Gate Arra9,FPGA)、数字处理器(Digital Signal Processor,DSP)、嵌入式设备等。
电子设备7可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。电子设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
存储器701至少包括一种类型的可读存储介质,可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或D8存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,存储器701可以是电子设备7的内部存储单元,例如该电子设备7的硬盘或内存。在另一些实施例中,存储器701也可以是电子设备7的外部存储设备,例如该电子设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。当然,存储器701还可以既包括电子设备7的内部存储单元也包括其外部存储设备。本实施例中,存储器701通常用于存储安装于电子设备7的操作系统和各类应用软件,例如终端控制方法的计算机可读指令等。此外,存储器701还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器702在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器702通常用于控制电子设备7的总体操作。本实施例中,处理器702用于运行存储器701中存储的计算机可读指令或者处理数据,例如运行终端控制方法的计算机可读指令。
本申请还提供了另一种实施方式,即提供一种计算机可读存储介质,计算机可读存储介质存储有计算机可读指令,计算机可读指令可被至少一个处理器执行,以使至少一个处理器执行如上述的终端控制方法的步骤。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例的方法。
显然,以上所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例,附图中给出了本申请的较佳实施例,但并不限制本申请的专利范围。本申请可以以许多不同的形式来实现,相反地,提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。尽管参照前述实施例对本申请进行了详细的说明,对于本领域的技术人员来而言,其依然可以对前述各具体实施方式所记载的技术方案进行修改,或者对其中部分技术特征进行等效替换。凡是利用本申请说明书及附图内容所做的等效结构,直接或间接运用在其他相关的技术领域,均同理在本申请专利保护范围之内。

Claims (10)

1.一种终端控制方法,其特征在于,所述控制方法由第一终端执行,所述方法包括:
接收到第二终端的控制请求时,若所述第一终端存在至少一个物理导航按键,则根据所述物理导航按键得到二维菜单;
根据所述二维菜单以及所述第一终端的屏幕图像得到拼接图像;
根据所述拼接图像接收所述第二终端的操作数据,生成并响应与所述操作数据对应的指令内容。
2.如权利要求1所述的控制方法,其特征在于,所述根据所述拼接图像接收所述第二终端的操作数据,生成与所述操作数据对应的指令内容,包括:
将所述拼接图像发送至所述第二终端;
接收所述第二终端返回的操作数据,所述操作数据包括操作指令和操作位置,通过坐标转换确定所述操作指令在所述第一终端的指令内容。
3.如权利要求2所述的控制方法,其特征在于,所述通过坐标转换确定所述操作指令在所述第一终端的指令内容,包括:
当判断所述操作位置位于所述二维菜单所在的区域时,根据所述二维菜单中的区域与物理导航按键指令的对应关系,确定所述操作指令在所述第一终端的物理导航按键指令;
当判断所述操作位置位于所述屏幕图像所在区域时,则根据所述拼接图像与所述第二终端显示的图像的坐标变换关系,确定所述操作位置在所述第一终端的屏幕图像中的位置。
4.如权利要求1所述的控制方法,其特征在于,所述根据所述至少一个物理导航按键得到二维菜单,包括:
基于至少一个所述物理导航按键生成二维菜单;
或者,将所述至少一个物理导航按键的数据发送至所述第二终端;
接收所述第二终端返回的二维菜单。
5.如权利要求1所述的控制方法,其特征在于,所述根据所述二维菜单以及所述第一终端的屏幕图像得到拼接图像,包括:
拼接所述二维菜单和所述第一终端的屏幕图像,生成拼接图像;
或者,将所述第一终端的屏幕图像以及所述二维菜单发送至所述第二终端,接收所述第二终端基于所述第一终端的屏幕图像以及所述二维菜单生成的拼接图像;
或者,检测到所述第二终端存在所述二维菜单,则将所述第一终端的屏幕图像发送至所述第二终端,接收所述第二终端基于所述第一终端的屏幕图像以及所述二维菜单生成的拼接图像。
6.一种终端控制方法,其特征在于,所述控制方法由第二终端执行,所述方法包括:
向第一终端发送控制请求;
接收第一终端返回的拼接图像,所述拼接图像包括第一终端的屏幕图像,以及第一终端的物理导航按键生成的二维图像;
基于所述拼接图像接收操作数据,将所述操作数据发送至所述第一终端,所述操作数据用于由所述第一终端根据所述拼接图像进行解析,得到并响应所述操作数据对应的指令内容。
7.如权利要求6所述的控制方法,其特征在于,在基于所述拼接图像接收操作数据之前,所述控制方法还包括:
获取所述拼接图像的第一尺寸,以及所述第二终端显示所述拼接图像的区域的第二尺寸;
根据所述第一尺寸和所述第二尺寸,对所述拼接图像进行尺寸变换,在所述第二终端显示所述拼接图像的区域显示变换后的拼接图像。
8.一种终端控制装置,其特征在于,所述控制装置集成于第一终端,所述控制装置包括:
菜单生成模块,用于接收到第二终端的控制请求时,若所述第一终端存在至少一个物理导航按键,则根据所述物理导航按键得到二维菜单;
图像生成模块,用于根据所述二维菜单以及所述第一终端的屏幕图像得到拼接图像;
指令生成模块,用于根据所述拼接图像接收所述第二终端的操作数据,生成并响应与所述操作数据对应的指令内容。
9.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的方法。
CN202210515920.1A 2022-05-12 2022-05-12 终端控制方法、装置、电子设备及存储介质 Pending CN114968023A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210515920.1A CN114968023A (zh) 2022-05-12 2022-05-12 终端控制方法、装置、电子设备及存储介质
PCT/CN2023/082881 WO2023216724A1 (zh) 2022-05-12 2023-03-21 终端控制方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210515920.1A CN114968023A (zh) 2022-05-12 2022-05-12 终端控制方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114968023A true CN114968023A (zh) 2022-08-30

Family

ID=82981054

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210515920.1A Pending CN114968023A (zh) 2022-05-12 2022-05-12 终端控制方法、装置、电子设备及存储介质

Country Status (2)

Country Link
CN (1) CN114968023A (zh)
WO (1) WO2023216724A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116047336A (zh) * 2023-03-27 2023-05-02 深圳市铂纳特斯自动化科技有限公司 一种电池化成监控方法及装置
WO2023216724A1 (zh) * 2022-05-12 2023-11-16 深圳市兆珑科技有限公司 终端控制方法、装置、电子设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103440086A (zh) * 2013-08-03 2013-12-11 惠州华阳通用电子有限公司 双机互动模式下控制智能移动终端物理按键的方法及系统
CN104281430A (zh) * 2013-07-12 2015-01-14 三星电子株式会社 执行与显示在外部装置上的信息相关的功能的方法和设备
CN105094633A (zh) * 2014-05-14 2015-11-25 小米科技有限责任公司 传输控制指令的方法及装置
CN105516764A (zh) * 2014-09-24 2016-04-20 深圳Tcl新技术有限公司 遥控信息的配置方法及装置
CN105915527A (zh) * 2016-05-16 2016-08-31 北京奇虎科技有限公司 一种控制移动终端的方法和装置、移动终端
CN106775396A (zh) * 2016-12-09 2017-05-31 北京奇虎科技有限公司 基于移动终端的输入操作方法和装置、移动终端
CN107851144A (zh) * 2016-05-19 2018-03-27 苹果公司 请求远程授权的设备的用户界面
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质
US20200210064A1 (en) * 2017-09-08 2020-07-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Key Display Method, Terminal, and Non-Transitory Computer-Readable Medium
US20220067684A1 (en) * 2020-08-25 2022-03-03 International Business Machines Corporation Point-of-sale terminal transfer

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114968023A (zh) * 2022-05-12 2022-08-30 百富计算机技术(深圳)有限公司 终端控制方法、装置、电子设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281430A (zh) * 2013-07-12 2015-01-14 三星电子株式会社 执行与显示在外部装置上的信息相关的功能的方法和设备
CN103440086A (zh) * 2013-08-03 2013-12-11 惠州华阳通用电子有限公司 双机互动模式下控制智能移动终端物理按键的方法及系统
CN105094633A (zh) * 2014-05-14 2015-11-25 小米科技有限责任公司 传输控制指令的方法及装置
CN105516764A (zh) * 2014-09-24 2016-04-20 深圳Tcl新技术有限公司 遥控信息的配置方法及装置
CN105915527A (zh) * 2016-05-16 2016-08-31 北京奇虎科技有限公司 一种控制移动终端的方法和装置、移动终端
CN107851144A (zh) * 2016-05-19 2018-03-27 苹果公司 请求远程授权的设备的用户界面
CN106775396A (zh) * 2016-12-09 2017-05-31 北京奇虎科技有限公司 基于移动终端的输入操作方法和装置、移动终端
US20200210064A1 (en) * 2017-09-08 2020-07-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Key Display Method, Terminal, and Non-Transitory Computer-Readable Medium
CN108920225A (zh) * 2018-05-03 2018-11-30 腾讯科技(深圳)有限公司 远程辅助控制方法及装置、终端、存储介质
US20220067684A1 (en) * 2020-08-25 2022-03-03 International Business Machines Corporation Point-of-sale terminal transfer

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023216724A1 (zh) * 2022-05-12 2023-11-16 深圳市兆珑科技有限公司 终端控制方法、装置、电子设备及存储介质
CN116047336A (zh) * 2023-03-27 2023-05-02 深圳市铂纳特斯自动化科技有限公司 一种电池化成监控方法及装置

Also Published As

Publication number Publication date
WO2023216724A1 (zh) 2023-11-16

Similar Documents

Publication Publication Date Title
WO2023216724A1 (zh) 终端控制方法、装置、电子设备及存储介质
CN104978180B (zh) 一种未处理事件的提示方法、装置及移动终端
CN112417421B (zh) 扫描方法、装置、电子设备和可读存储介质
CN104035683A (zh) 一种通讯终端分屏多任务交互方法
CN111026464A (zh) 一种识别方法及电子设备
US20140361991A1 (en) Method and electronic device for controlling mouse module
US20170169122A1 (en) Webpage display method, mobile terminal, intelligent terminal, program and storage medium
WO2022111394A1 (zh) 信息处理方法、装置和电子设备
CN108494871B (zh) 云端虚拟机及其图像识别方法、系统和虚拟机瘦客户端
CN106843794B (zh) 一种基于安卓的分屏显示方法和系统
CN112099714B (zh) 截图方法、装置、电子设备及可读存储介质
CN112099684A (zh) 一种搜索展示方法、装置及电子设备
CN113721808B (zh) 一种控制方法及装置
CN113778583A (zh) 一种云桌面的本地应用的发布方法、装置、设备和介质
CN109063079B (zh) 网页标注方法及电子设备
US20170169042A1 (en) Webpage display method, mobile terminal, intelligent terminal, computer program and storage medium
CN112291412B (zh) 应用程序控制方法、装置及电子设备
CN112399010B (zh) 页面显示方法、装置和电子设备
CN112363852A (zh) 弹窗消息处理方法、装置、设备及计算机可读存储介质
CN111859322A (zh) 身份验证方法、装置和电子设备
CN112270544A (zh) 支付方法、装置和电子设备
CN111756787A (zh) 在线签名方法及装置、电子设备和计算机可读存储介质
CN112286419A (zh) 列表数据的加载方法、装置、终端及存储介质
CN113010059B (zh) 应用程序图标管理方法、装置及电子设备
CN112162689B (zh) 输入方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20230707

Address after: 518000 Room 401, Building 3, Shenzhen Software Park, Maling Community, Yuehai Street, Nanshan District, Shenzhen City, Guangdong Province

Applicant after: Shenzhen Zhaolong Technology Co.,Ltd.

Address before: 401, 402, building 3, Shenzhen Software Park, Nanshan District, Shenzhen City, Guangdong Province

Applicant before: PAX COMPUTER TECHNOLOGY (SHENZHEN) Co.,Ltd.

TA01 Transfer of patent application right