CN112462944B - 终端设备控制装置及方法、电子设备、存储介质 - Google Patents

终端设备控制装置及方法、电子设备、存储介质 Download PDF

Info

Publication number
CN112462944B
CN112462944B CN202011439295.4A CN202011439295A CN112462944B CN 112462944 B CN112462944 B CN 112462944B CN 202011439295 A CN202011439295 A CN 202011439295A CN 112462944 B CN112462944 B CN 112462944B
Authority
CN
China
Prior art keywords
terminal device
user
instruction
module
target terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011439295.4A
Other languages
English (en)
Other versions
CN112462944A (zh
Inventor
杨九魁
单予琼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202011439295.4A priority Critical patent/CN112462944B/zh
Publication of CN112462944A publication Critical patent/CN112462944A/zh
Application granted granted Critical
Publication of CN112462944B publication Critical patent/CN112462944B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本公开是关于终端设备控制装置及方法、电子设备、存储介质,属于智能设备技术领域。终端设备控制装置包括:获取模块,被配置为获取用户的动作;控制模块,被配置为根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及传输模块,被配置为将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令。通过获取模块获取用户的动作,通过控制模块确定终端设备操作、终端设备操作的目标终端设备和对应的指令,并且通过传输模块将指令传输到目标终端设备以使其执行该指令,由此实现了根据用户的动作来控制多个目标终端设备。

Description

终端设备控制装置及方法、电子设备、存储介质
技术领域
本公开涉及智能设备技术领域,尤其涉及一种终端设备控制装置及方法、电子设备、存储介质。
背景技术
目前,智能硬件被用于实现对计算机的控制,但是这种控制对软件生态有着极高的依赖性,并且每个智能硬件通常只能配合一台计算机使用。因此,在用于控制计算机的智能硬件的设计上还存在改进的空间。
发明内容
为克服相关技术中存在的问题,本公开提供一种终端设备控制装置及方法、电子设备、存储介质。
根据本公开的示例性实施例的第一方面,提供一种终端设备控制装置,所述终端设备控制装置包括:获取模块,被配置为获取用户的动作;控制模块,被配置为根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及传输模块,被配置为将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令。
在一个实施例中,所述传输模块包括基于人机接口设备协议的传输单元。
在一个实施例中,所述传输模块包括:第一传输模块,通信连接到第一终端设备,并且被配置为将与所述第一终端设备对应的第一指令传输到所述第一终端设备;以及第二传输模块,通信连接到第二终端设备,并且被配置为将与所述第二终端设备对应的第二指令传输到所述第二终端设备。
在一个实施例中,所述第一传输模块包括:基于人机接口设备协议的蓝牙单元,被配置为将所述第一指令传输到所述第一终端设备。
在一个实施例中,所述第二传输模块包括:第一蓝牙透传单元,通信连接到所述控制模块,并且被配置为从所述控制模块接收所述第二指令;第二蓝牙透传单元,被配置为与所述第一蓝牙透传单元配对,并且从所述第一蓝牙透传单元接收所述第二指令;以及基于人机接口设备协议的串口转通用串行总线单元,通信连接到所述第二蓝牙透传单元,并且被配置为从所述第二蓝牙透传单元接收所述第二指令。
在一个实施例中,所述获取模块包括:第一获取模块,包括第一红外漫反射传感器,并且被配置为确定所述用户存在或不存在;以及第二获取模块,包括第二红外漫反射传感器,并且被配置为获取所述用户的手势。
在一个实施例中,在所述第一获取模块确定所述用户不存在时,所述终端设备操作被确定为对所述目标终端设备执行屏幕锁定的操作。
在一个实施例中,在所述第二获取模块获取所述用户的第一手势时,所述终端设备操作被确定为对所述目标终端设备执行屏幕解锁的操作。
在一个实施例中,在所述第二获取模块获取所述用户的第二手势时,所述终端设备操作被确定为对所述目标终端设备执行屏幕截图的操作。
在一个实施例中,在所述第二获取模块获取所述用户的第三手势时,所述终端设备操作被确定为对所述目标终端设备执行选择所述目标终端设备的操作。
在一个实施例中,所述终端设备控制装置还包括:设置模块,被配置为设置所述用户的所述动作对应的所述终端设备操作。
在一个实施例中,所述控制模块包括第一串口和第二串口;所述设置模块连接到所述控制模块的所述第一串口;并且所述设置模块被配置为复用所述第二串口。
根据本公开的示例性实施例的第二方面,提供一种终端设备控制方法,所述终端设备控制方法包括:获取用户的动作;根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令。
在一个实施例中,所述将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令,包括:基于人机接口设备协议,将所述指令传输到所述目标终端设备。
在一个实施例中,所述将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令,包括:通过通信连接到第一终端设备的第一传输模块,将与所述第一终端设备对应的第一指令传输到所述第一终端设备;以及通过通信连接到第二终端设备的第二传输模块,将与所述第二终端设备对应的第二指令传输到所述第二终端设备。
在一个实施例中,所述通过通信连接到所述第一终端设备的所述第一传输模块,将与所述第一终端设备对应的所述第一指令传输到所述第一终端设备,包括:通过基于人机接口设备协议的蓝牙单元,将所述第一指令传输到所述第一终端设备。
在一个实施例中,通过通信连接到第二终端设备的所述第二传输模块,将与所述第二终端设备对应的所述第二指令传输到所述第二终端设备,包括:通过第一蓝牙透传单元,接收所述第二指令;通过与所述第一蓝牙透传单元配对的第二蓝牙透传单元,从所述第一蓝牙透传单元接收所述第二指令;以及通过通信连接到所述第二蓝牙透传单元的基于人机接口设备协议的串口转通用串行总线单元,从所述第二蓝牙透传单元接收所述第二指令。
在一个实施例中,所述获取所述用户的所述动作包括:通过第一红外漫反射传感器,确定所述用户存在或不存在;以及通过第二红外漫反射传感器,获取所述用户的手势。
在一个实施例中,在确定所述用户不存在时,确定所述终端设备操作为对所述目标终端设备执行屏幕锁定的操作。
在一个实施例中,在获取所述用户的第一手势时,确定所述终端设备操作为对所述目标终端设备执行屏幕解锁的操作。
在一个实施例中,在获取所述用户的第二手势时,确定所述终端设备操作为对所述目标终端设备执行屏幕截图的操作。
在一个实施例中,在获取所述用户的第三手势时,确定所述终端设备操作为对所述目标终端设备执行选择所述目标终端设备的操作。
在一个实施例中,在所述根据所述用户的所述动作确定所述用户的所述终端设备操作,并且确定所述终端设备操作的所述目标终端设备和对应的所述指令之前,所述终端设备控制方法还包括:设置所述用户的所述动作对应的所述终端设备操作。
根据本公开的示例性实施例的第三方面,提供一种电子设备,包括:处理器;以及用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为:执行前述任意一项所述的终端设备控制方法。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得所述终端能够执行前述任意一项所述的终端设备控制方法。
本公开的示例性实施例提供的技术方案可以包括下述有益技术效果:
本公开的示例性实施例提供了终端设备控制装置及方法、电子设备、存储介质。根据本公开的示例性实施例的终端设备控制装置包括:获取模块,被配置为获取用户的动作;控制模块,被配置为根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及传输模块,被配置为将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令。通过获取模块获取用户的动作,通过控制模块确定终端设备操作、终端设备操作的目标终端设备和对应的指令,并且通过传输模块将指令传输到目标终端设备以使其执行该指令,由此实现了根据用户的动作来控制多个目标终端设备。
应当理解的是,上述的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
图2是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
图3是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
图4是根据一示例性实施例示出的一种终端设备控制装置中的获取模块的示意性框图。
图5是根据一示例性实施例示出的一种终端设备控制装置中的电源模块的示意性框图。
图6是根据一示例性实施例示出的一种终端设备控制方法的流程图。
图7是根据一示例性实施例示出的一种装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
目前,智能硬件可以实现对计算机的联动控制。诸如智能手环的可穿戴设备可以通过蓝牙实现对计算机进行联动控制。然而,这种联动控制对软件生态有着极高的依赖性。例如,智能手环被用于锁定计算机时,利用蓝牙判断计算机与用户的距离,并且在距离超过预设值时锁定计算机。智能手环需要计算机的系统软件的支持,才能实现自动锁定计算机,并且每个智能手环只能配合一台计算机使用。智能手环解锁计算机时需要计算机软件进行身份的验证。就对计算机的联动控制而言,智能手环既不支持多台计算机,也不支持多种操作系统。总体而言,智能手环的功能较为单一,依赖于系统软件,并且操作执行较为缓慢。
人机接口设备(Human Interface Device,HID)协议被应用于计算机的鼠标和键盘。HID协议还被应用于诸如抢答按钮的应用场景。抢答按钮通过HID协议实现模拟键盘或者鼠标上的按键,应用于抢答、抽奖等。用户按下抢答按钮时,抢答按钮向计算机发送对应设定的按键值。例如,当抢答软件以回车(ENTER)键作为停止指令时,则将抢答按钮的按键值设定为ENTER,从而作为抢答时的控制键。然而,抢答按钮通常只能作为按钮使用,并且出厂后用户通常无法自行修改预先设定的按键。另外,抢答按钮通常不支持组合按键,并且不支持多台计算机的连接。
有鉴于此,发明人提出了可以控制多个终端设备的终端设备控制装置和方法。如上所述,本公开的技术方案可以应用于智能设备技术领域。然而应指出,本公开的技术方案还可以应用于智慧办公技术领域和智能家居技术领域,例如,可以融合到办公桌或者可以与智能音箱等设备合并在一起。
根据本公开的示例性实施例的终端设备控制装置及方法、电子设备、存储介质的具体实现方式参见如下所述的示例性实施例。
图1是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
参考图1,示出了根据本公开的示例性实施例的一种终端设备控制装置100。终端设备控制装置100包括:获取模块110,获取模块110被配置为获取用户的动作;控制模块130,控制模块130被配置为根据用户的动作确定用户的终端设备操作,并且确定终端设备操作的目标终端设备(例如,在图2中所示的终端设备200)和对应的指令;以及传输模块140,传输模块140被配置为将指令传输到目标终端设备,以使目标终端设备执行指令。
在如图1中所示的终端设备控制装置100中,通过获取模块110获取用户的动作,通过控制模块130确定终端设备操作、终端设备操作的目标终端设备和对应的指令,并且通过传输模块140将指令传输到目标终端设备以使其执行该指令,由此实现了根据用户的动作来控制多个目标终端设备。如前文所述,抢答按钮和诸如智能手环的智能设备都不能支持多台计算机。相比之下,根据本公开示例性实施例的终端设备控制装置100可以实现对多个目标终端设备的控制。
在本公开的示例性实施例中,传输模块140可以包括基于HID协议的传输单元。也就是说,本公开的示例性实施例提出了基于HID协议而设计的智能硬件,该智能硬件可以兼容多种操作系统并且可以控制多个终端设备。由于HID协议对Windows、Mac OS、Unix、Linux、Ubuntu、FreeBSD等操作系统原生具有兼容性,因此终端设备控制装置100可以实现多操作系统支持。另一方面,不需要上位机的支持。基于HID协议的设计不需要计算机上位机软件支持,因此终端设备控制装置100不会随着计算机系统的升级而产生不兼容的问题。
在本公开的示例性实施例中,控制模块130可以包括诸如闪速存储器的存储单元,并且该存储和单元存储有用户的动作与终端设备操作之间的对应关系。
在一些实施例中,用户的动作与终端设备操作之间的对应关系可以预先存储于控制模块130的存储单元内。
参考图1,终端设备控制装置100还可以包括设置模块120,并且设置模块120被配置为设置用户的动作对应的终端设备操作。也就是说,用户可以通过设置模块120设置用户的动作与终端设备操作之间的对应关系,并且由此实现了对终端设备的控制的可自定义。
参考图1,终端设备控制装置100还可以包括电源模块150,并且电源模块150被配置为提供控制模块130工作所需的电力。应指出,电源模块150还可以被配置为提供终端设备控制装置100中的其它模块工作所需的电力,例如配置为提供获取模块110、设置模块120或传输模块140工作所需的电力。还应指出,电源模块150可以与控制模块130分离地设置,也可以与控制模块130一体地设置。
图2是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
参考图2,示出了根据本公开的示例性实施例的一种终端设备控制装置100,并且为了说明方便还示出了作为终端设备控制装置100的目标终端设备的终端设备200。
在本公开的示例性实施例中,终端设备控制装置100的传输模块140可以包括一个或多个传输模块。在如图2中所示的实施例中,传输模块140可以包括多个传输模块,例如,第一传输模块140a、第二传输模块140b、……以及第n传输模块140n,其中,n可以是大于或等于2的自然数。相应地,终端设备200可以包括多个终端设备,例如,第一终端设备200a、第二终端设备200b、……以及第n终端设备200n,其中,n可以是大于或等于2的自然数。因此,传输模块140包括的传输模块的数目与终端设备200包括的目标终端设备的数目相同。如图2中所示,第一传输模块140a通信连接到第一终端设备200a,并且被配置为将与第一终端设备200a对应的第一指令传输到第一终端设备200a;第二传输模块140b通信连接到第二终端设备200b,并且被配置为将与第二终端设备200b对应的第二指令传输到第二终端设备200b;并且第n传输模块140n通信连接到第n终端设备200n,并且被配置为将与第n终端设备200n对应的第n指令传输到第n终端设备200n。通过如上所述的配置,终端设备控制装置100可以分别控制第一终端设备200a、第二终端设备200b、……以及第n终端设备200n。
图3是根据一示例性实施例示出的一种终端设备控制装置的示意性框图。
结合图3,在用于控制两个终端设备的场景下描述根据本公开的示例性实施例的终端设备控制装置。与图2类似,图3示出了根据本公开的示例性实施例的一种终端设备控制装置100,并且为了说明方便还示出了作为终端设备控制装置100的目标终端设备的终端设备200。
具体而言,在根据本公开的示例性实施例中,终端设备控制装置100的传输模块140可以包括两个传输模块,即,第一传输模块140a和第二传输模块140b。相应地,第一传输模块140a通信连接到第一终端设备200a,并且被配置为将与第一终端设备200a对应的第一指令传输到第一终端设备200a;并且第二传输模块140b通信连接到第二终端设备200b,并且被配置为将与第二终端设备200b对应的第二指令传输到第二终端设备200b。通过这种方式,终端设备控制装置100可以分别控制第一终端设备200a和第二终端设备200b。也就是说,终端设备控制装置100支持两个目标终端设备的连接控制。这可以满足用户在日常应用场景中大部分需求。
在本公开的示例性实施例中,第一终端设备200a可以是支持诸如蓝牙的无线传输的目标终端设备,例如,在Windows操作系统工作的笔记本计算机,并且第二终端设备200b可以是不支持诸如蓝牙的无线传输的目标终端设备,例如,在Ubuntu操作系统工作的台式计算机。
在本公开的示例性实施例中,第一传输模块140a可以包括:基于人机接口设备协议的蓝牙单元(蓝牙HID单元)140a1。蓝牙HID单元140a1被配置为将第一指令传输到第一终端设备200a。
在本公开的示例性实施例中,第二传输模块140b可以包括第一蓝牙透传单元140b1、第二蓝牙透传单元140b2和基于人机接口设备协议的串口转通用串行总线单元(串口转USB HID单元)140b3。第一蓝牙透传单元140b1通信连接到控制模块130,并且被配置为从控制模块130接收第二指令。第二蓝牙透传单元140b2被配置为与第一蓝牙透传单元140b1配对,并且从第一蓝牙透传单元140b1接收第二指令。串口转USB HID单元140b3通信连接到第二蓝牙透传单元140b2,并且被配置为从第二蓝牙透传单元140b2接收第二指令。
在结合图3描述的示例性实施例中,第一终端设备200a是支持诸如蓝牙的无线传输的目标终端设备,并且第二终端设备200b是不支持诸如蓝牙的无线传输的目标终端设备。然而应指出,根据本公开实施例的终端设备控制装置100可以应用于终端设备部分支持无线传输的场景,终端设备全部支持无线传输的场景,以及终端设备全部不支持无线传输的场景。还应指出,在根据本公开的示例性实施例中,终端设备控制装置100的控制模块130和终端设备200之间的无线传输不限于如上述所的蓝牙传输方式,例如原则上还可以采用诸如WiFi、ZigBee的无线传输方式。还应指出,目标终端设备不限于如上所述的笔记本计算机或台式计算机,并且还可以是诸如平板计算机、移动电话、智能手表的移动终端。
图4是根据一示例性实施例示出的一种终端设备控制装置中的获取模块的示意性框图。
参考图4,在本公开的示例性实施例中,获取模块110可以包括第一获取模块110a和第二获取模块110b。例如,第一获取模块110a可以包括第一红外漫反射传感器,并且被配置为确定用户存在或不存在。例如,第二获取模块110b可以包括第二红外漫反射传感器,并且被配置为获取用户的手势。
在示例性实施例中,第一红外漫反射传感器可以安装在终端设备控制装置100的面向用户的一侧,以便于检测用户是否站在或者坐在终端设备控制装置100的前方。例如,当用户站在或者坐在终端设备控制装置100的前方时,第一红外漫反射传感器被遮挡,表示用户存在。例如,当用户不站在或者坐在终端设备控制装置100的前方时,第一红外漫反射传感器未被遮挡,表示用户不存在。
在示例性实施例中,第二红外漫反射传感器可以安装在终端设备控制装置100的顶侧,以便于检测用户的手势输入。例如,当用户在终端设备控制装置100的上方晃动手指时,第二红外漫反射传感器可以检测用户的手势输入,并且将手势输入传输给控制模块130。
在本公开的示例性实施例中,在第一获取模块110a确定用户不存在时,终端设备操作被确定为对目标终端设备执行屏幕锁定的操作。
在本公开的示例性实施例中,在第二获取模块110b获取用户的第一手势时,终端设备操作被确定为对目标终端设备执行屏幕解锁的操作。
在本公开的示例性实施例中,在第二获取模块110b获取用户的第二手势时,终端设备操作被确定为对目标终端设备执行屏幕截图的操作。
在本公开的示例性实施例中,在第二获取模块110b获取用户的第三手势时,终端设备操作被确定为对目标终端设备执行选择目标终端设备的操作。
在本公开的示例性实施例中,控制模块130可以包括n+1个串口,其中,n为终端设备控制装置100所控制的目标终端设备的数目。这种情况下,留出一个串口用于连接设置模块120以实现相应的功能设定。在一些实施例中,控制模块130可以包括第一串口和第二串口,设置模块120可以连接到控制模块130的第一串口,并且设置模块120可以被配置为复用第二串口。通过串口复用节约串口模块,降低对硬件的要求,从而成本降低。
在成本方面,当控制模块130采用51内核的单片机(即,兼容Intel 8051指令系统的单片机)作为核心控制器时,并且通过串口复用,例如利用一个串口支持双蓝牙的连接,可以降低原型机的硬件成本。当控制模块130采用蓝牙芯片CC2541作为核心控制器时,也可以降低硬件成本。
结合图3和图4,简要描述终端设备控制装置100的操作流程。
当用于多台计算机的使用环境下的计算机控制,例如,第一终端设备200a(例如一台Windows笔记本计算机)与第二终端设备200b(例如一台Ubuntu台式计算机)时,通过第一获取模块110a包括的第一红外漫反射传感器和第二获取模块110b包括的第二红外漫反射传感器采集用户的行为与手势,经过控制模块130(例如单片机)的处理,将指令通过包括蓝牙HID单元140a1的第一传输模块140a和包括串口转USB HID单元140b3的第二传输模块140b分别发送到与之连接的第一终端设备200a和第二终端设备200b,由此实现设定的控制。
如图3中所示,首先通过蓝牙与第一终端设备200a(Windows笔记本计算机)连接,将USB接收头插在第二终端设备200b(Ubuntu台式计算机)上。诸如第一蓝牙透传单元140b1和第二蓝牙透传单元140b2的蓝牙透传模块上电后会自动连接。此时控制模块130开始正常工作。
通过设置模块120可以设定串口与控制模块130交互,设定解锁密码和手势功能。例如,设置模块120使用数据线与控制模块130的第一串口相连,发送设定指令设定手势功能和两台计算机的解锁密码。控制模块130保存指令到存储器,并且在每次开机时读取。这实现了功能的可自定义。
控制模块130通过第一红外漫反射传感器和第二红外漫反射传感器采集信息,分析判断出用户操作的功能并生成相应的指令。这实现复杂逻辑判断和功能。
例如,当用于识别遮挡的第一红外漫反射传感器不被遮挡时,控制模块130经过判断识别到用户离开,向蓝牙HID单元140a1和串口转USB HID单元140b3这两个HID单元发送屏幕锁定指令,蓝牙HID单元140a1模拟键盘执行例如WIN+L(以Windows 10系统为例)的组合按键的屏幕锁定指令,并且串口转USB HID单元140b3模拟键盘执行例如Ctrl+Alt+L的组合按键的屏幕锁定指令,从而分别完成第一终端设备200a(Windows笔记本计算机)和第二终端设备200b(Ubuntu台式计算机)的自动屏幕锁定。
例如,当用于识别手势的第一红外漫反射传感器被遮挡时,控制模块130通过采集第二红外漫反射传感器收集的数据分析用户的手势,如解锁手势。控制模块130向蓝牙HID单元140a1和串口转USB HID单元140b3这两个HID单元发送唤醒指令唤醒计算机,然后发送解锁密码完成密码框中密码的输入。藉此实现了对多计算机多操作系统的控制操作。
控制模块130将第二串口复用到蓝牙HID单元140a1,根据上述得到的指令发送相应的控制指令,使用蓝牙HID单元140a1控制第一终端设备200a完成相应的操作。
控制模块130将第二串口复用到第一蓝牙透传单元140b1,根据上述得到的指令发送相应的控制指令,第一蓝牙透传单元140b1将指令透传到串口转USB HID单元140b3,串口转USB HID单元140b3控制第二终端设备200b完成相应的操作。
对于需要两台计算机执行的操作,如解锁和锁屏,控制模块130自行将指令发送给两台计算机。
对于只需要一台计算机执行的操作,可以使用手势进行切换选择要执行操作的计算机。
本技术提供的方案,支持所有键盘相关的操作,且可以进行两台计算机的无线连接,满足日常场景的需求,并且具有可编程的核心控制器和传感器,能够实现复杂的控制逻辑。例如锁屏,解锁,截屏等。
图5是根据一示例性实施例示出的一种终端设备控制装置中的电源模块的示意性框图。
在本公开的示例性实施例中,电源模块150包括充电单元150a、电池单元150b和DC-DC升压单元150c。
图6是根据一示例性实施例示出的一种终端设备控制方法的流程图。
参考图6,示出了根据本公开的示例性实施例的一种终端设备控制方法。
在本公开的示例性实施例中,一种终端设备控制方法包括:步骤S510,获取用户的动作;步骤S530,根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及步骤S540,将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令。
在本公开的示例性实施例中,将指令传输到目标终端设备,以使目标终端设备执行指令,包括:基于人机接口设备协议,将指令传输到目标终端设备。
在本公开的示例性实施例中,将指令传输到目标终端设备,以使目标终端设备执行指令,包括:通过通信连接到第一终端设备的第一传输模块,将与第一终端设备对应的第一指令传输到第一终端设备;以及通过通信连接到第二终端设备的第二传输模块,将与第二终端设备对应的第二指令传输到第二终端设备。
在本公开的示例性实施例中,通过通信连接到第一终端设备的第一传输模块,将与第一终端设备对应的第一指令传输到第一终端设备,包括:通过基于人机接口设备协议的蓝牙单元,将第一指令传输到第一终端设备。
在本公开的示例性实施例中,通过通信连接到第二终端设备的第二传输模块,将与第二终端设备对应的第二指令传输到第二终端设备,包括:通过第一蓝牙透传单元,接收第二指令;通过与第一蓝牙透传单元配对的第二蓝牙透传单元,从第一蓝牙透传单元接收第二指令;以及通过通信连接到第二蓝牙透传单元的基于人机接口设备协议的串口转通用串行总线单元,从第二蓝牙透传单元接收第二指令。
在本公开的示例性实施例中,获取用户的动作包括:通过第一红外漫反射传感器,确定用户存在或不存在;以及通过第二红外漫反射传感器,获取用户的手势。
在本公开的示例性实施例中,在确定用户不存在时,确定终端设备操作为对目标终端设备执行屏幕锁定的操作。
在本公开的示例性实施例中,在获取用户的第一手势时,确定终端设备操作为对目标终端设备执行屏幕解锁的操作。
在本公开的示例性实施例中,在获取用户的第二手势时,确定终端设备操作为对目标终端设备执行屏幕截图的操作。
在本公开的示例性实施例中,在获取用户的第三手势时,确定终端设备操作为对目标终端设备执行选择目标终端设备的操作。
在本公开的示例性实施例中,在根据用户的动作确定用户的终端设备操作,并且确定终端设备操作的目标终端设备和对应的指令之前,终端设备控制方法还包括:步骤S520,设置所述用户的所述动作对应的所述终端设备操作。
图7是根据一示例性实施例示出的一种装置的框图。该装置600可以用于遥控,也可以用于设备信息写入。例如,装置600可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参考图7,装置600可以包括下述一个或多个组件:处理组件602,存储器604,电力组件606,多媒体组件608,音频组件610,输入/输出(I/O)接口612,传感器组件614,以及通信组件616。
处理组件602通常控制装置600的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件602可以包括一个或多个模块,便于处理组件602和其他组件之间的交互。例如,处理组件602可以包括多媒体模块,以方便多媒体组件608和处理组件602之间的交互。
存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件606为装置600的各种组件提供电力。电力组件606可以包括电源管理系统,一个或多个电源,及其他与为装置600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件608包括一个前置摄像头和/或后置摄像头。当装置600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如,音频组件610包括一个麦克风(MIC),当装置600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中,音频组件610还包括一个扬声器,用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器,用于为装置600提供各个方面的状态评估。例如,传感器组件614可以检测到装置600的打开/关闭状态,组件的相对定位,例如所述组件为装置600的显示器和小键盘,传感器组件614还可以检测装置600或装置600一个组件的位置改变,用户与装置600接触的存在或不存在,装置600方位或加速/减速和装置600的温度变化。传感器组件614可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件614还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络,如WiFi、2G或3G,或它们的组合。在一个示例性实施例中,通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件616还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器604,上述指令可由装置600的处理器620执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
可以理解的是,本公开中“多个”是指两个或两个以上,其它量词与之类似。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
进一步可以理解的是,术语“第一”、“第二”等用于描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开,并不表示特定的顺序或者重要程度。实际上,“第一”、“第二”等表述完全可以互换使用。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。
进一步可以理解的是,术语“中心”、“纵向”、“横向”、“下”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本实施例和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作。
进一步可以理解的是,除非有特殊说明,“连接”包括两者之间不存在其他构件的直接连接,也包括两者之间存在其他元件的间接连接。
进一步可以理解的是,本公开实施例中尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (23)

1.一种终端设备控制装置,其特征在于,包括:
获取模块,被配置为获取用户的动作;
控制模块,被配置为根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及
传输模块,被配置为将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令;
其中,所述传输模块包括:
第一传输模块,通信连接到第一终端设备,并且被配置为将与所述第一终端设备对应的第一指令传输到所述第一终端设备;以及
第二传输模块,通信连接到第二终端设备,并且被配置为将与所述第二终端设备对应的第二指令传输到所述第二终端设备。
2.根据权利要求1所述的终端设备控制装置,其特征在于,
所述传输模块包括基于人机接口设备协议的传输单元。
3.根据权利要求1所述的终端设备控制装置,其特征在于,
所述第一传输模块包括:
基于人机接口设备协议的蓝牙单元,被配置为将所述第一指令传输到所述第一终端设备。
4.根据权利要求3所述的终端设备控制装置,其特征在于,
所述第二传输模块包括:
第一蓝牙透传单元,通信连接到所述控制模块,并且被配置为从所述控制模块接收所述第二指令;
第二蓝牙透传单元,被配置为与所述第一蓝牙透传单元配对,并且从所述第一蓝牙透传单元接收所述第二指令;以及
基于人机接口设备协议的串口转通用串行总线单元,通信连接到所述第二蓝牙透传单元,并且被配置为从所述第二蓝牙透传单元接收所述第二指令。
5.根据权利要求1-4中任意一项所述的终端设备控制装置,其特征在于,
所述获取模块包括:
第一获取模块,包括第一红外漫反射传感器,并且被配置为确定所述用户存在或不存在;以及
第二获取模块,包括第二红外漫反射传感器,并且被配置为获取所述用户的手势。
6.根据权利要求5所述的终端设备控制装置,其特征在于,
在所述第一获取模块确定所述用户不存在时,所述终端设备操作被确定为对所述目标终端设备执行屏幕锁定的操作。
7.根据权利要求5所述的终端设备控制装置,其特征在于,
在所述第二获取模块获取所述用户的第一手势时,所述终端设备操作被确定为对所述目标终端设备执行屏幕解锁的操作。
8.根据权利要求5所述的终端设备控制装置,其特征在于,
在所述第二获取模块获取所述用户的第二手势时,所述终端设备操作被确定为对所述目标终端设备执行屏幕截图的操作。
9.根据权利要求5所述的终端设备控制装置,其特征在于,
在所述第二获取模块获取所述用户的第三手势时,所述终端设备操作被确定为对所述目标终端设备执行选择所述目标终端设备的操作。
10.根据权利要求1所述的终端设备控制装置,其特征在于,还包括:
设置模块,被配置为设置所述用户的所述动作对应的所述终端设备操作。
11.根据权利要求10所述的终端设备控制装置,其特征在于,
所述控制模块包括第一串口和第二串口;
所述设置模块连接到所述控制模块的所述第一串口;并且
所述设置模块被配置为复用所述第二串口。
12.一种终端设备控制方法,其特征在于,包括:
获取用户的动作;
根据所述用户的所述动作确定所述用户的终端设备操作,并且确定所述终端设备操作的目标终端设备和对应的指令;以及
将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令;
其中,所述将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令,包括:
通过通信连接到第一终端设备的第一传输模块,将与所述第一终端设备对应的第一指令传输到所述第一终端设备;以及
通过通信连接到第二终端设备的第二传输模块,将与所述第二终端设备对应的第二指令传输到所述第二终端设备。
13.根据权利要求12所述的终端设备控制方法,其特征在于,
所述将所述指令传输到所述目标终端设备,以使所述目标终端设备执行所述指令,包括:
基于人机接口设备协议,将所述指令传输到所述目标终端设备。
14.根据权利要求12所述的终端设备控制方法,其特征在于,
所述通过通信连接到所述第一终端设备的所述第一传输模块,将与所述第一终端设备对应的所述第一指令传输到所述第一终端设备,包括:
通过基于人机接口设备协议的蓝牙单元,将所述第一指令传输到所述第一终端设备。
15.根据权利要求14所述的终端设备控制方法,其特征在于,
通过通信连接到第二终端设备的所述第二传输模块,将与所述第二终端设备对应的所述第二指令传输到所述第二终端设备,包括:
通过第一蓝牙透传单元,接收所述第二指令;
通过与所述第一蓝牙透传单元配对的第二蓝牙透传单元,从所述第一蓝牙透传单元接收所述第二指令;以及
通过通信连接到所述第二蓝牙透传单元的基于人机接口设备协议的串口转通用串行总线单元,从所述第二蓝牙透传单元接收所述第二指令。
16.根据权利要求12-15中任意一项所述的终端设备控制方法,其特征在于,
所述获取所述用户的所述动作包括:
通过第一红外漫反射传感器,确定所述用户存在或不存在;以及
通过第二红外漫反射传感器,获取所述用户的手势。
17.根据权利要求16所述的终端设备控制方法,其特征在于,
在确定所述用户不存在时,确定所述终端设备操作为对所述目标终端设备执行屏幕锁定的操作。
18.根据权利要求16所述的终端设备控制方法,其特征在于,
在获取所述用户的第一手势时,确定所述终端设备操作为对所述目标终端设备执行屏幕解锁的操作。
19.根据权利要求16所述的终端设备控制方法,其特征在于,
在获取所述用户的第二手势时,确定所述终端设备操作为对所述目标终端设备执行屏幕截图的操作。
20.根据权利要求16所述的终端设备控制方法,其特征在于,
在获取所述用户的第三手势时,确定所述终端设备操作为对所述目标终端设备执行选择所述目标终端设备的操作。
21.根据权利要求12所述的终端设备控制方法,其特征在于,
在所述根据所述用户的所述动作确定所述用户的所述终端设备操作,并且确定所述终端设备操作的所述目标终端设备和对应的所述指令之前,所述终端设备控制方法还包括:
设置所述用户的所述动作对应的所述终端设备操作。
22.一种电子设备,其特征在于,包括:
处理器;以及
用于存储所述处理器可执行指令的存储器,
其中,所述处理器被配置为:执行权利要求12至21中任意一项所述的终端设备控制方法。
23.一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得所述终端能够执行权利要求12至21中任意一项所述的终端设备控制方法。
CN202011439295.4A 2020-12-07 2020-12-07 终端设备控制装置及方法、电子设备、存储介质 Active CN112462944B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011439295.4A CN112462944B (zh) 2020-12-07 2020-12-07 终端设备控制装置及方法、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011439295.4A CN112462944B (zh) 2020-12-07 2020-12-07 终端设备控制装置及方法、电子设备、存储介质

Publications (2)

Publication Number Publication Date
CN112462944A CN112462944A (zh) 2021-03-09
CN112462944B true CN112462944B (zh) 2025-02-25

Family

ID=74800550

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011439295.4A Active CN112462944B (zh) 2020-12-07 2020-12-07 终端设备控制装置及方法、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN112462944B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113515194A (zh) * 2021-06-24 2021-10-19 北京七展国际数字科技有限公司 显示内容控制装置和方法
CN115685774A (zh) * 2022-10-08 2023-02-03 青岛海尔空调器有限总公司 用于家电控制的方法、装置、口腔控制器和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111562753A (zh) * 2020-05-09 2020-08-21 广州市鼎好家具有限公司 一种中岛台控制方法、装置、计算机设备以及存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102810023B (zh) * 2011-06-03 2015-09-23 联想(北京)有限公司 识别手势动作的方法及终端设备
CN103576578B (zh) * 2013-11-05 2017-04-12 小米科技有限责任公司 一种采用耳机线对终端进行控制的方法、装置和设备
CN103593055B (zh) * 2013-11-27 2017-05-31 北京科技大学 一种基于手势控制器的控制系统
CN104008634A (zh) * 2014-05-26 2014-08-27 小米科技有限责任公司 设备控制方法、装置及系统
CN104503688B (zh) * 2014-12-31 2018-03-02 小米科技有限责任公司 智能硬件设备的控制实现方法及装置
CN105094822A (zh) * 2015-07-17 2015-11-25 小米科技有限责任公司 终端设备控制方法及装置
CN105468152B (zh) * 2015-11-24 2019-02-19 小米科技有限责任公司 基于可穿戴设备的终端操作控制方法、装置和设备
CN106250037A (zh) * 2016-07-25 2016-12-21 珠海市魅族科技有限公司 一种移动终端的控制方法及移动终端
CN106774889B (zh) * 2016-12-15 2020-09-11 广州大学 可穿戴装置的手势识别方法及装置
WO2018171196A1 (zh) * 2017-03-21 2018-09-27 华为技术有限公司 一种控制方法、终端及系统
DE102017008051A1 (de) * 2017-08-27 2019-02-28 Tobias Rückert Verfahren zur Deaktivierung von Steuerkanälen und Kommunikationssystem zur Kommunikation eines Users mit Gruppen von Zielgeräten
CN109782919A (zh) * 2019-01-30 2019-05-21 维沃移动通信有限公司 一种终端设备的控制方法和终端设备
CN110015307B (zh) * 2019-03-12 2022-08-26 深圳壹账通智能科技有限公司 一种车辆控制方法、装置、可读存储介质及终端设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111562753A (zh) * 2020-05-09 2020-08-21 广州市鼎好家具有限公司 一种中岛台控制方法、装置、计算机设备以及存储介质

Also Published As

Publication number Publication date
CN112462944A (zh) 2021-03-09

Similar Documents

Publication Publication Date Title
US10242168B2 (en) Methods and apparatuses for controlling smart device
CN106527160B (zh) 设备控制方法及装置
US10705487B2 (en) Methods and devices for mode switching
EP3136793B1 (en) Method and apparatus for awakening electronic device
JP6353603B2 (ja) スマートホームデバイスの制御方法、装置、電子デバイス、プログラム及び記憶媒体
EP2930705B1 (en) Method and apparatus for controlling smart terminal
EP2960822B1 (en) Method and device for locking file
EP3331226B1 (en) Method and device for reading messages
CN104503691B (zh) 设备控制方法、装置及智能终端
EP3163549B1 (en) Interface display method and device
EP3076640A1 (en) Method, apparatus for controlling state of terminal screen, and electronic device
CN113795817A (zh) 一种分屏显示的操作方法及电子设备
EP3933570A1 (en) Method and apparatus for controlling a voice assistant, and computer-readable storage medium
US20170055150A1 (en) Method and device for acquiring using authority
CN106504390A (zh) 门锁控制方法、装置及系统
CN111984347B (zh) 交互处理方法、装置、设备及存储介质
CN107102772B (zh) 触控方法及装置
CN111988493B (zh) 交互处理方法、装置、设备及存储介质
CN103927200B (zh) 电子设备唤醒方法及相关装置
US20150288764A1 (en) Method and apparatus for controlling smart terminal
CN110413148B (zh) 防误触检测方法、装置、设备以及存储介质
CN111610912B (zh) 应用显示方法、应用显示装置及存储介质
CN112462944B (zh) 终端设备控制装置及方法、电子设备、存储介质
CN105893078A (zh) 用于控制相机系统的方法、电子装置和存储介质
CN111541922B (zh) 显示界面输入信息的方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant