CN117111483A - 一种智能设备控制方法及系统 - Google Patents

一种智能设备控制方法及系统 Download PDF

Info

Publication number
CN117111483A
CN117111483A CN202310183380.6A CN202310183380A CN117111483A CN 117111483 A CN117111483 A CN 117111483A CN 202310183380 A CN202310183380 A CN 202310183380A CN 117111483 A CN117111483 A CN 117111483A
Authority
CN
China
Prior art keywords
control command
intelligent
gateway
data
intelligent equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310183380.6A
Other languages
English (en)
Inventor
张子旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202310183380.6A priority Critical patent/CN117111483A/zh
Publication of CN117111483A publication Critical patent/CN117111483A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2642Domotique, domestic, home control, automation, smart house
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本申请提供了一种智能设备控制方法及系统,涉及智能设备领域,该方法包括:智能设备通过传感器获得感知数据,将感知数据发送给网关;网关接收到智能设备发送的感知数据后,对感知数据进行处理,得到对应的处理;网关根据对应的处理结果,向智能设备发送当前控制命令;智能设备接收到当前控制命令后,执行当前控制命令。通过蓝牙访存技术,将智能设备获得的感知数据发送给网关,网关对感知数据进行处理。由于感知数据由网关处理,智能设备不需要单独搭载处理器处理感知数据,所以降低了单个智能设备的成本,并且当智能设备需要升级时,只需要在网关侧进行升级,大大提高了智能设备升级维护的便捷性。

Description

一种智能设备控制方法及系统
技术领域
本申请涉及智能网关领域,尤其涉及一种智能设备控制方法及系统。
背景技术
随着科学技术的发展,智能设备(例如:智能家居设备)已经逐步应用到用户的日常生活中,智能设备的蓬勃发展改变了用户的日常生活方式。当前已有的智能家居控制系统主要包括网关设备和智能设备,主要是通过网关设备实现多个智能设备的联动。
以智能家居设备为例,随着科学技术的发展,搭载有复杂传感器的智能家居设备出现,智能家居设备对计算性能的要求越来越高,所以较为复杂的智能家居设备通常搭载有独立的处理器单独来处理传感数据,从而实现对应的功能,例如:人脸识别门锁搭载有NPU芯片,通过NPU芯片处理传感数据从而实现离线检验人脸身份的功能。
由此可知,当前已有的智能设备需要搭载独立的处理器,才能实现对应的功能,这样使得单个智能设备的成本增加并且智能设备升级维护困难。
发明内容
本申请提供的一种智能设备控制方法及系统,降低了单个智能设备的成本,并且提高了智能设备升级维护的便捷性。
为达到上述目的,本申请采用如下技术方案:
第一方面,本申请提供了一种智能设备控制方法,该方法应用于网关,该方法包括:接收智能设备发送的感知数据,该感知数据是智能设备通过传感器获得的数据,在接收到感知数据后,对感知数据进行处理,得到处理结果,根据处理结果,再次向智能设备发送当前控制命令,从而通过控制命令对智能设备进行控制。通过蓝牙访存技术,将智能设备通过传感器获取的感知数据传输到网关,由网关进行处理,这样智能设备不需要单独搭载处理器处理感知数据,降低了单个智能设备的成本,进一步,当智能设备需要升级时,只需要在网关进行计算能力的升级(例如:增加新的计算模块,增加新的芯片等),大大提高了智能设备升级维护的便捷性。
在一种可能的实现方式中,先向智能设备发送上一个控制命令,当智能设备确定该上一个控制命令的类型为第一类型时,向网关发送感知数据。第一类型可以是访存命令的类型等,所以网关需要访存智能设备的感知数据,从而对感知数据进行处理。
在一种可能的实现方式中,上一个控制命令是根据操作请求得到的,在获得处理结果之后,根据对应的处理结果,对操作请求对应的任务状态进行更新,根据更新后的任务状态,判断与操作请求对应的任务是否已经完成,若确定操作请求对应的任务未完成,则生成针对智能设备的当前控制命令,并发送给智能设备,以控制智能设备。这样做可以通过网关直接完成与操作请求对应的任务,不需要人工操作,简化了用户操作,提高了用户的体验感。
在一种可能的实现方式中,接收智能设备发送的当前所处的设备状态,当前所处的设备状态是智能设备确定上一步控制命令的类型为第二类型时,根据上一步控制命令执行对应的物理操作,当物理操作执行结束后获得的,根据当前所处的设备状态,向智能设备发送当前控制命令,以控制智能设备。
在一种可能的实现方式中,上一个控制命令是基于操作请求得到的,当接收到智能设备发送的当前所处的设备状态后,根据当前所处的设备状态,对于操控请求对应的任务状态进行更新,根据更新后的任务状态判断对应任务是否已经完成,若确定操作请求对应的任务未完成,则生成针对智能设备的当前控制命令,并发送给智能设备,以控制智能设备。这样做可以通过网关直接完成与操作请求对应的任务,不需要人工操作,简化了用户操作,提高了用户的体验感。
在一种可能的实现方式中,网关将更新后的任务状态反馈给用户端,从而使得用户可以实时关注任务完成的情况,可以实时掌握任务进程。
第二方面,本申请提供了一种智能设备控制方法,该方法应用于智能设备,该智能设备包括至少一个传感器,该方法包括:通过至少一个传感器获得感知数据,向网关发送该感知数据,以便于网关对该感知数据进行处理从而得到处理结果,再根据处理结果向网关发送当前控制命令,接收网关根据处理结果返回的当前控制命令,执行该当前控制命令。智能设备通过传感器获得感知数据,然后通过远程蓝牙访存技术,将感知数据发送给网关进行处理,并且执行当前控制命令。通过网关对感知数据进行处理,所以智能设备不需要单独搭载额外的处理器对感知数据进行处理,降低了单个智能设备的成本。当智能设备需要进行升级的时候,相应的需要提高对应的计算能力,本申请只需要对智能网关中的处理器进行升级或增加计算模块,即可完成升级,所以提高了智能设备升级维护的便捷性。
在一种可能的实现方式中,接收网关发送的上一个控制命令,确定上一个控制命令的类型,当确定上一个控制命令的类型为第一类型时,向网关发送感知数据,以便于网关对感知数据进行处理,得到处理结果。
在一种可能的实现方式中,在接收到网关发送的上一个控制命令后,确定上一个控制命令的类型,当确定该上一个控制命令的类型为第二类型时,根据上一个控制命令,执行对应的物理操作;当对应的物理操作执行结束后,获取当前所处的设备状态,并将当前所处的设备状态发送给网关,以便于网关根据当前所处的设备状态,返回当前控制命令;接收当前控制命令并执行。
第三方面,本申请提供了一种控制系统,该系统包括:网关和至少一个智能设备。所述智能设备包括至少一个传感器,智能设备通过至少一个传感器获得感知数据,并发送给所述网关,网关接收感知数据,对感知数据进行处理,得到对应的处理结果,根据处理结果,向智能设备发送当前控制命令,智能设备执行当前控制命令。通过蓝牙访存技术,智能设备将感知数据发送给网关进行处理,这样智能设备不需要单独搭载处理器处理感知数据,降低了单个智能设备的成本,进一步,当智能设备需要升级时,只需要在网关进行计算能力的升级(例如:增加新的计算模块,增加新的芯片等),大大提高了智能设备升级维护的便捷性。
第四方面,本申请提供了一种网关,该电子设备包括处理器和存储器;存储器存储计算机执行指令;处理器执行存储器存储的计算机执行指令,使得处理器执行上述第一方面的方法。
第五方面,本申请提供了一种智能设备,该电子设备包括处理器和存储器;存储器存储计算机执行指令;处理器执行存储器存储的计算机执行指令,使得处理器执行上述第二方面的方法。
第六方面,本申请提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序或指令,当计算机程序或指令被运行时,实现上述第一方面、第二方面的方法。
第七方面,本申请提供了一种计算机程序产品,包括计算机程序或指令,该计算机程序或指令被处理器执行时,实现上述第一方面、第二方面的方法。
附图说明
图1A为本申请实施例提供的一种当前已有的智能家居系统的场景示意图;
图1B为本申请实施例提供的一种智能设备的传感器的组成示意图;
图2A为本申请实施例提供的一种电子设备的组成示意图;
图2B为本申请实施例提供的一种电子设备的软件结构示意图;
图3为本申请实施例提供的一种智能家居控制系统的场景示意图;
图4为本申请实施例提供的一种智能设备控制方法的流程示意图;
图5为本申请实施例提供的一种智能设备系统的架构示意图;
图6A为本申请实施例提供的一种电子设备的桌面界面示意图;
图6B为本申请实施例提供的一种智慧家居应用的界面示意图;
图6C为本申请实施例提供的一种智慧家居中扫地机器人2002的控制界面示意图;
图7为本申请实施例提供的一种智能设备系统的组成结构示意图;
图8为本申请实施例提供的一种蓝牙访存控制器的组成结构示意图;
图9为本申请实施例提供的一种蓝牙控制器的组成结构示意图;
图10为本申请实施例提供的一种电子设备扩展系统的场景示意图。
具体实施方式
本申请说明书和权利要求书及附图说明中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于限定特定顺序。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
为了下述各实施例的描述清楚简洁,首先给出相关技术的简要介绍:
传感器(transducer/sensor)是能感受到被测量的信息,并能将感受到的信息,按一定规律变换成为电信号或者其他所需形式的信息输出,以满足信息的传输、处理、存储、显示、记录和控制等要求的检测装置。
传感数据(sensor data)是由感知设备或传感设备感受、测量及传输的数据。感知设备或传感设备可以包括1个或多个传感器。传感数据种类有很多,如人身体的传感数据,网络信号的传感数据和气象的传感数据。传感数据可以用于数据分析。例如:扫地机器人根据感知数据构建房间的地图以及所在位置的定位。
下面结合当前已有的智能设备控制系统,对比说明一下本申请提供的一种智能设备控制方法的优势。其中,智能设备控制系统以智能家居控制系统为例进行说明。
为了方便理解,下面结合图1A、图1B详细介绍一下当前已有的智能家居控制系统。当前已有的智能家居控制系统包括网关10和多个智能家居设备,其中多个智能家居设备以人脸识别门锁21、扫地机器人22以及智语音音响23为例进行说明。需要说明的是多个智能家居设备以3个智能家居设备为例进行说明,还可以是2个智能家居设备、4个智能家居设备等,本申请实施例不做具体限定。
在当前常见的智能家居控制系统中,通过网关10实现人脸识别门锁21、扫地机器人22以及智语音音响23的联动。其中,网关10主要负责网关协议的统一和数据(例如:控制命令、设备状态等)传输。网关(Gateway)又称网间连接器、协议转换器,目的是在不同通信协议的设备之间提供通信互联的服务。
为了满足用户对于智能家居设备的需求,搭载有复杂传感器的智能家居设备随之出现并且应用广泛,比如:人脸识别门锁21搭载的传感器包括红外摄像头、厘米波雷达以及ToF距离感应器等,扫地机器人22搭载的传感器包括激光雷达、双目摄像头以及超声波传感器等,智能语音音响23搭载的传感器包括:麦克风阵列、红外光线传感器以及红外发射传感器等。随着搭载有负载传感器的智能家居设备的出现,智能家居设备对计算性能的要求也越来越高,所以针对于现有的包含复杂传感器的智能家居设备,通常单独搭载有独立的处理器对传感数据进行处理,从而实现对应的功能。其中,人脸识别门锁21搭载有NPU芯片,扫地机器人22搭载有ARM处理器、智能语音音响23搭载ARM处理器。人脸识别门锁21通过本身搭载的NPU芯片可以实现离线校验主任身份,扫地机器人22通过本身搭载的ARM处理器实现地图构建和位置定位,智能语音音响23通过本身搭载的ARM处理器实现离线使用。
上述智能家居控制系统中,网关的职责比较单一,负责网关协议的统一和数据传输。包含传感器的智能家居设备为了实现满足用户需求,需要搭载单独的处理器对传感数据进行处理,从而实现对应的功能。由于智能设备内需要搭载独立的处理器对感知数据进行处理,使得单个智能设备的制造成本增加。
进一步,由于单个智能家居设备都单独搭载独立的处理器,当智能家居设备需要进行升级或维护的时候,需要单独对对应的智能家居设备进行升级或维护,一方面,若某个型号的智能家居设备需要进行升级时,需要单独对所有对应的智能家居设备进行升级,对应的智能家居设备的数量影响升级所消耗的时间,并且单独对对对应的智能家居设备进行升级,重复消耗升级资源。另一方面,智能家居设备的升级或维护,主要是针对于所搭载的处理器进行升级或维护,因为智能家居设备的限制,对于处理器的升级或维护可能需要更换处理器或单独将处理器拆除进行对应的处理,增加了智能家居设备的升级和维护的复杂程度。当前已有的智能家居设备的升级维护不仅需要消耗较长的时间、重复消耗升级维护资源,并且升级维护的困难程度较高,所以在当前已有的智能设备控制系统中,智能设备的升级维护效率低。
本申请提供一种智能设备控制方法,基于蓝牙远程访存技术,获取针对智能设备的操作请求,基于操作请求智能网关生成对应的控制命令,并将该控制命令发送给对应的智能设备,智能设备判断控制命令的类型,当控制命令的类型为第一类型时,智能设备将控制命令对应的内存预设地址存储的感知数据读取出,并发送给智能设备,智能网关对接收到的感知数据进行处理,从而得到对应的处理结果。通过蓝牙访存技术将感知数据传输到智能网关中,通过智能网关的处理器进行计算处理,智能设备不需要单独搭载额外的处理器对感知数据进行处理,降低了单个智能设备的成本。
进一步,当智能设备需要进行升级的时候,相应的需要提高对应的计算能力,只需要对智能网关中的处理器进行升级或增加计算模块,即可完成升级,不需要对所有智能设备的处理器进行升级,所以提高了智能设备升级维护的便捷性。
在一些实施例中,电子设备可以是手机、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、手持计算机、上网本、个人数字助理(Personal Digital Assistant,PDA)、可穿戴电子设备、智能手表等设备,本申请对上述电子设备的具体形式不做特殊限制。在本实施例中,电子设备的结构可以如图2A所示,图2A为本申请实施例提供的一种电子设备的结构示意图。
如图2A所示,电子设备可以包括处理器110,天线1,无线通信模块120,显示屏130,触摸传感器140,按键150等。
可以理解的是,本实施例示意的结构并不构成对电子设备的具体限定。在另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。例如,在本申请中,可以通过预设的应用向智能设备下发对应的操作请求。
其中,控制器可以是电子设备的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器140,充电器,闪光灯,摄像头等。例如:处理器110可以通过I2C接口耦合触摸传感器140,使处理器110与触摸传感器140通过I2C总线接口通信,实现电子设备的触摸功能。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块120。例如:处理器110通过UART接口与无线通信模块120中的蓝牙模块通信,实现蓝牙功能。
MIPI接口可以被用于连接处理器110与显示屏130,摄像头等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(display serialinterface,DSI)等。在一些实施例中,处理器110和显示屏130通过DSI接口通信,实现电子设备的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头显示屏130,无线通信模块120等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在本申请另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
电子设备的无线通信功能可以通过天线1,无线通信模块120,调制解调处理器以及基带处理器等实现。
天线1用于发射和接收电磁波信号。电子设备中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备输出声音信号,或通过显示屏130显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块或其他功能模块设置在同一个器件中。
无线通信模块120可以提供应用在电子设备上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块120可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块120经由天线1接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块120还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线1转为电磁波辐射出去。
在一些实施例中,电子设备的天线和移动通信模块耦合,天线1和无线通信模块120耦合,使得电子设备可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code divisionmultiple access,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(globalnavigation satellite system,GLONASS),北斗卫星导航系统(beidou navigationsatellite system,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备通过GPU,显示屏130,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏130和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏130用于显示图像,视频等。显示屏130包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oled,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏130,N为大于1的正整数。
电子设备的显示屏130上可以显示一系列图形用户界面(graphical userinterface,GUI),这些GUI都是该电子设备的主屏幕。一般来说,电子设备的显示屏130的尺寸是固定的,只能在该电子设备的显示屏130中显示有限的控件。控件是一种GUI元素,它是一种软件组件,包含在应用程序中,控制着该应用程序处理的所有数据以及关于这些数据的交互操作,用户可以通过直接操作(direct manipulation)来与控件交互,从而对应用程序的有关信息进行读取或者编辑。一般而言,控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
触摸传感器140,也称“触控器件”。触摸传感器140可以设置于显示屏130,由触摸传感器140与显示屏130组成触摸屏,也称“触控屏”。触摸传感器140用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏130提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器140也可以设置于电子设备的表面,与显示屏130所处的位置不同。
按键150包括开机键,音量键等。按键150可以是机械按键。也可以是触摸式按键。电子设备可以接收按键输入,产生与电子设备的用户设置以及功能控制有关的键信号输入。
另外,在上述部件之上,运行有操作系统。例如苹果公司所开发的iOS操作系统,谷歌公司所开发的Android开源操作系统,微软公司所开发的Windows操作系统等。在该操作系统上可以安装运行应用程序。
电子设备的操作系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备的软件结构。
图2B是本申请实施例的电子设备的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。如图2B所示,应用程序包可以包括日历,通话,地图,导航,WLAN,蓝牙,短信息,家居控制等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。如图2B所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
需要说明的是,本申请实施例虽然以Android系统为例进行说明,但是其基本原理同样适用于基于iOS、Windows等操作系统的电子设备。
实施例一:
下面结合图3-图6C,详细介绍一下本申请实施例提供的一种智能设备控制方法,该方法应用于智能设备系统,智能设备系统包括:智能网关100和智能设备200,其中智能设备200包含传感器、存储器、蓝牙控制器、蓝牙访存控制器中,其中传感器、存储器、蓝牙控制器分别接入蓝牙访存控制器中,并且智能设备200支持蓝牙/蓝牙Mesh协议。
需要说明的是,智能网关100是网关的一种,也可以说是携带能够处理对应感知数据的处理器的网关,在本申请实施例中将这类网关统称为智能网关,除此之外,在其他情况下也可能存在其他名称,本申请不做具体限定。
如图3所示的一种智能家居系统的场景示意图,其中智能设备200以人脸识别门锁2001、扫地机器人2002以及智能语音音响2003为例,智能网关100向人脸识别门锁2001发送控制命令,人脸识别门锁2001返回对应的感知数据或者人脸识别门锁当前所处的设备状态,当智能网关100接收到人脸识别门锁2001返回的感知数据(传感器数据)后,利用智能网关100搭载的处理器对接收到的人脸识别门锁2001返回的感知数据进行处理。扫地机器人2002以及智能语音音响2003与智能网关100的交互过程,跟人脸识别门锁2001与智能网关100的交互过程相似,不再做具体描述。
具体的,结合图4所示的一种智能设备控制方法的流程示意图和图5所示的智能设备系统的架构示意图,对本申请实施例提供的一种智能设备控制方法的具体流程进行详细介绍。
S401、用户进行针对智能设备200的操作请求。
其中,操作请求是用于请求智能设备200实现/执行对应操作的请求。例如:用户通过特定的软件,请求扫地机器人进行全屋清扫。
为了方便理解,下面结合图6A-图6C所示的电子设备300的界面图,对用户进行针对智能设备100的操作请求进行详细说明。其中,智能设备200以扫地机器人2002为例,操作请求以请求扫地机器人进行全屋清扫的操作请求为例进行说明。
如图6A所示的电子设备300的桌面界面示意图,用户为电子设备300解锁后,电子设备300可以向用户呈现桌面界面600,该桌面界面600包括多种应用程序的图标,例如,电话图标、联系人图标、互联网图标、短信图标、智能家居图标601等。用户可以对应用的图标触发操作,例如点击、长按、滑动等。电子设备接收到用户触发的操作后,启动相应的应用。用户点击电子设备100的桌面界面600上的智能家居图标601,则进入智能家居应用界面610。需要说明的是,智能家居是一种可以用于控制扫地机器人2002的应用,除了智能家居之外,控制扫地机器人2002的应用也可以是智慧家居等其他应用,本申请不做具体限定。
如图6B所示的智能家居的应用界面示意图,智能家居的应用界面610中包括多个智能家居设备的名称图标,例如:智能窗帘的图标、中央空调的图标、智能台灯的图标、投影仪的图标、扫地机器人220的图标611等。用户点击扫地机器人2002的图标611,则进入扫地机器人2002的控制界面620。
如图6C所示的扫地机器人2002的控制界面示意图,扫地机器人2002的控制界面620包括:扫地机器人2002的电量状态显示框、扫地机器人2002的充电状态显示框、全屋清扫图标621、停止清扫图标622、返回充电仓图标等。用户点击全屋清扫图标621,则表示用户请求扫地机器人2002进行全屋清扫,即用户进行针对扫地机器人2002的进行全屋清扫的操作请求。
除此之外,本申请还支持通过智能设备200主动向智能网关100发送针对智能设备200的操作请求。例如:用户站在人脸识别门锁前,人脸识别门锁需要对用户的人脸进行识别校验,则通过人脸识别门锁向智能网关发送请求识别用户人脸的操作请求,以便于控制人脸识别门锁对用户的人脸进行识别和校验。
S402、智能网关100接收到该操作请求之后,对该操作请求进行解析,生成控制命令。
具体的,智能网关100的应用层101接收用户针对智能设备200的操作请求,并对该操作请求进行解析,得到与操作请求对应的控制命令。
S403、智能网关100向智能设备200发送该控制命令。
具体的,智能网关100向智能设备200发送包含控制命令的数据报文(也可以称为数据包)。
其中,数据报文的目的是向智能设备200发送控制命令的相关信息,包括:目标智能设备的唯一标识、加密、数据长度、所用协议等,例如:目标智能设备的标识,即智能设备200的唯一标识,保证该控制命令可以准确发送给目标智能设备。
具体的,智能网关100的应用层101解析得到控制命令后,将该控制命令交由智能网关100的通信层104,通过智能网关100的通信层104将包含控制命令的数据报文发送给智能设备200。
S404、智能设备200接收到控制命令后,对该控制命令进行解析。
具体的,智能设备200的通信层204接收到智能网关100发送的包含控制命令的数据报文之后,将包含控制命令的数据报文交给智能设备200的控制层203,智能设备200的控制层203对包含控制命令的数据报文进行解析处理。从而得到包含控制命令的数据报文所携带的相关信息,比如:控制命令的类型、控制命令的标识等。
S405、智能设备200基于解析结果,确定控制命令的类型。
其中,控制命令的类型包括:第一类型和第二类型。
其中,控制命令的类型为第一类型的控制命令是用于对智能设备所存储的感知数据进行访问或读取。例如:访存命令的类型为第一类型。
其中,控制命令的类型为第二类型的控制命令是用于操控智能设备执行对应的操作/动作。例如:操控命令的类型为第二类型。
当控制命令的类型为第一类型时,则进行S406。
当控制命令的类型为第二类型时,则直接进行S410。
S406、智能设备200根据控制命令,获取对应的感知数据。
具体的,当控制命令的类型为第一类型时,按照控制命令对智能设备200的存储层202进行访问,从而获取到智能设备200的存储层202中的目标地址的感知数据(也可以称为传感器数据)。其中,目标地址是与控制命令对应的存储地址。
其中,目标地址的感知数据是智能设备200的感知层201向智能设备200的存储层202的目标地址写入的感知数据。
需要说明的是,一般情况下,感知数据为二进制数据,方便计算机/处理器对数据进行处理,除此之外,感知数据也可以是八进制数据、十进制数据、十六进制数据等,本申请不做具体限定。
具体的,当控制命令的类型为第一类型时,控制命令中携带有对应的访存智能设备的存储层的地址,以便于根据控制命令所携带的访存数据的地址信息,获取对应的传感数据。
S407、智能设备200将对应的感知数据发送给智能网关100。
具体的,智能设备200从自身的存储层202获取到对应的感知数据后,将对应的感知数据进行封装后,智能设备200通过自身的通信层204将封装后的感知数据发送给智能网关100的通信层104。
S408、智能网关100收到对应的感知数据后,处理对应的感知数据,得到对应的处理结果。
具体的,智能网关100的通信层104收到对应的感知数据后,将对应的感知数据存储至智能网关100的存储层103,并通过智能网关100的存储层103将对应的感知数据交付给智能网关100的计算层102,计算层102对该对应的感知数据进行处理,并将感知数据的处理结果交由智能网关100的应用层101。
S409、智能设备200根据控制命令,控制自身执行对应的物理操作。
具体的,当控制命令的类型为第二类型时,智能设备200的控制层203控制智能设备200执行对应的物理操作。例如:当控制命令为开启电源时,智能语音音响接收到该开启电源控制命令时,则自动开启智能语音音响设备的电源。
S410、当对应的物理操作执行结束后,智能设备200获取自身当前所处的设备状态。
具体的,当智能设备200对应的物理操作执行结束后,智能设备200的控制层202获取智能设备200当前所处的设备状态。
其中,设备状态包括:开启状态、关闭状态、充电中、充电已完成等。例如:控制命令为开启电源,智能语音音响接收该控制命令后,自动开启电源,获取智能语音音响当前所处的设备状态为:开启状态。
进一步,智能设备200将获取的设备状态存储至智能设备200的存储层202中。
S411、智能设备200将获取的设备状态,发送给智能网关100。
具体的,智能设备200将获取的设备状态进行封装后,通过智能设备200的通信层204发送给智能网关100的通信层104。
S412、智能网关100更新任务状态。
具体的,当控制命令的类型为第一类型时,智能网关100是根据感知数据的处理结果,更新任务状态;当控制命令的类型为第二类型时,智能网关100是根据接收到的设备状态,更新任务状态。
具体的,当控制命令的类型为第一类型时,智能网关100的应用层101根据对应的处理结果,自动更新与操作请求对应的任务的状态。
具体的,当控制命令的类型为第二类型时,智能网关100的通信层104接收到智能设备200当前所处的设备状态后,智能网关100将该设备状态经过智能网关100的存储层103和计算层102发送给智能网关100的应用层101,智能网关100的应用层101根据设备状态,自动更新与操作请求对应的任务的状态。
其中,任务状态包括:任务已完成、任务进行中,以百分数反应任务完成的进度等。
为了方便理解,下面举例对步骤412进行详细说明。
以操作请求为请求扫地机器人清扫全屋为例,得到的类型为第一类型的控制命令为:构建全屋地图为例。
当用户通过对应的APP操作扫地机器人进行全屋清扫,智能网关对该操作请求进行解析,得到对应的控制命令。根据日常使用情况,扫地机器人需要首先建立/获取到全屋地图,才能控制自身对全屋进行清扫。智能网关对该操作请求进行解析,得到对应的控制命令首先是:建立全屋地图,所以当智能网关对扫地机器人发送的对应的感知数据进行处理后,处理结果为获得全屋地图,则智能网关可以根据处理结果,更新任务状态为任务进行中(或者任务已完成20%、已准备就绪等)。
以操作请求为请求开启智能语音音响电源为例,得到的类型为第二类型的控制命令为开启智能语音音响电源为例。
当用户通过对应的APP操作开启智能语音音响电源,智能网关对该操作请求进行解析,得到控制命令(开启智能语音音响电源),智能网关将该控制命令发送给智能语音音响,智能语音音响根据控制命令自动开启电源,并且获得当前智能语音音响的设备状态:开启状态,并将开启状态发送给智能网关,智能网关根据开启状态,更新任务状态为:任务已完成。
进一步,智能网关100可以通过本身的应用层101将更新后的任务状态反馈给用户。
具体的,可以是通过对应的应用将更新后的任务状态反馈给用户,除此之外还可以通过其他方式,本申请不做具体限定。
S413、智能网关100根据更新后的任务状态,判断对应的任务是否完成。
具体的,智能网关100的应用层101根据更新后的任务状态,判断操作请求对应的任务是否完成。
若是,则任务结束。
若否,则进行S414。
S414、当对应的任务没有完成时,智能网关100自动生成针对智能设备200的下一步控制命令。
其中,下一步控制命令也可以称为当前控制命令。
需要说明的是,下一步控制命令可以称为当前控制命令,那么对应的上述步骤中的控制命令也可以称为上一个控制命令。当前控制命令和上一个控制命令都属于操作请求对应的任务中的控制命令。进一步,智能网关100可以按照预设顺序得到控制命令的顺序。
具体的,智能网关100对操作请求的解析,预先规定了完成操作请求对应的任务所需要的至少一个操作命令,并且按照预设规则进行执行顺序的排列,根据排列顺序,生成下一步控制命令(当前控制命令)。
具体的,智能网关100的应用层101根据感知数据的处理结果或智能设备200当前所处的设备状态,自动生成下一步控制命令,直到任务结束。
本申请实施例提供了一种智能设备控制方法,该方法:智能网关响应于针对智能设备的操作请求,获得与操作请求对应的控制命令,智能网关将控制命令发送给智能设备,智能设备根据控制命令的类型,执行对应的操作,当控制命令的类型为第一类型时,智能设备根据对应的地址读取感知数据,并将获得的感知数据发送给智能网关,智能网关对获得的感知数据进行处理,并获得感知数据的处理结果;当控制命令的类型为第二类型时,智能设备根据控制命令,执行对应的物理操作,在物理操作执行结束后,获取当前智能设备所处的设备状态,将该设备状态发送给智能网关;智能网关根据感知数据的处理结果/当前智能设备所处的设备状态,更新任务状态;智能网关根据更新后的任务状态,判断任务是否完成,若否,则智能网关自动生成下一步控制命令,直到任务完成。该方法基于蓝牙/蓝牙Mesh协议,实现智能网关对智能设备的内存地址进行读写操作,即通过远程蓝牙访存技术,将智能设备通过传感器获得感知数据,读取至智能网关中,智能网关对智能设备的感知数据进行处理,并且可以根据处理结果自动生成下一步控制命令,以便于智能设备实现对应功能。
通过蓝牙访存技术将感知数据传输到智能网关中,通过智能网关的处理器进行计算处理,智能设备不需要单独搭载额外的处理器对感知数据进行处理,降低了单个智能设备的成本。并且当智能设备需要进行升级的时候,相应的需要提高对应的计算能力,本申请只需要对智能网关中的处理器进行升级或增加计算模块,即可完成升级,所以提高了智能设备升级维护的便捷性。
进一步,智能网关获取感知数据,对感知数据进行处理,实现了计算资源的统一和复用,例如:针对智能设备A中获取的感知数据a和智能设备B中获取的感知数据b,处理/计算方法相同,在当前已有的方法中,需要智能设备A和智能设备B单独搭载处理器分别对感知数据a和感知数据b进行处理;本申请中,智能网关可以统一的处理/计算方法对感知数据a和感知数据b进行处理,这样避免了计算资源的浪费。
实施例二:
结合图7-图9,详细介绍一下本申请实施例提供的一种控制系统。
根据图7所示的一种控制系统的结构示意图,本申请实施例提供的一种控制系统包括智能网关100和智能设备200。其中智能设备200是支持蓝牙/蓝牙Mesh协议。
其中,智能网关100包括:处理器110、内存空间120以及蓝牙控制器130。
其中,处理器110负责向智能设备200下发命令、对智能设备200发送的感知数据(传感器数据)进行远程计算以及对监管更新智能设备200的任务状态。
其中,内存空间120也可以称为存储器的存储空间,主要用于保存程序和数据。
具体的,内存空间120包括:用户空间121、内核空间122。
其中,用户空间(User space)121是用户程序的运行空间,用户程序包括:应用程序、驱动程序等。内核空间(Kernel space)122是内核程序的运行空间,内核程序包括:蓝牙协议栈等。蓝牙协议栈(Bluetooth stack)是蓝牙协议的实现代码。蓝牙协议是通信协议的一种。为了安全,所以将内存空间120中,将用户空间121和内核空间122隔离,为了保证在用户程序崩溃时,内核运行不受影响。
其中,蓝牙控制器130用于发送或接收无线电信号,并且能够将信号转化为相应的数据包。具体的,在本申请实施例中,蓝牙控制器130主要用于向智能设备200发送命令帧(命令报文),接收智能设备200向智能网关100发送的应答帧(应答报文)。
其中,智能设备200包括:传感器210、存储器220、通信总线230、执行器件240、蓝牙访存控制器250以及蓝牙控制器260等。
其中,传感器210用于感受被测量的信息,并且将感受到的信息,按照一定规律编程电信号或者其他形式的信息输出。即传感器210用于获取对应的感知数据(传感器数据)。
其中,存储器220用于存储传感器210获取的感知数据。具体的,感知器210获取感知数据,并且将感知数据存储到存储器220的对应的预设地址中。
其中,通信总线230是一组传输通道,是由各种逻辑器件构成的传输数据的通道,一般由数据线、地址线、控制线等构成。
具体的,通信总线230主要用于连接存储器220和蓝牙访存控制器250,从而实现感知数据在存储器220和蓝牙访存控制器250之间的传输。
其中,执行器件240是用于接收蓝牙访存控制器250的控制命令,并根据控制命令完成对智能设备200的控制作用的器件。执行器件240可以将电能或流体能量转化为机械能或其他能量形式,按照控制要求改变智能设备200的机械运动状态或其他状态(如温度、压力等)。
其中,蓝牙访存控制器250用于解析智能网关100发送的控制命令,并且根据控制命令的类型分别执行对应的操作。
具体的,蓝牙访存控制器250解析智能网关100发送的控制命令后,当控制命令的类型为第一类型时,蓝牙访存控制器250通过通信总线230向存储器220获取对应地址存储的感知数据;当控制命令的类型为第二类型时,,则将控制命令发送给执行器件240,执行器件240根据蓝牙访存控制器250发送的控制命令完成对智能设备200的控制作用。
为了方便理解,下面结合图8详细介绍一下本申请实施例提供的一种蓝牙访存控制器的组成结构。
如图8所示的一种蓝牙访存控制器250的组成结构示意图,蓝牙访存控制器250包括:蓝牙主机模块251、命令处理模块252、第一类型处理模块253、DMA控制模块254、第二类型处理模块255、操控驱动模块256以及寄存器257等。
其中,蓝牙主机模块251包括:逻辑链路控制与适配协议、蓝牙上层驱动。
其中,逻辑链路控制与适配协议(Logical Link Control and AdaptationProtocol,L2CAP),位于蓝牙基带之上,基于蓝牙主机控制接口和蓝牙上层驱动之间的一种数据交换媒介,用于交换蓝牙基带和高层应用的数据分组格式,起到了适配作用,并且提供复用、服务质量交换和流量控制等功能。
其中,蓝牙上层驱动主要用于拆包远程设备发送的远端命令(例如:智能网关100基于用户的操作请求,发送的控制命令)、封装本地设备的数据(例如:智能设备200的设备状态、对应地址的感知数据等)。
其中,命令处理模块252用于对解析后的智能网关100发送的控制命令的类型进行判断。
具体的,当命令处理模块252判断控制命令的类型为第一类型,则将控制命令发送给第一类型处理模块253,以便第一类型处理模块253对该控制命令进行处理;当命令处理模块252判断控制命令的类型为第二类型,则将控制命令发送给第二类型处理模块255,以便于第二类型处理模块255对该控制命令进行处理。
与此同时,命令处理模块252用于获取返回的感知数据、命令执行结果、设备状态等数据,并按照统一的协议对获取到的数据进行封装,并且将封装后的数据传递给蓝牙主机模块251。
其中,第一类型处理模块253用于接收第一类型的控制命令,并对第一类型的控制命令进行处理。
具体的,当第一类型处理模块253接收到类型为第一类型的控制命令时,第一类型处理模块253获取控制命令对应的目标地址,并且通过DMA控制模块254获取目标地址的感知数据(传感器数据)。
进一步,在获取到目标地址的感知数据之后,第一类型处理模块253将感知数据以及命令执行结果放回给命令处理模块252。其中,命令执行结果是DMA控制模块254在访存目标地址的感知数据之后生成的。
其中,DMA(Direct Memory Access,直接内存存取)控制模块254用于避开CPU直接对连续的物理地址进行按字节寻址读写。通过DMA控制模块254获取目标地址的感知数据步骤简单,所需要的资源较少,只需要设置好源地址、目标地址、传输量即可实现数据的传输。
具体的,在第一类型处理模块253接收到类型为第一类型(例如:访存指令)的控制命令时,获取到对应的目标地址,DMA控制模块254根据对应的目标地址更正访存地址,然后通过通信总线230读取目标地址的感知数据送到寄存器257缓冲,再通过寄存器255传输给DMA控制模块254,以便于DMA控制模块254通过寄存器255获取存储器220中目标地址存储的感知数据。
进一步,如果通过寄存器257对通信总线230进行的读写操作发生错误,则直接由寄存器255返回结束标志或错误标志,即当控制命令执行结束后,生成命令执行结果为执行错误。
为了方便理解,下面结合传统的CPU存取数据的方式,说明本申请实施例使用DMA控制模块254存取数据的优点。
传统的CPU存取数据至少经历三个步骤,以读取数据为例,首先CPU读取内存中目标地址的数据,然后CPU将读取到的目标地址的数据放入数据缓存器中,然后再将放入数据缓存器中的目标地址的数据写回新的地方(需要读取到该数据的地方),则完成目标地址的数据读取。
通过DMA控制模块254可以直接实现源地址和目标地址之间的数据传输,不需要通过CPU的干预,通过DMA控制模块即可实现数据的直接传输,即实现目标地址的数据直接读取到源地址(第一类型处理模块253的地址)。
由此可知,通过DMA控制模块254实现数据传输,不需要借助CPU的协助,即可实现源地址和目标地址之间的数据传输,解决了大量数据传输从而过度浪费CPU资源的问题,从而CPU可以更加专注于计算、控制程序转移等功能,提高了CPU资源的利用率。
其中,寄存器257是有限存储容量的高速存储部件,在本申请实施例中寄存器257主要用来存储读取到的目标地址的感知数据(传感器数据)。
其中,第二类型处理模块255用于接收第二类型的控制命令,并对第二类型的控制命令进行处理。
具体的,第二类型处理模块255对第二类型的控制命令进行解析后,基于解析后的第二类型的控制命令通过操控驱动控制模块257控制对应的执行器件240。
其中,操作驱动控制模块257用于根据解析后的第二类型的控制命令,控制智能设备200对应的执行器件240完成对应的命令。
进一步,当执行器件240完成对应的命令后,操作驱动控制模块257获取智能设备200当前的设备状态,操作驱动控制模块257将获取的智能设备200当前的设备状态通过第二类型处理模块255返回给命令处理模块252。
其中,蓝牙控制器260用于发送或接收无线电信号,并且能够将信号转化为相应的数据包。具体的,在本申请实施例中,蓝牙控制器260主要用于向智能网关100发送应答帧(应答报文),接收智能设备200向智能网关100发送的命令帧(命令报文)。
为了方便理解,下面结合图8详细介绍一下本申请实施例提供的一种蓝牙控制器的组成结构。
如图9所示的本申请实施例提供的一种蓝牙控制器260的组成结构示意图,蓝牙控制器260包括:蓝牙主机控制接口261、蓝牙链路管理层262、蓝牙基带263以及蓝牙设备264等。
其中,蓝牙主机控制接口(Host Controller Interface,HCI)261是蓝牙主机模块251与蓝牙控制器260之间的接口,为二者数据传输规定了以后总标准的通信机制,允许蓝牙逐句模块251将数据发送到蓝牙控制器260,并且允许蓝牙控制器260将数据和命令发送到蓝牙主机模块251。
其中,蓝牙链路管理(Link Manager)层262是蓝牙协议栈的链路管理层协议,负责将蓝牙主机控制接口261接收到的数据翻译成蓝牙基带263能接受的数据。
其中,蓝牙基带(Bluetooth baseband)263到是蓝牙系统中用于指定或实施媒体接入以及物理层程序,以支持蓝牙连接设备之间(智能网关100和智能设备200)进行数据信息流交换。
其中,蓝牙射频264规范规定了蓝牙射频频段、调制方式、调频频率、发射功率、接收灵敏度等参数。
进一步,智能网关100和智能设备200之间的数据传输,主要是依靠于智能网关100的蓝牙控制器130和智能设备200的蓝牙控制器260进行数据传输。
具体的,智能网关100的蓝牙控制器130通过蓝牙协议/蓝牙Mesh协议向智能设备200的蓝牙控制器260发送命令帧(命令报文);智能设备200的蓝牙控制器260基于命令帧通过蓝牙协议/蓝牙Mesh协议向智能网关100的蓝牙控制器130返回应答帧(应答报文)。
具体的,采用蓝牙5.0协议实现智能网关100和智能设备200之间的数据传输。
其中,蓝牙5.0协议普通模式提供了2Mpbs最大带宽,可满足全天候的控制命令、设备状态等类型的小数据传输,以及对时延有一定容忍性的图像(720P的图像大小在2MB左右)、语音(蓝牙有专用的A2DP音频传输模型协定)、点云(常见的单线激光雷达的传感器数据带宽在256kbps以内)等数据的传输;蓝牙5.0协议高速模式提供48Mbps最大带宽,可用于突发性的大数据传输,所以蓝牙5.0协议可满足大部分数据的传输。并且蓝牙5.0协议的理论传输距离高达300m,基本可以满足用户的日常使用所需要的通信覆盖范围。通过蓝牙5.0协议可以同时连接7个不同种类的设备,通过蓝牙Mesh甚至可以拓展到上百个设备的同时接入,满足大部分使用场景。
需要说明的,在本申请实施例中蓝牙协议采用蓝牙5.0协议,除此之外,还可以选择蓝牙5.1协议、蓝牙5.2协议等,可以根据实际情况选择适合的蓝牙协议版本,本申请不做具体限定。
进一步,为了更加满足智能网关100对智能设备200的控制和访存要求(即进一步满足智能网关100和智能设备200之间的数据传输要求),在蓝牙协议栈之上专门制定了一层用于智能网关100和智能设备200之间的数据传输(交互)的远程通信协议。
下面结合表1-表5详细介绍一下,本申请实施例提供的一种远程通信协议规定的数据格式。在本发明实施例提出远程通信协议中,将智能网关100发出的数据报文称为命令帧(命令报文),将智能设备200发出的数据报文称为应答帧(应答报文)。
如表1所示的本申请实施例提供的一种命令帧的组成示意图所示,命令帧包括设备码、安全码、任务码、远程地址高16位、命令字和远程地址低32位。
表1
其中,设备码包括2字节,用于表示目标智能设备的类型,以便于智能设备对接收到的命令帧进行校验,若智能设备的类型和命令帧中设备码所标识的目标智能设备的类型相同,则校验通过,若智能设备的类型和命令帧中设备码所标识的目标智能设备的类型不相同,则校验不通过。
其中,安全码包括4字节,用于传输安全密钥,以便于进行安全校验。
其中,任务码包括2字节,主要用于表示命令帧所对应的任务的相关信息。
具体的,为了方便理解,结合表2所示的任务码的组成示意图,介绍任务码的组成。
表2
其中,任务码的前4bit用于表示当前任务的类型。
其中,任务码的中间10bit用于标识本次命令帧的处理时间戳。时间戳是通过一定的技术手段,对数据产生的时间进行认证,从而验证这段数据在产生后时候经过篡改。在本申请实施例中,处理时间戳为本次命令帧产生的时间戳,以便于对验证该命令帧是否在产生后经过篡改,从而保证命令帧是安全的。
其中,任务码的后2bit用于标识任务执行状态。
具体的,任务码的后2bit为00时,则表示任务已完成;任务码的后2bit为01时,则表示任务进行中;任务码的后2bit为10时,则表示任务中止;任务码的后2bit为11时,则表示任务暂停。
其中,命令字包括2字节,主要用于表示控制命令的相关信息。
具体的,为了方便理解,结合表3所示的命令字的组成示意图,介绍命令字的组成。
表3
命令字由序号、类型、长度组成。
其中,序号包括4bit,是本次命令帧的唯一标识。
其中,类型包括1bit,主要表示控制命令的类型,若类型为0,则表示控制命令的类型为第一类型;若类型为1,则表示控制命令的类型为第二类型。
其中,长度包括8bit,用于标识读取内存的长度。
其中,远程地址字包括6字节,分别包括远程地址高16位(2字节)和远程地址低32位(4字节),用于表示第一类型需要读取的内存目标地址的起始地址。
如表4所示的本申请实施例提供的一种应答帧的组成示意图所示,应答帧包括设备码、安全码、状态字和数据。
表4
设备码 安全码 状态字 数据
2B 4B 2B (0~256)×4B
其中,设备码包括2字节,用于表示发送应答帧的智能设备的类型,以便于智能网关按照智能设备的类型进行对应的处理。
其中,安全码包括4字节,用于传输安全密钥,以便于进行安全校验。
其中,状态字包括2字节,具体包括序号、执行结果、超时标志和错误码。
具体的,为了方便理解,结合表5所示的状态字的组成示意图,介绍状态字的组成。
表5
其中,序号包括4bit,该序号用于表示应答帧对应的命令帧,即该序号与对应的命令帧的序号相同。
其中,执行结果包括1bit,用于表示执行结果。具体的,执行结果为0,则表示执行成功;执行结果为1,则表示执行失败。
其中,超时标志包括1bit,用于判断执行任务(访存任务)是否超时。具体的,超时标志为0,则表示未超时;超时标志为1,则表示超时。
其中,错误码包括8bit,用于返回失败原因。
其中,数据部分用于传输俺字节寻址的内存数据、设备状态、感知数据等。
本申请实施例提供的一种智能设备控制系统包括智能网关100和智能设备200。其中智能设备100搭载有蓝牙访存控制器,通过蓝牙访存控制器,智能设备200可以解析智能网关100发送的控制命令,并且按照控制命令的类型分别执行对应的任务,并且可以向智能网关反馈当前设备状态;基于智能设备200的蓝牙访存控制器,智能网关100可以通过远程蓝牙访存技术直接对智能设备200的内存地址进行读写操作,将智能设备200的目标地址的感知数据传输到智能网关100的处理器进行计算处理,智能网关100搭载有一定性能的处理器,用于对感知数据进行远程计算以及监管智能设备200的任务状态。不需要智能设备200单独搭载处理器对感知数据进行处理,大大减少了智能设备的成本,并且提高了智能设备的升级维护的便捷性。
实施例三
本申请实施例提供的智能设备控制方法,除了可以应用到如图3所示的场景中,还可以应用到其他场景。
下面结合图10所示的一种电子设备扩展系统的场景示意图,介绍又一种应用场景。
其中,电子设备扩展系统包括:电子设备400、摄像头500以及2D激光雷达600。其中电子设备400可以是手机、笔记本电脑等,其中摄像头500和2D激光雷达600都数据携带较复杂传感器的拓展设备。
其中,电子设备400通过拓展摄像头500,使得电子设备400具备多机位摄像能力。
具体的,电子设备400向摄像头500发送控制命令,例如:拍摄命令;摄像头500接收到控制命令后,返回摄像头500通过传感器获得的感知数据给电子设备400,电子设备400对接收到的感知数据进行处理,得到目标图像。
其中,电子设备400通过拓展2D激光雷达600,使得电子设备400具备SLAM能力。
其中,即时定位与地图构建(Simultaneous Localization and Mapping,简称SLAM),通过2D激光雷达获得的感知数据可以实现SLAM能力。具体的,电子设备400向2D激光雷达600发送控制命令,例如:获取地图命令;2D激光雷达600接收到控制命令后,返回2D激光雷达600通过传感器获得的感知数据给电子设备400,电子设备400对接收到的感知数据进行处理,实现及时定位与地图构建。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序或指令,当所述计算机程序或指令被运行时,使得电子设备实现上述的各个功能或者步骤。
本申请实施例还提供一种计算机程序产品,包括计算机程序或指令,该计算机程序或指令被处理器执行时,使得电子设备实现上述的各个功能或者步骤。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (13)

1.一种智能设备控制方法,其特征在于,应用于网关,所述方法包括:
接收智能设备发送的感知数据;所述感知数据是所述智能设备通过传感器获得的数据;
对所述感知数据进行处理,得到对应的处理结果;
根据所述对应的处理结果,向所述智能设备发送当前控制命令,以对所述智能设备进行控制。
2.根据权利要求1所述的方法,其特征在于,在所述接收智能设备发送的感知数据之前,所述方法还包括:
向所述智能设备发送上一个控制命令;
所述接收智能设备发送的感知数据,包括:
接收所述智能设备确定所述上一个控制命令的类型为第一类型时,发送的感知数据。
3.根据权利要求2所述的方法,其特征在于,所述上一个控制命令基于操作请求得到,所述根据所述对应的处理结果,向所述智能设备发送当前控制命令,包括:
根据所述对应的处理结果,更新与所述操作请求对应的任务状态;
若更新后的任务状态表征与所述操作请求对应的任务未完成,则生成针对所述智能设备的当前控制命令;
向所述智能设备发送所述当前控制命令。
4.根据权利要求2所述的方法,其特征在于,在所述向所述智能设备发送上一个控制命令之后,所述方法还包括:
接收所述智能设备发送的所述智能设备当前所处的设备状态;所述当前所处的设备状态是所述智能设备确定所述上一个控制命令的类型为第二类型时,根据所述上一个控制命令执行对应的物理操作,当所述对应的物理操作执行结束后获得的;
根据所述当前所处的设备状态,向所述智能设备发送当前控制命令,以对所述智能设备进行控制。
5.根据权利要求4所述的方法,其特征在于,所述上一个控制命令基于操作请求得到,所述根据所述当前所处的设备状态,向所述智能设备发送当前控制命令,包括:
根据所述当前所处的设备状态,更新与所述操作请求对应的任务状态;
若更新后的任务状态表征与所述操作请求对应的任务未完成,则生成针对所述智能设备的当前控制命令;
向所述智能设备发送所述当前控制命令。
6.根据权利要求3或5所述的方法,其特征在于,所述方法还包括:
将所述更新后的任务状态反馈给用户端。
7.一种智能设备控制方法,其特征在于,应用于智能设备,所述智能设备包括至少一个传感器,所述方法包括:
通过所述至少一个传感器获得感知数据;
向网关发送所述感知数据;
接收所述网关根据处理结果返回的当前控制命令,所述处理结果由所述网关对所述感知数据进行处理得到的;
执行所述当前控制命令。
8.根据权利要求7所述的方法,其特征在于,在所述向网关发送所述感知数据之前,所述方法还包括:接收所述网关发送的上一个控制命令;
所述向网关发送所述感知数据,包括:
当确定所述上一控制命令的类型为第一类型时,向网关发送所述感知数据。
9.根据权利要求8所述的方法,其特征在于,在所述接收所述网关发送的上一个控制命令之后,所述方法还包括:
当确定所述上一控制命令的类型为第二类型时,根据所述上一个控制命令,执行对应的物理操作;
当所述对应的物理操作执行结束后,获得当前所述的设备状态;
将所述当前所述的设备状态发送给所述网关,以便于所述网关根据所述设备状态,返回当前控制命令;
执行所述当前控制命令。
10.一种智能设备控制系统,其特征在于,所述系统包括:网关和智能设备;所述智能设备包括至少一个传感器;
所述智能设备,通过至少一个传感器获得感知数据,并发送给所述网关;
所述网关,接收所述感知数据;对所述感知数据进行处理,得到对应的处理结果;根据所述处理结果,向所述智能设备发送当前控制命令;
所述智能设备,执行所述当前控制命令。
11.一种网关,其特征在于,包括处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如权利要求1-6中任一项所述的方法。
12.一种智能设备,其特征在于,包括处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如权利要求7-9中任一项所述的方法。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序或指令,当所述计算机程序或指令被运行时,实现如权利要求1-9中任一项所述的方法。
CN202310183380.6A 2023-02-20 2023-02-20 一种智能设备控制方法及系统 Pending CN117111483A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310183380.6A CN117111483A (zh) 2023-02-20 2023-02-20 一种智能设备控制方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310183380.6A CN117111483A (zh) 2023-02-20 2023-02-20 一种智能设备控制方法及系统

Publications (1)

Publication Number Publication Date
CN117111483A true CN117111483A (zh) 2023-11-24

Family

ID=88793552

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310183380.6A Pending CN117111483A (zh) 2023-02-20 2023-02-20 一种智能设备控制方法及系统

Country Status (1)

Country Link
CN (1) CN117111483A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103618670A (zh) * 2013-12-11 2014-03-05 深圳市华百安智能技术有限公司 智能网关及智能家居系统
CN105577534A (zh) * 2014-10-15 2016-05-11 珠海格力电器股份有限公司 家庭智能网关及智能家居系统
WO2017185654A1 (zh) * 2016-04-26 2017-11-02 乐视控股(北京)有限公司 智能网关设备及智能监控系统
CN109617768A (zh) * 2018-10-15 2019-04-12 深圳市欧瑞博科技有限公司 信息处理方法、装置、智能控制系统、智能网关及服务器
CN110417859A (zh) * 2019-06-20 2019-11-05 深圳绿米联创科技有限公司 设备控制方法、装置、系统、智能网关及存储介质
CN111327497A (zh) * 2020-01-21 2020-06-23 中移(杭州)信息技术有限公司 智能终端控制方法、装置、电子设备及存储介质
WO2021139586A1 (zh) * 2020-01-08 2021-07-15 京东方科技集团股份有限公司 智能设备的控制系统、方法、装置、智能网关及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103618670A (zh) * 2013-12-11 2014-03-05 深圳市华百安智能技术有限公司 智能网关及智能家居系统
CN105577534A (zh) * 2014-10-15 2016-05-11 珠海格力电器股份有限公司 家庭智能网关及智能家居系统
WO2017185654A1 (zh) * 2016-04-26 2017-11-02 乐视控股(北京)有限公司 智能网关设备及智能监控系统
CN109617768A (zh) * 2018-10-15 2019-04-12 深圳市欧瑞博科技有限公司 信息处理方法、装置、智能控制系统、智能网关及服务器
CN110417859A (zh) * 2019-06-20 2019-11-05 深圳绿米联创科技有限公司 设备控制方法、装置、系统、智能网关及存储介质
WO2021139586A1 (zh) * 2020-01-08 2021-07-15 京东方科技集团股份有限公司 智能设备的控制系统、方法、装置、智能网关及存储介质
CN111327497A (zh) * 2020-01-21 2020-06-23 中移(杭州)信息技术有限公司 智能终端控制方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
WO2020244495A1 (zh) 一种投屏显示方法及电子设备
WO2021121052A1 (zh) 一种多屏协同方法、系统及电子设备
EP4040277A1 (en) Method for displaying multiple windows, and electronic device and system
CN111434132A (zh) 一种eSIM卡的开户方法及终端
CN113572800B (zh) 获取应用的下载信息的方法、系统、服务器以及存储介质
WO2022179275A1 (zh) 终端应用控制的方法、终端设备及芯片系统
CN114554463A (zh) 蓝牙通信方法、蓝牙广播方法、蓝牙设备以及存储介质
WO2024037032A1 (zh) 账号登录的方法及电子设备
WO2022161024A1 (zh) 升级提示方法、终端设备及计算机可读存储介质
KR20150026257A (ko) 액세서리의 정보를 업 데이트하는 전자 장치 및 방법
US20230216732A1 (en) Network Configuration Method and Device
CN116662270B (zh) 文件解析方法及相关装置
CN117111483A (zh) 一种智能设备控制方法及系统
WO2023016059A1 (zh) 数据传输控制方法及相关装置
CN116679895B (zh) 一种协同业务的调度方法、电子设备及协同系统
CN117707453B (zh) 一种节点信息的读取方法、设备及存储介质
CN117216428B (zh) 一种网页资源请求方法、终端设备及计算机可读存储介质
WO2024022119A1 (zh) 数据同步方法、电子设备及系统
WO2024061129A1 (zh) 数据访问方法、电子设备和计算机可读存储介质
WO2023071590A1 (zh) 输入控制方法及电子设备
CN117270917B (zh) 一种软件升级方法及电子设备
WO2024083114A1 (zh) 一种软件分发方法、电子设备及系统
WO2023160217A1 (zh) 检测嵌入式身份识别模块eSIM卡的方法及终端设备
WO2024131486A1 (zh) 性能分析方法、可读存储介质、程序产品及电子设备
WO2024093853A1 (zh) 一种文件下载方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination