CN112492023B - 设备控制方法、装置、存储介质及电子装置 - Google Patents

设备控制方法、装置、存储介质及电子装置 Download PDF

Info

Publication number
CN112492023B
CN112492023B CN202011345169.2A CN202011345169A CN112492023B CN 112492023 B CN112492023 B CN 112492023B CN 202011345169 A CN202011345169 A CN 202011345169A CN 112492023 B CN112492023 B CN 112492023B
Authority
CN
China
Prior art keywords
target
equipment
instruction
information
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011345169.2A
Other languages
English (en)
Other versions
CN112492023A (zh
Inventor
高静静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Original Assignee
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Haier Technology Co Ltd, Haier Smart Home Co Ltd filed Critical Qingdao Haier Technology Co Ltd
Priority to CN202011345169.2A priority Critical patent/CN112492023B/zh
Publication of CN112492023A publication Critical patent/CN112492023A/zh
Application granted granted Critical
Publication of CN112492023B publication Critical patent/CN112492023B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Telephonic Communication Services (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明实施例提供了一种设备控制方法、装置、存储介质及电子装置，其中，该方法包括：在接收到第一服务器发送的目标指令之后，解析目标指令，以得到目标解析信息；在目标解析信息中包括设备控制指令的情况下，确定设备控制指令请求控制的目标设备的设备信息，其中，目标设备为与第二服务器连接的设备；在根据目标解析信息和设备信息确定目标设备满足目标条件的情况下，控制目标设备执行与控制指令对应的控制操作。通过本发明，解决了相关技术中存在的无法控制连接至其他厂商服务器中的设备的问题，达到能够控制连接至其他厂商服务器中的设备的效果，提高了设备的普及率。

Description

设备控制方法、装置、存储介质及电子装置
技术领域
本发明实施例涉及通信领域，具体而言，涉及一种设备控制方法、装置、存储介质及电子装置。
背景技术
在相关技术中，仅能够通过云控制平台对用户的语音控制指令和语音状态查询指令等语音指令进行识别，将识别得到控制指令基于预置的通信协议发送至云IOT(Internetof Things，物联网)控制平台以控制处于同一个服务器下的网器(如智能家电)；由于不同厂商的语音平台和IOT平台存在协议壁垒，无法实现控制跨平台的设备，即第三方语音控制设备无法控制连接至其他服务器的智能家电设备，极大影响了不同厂商智能家电设备的普及。
由此可知，相关技术中存在无法控制连接至其他厂商服务器中的设备的问题。
针对相关技术中存在的上述问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种设备控制方法、装置、存储介质及电子装置，以至少解决相关技术中存在无法控制连接至其他厂商服务器中的设备的问题。
根据本发明的一个实施例，提供了一种设备控制方法，包括：在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作。
根据本发明的另一个实施例，提供了一种设备控制装置，包括：解析模块，用于在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；确定模块，用于在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；控制模块，用于在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作。
根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明，解析第一服务器发送的目标指令以得到目标解析信息，在目标解析信息中包括设备控制指令的情况下，确定设备控制指令请求控制的与第二服务器连接的目标设备的设备信息，根据目标解析信息和设备信息确定目标设备满足目标条件的情况下，控制目标设备执行与控制指令对应的控制操作，由于可以对第一服务器发送的目标指令进行解析，确定与第二服务器连接的目标设备，在目标设备满足目标条件的情况下，对目标设备进行控制，因此，可以解决相关技术中存在的无法控制连接至其他厂商服务器中的设备的问题，达到能够控制连接至其他厂商服务器中的设备的效果，提高了设备的普及率。
附图说明
图1是本发明实施例的一种设备控制方法的移动终端的硬件结构框图；
图2是根据本发明实施例的设备控制方法的流程图；
图3是根据本发明具体实施例的第一控制设备控制目标设备的流程图；
图4是根据本发明实施例的设备控制装置的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明的实施例。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本发明实施例的一种设备控制方法的移动终端的硬件结构框图。如图1所示，移动终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104，其中，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本发明实施例中的设备控制方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端的通信供应商提供的无线网络。在一个实例中，传输设备106包括一个网络适配器(Network Interface Controller，简称为NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输设备106可以为射频(Radio Frequency，简称为RF)模块，其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种设备控制方法，图2是根据本发明实施例的设备控制方法的流程图，如图2所示，该流程包括如下步骤：
步骤S202，在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；
步骤S204，在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；
步骤S208，在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作。
在上述实施例中，目标指令可以为登录有第一目标账号的第一控制设备基于接收到的消息确定并发送给第一服务器的指令，第一控制设备为与第一服务器连接的设备。第一服务器和第二服务器可以是不同的服务器，例如，第一服务器可以为亚马逊服务器，第二服务器可以是海尔服务器。
在上述实施例中，用户可以对亚马逊音箱发出指令“控制设备”，亚马逊音箱识别出该指令，将该指令发送给第一服务器，第一服务器将该指令发送给第二服务器，第二服务器接收到指令后，解析请求指令,在确定目标指令为设备控制指令的情况下，确定设备控制指令请求控制的目标设备的设备信息，在确定目标设备满足目标条件的情况下，控制目标设备执行与控制指令对应的控制操作。其中，目标条件可以为预先确定并缓存的、允许第一帐号控制，与第二服务器连接的并且在线的设备。
在上述实施例中，可以通过如下方式实现确定设备控制指令请求控制的目标设备的设备信息：在目标解析信息中包括设备控制指令的情况下，解密设备控制指令中包括的设备的设备标识及设备类型，将设备标识及设备类型确定为目标设备的设备信息。
可选地，上述步骤的执行主体可以是第二服务器、处理器，或者其他的具备类似处理能力的设备，还可以是至少集成有数据处理设备的机器，其中，数据处理设备可以包括计算机、手机等终端，但不限于此。
通过本发明，解析第一服务器发送的目标指令以得到目标解析信息，在目标解析信息中包括设备控制指令的情况下，确定设备控制指令请求控制的与第二服务器连接的目标设备的设备信息，根据目标解析信息和设备信息确定目标设备满足目标条件的情况下，控制目标设备执行与控制指令对应的控制操作，由于可以对第一服务器发送的目标指令进行解析，确定与第二服务器连接的目标设备，在目标设备满足目标条件的情况下，对目标设备进行控制，因此，可以解决相关技术中存在的无法控制连接至其他厂商服务器中的设备的问题，达到能够控制连接至其他厂商服务器中的设备的效果，提高了设备的普及率。
在一个示例性实施例中，解析所述目标指令，以得到目标解析信息包括：基于预定协议解析所述目标指令，以得到用于标识第一帐号的标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称，其中，所述目标解析信息包括所述标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称；在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息包括：在基于所述目标指令的类型信息以及所述目标指令的名称确定出所述目标指令为设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息；在控制所述目标设备执行与所述控制指令对应的控制操作之前，所述方法还包括：根据所述设备信息、所述标识码以及所述第一帐号的信息判断所述目标设备是否满足所述目标条件。在本实施例中，可以根据目标解析指令中包括的标识码以及第一帐号的信息确定目标设备是否满足目标条件。第二服务器接收到目标指令后，解析该指令，解析出token(对应于上述标识码)，clientId(对应于上述第一帐号的信息)，namespace(对应于上述目标指令的指令类型)，name(对应于上述目标指令的名称),请求头等信息，并基于namespace，name信息判断目标指令是否为控制设备指令，如果是控制设备指令,解密设备id，设备类型等信息，封装token，clientId和设备信息，根据这些参数信息，去查询设备状态接口，判断目标设备是否满足目标条件。
在一个示例性实施例中，在控制所述目标设备执行与所述控制指令对应的控制操作之前，所述方法还包括：判断是否能够识别所述目标解析信息和所述设备信息；在确定能够识别所述目标解析信息和所述设备信息的情况下，根据所述目标解析信息确定所述目标设备是否为允许所述第一服务器控制的设备，基于所述设备信息确定所述目标设备是否满足所述目标条件。在本实施例中，在控制目标设备执行与控制指令对应的操作之前，可以判断第二服务器是否能够识别目标解析信息和设备信息，在确定能够识别目标解析信息的设备信息的情况下，根据目标解析信息确定目标设备是否为允许第一服务器控制的设备，并基于设备信息确定目标设备是否满足目标条件。
在上述实施例中，第一服务器和第二服务器之间可以协议约定指令控制权限。在这种情况下，第二服务器接收到第一服务器发送的目标指令之后，可以判断目标指令所要控制的设备是否为允许第一控制设备控制的目标设备。当目标指令所要控制的设备不允许第一控制设备控制，则第二服务器可以给第一服务器发送一个反馈信息，用于提醒第一服务器目标指令所要控制的设备不执行目标指令。当目标指令所要控制的设备允许第一控制设备控制，则第二服务器也可以给第一服务器发送一个反馈信息，用于提醒第一服务器目标指令所要控制的设备执行目标指令。当然，还可以仅在第二服务器中设置指令控制权限，第二服务器接收到第一服务器发送的目标指令之后，可以判断目标指令所要控制的设备是否为允许第一控制设备控制的目标设备。但第二服务器无需根据判断结果向第一服务器反馈信息，只需控制设备执行或不执行目标指令即可。
在一个示例性实施例中，根据所述目标解析信息和所述设备信息，确定所述目标设备是否满足所述目标条件包括：根据所述设备信息判断所述目标设备的设备状态是否是预先缓存在所述第二服务器中；在判断结果为是的情况下，查询所述目标设备是否在线；在查询到所述目标设备在线的情况下，确定所述目标设备满足所述目标条件。在本实施例中，目标条件可以为预先缓存设备状态，允许第一帐号控制并与第二服务器连接的设备，当目标设备满足目标条件时，控制目标设备执行与控制指令对应的控制操作。其中，可以通过调用设备状态接口确定目标设备是否满足目标条件：调用设备状态接口，需判断传入参数信息，判断这些参数是否存在问题，如果传入参数有问题，则返回“传入参数错误或缺失”，如果传入参数没有问题，则继续查该设备是否是第一帐号的设备，如果不是第一帐号的设备，则返回错误码“设备未绑定或者设备离线”，如果是第一帐号的设备，则先查缓存里是否有该设备的状态，如果缓存中没有该设备的状态，则再查询iot的接口中是否有该设备的状态，如果从iot接口中查到该设备的状态，则判断该状态，如果该状态存在问题，则返回“无法连接设备，检查设备状态”，如果该状态正常，则解析状态，根据一二级状态表解析，返回解析后状态属性，验证设备在线。
在一个示例性实施例中，控制所述目标设备执行与所述控制指令对应的控制操作包括：将所述控制指令转换成允许所述目标设备识别的指令，以得到目标控制指令；将所述目标控制指令及所述设备信息发送至与所述目标设备连接的指令接口，并判断所述指令接口是否能够识别所述目标控制指令和所述设备信息；在确定能够识别所述目标控制指令和所述设备信息的情况下，查询所述目标设备是否在线；在查询到所述目标设备在线的情况下，控制所述目标设备执行与所述目标控制指令对应的控制操作。在本实施例中，在查询设备在线后，解析目标指令对应的具体控制信息，根据解析后的控制信息进行转译，将转译后的控制信息匹配对应的设备可识别的nlp语义，将转译的语义和设备信息作为参数传入组装指令接口，组装指令接口判断传入参数，如果参数有问题，则返回“传入参数错误或缺失”，如果参数无问题，则判断设备是否存在，设备存在，进行指令映射关系转换，进行组装指令，根据组装指令的信息，判断指令，“如果是单指令”，则下发单指令到iot的单指令接口，如果是多指令，则下发到iot的多指令接口，指令下发成功后，获取返回结果。
在上述实施例中，可以基于预置协议将控制指令转换成允许目标设备识别的指令。其中，预置协议可以是预先确定的第一服务器与第二服务器之间遵循的协议。
在一个示例性实施例中，在控制所述目标设备执行与所述控制指令对应的控制操作之后，所述方法还包括：接收所述目标设备返回的响应消息，其中，所述响应消息用于指示所述目标设备执行所述控制操作的执行结果；将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息发送给第一控制设备。在本实施例中，根据目标设备执行控制操作的执行结果确定响应消息，将响应消息发送给第一服务器，第一服务器在接收到响应消息后可以将响应消息发送给第一控制设备。其中，第一控制设备与第一服务器连接，当第一服务器为亚马逊服务器时，第一控制设备可以是亚马逊音箱，第一帐号可以是登录亚马逊APP(Application，应用)的帐号。
在一个示例性实施例中，将所述响应消息发送给所述第一服务器，以指示所述服务器将所述响应消息发送给所述第一控制设备包括以下之一：将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，将所述目标响应消息发送给所述第一服务器，以指示所述第一服务器将所述目标响应消息发送给所述第一控制设备；将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，并将所述目标响应消息发送给所述第一控制设备。在本实施例中，获取执行结果反馈响应消息之后，可以将响应信息转译成第一服务器可识别的协议，将转换后的消息确定为目标响应消息，将目标响应消息返回给第一服务器，当反馈信息为执行成功时，目标响应消息可以为成功信息。如果返回信息是错误信息，目标响应消息可以为错误码。当然，在获取执行结果反馈信息之后，还可以直接将响应消息发送给第一服务器，第一服务器将响应消息转换为允许第一控制设备识别的目标响应消息。将目标响应消息发送给第一控制设备，以提示用户执行结果。例如，当执行成功时，第一控制设备可以发出“ok”的语音，提示用户执行成功，当执行失败时，第一控制设备可以发出失败原因的语音，提示用户问题所在，提高用户体验。
在前述实施例中，在第一控制设备控制目标设备执行相应的操作之前，还可以执行发现目标设备的操作。在执行发现目标设备的操作之后，还可以执行查询设备状态等操作。以第一服务器为亚马逊服务器、第二服务器为海尔服务器为例进行说明，图3是根据本发明具体实施例的第一控制设备控制目标设备的流程图，如图3所示，该流程包括：
步骤S302，用户对亚马逊音箱发出指令“发现设备”(Discover my appliances)。
步骤S304，海尔云端(对应于上述第二服务器)收到该指令后，解析该指令，解析出token，clientId，namespace，name，请求头等信息。
步骤S306，根据namespace，name信息判断指令是否是“发现设备”指令，如果是“发现设备”指令，则通过token，clientId等信息去查询用户设备列表信息。
步骤S308，获取设备列表，要查询用户设备列表信息，则先根据解析指令信息，获取到用户设备信息，并封装用户设备信息，转换设备类型和设备类型id，将封装后的设备信息、转换后的设备类型和设备类型id作为参数并数字签名后去调用iot-uds设备列表接口。
步骤S310，调用iot-uds设备列表接口，需要获取所有已绑定设备列表信息，如果获取列表为空，直接返回空列表，如果设备列表不为空，则返回该用户(对应于上述第二帐号)下所有设备信息。
步骤S312，存缓存：将调用iot-uds接口获取的设备列表信息，存入缓存。
步骤S314，匹配语音接入设备：根据获取到的设备列表去匹配语音已接入的设备，获取语音接入设备列表结果。其中，语音接入设备为允许通过语音控制的设备。
步骤S316，解析亚马逊可支持设备：根据获取到的语音接入设备列表结果，去匹配亚马逊可支持的设备。
步骤S318，匹配亚马逊可识别设备：获取到亚马逊可支持设备后，进行协议转，转换成亚马逊可识别的设备。
步骤S320，对设备id类型加密：对亚马逊可识别的设备进行设备和类型加密。
步骤S322，返回给亚马逊：获取加密后亚马逊可识别设备后，返回给亚马逊。
上述步骤S302-S322是亚马逊音箱发现设备的过程，在发现设备之后，在还可以对设备进行控制，如图3所示，该控制流程包括：
步骤S302，亚马逊发指令：用户对亚马逊音箱发出指令“控制设备”，亚马逊音箱识别该指令，将指令发送给亚马逊服务器，亚马逊服务器将该指令发送给海尔云端。
步骤S304，解析指令：海尔云端收到指令后，解析请求指令，解析出token，clientId，namespace，name,请求头等信息。
步骤S324，执行控制设备，根据namespace，name信息判断指令，如果是“控制设备”指令,解密设备id，设备类型等信息，封装token，clientId和设备信息，根据这些参数信息，去查询设备状态接口。
步骤S326，查询设备状态是否在线:调用设备状态接口，需判断传入参数信息，判断这些参数是否存在问题，如果传入参数有问题，则返回“传入参数错误或缺失”，如果传入参数没有问题，则继续查该设备是否是第一帐号的设备，如果不是第一帐号的设备，则返回错误码“设备未绑定或者设备离线”，如果是第一帐号的设备，则先查缓存里是否有该设备的状态，如果缓存中没有该设备的状态，则再查询iot的接口中是否有该设备的状态，如果从iot接口中查到该设备的状态，则判断该状态，如果该状态存在问题，则返回“无法连接设备，检查设备状态”，如果该状态正常，则解析状态，根据一二级状态表解析，返回解析后状态属性，验证设备在线。
步骤S328，解析控制指令:查询设备在线后，解析“控制指令”对应的具体控制信息。
步骤S330，匹配对应的nlp语义：根据解析后的控制信息进行转译，将转译后的控制信息匹配对应的设备可识别的nlp语义。
步骤S332，组装指令：将转译的语义和设备信息作为参数传入组装指令接口，判断传入参数，如果参数有问题，则返回“传入参数错误或缺失”，如果参数无问题，则判断设备是否存在，设备存在，进行指令映射关系转换，进行组装指令。
步骤S334，下发指令：根据组装指令的信息，判断指令，“如果是单指令”，则下发单指令到iot的单指令接口，如果是多指令，则下发到iot的多指令接口，指令下发成功后，获取返回结果。
步骤S336，返回给亚马逊：获取下发指令的返回信息，转译成亚马逊可识别的协议，返回给亚马逊成功信息。
步骤S338，获取下发指令的返回信息，转译成亚马逊可识别的协议，返回信息是错误信息，则根据错误码返回给亚马逊相应错误码。
上述步骤S302、S304，S324-S338为设备执行操作，即通过亚马逊音箱控制与海尔服务器连接的设备执行操作。除了利用亚马逊音箱控制与海尔服务器连接的设备执行操作外，还可以通过亚马逊音箱查询与海尔服务器连接的设备的状态。如图3所示，查询设备状态的流程包括：
步骤S302，亚马逊发指令：用户对亚马逊音箱发出指令“查询设备状态”后，亚马逊音箱识别该指令，并将识别后的指令发送给亚马逊服务器，亚马逊服务器将该指令发送给海尔云端。
步骤S304，解析指令：海尔云端收到该指令后，解析该指令,解析出token，clientId，namespace，name,请求头等信息。
步骤S340，根据namespace，name信息判断接收到的指令是否是“查询设备状态”指令，如果是“查询设备状态”指令,则通过token，clientId等信息去查询设备状态接口。
步骤S342，调用设备状态接口查询：调用设备状态接口查询，需判断传入解析后参数信息是否存在问题，如果传入参数有问题，则返回“传入参数错误或缺失”，如果传入参数没有问题，则继续查这款设备是否是这个用户的设备，如果不是这个用户的设备，则返回错误码“设备未绑定或者设备离线”，如果是这个用户的设备，则先查缓存里是否有该设备的状态，如果缓存中没有该设备的状态，则再查询iot的接口中是否有该设备的状态，如果从iot接口中查到该设备的状态，则判断该状态，如果该状态存在问题，则返回“无法连接设备，检查设备状态”，如果该状态正常，则解析状态，根据一二级状态表解析，返回解析后状态属性，验证设备在线。
步骤S344，转译amazon识别状态:根据调用设备状态接口获取到的设备属性信息，如果获取信息成功，则转译成亚马逊可识别的协议。
步骤S346，返回给亚马逊成功结果：获取的设备状态信息正确，返回转译后的成功结果给亚马逊。
步骤S348，转译amazon识别的错误码：根据调用设备状态接口获取到的设备属性信息，如果获取信息错误，则转译成亚马逊可识别的错误码。
步骤S350，返回给亚马逊相应错误码：获取设备状态信息错误，则返回给转译后的亚马逊相关错误码。
在前述实施例中，使用亚马逊音箱语音控制海尔设备，通过亚马逊开发者平台进行技能创建，和亚马逊aws平台创建海尔云访问地址，进行云云连接，进行帐号授权连接，通过第三方app绑定音箱，海尔app绑定海尔智能设备，第三方音箱语音控制海尔智能设备，可以通过对音箱的输入语料进行转换，转换成海尔智能设备可识别的语义，进行相关控制，提高了设备的普及率。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种设备控制装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本发明实施例的设备控制装置的结构框图，如图4所示，该装置包括：
解析模块42，用于在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；
确定模块44，用于在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；
控制模块46，用于在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作。
在一个示例性实施例中，所述解析模块42可以通过如下方式实现解析所述目标指令，以得到目标解析信息：基于预定协议解析所述目标指令，以得到用于标识第一帐号的标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称，其中，所述目标解析信息包括所述标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称；所述控制模块46可以通过如下方式实现在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息：在基于所述目标指令的类型信息以及所述目标指令的名称确定出所述目标指令为设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息；所述装置可以用于在控制所述目标设备执行与所述控制指令对应的控制操作之前，根据所述设备信息、所述标识码以及所述第一帐号的信息判断所述目标设备是否满足所述目标条件，其中，所述第一解析信息包括所述标识码以及所述第一帐号的信息。
在一个示例性实施例中，所述装置可以用于在控制所述目标设备执行与所述控制指令对应的控制操作之前：判断是否能够识别所述目标解析信息和所述设备信息；在确定能够识别所述目标解析信息和所述设备信息的情况下，根据所述目标解析信息确定所述目标设备是否为允许所述第一服务器控制的设备，基于所述设备信息确定所述目标设备是否满足所述目标条件。
在一个示例性实施例中，所述装置可以通过如下方式实现根据所述目标解析信息和所述设备信息，确定所述目标设备是否满足所述目标条件：根据所述设备信息判断所述目标设备的设备状态是否是预先缓存在所述第二服务器中；在判断结果为是的情况下，查询所述目标设备是否在线；在查询到所述目标设备在线的情况下，确定所述目标设备满足所述目标条件。
在一个示例性实施例中，所述控制模块46可以通过如下方式实现控制所述目标设备执行与所述控制指令对应的控制操作：将所述控制指令转换成允许所述目标设备识别的指令，以得到目标控制指令；将所述目标控制指令及所述设备信息发送至与所述目标设备连接的指令接口，并判断所述指令接口是否能够识别所述目标控制指令和所述设备信息；在确定能够识别所述目标控制指令和所述设备信息的情况下，查询所述目标设备是否在线；在查询到所述目标设备在线的情况下，控制所述目标设备执行与所述目标控制指令对应的控制操作。
在一个示例性实施例中，所述装置还可以用于在控制所述目标设备执行与所述控制指令对应的控制操作之后，接收所述目标设备返回的响应消息，其中，所述响应消息用于指示所述目标设备执行所述控制操作的执行结果；将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息发送给所述第一控制设备。
在一个示例性实施例中，所述装置可以通过如下方式之一实现将所述响应消息发送给所述第一服务器，以指示所述服务器将所述响应消息发送给所述第一控制设备：将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，将所述目标响应消息发送给所述第一服务器，以指示所述第一服务器将所述目标响应消息发送给所述第一控制设备；将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，并将所述目标响应消息发送给所述第一控制设备。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种设备控制方法，其特征在于，包括：
在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；
在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；
在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作；
其中，在控制所述目标设备执行与所述控制指令对应的控制操作之前，所述方法还包括：调用设备状态接口确定目标设备是否满足目标条件；
其中，调用设备状态接口确定目标设备是否满足目标条件包括：
判断是否能够识别所述目标解析信息和所述设备信息；
在确定能够识别所述目标解析信息和所述设备信息的情况下，根据所述目标解析信息确定所述目标设备是否为允许所述第一服务器控制的设备；
在所述目标设备为允许所述第一服务器控制的设备的情况下：判断所述目标设备的设备状态是否是预先缓存在所述第二服务器中；
在所述目标设备的设备状态没有预先缓存在所述第二服务器中的情况下，查询iot的接口中是否有所述目标设备的设备状态；
在查询到iot的接口中有所述目标设备的设备状态，且所述目标设备的设备状态正常的情况下，根据一二级状态表解析所述目标设备的设备状态；
在所述目标设备在线的情况下，确定所述目标设备满足所述目标条件。
2.根据权利要求1所述的方法，其特征在于，
解析所述目标指令，以得到目标解析信息包括：基于预定协议解析所述目标指令，以得到用于标识第一帐号的标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称，其中，所述目标解析信息包括所述标识码、所述第一帐号的信息、所述目标指令的类型信息以及所述目标指令的名称；
在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息包括：在基于所述目标指令的类型信息以及所述目标指令的名称确定出所述目标指令为设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息；
在控制所述目标设备执行与所述控制指令对应的控制操作之前，所述方法还包括：根据所述设备信息、所述标识码以及所述第一帐号的信息判断所述目标设备是否满足所述目标条件。
3.根据权利要求1所述的方法，其特征在于，调用设备状态接口确定目标设备是否满足目标条件还包括：
在所述目标设备的设备状态预先缓存在所述第二服务器中的情况下，查询所述目标设备是否在线；
在查询到所述目标设备在线的情况下，确定所述目标设备满足所述目标条件。
4.根据权利要求1所述的方法，其特征在于，控制所述目标设备执行与所述控制指令对应的控制操作包括：
将所述控制指令转换成允许所述目标设备识别的指令，以得到目标控制指令；
将所述目标控制指令及所述设备信息发送至与所述目标设备连接的指令接口，并判断所述指令接口是否能够识别所述目标控制指令和所述设备信息；
在确定能够识别所述目标控制指令和所述设备信息的情况下，查询所述目标设备是否在线；
在查询到所述目标设备在线的情况下，控制所述目标设备执行与所述目标控制指令对应的控制操作。
5.根据权利要求1所述的方法，其特征在于，在控制所述目标设备执行与所述控制指令对应的控制操作之后，所述方法还包括：
接收所述目标设备返回的响应消息，其中，所述响应消息用于指示所述目标设备执行所述控制操作的执行结果；
将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息发送给第一控制设备。
6.根据权利要求5所述的方法，其特征在于，将所述响应消息发送给所述第一服务器，以指示所述服务器将所述响应消息发送给所述第一控制设备包括以下之一：
将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，将所述目标响应消息发送给所述第一服务器，以指示所述第一服务器将所述目标响应消息发送给所述第一控制设备；
将所述响应消息发送给所述第一服务器，以指示所述第一服务器将所述响应消息转换成允许所述第一控制设备识别的目标响应消息，并将所述目标响应消息发送给所述第一控制设备。
7.一种设备控制装置，其特征在于，包括：
解析模块，用于在接收到第一服务器发送的目标指令之后，解析所述目标指令，以得到目标解析信息；
确定模块，用于在所述目标解析信息中包括设备控制指令的情况下，确定所述设备控制指令请求控制的目标设备的设备信息，其中，所述目标设备为与第二服务器连接的设备；
控制模块，用于在根据所述目标解析信息和所述设备信息确定所述目标设备满足目标条件的情况下，控制所述目标设备执行与所述控制指令对应的控制操作；
所述装置还用于，在控制所述目标设备执行与所述控制指令对应的控制操作之前，调用设备状态接口确定目标设备是否满足目标条件；
所述装置通过以下方式调用设备状态接口确定目标设备是否满足目标条件：判断是否能够识别所述目标解析信息和所述设备信息；在确定能够识别所述目标解析信息和所述设备信息的情况下，根据所述目标解析信息确定所述目标设备是否为允许所述第一服务器控制的设备；在所述目标设备为允许所述第一服务器控制的设备的情况下：判断所述目标设备的设备状态是否是预先缓存在所述第二服务器中；在所述目标设备的设备状态没有预先缓存在所述第二服务器中的情况下，查询iot的接口中是否有所述目标设备的设备状态；在查询到iot的接口中有所述目标设备的设备状态，且所述目标设备的设备状态正常的情况下，根据一二级状态表解析所述目标设备的设备状态；在所述目标设备在线的情况下，确定所述目标设备满足所述目标条件。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至6任一项中所述的方法。
9.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至6任一项中所述的方法。
CN202011345169.2A 2020-11-25 2020-11-25 设备控制方法、装置、存储介质及电子装置 Active CN112492023B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011345169.2A CN112492023B (zh) 2020-11-25 2020-11-25 设备控制方法、装置、存储介质及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011345169.2A CN112492023B (zh) 2020-11-25 2020-11-25 设备控制方法、装置、存储介质及电子装置

Publications (2)

Publication Number Publication Date
CN112492023A CN112492023A (zh) 2021-03-12
CN112492023B true CN112492023B (zh) 2023-04-07

Family

ID=74934957

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011345169.2A Active CN112492023B (zh) 2020-11-25 2020-11-25 设备控制方法、装置、存储介质及电子装置

Country Status (1)

Country Link
CN (1) CN112492023B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113190827A (zh) * 2021-03-31 2021-07-30 青岛海尔科技有限公司 智能设备跨平台接入的方法和装置、设备及存储介质
CN113596013B (zh) * 2021-07-26 2024-02-09 深圳Tcl新技术有限公司 设备控制权限的设置方法、装置、计算机设备和存储介质
CN113949728B (zh) * 2021-09-30 2023-04-21 珠海格力电器股份有限公司 不同平台设备同步的方法、第一平台和第二平台
CN114500617B (zh) * 2021-12-24 2023-11-28 青岛海尔科技有限公司 互联网设备控制方法和装置、存储介质及电子设备
CN114827188B (zh) * 2022-03-04 2024-04-16 苏州智能交通信息科技股份有限公司 一种站台设备管理方法、系统、终端及存储介质
CN115086387B (zh) * 2022-05-24 2024-01-26 福瑞泰克智能系统有限公司 域控制器的控制方法和装置、存储介质及电子装置
CN115002207B (zh) * 2022-05-27 2024-02-23 三一智矿科技有限公司 信息通信方法及系统
CN116896576B (zh) * 2023-09-07 2023-12-26 天津晨星衡祥科技有限公司 一种智能教学方法、系统、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109962836A (zh) * 2017-12-25 2019-07-02 深圳市优必选科技有限公司 一种机器人控制方法、服务器及机器人
CN110708222A (zh) * 2019-10-14 2020-01-17 珠海格力电器股份有限公司 控制方法、装置、网关及存储介质
CN111143061A (zh) * 2019-12-18 2020-05-12 海尔优家智能科技（北京）有限公司 多设备的联动控制方法、装置及存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263776A (zh) * 2010-05-26 2011-11-30 魏星 一种智能家居远程控制系统及智能家居服务器
CN108375924A (zh) * 2018-04-03 2018-08-07 京东方科技集团股份有限公司 一种智能设备的控制方法和装置
CN108683574B (zh) * 2018-04-13 2020-12-08 青岛海信智慧家居系统股份有限公司 一种设备控制方法、服务器和智能家居系统
CN111726383A (zh) * 2019-03-21 2020-09-29 北京京东尚科信息技术有限公司 音箱的控制方法及系统和服务器的控制方法及系统
CN111510425B (zh) * 2020-03-06 2021-09-14 珠海格力电器股份有限公司 智能家居设备的管理方法、装置、设备及存储介质
CN111966058B (zh) * 2020-07-20 2021-06-29 四川虹美智能科技有限公司 智能设备的控制方法、装置和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109962836A (zh) * 2017-12-25 2019-07-02 深圳市优必选科技有限公司 一种机器人控制方法、服务器及机器人
CN110708222A (zh) * 2019-10-14 2020-01-17 珠海格力电器股份有限公司 控制方法、装置、网关及存储介质
CN111143061A (zh) * 2019-12-18 2020-05-12 海尔优家智能科技（北京）有限公司 多设备的联动控制方法、装置及存储介质

Also Published As

Publication number Publication date
CN112492023A (zh) 2021-03-12

Similar Documents

Publication Publication Date Title
CN112492023B (zh) 设备控制方法、装置、存储介质及电子装置
CN112466303B (zh) 设备发现方法、装置、存储介质及电子装置
CN112463831A (zh) 设备状态查询方法、装置、存储介质及电子装置
CN102790781B (zh) 一种中间件、带行业应用中间件的m2m系统及其应用方法
CN102297493A (zh) 监控空调机组的系统和方法
US20050286435A1 (en) Remote management system
US10495336B2 (en) Energy operations across domains
CN114567620A (zh) 一种基于mqtt协议的数字模型与物理设备匹配的系统及方法
US20160300483A1 (en) Device Control Method, Server, System and Computer Storage Medium
WO2017143743A1 (zh) 一种异构协议互通方法及控制器
CN111159019A (zh) 一种应用程序的测试方法、测试控制终端以及测试终端
CN114172929A (zh) 通信方法、装置以及网关
CN112423322A (zh) 型号信息发送方法、装置、存储介质及电子装置
CN111405059A (zh) 云端设备的数据传输方法、电子设备及物联网系统
CN114114933A (zh) 物联网设备的控制方法、装置、设备及存储介质
CN109286861A (zh) 智能设备的信息查询方法、装置及其设备
CN104270431A (zh) 一种并发控制的方法及装置
US20220052902A1 (en) Method for managing remote device through management device
US11804986B2 (en) Method for the remote management of a device connected to a residential gateway
CN113992466A (zh) 家居设备消息推送方法、装置、设备及介质
CN109688204B (zh) 基于ndn网络的文件下载方法、节点、终端
CN111478941A (zh) Mock自动化运行方法、装置、计算机设备及存储介质
CN110971461B (zh) 一种基于物联网的传感器节点配置方法及系统
CN114205098B (zh) 查询操作权限的方法、装置、设备及计算机可读存储介质
WO2022001830A1 (zh) 一种配置方法、终端、服务端、配置系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant