CN109491263B - 智能家居设备控制方法、装置、系统及存储介质 - Google Patents

Abstract

本申请公开了一种智能家居设备控制方法、装置、系统及存储介质。所述方法包括：服务器接收终端发送的位置信息，所述位置信息为目标家居在终端所显示图片中的位置坐标；所述服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；若已关联，所述服务器发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；所述服务器接收所述终端通过智能家居设备控制界面发送的控制指令；所述服务器将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。通过此种方法通过图片界面直接进入对应智能家居设备的控制界面，简化了用户的操作，提高了体验感。

Description

智能家居设备控制方法、装置、系统及存储介质

技术领域

本申请涉及物联网领域，更具体地，涉及一种智能家居设备控制的方法、装置、系统及存储介质。

背景技术

随着物联网技术的不断发展，物联网概念逐渐渗透到家居设计中，形成智能家居技术。智能家居的核心在于用户与智能家居硬件之间的交互，在智能家居的控制中，不仅仅局限于本地控制，也有越来越多的远程控制方法。家居与智能家居设备相关联，智能家居设备与网关设备相连接，网关设备通过路由器与服务器相连接，终端与路由器及服务器相连接，形成智能家居系统。一个完整的智能家居系统中往往包含多个功能相同的智能家居设备，例如多个墙壁开关、多个空调伴侣、多个智能插座，这多个相同智能家居设备在终端显示的名字不同，对应控制的家居也不相同，用户可以通过不同的名称标识进入控制界面，但同一个房间内的多个相同智能家居设备具体控制的对应家居或者在房间环境的位置不同，用户往往无法正确判断该智能家居设备对应的房间位置及对应的家居。

发明内容

鉴于上述问题，本申请提出了一种智能家居设备控制的方法、装置、系统及存储介质，能够更加简洁直观的控制设备，使用户在智能家居控制设备时获得更好的体验。

第一方面，本申请实施例提供了一种智能家居设备控制方法，应用于服务器，该方法包括：服务器接收终端发送的位置信息，所述位置信息为目标家居在终端所显示图片中的位置坐标；服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；若已关联，服务器发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；服务器接收所述终端通过智能家居设备控制界面发送的控制指令；服务器将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。

第二方面，本申请实施例提供了一种智能家居设备控制方法，应用于网关，该方法包括：网关发送获取的图像采集模块采集的图片给服务器；网关接收服务器发送的控制指令；网关发送所述控制指令给智能家居设备，指示所述智能家居设备控制与智能家居设备相关联的目标家居。

第三方面，本申请实施例提供了一种智能家居设备控制方法，该方法包括：终端发送所述目标家居的位置信息给服务器，所述位置信息为所述目标家居在终端所显示图片中的位置坐标；服务器根据所述位置信息判断所述位置信息知否关联目标家居设备，所述智能家居设备与目标家居相关联；若已关联，所述服务器控制所述终端进入对应的智能家居设备界面；终端通过所述智能设备控制界面发送控制指令给服务器；服务器接收所述终端发送的控制指令并发送所述控制指令给所述网关；网关发送所述控制指令给与目标家居相关联的智能家居设备，控制所述目标家居。

第四方面，本申请实施例提供了一种智能家居设备控制装置，运行于服务器，该装置包括：数据接收模块，用于接收终端发送的位置信息，所述位置信息为目标设备在终端所显示图片中的位置坐标；处理模块，用于根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；数据发送模块，用于发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；数据接收模块还用于，接收所述终端通过智能家居控制界面发送控制指令；数据发送模块，还用于发送所述控制指令给网关，指示网关根据所述控制指令控制所述智能家居设备。

第五方面，本申请实施例提供了一种智能家居设备控制系统，所述设备控制系统包括网关，服务器及终端：所述终端用于发送所述目标家居的位置信息给服务器，所述位置信息为目标家居在终端所显示图片中的位置坐标；所述服务器用于根据所述位置信息判断所述位置信息是否关联目标家居设备；所述服务器还用于发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；所述终端还用于通过智能家居设备控制界面发送控制指令给服务器；所述服务器还用于发送所述控制指令给网关；所述网关用于发送所述控制指令给与目标家居对应的智能家居设备。

第六方面，本申请实施例提供了一种服务器，所述服务器包括存储器、一个或多个处理器，所述一个或多个处理器在执行程序数据时执行上述的方法。

第七方面，本申请实施列提供一种计算机可读存储介质，所述计算机可读存储介质中存储有程序代码，其中，在所述程序代码运行时执行上述的方法。

相对于现有技术，本申请提供的方案，用户可以使用终端的实时图形界面，通过终端向服务器发送目标家居在图片中的位置信息；服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；若已关联，服务器则发送切换指令给终端，指示终端切换界面至智能家居设备控制界面；服务器则接收终端通过智能家居设备控制界面发送的控制指令，再将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。从而用户可以在图片中控制家居，在图片中将真实的家居场景呈现给用户，使得对家居的控制更加直观且容易被理解，同时，也简化了家居控制的流程，提升了用户的体验。

本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了一种适用于本申请实施例的应用环境示意图。

图2示出了本申请一个实施例提供的智能家居设备控制方法的流程图。

图3示出了本申请另一个实施例提供的智能家居设备控制方法的流程图。

图4示出了图像采集模块在第一视角采集图片的示意图。

图5示出了在终端的文字显示界面的示意图。

图6示出了图像采集模块在第二视角采集图片的示意图。

图7示出了本申请再一个实施例提供的智能家居设备控制方法的流程图。

图8示出了本申请一个实施例提供的智能家居设备控制方法的交互图。

图9示出了在终端显示的图片的示意图。

图10示出了在终端切换至智能家居设备控制界面的示意图。

图11示出了本申请一个实施例提供的设备控制装置的框图。

图12示出了本申请一个实施例提供的设备控制装置的结构框图。

图13示出了本申请实施例提供的用于保存或者携带实现根据本申请实施例的智能家居设备控制方法的程序代码的存储单元。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

物联网是指通过各种信息传感器，实时采集任何需要监控、连接、互动的物体或过程中需要的信息，与互联网结合形成的一个巨大网络。生活常见的物联网应用于物流行业，智能安防以及物联网智能家居。在智能家居中，通过物与物的连接，物与人的连接，实现对智能家居设备的控制。在现有的智能家居控制中，通常通过终端的APP与智能家居设备互连实现控制，例如一个房间内会有多个智能家居控制开关，开关的功能相同，用户无法很好的区分对应开关控制的对应家居，在进行智能家居的控制时，不能直接展示出想要控制的设备，使得使用较为复杂且不够直观，不利于用户在智能家居中的体验。

因此，发明人提出了本申请中可以更为直观、简便的智能家居设备控制方法、装置、系统及存储介质。通过网关获取图像采集装置实时采集的图片，将图片经由服务器发送给终端，用户在终端所显示的图片上通过点击或触摸等方式选择图片中的家居，反馈给服务器一个位置信息，服务器根据位置信息进行判断所述位置信息是否关联智能家居设备，若已关联则发送切换指令给终端，指示终端切换界面至智能家居设备控制界面，再获取终端的控制指令，发送控制指令给网关，通过网关来控制智能家居设备，从而达到对选中的家居进行控制。

在本申请的一些实施例中还采用了图像识别技术，图像识别技术是指对图像进行对象识别，以识别各种不同模式的目标和对象技术。图像识别过程分为图像处理和图像识别两个部分，图像处理的目的是去除干扰、噪声，将原始图像编程适用于计算机进行特征提取的形式，主要包括图像采样、图像增强、图像复原、图像编码与压缩和图像分割；图像识别是将图像处理得到的图像进行特征提取和分类，识别方法有统计法、句法方法、神经网络法、模板匹配法和几何变换法。

为了便于详细说明本申请方案，下面先结合附图对本申请的应用环境进行介绍。

请参阅图1，示出了本申请实施例提出的一种智能家居设备控制方法的应用环境10，该应用环境10包括：服务器95、终端96、智能家居设备97、目标家居98、图像采集模块99及网关100。其中，网关100通过路由器连接到服务器95进行信息的传输，网关100与智能家居设备97的连接可以通过ZigBee或蓝牙连接，在WiFi断开的情况也能保持联动关系，从而通过网关100控制智能家居设备97。目标家居98可以是电视机、空调、智能窗帘、电灯、投影仪等设备。目标家居98与智能家居设备97相关联，通过控制智能家居设备97从而可以控制目标家居98。如果目标家居98是台灯，那么对应的智能家居设备97可以是开关控制器。如果目标家居98为空调，那么对应的智能家居设备97可以是空调伴侣。用户终端通过与网关100、服务器95以及终端96的连接实现在终端96上控制智能家居设备97，从而控制相关联的目标家居98。终端96可以是手机、平板电脑、PC(personal computer)电脑、笔记本电脑、智能电视、车载终端等。目标家居98为图像采集模块99采集范围内的家居，终端96通过网络与服务器95相关联。其中，图像采集模块99和网关100可以是两个不同的装置，也可以集成在同一装置中，网关100和图像采集模块99之间可以互相进行数据的传输。

下面将对本申请实施例进行详细的说明。

请参阅图2，本申请实施例提供了一种智能家居设备控制方法，可应用于服务器，本实施例描述的是服务器侧的步骤流程，该方法可以包括：

步骤S110，所述服务器接收终端发送的位置信息，所述位置信息为目标家居在终端所显示图片中的位置坐标。

在图1所示的系统中，网关获取图像采集模块采集到的图片，将图片通过服务器发送给终端。

其中，所述位置信息是指用户在终端显示的图片中，通过点击、触摸、滑动等交互方式选择了图片中的目标家居，会产生一个目标家居在图片中对应的位置信息。终端可以直接将目标家居在图片中的位置信息发送给服务器，也可以将携带有位置信息的图片发送给服务器。其中，计算位置信息的方法可以包括，但不限于计算出触摸或点击的大致范围，再计算出范围中心的点在图片中的坐标信息，从而计算出目标家居的位置信息。

步骤S120，所述服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联。

在一些具体实施方式中，服务器可以根据所述位置信息，确定与所述位置信息对应的目标家居。服务器在接收到终端返回的位置信息时，根据所述位置信息查询本地是否存储有所述位置信息对应的目标家居，在查询到所述位置信息对应的目标家居时，再根据所述目标家居查询所述目标家居是否连接智能家居设备，若所述目标家居已经连接对应的智能家居设备，则判定该位置信息已经关联智能家居设备。

步骤S130，若已关联，所述服务器发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面。

如果服务器判定该位置信息已经关联智能家居设备，则用户选中的目标家居是可以通过图形界面来控制的，目标家居和智能家居设备已经连接，那么位置信息、目标家居、智能家居设备三者相互关联。通过位置信息和智能家居设备的关联，则可以利用目标家居在图片中的位置信息来控制与目标家居相关联的智能家居设备，从而控制目标家居。那么服务器发送一个切换指令给终端，终端会切换界面至与目标家居对应的智能家居设备的控制界面。

具体的，在一些实施方式中，当服务器发送切换指令给终端，指示终端切换界面至与目标家居对应的智能家居设备的控制界面时，终端切换界面至智能家居设备控制界面，在这个界面上可以显示选择指令，以供用户选择要对智能家居设备进行的操作。该选择指令的显示可以让用户在终端看到智能家居设备的控制操作，从而决定对智能家居设备进行什么控制。

在一些实施方式中，选择指令可以与当前目标家居的状态无关，提供的选择指令为服务器内存储的所有可控操作，用户选中的选择指令不一定会改变目标设备的当前状态。

在另一些实施方式中，服务器发送给终端的选择指令可以是服务器根据图片分析出目标家居的当前状态，仅发送可以改变目标家居当前状态的选择指令给终端，用户选择的选择指令都会改变目标家居的当前状态。

步骤S140，所述服务器接收所述终端通过智能家居设备控制界面发送的控制指令。

在终端切换界面至智能家居设备控制界面时，当用户在这个界面选择了某一个选择指令后，终端会返回一个与选择指令对应的控制指令给服务器。作为一种具体的实施方式，服务器可以在发送切换指令的同时将选择指令发送到智能家居设备控制界面进行显示，终端在进行了选择指令的选择后，再返回一个与选择指令对应的控制指令给服务器。

当服务器判定所述位置信息没有关联智能家居设备时，则不响应，也就是不向终端发送切换指令。

步骤S150，所述服务器将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。

其中，服务器在接收到终端返回的与选择指令对应的控制指令时，服务器将所述控制指令发送给网关，指示网关根据控制指令发送给对应的智能家居设备，从而控制与智能家居设备连接的智能家居。

本申请提出的智能家居设备控制方法，通过在终端对图片中目标家居的点击，选择要控制的目标家居，反馈给服务器目标家居在图片中的位置信息，服务器通过该位置信息查询本地存储的信息确定该位置信息是否有与目标家居相关联的智能家居设备，若有，则判定该位置信息已关联智能家居设备，将切换指令发送给终端，指示终端切换界面至智能家居设备控制界面，服务器接收终端通过所述智能家居控制界面发送的控制指令，再发送控制指令给网关，指示网关控制智能家居设备。从而实现了用户在终端的实时图片上直接进入目标家居对应的智能家居设备控制界面，操作方式简单易懂，简化了用户的操作，提高了用户控制设备时的体验感。

请参阅图3，本申请另一实施例提供了一种智能家居设备控制方法，可应用于服务器，本实施例描述的是在前一实施例之前服务器侧的步骤流程，该方法可以包括：

步骤S210，所述服务器接收并存储网关发送的背景图片。

其中，服务器接收到的背景图片为网关获取的图像采集模块在第一视角采集的环境图片，请参阅图4，示出了图像采集模块在第一视角采集的背景图片，服务器将所述背景图片存储在服务器内，在需要比对图片时调用。假设在某个时间，图像采集模块以第一视角进行放置，那么图像采集模块在这个时间采集的背景图片即为图像采集模块在第一视角采集的背景图片。

步骤S220，所述服务器发送控制指令给网关，指示网关控制智能家居设备。

其中，服务器在接收到终端发送的位置信息之前，终端上会显示一个操作界面，可选的，操作界面可以是一个文字操作界面，请参阅图5，示出了终端显示的文字操作界面的示意图，例如与吊灯相关联的开关为开关控制器，用户想要打开吊灯，则在终端点击开关控制器，那么服务器则将控制指令发送给网关，网关再将控制指令发送给开关控制器，由开关控制器执行控制指令控制吊灯打开。

步骤S230，所述服务器接收并存储所述网关发送的变化图片。

网关在接收到服务器发送的控制指令控制智能家居设备后，图像采集模块采集图片，即变化图片。所述变化图片为图像采集模块在第一视角采集到的所述智能家居设备被执行所述动作指令后的环境图片，也就是，图像采集模块在采集背景图片与变化图片时，采集图像的视角是没有改变的，仍然采用图4所示出的采集视角来采集第一变化图片。

步骤S240，所述服务器比对所述背景图片和所述变化图片，识别出图片中发生变化的目标家居及目标家居在图片中的位置信息。

所述服务器接收到变化图片时，调取接收到的背景图片，通过图像识别技术比对背景图片和变化图片中发生了变化的目标家居。此处的变化是指目标家居的状态发生的变化，例如窗帘由原来的关闭到开启或者由原来的开启到关闭，电视机的关闭到开启或者开启到关闭，灯的关闭到打开或者打开到关闭。

服务器通过图像识别技术识别出发生变化的目标家居的同时，也能识别出该目标家居在当前图片中的位置信息，服务器对识别出的位置信息进行对应存储，以便于在接收到终端发送的位置信息时通过该位置信息判读是否关联智能家居设备。

步骤S250，所述服务器关联并存储所述位置信息、所述目标家居以及所述智能家居设备。

服务器识别出发生变化的目标家居后，将目标家居、目标家居在图片中的位置信息以及与目标家居连接的智能家居设备对应存储起来。其中，若是图像采集模块发生了移动或采集视角发生变动时，以第二视角采集图片时，图像采集模块会重新采集第二变化图片给服务器，请参阅图6，示出了图像采集模块在发生移动或采集视角变动时以第二视角采集第二变化图片的示意图。

服务器在接收到第二变化图片时，可以依据图像识别技术自动识别出第二变化图片中已经关联的家居，由于图像采集模块发生了移动，家居在图片中对应的位置信息也发生了改变，服务器内部所关联家居的位置信息可能不准确，服务器将该家居的位置信息进行更新，确保了服务器根据位置信息确定的目标家与用户想要控制的目标家居一致。

本申请提供的智能家居设备控制方法，用户通过终端的图片对目标家居进行控制前，服务器内关联位置信息、目标家居以及智能家居设备提供了直接通过图片控制家居的交互能力。当图像采集模块发生移动或采集视角发生变化时，会先对图片进行识别，更新本地存储的家居的位置信息，避免了图像采集模块的移动或采集图像视角的变动，造成家居控制错误，使得在控制家居时更加直观准确同时也简便了用户控制家居的操作。

请参阅图7，本申请另一实施例提供了一种智能家居设备控制方法，可应用于网关，本实施例描述的是网关侧的步骤流程，该方法可以包括：

步骤S310，所述网关发送获取的图像采集模块采集的图片给服务器。

其中，网关发送给服务器的图片为图像采集模块采集的。在一种实施方式中，图像采集模块设置在网关上，那么图像采集模块采集到的图片就在网关内，网关再将图片发送给服务器。在另一种实施方式中，网关和图像采集模块可以是两个不同的设备，图像采集模块采集到图片后，将采集到的图片发送给网关，网关在接收到图片后再将图片发送给服务器。

步骤S320，所述网关接收服务器发送的控制指令。

其中，控制指令是用户在终端通过智能家居设备控制界面发送的，经由服务器将控制指令发送给网关，网关再接收由服务器发送的控制指令。

步骤S330，所述网关发送所述控制指令给智能家居设备，指示所述智能家居设备执行对应的动作。

网关接收到服务器发送的控制指令后，将所述控制指令发送给对应的智能家居设备，智能家居设备根据控制指令执行对应的动作，从而通过控制智能家居设备控制了与智能家居设备相关联的目标家居。

本申请提供的智能家居设备控制方法，通过网关获取图像采集模块实时采集图片，提供了图像识别的基础，也给用户提供了一种更为直观的设备控制方式，简化了控制的操作方式，增强了用户的远程控制的体验。

请参阅图8，本申请再一实施例提供了一种智能家居设备控制方法，可应用于网关、服务器和终端，本实施例描述的是网关、服务器、终端的交互流程，该方法可以包括：

步骤S410，终端发送位置信息给服务器。

步骤S420，服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联。

步骤S430，若已关联，所述服务器发送切换指令给终端，终端切换界面至智能家居设备控制界面。

步骤S440，终端通过智能家居设备控制界面发送控制指令给服务器。

步骤S450，服务器发送所述控制指令给网关。

步骤S460，网关发送所述控制指令给智能家居设备，指示所述智能家居设备执行对应的动作。

步骤S410至步骤S460可以参照前述实施例对应的部分，这里不再赘述。

下面将以一个具体的实例来说明此交互流程。

假设在一个智能家居的环境中，如图9所示，图像采集模块的采集范围为一个客厅，客厅中有电视、空调、窗帘、吊灯、台灯等设备在图像采集模块的采集范围内，这些设备都可以作为目标家居。而墙壁开关、空调伴侣、智能插座为与目标家居相关联的智能家居设备。智能家居设备不在图像采集模块采集的范围内。我们将吊灯作为目标家居，与吊灯相关联的开关控制器为与目标家居吊灯相关联的智能家居设备。

网关获取图像采集模块采集的背景图片发送给服务器，服务器记录该背景图片的信息。当用户通过终端的文字界面控制吊灯时，请参阅图5，那么用户点击终端文字界面中的开关控制器，服务器则发送打开吊灯的指令给网关，网关将打开吊灯的指令发送给与吊灯相关联的开关控制器，控制吊灯打开。此时吊灯的状态由关闭变成开启，网关获取图像采集模块在这个时候采集的变化图片，将变化图片发送给服务器，服务器调出背景图片，与变化图片进行比对，识别出图片中的吊灯发生了由关闭到开启的变化，将吊灯在该图片中的位置信息和吊灯，以及与吊灯相连接的开关控制器对应存储起来。

用户通过终端登录APP，通过APP与网关相连接，网关将获取的图像采集模块采集的图片经由服务器发送给终端，例如图像采集模块采集的图片和图9一样，用户在终端上查看客厅的图片，点击了图片中的吊灯，终端将吊灯对应的在图片中的位置信息发送给服务器，服务器接收到位置信息，根据这个位置信息确定与位置信息对应的目标家居为吊灯，且该吊灯与开关控制器相关联。判定该位置信息已经关联了智能家居设备为开关控制器。

在一种实施方式中，服务器判定位置信息已经关联对应的开关控制器时，可以发送一个切换指令给终端，控制终端切换界面至开关控制器的控制界面，请参阅图10，示出了终端切换界面至智能家居设备控制界面的示意图，在这个界面上可以显示选择指令“打开”和“关闭”等，用户点击“打开”，服务器则将“打开”的控制指令发送给网关，网关将“打开”的指令发送给开关控制器，从而打开吊灯。

其中，若图像采集模块发生了移动，导致网关发给终端的图片的拍摄视角与服务器存储的不一致，从而导致吊灯在图片中的位置发了变化。网关可以获取图像采集模块采集的第二变化图片发送给服务器，所述第二变化图片为网关获取的图像采集装置在第二视角采集的图片。服务器会自动识别出已经关联过的家居吊灯及吊灯在该图片中的位置信息，对存储的吊灯的位置信息进行一次更新。避免了因为图像采集模块的移动或采集视角的变化而导致位置信息对应的目标设备与服务器存储的不一致，出现设备控制错误。通过上述方式，不仅直观的展示了设备所处的真实环境，简化了用户的操作过程，也提高了设备控制的准确性。

请参阅图11，其示出了本申请实施例提供的一种设备控制装置500，运行于服务器，所述装置500包括数据接收模块510、处理模块520及数据发送模块530。

数据接收模块510，用于接收终端发送的位置信息，所述位置信息为目标设备在终端所显示图片中的位置坐标；

处理模块520，用于根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；

数据发送模块530，用于发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面。

所述数据接收模块510还用于，接收所述终端通过智能家居设备控制界面发送控制指令；

数据发送模块530，还用于发送所述控制指令给网关，指示网关根据所述控制指令控制所述智能家居设备。

具体的，所述处理模块520用于根据所述位置信息，确定与所述位置信息对应的目标家居，再根据所述目标设备查询是否有与所述目标家居相关联的智能家居设备；若本地存储有与所述目标家居相关联的智能家居设备，所述处理模块520则判定所述位置信息已关联智能家居设备。

进一步的，数据接收模块510接收终端发送的位置信息之前，数据接收模块510还用于接收所述网关发送的背景图片，所述背景图片为所述网关获取的所述图像采集模块在第一视角采集的环境图片。所述数据接收模块510接收终端发送的控制指令，所述数据接收模块510接收所述网关发送的变化图片，所述变化图片为所述网关获取的图像采集模块在第一视角采集到的所述智能家居设备执行所述控制指令后的环境图片。所述处理模块520用于比对背景图片和变化图片，识别出图片中有变化的目标家居及所述目标家居在图片中的位置信息；所述处理模块520还用于关联并存储所述目标家居、所述位置信息以及所述智能家居设备。

需要说明的是，所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

综上所述，本申请提供的智能家居设备控制的方法、装置、系统及存储介质，通过用户在终端上对图像的点击，选择要控制的目标家居，反馈给服务器目标家居在图片中的位置信息，服务器通过该位置信息查询本地存储的信息确定该位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联，若已经关联智能家居设备，服务器则发送切换指令给终端，指示终端切换界面至智能家居设备控制界面；服务器则接收终端通过智能家居设备控制界面发送的控制指令，再将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。从而实现了用户在终端显示的图片上控制家居，将家居的真实场景通过图片的方式呈现在用户眼前，更加的直观且操作方式简单易懂，提高了用户控制家居的体验感。

在本申请所提供的几个实施例中，所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。

另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

请参考图12，其示出了本申请实施例提供的一种网关的结构框图。本申请中的网关100可以包括一个或多个如下部件：处理器101、存储器102、以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器102中并被配置为由一个或多个处理器101执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。

处理器101可以包括一个或者多个处理核。处理器101利用各种接口和线路连接整个网关100内的各个部分，通过运行或执行存储在存储器102内的指令、程序、代码集或指令集，以及调用存储在存储器102内的数据，执行网关100的各种功能和处理数据。可选地，处理器101可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器101可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器101中，单独通过一块通信芯片进行实现。

存储器102可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器102可用于存储指令、程序、代码、代码集或指令集。存储器102可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储网关100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

其中，网关100还可以包括图像采集模块，所述图像采集模块可以包括感光耦合组件(Charge-Coupled Device，CCD)传感器或者互补性氧化金属半导体(ComplementaryMetal-Oxide Semiconductor，CMOS)传感器、处理器、通信模块等。传感器用于感受和记录外界光线的信息，并将其转换成电流，同时转换为数字信息，通信单元用于连接其他模块进行数据传输。

请参考图13，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读存储介质600中存储有程序代码，所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质600可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质600包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质600具有执行上述方法中的任何方法步骤的程序代码610的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码610可以例如以适当形式进行压缩。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (12)

1.一种智能家居设备控制方法，其特征在于，应用于服务器，所述方法包括：

所述服务器接收终端发送的位置信息，所述位置信息为目标家居在终端所显示图片中的位置坐标；

所述服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；

若已关联，所述服务器发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；

所述服务器发送选择指令给所述终端，指示所述终端在所述控制界面显示所述选择指令，其中，所述选择指令为所述服务器根据所述目标家居在所述终端所显示的图片中的当前状态确定，所述选择指令用于改变所述目标家居的当前状态；

所述服务器接收所述终端通过智能家居设备控制界面发送的控制指令；

所述服务器将所述控制指令发送给网关，指示网关根据所述控制指令控制所述智能家居设备。

2.如权利要求1所述的方法，其特征在于，所述服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，包括：

所述服务器根据所述位置信息，确定与所述位置信息对应的目标家居；

所述服务器查询本地是否存储有与所述目标家居相关联的智能家居设备；

若所述服务器本地存储有与所述目标家居相关联的智能家居设备，所述服务器则判定所述位置信息已关联智能家居设备。

3.如权利要求1所述的方法，其特征在于，所述服务器接收终端发送的位置信息之前，还包括：

所述服务器接收网关发送的背景图片，所述背景图片为所述网关获取的图像采集模块在第一视角采集的环境图片；

所述服务器预先关联所述位置信息、所述目标家居以及所述智能家居设备。

4.如权利要求3所述的方法，其特征在于，所述服务器预先关联所述位置信息、所述目标家居以及所述智能家居设备，包括：

所述服务器接收并存储所述网关发送的所述背景图片；

所述服务器接收所述终端通过所述智能家居设备控制界面发送的控制指令，并将所述控制指令发送给网关，指示网关控制智能家居设备；

所述服务器接收并存储所述网关发送的变化图片，所述变化图片为所述网关获取的图像采集模块在第一视角采集到的所述智能家居设备执行所述控制指令后的环境图片；

所述服务器比对背景图片和变化图片，识别出图片中发生变化的目标家居及目标家居在图片中的位置信息；

所述服务器关联存储所述位置信息、所述目标家居以及所述智能家居设备。

5.一种智能家居设备控制方法，其特征在于，应用于网关，所述方法包括：

所述网关发送获取的图像采集模块采集的图片给服务器；

所述网关接收服务器发送的控制指令，并接收所述服务器发送的选择指令；

所述网关发送所述控制指令给智能家居设备，指示所述智能家居设备执行对应的动作；

所述网关发送所述选择指令给所述智能家居设备，指示所述智能家居设备改变当前状态，其中，所述选择指令由所述服务器根据所述智能家居设备在终端所显示的图片中的当前状态确定。

6.如权利要求5所述的方法，其特征在于，所述网关发送获取的图像采集模块采集的图片给服务器，包括：

所述网关将背景图片发送给服务器，所述背景图片为所述网关获取的图像采集模块在第一视角采集的环境图片；

所述网关将变化图片发送给服务器，所述变化图片为所述网关获取的图像采集模块在第一视角采集到的所述智能家居设备执行所述控制指令后的环境图片。

7.一种智能家居设备控制方法，其特征在于，所述方法包括：

终端发送目标家居的位置信息给服务器，所述位置信息为所述目标家居在终端所显示图片中的位置坐标；

所述服务器根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；

若已关联，所述服务器发送切换指令给终端，所述终端根据所述切换指令切换界面至智能家居设备控制界面；

所述服务器发送选择指令给所述终端，指示所述终端在所述控制界面显示所述选择指令，其中，所述选择指令为所述服务器根据所述目标家居在所述终端所显示的图片中的当前状态确定，所述选择指令用于改变所述目标家居的当前状态；

所述服务器接收所述终端通过智能家居设备控制界面发送的控制指令，并发送所述控制指令给网关；

所述网关发送所述控制指令给智能家居设备，指示所述智能家居设备执行对应的动作。

8.一种智能家居设备控制装置，应用于服务器，其特征在于，包括：

数据接收模块，用于接收终端发送的位置信息，所述位置信息为目标设备在终端所显示图片中的位置坐标；

处理模块，用于根据所述位置信息判断所述位置信息是否关联智能家居设备，所述智能家居设备与目标家居相关联；

数据发送模块，用于发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；

数据发送模块，还用于发送选择指令给所述终端，指示所述终端在所述控制界面显示所述选择指令，其中，所述选择指令为所述服务器根据所述目标家居在所述终端所显示的图片中的当前状态确定，所述选择指令用于改变所述目标家居的当前状态；

数据接收模块还用于，接收所述终端通过智能家居设备控制界面发送控制指令；

数据发送模块，还用于发送所述控制指令给网关，指示网关根据所述控制指令控制所述智能家居设备。

9.一种智能家居设备控制系统，其特征在于，包括服务器，网关，及终端：

所述终端用于发送目标家居的位置信息给服务器，所述位置信息为目标家居在终端所显示图片中的位置坐标；

所述服务器用于根据所述位置信息判断所述位置信息是否关联目标家居设备，所述智能家居设备与目标家居相关联；

所述服务器还用于发送切换指令给终端，指示所述终端切换界面至智能家居设备控制界面；

所述服务器还用于发送选择指令给所述终端，指示所述终端在所述控制界面显示所述选择指令，其中，所述选择指令为所述服务器根据所述目标家居在所述终端所显示的图片中的当前状态确定，所述选择指令用于改变所述目标家居的当前状态；

所述终端还用于通过智能家居设备控制界面发送控制指令给服务器；

所述服务器还用于发送所述控制指令给网关；

所述网关用于发送所述控制指令给智能家居设备，指示所述智能家居设备执行对应的动作。

10.如权利要求9所述的系统，其特征在于，

所述网关包括用于采集图像的图像采集模块；或者

所述系统还包括图像采集模块，所述图像采集模块用于采集图像并将采集的图像发送给所述网关。

11.一种服务器，其特征在于，

所述服务器包括存储器、一个或多个处理器，所述一个或多个处理器在执行程序数据时执行如权利要求1至4任一项所述的方法。

12.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1至4任一项所述的方法。

Images