CN109581886B - 设备控制方法、装置、系统及存储介质 - Google Patents

Abstract

本申请公开了一种设备控制方法、装置、系统及存储介质。所述方法包括：终端响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，所述位置信息为所述目标设备在终端所显示图片中的位置坐标；所述服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若可控，所述服务器接收终端发送的控制指令，并发送与所述控制指令对应的控制码信息给摄像装置；所述摄像装置发送所述控制码信息控制所述目标设备执行动作。通过此种方法，提供一种直观友好的设备控制方法，能在真实场景的图片中控制设备，在设备控制时给用户带来更好体验。

Description

设备控制方法、装置、系统及存储介质

技术领域

本申请涉及物联网领域，更具体地，涉及一种设备控制的方法、装置、系统及存储介质。

背景技术

随着科学技术的发展，对设备的控制不仅仅局限于本地控制，也有越来越多的远程控制方法。一般的设备控制中需要通过设备名称、专用设备、多标签、多级目录进行管理和查找，实现设备控制的步骤繁琐、缓慢、使用复杂，导致实现设备控制的效率低下，且设备信息及控制指令的展示方式不够直观、简便，使得在设备控制时容易出错，导致设备控制准确性不高，用户体验不佳。

发明内容

鉴于上述问题，本申请提出了一种设备控制的方法、装置、系统及存储介质，能够更加简洁直观的控制设备，使用户在远程控制设备时获得更好的体验。

第一方面，本申请实施例提供了一种设备控制方法，该方法包括：终端响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，所述位置信息为所述目标设备在终端所显示图片中的位置；服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若可控，服务器接收终端发送的控制指令，并发送与所述控制指令对应的控制码信息给摄像装置；摄像装置发送所述控制码信息控制所述目标设备执行动作。

第二方面，本申请实施例提供了一种设备控制方法，应用于服务器，该方法包括：服务器接收终端发送的位置信息，所述位置信息为所述目标设备在终端所显示图片中的位置坐标；服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若可控，服务器则接收终端发送的控制指令；服务器发送与所述控制指令对应的控制码信息给摄像装置，指示所述摄像装置根据所述控制码信息控制所述目标设备执行动作。

第三方面，本申请实施例提供了一种设备控制方法，应用于摄像装置，该方法包括：摄像装置接收来自外部的控制码信息；发送所述控制码信息给对应目标设备，以控制所述目标设备执行动作；摄像装置在发送所述控制码信息给对应目标设备前，还基于第一视角采集第一变化图片，发送所述控制码信息和所述第一变化图片给服务器。

第四方面，本申请实施例提供了一种摄像装置，该装置包括：控制码接收模块用于接收来自外部控制码发射装置的控制码信息；内部处理模块用于将所述控制码信息发送给所述控制码发射模块；控制码发射模块用于发送所述控制码信息给对应目标设备，控制所述目标设备执行动作；所述摄像装置在发送所述控制码信息后，基于第一视角采集第一变化图片，并发送所述控制码信息和所述第一变化图片给服务器。

第五方面，本申请实施例提供了一种设备控制系统，所述设备控制系统包括摄像装置，服务器及终端；所述终端用于响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器；所述服务器用于根据所述位置信息判断与所述位置信息对应的目标设备是否可控；所述服务器还用于接收终端发送的控制指令，并发送与所述控制指令对应的控制码信息给摄像装置；所述摄像装置用于发送所述控制码信息控制所述目标设备执行动作。

第六方面，本申请实施列提供一种计算机可读存储介质，所述计算机可读存储介质中存储有程序代码，其中，在所述程序代码运行时执行上述的方法。

相对于现有技术，本申请提供的方案，用户可以使用终端，通过终端向服务器发送设备在图片中的位置信息；服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控，可控则接收终端发送的控制指令；服务器将与所述控制指令对应的控制码信息发送给摄像装置，指示所述摄像装置控制目标设备。从而用户可以在监控视频中通过图片控制设备，简化了设备控制的流程，提高了设备控制效率，同时，在图片中将真实的设备场景予以呈现，使得设备控制更加简单容易被理解，设备控制准确度更高，进而提升了用户的体验。

本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了一种适用于本申请实施例的应用环境示意图。

图2示出了本申请一个实施例提供的设备控制方法的时序图。

图3示出了图2所示实施例中终端所显示的一个界面的界面示意图。

图4示出了图2所示实施例中终端所显示的包括选择指令的界面示意图。

图5示出了图2所示实施例中终端所显示的设备控制界面的界面示意图。

图6示出了本申请另一个实施例提供的设备控制方法的流程图。

图7示出了本申请又一个实施例提供的设备控制方法的流程图。

图8示出了摄像装置在第一视角采集图片的示意图。

图9示出了摄像装置在第二视角采集图片的示意图。

图10示出了本申请再一个实施例提供的设备控制方法的流程图。

图11示出了本申请一个实施例提供的设备控制装置的结构框图。

图12示出了本申请一个实施例提供的摄像装置的结构框图。

图13示出了本申请实施例提供的用于保存或者携带实现根据本申请实施例的设备控制方法的程序代码的存储单元。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

物联网是指通过各种信息传感器，实时采集任何需要监控、连接、互动的物体或过程等个中需要的信息，与互联网结合形成的一个巨大网络。生活常见的物联网应用于物流行业，智能安防以及物联网智能家居。在智能家居中，通过物与物的连接，物与人的连接，实现对智能家居设备的控制。在对设备进行控制时，一般需要通过设备名称、专用设备、多标签、多级目录进行管理和查找。步骤繁琐、缓慢、使用复杂且不够直观。

因此，发明人提出了本申请中可以更为直观、简便的设备控制方法、装置、系统及存储介质。通过摄像装置实时采集图片，将图片发送给终端，用户在终端所显示的图片上通过点击或触摸等方式选择图片中的设备，反馈给服务器一个位置信息，服务器根据位置信息进行判断与该位置信息对应的目标设备是否可控，可控则获取终端的控制指令，发送控制指令给摄像装置，通过摄像装置来控制目标设备，从而达到对选中的设备进行控制。

在本申请的一些实施例中还采用了图像识别技术，图像识别技术是指对图像进行对象识别，以识别各种不同模式的目标和对象技术。图像识别过程分为图像处理和图像识别两个部分，图像处理的目的是去除干扰、噪声，将原始图像编程适用于计算机进行特征提取的形式，主要包括图像采样、图像增强、图像复原、图像编码与压缩和图像分割；图像识别是将图像处理得到的图像进行特征提取和分类，识别方法有统计法、句法方法、神经网络法、模板匹配法和几何变换法。

为了便于详细说明本申请方案，下面先结合附图对本申请的应用坏境进行介绍。

请参阅图1，示出了本申请实施例提出的一种设备控制方法的应用环境10，该应用环境10包括：服务器96、终端97、其他设备98、目标设备99及摄像装置100。其中，摄像装置100连接到服务器96进行信息的传输，摄像装置100与目标设备99和其他设备98有能够进行通讯控制的兼容的物理接口和数据格式，从而通过摄像装置100控制目标设备99。目标设备99和其他设备98可以是电视机、空调、智能窗帘、电灯、投影仪等设备。其中，目标设备99指的是用户想要进行控制的设备。终端97可以是手机、平板电脑、PC(personal computer)电脑、笔记本电脑、智能穿戴设备、智能电视、车载终端等。摄像装置13通过路由器与服务器96相连，目标设备99和其他设备98为在摄像装置100的拍摄范围内的设备，终端97通过网络与服务器96和摄像装置100相连。

下面将对本申请实施例进行详细的说明。

请参阅图2，本申请一实施例提供了一种设备控制方法，可应用于摄像装置、服务器和终端，本实施例描述的是摄像装置、服务器、终端的交互流程，该方法可以包括：

步骤S110，终端发送位置信息给服务器。

其中，终端响应于用户的触发操作，触发操作可以是滑动，点击或触摸等方式。所述位置信息是指用户在终端显示的图片中，通过点击、触摸、滑动等交互方式选择了图片中的目标设备，该目标设备在图片中对应的位置信息。终端可以直接将目标设备在图片中的位置信息发送给服务器，也可以将携带有位置信息的图片发送给服务器。其中，计算位置信息的方法可以包括，但不限于计算出触摸或点击的大致范围，再计算出范围中心的点在图片中的坐标信息，从而计算出目标设备的位置信息。

其中，终端所显示的图片可以是用户在终端打开对应的APP时触发拍摄指令，由终端将拍摄指令发送给摄像装置，指示摄像装置获取图片并发送给终端，也可以是摄像装置将实时拍摄的图片发送给终端，用户在图片上进行触发操作。终端所显示的图片可以是一张静态图片，也可以是视频图像中某一帧图片。

步骤S120，服务器根据所述位置信息判断目标设备是否可控。

服务器根据所述位置信息，确定与所述位置信息对应的目标设备。服务器在接收到终端返回的位置信息时，根据所述位置信息查询本地是否存储有所述位置信息的关联设备，若存储有关联设备，从而确定所述位置信息对应的目标设备。

步骤S130，若可控，所述服务器接收终端发送的控制指令并发送与所述控制指令对应的控制码信息给摄像装置。

所述服务器若判定所述目标设备是可控的，所述服务器则获取终端发送的控制指令，在一种实施方式中，当服务器判断设备可控时，可以向终端发送选择指令，以供用户选择。该选择指令的显示可以让用户在终端看到可以对目标设备进行的控制操作，从而决定对目标设备进行什么控制。

在另一些实施方式中，服务器发送给终端的选择指令可以是服务器根据图片分析出目标设备的当前状态，仅发送可以改变目标设备当前状态的选择指令给终端，用户选择的选择指令都会改变目标设备的当前状态。

当用户选择了某一个选择指令后，终端会返回一个与选择指令对应的控制指令给服务器。作为一种具体的实施方式，服务器可以将选择指令发送到终端在原有图片上进行选择指令的叠加显示，也可以转入一个设备的控制的界面，再将选择指令在该设备的控制界面进行显示。终端在进行了选择指令的选择后，会返回一个与选择指令对应的控制指令给服务器。

服务器在接收到这个控制指令时，将服务器内部与该控制指令对应的控制码信息发送给摄像装置。

步骤S140，所述摄像装置发送所述控制码信息控制设备。

摄像装置接收服务器发送的控制码信息时，再将该控制码信息发送给设备，从而控制设备执行目标动作。

下面将以一个具体的实例来说明此交互流程。

假设在一个智能家居的环境中，如图3所示，摄像装置的监控范围为一个客厅，客厅中有电视、空调、窗帘、电灯等设备在摄像的范围内，我们将电视作为目标设备，空调、窗帘和电灯等设备作为其他设备。摄像装置拍摄背景图片发送给服务器；服务器记录该背景图片信息，当用户在客厅中使用遥控器打开电视时，摄像装置接收到红外码指令，记录该红外码指令并拍摄第一变化图片，摄像装置将红外码指令和第一变化图片一起发送给服务器。

服务器将接收到的背景图片和第一变化图片比对，识别出图片中的电视发生了由关闭到开启的变化，将电视在该图片中的位置信息和电视，以及接收到的红外码指令关联存储在本地。

用户通过终端登录APP，通过APP与摄像装置相连接，在用户打开APP时，终端可以发送一个拍摄指令给摄像装置，摄像装置将拍摄的图片发送给终端，例如摄像装置拍摄的图片和图3一样，用户在终端上查看客厅的图片，点击了图片中的电视，终端将电视对应的在图片中的位置信息发送给服务器，服务器接收到位置信息，判断出该位置信息对应的设备为电视，查找到电视对应的红外码指令，判定电视可以被控制。

在一种实施方式中，服务器将选择指令发送到终端原有的图片上进行选择指令的叠加显示，请参考图4，用户点击“打开”，服务器则将“打开”的红外码指令发送给摄像装置，摄像装置再发送该红外码指令，打开电视；并将电视打开后的第三变化图片发送给终端显示，展示电视成功打开。

在另一种实施方式中，服务器将选择指令发送给终端设备时，转入设备的控制界面，再将选择指令在这个控制界面进行显示，请参考图5，在终端上只显示电视，并将选择指令“打开”和“关闭”在旁边进行显示，用户点击“打开”，服务器则将“打开”的红外码指令发送给摄像装置，摄像装置将红外码指令发送给电视，打开电视。

其中，在打开电视后，摄像装置还可以采集第三变化图片发送给终端，所述第三变化图片为为所述摄像装置控制所述目标设备执行动作后采集的图片。打开电视后，终端还可以接收到第三变化图片，展示电视成功打开。

其中，若摄像装置发生了移动，导致发给终端的图片的拍摄视角与服务器存储的不一致，从而导致电视在图片中的位置发了变化。摄像装置会拍摄第二变化图片发送给服务器，服务器会自动识别出已经关联过的设备电视及电视在该图片中的位置信息，对存储的电视的位置信息进行一次更新。避免了因为摄像装置的移动而导致位置信息对应的目标设备与服务器存储的不一致，出现设备控制错误。通过上述方式，不仅直观的展示了设备所处的真实环境，简化了用户的操作过程，也提高了设备控制的准确性。

请参阅图6，本申请实施例提供了一种设备控制方法，可应用于服务器，本实施例描述的是服务器侧的步骤流程，该方法可以包括：

步骤S210，所述服务器接收终端发送的位置信息。

在图1所示的系统中，当摄像装置采集到图片，将采集到的图片经由所述服务器发送给终端。

其中，所述位置信息是指用户在终端显示的图片中，通过点击、触摸、滑动等交互方式选择了图片中的目标设备，该目标设备在图片中对应的位置信息。终端可以直接将目标设备在图片中的位置信息发送给服务器，也可以将携带有位置信息的图片发送给服务器。其中，计算位置信息的方法可以包括，但不限于计算出触摸或点击的大致范围，再计算出范围中心的点在图片中的坐标信息，从而计算出目标设备的位置信息。

步骤S220，所述服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控。

在一些具体实施方式中，服务器可以根据所述位置信息，确定与所述位置信息对应的目标设备。服务器在接收到终端返回的位置信息时，根据所述位置信息查询本地是否存储有所述位置信息的关联设备，若存储有关联设备，从而确定所述位置信息对应的目标设备。

服务器确定与位置信息对应的目标设备后，服务器查询本地是否存储有所述目标设备对应的控制码信息，若查询到有所述目标设备对应的控制码信息则判定所述目标设备可控，若未查询到有目标设备对应的控制码信息则判定目标设备不可控。

在另一些具体实施方式中，服务器还可以在接收到终端发送的位置信息后，根据所述位置信息直接查询本地是否存储有该位置信息对应的控制码信息，若服务器没有查询到与该位置信息对应的控制码信息，则判断该目标设备不可控；若服务器查询到与所述位置信息对应的控制码信息，再根据位置信息确定目标设备，判定为所述位置信息对应的目标设备可控。

步骤S230，若可控，所述服务器接收所述终端发送的控制指令。

如果服务器判定目标设备是可控的，服务器获取终端发送的控制指令。

具体的，在一些实施方式中，当服务器判定目标设备为可控时，可以向终端发送选择指令，以供用户选择。该选择指令的显示可以让用户在终端看到目标设备的控制操作，从而决定对目标设备进行什么控制。

在一些实施方式中，选择指令可以与当前目标设备的状态无关，提供的选择指令为服务器内存储的所有可控操作，用户选中的选择指令不一定会改变目标设备的当前状态。

在另一些实施方式中，服务器发送给终端的选择指令可以是服务器根据图片分析出目标设备的当前状态，仅发送可以改变目标设备当前状态的选择指令给终端，用户选择的选择指令都会改变目标设备的当前状态。

当用户选择了某一个选择指令后，终端会返回一个与选择指令对应的控制指令给服务器。作为一种具体的实施方式，服务器可以将选择指令发送到终端在原有图片上进行选择指令的叠加显示，也可以转入一个设备的控制的界面，再将选择指令在该设备的控制界面进行显示。终端在进行了选择指令的选择后，会返回一个与选择指令对应的控制指令给服务器。

当服务器判定目标设备为不可控时，则不响应，也就是不向终端发送选择指令。

步骤S240，所述服务器发送与所述控制指令对应的控制码信息给摄像装置，指示所述摄像装置根据所述控制码信息控制所述目标设备执行动作。

其中，服务器在接收到终端返回的与选择指令对应的控制指令时，服务器将与所述控制指令对应控制码信息发送给摄像装置。

服务器接收到终端返回的控制指令时，该控制指令与选择指令相对应，选择指令与控制码信息相对应，从而通过控制指令可以查询到对应的控制码信息。

所述控制码信息包含了一个或多个控制码指令，摄像装置根据所述控制码信息，发送控制码指令控制目标设备执行动作。

本申请提出的设备控制方法，通过在终端对图片中目标设备的点击，选择要控制的目标设备，反馈给服务器目标设备在图片中的位置信息，服务器通过该位置信息查询本地存储的信息确定该位置信息对应的目标设备，查询该目标设备是否存储有对应的控制码信息，若有，则判定该目标设备可控，将选择指令发送给终端进行显示以供用户选择对该目标设备进行的控制，服务器接收终端返回的与选择指令对应的控制指令，发送与控制指令对应的控制码信息给摄像装置，指示摄像装置控制目标设备执行动作。从而实现了用户在终端的的实时图片上控制设备，操作方式简单易懂，提高了用户在终端控制设备的体验感。

请参阅图7，本申请另一实施例提供了一种设备控制方法，可应用于服务器，本实施例描述的是服务器侧的步骤流程，该方法可以包括：

步骤S310，所述服务器接收并存储所述摄像装置发送的背景图片。

其中，服务器接收到的背景图片为摄像装置在第一视角采集的背景图片，请参阅图8，示出了摄像装置在第一视角采集的背景图片，服务器将所述背景图片存储在服务器内，在需要比对图片时调用。假设在某个时间，摄像装置以第一视角进行放置，那么摄像装置在这个时间采集的背景图片即为摄像装置在第一视角采集的背景图片。

步骤S320，所述服务器接收所述摄像装置发送的控制码信息和第一变化图片。

该控制码信息是指用户在使用能发出控制码信号控制设备的装置对目标设备进行控制时，接收到的控制码信息。例如，在使用遥控器对电视机进行控制时，遥控器为能发出控制码信号的装置，电视机为被控制的目标设备，当遥控器控制电视机时，遥控器发出的控制码信息被摄像装置接收到。摄像装置将控制码信息存储起来并采集第一变化图片，再将控制码信息和采集到的第一变化图片发送给服务器。

摄像装置接收到设备控制码信息，并在接收到该控制码信息后，拍摄第一变化图片。所述第一变化图片为摄像装置在第一视角采集到的与背景图片不同的图片，也就是，摄像装置在采集背景图片与第一变化图片时，摄像装置的视角是没有改变的，仍然采用图8所示出的拍摄视角采集第一变化图片。

步骤S330，所述服务器比对背景图片和第一变化图片，识别出图片中有变化的目标设备及所述目标设备在图片中的位置信息。

所述服务器接收到第一变化图片和控制码信息时，调取接收到的背景图片，通过图像识别技术比对背景图片和第一变化图片中发生了变化的目标设备。此处的变化是指目标设备的状态发生的变化，例如窗帘由原来的关闭到开启或者由原来的开启到关闭，电视机的关闭到开启或者开启到关闭，灯的关闭到打开或者打开到关闭。

服务器通过图像识别技术识别出发生变化的目标设备的同时，也能识别出该目标设备在此图片中的位置信息，服务器对位置信息进行对应存储，以便于在接收到终端发送的位置信息时确认对应的目标设备。

步骤S340，所述服务器关联并存储所述目标设备、所述位置信息及所述控制码信息。

所述服务器将识别出发生变化的目标设备、目标设备在该图片中的位置信息以及摄像装置发送的控制码信息关联并存储在本地。其中，当同一个目标设备对应多个控制码信息时，服务器将关联该目标设备、目标设备在图片中的位置信息和控制码组信息，该控制码组信息为一个或多个控制码信息组成的一组控制码组信息。所述控制码信息可以是可以控制设备的码信息如红外码信息、ZIGBEE码信息等。

在一些具体实施方式中，控制码信息的录入可以采取预先存储的方式，例如红外码信息的录入可以先收集所有遥控器的红外编码，然后将这些红外编码写入服务器，组成红外码库。对同一设备的不同红外码信息进行分组存储，即一个设备对应一组红外码信息，这一组红外码信息按照厂商的不同再次进行分组存储。在服务器进行图像识别时，将识别出的目标设备和目标设备在图片中的位置信息与红外码库的信息进行匹配，识别出发生变化的目标设备后可以返回终端一个询问信息，询问该目标设备的型号，从而确定目标设备的型号和控制码信息。

用户在终端控制设备时，服务器根据终端反馈的目标设备的位置信息确定所述目标设备，根据目标设备查询对应的红外码库，获取红外码控制信息，再将红外码控制信息发送给摄像装置，从而指示摄像装置对所述目标设备进行控制。

步骤S350，所述服务器接收终端发送的位置信息。

步骤S360，所述服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控。

步骤S370，若可控，所述服务器接收所述终端发送的控制指令。

其中，服务器根据位置信息查询本地是否存储有控制码信息，若本地存储有与所述位置信息对应的目标设备的控制码指令，则判定该目标设备可控。当摄像装置发生移动时，摄像装置会再次拍摄第二变化图片给服务器。请参阅图9，示出了摄像装置在发生移动或拍摄视角的变动时以第二视角采集第二变化图片。

服务器在接收到第二变化图片时，会自动识别出第二变化图片中已经关联的设备，由于摄像装置发生了移动，设备对应的位置信息也发生了改变，服务器内部所关联设备的位置信息不准确，服务器会将该设备的位置信息进行更新，确保服务器根据位置信息确定的目标设备与用户想要控制的目标设备一致。

步骤S380，所述服务器发送与所述控制指令对应的控制码信息给摄像装置。

本申请提供的设备控制方法，用户通过终端对设备进行控制前，服务器内存储的控制码信息提供了直接通过图片控制设备时的交互能力。在服务器存储有对应设备的控制码信息时，服务器提供相应的控制码信息给摄像装置，控制设备执行动作，从而实现了用户在终端上通过摄像装置拍摄的图片进行交互控制设备。服务器在判断位置信息对应的设备是否可控时，先对图片进行识别，更新本地存储的设备位置信息，避免了因摄像装置的移动，造成设备控制错误，使得在控制设备时更加直观准确同时也简便了用户控制设备的操作。

请参阅图10，本申请另一实施例提供了一种设备控制方法，可应用于摄像装置，本实施例描述的是摄像装置侧的步骤流程，该方法可以包括：

步骤S410，所述摄像装置接收来自外部控制码发射装置的控制码信息；

其中，摄像装置具有可以接收控制码信息的接收器，该控制码信息可以为红外码信息。例如，用户在使用遥控器对电视进行打开的控制时，遥控器则为外部控制码发射装置，遥控器会发出红外码控制信息控制电视打开，那么摄像装置则可以接收到遥控器发出的红外码控制信息。

步骤S420，所述摄像装置发送所述控制码信息给对应目标设备，以控制所述目标设备执行动作

摄像装置在接收到控制码信息后，将控制码信息发送给目标设备，控制所述目标设备执行动作，例如摄像装置可以是将接收到的打开电视的红外控制码信息发送给电视，打开电视。

步骤S430，所述摄像装置在发送所述控制码信息给对应目标设备前，还基于第一视角采集第一变化图片，发送所述控制码信息和所述第一变化图片给服务器。

在摄像装置发送所述控制码信息给对应的目标设备，控制目标设备执行动作之前，还会将在第一视角采集的第一变化图片和控制码信息发给服务器。第一变化图片是用户使用可以发射控制码信息的装置控制设备发生变化后，摄像装置在第一视角采集的第一变化图片。

本申请提供的设备控制方法，通过摄像装置实时采集图片信息，提供了图像识别的基础，也给用户提供了一种更为直观的设备控制方式，简化了控制的操作方式，在对设备控制之前，摄像装置将从外部接收到的控制码信息和图片信息发送给服务器，进行关联存储，提供了通过图片控制设备的基础。

请参阅图11，其示出了本申请实施例提供的一种设备控制装置500，运行于摄像装置，所述装置500包括控制码接收模块510、内部处理模块520以及控制码发射模块530、图像采集模块540、图像发送模块550。

控制码接收模块510，用于接收来自外部控制码发射装置的控制码信息；

内部处理模块520，用于将所述控制码信息发送给所述控制码发射模块并实时拍摄图片；

控制码发射模块530，用于发送所述控制码信息给对应目标设备，控制所述目标设备执行动作；

图像采集模块540，用于在发送所述控制码信息前，基于第一视角采集第一变化图片；

图像发送模块550，用于发送所述控制码信息和所述第一变化图片给服务器。

具体的，所述图像采集模块540，还用于采集背景图片，所述背景图片基于所述第一视角采集。

具体的，所述图像发送模块550，还用于发送所述背景图片给服务器。

其中，所述装置500还包括通信模块；所述通信模块用于接收来自服务器的所述控制码信息。

需要说明的是，所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

综上所述，本申请提供的设备控制的方法、装置、系统及存储介质，通过用户在终端上对图片的点击，选择要控制的目标设备，反馈给服务器目标设备在图片中的位置信息，服务器通过该位置信息查询本地存储的信息确定该位置信息对应的目标设备，查询该目标设备是否存储有对应的控制码信息，若有，则判定该目标设备可控，将选择指令发送给用户终端进行显示，以供用户选择对设备进行的控制，服务器接收终端的返回的与选择指令对应的控制指令，发送与控制指令对应的控制码信息给摄像装置，指示摄像装置控制目标设备执行动作。从而实现了用户在终端显示的实时图片上控制设备，将设备的真实场景通过图片的方式呈现在用户眼前，更加的直观且操作方式简单易懂，提高了用户控制设备的体验感。

在本申请所提供的几个实施例中，所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。

另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

请参考图12，其示出了本申请实施例提供的一种摄像装置的结构框图。本申请中的摄像装置100可以包括一个或多个如下部件：处理器101、存储器102、控制码接收器103、控制码发射器104、以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器102中并被配置为由一个或多个处理器101执行，一个或多个程序配置用于执行如下述方法实施例所描述的方法。

处理器101可以包括感光耦合组件(Charge-Coupled Device，CCD)传感器或者互补性氧化金属半导体(Complementary Metal-Oxide Semiconductor，CMOS)传感器、处理器、通信模块等。其中，传感器用于感受和记录外界光线的信息，并将其转换成电流，同时转换为数字信息，通信单元用于连接其他模块进行数据传输。

处理器101可以包括一个或者多个处理核。处理器101利用各种接口和线路连接整个摄像装置100内的各个部分，通过运行或执行存储在存储器102内的指令、程序、代码集或指令集，以及调用存储在存储器102内的数据，执行摄像装置100的各种功能和处理数据。可选地，处理器101可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器中，单独通过一块通信芯片进行实现。

存储器102可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器102可用于存储指令、程序、代码、代码集或指令集。存储器102可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储摄像装置100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

控制码接收器103为可以接收到控制码信息的模块，控制码发射器104为可以发送控制码信息的模块，所述的控制码信息是指可以传输控制信号的载体，例如红外码、ZIGBEE码或无线电码等。

请参考图13，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读存储介质600中存储有程序代码，所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质600可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质600包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质600具有执行上述方法中的任何方法步骤的程序代码610的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码610可以例如以适当形式进行压缩。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (12)

1.一种设备控制方法，其特征在于，包括：

终端响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，所述位置信息包括所述目标设备在终端所显示图片中的位置坐标；

所述服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若所述服务器查询到与所述目标设备关联的控制码信息，则确定所述位置信息对应的目标设备是可控的；

若可控，所述服务器接收终端发送的控制指令，并发送与所述控制指令对应的控制码信息给摄像装置；其中，所述服务器在判断所述目标设备是可控的后，向所述终端发送针对所述目标设备的选择指令，所述选择指令用于指示可对所述目标设备进行的控制操作；所述控制指令是与用户在所述终端中选取的选择指令相对应的；若所述服务器在判断所述目标设备是不可控的，则不向所述终端发送选择指令；

所述摄像装置向所述目标设备发送所述控制码信息，以控制所述目标设备执行动作。

2.如权利要求1所述的方法，其特征在于，所述终端响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，包括：

所述终端接收由所述服务器存储的来自所述摄像装置采集的背景图片，所述背景图片基于第一视角采集；

所述终端响应于用户对所述背景图片的触发操作，发送与所述触发操作对应的所述背景图片中的目标设备的位置信息给服务器。

3.如权利要求1所述的方法，其特征在于，所述终端响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，包括：

所述终端发送拍摄指令给所述摄像装置；

所述终端经由所述服务器接收来自所述摄像装置采集的背景图片，所述背景图片基于第一视角采集；

所述终端响应于用户对所述背景图片的触发操作，发送与所述触发操作对应的所述背景图片中的目标设备的位置信息给服务器。

4.一种设备控制方法，应用于服务器，其特征在于，包括：

所述服务器接收终端发送的位置信息，所述位置信息包括目标设备在终端所显示图片中的位置坐标；

所述服务器根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若所述服务器查询到与所述位置信息关联的控制码信息，则确定所述位置信息对应的目标设备是可控的；

若可控，所述服务器向所述终端发送针对所述目标设备的选择指令，所述选择指令用于指示可对所述目标设备进行的控制操作；若所述服务器判断所述目标设备是不可控的，则不向所述终端发送选择指令；

所述服务器接收终端发送的控制指令，所述控制指令是与用户在所述终端中选取的选择指令相对应的；

所述服务器发送与所述控制指令对应的控制码信息给摄像装置，指示所述摄像装置根据所述控制码信息控制所述目标设备执行动作。

5.如权利要求4所述的方法，其特征在于，所述服务器接收终端发送的位置信息之前还包括：

所述服务器内预先关联并存储有所述目标设备、所述位置信息以及所述控制码信息。

6.如权利要求5所述的方法，其特征在于，所述服务器内预先关联并存储有所述目标设备、所述位置信息以及所述控制码信息，包括：

所述服务器接收并存储所述摄像装置发送的背景图片；

所述服务器接收所述摄像装置发送的所述控制码信息和第一变化图片，其中，在通过外部控制码发射装置对目标设备进行控制时，所述摄像装置接收所述外部控制码发射装置发出的控制码信息；所述第一变化图片和所述背景图片是所述摄像装置在第一视角下采集到的；所述第一变化图片是在通过所述外部控制码发射装置对目标设备进行控制后，由所述摄像装置采集到的；所述背景图片是在通过所述外部控制发射装置发出的控制码信息对所述目标设备进行控制前，所述摄像装置采集到的；

所述服务器比对背景图片和第一变化图片，识别出图片中有变化的目标设备及所述目标设备在图片中的位置信息；

所述服务器关联并存储所述目标设备、所述位置信息以及所述控制码信息。

7.一种设备控制方法，应用于摄像装置，其特征在于，所述方法包括：

所述摄像装置接收服务器发送的与控制指令相对应的控制码信息；所述服务器在接收到终端发送的位置信息后，若根据所述位置信息判断所述位置信息对应的目标设备是可控的，所述服务器向所述终端发送针对所述目标设备的选择指令，并接收终端发送的所述控制指令；所述控制指令是与用户在所述终端中选取的选择指令相对应的；所述位置信息包括所述目标设备在终端所显示图片中的位置坐标；

所述摄像装置向所述目标设备发送所述控制码信息，以根据所述控制码信息控制所述目标设备执行相应动作；

其中，若所述服务器查询到与所述位置信息关联的控制码信息，则确定所述位置信息对应的目标设备是可控的；若所述服务器在判断所述目标设备是不可控的，则不向所述终端发送选择指令。

8.根据权利要求7所述的方法，其特征在于，所述摄像装置接收服务器发送的与控制指令相对应的控制码信息之前，所述方法还包括：

所述摄像装置接收来自外部控制码发射装置的控制码信息；

所述摄像装置基于第一视角采集第一变化图片，所述第一变化图片是在通过所述外部控制发射装置发出的控制码信息对所述目标设备进行控制后采集到的；

所述摄像装置向服务器发送所述控制码信息和所述第一变化图片，以使所述服务器根据背景图片和所述第一变化图片识别出状态发生变化的目标设备和所述目标设备在所述背景图片中的位置信息后，将所述目标设备、所述控制码信息和所述位置信息进行关联存储，所述背景图片是在通过所述外部控制发射装置发出的控制码信息对所述目标设备进行控制前，所述摄像装置基于第一视角采集到的。

9.一种摄像装置，其特征在于，所述摄像装置包括：

接收模块，用于接收服务器发送的与控制指令相对应的控制码信息；所述服务器在接收到终端发送的位置信息后，若根据所述位置信息判断所述位置信息对应的目标设备是可控的，所述服务器向所述终端发送针对所述目标设备的选择指令，并接收终端发送的所述控制指令；所述控制指令是与用户在所述终端中选取的选择指令相对应的；所述位置信息包括所述目标设备在终端所显示图片中的位置坐标；

发送模块，用于向所述目标设备发送所述控制码信息，以根据所述控制码信息控制所述目标设备执行相应动作；

其中，若所述服务器查询到与所述位置信息关联的控制码信息，则确定所述位置信息对应的目标设备是可控的；若所述服务器在判断所述目标设备是不可控的，则不向所述终端发送选择指令。

10.根据权利要求9所述的摄像装置，其特征在于，所述摄像装置还包括：

控制码接收模块用于接收来自所述外部控制码发射装置的控制码信息；

图像采集模块，用于基于第一视角采集第一变化图片，所述第一变化图片是在通过所述外部控制发射装置发出的控制码信息对所述目标设备进行控制后采集到的；

图像发送模块，用于向服务器发送所述控制码信息和所述第一变化图片，以使所述服务器根据背景图片和所述第一变化图片识别出状态发生变化的目标设备和所述目标设备在所述背景图片中的位置信息后，将所述目标设备、所述控制码信息和所述位置信息进行关联存储，所述背景图片是在通过所述外部控制发射装置发出的控制码信息对所述目标设备进行控制前，所述摄像装置基于第一视角采集到的。

11.一种设备控制系统，其特征在于，包括：摄像装置，服务器及终端；

所述终端用于响应于用户的触发操作，发送与所述触发操作对应的目标设备的位置信息给服务器，所述位置信息包括所述目标设备在终端所显示图片中的位置坐标；

所述服务器用于根据所述位置信息判断与所述位置信息对应的目标设备是否可控；若所述服务器查询到与所述位置信息关联的控制码信息，则确定所述位置信息对应的目标设备是可控的；

所述服务器还用于在确定目标设备是可控的后，接收终端发送的控制指令，并发送与所述控制指令对应的控制码信息给摄像装置；其中，所述服务器若判断所述目标设备是可控的，向所述终端发送针对所述目标设备的选择指令，所述选择指令用于指示可对所述目标设备进行的控制操作；所述控制指令是与用户在所述终端中选取的选择指令相对应的；若所述服务器判断所述目标设备是不可控的，则不向所述终端发送选择指令；

所述摄像装置用于向所述目标设备发送所述控制码信息，以控制所述目标设备执行动作。

12.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1至8任一项所述的方法。

Images