CN111766786B - 一种智能控制方法及控制器 - Google Patents

Abstract

本申请提供一种智能控制方法及控制器。本申请中，获得第一用户行为状态，该信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；比较第一用户行为状态信息与之前同一位置的音视频采集装置获得到的第二用户行为状态信息所对应的用户行为类型；若两者属于不同的用户行为类型，则根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息并执行对应的控制操作。采用本申请可提高智能家居系统的智能化。

Description

一种智能控制方法及控制器

技术领域

本申请涉及智能控制技术领域，特别是涉及一种智能控制方法及控制器。

背景技术

目前在智能家居技术领域，智能家居系统的智能化还比较弱。大多数智能家居系统所提供的智能控制功能通常包括：对智能家居设备的远程控制，智能家居设备状态的远程上报等。

随着人工智能技术(比如人工智能视觉分析技术)的发展，如何将新的人工智能技术应用于智能家居技术领域，以提高智能家居系统的智能化，是目前业界需要解决的技术问题。

发明内容

本申请提供一种智能控制方法及控制器。

第一方面，提供一种智能控制方法，所述方法包括：

获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型；其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于不同用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息；

根据所述单次事件操作信息执行对应的控制操作。

在一种可能的实现方式中，所述比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之后，所述方法还包括：响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息，并根据所述循环事件操作信息执行对应的控制操作。

在一种可能的实现方式中，所述比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之后，所述方法还包括：

响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，将获得所述第一用户行为状态的时间与获得所述第二用户行为状态信息的时间之间的时间间隔与预设时间间隔进行比较；

响应于所述时间间隔大于所述预设时间间隔的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息，并根据所述循环事件操作信息执行对应的控制操作。

在一种可能的实现方式中，预先配置有用户行为状态信息与所对应的用户行为类型之间的第一对应关系；所述比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之前，还包括：根据所述第一用户行为状态信息以及所述第二用户行为状态信息查询所述第一对应关系，获得所述第一用户行为状态信息和所述第二用户行为状态信息所对应的用户行为类型。

在一种可能的实现方式中，预先设置用户行为状态信息与音视频采集装置的位置的组合，与单次事件操作信息之间的第二对应关系；所述根据所述第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息，包括：根据所述第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置查询所述第二对应关系，得到对应的单次事件操作信息。

在一种可能的实现方式中，所述单次事件操作信息，至少包括以下操作信息之一：对至少一个智能家居设备的控制信息，用于生成和发送通知消息的控制信息，所述通知消息用于通知与所述第一用户行为状态信息对应的用户行为发生。

在一种可能的实现方式中，所述获得第一用户行为状态信息，包括：获得所述音视频采集装置发送的第一用户行为状态信息，所述第一用户行为状态信息是所述音视频采集装置根据采集到的用户行为音视频数据识别得到的用户行为信息；或者，获得所述音视频采集装置发送的用户行为音视频数据，根据所述用户行为音视频数据识别得到第一用户行为状态信息。

第二方面，提供一种智能控制装置，包括：

用户行为状态信息获取模块，用于获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

处理模块，用于比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型，以及响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于不同用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息；其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

控制模块，用于根据所述单次事件操作信息执行对应的控制操作。

在一种可能的实现方式中，所述处理模块，还用于：响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息；所述控制模块还用于：根据所述循环事件操作信息执行对应的控制操作。

第三方面，提供一种控制器，包括：处理器、存储器；所述处理器，用于读取所述存储器中的程序，执行上述第一方面中任一项所述的方法。

第四方面，提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行上述第一方面中任一项所述的方法。

本申请的上述实施例中，在获得第一用户行为状态信息后，将该用户行为状态信息与同一位置的音视频采集装置之前检测到的用户行为状态信息进行比较，若这两个用户行为状态信息对应相同的用户行为类型，即表明这两个事件为重复事件，否则不是重复事件。若不是重复事件，则根据第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息，并根据所述单次事件操作信息执行对应的控制操作。上述方法，将基于音视频数据的用户行为识别技术与智能控制技术相结合，可以实现根据检测到的用户行为执行相匹配的控制操作。具体地，可将上述实施例应用于智能家居系统，这样，可以根据对音视频采集装置采集的用户行为音视频数据进行人工智能视觉识别，并进行重复事件判决，并根据判决结果对智能家居设备执行相应的控制操作，从而可以提高智能家居系统的智能化。

附图说明

图1为本申请实施例所适用的系统架构示意图；

图2为本申请实施例提供的智能控制流程示意图；

图3为本申请实施例提供的智能家居设备控制流程示意图；

图4为本申请实施例提供的控制器的结构示意图；

图5为本申请另一实施例提供的控制器的结构示意图。

具体实施方式

目前，人工智能视觉分析技术已经得到一定发展，已经应用于安防摄像头领域，利用人工智能视觉分析技术进行人形识别、进行人员入侵的检测等。其中，人脸识别技术主要用于进行身份识别。但是，人工智能视觉分析技术目前尚未在智能家居技术领域得到应用。

本申请实施例提供了一种智能控制方法和控制器。本申请实施例可应用于智能家居技术领域，利用人工智能视觉分析技术识别家庭成员行为，从而对智能家居系统具体要执行的控制操作进行决策，实现智能家居系统的决策处理，提高智能家居系统的智能化。

下面结合附图对本申请实施例进行详细描述。

图1示出了为本申请实施例适用的一种系统架构。该系统架构图示出了将本申请实施例应用于家庭智能家居系统的一个示例。

如图1所示，系统架构100中包括控制器11以及安装在家庭居室内的智能家居设备以及智能摄像头。图中示例性示出了厨房和客厅中的智能家居设备以及智能摄像头。其中，厨房中的智能家居设备包括智能冰箱13a，客厅中的智能家居设备包括智能窗帘13b和智能空调13c；厨房和客厅中安装有智能摄像头12a和智能摄像头13b。智能摄像头12a可检测位于厨房的用户15a的行为，智能摄像头12b可检测位于客厅的用户15b的行为。

智能家居设备(13a,13b,13c)、智能摄像头(12a,12b)可通过有线方式或无线方式连接到控制器11。控制器11与智能家居设备(13a,13b,13c)、智能摄像头(12a,12b)之间可通过网络进行交互。所述网络可以是无线局域网，也可以是蜂窝网，或者是其他类型的通信网络。

控制器11可以是位于家庭局域网中的网关，或者是该网关内部的装置或功能模块。控制器11也可以是位于网络侧的服务器，比如云服务器。

智能摄像头(12a,12b)中可内置有麦克风阵列，因此既能够采集视频信息又可以采集音频信息。智能摄像头还具有人工智能视觉识别功能，即可以根据采集到的视频信息识别用户的行为，比如识别有人出入客厅，或者识别有人摔倒等。当然，智能摄像头也可以根据采集到的音频数据进行人工智能视觉识别，或者根据采集到的视频数据和音频数据进行人工智能视觉识别。

智能摄像头还可以将识别结果发送给控制器11。具体实施时，所述识别结果可以表现为用户行为状态信息或称用户行为事件信息，所述用户行为状态信息可包括用户行为名称、用户行为类型、事件ID中的至少一种。比如，安装在客厅的智能摄像头12b根据采集到的视频数据，通过人工智能视觉识别功能，识别得到有人进入客厅，则可向控制器11发送通知消息，其中携带“someoneENTER”(“someoneENTER”是用户行为状态信息名称，表示用人进入)，以通知控制器11当前有人进入客厅。

控制器11可以根据接收到的用户行为状态信息，对智能家居设备进行控制决策，并根据决策结果向相应的智能家居设备发送控制指令，以控制相应的智能家居设备执行与所述用户行为状态信息相匹配的操作，从而提高智能家居系统的智能化。

为了使智能家居系统控制更加合理，本申请实施例中，控制器11在进行控制决策时，可首先确定智能摄像头当前检测到的用户行为状态信息是否与上一次检测到的用户行为状态信息属于相同的用户行为类型，并根据是否属于相同的用户行为类型执行对应的控制操作。比如，如果属于相同的用户行为类型，则可忽略当前检测到的事件，以避免针对同一用户行为类型重复执行相同的控制操作；如果属于不同用户行为类型，则可以根据当前检测到的用户行为状态信息执行相应的控制操作，比如向相应的智能家居设备发送控制指令。

在其他一些系统架构中，图1中的智能摄像头也可以由其他音视频采集装置代替。所述音视频采集装置可以是仅能采集视频数据的装置，或者仅能采集音频数据的装置，或者既能采集音频数据又能采集视频数据的装置。比如该音视频采集装置可以是仅具有视频数据采集能力的普通摄像头，普通摄像头通常不具备人工智能视觉识别功能，这种情况下，摄像头可将采集到的视频数据发送给控制器，由控制器基于人工智能视觉识别功能进行用户行为识别。

需要说明的是，上述图1所示的系统架构仅为将本申请实施例应用于智能家居系统的一个示例，本申请实施例对本申请实施例的应用场景不作限制。

以图1所示的系统架构为例，在实现本申请实施例时，可首先搭建图1所示的系统架构。比如，在各位置安装N个智能摄像头，N个智能摄像头分别与控制器连接。控制器与智能家居设备连接。

为了使控制器能够实现智能控制决策，控制器中设置有以下配置信息：

音视频采集装置配置信息；

用户行为状态配置信息；

控制决策配置信息。

上述配置信息可以采用配置文件形式存储，也可以采用列表形式存储，或者采用其他数据存储形式进行存储，本申请实施例对上述配置信息的存储形式不作限制。

下面分别对上述几种配置信息进行详细说明。

(1)音视频采集装置配置信息

音视频采集装置配置信息，用于记录音视频采集装置的标识以及位置。其中，音视频采集装置的标识可用来唯一识别音视频采集装置，具体可包括音视频采集装置的ID或媒体接入控制(media access control，MAC)地址等信息。

以图1所示的系统架构为例，表1示例性地示出了一种音视频采集装置配置信息表。

表1：音视频采集装置配置信息表

智能摄像头标识	智能摄像头MAC地址	安装位置
			12a	00:12:31:01:87:97	厨房
12b	00:12:16:2e:3d:5e	客厅
			……

上述音视频采集装置配置信息，可根据音视频采集装置的安装情况进行配置。

(2)用户行为状态配置信息

用户行为状态配置信息，用于记录用户行为状态的标识以及所对应的用户行为类型。一个用户行为状态对应一个用户行为类型，不同的用户行为状态可以对应相同或不同的用户行为类型，即多个用户行为状态可能属于同一用户行为类型。根据用户行为状态配置信息，可以判断不同的事件是否对应于同一用户行为类型，如果先后发生的两个用户行为状态属于同一用户行为类型，则该两个用户行为状态被判决为重复事件，反之则被判决为不是重复事件。

比如，当有用户进入客厅时，安装在客厅的智能摄像头检测到“有人进入房间”的用户行为状态；当该用户坐下，该智能摄像头检测到“有人坐下”的用户行为状态；当用户站起来时，该智能摄像头检测到“有人站起来”的用户行为状态。当用户站立不动，该摄像头还可检测到“有人站立不动”的用户行为状态。表2示例性地示出了一种用户行为状态配置信息。

表2：事件配置信息表

用户行为状态	用户行为类型
		有人进入房间	用户行为类型A
有人站起来	用户行为类型A
		有人坐下	用户行为类型B
有人躺下	用户行为类型B
		有人站立不动	用户行为类型C
有人半蹲不动	用户行为类型C
		有人摔倒	用户行为类型D

表2中，一个用户行为状态属于一种用户行为类型，不同的用户行为状态所属的用户行为类型可能相同也可能不同。

上述用户行为状态配置信息，可由系统默认配置，也可由用户配置。

(3)控制决策配置信息

控制决策配置信息，用于记录控制决策信息，是控制器实现智能控制的依据之一。控制决策配置信息可包括场景信息、单次事件操作信息，可选地，还可包括循环事件操作信息。进一步地，在控制决策配置信息包括循环事件操作信息的情况下，还可以设置循环事件操作的执行条件。

其中，场景信息可包括音视频采集装置信息和用户行为状态信息的组合。比如，场景1可以表示为安装在厨房的摄像头的标识(或MAC地址)与someoneENTER事件(即有人进入房间的用户行为状态信息)的组合，场景2可以表示为安装在客厅的摄像头的标识(或MAC地址)与someoneSITDOWN事件(即有人坐下的用户行为状态信息)的组合。

场景信息还可以是音视频采集装置信息和用户行为类型的组合。比如，场景1可以表示为安装在厨房的摄像头的标识(或MAC地址)与用户行为类型A的组合，场景2可以表示为安装在客厅的摄像头的标识(或MAC地址)与用户行为类型B的组合。

控制决策配置信息中的“单次事件操作信息”，用来描述满足单次事件判决条件时，需要执行的控制操作。所述“单次事件操作信息”可以表现为程序代码或程序脚本或控制指令等，还可以进一步包括控制参数、被控制的目标智能家居设备的标识信息等。

控制决策配置信息中的“循环事件操作信息”，用来描述满足重复事件判决条件时，需要执行的控制操作。所述“循环事件操作信息”可以表现为程序代码或程序脚本或控制指令等，还可以进一步包括控制参数、被控制的目标智能家居设备的标识信息等。

循环事件操作的执行条件，用来定义在满足何种条件时执行循环事件操作。具体地，在一些实施例中，可针对某一场景，配置是否允许执行循环事件操作；在另外一些实施例中，可以配置重复事件的间隔时间，即在重复事件的时间间隔满足该时间间隔要求时，才能执行循环事件操作。

上述控制决策配置信息可以是系统预先设置的。进一步地，本申请实施例允许从网络侧接收更新的控制策略配置信息。可选地，也可以允许用户更新控制策略配置信息。

以图1所示的架构为例，表3示例性地示出了一种控制决策配置信息。

表3

表3中，PERMITREPEAT参数和DURATION参数用来定义循环事件操作的执行条件。PERMITREPEAT取值为0时，DURATION的取值也定义为0，表示不允许执行循环事件操作；PERMITREPEAT取值为1时，DURATION的取值定义为大于0的数值，表示在满足重复事件判决条件时，并且事件间隔时间不小于DURATION所指示的时间长度时，才允许执行循环事件操作。

根据上述表3，当安装在厨房的智能摄像头12a检测到“有人进入房间”的用户行为状态时，控制器11判断该事件是否是重复事件，若不是重复事件，则根据场景1对应的“单次事件操作信息”，开启厨房的智能照明灯；若控制器11判断该事件为重复事件，则不执行任何操作。

根据上述表3，当安装在客厅的智能摄像头12b检测到“有人坐下”用户行为状态时，控制器11判断该事件是否是重复事件，若不是重复事件，则根据场景2对应的“单次事件操作信息”，开启智能空调；若控制器11判断该事件为重复事件，则进一步判断重复事件的时间间隔是否不小于60秒(DURATION＝60)，若不小于60秒，则根据场景2对应的“循环事件操作信息”调整智能空调当前的温度，否则不执行任何操作。

根据上述表3，当安装在客厅的智能摄像头12b检测到“有人离开”用户行为状态时，控制器11判断该事件是否是重复事件，若不是重复事件，则根据场景3对应的“单次事件操作信息”，关闭智能空调；若控制器11判断该事件为重复事件，则不执行任何操作。

参见图2，为本申请实施例提供的智能控制流程示意图，该流程可由控制器执行。以下流程中涉及的术语，比如“用户行为状态信息”“单次事件操作信息”“循环事件操作信息”等，可参见前述描述，在此不再重复。

如图所示，该流程可包括：

S201：获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的。

其中，“第一用户行为状态信息”的表述仅用于对用户行为状态信息进行区别，并不特指某一用户行为状态信息。“第一位置”的表述仅用于对位置进行区别，并不特指某一特定位置。

该步骤中，控制器可获得音视频采集装置发送的第一用户行为状态信息，所述第一用户行为状态信息是该音视频采集装置根据采集到的用户行为音视频数据识别得到的用户行为信息。该方法可适用于音视频采集装置具有人工智能视觉识别功能的情况，该情况下，音视频采集装置可采集用户行为的音视频数据并进行人工智能视觉识别，确定出对应的用户行为状态信息，并将该用户行为状态信息发送给控制器。

该步骤中，控制器也可获得音视频采集装置发送的用户行为音视频数据后，根据用户行为音视频数据识别得到第一用户行为状态信息，所述第一用户行为状态信息为用户行为信息。该方法可适用于音视频采集装置不具有人工智能视觉识别功能的情况，该情况下，音视频采集装置可将采集到的音视频数据发送给控制器，由控制器进行人工智能视觉识别，从而得到用户行为状态信息。

S202：比较第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型。

其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的。如果第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型相同，则第一用户行为状态与第二用户行为状态为重复事件，否则，第一用户行为状态与第二用户行为状态不是重复事件。

本申请实施例中，可预先配置有用户行为状态信息与所对应的用户行为类型之间的第一对应关系。这样，该步骤中，控制器在比较第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之前，可根据第一用户行为状态信息以及第二用户行为状态信息查询所述第一对应关系，获得第一用户行为状态信息和第二用户行为状态信息所对应的用户行为类型。具体地，所述第一对应关系的一个示例可如表2所示。

S203：响应于不同用户行为类型的比较结果，根据第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息。

本申请实施例中，可预先设置用户行为状态信息与音视频采集装置的位置的组合，与单次事件操作信息之间的第二对应关系。这样，该步骤中，控制器可根据第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置查询所述第二对应关系，得到对应的单次事件操作信息。具体地，所述第二对应关系的一个示例可如表3所示。

S204：根据所述单次事件操作信息执行对应的控制操作。

可选地，所述单次事件操作信息，至少包括以下操作信息之一：

对至少一个智能家居设备的控制信息；

用于生成和发送通知消息的控制信息，所述通知消息用于通知与所述第一用户行为状态信息对应的用户行为发生。

相应地，如果单次事件操作信息包括对智能家居设备的控制信息，则控制器可根据该单次事件操作信息，向目标智能家居设备发送控制指令；如果单次事件操作信息包括用于生成和发送通知消息的控制信息，则控制器可根据该单次事件操作信息生成通知消息并将该通知消息发送给指定的用户设备，比如用户移动终端。举例来说，当智能摄像头检测到有家庭成员A摔倒在客厅的事件，且控制器判断该事件不是重复事件时，控制器可根据该事件所对应的单次事件操作信息，向家庭成员B的移动终端发送通知消息，以通知家庭成员A在客厅摔倒的事件发生。

本申请的上述实施例中，控制器在获得第一用户行为状态信息后，将该用户行为状态信息与同一位置的音视频采集装置之前检测到的用户行为状态信息进行比较，若这两个用户行为状态信息对应相同的用户行为类型，即表明这两个事件为重复事件，否则不是重复事件。若不是重复事件，则控制器根据第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息，并根据所述单次事件操作信息执行对应的控制操作。进一步地，若为重复事件，则可以根据执行循环事件信息执行相应的控制操作。上述方法，将基于音视频数据的用户行为识别技术与智能控制技术相结合，可以实现根据检测到的用户行为执行相匹配的控制操作。具体地，可将上述实施例应用于智能家居系统，这样，可以根据对音视频采集装置采集的用户行为音视频数据进行人工智能视觉识别，并进行重复事件判决，并根据判决结果对智能家居设备执行相应的控制操作，从而可以提高智能家居系统的智能化。

可选地，在一些实施例中，上述流程在S202之后，若第一用户行为状态信息和第二用户行为状态信息所对应的用户行为类型相同，则可以不执行任何控制操作。

可选地，在一些实施例中，上述流程在S202之后，若第一用户行为状态信息和第二用户行为状态信息所对应的用户行为类型相同，则还可包括以下步骤：响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息，并根据该循环事件操作信息执行对应的控制操作。

可选地，在一些实施例中，上述流程在S202之后，若第一用户行为状态信息和第二用户行为状态信息所对应的用户行为类型相同，则还可包括以下步骤：响应于同一用户行为类型的比较结果，将获得第一用户行为状态信息的时间与获得第二用户行为状态信息的时间之间的时间间隔与预设时间间隔进行比较；若该时间间隔大于或等于该预设时间间隔，则响应于该比较结果，根据第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息，并根据该循环事件操作信息执行对应的控制操作。

该方法中，通过设置是否执行循环事件控制操作的条件，即，只有当第一用户行为状态信息和第二用户行为状态信息的时间间隔大于或等于预设时间间隔时，才执行循环事件控制操作，从而提高了智能控制的合理性。

图3示例性地示出了一种将上述图2所示的方法应用于智能家居系统的流程，如图所示，该流程可包括：

S301：智能摄像头采集音视频数据；

S302：智能摄像头基于智能视觉算法对采集到的音视频数据进行识别；

S303：如果智能摄像头识别得到系统设定的用户行为或事件，则转入S304，否则，转入S301；

S304：智能摄像头将识别得到的用户行为状态信息以及该智能摄像头的MAC地址发送给控制器；

S305：控制器根据智能摄像头的MAC地址，通过查询“音视频采集装置配置信息”(如表1)，得到该智能摄像头的安装位置；

S306：控制器根据接收到的用户行为状态信息，通过查询“用户行为状态配置信息”(如表2)，确定该用户行为或事件是否为重复用户行为或重复事件，若是，则转入S307，否则转入S310；

S307：控制器确定是否允许执行循环操作，若运行，则转入S308，否则转入S301。

S308：控制器判断重复用户行为或重复事件的时间间隔是否大于或等于设定的时间间隔，若是，则转入S309；否则结束本次流程，转入S301；

S309：控制器根据该智能摄像头的位置以及根据该用户行为信息或用户行为状态信息，通过查询“控制策略配置信息”(如表3)，得到对应的循环事件操作信息；

S310：控制器根据得到的循环事件操作信息，向对应的智能家居设备发送控制指令。

S311：控制器根据该智能摄像头的位置以及根据该用户行为信息或用户行为状态信息，通过查询“控制策略配置信息”(如表3)，得到对应的单次事件操作信息；

S312：控制器根据得到的单次事件操作信息，向对应的智能家居设备发送控制指令。

可以理解的是，控制器为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。结合本申请中所公开的实施例描述的各示例的单元(器、器件)及算法步骤，本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同的方法来实现所描述的功能，但是这种实现不应认为超出本申请实施例的技术方案的范围。

本申请实施例可以根据上述方法示例对控制器进行功能单元(器、器件)的划分，例如，可以对应各个功能划分各个功能单元(器、器件)，也可以将两个或两个以上的功能集成在一个处理单元(器、器件)中。上述集成的单元(器、器件)既可以采用硬件的形式实现，也可以采用软件功能单元(器、器件)的形式实现。需要说明的是，本申请实施例中对单元(器、器件)的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

在采用集成的单元(器、器件)的情况下，图4示出了本申请实施例提供的一种控制器的结构示意图。参阅图4所示，控制器400包括：用户行为状态信息获取模块401、处理模块402、控制模块403。

用户行为状态信息获取模块401，用于获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

处理模块402，用于比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型，以及响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于不同用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息；其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

控制模块403，用于根据所述单次事件操作信息执行对应的控制操作。

可选地，处理模块402还用于：比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之后，响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息。控制模块403还用于：根据所述循环事件操作信息执行对应的控制操作。

可选地，处理模块402还用于：比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之后，响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，将获得所述第一用户行为状态的时间与获得所述第二用户行为状态信息的时间之间的时间间隔与预设时间间隔进行比较；以及，响应于所述时间间隔大于所述预设时间间隔的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息。控制模块403还用于：根据所述循环事件操作信息执行对应的控制操作。

可选地，预先配置有用户行为状态信息与所对应的用户行为类型之间的第一对应关系。处理模块402还用于：比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之前，根据所述第一用户行为状态信息以及所述第二用户行为状态信息查询所述第一对应关系，获得所述第一用户行为状态信息和所述第二用户行为状态信息所对应的用户行为类型。

可选地，预先设置用户行为状态信息与音视频采集装置的位置的组合，与单次事件操作信息之间的第二对应关系。处理模块402具体用于：根据所述第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置查询所述第二对应关系，得到对应的单次事件操作信息。

可选地，所述单次事件操作信息或循环事件操作信息，至少包括以下操作信息之一：对至少一个智能家居设备的控制信息，用于生成和发送通知消息的控制信息，所述通知消息用于通知与所述第一用户行为状态信息对应的用户行为发生。

可选地，用户行为状态信息获取模块401具体用于：获得所述音视频采集装置发送的第一用户行为状态信息，所述第一用户行为状态信息是所述音视频采集装置根据采集到的用户行为音视频数据识别得到的用户行为信息；或者，获得所述音视频采集装置发送的用户行为音视频数据，根据所述用户行为音视频数据识别得到第一用户行为状态信息。

图5示出了本申请实施例提供的控制器500的结构示意图，即示出了控制器400的另一结构示意图。参阅图5所示，控制器500包括处理器501、存储器502，进一步地还可包括通信接口503。其中，处理器501也可以为控制器。所述处理器501被配置为支持控制器执行图2或图3中涉及的功能。通信接口503被配置为支持终端收发消息的功能。存储器502用于与处理器501耦合，其保存终端必要的程序指令和数据。其中，处理器501、通信接口503和存储器502相连，该存储器502用于存储指令，该处理器501用于执行该存储器502存储的指令，以控制通信接口503收发消息，完成上述方法中终端执行相应功能的步骤。

本申请实施例中，控制器400和控制器500所涉及的与本申请实施例提供的技术方案相关的概念，解释和详细说明及其他步骤请参见前述方法或其他实施例中关于这些内容的描述，此处不做赘述。

需要说明的是，本申请实施例上述涉及的处理器可以是中央处理器(centralprocessing unit，CPU)，通用处理器，数字信号处理器(digital signal processor，DSP)，专用集成电路(application-specific integrated circuit，ASIC)，现场可编程门阵列(field programmable gate array，FPGA)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请内容所描述的各种示例性的逻辑方框，模块和电路。处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等等。其中，所述存储器可以集成在所述处理器中，也可以与所述处理器分开设置。

本申请实施例还提供一种计算机存储介质，用于存储一些指令，这些指令被执行时，可以完成前述控制器所涉及的任意一种方法。

本领域内的技术人员应明白，本申请实施例可提供为方法、系统、或计算机程序产品。因此，本申请实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请实施例是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

Claims (10)

1.一种智能控制方法，其特征在于，所述方法包括：

获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型；其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；所述第一用户行为信息和所述第二用户行为信息均采集自同一用户或者分别采集自不同用户；

响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于不同用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息；

根据所述单次事件的操作信息执行对应的控制操作；

响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，判断是否允许执行循环操作，当不允许执行循环操作时，不执行控制操作。

2.如权利要求1所述的方法，其特征在于，所述响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，判断是否允许执行循环操作之后，所述方法还包括：

当允许执行循环操作时，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息；

根据所述循环事件操作信息执行对应的控制操作。

3.如权利要求1所述的方法，其特征在于，所述响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，判断是否允许执行循环操作之后，所述方法还包括：

当允许执行循环操作时，将获得所述第一用户行为状态的时间与获得所述第二用户行为状态信息的时间之间的时间间隔与预设时间间隔进行比较；

响应于所述时间间隔大于所述预设时间间隔的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息，并根据所述循环事件操作信息执行对应的控制操作。

4.如权利要求1所述的方法，其特征在于，预先配置有用户行为状态信息与所对应的用户行为类型之间的第一对应关系；

所述比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型之前，还包括：

根据所述第一用户行为状态信息以及所述第二用户行为状态信息查询所述第一对应关系，获得所述第一用户行为状态信息和所述第二用户行为状态信息所对应的用户行为类型。

5.如权利要求1所述的方法，其特征在于，预先设置用户行为状态信息与音视频采集装置的位置的组合，与单次事件操作信息之间的第二对应关系；

所述根据所述第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息，包括：

根据所述第一用户行为状态信息以及与第一用户行为状态信息对应的音视频采集装置的位置查询所述第二对应关系，得到对应的单次事件操作信息。

6.如权利要求1所述的方法，其特征在于，所述单次事件操作信息，至少包括以下操作信息之一：

对至少一个智能家居设备的控制信息；

用于生成和发送通知消息的控制信息，所述通知消息用于通知与所述第一用户行为状态信息对应的用户行为发生。

7.如权利要求1至6中任一项所述的方法，其特征在于，所述获得第一用户行为状态信息，包括：

获得所述音视频采集装置发送的第一用户行为状态信息，所述第一用户行为状态信息是所述音视频采集装置根据采集到的用户行为音视频数据识别得到的用户行为信息；或者

获得所述音视频采集装置发送的用户行为音视频数据，根据所述用户行为音视频数据识别得到第一用户行为状态信息。

8.一种智能控制装置，其特征在于，包括：

用户行为状态信息获取模块，用于获得第一用户行为状态信息，所述第一用户行为状态信息是根据位于第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；

处理模块，用于比较所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型，以及响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于不同用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的单次事件操作信息；以及还用于响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，判断是否允许执行循环操作；其中，所述第二用户行为状态信息是上一次获得到的用户行为状态信息，且所述第二用户行为状态信息是根据位于所述第一位置的音视频采集装置采集的用户行为音视频信息识别得到的；所述第一用户行为信息和所述第二用户行为信息均来自同一用户或者分别来自不同用户；

控制模块，用于根据所述单次事件操作信息执行对应的控制操作；以及当不允许执行循环操作时，不执行控制操作。

9.如权利要求8所述的装置，其特征在于，所述处理模块，还用于：

响应于所述第一用户行为状态信息与第二用户行为状态信息所对应的用户行为类型属于同一用户行为类型的比较结果，根据所述第一用户行为状态信息以及与所述第一用户行为状态信息对应的音视频采集装置的位置，获取对应的循环事件操作信息；

所述控制模块还用于：根据所述循环事件操作信息执行对应的控制操作。

10.一种控制器，其特征在于，包括：处理器、存储器；

所述处理器，用于读取所述存储器中的程序，执行如权利要求1至7中任一项所述的方法。

Images