CN113820963A - 一种基于物联网的智能家居控制方法及系统 - Google Patents
一种基于物联网的智能家居控制方法及系统 Download PDFInfo
- Publication number
- CN113820963A CN113820963A CN202111198301.6A CN202111198301A CN113820963A CN 113820963 A CN113820963 A CN 113820963A CN 202111198301 A CN202111198301 A CN 202111198301A CN 113820963 A CN113820963 A CN 113820963A
- Authority
- CN
- China
- Prior art keywords
- information
- user
- target
- control
- operation instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000013475 authorization Methods 0.000 claims abstract description 60
- 238000000605 extraction Methods 0.000 claims description 33
- 238000001514 detection method Methods 0.000 claims description 16
- 238000012790 confirmation Methods 0.000 claims description 8
- 239000013068 control sample Substances 0.000 claims description 8
- 238000004891 communication Methods 0.000 claims description 6
- 238000012549 training Methods 0.000 claims description 6
- 238000012795 verification Methods 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 238000012797 qualification Methods 0.000 abstract description 5
- 230000036544 posture Effects 0.000 description 15
- 230000003111 delayed effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Telephonic Communication Services (AREA)
- Selective Calling Equipment (AREA)
Abstract
本申请提供的基于物联网的智能家居控制方法及系统,涉及物联网技术领域。本发明在用户触发对目标家居设备的操作时获取用户操作家居控制器的图像画面信息;对图像画面信息中的用户进行身份识别,并对用户操作家居控制器生成的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;在没有相应控制内容的权限时,生成临时控制权限请求发送给具有授权资格的移动终端;在移动终端同意授权后,将第一操作指令发送给目标家居设备,以使家居设备执行第一操作指令。相对于现有技术,本发明针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高了白色噪音机等智能家居授权的精准度。
Description
技术领域
本申请涉及物联网技术领域,具体而言,涉及一种基于物联网的智能家居控制方法及系统。
背景技术
白色噪音机等智能家居是在互联网影响之下物联化的体现。智能家居通过物联网技术将家中的各种设备(如白色噪音机、音视频设备、照明系统、窗帘控制、空调控制、安防系统、数字影院系统、影音服务器、影柜系统、网络家电等)连接到一起,提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。随着物联网技术的发展,作为物联网的技术分支的智能家居越来越流行,家居的智能控制是智能家居的一种重要体现,然而,在现有技术中,由于白色噪音机等智能家居所涉及的场景可能并非单一的家庭场景(比如,展厅及旅店等),家居控制人员并非固定的家庭成员,这会导致家居控制存在授权不精准的技术问题,如何在非固定使用用户的场景下实现对智能家居权限的精准控制是本领域技术人员需要解决的技术问题。
发明内容
为了至少克服现有技术中的上述不足,本申请的目的在于提供一种基于物联网的智能家居控制方法及系统,用于解决上述技术问题。
第一方面,本申请实施例提供一种基于物联网的智能家居控制方法,应用于智能家居控制系统,所述智能家居控制系统包括通信连接的家居设备、家居控制器、云端服务器、传感器设备及移动终端,所述方法包括:
所述家居控制器接收用户的控制操作,将所述控制操作对应的第一操作指令发送给所述云端服务器,其中,所述第一操作指令包括目标家居设备信息及控制内容;
所述传感器设备获取所述用户操作所述家居控制器的图像画面信息,并将所述图像画面信息发送给所述云端服务器;
所述云端服务器对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;
若所述用户无控制目标家居设备执行相应控制内容的权限,则生成临时控制权限请求,并将所述临时控制权限请求发送给所述移动终端;
所述移动终端对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将所述选择操作对应的第二操作指令发送给所述云端服务器;
所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器。
在上述方案中,上述方案,首先,在用户触发对目标家居设备的操作时获取用户操作家居控制器的图像画面信息;接着,对图像画面信息中的用户进行身份识别,并对用户操作家居控制器生成的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;然后,在没有相应控制内容的权限时,生成临时控制权限请求发送给具有授权资格的移动终端;最后,在移动终端同意授权后,将第一操作指令发送给目标家居设备,以使家居设备执行第一操作指令。相对于现有技术,针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高家居授权的精准度。同时,针对该场景,用户只能获得临时控制权限,避免该非固定使用用户的场景下用户永久权限过多,降低家居设备的对永久权限管理难度。
在本申请实施例的一种可能实施方式中,所述云端服务器对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限的步骤,包括:
将所述画面信息输入用户身份识别网络;
获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息;
将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度;
将所述相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型;
对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型;
在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备执行相应控制内容的权限。
在本申请实施例的一种可能实施方式中,所述用户身份识别网络包括特征提取子模型及检验子模型,所述获取所述用户身份识别网络输出的用户生物特征识别信息的步骤,包括:
通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息;
通过所述用户身份识别网络的检验测子网络对所述目标部位特征信息进行检验,在检验通过后,输出的每个所述用户对应的目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
在本申请实施例的一种可能实施方式中,所述通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息的步骤,包括:
基于所述特征提取子模型中的对象检测网络对所述画面信息进行对象检测,从所述画面信息中检测出目标对象;
基于所述特征提取子模型中的目标部位特征提取单元对所述目标对象的目标部位进行特征提取得到目标部位特征信息,其中,所述目标特征部位包括人脸、手臂及腿部其中至少之一,所述目标部位特征信息包括目标部位中设定关键点的距离信息;
基于所述特征提取子模型中的参考物体检测网络对所述画面信息进行参考物体检测,从所述画面信息中检测出参考物体,并得到所述参考物体在所述画面信息中的尺寸信息,其中,所述参考物体包括所述家居控制器或家居设备;
根据所述目标部位特征信息与所述参考物体在所述画面信息中的尺寸信息,得到目标部位特征信息在所述画面信息中的参考尺寸信息。
在本申请实施例的一种可能实施方式中,所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令的步骤,包括:
在所述选择操作对应的第二操作指令为同意时,在所述第一操作指令中添加所述临时控制权限授权的时间信息,将添加所述临时控制权限授权的时间信息的第一操作指令发送给所述目标家居设备,以控制所述目标家居设备在所述临时控制权限授权的时间内执行所述第一操作指令中的相应控制内容。
在本申请实施例的一种可能实施方式中,在所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令之后,所述方法还包括:
所述目标家居设备检查所述用户的使用时间是否即将达到所述临时控制权限授权的时间,若检查到所述用户的使用时间即将达到所述临时控制权限授权的时间,则生成临时控制权限延期请求,并将所述临时控制权限延期请求发送给所述云端服务器;
所述云端服务器将所述临时控制权限延期请求发送给多个具体授权权限的移动终端,并在预设时间段内接受多个具有授权权限的移动终端的回复信息,其中,所述回复信息包括是否同意所述临时控制权限延期请求;
所述云端服务器对多个具有授权权限的移动终端的回复信息进行分析,在同意所述临时控制权限延期请求的移动终端的数量达到预设移动终端占比时,发送临时控制权限延期确认信息给所述目标家居设备;
所述目标家居设备在接受到所述临时控制权限延期确认信息后,将所述用户对所述目标家居设备的使用时间延长。
在本申请实施例的一种可能实施方式中,在所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令之后,所述方法还包括:
所述云端服务器控制所述传感器设备获取当前的目标家居设备使用状态信息,其中,所述目标家居设备使用状态信息包括目标家居设备的运行模式、运行温度及声量;
所述云端服务器接收所述传感器设备获取的当前的目标家居设备使用状态信息,并对所述当前的目标家居设备使用状态信息进行分析,若所述当前的目标家居设备使用状态超过所述临时控制权限中规定的使用状态要求时,所述云端服务器发送提醒信息到同意授予临时控制权限的移动终端;
所述云端服务器接收所述移动终端基于所述提醒信息的回复,若所述移动终端基于所述提醒信息的回复为停止临时控制权限,则控制所述目标家居设备停止运行,若所述移动终端基于所述提醒信息的回复为继续临时控制授权,则调整所述目标家居设备的运行状态,以使所述目标家居设备按照临时控制权限中规定的使用状态运行。
在本申请实施例的一种可能实施方式中,在所述用户使用所述目标家居设备的过程中,所述方法还包括:
所述传感器设备获取所述用户的姿态图像信息,并将所述姿态图像信息发送给所述云端服务器;
所述云端服务器将所述用户的姿态图像信息进行姿态特征提取,获得用户的姿态特征向量,并将所述姿态特征向量输入到训练好的姿态与控制模型中得到对应的目标家居设备控制功能项,其中,姿态与控制模型通过姿态控制样本训练得到,所述姿态控制样本包括所述不同姿态与其在不同目标家居设备中的标签,所述标签对应为控制功能项;
所述云端服务器将所述目标设备控制功能项发送给所述目标家居设备,由所述目标家居设备执行所述目标设备控制功能项。
第二方面,本申请实施例还提供一种基于物联网的智能家居控制系统,所述智能家居控制系统包括通信连接的家居设备、家居控制器、云端服务器、传感器设备及移动终端;
所述家居控制器,用于接收用户的控制操作,将所述控制操作对应的第一操作指令发送给所述云端服务器,其中,所述第一操作指令包括目标家居设备信息及控制内容;
所述传感器设备,用于获取所述用户操作所述家居控制器的图像画面信息,并将所述图像画面信息发送给所述云端服务器;
所述云端服务器,用于对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;
若所述用户无控制目标家居设备执行相应控制内容的权限,则生成临时控制权限请求,并将所述临时控制权限请求发送给所述移动终端;
所述移动终端,用于对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将所述选择操作对应的第二操作指令发送给所述云端服务器;
所述云端服务器,还用于在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器。
在本申请实施例的一种可能实施方式中,所述云端服务器具体用于:
将所述画面信息输入用户身份识别网络;
获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息;
将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度;
将所述相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型;
对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型;
在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备执行相应控制内容的权限。
基于上述任意一个方面,本申请实施例提供的技术方案,首先,在用户触发对目标家居设备的操作时获取用户操作家居控制器的图像画面信息;接着,对图像画面信息中的用户进行身份识别,并对用户操作家居控制器生成的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;然后,在没有相应控制内容的权限时,生成临时控制权限请求发送给具有授权资格的移动终端;最后,在移动终端同意授权后,将第一操作指令发送给目标家居设备,以使家居设备执行第一操作指令。相对于现有技术,针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高家居授权的精准度。同时,针对该场景,用户只能获得临时控制权限,避免该非固定使用用户的场景下用户永久权限过多,降低家居设备的对永久权限管理难度。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要调用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它相关的附图。
图1为实现本申请实施例提供的基于物联网的智能家居控制系统的可能结构示意图;
图2为本申请实施例提供的基于物联网的智能家居控制方法的流程示意图。
具体实施方式
下面结合说明书附图对本申请进行具体说明,方法实施例中的具体操作方法也可以应用于装置实施例或系统实施例中。
请参照图1,图1示例了本申请提供的一种基于物联网的智能家居控制系统1的可能结构示意图,在该示意图中,基于物联网的智能家居控制系统1可以包括通信连接的家居设备10、家居控制器20、云端服务器30、传感器设备40及移动终端50,图1所示的基于物联网的智能家居控制系统1仅为一种可行的示例,在其它可行的实施例中,该基于物联网的智能家居控制系统也可以仅包括图1所示组成部分的其中一部分或者还可以包括其它的组成部分。
在本申请实施例中家居设备10可以包括常见的家居用品,比如,电视、空调、扫地机器人、冰箱等,家居控制器20与家居设备10通信连接,其中一个家居控制器20可以控制多个家居设备10。传感器设备40可以是配至在家居设备10上的用于测量家居设备10运行状态参数的器件,比如,画面传感器、温度传感器、湿度传感器及声音传感器等,传感器设备40也可以是相对于家居设备10独立的设备,比如单独设置的图像传感器。
为了克服背景技术中存在的不足,发明人提供以下解决方案,请参照图2,图2为本申请实施例提供的基于物联网的智能家居控制方法的流程示意图,为了便于说明本申请的技术方案,下面结合图2对本申请提供的基于物联网的智能家居控制方法进行介绍。
步骤S11,家居控制器20接收用户的控制操作,将控制操作对应的第一操作指令发送给云端服务器30,其中,所述第一操作指令包括目标家居设备10信息及控制内容。
其中,家居控制器20根据用户控制操作生成第一操作指令,比如,在用户通过家居控制器20控制电视机播放影片时,生成的第一操作指令中可以包括电视机信息(比如,电视机的通信地址)及播放影片的控制内容。
步骤S12,传感器设备40获取用户操作所述家居控制器20的图像画面信息,并将图像画面信息发送给所述云端服务器30。
传感器设备40将用户操作家居控制器20的图像画面信息发送给云端服务器30,在该步骤中,传感器设备40获取的图像画面信息可以是用户正面操作家居控制器20画面信息,也可以是其他角度的画面信息,在此不作特殊限定,只需图像画面信息中包括操作家居控制器20的用户即可。
步骤S13,云端服务器30对所述画面信息进行处理,对图像画面信息中的用户进行识别,确定用户的身份信息,并对接收的第一操作指令进行分析确定用户是否具有控制目标家居设备10执行相应控制内容的权限。
在该步骤中,对用户的识别可以包括识别用户的年龄段(比如,幼童、儿童、少年、成人及老人等),也可以包括特殊用户识别比如(孕妇),身份信息包括上述年龄段对应的身份。
在云端服务器30中可以预先配置不同家居设备10对应不同年龄段用户的使用权限,比如,对于电视机而言,幼童不具有控制权限,儿童和少年具有观看少儿节目的权限,成人具有所有控制权限。
步骤S14,若用户无控制目标家居设备10执行相应控制内容的权限,则生成临时控制权限请求,并将临时控制权限请求发送给所述移动终端50。
在用户没有对目标家居设备10的控制权限时,云端服务器30生成临时控制权限请求,并发送给具有权限管理的移动终端50。其中,临时控制权限请求中包括临时授权时间,其中,临时授权时间可以根据不同场景进行设定,比如在旅店或民宿场景下,临时授权时间可以为24小时,在展厅场景下,临时授权时间可以为10分钟。
步骤S15,移动终端50对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将选择操作对应的第二操作指令发送给云端服务器30。
具有权限管控的用户通过移动终端50对临时控制权限请求进行管控,决定是否授权临时控制权限。具有权限管控的用户可以是对应场景的管理员或者现场工作者,比如在旅店或民宿场景下,具有权限管控的用户可以是大厅经理或民宿主人。
步骤S16,云端服务器30在接收到选择操作对应的第二操作指令,若选择操作对应的第二操作指令为同意,则发送所述第一操作指令给目标家居设备10,控制目标家居设备10执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器20。
本申请实施例提供的上述方案,首先,在用户触发对目标家居设备10的操作时获取用户操作家居控制器20的图像画面信息;接着,对图像画面信息中的用户进行身份识别,并对用户操作家居控制器20生成的第一操作指令进行分析确定所述用户是否具有控制目标家居设备10执行相应控制内容的权限;然后,在没有相应控制内容的权限时,生成临时控制权限请求发送给具有授权资格的移动终端50;最后,在移动终端50同意授权后,将第一操作指令发送给目标家居设备10,以使家居设备10执行第一操作指令。相对于现有技术,针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高家居授权的精准度。同时,针对该场景,用户只能获得临时控制权限,避免该非固定使用用户的场景下用户永久权限过多,降低家居设备10的对永久权限管理难度。
在本申请的一种可能的实施例中,步骤S13可以通过以下方式实现。
第一步,将画面信息输入用户身份识别网络,其中,用户身份识别网络提前训练得到。
第二步,获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
第三步,将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度。
在该步骤中,可以通过计算目标部位特征信息及目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息的欧式距离的方式,计算得到目标部位特征信息与各个设定部位特征信息之间的相似度。
第四步,将相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型。
在该步骤中,可以基于相似度最大的设定部位特征信息确定用户类型,具体地,可以基于用户的目标部位的长度及宽度等二维特征确定用户类型,比如根据用户的手臂长度或腿部长度确定用户是否为成人。
第五步,对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备10的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型。
第六步,在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备10执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备10执行相应控制内容的权限。
进一步地,在本申请实施例中,用户身份识别网络包括特征提取子模型及检验子模型,上述第二步骤可以由以下步骤实现。
首先,通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息;
然后,通过所述用户身份识别网络的检验测子网络对所述目标部位特征信息进行检验,在检验通过后,输出的每个所述用户对应的目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
具体地,该步骤可以通过以下步骤实现。
第一步,基于所述特征提取子模型中的对象检测网络对所述画面信息进行对象检测,从所述画面信息中检测出目标对象。
第二步,基于所述特征提取子模型中的目标部位特征提取单元对所述目标对象的目标部位进行特征提取得到目标部位特征信息。
其中,所述目标特征部位包括人脸、手臂及腿部其中至少之一,所述目标部位特征信息包括目标部位中设定关键点的距离信息;
第三步,基于所述特征提取子模型中的参考物体检测网络对所述画面信息进行参考物体检测,从所述画面信息中检测出参考物体,并得到所述参考物体在所述画面信息中的尺寸信息。
其中,所述参考物体包括所述家居控制器20或家居设备10。
第四步,根据所述目标部位特征信息与所述参考物体在所述画面信息中的尺寸信息,得到目标部位特征信息在所述画面信息中的参考尺寸信息。
在该步骤中,可以基于参考物体已知的尺寸,以及画面信息中参考物体与目标部位的相对尺寸关系,确定目标部位特征信息在所述画面信息中的参考尺寸信息,为精确判断用户类型提供保障。另外,相对于现有技术,采用人脸识别进行权限管控的方式,在非固定用户的场景下,本申请提供技术方案的适用性更高,同时对传感器设备40拍摄角度的要求也更低,无需对准人脸面部进行识别。
进一步地,在本申请实施例的一种可能实施方式中,步骤S16可以通过以下方式实现。
在所述选择操作对应的第二操作指令为同意时,在所述第一操作指令中添加所述临时控制权限授权的时间信息,将添加所述临时控制权限授权的时间信息的第一操作指令发送给所述目标家居设备10,以控制所述目标家居设备10在所述临时控制权限授权的时间内执行所述第一操作指令中的相应控制内容。
进一步地,在本申请实施例的一种可能实施方式中,在步骤S16之后,基于物联网的智能家居控制方法还可以包括:
首先,目标家居设备10检查所述用户的使用时间是否即将达到所述临时控制权限授权的时间,若检查到所述用户的使用时间即将达到所述临时控制权限授权的时间,则生成临时控制权限延期请求,并将所述临时控制权限延期请求发送给所述云端服务器30。
其中,即将达到所述临时控制权限授权的时间可以是距离临时控制权限授权的结束时间为预设时间,比如10分钟。
接着,所述云端服务器30将所述临时控制权限延期请求发送给多个具体授权权限的移动终端50,并在预设时间段内接受多个具有授权权限的移动终端50的回复信息,其中,所述回复信息包括是否同意所述临时控制权限延期请求。
然后,所述云端服务器30对多个具有授权权限的移动终端50的回复信息进行分析,在同意所述临时控制权限延期请求的移动终端50的数量达到预设移动终端50占比时,发送临时控制权限延期确认信息给所述目标家居设备10。
最后,所述目标家居设备10在接受到所述临时控制权限延期确认信息后,将所述用户对所述目标家居设备10的使用时间延长。
上述设置,可以避免在用户不固定场景下某一用户长时间使用设备导致其他用户无法使用的问题,同时采用非主动提醒的方式,可以在用户无感的情况下决定是否对其授权权限进行延期,提高用户的使用体验,增强产品的市场竞争力。
进一步地,在本申请实施例的另一种可能实施方式中,在步骤S16之后,基于物联网的智能家居控制方法还可以包括:
首先,所述传感器设备40获取所述用户的姿态图像信息,并将所述姿态图像信息发送给所述云端服务器30。
然后,所述云端服务器30将所述用户的姿态图像信息进行姿态特征提取,获得用户的姿态特征向量,并将所述姿态特征向量输入到训练好的姿态与控制模型中得到对应的目标家居设备10控制功能项,其中,姿态与控制模型通过姿态控制样本训练得到,所述姿态控制样本包括所述不同姿态与其在不同目标家居设备10中的标签,所述标签对应为控制功能项。
最后,所述云端服务器30将所述目标设备控制功能项发送给所述目标家居设备10,由所述目标家居设备10执行所述目标设备控制功能项。
比如,在使用智能空调的场景中,可以通过检测到的用户姿态(比如,是否踢被子,是否身体蜷曲)判断用户在睡眠过程中的环境温度是否合适,并通过用户姿态进行环境问题调整,比如,在用户踢被子时,控制智能空调将温度下调。
上述技术方案,相对于现有技术,针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高家居授权的精准度。同时,针对该场景,用户只能获得临时控制权限,避免该非固定使用用户的场景下用户永久权限过多,降低家居设备10的对永久权限管理难度。另外,还可以在用户无感的情况下决定是否对其授权权限进行延期,提高用户的使用体验,增强产品的市场竞争力。
请再次参照图1,本申请实施例还提供一种基于物联网的智能家居控制系统1,与上述实施例相类似,下面对本申请提供的基于物联网的智能家居控制系统1进行详细介绍。
家居控制器20,用于接收用户的控制操作,将控制操作对应的第一操作指令发送给云端服务器30,其中,所述第一操作指令包括目标家居设备10信息及控制内容。
其中,家居控制器20根据用户控制操作生成第一操作指令,比如,在用户通过家居控制器20控制电视机播放影片时,生成的第一操作指令中可以包括电视机信息(比如,电视机的通信地址)及播放影片的控制内容。
传感器设备40,用于获取用户操作所述家居控制器20的图像画面信息,并将图像画面信息发送给所述云端服务器30。
传感器设备40,用于将用户操作家居控制器20的图像画面信息发送给云端服务器30,在该步骤中,传感器设备40获取的图像画面信息可以是用户正面操作家居控制器20画面信息,也可以是其他角度的画面信息,在此不作特殊限定,只需图像画面信息中包括操作家居控制器20的用户即可。
云端服务器30,用于对所述画面信息进行处理,对图像画面信息中的用户进行识别,确定用户的身份信息,并对接收的第一操作指令进行分析确定用户是否具有控制目标家居设备10执行相应控制内容的权限。
对用户的识别可以包括识别用户的年龄段(比如,幼童、儿童、少年、成人及老人等),也可以包括特殊用户识别比如(孕妇),身份信息包括上述年龄段对应的身份。
在云端服务器30中可以预先配置不同家居设备10对应不同年龄段用户的使用权限,比如,对于电视机而言,幼童不具有控制权限,儿童和少年具有观看少儿节目的权限,成人具有所有控制权限。
云端服务器30,用于若用户无控制目标家居设备10执行相应控制内容的权限,则生成临时控制权限请求,并将临时控制权限请求发送给所述移动终端50。
在用户没有对目标家居设备10的控制权限时,云端服务器30生成临时控制权限请求,并发送给具有权限管理的移动终端50。其中,临时控制权限请求中包括临时授权时间,其中,临时授权时间可以根据不同场景进行设定,比如在旅店或民宿场景下,临时授权时间可以为24小时,在展厅场景下,临时授权时间可以为10分钟。
移动终端50,用于对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将选择操作对应的第二操作指令发送给云端服务器30。
具有权限管控的用户通过移动终端50对临时控制权限请求进行管控,决定是否授权临时控制权限。具有权限管控的用户可以是对应场景的管理员或者现场工作者,比如在旅店或民宿场景下,具有权限管控的用户可以是大厅经理或民宿主人。
云端服务器30,还用于在接收到选择操作对应的第二操作指令,若选择操作对应的第二操作指令为同意,则发送所述第一操作指令给目标家居设备10,控制目标家居设备10执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器20。
在本申请的一种可能的实施例中,云端服务器30可以采用以下方式实现对图像画面信息中的用户进行识别,确定用户的身份信息,并对接收的第一操作指令进行分析确定用户是否具有控制目标家居设备10执行相应控制内容的权限。
第一步,将画面信息输入用户身份识别网络,其中,用户身份识别网络提前训练得到。
第二步,获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
第三步,将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度。
在该步骤中,可以通过计算目标部位特征信息及目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息的欧式距离的方式,计算得到目标部位特征信息与各个设定部位特征信息之间的相似度。
第四步,将相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型。
在该步骤中,可以基于相似度最大的设定部位特征信息确定用户类型,具体地,可以基于用户的目标部位的长度及宽度等二维特征确定用户类型,比如根据用户的手臂长度或腿部长度确定用户是否为成人。
第五步,对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备10的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型。
第六步,在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备10执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备10执行相应控制内容的权限。
进一步地,在本申请实施例中,用户身份识别网络包括特征提取子模型及检验子模型,上述第二步骤可以由以下步骤实现。
首先,通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息;
然后,通过所述用户身份识别网络的检验测子网络对所述目标部位特征信息进行检验,在检验通过后,输出的每个所述用户对应的目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
具体地,该步骤可以通过以下步骤实现。
第一步,基于所述特征提取子模型中的对象检测网络对所述画面信息进行对象检测,从所述画面信息中检测出目标对象。
第二步,基于所述特征提取子模型中的目标部位特征提取单元对所述目标对象的目标部位进行特征提取得到目标部位特征信息。
其中,所述目标特征部位包括人脸、手臂及腿部其中至少之一,所述目标部位特征信息包括目标部位中设定关键点的距离信息;
第三步,基于所述特征提取子模型中的参考物体检测网络对所述画面信息进行参考物体检测,从所述画面信息中检测出参考物体,并得到所述参考物体在所述画面信息中的尺寸信息。
其中,所述参考物体包括所述家居控制器20或家居设备10。
第四步,根据所述目标部位特征信息与所述参考物体在所述画面信息中的尺寸信息,得到目标部位特征信息在所述画面信息中的参考尺寸信息。
在该步骤中,可以基于参考物体已知的尺寸,以及画面信息中参考物体与目标部位的相对尺寸关系,确定目标部位特征信息在所述画面信息中的参考尺寸信息,为精确判断用户类型提供保障。另外,相对于现有技术,采用人脸识别进行权限管控的方式,在非固定用户的场景下,本申请提供技术方案的适用性更高,同时对传感器设备40拍摄角度的要求也更低,无需对准人脸面部进行识别。
进一步地,在本申请实施例的一种可能实施方式中,所述云端服务器30还可以用于。
在所述选择操作对应的第二操作指令为同意时,在所述第一操作指令中添加所述临时控制权限授权的时间信息,将添加所述临时控制权限授权的时间信息的第一操作指令发送给所述目标家居设备10,以控制所述目标家居设备10在所述临时控制权限授权的时间内执行所述第一操作指令中的相应控制内容。
进一步地,在本申请实施例的一种可能实施方式中。
目标家居设备10,用于检查所述用户的使用时间是否即将达到所述临时控制权限授权的时间,若检查到所述用户的使用时间即将达到所述临时控制权限授权的时间,则生成临时控制权限延期请求,并将所述临时控制权限延期请求发送给所述云端服务器30。
其中,即将达到所述临时控制权限授权的时间可以是距离临时控制权限授权的结束时间为预设时间,比如10分钟。
云端服务器30,用于将所述临时控制权限延期请求发送给多个具体授权权限的移动终端50,并在预设时间段内接受多个具有授权权限的移动终端50的回复信息,其中,所述回复信息包括是否同意所述临时控制权限延期请求。
云端服务器30,还用于对多个具有授权权限的移动终端50的回复信息进行分析,在同意所述临时控制权限延期请求的移动终端50的数量达到预设移动终端50占比时,发送临时控制权限延期确认信息给所述目标家居设备10。
目标家居设备10,用于在接受到所述临时控制权限延期确认信息后,将所述用户对所述目标家居设备10的使用时间延长。
上述设置,可以避免在用户不固定场景下某一用户长时间使用设备导致其他用户无法使用的问题,同时采用非主动提醒的方式,可以在用户无感的情况下决定是否对其授权权限进行延期,提高用户的使用体验,增强产品的市场竞争力。
进一步地,在本申请实施例的另一种可能实施方式中。
传感器设备40,用于获取所述用户的姿态图像信息,并将所述姿态图像信息发送给所述云端服务器30。
云端服务器30,用于将所述用户的姿态图像信息进行姿态特征提取,获得用户的姿态特征向量,并将所述姿态特征向量输入到训练好的姿态与控制模型中得到对应的目标家居设备10控制功能项,其中,姿态与控制模型通过姿态控制样本训练得到,所述姿态控制样本包括所述不同姿态与其在不同目标家居设备10中的标签,所述标签对应为控制功能项。
云端服务器30,用于将所述目标设备控制功能项发送给所述目标家居设备10,由所述目标家居设备10执行所述目标设备控制功能项。
比如,在使用智能空调的场景中,可以通过检测到的用户姿态(比如,是否踢被子,是否身体蜷曲)判断用户在睡眠过程中的环境温度是否合适,并通过用户姿态进行环境问题调整,比如,在用户踢被子时,控制智能空调将温度下调。
综上所述,本申请实施例提供的基于物联网的智能家居控制方法及系统,首先,在用户触发对目标家居设备的操作时获取用户操作家居控制器的图像画面信息;接着,对图像画面信息中的用户进行身份识别,并对用户操作家居控制器生成的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;然后,在没有相应控制内容的权限时,生成临时控制权限请求发送给具有授权资格的移动终端;最后,在移动终端同意授权后,将第一操作指令发送给目标家居设备,以使家居设备执行第一操作指令。相对于现有技术,针对非固定使用用户的场景可以通过远端授权的方式对用户进行精确授权,提高家居授权的精准度。
此外,除非权利要求中明确说明,本说明书处理元素和序列的顺序、数字字母的使用、或其它名称的使用,并非用于限定本说明书流程和方法的顺序。尽管上述披露中通过各种示例讨论了一些目前认为有用的发明实施例,但应当理解的是,该类细节仅起到说明的目的,附加的权利要求并不仅限于披露的实施例,相反,权利要求旨在覆盖所有符合本说明书实施例实质和范围的修正和等价组合。例如,虽然以上所描述的系统组件可以通过硬件设备实现,但是也可以只通过软件的解决方案得以实现,如在现有的服务器或移动设备上安装所描述的系统。
同理,应当注意的是,为了简化本说明书披露的表述,从而帮助对一个或多个发明实施例的理解,前文对本说明书实施例的描述中,有时会将多种特征归并至一个实施例、附图或对其的描述中。但是,这种披露方法并不意味着本说明书对象所需要的特征比权利要求中提及的特征多。实际上,实施例的特征要少于上述披露的单个实施例的全部特征。
以上所描述的实施例仅仅是本申请的一部分实施例,而不是全部的实施例。通常在附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,在附图中提供的本申请的实施例的详细描述并非旨在限制本申请的保护范围,而仅仅是表示本申请的选定实施例。基于此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种基于物联网的智能家居控制方法,应用于智能家居控制系统,其特征在于,所述智能家居控制系统包括通信连接的家居设备、家居控制器、云端服务器、传感器设备及移动终端,所述方法包括:
所述家居控制器接收用户的控制操作,将所述控制操作对应的第一操作指令发送给所述云端服务器,其中,所述第一操作指令包括目标家居设备信息及控制内容;
所述传感器设备获取所述用户操作所述家居控制器的图像画面信息,并将所述图像画面信息发送给所述云端服务器;
所述云端服务器对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;
若所述用户无控制目标家居设备执行相应控制内容的权限,则生成临时控制权限请求,并将所述临时控制权限请求发送给所述移动终端;
所述移动终端对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将所述选择操作对应的第二操作指令发送给所述云端服务器;
所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器。
2.如权利要求1所述的基于物联网的智能家居控制方法,其特征在于,所述云端服务器对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限的步骤,包括:
将所述画面信息输入用户身份识别网络;
获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息;
将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度;
将所述相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型;
对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型;
在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备执行相应控制内容的权限。
3.如权利要求2所述的基于物联网的智能家居控制方法,其特征在于,所述用户身份识别网络包括特征提取子模型及检验子模型,所述获取所述用户身份识别网络输出的用户生物特征识别信息的步骤,包括:
通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息;
通过所述用户身份识别网络的检验测子网络对所述目标部位特征信息进行检验,在检验通过后,输出的每个所述用户对应的目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息。
4.如权利要求3所述的基于物联网的智能家居控制方法,其特征在于,所述通过所述用户身份识别网络的特征提取子模型对所述画面信息进行特征提取,得到对应的目标部位特征信息及每个目标部位特征信息在所述画面信息中的参考尺寸信息的步骤,包括:
基于所述特征提取子模型中的对象检测网络对所述画面信息进行对象检测,从所述画面信息中检测出目标对象;
基于所述特征提取子模型中的目标部位特征提取单元对所述目标对象的目标部位进行特征提取得到目标部位特征信息,其中,所述目标特征部位包括人脸、手臂及腿部其中至少之一,所述目标部位特征信息包括目标部位中设定关键点的距离信息;
基于所述特征提取子模型中的参考物体检测网络对所述画面信息进行参考物体检测,从所述画面信息中检测出参考物体,并得到所述参考物体在所述画面信息中的尺寸信息,其中,所述参考物体包括所述家居控制器或家居设备;
根据所述目标部位特征信息与所述参考物体在所述画面信息中的尺寸信息,得到目标部位特征信息在所述画面信息中的参考尺寸信息。
5.如权利要求1所述的基于物联网的智能家居控制方法,其特征在于,所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令的步骤,包括:
在所述选择操作对应的第二操作指令为同意时,在所述第一操作指令中添加所述临时控制权限授权的时间信息,将添加所述临时控制权限授权的时间信息的第一操作指令发送给所述目标家居设备,以控制所述目标家居设备在所述临时控制权限授权的时间内执行所述第一操作指令中的相应控制内容。
6.如权利要求5所述的基于物联网的智能家居控制方法,其特征在于,在所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令之后,所述方法还包括:
所述目标家居设备检查所述用户的使用时间是否即将达到所述临时控制权限授权的时间,若检查到所述用户的使用时间即将达到所述临时控制权限授权的时间,则生成临时控制权限延期请求,并将所述临时控制权限延期请求发送给所述云端服务器;
所述云端服务器将所述临时控制权限延期请求发送给多个具体授权权限的移动终端,并在预设时间段内接受多个具有授权权限的移动终端的回复信息,其中,所述回复信息包括是否同意所述临时控制权限延期请求;
所述云端服务器对多个具有授权权限的移动终端的回复信息进行分析,在同意所述临时控制权限延期请求的移动终端的数量达到预设移动终端占比时,发送临时控制权限延期确认信息给所述目标家居设备;
所述目标家居设备在接受到所述临时控制权限延期确认信息后,将所述用户对所述目标家居设备的使用时间延长。
7.如权利要求5所述的基于物联网的智能家居控制方法,其特征在于,在所述云端服务器在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令之后,所述方法还包括:
所述云端服务器控制所述传感器设备获取当前的目标家居设备使用状态信息,其中,所述目标家居设备使用状态信息包括目标家居设备的运行模式、运行温度及声量;
所述云端服务器接收所述传感器设备获取的当前的目标家居设备使用状态信息,并对所述当前的目标家居设备使用状态信息进行分析,若所述当前的目标家居设备使用状态超过所述临时控制权限中规定的使用状态要求时,所述云端服务器发送提醒信息到同意授予临时控制权限的移动终端;
所述云端服务器接收所述移动终端基于所述提醒信息的回复,若所述移动终端基于所述提醒信息的回复为停止临时控制权限,则控制所述目标家居设备停止运行,若所述移动终端基于所述提醒信息的回复为继续临时控制授权,则调整所述目标家居设备的运行状态,以使所述目标家居设备按照临时控制权限中规定的使用状态运行。
8.如权利要求7所述的基于物联网的智能家居控制方法,其特征在于,在所述用户使用所述目标家居设备的过程中,所述方法还包括:
所述传感器设备获取所述用户的姿态图像信息,并将所述姿态图像信息发送给所述云端服务器;
所述云端服务器将所述用户的姿态图像信息进行姿态特征提取,获得用户的姿态特征向量,并将所述姿态特征向量输入到训练好的姿态与控制模型中得到对应的目标家居设备控制功能项,其中,姿态与控制模型通过姿态控制样本训练得到,所述姿态控制样本包括所述不同姿态与其在不同目标家居设备中的标签,所述标签对应为控制功能项;
所述云端服务器将所述目标设备控制功能项发送给所述目标家居设备,由所述目标家居设备执行所述目标设备控制功能项。
9.一种基于物联网的智能家居控制系统,其特征在于,所述智能家居控制系统包括通信连接的家居设备、家居控制器、云端服务器、传感器设备及移动终端;
所述家居控制器,用于接收用户的控制操作,将所述控制操作对应的第一操作指令发送给所述云端服务器,其中,所述第一操作指令包括目标家居设备信息及控制内容;
所述传感器设备,用于获取所述用户操作所述家居控制器的图像画面信息,并将所述图像画面信息发送给所述云端服务器;
所述云端服务器,用于对所述画面信息进行处理,对所述图像画面信息中的用户进行识别,确定所述用户的身份信息,并对接收的第一操作指令进行分析确定所述用户是否具有控制目标家居设备执行相应控制内容的权限;
若所述用户无控制目标家居设备执行相应控制内容的权限,则生成临时控制权限请求,并将所述临时控制权限请求发送给所述移动终端;
所述移动终端,用于对所述临时控制权限请求进行显示,并接收对是否授予临时控制权限的选择操作,并将所述选择操作对应的第二操作指令发送给所述云端服务器;
所述云端服务器,还用于在接收到所述选择操作对应的第二操作指令,若所述选择操作对应的第二操作指令为同意,则发送所述第一操作指令给所述目标家居设备,控制所述目标家居设备执行所述第一操作指令;若所述选择操作对应的第二操作指令为拒绝,则发送不予授权的提示信息给所述家居控制器。
10.如权利要求9所述的基于物联网的智能家居控制系统,其特征在于,所述云端服务器具体用于:
将所述画面信息输入用户身份识别网络;
获取所述用户身份识别网络输出的用户生物特征识别信息,所述用户生物特征识别信息包括所述用户对应的至少一个目标部位特征信息、及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息;
将每个所述目标部位特征信息及每个所述目标部位特征信息在所述画面信息中对应的参考尺寸信息与预先配置的用户特征库中的设定部位特征信息及参考尺寸信息进行相似度计算,得到所述目标部位特征信息与各个设定部位特征信息之间的相似度;
将所述相似度最大的设定部位特征信息作为与所述目标部位特征信息匹配的部位特征信息,并获取所述相似度最大的设定部位特征信息对应的用户类型,作为所述用户的类型;
对所述接收的第一操作指令进行分析,根据所述第一操作指令获取所述目标家居设备的控制权限列表,其中,所述控制权限列表包括每一控制权限对应的用户类型;
在所述控制权限列表中查询所述第一操作指令中控制内容对应控制权限的用户类型,若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型不匹配,则判定所述用户不具有控制目标家居设备执行相应控制内容的权限;若所述控制权限列表中所述第一操作指令中控制内容对应控制权限的用户类型与所述用户的类型匹配,则判定所述用户具有控制目标家居设备执行相应控制内容的权限。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111198301.6A CN113820963B (zh) | 2021-10-14 | 2021-10-14 | 一种基于物联网的智能家居控制方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111198301.6A CN113820963B (zh) | 2021-10-14 | 2021-10-14 | 一种基于物联网的智能家居控制方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113820963A true CN113820963A (zh) | 2021-12-21 |
CN113820963B CN113820963B (zh) | 2023-10-03 |
Family
ID=78916623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111198301.6A Active CN113820963B (zh) | 2021-10-14 | 2021-10-14 | 一种基于物联网的智能家居控制方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113820963B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115242425A (zh) * | 2022-05-31 | 2022-10-25 | 北京北信源软件股份有限公司 | 家居设备控制方法、装置、计算机设备和存储介质 |
CN115514993A (zh) * | 2022-09-29 | 2022-12-23 | 中移互联网有限公司 | 云机的操作控制方法以及云机的操作控制系统 |
CN117690000A (zh) * | 2023-09-27 | 2024-03-12 | 中科迈航信息技术有限公司 | 一种基于人工智能的物联网数据交互方法及系统 |
CN117826768A (zh) * | 2024-01-05 | 2024-04-05 | 南京海汇装备科技有限公司 | 一种基于多源数据的信息交互安全智能监控系统及方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009110494A (ja) * | 2007-10-09 | 2009-05-21 | Yahoo Japan Corp | 家電ログインシステム |
CN104079543A (zh) * | 2013-03-29 | 2014-10-01 | 珠海格力电器股份有限公司 | 智能家居系统监控权限的获取方法、装置和系统 |
CN106453427A (zh) * | 2016-12-14 | 2017-02-22 | 宁夏煜隆科技有限公司 | 智能家居中心控制服务器 |
CN106789478A (zh) * | 2016-12-30 | 2017-05-31 | 深圳智乐信息科技有限公司 | 一种更换和控制智能家居的方法及系统 |
US20190028290A1 (en) * | 2016-01-13 | 2019-01-24 | Fivegt Co., Ltd. | Home automation control system using face recognition, and method therefor |
CN111856962A (zh) * | 2020-08-13 | 2020-10-30 | 郑州智利信信息技术有限公司 | 一种基于云计算的智能家居控制系统 |
-
2021
- 2021-10-14 CN CN202111198301.6A patent/CN113820963B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009110494A (ja) * | 2007-10-09 | 2009-05-21 | Yahoo Japan Corp | 家電ログインシステム |
CN104079543A (zh) * | 2013-03-29 | 2014-10-01 | 珠海格力电器股份有限公司 | 智能家居系统监控权限的获取方法、装置和系统 |
US20190028290A1 (en) * | 2016-01-13 | 2019-01-24 | Fivegt Co., Ltd. | Home automation control system using face recognition, and method therefor |
CN106453427A (zh) * | 2016-12-14 | 2017-02-22 | 宁夏煜隆科技有限公司 | 智能家居中心控制服务器 |
CN106789478A (zh) * | 2016-12-30 | 2017-05-31 | 深圳智乐信息科技有限公司 | 一种更换和控制智能家居的方法及系统 |
CN111856962A (zh) * | 2020-08-13 | 2020-10-30 | 郑州智利信信息技术有限公司 | 一种基于云计算的智能家居控制系统 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115242425A (zh) * | 2022-05-31 | 2022-10-25 | 北京北信源软件股份有限公司 | 家居设备控制方法、装置、计算机设备和存储介质 |
CN115242425B (zh) * | 2022-05-31 | 2024-03-26 | 北京北信源软件股份有限公司 | 家居设备控制方法、装置、计算机设备和存储介质 |
CN115514993A (zh) * | 2022-09-29 | 2022-12-23 | 中移互联网有限公司 | 云机的操作控制方法以及云机的操作控制系统 |
CN115514993B (zh) * | 2022-09-29 | 2023-09-19 | 中移互联网有限公司 | 云机的操作控制方法以及云机的操作控制系统 |
CN117690000A (zh) * | 2023-09-27 | 2024-03-12 | 中科迈航信息技术有限公司 | 一种基于人工智能的物联网数据交互方法及系统 |
CN117826768A (zh) * | 2024-01-05 | 2024-04-05 | 南京海汇装备科技有限公司 | 一种基于多源数据的信息交互安全智能监控系统及方法 |
CN117826768B (zh) * | 2024-01-05 | 2024-08-06 | 南京海汇装备科技有限公司 | 一种基于多源数据的信息交互安全智能监控系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113820963B (zh) | 2023-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113820963B (zh) | 一种基于物联网的智能家居控制方法及系统 | |
CN111937051B (zh) | 使用增强现实可视化的智能家居设备放置和安装 | |
CN110535732B (zh) | 一种设备控制方法、装置、电子设备及存储介质 | |
US11941874B2 (en) | User interfaces to configure a thermal imaging system | |
US10915777B2 (en) | Communication terminal, communication system, and image processing method | |
US20140254866A1 (en) | Predictive analysis using vehicle license plate recognition | |
CN106506442A (zh) | 一种智能家居多用户身份识别及其权限管理系统 | |
US20140192197A1 (en) | Method and apparatus for controlling access to a home using visual cues | |
US20140254878A1 (en) | System and method for scanning vehicle license plates | |
US20140254877A1 (en) | System and method for identifying a vehicle license plate | |
WO2017166469A1 (zh) | 一种基于智能电视机的安防方法、装置 | |
US11776308B2 (en) | Frictionless access control system embodying satellite cameras for facial recognition | |
US20210209877A1 (en) | Facial recognition frictionless access control | |
CN109544748A (zh) | 门禁管理方法及门禁控制终端、系统 | |
JP2022546438A (ja) | イベントクリップを提供するための、方法、電子装置、サーバシステム、およびプログラム | |
KR20160053601A (ko) | 영상 처리 장치 및 방법 | |
CN112329504A (zh) | 门开关状态监测方法、装置、设备及计算机可读存储介质 | |
CN110211271A (zh) | 网约房管理方法、管理平台及系统 | |
CN111447225B (zh) | 一种物联网访问控制方法、装置及系统 | |
CN105610821A (zh) | 安全验证方法及装置 | |
CN106559293B (zh) | 与网络接入设备通信、网络接入设备通信的方法、装置和系统 | |
US10452963B2 (en) | Arming and/or altering a home alarm system by specified positioning of everyday objects within view of a security camera | |
WO2022052725A1 (zh) | 预警方法、装置、智能电视及计算机可读存储介质 | |
CN113538763A (zh) | 门禁打开方法、智能终端及服务器 | |
CN108537926A (zh) | 一种无人商店监控管理系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |