CN108279573A - 基于人体属性检测的控制方法、装置、智能家电和介质 - Google Patents
基于人体属性检测的控制方法、装置、智能家电和介质 Download PDFInfo
- Publication number
- CN108279573A CN108279573A CN201810113130.4A CN201810113130A CN108279573A CN 108279573 A CN108279573 A CN 108279573A CN 201810113130 A CN201810113130 A CN 201810113130A CN 108279573 A CN108279573 A CN 108279573A
- Authority
- CN
- China
- Prior art keywords
- target person
- human body
- intelligent appliance
- control instruction
- attribute information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 33
- 238000000034 method Methods 0.000 title claims abstract description 33
- 230000009471 action Effects 0.000 claims abstract description 29
- 238000003062 neural network model Methods 0.000 claims abstract description 25
- 238000012545 processing Methods 0.000 claims abstract description 12
- 238000012360 testing method Methods 0.000 claims abstract description 12
- 238000004378 air conditioning Methods 0.000 claims description 35
- 230000015654 memory Effects 0.000 claims description 17
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000012423 maintenance Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 210000002310 elbow joint Anatomy 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000000366 juvenile effect Effects 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Air Conditioning Control Device (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
Abstract
本发明实施例公开了一种基于人体属性检测的控制方法、装置、智能家电和介质。本发明实施例基于人体属性检测的控制方法，包括：对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。本发明实施例从图像中识别出相比人脸识别更全面人物属性信息，实现更精准的智能家电控制。
Description
技术领域
本发明实施例涉及智能家电技术，尤其涉及一种基于人体属性检测的控制方法、装置、智能家电和介质。
背景技术
智能家电就是将微处理器、传感器技术和网络通信技术引入家电设备后形成的家电产品，具有自动感知住宅空间状态、家电自身状态和家电服务状态的能力，可以自动控制，或者接收住宅用户在住宅内或远程的控制指令。智能家电与传统家电的不同在于智能家电实现了拟人智能，其对人的情感、动作和行为习惯都可以感知，并按照这样的感知做一些智能化的执行。
例如在空调上增加人脸识别装置，通过识别检测人的脸部特征信息，来判断人的性别、年龄等人体属性信息，结合这些人体属性信息控制空调送风的风量大小、送风温度、送风方向等。
但是，上述技术方案是基于对拍摄的图像中人脸的识别，可以获取到的信息有限，只能局限于对脸部的认知。
发明内容
本发明实施例提供一种基于人体属性检测的控制方法、装置、智能家电和介质，以从图像中识别出相比人脸识别更全面人物属性信息，实现更精准的智能家电控制。
第一方面，本发明实施例提供了一种基于人体属性检测的控制方法，包括：
对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；
根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
可选的，所述人体属性信息包括所述目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息。
可选的，所述根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制，包括下述至少一种：
根据所述外貌或所述衣着确定所述目标人物的年龄范围，并根据所述年龄范围产生对空调或电视机的控制指令，所述空调的控制指令包括与所述年龄范围对应的送风强度、温度和方向，所述电视机的控制指令包括与所述年龄范围对应的电视播放内容；和，
根据所述位置或所述运动轨迹产生对空调的控制指令，所述控制指令包括与所述位置或所述运动轨迹对应的送风方向；和，
根据所述姿态确定所述目标人物的状态，并根据所述目标人物的状态产生对空调的控制指令，所述空调的控制指令包括与所述目标人物的状态对应的送风强度、温度和方向。
可选的，所述根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制，包括：
当智能家电作用范围内的所述目标人物为一人时，根据所述目标人物的人体属性信息得到对智能家电的所述控制指令，并进行控制；
当智能家电作用范围内的所述目标人物为多人时，确定其中至少一人为代表人物，根据所述代表人物的人体属性信息得到对智能家电的所述控制指令，并进行控制，其中，所述代表人物是多个所述目标人物中年纪最大者、年纪最小者或者预先设置的指定人物。
可选的，还包括：
记录设定时期内得到所述目标人物的标志性人体属性信息，并根据所述标志性人体属性信息更新所述神经网络模型。
可选的，在所述对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像之前，还包括：
根据已获取的人体图像和人体属性信息之间的关系训练得到所述神经网络模型。
可选的，在所述将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息之前，还包括：
在所述目标人物的图像中确定所述目标人物的身体关键部位对应的关键点，并根据所述关键点将所述目标人物的图像中的所述目标人物的上半身调整为与水平线垂直。
第二方面，本发明实施例提供了一种基于人体属性检测的控制装置，包括：
图像检测模块，用于对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
人体识别模块，用于将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；
控制模块，用于根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
可选的，所述人体属性信息包括所述目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息。
可选的，所述控制模块，具体用于根据所述外貌或所述衣着确定所述目标人物的年龄范围，并根据所述年龄范围产生对空调或电视机的控制指令，所述空调的控制指令包括与所述年龄范围对应的送风强度、温度和方向，所述电视机的控制指令包括与所述年龄范围对应的电视播放内容；和/或，根据所述位置或所述运动轨迹产生对空调的控制指令，所述控制指令包括与所述位置或所述运动轨迹对应的送风方向；和/或，根据所述姿态确定所述目标人物的状态，并根据所述目标人物的状态产生对空调的控制指令，所述空调的控制指令包括与所述目标人物的状态对应的送风强度、温度和方向。
可选的，所述控制模块，具体用于当智能家电作用范围内的所述目标人物为一人时，根据所述目标人物的人体属性信息得到对智能家电的所述控制指令，并进行控制；当智能家电作用范围内的所述目标人物为多人时，确定其中至少一人为代表人物，根据所述代表人物的人体属性信息得到对智能家电的所述控制指令，并进行控制，其中，所述代表人物是多个所述目标人物中年纪最大者、年纪最小者或者预先设置的指定人物。
可选的，还包括：
模型维护模块，用于记录设定时期内得到所述目标人物的标志性人体属性信息，并根据所述标志性人体属性信息更新所述神经网络模型。
可选的，所述模型维护模块，还用于根据已获取的人体图像和人体属性信息之间的关系训练得到所述神经网络模型。
可选的，所述人体识别模块，还用于在所述目标人物的图像中确定所述目标人物的身体关键部位对应的关键点，并根据所述关键点将所述目标人物的图像中的所述目标人物的上半身调整为与水平线垂直。
第三方面，本发明实施例提供了一种智能家电，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，还包括：摄像头，用于采集图像；其中，所述处理器执行所述程序时实现如上述第一方面任一所述的基于人体属性检测的控制方法。
第四方面，本发明实施例提供了一种包含可执行指令的存储介质，所述可执行指令在由处理器执行时用于执行如上述第一方面任一所述的基于人体属性检测的控制方法。
本发明实施例通过对智能家电作用范围内的图像进行人体检测得到一个或多个目标人物的图像，进而从中识别出相比人脸识别更全面人物属性信息，基于此产生对智能家电的控制指令，并进行控制，实现更精准的智能家电控制。
附图说明
图1为本发明实施例一提供的基于人体属性检测的控制方法的流程图；
图2为本发明实施例二提供的基于人体属性检测的控制装置的结构示意图；
图3为本发明实施例三提供的基于人体属性检测的控制装置的结构示意图；
图4为本发明实施例四提供的一种智能家电的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明实施例，而非对本发明实施例的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明实施例相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的基于人体属性检测的控制方法的流程图，该方法可以由智能家电(例如，空调或电视机)来执行，具体包括如下步骤：
步骤101、对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
智能家电通过摄像头周期性地拍摄智能家电作用范围得到环境图像序列，该周期可以预先根据需要设置，该摄像头可以是单目摄像头，也可以是具有深度信息的深度摄像头。智能家电在每个处理周期时对当前处理周期内获取的图像序列中的图像帧利用人形识别算法进行分析和识别，判断是否有人以及人体的数量，从而得到一个或多个目标人物的图像。
步骤102、将目标人物的图像输入预先建立的神经网络模型，输出识别到的目标人物的人体属性信息；
神经网络模型包括人物的图像与人体属性信息之间的对应关系，将目标人物的图像输入神经网络模型，输出识别到的目标人物的人体属性信息，该人体属性信息包括目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息，例如，头发长短，是否戴帽子，性别，衣服样式，外貌以及当前姿势(站立或者坐卧)等。
步骤103、根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
智能家电可以根据智能家电作用范围内的人体属性信息产生相应的控制指令，从而产生适于人体舒适度的制动效果，例如，检测到目标人物距离远时，可以增大风量，距离近时，减小风量，也可以进行智能关爱送风模式，避开老人、小孩、女性、裸露人群进行送风，并相应地调整送风强度等。
本实施例的技术方案，通过对智能家电作用范围内的图像进行人体检测得到一个或多个目标人物的图像，进而从中识别出相比人脸识别更全面人物属性信息，基于此产生对智能家电的控制指令，并进行控制，实现更精准的智能家电控制。
在上述技术方案的基础上，在识别目标人物的人体属性信息之前，智能家电在目标人物的图像中确定目标人物的身体关键部位对应的关键点，例如，头、肩膀、手、肘关节、腿和脚等，并根据关键点利用反射变换算法对人体姿态进行矫正，将目标人物的图像中的目标人物的身体(至少是上半身)调整为与水平线垂直。这样在后续通过神经网络模型进行识别时可以基于统一的人物姿态，便于算法设置。
在上述技术方案的基础上，智能家电可以根据其作用范围内的目标人物数量对人体属性信息进行整合，当智能家电作用范围内的目标人物为一人时，就根据该目标人物的人体属性信息得到对智能家电的控制指令，并进行控制，当智能家电作用范围内的目标人物为多人时，确定其中至少一人为代表人物，根据代表人物的人体属性信息得到对智能家电的控制指令，并进行控制，其中，代表人物是多个目标人物中年纪最大者、年纪最小者或者预先设置的指定人物。而如果没有检测到目标人物则智能家电按照默认的方式运行即可。
在上述技术方案的基础上，智能家电的控制包括以下至少一种情况：
根据外貌或衣着确定目标人物的年龄范围，并根据年龄范围产生对空调或电视机的控制指令，其中，空调的控制指令包括与年龄范围对应的送风强度、温度和方向，电视机的控制指令包括与年龄范围对应的电视播放内容。例如，目标人物的年龄范围大致在10岁以下，表示目标人物儿童，则空调的送风强度不能太强、温度也不宜过低，而且尽量不冲着人送风，电视机中播放的内容是要与儿童对应的动画片、少儿节目等；
根据位置或运动轨迹产生对空调的控制指令，控制指令包括与位置或运动轨迹对应的送风方向，即空调可以根据目标人物的位置或运动轨迹追着人送风或者背着人送风。
根据姿态确定目标人物的状态，并根据目标人物的状态产生对空调的控制指令，空调的控制指令包括与目标人物的状态对应的送风强度、温度和方向。例如，目标人物是躺着，表示其可能在睡觉，那么空调就不能对着人送风，而且送风强度和温度都要适中。
对应上述情况，智能家电可以根据智能家电作用范围内的人体属性信息产生相应的控制指令，从而产生适于人体舒适度的制动效果。
在上述技术方案的基础上，智能家电还可以根据已获取的人体图像和人体属性信息之间的关系训练得到神经网络模型，并且记录设定时期内得到目标人物的标志性人体属性信息，并根据标志性人体属性信息更新神经网络模型。
智能家电维护神经网络模型可以是一个动态过程，基于已获取的人体图像和人体属性信息之间的关系训练得到基础的神经网络模型，在智能家电的运行过程中，不断记录设定时期内得到目标人物的标志性人体属性信息，对神经网络模型进行更新，使其包含的信息更丰富和全面，以便可以更精准地对目标人物进行识别。
实施例二
图2为本发明实施例二提供的基于人体属性检测的控制装置的结构示意图，参照图2，该基于人体属性检测的控制装置包括图像检测模块11、人体识别模块12和控制模块13，其中，图像检测模块11，用于对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；人体识别模块12，用于将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；控制模块13，用于根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
在上述技术方案的基础上，所述人体属性信息包括所述目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息。
在上述技术方案的基础上，所述控制模块13，具体用于根据所述外貌或所述衣着确定所述目标人物的年龄范围，并根据所述年龄范围产生对空调或电视机的控制指令，所述空调的控制指令包括与所述年龄范围对应的送风强度、温度和方向，所述电视机的控制指令包括与所述年龄范围对应的电视播放内容；和/或，根据所述位置或所述运动轨迹产生对空调的控制指令，所述控制指令包括与所述位置或所述运动轨迹对应的送风方向；和/或，根据所述姿态确定所述目标人物的状态，并根据所述目标人物的状态产生对空调的控制指令，所述空调的控制指令包括与所述目标人物的状态对应的送风强度、温度和方向。
在上述技术方案的基础上，所述控制模块13，具体用于当智能家电作用范围内的所述目标人物为一人时，根据所述目标人物的人体属性信息得到对智能家电的所述控制指令，并进行控制；当智能家电作用范围内的所述目标人物为多人时，确定其中至少一人为代表人物，根据所述代表人物的人体属性信息得到对智能家电的所述控制指令，并进行控制，其中，所述代表人物是多个所述目标人物中年纪最大者、年纪最小者或者预先设置的指定人物。
实施例三
在上述技术方案的基础上，图3为本发明实施例三提供的基于人体属性检测的控制装置的结构示意图，参照图3，该基于人体属性检测的控制装置还包括模型维护模块14，用于记录设定时期内得到所述目标人物的标志性人体属性信息，并根据所述标志性人体属性信息更新所述神经网络模型。
在上述技术方案的基础上，所述模型维护模块14，还用于根据已获取的人体图像和人体属性信息之间的关系训练得到所述神经网络模型。
在上述技术方案的基础上，所述人体识别模块12，还用于在所述目标人物的图像中确定所述目标人物的身体关键部位对应的关键点，并根据所述关键点将所述目标人物的图像中的所述目标人物的上半身调整为与水平线垂直。
本发明实施例所提供的基于人体属性检测的控制装置可执行本发明任意实施例所提供的基于人体属性检测的控制方法，具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种智能家电的结构示意图，如图4所示，该智能家电包括处理器20、存储器21、输入装置22、输出装置23和摄像头24；智能家电中处理器20的数量可以是一个或多个，图4中以一个处理器20为例；智能家电中的处理器20、存储器21、输入装置22和输出装置23可以通过总线或其他方式连接，图4中以通过总线连接为例。
存储器21作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的基于人体属性检测的控制方法对应的程序指令/模块。处理器20通过运行存储在存储器21中的软件程序、指令以及模块，从而执行智能家电的各种功能应用以及数据处理，即实现上述的基于人体属性检测的控制方法。
存储器21可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器21可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器21可进一步包括相对于处理器20远程设置的存储器，这些远程存储器可以通过网络连接至智能家电。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置22可用于接收输入的数字或字符信息，以及产生与智能家电的用户设置以及功能控制有关的键信号输入。输出装置23可包括显示屏等显示设备。
摄像头24可用于采集作用范围内的图像。
实施例五
本发明实施例五还提供一种包含可执行指令的存储介质，所述可执行指令在由处理器执行时用于执行一种基于人体属性检测的控制方法，该方法包括：
对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；
根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
当然,本发明实施例所提供的一种包含可执行指令的存储介质,其可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的基于人体属性检测的控制方法中的相关操作.
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明实施例可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明实施例各个实施例所述的方法。
值得注意的是，上述装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明实施例的保护范围。
注意，上述仅为本发明实施例的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明实施例不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明实施例的保护范围。因此，虽然通过以上实施例对本发明实施例进行了较为详细的说明，但是本发明实施例不仅仅限于以上实施例，在不脱离本发明实施例构思的情况下，还可以包括更多其他等效实施例，而本发明实施例的范围由所附的权利要求范围决定。
Claims (12)
1.一种基于人体属性检测的控制方法，其特征在于，包括：
对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；
根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
2.根据权利要求1所述的方法，其特征在于，所述人体属性信息包括所述目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息。
3.根据权利要求2所述的方法，其特征在于，所述根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制，包括下述至少一种：
根据所述外貌或所述衣着确定所述目标人物的年龄范围，并根据所述年龄范围产生对空调或电视机的控制指令，所述空调的控制指令包括与所述年龄范围对应的送风强度、温度和方向，所述电视机的控制指令包括与所述年龄范围对应的电视播放内容；和，
根据所述位置或所述运动轨迹产生对空调的控制指令，所述控制指令包括与所述位置或所述运动轨迹对应的送风方向；和，
根据所述姿态确定所述目标人物的状态，并根据所述目标人物的状态产生对空调的控制指令，所述空调的控制指令包括与所述目标人物的状态对应的送风强度、温度和方向。
4.根据权利要求1或2所述的方法，其特征在于，所述根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制，包括：
当智能家电作用范围内的所述目标人物为一人时，根据所述目标人物的人体属性信息得到对智能家电的所述控制指令，并进行控制；
当智能家电作用范围内的所述目标人物为多人时，确定其中至少一人为代表人物，根据所述代表人物的人体属性信息得到对智能家电的所述控制指令，并进行控制，其中，所述代表人物是多个所述目标人物中年纪最大者、年纪最小者或者预先设置的指定人物。
5.根据权利要求1-3中任一项所述的方法，其特征在于，还包括：
记录设定时期内得到所述目标人物的标志性人体属性信息，并根据所述标志性人体属性信息更新所述神经网络模型。
6.根据权利要求1-3中任一项所述的方法，其特征在于，在所述对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像之前，还包括：
根据已获取的人体图像和人体属性信息之间的关系训练得到所述神经网络模型。
7.根据权利要求1所述的方法，其特征在于，在所述将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息之前，还包括：
在所述目标人物的图像中确定所述目标人物的身体关键部位对应的关键点，并根据所述关键点将所述目标人物的图像中的所述目标人物的上半身调整为与水平线垂直。
8.一种基于人体属性检测的控制装置，其特征在于，包括：
图像检测模块，用于对当前处理周期内获取的图像帧进行人体检测得到一个或多个目标人物的图像；
人体识别模块，用于将所述目标人物的图像输入预先建立的神经网络模型，输出识别到的所述目标人物的人体属性信息；
控制模块，用于根据智能家电作用范围内的人体属性信息产生对智能家电的控制指令，并进行控制。
9.根据权利要求8所述的装置，其特征在于，所述人体属性信息包括所述目标人物的外貌、衣着、位置、姿态或者运动轨迹中的任一种或多种信息。
10.根据权利要求9所述的装置，其特征在于，所述控制模块，具体用于根据所述外貌或所述衣着确定所述目标人物的年龄范围，并根据所述年龄范围产生对空调或电视机的控制指令，所述空调的控制指令包括与所述年龄范围对应的送风强度、温度和方向，所述电视机的控制指令包括与所述年龄范围对应的电视播放内容；和/或，根据所述位置或所述运动轨迹产生对空调的控制指令，所述控制指令包括与所述位置或所述运动轨迹对应的送风方向；和/或，根据所述姿态确定所述目标人物的状态，并根据所述目标人物的状态产生对空调的控制指令，所述空调的控制指令包括与所述目标人物的状态对应的送风强度、温度和方向。
11.一种智能家电，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，还包括：摄像头，用于采集图像；其中，所述处理器执行所述程序时实现如权利要求1-7中任一所述的基于人体属性检测的控制方法。
12.一种包含可执行指令的存储介质，其特征在于，所述可执行指令在由处理器执行时用于执行如权利要求1-7中任一所述的基于人体属性检测的控制方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810113130.4A CN108279573B (zh) | 2018-02-05 | 2018-02-05 | 基于人体属性检测的控制方法、装置、智能家电和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810113130.4A CN108279573B (zh) | 2018-02-05 | 2018-02-05 | 基于人体属性检测的控制方法、装置、智能家电和介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108279573A true CN108279573A (zh) | 2018-07-13 |
| CN108279573B CN108279573B (zh) | 2019-05-28 |
Family
ID=62807652
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810113130.4A Active CN108279573B (zh) | 2018-02-05 | 2018-02-05 | 基于人体属性检测的控制方法、装置、智能家电和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108279573B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109117758A (zh) * | 2018-07-27 | 2019-01-01 | 北京字节跳动网络技术有限公司 | 用于生成信息的方法和装置 |
| CN109140665A (zh) * | 2018-08-31 | 2019-01-04 | 珠海格力电器股份有限公司 | 控制空调的方法、装置和空调装置 |
| CN109241339A (zh) * | 2018-08-28 | 2019-01-18 | 三星电子（中国）研发中心 | 一种音乐推荐方法和装置 |
| CN109405206A (zh) * | 2018-10-10 | 2019-03-01 | 广东美的制冷设备有限公司 | 空气调节设备的送风控制方法和装置 |
| CN109902548A (zh) * | 2018-07-20 | 2019-06-18 | 华为技术有限公司 | 一种对象属性识别方法、装置、计算设备及系统 |
| CN110200468A (zh) * | 2019-05-24 | 2019-09-06 | 济南浪潮高新科技投资发展有限公司 | 一种智能窗帘控制方法及系统 |
| CN110285480A (zh) * | 2019-06-27 | 2019-09-27 | 珠海格力电器股份有限公司 | 一种自动调节功率的电暖气设备及方法 |
| CN110472611A (zh) * | 2019-08-21 | 2019-11-19 | 图谱未来(南京)人工智能研究院有限公司 | 人物属性识别的方法、装置、电子设备及可读存储介质 |
| CN110794692A (zh) * | 2018-08-03 | 2020-02-14 | 珠海格力电器股份有限公司 | 家电设备的移动控制方法、装置及家电设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105159128A (zh) * | 2015-09-28 | 2015-12-16 | 宇龙计算机通信科技(深圳)有限公司 | 一种智能家居设备的控制方法和控制系统 |
| CN105629746A (zh) * | 2015-07-30 | 2016-06-01 | 宇龙计算机通信科技(深圳)有限公司 | 一种基于用户信息识别的设备控制方法及移动终端 |
| CN105843050A (zh) * | 2016-03-18 | 2016-08-10 | 美的集团股份有限公司 | 智能家居系统、智能家居控制装置和方法 |
| CN106776619A (zh) * | 2015-11-20 | 2017-05-31 | 百度在线网络技术（北京）有限公司 | 用于确定目标对象的属性信息的方法和装置 |
| CN106774845A (zh) * | 2016-11-24 | 2017-05-31 | 北京智能管家科技有限公司 | 一种智能交互方法、装置及终端设备 |
| CN107166645A (zh) * | 2017-05-18 | 2017-09-15 | 厦门瑞为信息技术有限公司 | 一种基于室内场景分析的空调控制方法 |
-
2018
- 2018-02-05 CN CN201810113130.4A patent/CN108279573B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105629746A (zh) * | 2015-07-30 | 2016-06-01 | 宇龙计算机通信科技(深圳)有限公司 | 一种基于用户信息识别的设备控制方法及移动终端 |
| CN105159128A (zh) * | 2015-09-28 | 2015-12-16 | 宇龙计算机通信科技(深圳)有限公司 | 一种智能家居设备的控制方法和控制系统 |
| CN106776619A (zh) * | 2015-11-20 | 2017-05-31 | 百度在线网络技术（北京）有限公司 | 用于确定目标对象的属性信息的方法和装置 |
| CN105843050A (zh) * | 2016-03-18 | 2016-08-10 | 美的集团股份有限公司 | 智能家居系统、智能家居控制装置和方法 |
| CN106774845A (zh) * | 2016-11-24 | 2017-05-31 | 北京智能管家科技有限公司 | 一种智能交互方法、装置及终端设备 |
| CN107166645A (zh) * | 2017-05-18 | 2017-09-15 | 厦门瑞为信息技术有限公司 | 一种基于室内场景分析的空调控制方法 |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109902548A (zh) * | 2018-07-20 | 2019-06-18 | 华为技术有限公司 | 一种对象属性识别方法、装置、计算设备及系统 |
| CN109902548B (zh) * | 2018-07-20 | 2022-05-31 | 华为技术有限公司 | 一种对象属性识别方法、装置、计算设备及系统 |
| CN109117758A (zh) * | 2018-07-27 | 2019-01-01 | 北京字节跳动网络技术有限公司 | 用于生成信息的方法和装置 |
| CN110794692A (zh) * | 2018-08-03 | 2020-02-14 | 珠海格力电器股份有限公司 | 家电设备的移动控制方法、装置及家电设备 |
| CN109241339A (zh) * | 2018-08-28 | 2019-01-18 | 三星电子（中国）研发中心 | 一种音乐推荐方法和装置 |
| CN109140665A (zh) * | 2018-08-31 | 2019-01-04 | 珠海格力电器股份有限公司 | 控制空调的方法、装置和空调装置 |
| CN109405206A (zh) * | 2018-10-10 | 2019-03-01 | 广东美的制冷设备有限公司 | 空气调节设备的送风控制方法和装置 |
| CN109405206B (zh) * | 2018-10-10 | 2021-02-26 | 广东美的制冷设备有限公司 | 空气调节设备的送风控制方法和装置 |
| CN110200468A (zh) * | 2019-05-24 | 2019-09-06 | 济南浪潮高新科技投资发展有限公司 | 一种智能窗帘控制方法及系统 |
| CN110285480A (zh) * | 2019-06-27 | 2019-09-27 | 珠海格力电器股份有限公司 | 一种自动调节功率的电暖气设备及方法 |
| CN110472611A (zh) * | 2019-08-21 | 2019-11-19 | 图谱未来(南京)人工智能研究院有限公司 | 人物属性识别的方法、装置、电子设备及可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108279573B (zh) | 2019-05-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108279573B (zh) | 基于人体属性检测的控制方法、装置、智能家电和介质 | |
| CN109564706B (zh) | 基于智能交互式增强现实的用户交互平台 | |
| US20160086023A1 (en) | Apparatus and method for controlling presentation of information toward human object | |
| JP2021131396A (ja) | レーダ対応センサフュージョン | |
| CN105009026B (zh) | 在环境中控制硬件的机器 | |
| WO2018049430A2 (en) | An intelligent interactive and augmented reality based user interface platform | |
| CN109644303A (zh) | 识别声源方向的行为自主型机器人 | |
| CN111919070B (zh) | 香味释放系统 | |
| CN104298722A (zh) | 多媒体交互系统及其方法 | |
| KR20160012902A (ko) | 시청자 사이의 연관 정보에 근거하여 광고를 재생하기 위한 방법 및 장치 | |
| JP2005202653A (ja) | 動作認識装置及び方法、動物体認識装置及び方法、機器制御装置及び方法、並びにプログラム | |
| CN110298218B (zh) | 交互式健身装置和交互式健身系统 | |
| CN110637324B (zh) | 三维数据系统以及三维数据处理方法 | |
| CN107229262A (zh) | 一种智能家居系统 | |
| KR102291039B1 (ko) | 사용자 맞춤형 운동 서비스 제공 방법 및 장치 | |
| JP3836488B2 (ja) | 状態監視装置 | |
| Thakur et al. | A complex activity based emotion recognition algorithm for affect aware systems | |
| JP3697286B2 (ja) | 状態監視装置 | |
| CN110428486A (zh) | 虚拟互动的健身方法、电子设备及存储介质 | |
| JPWO2019216016A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| KR20200097637A (ko) | 시뮬레이션 모래상자 시스템 | |
| CN110298220A (zh) | 动作视频直播方法、系统、电子设备、存储介质 | |
| McColl et al. | Classifying a person’s degree of accessibility from natural body language during social human–robot interactions | |
| JP2019125061A (ja) | 人の状態推定システム | |
| CN109119080A (zh) | 声音识别方法、装置、穿戴式设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: Room 508-598, Xitian Gezhuang Town Government Office Building, No. 8 Xitong Road, Miyun District Economic Development Zone, Beijing 101500 Applicant after: Beijing Rubo Technology Co., Ltd. Address before: Room 508-598, Xitian Gezhuang Town Government Office Building, No. 8 Xitong Road, Miyun District Economic Development Zone, Beijing 101500 Applicant before: BEIJING INTELLIGENT HOUSEKEEPER TECHNOLOGY CO., LTD. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20210824 Address after: 301-112, floor 3, building 2, No. 18, YANGFANGDIAN Road, Haidian District, Beijing 100038 Patentee after: Beijing Rubu Technology Co.,Ltd. Address before: Room 508-598, Xitian Gezhuang Town Government Office Building, No. 8 Xitong Road, Miyun District Economic Development Zone, Beijing 101500 Patentee before: BEIJING ROOBO TECHNOLOGY Co.,Ltd. |