CN107908277B - 一种控制装置、设备以及控制方法 - Google Patents
一种控制装置、设备以及控制方法 Download PDFInfo
- Publication number
- CN107908277B CN107908277B CN201710917200.7A CN201710917200A CN107908277B CN 107908277 B CN107908277 B CN 107908277B CN 201710917200 A CN201710917200 A CN 201710917200A CN 107908277 B CN107908277 B CN 107908277B
- Authority
- CN
- China
- Prior art keywords
- gesture
- user
- information
- gesture information
- preset condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 238000000605 extraction Methods 0.000 claims description 48
- 230000007257 malfunction Effects 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 5
- 241000208340 Araliaceae Species 0.000 claims 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 2
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 2
- 235000008434 ginseng Nutrition 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 230000015654 memory Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000036632 reaction speed Effects 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种控制装置、设备以及控制方法。其中，装置包括第一存储单元,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势；手势信息比较单元，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元；所述第二存储单元，用于存储满足第一预设条件的用户的手势信息；其中，所述第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。本发明提供的方案能够对提取的特定用户手势进行收集，为更加精准的控制提供依据，能够提高控制的准确性和适应性。
Description
技术领域
本发明涉及控制领域，尤其涉及通过手势对设备进行控制。
背景技术
对设备的控制，现有技术一般均采用按键式、触摸屏式、遥控器等方式。随着技术的发展，开始出现了采用手势控制设备的技术，通过摄像装置拍摄包含了手势信息的图片，根据提取的手势信息对设备进行控制。然而，现有技术中，手势控制的准确性不够，因此用户体验较差。例如，有些人的手势的识别成功率较低，某些非控制手势被识别成为了控制信息触发了不该有的控制。
发明内容
本发明的主要目的在于克服上述现有技术的缺陷，提供了一种控制装置、设备以及控制方法，以解决现有技术中手势控制设备准确率偏低的问题。
本发明提供了一种控制装置,包括第一存储单元,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势；手势信息比较单元，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元；所述第二存储单元，用于存储满足第一预设条件的用户的手势信息；其中，所述第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。
可选地，所述第二存储单元中的手势信息与控制指令对应存储。
可选地，所述第二存储单元中的手势信息还与用户身份信息对应存储。
可选地，还包括分析单元，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
可选地，还包括更新单元，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势；所述更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
可选地，当所述第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。
可选地，所述手势信息比较单元,还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令；所述第二预设条件包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值。
可选地，当所述第一对应关系中包括用户身份信息时，所述将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令还包括:优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件。
可选地，还包括误动作处理单元，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
可选地，还包括图像采集单元和手势信息提取单元，图像采集单元,用于采集包括了用户手势信息的图像；手势信息提取单元，用于根据所述图像采集单元采集的图像提取所述用户的手势信息。
本发明又一方面提供了一种设备，包括上述任一所述的控制装置。
可选地，所述设备包括家电设备。
本发明再一方面提供了一种控制方法,包括:第一存储步骤,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势；手势信息比较步骤，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元；其中，所述第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。
可选地，所述第二存储单元中的手势信息与控制指令对应存储。
可选地，所述第二存储单元中的手势信息还与用户身份信息对应存储。
可选地，还包括分析步骤，所述分析步骤，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
可选地，还包括更新步骤，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势；所述更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
可选地，当述第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。
可选地，所述手势信息比较步骤,还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令；所述第二预设条件包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值。
可选地，当所述第一对应关系中包括用户身份信息时，所述将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令还包括:优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件。
可选地，还包括误动作处理步骤，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
可选地，还包括图像采集步骤和手势信息提取步骤，图像采集步骤,用于采集包括了用户手势信息的图像；手势信息提取步骤，用于根据所述图像采集步骤采集的图像提取所述用户的手势信息。
本发明提供的方案能够对提取的特定用户手势进行收集，为更加精准的控制提供依据，能够提高控制的准确性和适应性。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明提供的控制装置的一实施例的结构示意图；
图2是本发明提供的控制装置的一实施例的结构示意图；
图3是本发明提供的控制装置的一实施例的结构示意图；
图4是本发明提供的控制装置的一实施例的结构示意图；
图5是本发明提供的设备的一实施例的结构示意图；
图6是本发明提供的控制方法的一实施例的方法示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是本发明提供的控制装置的一实施例的结构示意图。本发明一实施方式提供一种控制装置11包括第一存储单元111、手势信息比较单元113以及第二存储单元115。
第一存储单元,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势。
例如，预定义手势一般包括手势状态和/或运行轨迹。手势状态包括但不限于手掌、握拳，手指等。运动轨迹包括左右挥动、顺时针旋转、逆时针旋转、悬停等。在某些情况下，轨迹还可以包括时间参数。
例如，手掌悬停第一时长、手掌悬停第二时长，手掌顺时针旋转、手掌逆时针旋转、手掌悬停变握拳、手掌左右挥动等，对应控制命令分别为唤醒手势控制功能、送风模式切换一次、设定温度“+”、设定温度“-”、开关机、风挡调节一次等。
手势信息比较单元，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元。
第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。例如，第一阈值为98％，第二阈值为95％。
用户的手势信息被提取以后，与第一存储单元中的预定义手势进行比较，当相似度落入第一阈值和第二阈值组成的数值区间内(下称第一区间)时，即小于第一阈值，大于等于第二阈值，将用户的手势信息存入第二存储单元。
第二存储单元，用于存储满足第一预设条件的用户的手势信息。可选地，第二存储单元和第一存储单元位于同一存储器中，或者不同的存储器中。在某些实施方式，第二存储单元可以设置在服务器上，或者云服务器上。
将某一数值区间的手势信息进行存储，通过分析可以确定使用手势控制的用户的一些手势特征，从而能够作为参考，提高手势控制的精确程度。
可选地，第二存储单元中的手势信息与控制指令对应存储。例如，当根据提取的用户的手势信息与第一存储单元中的多个预定手势相比，与手掌逆时针旋转的手势相似度落在第一区间内，则将该用户的手势信息存储第二存储单元，与其一同对应存储的还有与其对应的控制命令设定温度“-”。
可选地，所述第二存储单元中的手势信息还与用户身份信息对应存储。用户身份信息是标识用户身份的信息，例如用户1、用户2等等。例如，根据人脸识别手段，可以将提取的手势信息与不同的用户进行对应存储。再例如，根据手势的特征，能够确定手势信息对应的用户。
图2是本发明提供的控制装置的一实施例的结构示意图。本发明一具体实施方式，结合本发明其他实施方式的各个方面。
一种控制装置21包括第一存储单元211、手势信息比较单元213、第二存储单元215以及分析单元217。
第一存储单元,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势。
例如，预定义手势一般包括手势状态和/或运行轨迹。手势状态包括但不限于手掌、握拳，手指等。运动轨迹包括左右挥动、顺时针旋转、逆时针旋转、悬停等。在某些情况下，还可以包括时间参数。
例如，预定义手势包括手掌悬停第一时长、手掌悬停第二时长，手掌顺时针旋转、手掌逆时针旋转、手掌悬停变握拳、手掌左右挥动等，对应控制命令分别为唤醒手势控制功能、送风模式切换一次、设定温度“+”、设定温度“-”、开关机、风挡调节一次等。
手势信息比较单元，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元。
第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。例如，第一阈值为98％，第二阈值为95％。
用户的手势信息被提取以后，与第一存储单元中的预定义手势进行比较，当相似度落入第一阈值和第二阈值组成的数值区间内(下称第一区间)时，即小于第一阈值，大于等于第二阈值，将用户的手势信息存入第二存储单元。
第二存储单元，用于存储满足第一预设条件的用户的手势信息。可选地，第二存储单元和第一存储单元位于同一存储器中，或者不同的存储器中。在某些实施方式，第二存储单元可以设置在服务器上，或者云服务器上。
将某一数值区间的手势信息进行存储，通过分析可以确定使用手势控制的用户的一些手势特征，从而能够作为参考，提高手势控制的精确程度。
可选地，第二存储单元中的手势信息与控制指令对应存储。例如，当根据提取的用户的手势信息与第一存储单元中的多个预定手势相比，与手掌逆时针旋转的手势相似度落在第一区间内，则将该用户的手势信息存储第二存储单元，与其一同对应存储的还有与其对应的控制命令设定温度“-”。
可选地，所述第二存储单元中的手势信息还与用户身份信息对应存储。用户身份信息是标识用户身份的信息，例如用户1、用户2等等。例如，根据人脸识别手段，可以将提取的手势信息与不同的用户进行对应存储。再例如，根据手势的特征，能够确定手势信息对应的用户。
分析单元，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
例如，对于第二存储单元中手势信息进行分析，可以确定一个或多个参考定义手势。如当第二存储单元中存储了100次的“唤醒手势控制功能”手势，这100次手势均是与预设的“手掌悬停第一时长”的相似度小于第一阈值，大于等于第二阈值的。在这100个手势中，某一手势的出现频次高于一定的阈值，例如15％，则可以将该手势作为一参考定义手势。参考定义手势可以是一个多个。
图3是本发明提供的控制装置的一实施例的结构示意图。本发明一具体实施方式，结合本发明其他实施方式的各个方面。
一种控制装置31包括第一存储单元311、手势信息比较单元313、第二存储单元315、分析单元317和更新单元318。
其中第一存储单元、手势信息比较单元、第二存储单元、分析单元与其他实施方式中的相应单元执行相同或相应的功能，在此就不赘述了。
更新单元，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势。更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
更新之后，与控制指令对应存储的第一手势除了包括预定义手势之外，还包括了至少一个参考定义手势。
可选地，当第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。例如，第一参考定义手势对应用户1，第二参考定义手势对应用户2等等。
手势信息比较单元,还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令。第二预设条件，例如包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值。例如，第一阈值为98％，用户的手势信息与第一手势中的某一项的相似度大于等于第一阈值，则可确定对应的控制指令。
可选地，当第一对应关系中包括用户身份信息时，还包括优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件。例如，提取用户手势信息时，同时确定该用户是用户1，当将提取的用户手势信息与第一手势中各项进行对比时，优先比较用户1对应的第一参考定义手势。此时，能够提高判断效率，提升判断装置的反应速度，进而提升用户的体验。
图4是本发明提供的控制装置的一实施例的结构示意图。本发明一具体实施方式，结合本发明其他实施方式的各个方面。
一种控制装置41包括第一存储单元411、手势信息比较单元413、第二存储单元415、分析单元417、更新单元418和误动作处理单元419。
其中第一存储单元、手势信息比较单元、第二存储单元、分析单元、更新单元与其他实施方式中的相应单元执行相同或相应的功能，在此就不赘述了。
误动作处理单元，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
为了提高控制装置的控制精准度，在本发明中，设置了误动作处理单元，对一些较为典型的误动作进行识别。例如，手势静止不动超过第三时长可以被认为是误动作，或者根据头部与手部的一般位置关系，在头部的应有的位置范围内未扫描到头部则认为是误动作等等。
可选地，控制装置，还包括图像采集单元和手势信息提取单元。
图像采集单元,用于采集包括了用户手势信息的图像。图像采集单元可以是安装在待控设备上的摄像头，也可以是移动终端的摄像头，或者其它替代位置的摄像头。摄像装置拍摄包括了用户手势信息的图像。
手势信息提取单元，用于根据图像采集单元采集的图像提取所述用户的手势信息。根据图像识别手势信息可以采用深度神经网络模型，例如卷积神经网络算法。
图5是本发明提供的设备的一实施例的结构示意图。本发明一实施方式，结合其他实施方式的各个方面。设备5包括了本发明各个实施方式提供的控制装置51。可选地，所述设备包括家电设备。例如，空调、电视、电饭锅、空气净化器、投影仪等等。
图6是本发明提供的控制方法的一实施例的方法示意图。如图所示，一种控制方法,包括第一存储步骤S610和第二存储步骤S630。
第一存储步骤,用于存储第一手势与控制指令的第一对应关系,所述第一手势包括预定义手势。第一对应关系存储于第一存储单元。
例如，预定义手势一般包括手势状态和/或运行轨迹。手势状态包括但不限于手掌、握拳，手指等。运动轨迹包括左右挥动、顺时针旋转、逆时针旋转、悬停等。在某些情况下，还可以包括时间参数。
例如，手掌悬停第一时长、手掌悬停第二时长，手掌顺时针旋转、手掌逆时针旋转、手掌悬停变握拳、手掌左右挥动等，对应控制命令分别为唤醒手势控制功能、送风模式切换一次、设定温度“+”、设定温度“-”、开关机、风挡调节一次等。
手势信息比较步骤，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元。
第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值。例如，第一阈值为98％，第二阈值为95％。
用户的手势信息被提取以后，与第一存储单元中的预定义手势进行比较，当相似度落入第一阈值和第二阈值组成的数值区间内(下称第一区间)时，即小于第一阈值，大于等于第二阈值，将用户的手势信息存入第二存储单元。
第二存储单元，用于存储满足第一预设条件的用户的手势信息。可选地，第二存储单元和第一存储单元位于同一存储器中，或者不同的存储器中。在某些实施方式，第二存储单元可以设置在服务器上，或者云服务器上。
将某一数值区间的手势信息进行存储，通过分析可以确定使用手势控制的用户的一些手势特征，从而能够作为参考，提高手势控制的精确程度。
可选地，第二存储单元中的手势信息与控制指令对应存储。例如，当根据提取的用户的手势信息与第一存储单元中的多个预定手势相比，与手掌逆时针旋转的手势相似度落在第一区间内，则将该用户的手势信息存储第二存储单元，与其一同对应存储的还有与其对应的控制命令设定温度“-”。
可选地，所述第二存储单元中的手势信息还与用户身份信息对应存储。用户身份信息是标识用户身份的信息，例如用户1、用户2等等。例如，根据人脸识别手段，可以将提取的手势信息与不同的用户进行对应存储。再例如，根据手势的特征，能够确定手势信息对应的用户。
可选地，本发明提供的方法还包括分析步骤，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
例如，对于第二存储单元中手势信息进行分析，可以确定一个或多个参考定义手势。如当第二存储单元中存储了100次的“唤醒手势控制功能”手势，这100次手势均是与预设的“手掌悬停第一时长”的相似度小于第一阈值，大于等于第二阈值的。在这100个手势中，某一手势的出现频次高于一定的阈值，例如15％，则可以将该手势作为一参考定义手势。参考定义手势可以是一个多个。
可选地，本发明提供的方法还包括更新步骤，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势。更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
更新之后，与控制指令对应存储的第一手势除了包括预定义手势之外，还包括了至少一个参考定义手势。
可选地，当第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。例如，第一参考定义手势对应用户1，第二参考定义手势对应用户2等等。
手势信息比较步骤,还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令。第二预设条件，例如包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值。例如，第一阈值为98％，用户的手势信息与第一手势中的某一项的相似度大于等于第一阈值，则可确定对应的控制指令。
可选地，当第一对应关系中包括用户身份信息时，还包括优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件。例如，提取用户手势信息时，同时确定该用户是用户1，当将提取的用户手势信息与第一手势中各项进行对比时，优先比较用户1对应的第一参考定义手势。此时，能够提高判断效率，提升判断装置的反应速度，进而提升用户的体验。
可选地，本发明的方法还包括误动作处理步骤，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
为了提高控制装置的控制精准度，在本发明中，设置了误动作处理单元，对一些较为典型的误动作进行识别。例如，手势静止不动超过第三时长可以被认为是误动作，或者根据头部与手部的一般位置关系，在头部的应有的位置范围内未扫描到头部则认为是误动作等等。
可选地，本发明提供的方法还包括图像采集步骤和手势信息提取步骤。
图像采集步骤,用于采集包括了用户手势信息的图像。图像采集单元可以是安装在待控设备上的摄像头，也可以是移动终端的摄像头，或者其它替代位置的摄像头。摄像装置拍摄包括了用户手势信息的图像。
手势信息提取步骤，用于根据所述图像采集步骤采集的图像提取所述用户的手势信息。根据图像识别手势信息可以采用深度神经网络模型，例如卷积神经网络算法。
在本发明提供的一实施方式中，手势信息与语音反馈和/或显示反馈配合，实现更加精准的控制。
表1：手势信息与语音反馈和/或显示反馈配合示例
由此，利用本发明的方案，能够对提取的特定用户手势进行收集，为更加精准的控制提供依据，能够提高控制的准确性和适应性。
本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施，那么可将功能作为一或多个指令或代码存储于计算机可读介质上或经由计算机可读介质予以传输。其它实例及实施方案在本发明及所附权利要求书的范围及精神内。举例来说，归因于软件的性质，上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外，各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为控制装置的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的权利要求范围之内。
Claims (14)
1.一种控制装置，其特征在于，包括:
第一存储单元，用于存储第一手势与控制指令的第一对应关系，所述第一手势包括预定义手势；
手势信息比较单元，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元；所述第二存储单元，用于存储满足第一预设条件的用户的手势信息；将一数值区间的手势信息进行存储，通过分析能够确定使用手势控制的用户的一些手势特征；所述第二存储单元中的手势信息与控制指令对应存储，所述第二存储单元中的手势信息还与用户身份信息对应存储；
所述手势信息比较单元，还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令；所述第二预设条件包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值；其中，当所述第一对应关系中包括用户身份信息时，所述将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令还包括：优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件；
其中，所述第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值；
还包括分析单元，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
2.根据权利要求1所述的控制装置，其特征在于，还包括更新单元，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势；
所述更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
3.根据权利要求2所述的控制装置，其特征在于，当所述第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。
4.根据权利要求1所述的控制装置，其特征在于，还包括误动作处理单元，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
5.根据权利要求1、2、3任一所述的控制装置，其特征在于，还包括图像采集单元和手势信息提取单元，
图像采集单元，用于采集包括了用户手势信息的图像；
手势信息提取单元，用于根据所述图像采集单元采集的图像提取所述用户的手势信息。
6.根据权利要求4所述的控制装置，其特征在于，还包括图像采集单元和手势信息提取单元，
图像采集单元，用于采集包括了用户手势信息的图像；
手势信息提取单元，用于根据所述图像采集单元采集的图像提取所述用户的手势信息。
7.一种电器设备，包括如权利要求1-6任一所述的控制装置。
8.根据权利要求7所述的电器设备，其特征在于，所述设备包括家电设备。
9.一种控制方法，其特征在于，包括:
第一存储步骤，用于存储第一手势与控制指令的第一对应关系，所述第一手势包括预定义手势；
手势信息比较步骤，用于将提取的用户的手势信息与所述预定义手势进行比较，当满足第一预设条件，将用户的手势信息存储至第二存储单元；所述第二存储单元，用于存储满足第一预设条件的用户的手势信息；将一数值区间的手势信息进行存储，通过分析能够确定使用手势控制的用户的一些手势特征；所述第二存储单元中的手势信息与控制指令对应存储，所述第二存储单元中的手势信息还与用户身份信息对应存储；
所述手势信息比较步骤，还用于将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令；所述第二预设条件包括提取的用户的手势信息与所述第一手势的相似度大于等于第一阈值；其中，当所述第一对应关系中包括用户身份信息时，所述将提取的用户的手势信息与所述第一手势进行比较，当满足第二预设条件，发送对应的控制指令还包括：优先将提取的用户的手势信息与第一手势中所述用户对应的参考定义手势进行比较，判断是否满足第二预设条件；
其中，所述第一预设条件包括：提取的用户的手势信息与所述预定义手势相似度小于第一阈值，大于等于第二阈值；
还包括分析单元，用于根据所述第二存储单元存储的用户的手势信息确定至少一个参考定义手势。
10.根据权利要求9所述的控制方法，其特征在于，还包括更新步骤，用于根据所述至少一个参考定义手势更新所述第一对应关系中的第一手势；所述更新包括使得所述第一对应关系中的第一手势还包括所述至少一个参考定义手势。
11.根据权利要求10所述的控制方法，其特征在于，当述第二存储单元中的手势信息与用户身份信息对应存储时，所述更新还包括在所述第一对应关系中增加与用户身份信息的对应关系。
12.根据权利要求9所述的控制方法，其特征在于，还包括误动作处理步骤，用于在判断满足是否第二预设条件之前，或者在判断满足第二预设条件后，发送对应的控制指令之前，判断提取的用户的手势信息是否是误动作。
13.根据权利要求9、10、11任一所述的控制方法，其特征在于，还包括图像采集步骤和手势信息提取步骤，
图像采集步骤，用于采集包括了用户手势信息的图像；
手势信息提取步骤，用于根据所述图像采集步骤采集的图像提取所述用户的手势信息。
14.根据权利要求12所述的控制方法，其特征在于，还包括图像采集步骤和手势信息提取步骤，
图像采集步骤，用于采集包括了用户手势信息的图像；
手势信息提取步骤，用于根据所述图像采集步骤采集的图像提取所述用户的手势信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710917200.7A CN107908277B (zh) | 2017-09-30 | 2017-09-30 | 一种控制装置、设备以及控制方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710917200.7A CN107908277B (zh) | 2017-09-30 | 2017-09-30 | 一种控制装置、设备以及控制方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107908277A CN107908277A (zh) | 2018-04-13 |
| CN107908277B true CN107908277B (zh) | 2019-12-03 |
Family
ID=61840223
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710917200.7A Active CN107908277B (zh) | 2017-09-30 | 2017-09-30 | 一种控制装置、设备以及控制方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107908277B (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110874131A (zh) * | 2018-08-29 | 2020-03-10 | 杭州海康威视数字技术股份有限公司 | 楼宇对讲室内机及其控制方法、存储介质 |
| CN109725722B (zh) * | 2018-12-29 | 2022-03-18 | 百度在线网络技术（北京）有限公司 | 有屏设备的手势控制方法和装置 |
| CN109725727A (zh) * | 2018-12-29 | 2019-05-07 | 百度在线网络技术（北京）有限公司 | 有屏设备的手势控制方法和装置 |
| CN109753154B (zh) * | 2018-12-29 | 2022-03-04 | 百度在线网络技术（北京）有限公司 | 有屏设备的手势控制方法和装置 |
| CN112121280B (zh) * | 2020-08-31 | 2022-04-01 | 浙江大学 | 一种心音盒的控制方法及控制系统 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102354272A (zh) * | 2011-09-20 | 2012-02-15 | 宇龙计算机通信科技(深圳)有限公司 | 应用程序的启动方法和终端 |
| CN102456135A (zh) * | 2010-11-04 | 2012-05-16 | 索尼公司 | 图像处理设备、方法和程序 |
| CN103295028A (zh) * | 2013-05-21 | 2013-09-11 | 深圳Tcl新技术有限公司 | 手势操作控制方法、装置及智能显示终端 |
| CN103455496A (zh) * | 2012-05-30 | 2013-12-18 | 腾讯科技（深圳）有限公司 | 一种基于浏览器的交互方法及设备 |
| CN104898981A (zh) * | 2015-06-29 | 2015-09-09 | 安一恒通（北京）科技有限公司 | 用于识别手势的方法、装置及终端 |
| CN105095882A (zh) * | 2015-08-24 | 2015-11-25 | 珠海格力电器股份有限公司 | 手势识别的识别方法和装置 |
| CN106055242A (zh) * | 2016-05-24 | 2016-10-26 | 维沃移动通信有限公司 | 一种操作处理方法和移动终端 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9189149B2 (en) * | 2013-03-21 | 2015-11-17 | Sharp Laboratories Of America, Inc. | Equivalent gesture and soft button configuration for touch screen enabled device |
-
2017
- 2017-09-30 CN CN201710917200.7A patent/CN107908277B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102456135A (zh) * | 2010-11-04 | 2012-05-16 | 索尼公司 | 图像处理设备、方法和程序 |
| CN102354272A (zh) * | 2011-09-20 | 2012-02-15 | 宇龙计算机通信科技(深圳)有限公司 | 应用程序的启动方法和终端 |
| CN103455496A (zh) * | 2012-05-30 | 2013-12-18 | 腾讯科技（深圳）有限公司 | 一种基于浏览器的交互方法及设备 |
| CN103295028A (zh) * | 2013-05-21 | 2013-09-11 | 深圳Tcl新技术有限公司 | 手势操作控制方法、装置及智能显示终端 |
| CN104898981A (zh) * | 2015-06-29 | 2015-09-09 | 安一恒通（北京）科技有限公司 | 用于识别手势的方法、装置及终端 |
| CN105095882A (zh) * | 2015-08-24 | 2015-11-25 | 珠海格力电器股份有限公司 | 手势识别的识别方法和装置 |
| CN106055242A (zh) * | 2016-05-24 | 2016-10-26 | 维沃移动通信有限公司 | 一种操作处理方法和移动终端 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107908277A (zh) | 2018-04-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107908277B (zh) | 一种控制装置、设备以及控制方法 | |
| CN107422859B (zh) | 基于手势的调控方法、装置及计算机可读存储介质和空调 | |
| US20180211104A1 (en) | Method and device for target tracking | |
| EP2766790B1 (en) | Authenticated gesture recognition | |
| CN105095882B (zh) | 手势识别的识别方法和装置 | |
| CN105204351B (zh) | 空调机组的控制方法及装置 | |
| JP2019535055A (ja) | ジェスチャに基づく操作の実施 | |
| US10452132B2 (en) | User identification and identification-based processing for a virtual reality device | |
| CN108197589A (zh) | 动态人体姿态的语义理解方法、装置、设备和存储介质 | |
| CN107948506A (zh) | 一种图像处理方法、装置及电子设备 | |
| CN108920202A (zh) | 应用预加载管理方法、装置、存储介质及智能终端 | |
| CN104202718A (zh) | 一种向用户提供信息的方法与装置 | |
| US20150363591A1 (en) | Method of activate upon authentication of electronic device | |
| CN106713811A (zh) | 视频通话方法和装置 | |
| CN104898880B (zh) | 一种控制方法及电子设备 | |
| CN107037971A (zh) | 应用管理装置、移动终端及方法 | |
| CN112684970A (zh) | 虚拟场景的适配显示方法、装置、电子设备及存储介质 | |
| CN106557672A (zh) | 头戴式显示器的解锁控制方法及装置 | |
| CN112274909A (zh) | 应用运行控制方法和装置、电子设备及存储介质 | |
| CN110568770B (zh) | 一种控制智能家居设备的方法及控制设备 | |
| CN112000726A (zh) | 按摩操作模式的存储方法及电子设备、存储介质 | |
| CN108710516A (zh) | 预测样本的采集方法、装置、存储介质及智能终端 | |
| CN112269928A (zh) | 用户推荐方法及装置、电子设备、计算机可读介质 | |
| CN103984415B (zh) | 一种信息处理方法及电子设备 | |
| CN113596529A (zh) | 一种终端控制方法、装置、计算机设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |