CN105095882B - 手势识别的识别方法和装置 - Google Patents
手势识别的识别方法和装置 Download PDFInfo
- Publication number
- CN105095882B CN105095882B CN201510523178.9A CN201510523178A CN105095882B CN 105095882 B CN105095882 B CN 105095882B CN 201510523178 A CN201510523178 A CN 201510523178A CN 105095882 B CN105095882 B CN 105095882B
- Authority
- CN
- China
- Prior art keywords
- gesture
- controller
- facial image
- matched
- controll plant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000001815 facial effect Effects 0.000 claims description 121
- 239000000284 extract Substances 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 11
- 230000006870 function Effects 0.000 description 43
- 238000004378 air conditioning Methods 0.000 description 20
- 230000001276 controlling effect Effects 0.000 description 7
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000005336 cracking Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种手势识别的识别方法和装置。其中,该方法包括:采集对受控对象进行控制的一个或多个控制者的手势图像;获取一个或多个控制者的人脸图像;对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;识别手势图像中匹配的人脸图像所对应的控制者的控制手势。本发明解决了现有技术中多个不同的手势进行控制时准确度比较低的技术问题。
Description
技术领域
本发明涉及手势识别领域,具体而言,涉及一种手势识别的识别方法和装置。
背景技术
随着传感技术的发展,手势识别控制已经得到了很快的发展和应用。但在多种控制对象的控制中,需要不同的控制员操作来实现不同的功能,仅利用提取不同的手势特征来实现不同控制员的控制功能时,会出现在控制某一种功能时会出现另外一种手势而造成错误的控制,导致基于手势识别的控制准确度不高,可能会因为出现一些错误的控制而引起不必要的损失。如图1所示,首先采集视频图像,提取多个手势特征,并与手势模型匹配进行手势识别,从多个手势特征中识别出有效手势,并利用有效手势对控制对象进行控制。然后判断摄像头是否关闭,如果关闭,则停止图像采集和控制,否则,检测下一帧图像并提取手势特征。由于采集的手势特征是多个控制者的,需要多个控制者采用不同的手势对同一个受控对象进行控制,使得手势具有局限性,在两个控制者使用相同的手势控制时,就容易导致手势识别判断错误,造成手势识别的控制准确度比较低的问题。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种手势识别的识别方法和装置,以至少解决现有技术中多个不同的手势进行控制时准确度比较低的技术问题。
根据本发明实施例的一个方面,提供了一种手势识别的识别方法,包括:采集对受控对象进行控制的一个或多个控制者的手势图像;获取所述一个或多个控制者的人脸图像;对所述一个或多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势。
进一步地,在对所述一个或多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配之前,所述方法还包括:采集控制所述受控对象的控制者的人脸图像;提取所述人脸图像的人脸特征;关联所述人脸特征和受控对象。
进一步地,对所述一个或多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像包括:提取所述一个或多个控制者的人脸图像的人脸特征;获取与所述受控对象相关联的人脸特征;匹配提取的人脸特征与所述受控对象相关联的人脸特征,得到匹配的人脸图像。
进一步地,识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势包括:提取所述一个或多个控制者的手势图像的手势特征;获取所述匹配的人脸图像所对应的控制者的控制手势的手势模型;比对所述手势特征和所述手势模型,得到匹配的手势;将所述匹配的手势作为有效手势,其中,所述有效手势为所述匹配的人脸图像所对应的控制者的手势,用于对所述受控对象进行控制。
进一步地,所述匹配的人脸图像为至少一个控制者的人脸图像。
进一步地,所述匹配的人脸图像对应第一控制者和第二控制者,所述第一控制者和所述第二控制者采用相同的手势控制所述受控对象执行不相同的功能;或者,所述第一控制者和所述第二控制者采用不同的手势控制所述受控对象执行相同的功能。
根据本发明实施例的另一方面,还提供了一种手势识别的识别装置,包括:第一采集单元,用于采集对受控对象进行控制的一个或多个控制者的手势图像;获取单元,用于获取所述一个或多个控制者的人脸图像;匹配单元,用于对所述一个或多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;识别单元,用于识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势。
进一步地,所述装置还包括:第二采集单元,用于在对所述一个或多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配之前,采集控制所述受控对象的控制者的人脸图像;提取单元,用于提取所述人脸图像的人脸特征;关联单元,用于关联所述人脸特征和受控对象。
进一步地,所述匹配单元包括:第一提取模块,用于提取所述一个或多个控制者的人脸图像的人脸特征;第一获取模块,用于获取与所述受控对象相关联的人脸特征;匹配模块,用于匹配提取的人脸特征与所述受控对象相关联的人脸特征,得到匹配的人脸图像。
进一步地,所述识别单元包括:第二提取模块,用于提取所述一个或多个控制者的手势图像的手势特征;第二获取模块,用于获取所述匹配的人脸图像所对应的控制者的控制手势的手势模型;比对模块,用于比对所述手势特征和所述手势模型,得到匹配的手势;确定模块,用于将所述匹配的手势作为有效手势,其中,所述有效手势为所述匹配的人脸图像所对应的控制者的手势,用于对所述受控对象进行控制。
在本发明实施例中,通过采集对受控对象进行控制的一个或多个控制者的手势图像;获取一个或多个控制者的人脸图像;对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;识别手势图像中匹配的人脸图像所对应的控制者的控制手势的方法,在进行手势识别之前就确定了要识别的控制者,并不需要在手势识别的过程中从多个手势图像中提取去除干扰手势。由于控制者是确定的,即使出现不同控制者的相同手势也能从相同的手势中确定该手势所指示的功能。从而解决了现有技术中多个不同的手势进行控制时准确度比较低的技术问题,达到了提高基于手势识别的控制的准确度。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据现有技术的一种手势识别方法的流程图;
图2是根据本发明实施例的手势识别的识别方法的流程图;
图3是根据本发明实施例的一种可选地手势识别的识别方法的流程图;以及
图4是根据本发明实施例的手势识别的识别装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种手势识别的识别方法的方法实施例。该手势识别的识别方法可以在手势识别之前从多个控制者中确定一个进行手势控制的控制者,确定控制者时采用人脸识别,这样,即使在手势识别的过程中采集到多个控制者的手势,只要确定控制者是谁,就能准确的识别出哪些手势是对受控对象进行控制的手势,哪些是干扰手势,从而解决了现有技术中多个不同的手势进行控制时准确度比较低的技术问题。同时,由于先通过人脸识别确定控制者,避免了用复杂的算法去除干扰手势。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图2是根据本发明实施例的手势识别的识别方法的流程图,如图2所示,该方法包括如下步骤:
步骤S202,采集对受控对象进行控制的一个或多个控制者的手势图像。采集手势图像可以采用设置在受控对象上的照相机、摄像机等图像采集装置。采集的手势图像可以是一个或多个控制者的,一个或多个控制者可以是有权限控制受控对象的控制者,也可以没有权限对受控对象进行控制的控制者。
步骤S204,获取一个或多个控制者的人脸图像。采用与获取手势图像相同的图像采集装置采集人脸图像。
步骤S206,对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像。受控对象中预先存储了与受控对象相关联的人脸图像,关联的人脸图像可以是一个或者多个,这些关联的人脸图像所对应的控制者是可以对受控对象进行控制的,从获取的人脸图像中匹配出允许对受控对象进行控制的控制者,即得到匹配的人脸图像。
步骤S208,识别手势图像中匹配的人脸图像所对应的控制者的控制手势。对匹配的人脸图像的控制手势进行识别,识别出控制手势所指示的功能,即避免了识别不能控制受控对象的控制者的手势。上述功能可以包括但不限于以下内容:空调的风力调剂、温度调节、温度调节范围、音响设备的声音调节和灯光的光线调节等可以利用手势进行控制的家居设备的功能。
通过上述实施例,在进行手势识别之前就确定了要识别的控制者,并不需要在手势识别的过程中从多个手势图像中提取去除干扰手势。由于控制者是确定的,即使出现不同控制者的相同手势也能从相同的手势中确定该手势所指示的功能。从而解决了现有技术中多个不同的手势进行控制时准确度比较低的技术问题,达到了提高基于手势识别的控制的准确度。
可选地,匹配的人脸图像为至少一个控制者的人脸图像。一个受控对象可以被至少一个控制者控制,提高了受控对象的被控灵活性。该识别方法可以应用于空调、冰箱等智能家居设备中,为智能家居设备配置多个控制者能使得用户获得更好的用户体验。
可选地,当受控对象可以被多个控制者控制时,不同的控制者可以采用不同的控制手势以实现相同功能的控制,即匹配的人脸图像对应第一控制者和第二控制者,第一控制者和第二控制者采用相同或不同的手势控制受控对象执行相同的功能。不同控制者可以采用同样的规则和方式对受控对象进行控制,例如,第一控制者采用剪刀的手势控制空调风力,第二控制者采用剪刀的手势控制空调调温,当第一控制者和第二控制者同为空调的控制者,且同时比出剪刀的手势对空调进行控制时,由于空调可以识别出第一控制者和第二控制者的人脸,采集手势图像后能够判断出哪个剪刀的手势属于第一控制者,哪个剪刀的手势属于第二控制者,从而确定属于不同的控制者的剪刀的手势对应的功能。这样,在准确的识别出不同控制者的手势所对应的功能的同时,还能增加每个控制者的手势多样性。
具体地,在匹配人脸图像时采用人脸特征进行匹配,即对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像包括:提取一个或多个控制者的人脸图像的人脸特征。获取与受控对象相关联的人脸特征。匹配提取的人脸特征与受控对象相关联的人脸特征,得到匹配的人脸图像。人脸特征的提取可以采用现有的人脸识别方法,提取到人脸特征存储在受控对象中,即与受控对象相关联的人脸特征。当受控对象的图像采集装置采集到人脸图像后,提取人脸图像中的人脸特征,并与存储在受控对象中的人脸特征进行匹配,就得到了匹配的人脸图像,也就确定了进行控制的控制者是谁。
进一步地,识别手势图像中匹配的人脸图像所对应的控制者的控制手势包括:提取一个或多个控制者的手势图像的手势特征。获取匹配的人脸图像所对应的控制者的控制手势的手势模型。比对手势特征和手势模型,得到匹配的手势。将匹配的手势作为有效手势,其中,有效手势为匹配的人脸图像所对应的控制者的手势,用于对受控对象进行控制。手势模型可以是根据控制者的手势特征进行训练得到的模型,与相应的控制者的人脸图像对应存储在受控对象中。在识别控制手势的过程中,提取一个或多个控制者的手势特征,与受控对象中存储的手势模型进行比对,从而确定匹配的手势。具体的对应关系如表1所示。
表1
可选地,如表1所示,在对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配之前,方法还包括:采集控制受控对象的控制者的人脸图像。提取人脸图像的人脸特征。关联人脸特征和受控对象。在进行手势识别之前,受控对象中存储了控制者、手势特征和受控对象功能之间的对应关系,在手势识别之前,先对人脸图像进行匹配,确定控制者为人脸1,然后从采集的手势图像中查找与手势模型A和手势模型B相匹配的手势,如果查找到手势模型A匹配的手势,则控制受控对象执行功能a;如果在手势识别之前,还检测到包括人脸2所对应控制者,然后从采集的手势图像中查找与手势模型A和手势模型C相匹配的手势,如果匹配到手势模型A,则确定人脸1和人脸2对应的控制者采用了相同手势,但是,人脸1的手势控制的是功能a,人脸2的手势控制的是功能b。具体地,人脸1可以是年轻人的脸,功能a可以是控制空调在第一范围内调节温度;人脸b可以是小孩子的脸,功能b可以是控制空调在第二范围内调节温度,老年人还可以是人脸c,其手势控制功能c,功能c可以是控制空调在第三范围内调节温度。由于不同的人对温度的需求不同,因此,为不同的人脸对应不同的调节范围,在采集到手势后,按照人脸所对应的调节范围等来控制受控对象。由此可见,该实施例的一个受控对象支持多个控制者的控制,并且,多个控制者可以采用相同的手势实现不同功能的控制,或者采用不同的手势实现相同的功能。
以下结合图3对本实施例的方法进行说明。该方法可以用在例如智能家居设备等可以通过手势识别进行控制的设备中。
步骤S302,输入视频图像。通过摄像机等图像采集装置采集视频图像,该视频图像可以包括人脸和手势。如果该视频图像是图像的第一帧,可以执行步骤S304进行人脸识别过程,如果不是第一帧,可以直接执行步骤S310进行手势识别。
步骤S304,捕捉人脸,即获取人脸的人脸特征,可以采用现有的人脸识别的方法。
步骤S306,控制者,根据步骤S304捕捉的人脸的人脸特征,确定控制者的身份,例如,采用存储在空调中的控制者的名称或者其他能够表示身份的I D信息等。
步骤S308,手势模型,根据确定的控制者来查找存储在受控对象中的手势模型。
步骤S310,手势特征。即提取获得的视频图像中的手势特征,以便与步骤S308中的手势模型比较以进行手势识别。
步骤S312,是否为有效手势,判断视屏图像中的手势是否包括有效手势,如果是,则执行步骤S314;如果否,则继续提取视频图像中的下一帧图像,以便再次提取手势特征。
步骤S314,控制对象,即控制受控对象,利用步骤S312识别出的有效手势对受控对象进行控制。
步骤S316,摄像头是否关闭,如果是,则结束;如果否,则采集下一帧视频图像。
通过上述步骤,在手势识别之前先确定控制者的身份,并利用与控制者身份对应的手势模型去匹配视屏图像中属于该控制者的手势,以得到有效手势,利用有效手势对受控对象进行控制。这样在同一时间多个控制者可以控制相同或者不同的受控对象,不会限制控制者的手势种类,受控对象也不会因为不同控制者的相同手势造成有效手势判断错误的情况,保证手势控制的准确度比较高的情况下还能给使用者带来了快捷方便的交互体验。
根据本发明实施例,提供了一种手势识别的识别装置的实施例。该手势识别的识别装置可以应用上述手势识别的识别方法,上述手势识别的识别方法也可以通过该手势识别的识别装置执行。
图4是根据本发明实施例的手势识别的识别装置的示意图,如图4所示,该手势识别的识别装置包括:第一采集单元10、获取单元20、匹配单元30和识别单元40。
第一采集单元10用于采集对受控对象进行控制的一个或多个控制者的手势图像。采集手势图像可以采用设置在受控对象上的照相机、摄像机等图像采集装置。采集的手势图像可以是一个或多个控制者的,一个或多个控制者可以是有权限控制受控对象的控制者,也可以没有权限对受控对象进行控制的控制者。
获取单元20用于获取一个或多个控制者的人脸图像。采用与获取手势图像相同的图像采集装置采集人脸图像。
匹配单元30用于对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像。受控对象中预先存储了与受控对象相关联的人脸图像,关联的人脸图像可以是一个或者多个,这些关联的人脸图像所对应的控制者是可以对受控对象进行控制的,从获取的人脸图像中匹配出允许对受控对象进行控制的控制者,即得到匹配的人脸图像。
识别单元40用于识别手势图像中匹配的人脸图像所对应的控制者的控制手势。对匹配的人脸图像的控制手势进行识别,识别出控制手势所指示的功能,即避免了识别不能控制受控对象的控制者的手势。上述功能可以包括但不限于以下内容:空调的风力调剂、温度调节、温度调节范围、音响设备的声音调节和灯光的光线调节等可以利用手势进行控制的家居设备的功能。
通过上述实施例,在进行手势识别之前就确定了要识别的控制者,并不需要在手势识别的过程中从多个手势图像中提取去除干扰手势。由于控制者是确定的,即使出现不同控制者的相同手势也能从相同的手势中确定该手势所指示的功能。从而解决了现有技术中多个不同的手势进行控制时准确度比较低的技术问题,达到了提高基于手势识别的控制的准确度。
可选地,该装置还包括:第二采集单元,用于在对一个或多个控制者的人脸图像与受控对象相关联的人脸图像进行匹配之前,采集控制受控对象的控制者的人脸图像;提取单元,用于提取人脸图像的人脸特征;关联单元,用于关联人脸特征和受控对象。
如表1所示,在进行手势识别之前,受控对象中存储了控制者、手势特征和受控对象功能之间的对应关系,在手势识别之前,先对人脸图像进行匹配,确定控制者为人脸1,然后从采集的手势图像中查找与手势模型A和手势模型B相匹配的手势,如果查找到手势模型A匹配的手势,则控制受控对象执行功能a;如果在手势识别之前,还检测到包括人脸2所对应控制者,然后从采集的手势图像中查找与手势模型A和手势模型C相匹配的手势,如果匹配到手势模型A,则确定人脸1和人脸2对应的控制者采用了相同手势,但是,人脸1的手势控制的是功能a,人脸2的手势控制的是功能b。具体地,人脸1可以是年轻人的脸,功能a可以是控制空调在第一范围内调节温度;人脸b可以是小孩子的脸,功能b可以是控制空调在第二范围内调节温度,老年人还可以是人脸c,其手势控制功能c,功能c可以是控制空调在第三范围内调节温度。由于不同的人对温度的需求不同,因此,为不同的人脸对应不同的调节范围,在采集到手势后,按照人脸所对应的调节范围等来控制受控对象。由此可见,该实施例的一个受控对象支持多个控制者的控制,并且,多个控制者可以采用相同的手势实现不同功能的控制,或者采用不同的手势实现相同的功能。
可选地,在匹配人脸图像时采用人脸特征进行匹配,匹配单元包括:第一提取模块,用于提取一个或多个控制者的人脸图像的人脸特征;第一获取模块,用于获取与受控对象相关联的人脸特征;匹配模块,用于匹配提取的人脸特征与受控对象相关联的人脸特征,得到匹配的人脸图像。人脸特征的提取可以采用现有的人脸识别方法,提取到人脸特征存储在受控对象中,即与受控对象相关联的人脸特征。当受控对象的图像采集装置采集到人脸图像后,提取人脸图像中的人脸特征,并与存储在受控对象中的人脸特征进行匹配,就得到了匹配的人脸图像,也就确定了进行控制的控制者是谁。
当受控对象可以被多个控制者控制时,不同的控制者可以采用不同的控制手势以实现相同功能的控制,即匹配的人脸图像对应第一控制者和第二控制者,第一控制者和第二控制者采用相同或不同的手势控制受控对象执行相同的功能。不同控制者可以采用同样的规则和方式对受控对象进行控制,例如,第一控制者采用剪刀的手势控制空调风力,第二控制者采用剪刀的手势控制空调调温,当第一控制者和第二控制者同为空调的控制者,且同时比出剪刀的手势对空调进行控制时,由于空调可以识别出第一控制者和第二控制者的人脸,采集手势图像后能够判断出哪个剪刀的手势属于第一控制者,哪个剪刀的手势属于第二控制者,从而确定属于不同的控制者的剪刀的手势对应的功能。这样,在准确的识别出不同控制者的手势所对应的功能的同时,还能增加每个控制者的手势多样性。
进一步地,识别单元包括:第二提取模块,用于提取一个或多个控制者的手势图像的手势特征;第二获取模块,用于获取匹配的人脸图像所对应的控制者的控制手势的手势模型;比对模块,用于比对手势特征和手势模型,得到匹配的手势;确定模块,用于将匹配的手势作为有效手势,其中,有效手势为匹配的人脸图像所对应的控制者的手势,用于对受控对象进行控制。
手势模型可以是根据控制者的手势特征进行训练得到的模型,与相应的控制者的人脸图像对应存储在受控对象中。在识别控制手势的过程中,提取一个或多个控制者的手势特征,与受控对象中存储的手势模型进行比对,从而确定匹配的手势。
通过上述实施例,在手势识别之前先确定控制者的身份,并利用与控制者身份对应的手势模型去匹配视屏图像中属于该控制者的手势,以得到有效手势,利用有效手势对受控对象进行控制。这样在同一时间多个控制者可以控制相同或者不同的受控对象,不会限制控制者的手势种类,受控对象也不会因为不同控制者的相同手势造成有效手势判断错误的情况,保证手势控制的准确度比较高的情况下还能给使用者带来了快捷方便的交互体验。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (9)
1.一种手势识别的识别方法,其特征在于,包括:
采集对受控对象进行控制的多个控制者的手势图像;
获取所述多个控制者的人脸图像;
对所述多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;
识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势;
其中,所述匹配的人脸图像对应第一控制者和第二控制者,
所述第一控制者和所述第二控制者采用相同的手势控制所述受控对象执行不相同的功能;或者,所述第一控制者和所述第二控制者采用不同的手势控制所述受控对象执行相同的功能;
其中,在识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势之前,所述方法还包括:在所述受控对象中存储所述多个控制者、所述多个控制者的手势图像的手势特征和所述受控对象的功能之间的对应关系。
2.根据权利要求1所述的方法,其特征在于,在对所述多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配之前,所述方法还包括:
采集控制所述受控对象的控制者的人脸图像;
提取所述人脸图像的人脸特征;
关联所述人脸特征和受控对象。
3.根据权利要求1或2所述的方法,其特征在于,对所述多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像包括:
提取所述多个控制者的人脸图像的人脸特征;
获取与所述受控对象相关联的人脸特征;
匹配提取的人脸特征与所述受控对象相关联的人脸特征,得到匹配的人脸图像。
4.根据权利要求3所述的方法,其特征在于,识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势包括:
提取所述多个控制者的手势图像的手势特征;
获取所述匹配的人脸图像所对应的控制者的控制手势的手势模型;
比对所述手势特征和所述手势模型,得到匹配的手势;
将所述匹配的手势作为有效手势,其中,所述有效手势为所述匹配的人脸图像所对应的控制者的手势,用于对所述受控对象进行控制。
5.根据权利要求1所述的方法,其特征在于,所述匹配的人脸图像为至少一个控制者的人脸图像。
6.一种手势识别的识别装置,其特征在于,包括:
第一采集单元,用于采集对受控对象进行控制的多个控制者的手势图像;
获取单元,用于获取所述多个控制者的人脸图像;
匹配单元,用于对所述多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配,得到匹配的人脸图像;
识别单元,用于识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势;
其中,所述匹配的人脸图像对应第一控制者和第二控制者,
所述第一控制者和所述第二控制者采用相同的手势控制所述受控对象执行不相同的功能;或者,所述第一控制者和所述第二控制者采用不同的手势控制所述受控对象执行相同的功能;
其中,所述识别装置还用于在识别所述手势图像中所述匹配的人脸图像所对应的控制者的控制手势之前,在所述受控对象中存储所述多个控制者、所述多个控制者的手势图像的手势特征和所述受控对象的功能之间的对应关系。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二采集单元,用于在对所述多个控制者的人脸图像与所述受控对象相关联的人脸图像进行匹配之前,采集控制所述受控对象的控制者的人脸图像;
提取单元,用于提取所述人脸图像的人脸特征;
关联单元,用于关联所述人脸特征和受控对象。
8.根据权利要求6或7所述的装置,其特征在于,所述匹配单元包括:
第一提取模块,用于提取所述多个控制者的人脸图像的人脸特征;
第一获取模块,用于获取与所述受控对象相关联的人脸特征;
匹配模块,用于匹配提取的人脸特征与所述受控对象相关联的人脸特征,得到匹配的人脸图像。
9.根据权利要求8所述的装置,其特征在于,所述识别单元包括:
第二提取模块,用于提取所述多个控制者的手势图像的手势特征;
第二获取模块,用于获取所述匹配的人脸图像所对应的控制者的控制手势的手势模型;
比对模块,用于比对所述手势特征和所述手势模型,得到匹配的手势;
确定模块,用于将所述匹配的手势作为有效手势,其中,所述有效手势为所述匹配的人脸图像所对应的控制者的手势,用于对所述受控对象进行控制。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510523178.9A CN105095882B (zh) | 2015-08-24 | 2015-08-24 | 手势识别的识别方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510523178.9A CN105095882B (zh) | 2015-08-24 | 2015-08-24 | 手势识别的识别方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105095882A CN105095882A (zh) | 2015-11-25 |
CN105095882B true CN105095882B (zh) | 2019-03-19 |
Family
ID=54576270
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510523178.9A Active CN105095882B (zh) | 2015-08-24 | 2015-08-24 | 手势识别的识别方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105095882B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106203299A (zh) * | 2016-06-30 | 2016-12-07 | 北京二郎神科技有限公司 | 一种可操控设备的控制方法和装置 |
CN106444415B (zh) * | 2016-12-08 | 2019-10-01 | 湖北大学 | 智能家居控制方法及系统 |
CN106851937A (zh) * | 2017-01-25 | 2017-06-13 | 触景无限科技(北京)有限公司 | 一种手势控制台灯的方法及装置 |
CN107255928A (zh) * | 2017-06-05 | 2017-10-17 | 珠海格力电器股份有限公司 | 一种设备控制方法、装置及家电设备 |
CN107491755B (zh) | 2017-08-16 | 2021-04-27 | 京东方科技集团股份有限公司 | 用于手势识别的方法及装置 |
CN107908277B (zh) * | 2017-09-30 | 2019-12-03 | 珠海格力电器股份有限公司 | 一种控制装置、设备以及控制方法 |
CN108427303B (zh) * | 2018-04-23 | 2020-04-10 | 珠海格力电器股份有限公司 | 一种智能家居控制系统 |
CN109214301A (zh) * | 2018-08-10 | 2019-01-15 | 百度在线网络技术(北京)有限公司 | 基于人脸识别和手势识别的控制方法及装置 |
CN110186167B (zh) * | 2019-05-31 | 2021-08-13 | 广东美的制冷设备有限公司 | 空调器的控制方法、装置、空调器及存储介质 |
CN111290579B (zh) * | 2020-02-10 | 2022-05-20 | Oppo广东移动通信有限公司 | 虚拟内容的控制方法、装置、电子设备及计算机可读介质 |
CN111273777A (zh) * | 2020-02-11 | 2020-06-12 | Oppo广东移动通信有限公司 | 虚拟内容的控制方法、装置、电子设备及存储介质 |
EP3931744A4 (en) * | 2020-04-28 | 2022-01-05 | SZ DJI Technology Co., Ltd. | SYSTEM AND METHOD FOR OPERATING A MOBILE OBJECT BASED ON INDICATIONS FROM A HUMAN BODY |
CN112053505B (zh) * | 2020-08-21 | 2022-07-01 | 杭州小电科技股份有限公司 | 移动电源租借方法、装置、系统、电子装置和存储介质 |
CN114153308B (zh) * | 2020-09-08 | 2023-11-21 | 阿里巴巴集团控股有限公司 | 手势控制方法、装置、电子设备及计算机可读介质 |
CN112270302A (zh) * | 2020-11-17 | 2021-01-26 | 支付宝(杭州)信息技术有限公司 | 肢体控制方法、装置和电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102081918A (zh) * | 2010-09-28 | 2011-06-01 | 北京大学深圳研究生院 | 一种视频图像显示控制方法及视频图像显示器 |
CN102854983A (zh) * | 2012-09-10 | 2013-01-02 | 中国电子科技集团公司第二十八研究所 | 一种基于手势识别的人机交互方法 |
CN103136508A (zh) * | 2011-12-05 | 2013-06-05 | 联想(北京)有限公司 | 手势识别方法及电子设备 |
CN104750252A (zh) * | 2015-03-09 | 2015-07-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8847881B2 (en) * | 2011-11-18 | 2014-09-30 | Sony Corporation | Gesture and voice recognition for control of a device |
-
2015
- 2015-08-24 CN CN201510523178.9A patent/CN105095882B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102081918A (zh) * | 2010-09-28 | 2011-06-01 | 北京大学深圳研究生院 | 一种视频图像显示控制方法及视频图像显示器 |
CN103136508A (zh) * | 2011-12-05 | 2013-06-05 | 联想(北京)有限公司 | 手势识别方法及电子设备 |
CN102854983A (zh) * | 2012-09-10 | 2013-01-02 | 中国电子科技集团公司第二十八研究所 | 一种基于手势识别的人机交互方法 |
CN104750252A (zh) * | 2015-03-09 | 2015-07-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105095882A (zh) | 2015-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105095882B (zh) | 手势识别的识别方法和装置 | |
KR102288302B1 (ko) | 적외선 영상을 이용한 사용자 인증 방법 및 장치 | |
CN103810490B (zh) | 一种确定人脸图像的属性的方法和设备 | |
US8724910B1 (en) | Selection of representative images | |
CN104050449B (zh) | 一种人脸识别方法及装置 | |
CN105425964B (zh) | 一种手势识别方法和系统 | |
US20170032182A1 (en) | System for adaptive real-time facial recognition using fixed video and still cameras | |
CN105912912B (zh) | 一种终端用户身份登录方法和系统 | |
CN102779274B (zh) | 一种基于双目摄像头的智能电视人脸识别方法 | |
CN104582187A (zh) | 基于人脸识别和表情识别的记录与灯光控制系统及方法 | |
CN101584575A (zh) | 一种基于人脸识别技术的年龄评估方法 | |
CN105631404B (zh) | 对照片进行聚类的方法及装置 | |
CN106203299A (zh) | 一种可操控设备的控制方法和装置 | |
KR20140005195A (ko) | 얼굴 등록 방법 | |
CN106056138A (zh) | 照片处理装置及方法 | |
CN108833774A (zh) | 拍照控制方法、装置和无人机系统 | |
CN105229700B (zh) | 用于从多个连续拍摄图像提取峰图像的设备和方法 | |
CN111291780B (zh) | 一种跨域网络训练及图像识别方法 | |
CN109427038A (zh) | 一种手机照片显示方法和系统 | |
JP2013164832A (ja) | オブジェクト認識装置および方法 | |
CN105979331A (zh) | 一种智能电视的数据推荐方法和装置 | |
CN111191527B (zh) | 属性识别方法、装置、电子设备及可读存储介质 | |
KR20160042646A (ko) | 얼굴 인식 방법 | |
CN103984415A (zh) | 一种信息处理方法及电子设备 | |
Yan et al. | Clustered multi-task linear discriminant analysis for view invariant color-depth action recognition |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |