CN105282582B - 手指识别遥控方法及装置 - Google Patents

手指识别遥控方法及装置 Download PDF

Info

Publication number
CN105282582B
CN105282582B CN201410268236.3A CN201410268236A CN105282582B CN 105282582 B CN105282582 B CN 105282582B CN 201410268236 A CN201410268236 A CN 201410268236A CN 105282582 B CN105282582 B CN 105282582B
Authority
CN
China
Prior art keywords
finger
pixel
target area
area image
fist
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410268236.3A
Other languages
English (en)
Other versions
CN105282582A (zh
Inventor
王云华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL New Technology Co Ltd
Original Assignee
Shenzhen TCL New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL New Technology Co Ltd filed Critical Shenzhen TCL New Technology Co Ltd
Priority to CN201410268236.3A priority Critical patent/CN105282582B/zh
Publication of CN105282582A publication Critical patent/CN105282582A/zh
Application granted granted Critical
Publication of CN105282582B publication Critical patent/CN105282582B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种手指识别遥控方法,包括:获取摄像头拍摄的包含用户手部的图片;当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;根据所述手指动作行为输出相应的控制指令。本发明还公开了一种手指识别遥控装置。本发明提高了遥控指令识别的效率及准确性。

Description

手指识别遥控方法及装置
技术领域
本发明涉及电视技术领域,尤其涉及手指识别遥控方法及装置。
背景技术
目前,智能设备(智能电视机)上的手势识别应用越来越多,但是手指识别也存在诸多缺陷。现有技术中的手势识别通常是利用图片的灰阶亮度Y 去识别手,但是由于采用灰阶亮度Y进行手势识别,需要将原来的红绿蓝像素数据压缩成YCbCr,因此使得通过手势控制指令识别的效率较低,而且在传送数据时,传送过程容易受到干扰,影响控制指令识别的准确性。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提高了遥控指令识别的效率及准确性。
为实现上述目的,本发明提供的一种手指识别遥控方法包括以下步骤:
获取摄像头拍摄的包含用户手部的图片;
当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
根据所述手指动作行为输出相应的控制指令。
优选地,所述获取摄像头拍摄的包含用户手部的图片包括:
当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
优选地,所述当图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像包括:
当图片中存在拳头时,读取所述拳头的拳眼坐标;
以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
优选地,所述根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为包括:
获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
根据比较的结果确定用户当前输入的手指动作行为。
优选地,所述获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值之前还包括:
分析第一次获取的所述目标区域图像中间行像素信息;
根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;
所述根据比较的结果确定用户当前输入的手指动作行为具体为:当根据中间行像素信息预判断的用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
此外,为实现上述目的,本发明还提供一种手指识别遥控装置包括:
第一获取模块,用于获取摄像头拍摄的包含用户手部的图片;
第二获取模块,用于当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
判断模块,用于根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
处理模块,用于当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
确定模块,用于根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
指令输出模块,用于根据所述手指动作行为输出相应的控制指令。
优选地,所述第一获取模块包括:
特征分析单元,用于当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
第一获取单元,用于当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
优选地,所述第二获取模块包括:
读取单元,用于当图片中存在拳头时,读取所述拳头的拳眼坐标;
第二获取单元,用于以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
优选地,所述确定模块包括:
第三获取单元,用于获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
比较单元,用于比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
确定单元,用于根据比较的结果确定用户当前输入的手指动作行为。
优选地,所述确定模块还包括:
像素分析单元,用于分析第一次获取的所述目标区域图像中间行像素信息;
所述确定单元具体用于根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;并当根据中间行像素信息预判断的用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
本发明通过获取摄像头拍摄的包含用户手部的图片,并获取图片中拳头及其周边预置范围形成的目标区域图像,从而根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指。在目标区域图像存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成 N张所述目标区域图像,并根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为,然后根据该手指动作行为输出相应的控制指令,从而达到遥控的目的。由于本发明采用了人手手指的像素特征分析用户的手指动作行为,相对于现有技术中采用图片的灰阶亮度Y去识别手指的操作,无需将红绿蓝像素压缩数据到YCBCR进行判断,因此提高了遥控指令识别的效率及准确性。
附图说明
图1为本发明手指识别遥控方法一实施例的流程示意图;
图2为图1中步骤S10的细化流程示意图;
图3为图1中步骤S20的细化流程示意图;
图4为图1中步骤S50的一实施例细化流程示意图;
图5为图1中步骤S50的另一实施例细化流程示意图;
图6为本发明手指识别遥控装置一实施例的功能模块示意图;
图7为图6中第一获取模块的细化功能模块示意图;
图8为图6中第二获取模块的细化功能模块示意图;
图9为图6中确定模块的细化功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种手指识别遥控方法,参照图1,在一实施例中,该手指识别遥控方法包括:
步骤S10,获取摄像头拍摄的包含用户手部的图片;
本实施例提供的手指识别遥控方法可应用于智能电视的遥控,具体地,上述摄像头可以为设置于电视电视机上的摄像头,当用户在电视机前方观看电视时,可拍摄获取包含用户手部的图片。
步骤S20,当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
当获取到摄像头拍摄的包含用户手部的图片后,根据现有的人手拳头识别方法,判断当前获取的图片中是否存在拳头;当存在拳头时,获取拳头及其周边预置范围形成的目标区域图像。例如可以以拳头为基准,向其上方延伸预置距离,形成上述目标区域图像,该目标区域图像为上述图片的一预置大小的矩形框内的区域图像。
步骤S30,根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
上述手指的像素特征包括:手指表面像素、手指关节像素和手指指甲像素,通过判断所述目标区域图像中是否存在符合手指表面像素、手指关节像素和手指指甲像素范围的像素点,并判断符合手指表面像素范围、手指关节像素范围和手指指甲像素范围的像素点个数是否大于预设值,来判断所述目标区域图像中所述拳头以外是否存在手指。
例如各像素颜色组成、像素点的色阶值及色阶值的偏差范围如下表所示:
具体地,以获取到的目标区域图像建立坐标系,在该目标区域图像中预置第一坐标范围形成手指表面像素判断的第一矩形区域,预置第二坐标范围形成第一手指关节像素判断的第二矩形区域,预置第三坐标范围形成第二手指关节像素判断的第三矩形区域,预置第四坐标范围形成手指指甲像素判断的第四矩形区域。判断在第一矩形区域内的符合手指表面像素颜色组成的像素点数量是否大于第一阈值,若是,则表明目标区域图像中所述拳头以外存在手指表面的特征;判断在第二矩形区域内的符合手指关节像素颜色组成的像素点数量是否大于第二阈值,若是,则表明目标区域图像中所述拳头以外存在第一手指关节的特征;判断在第三矩形区域内的符合手指关节像素颜色组成的像素点数量是否大于第三阈值,若是,则表明目标区域图像中所述拳头以外存在第二手指关节的特征;判断在第四矩形区域内的符合手指指甲像素颜色组成的像素点数量是否大于第四阈值,若是,则表明目标区域图像中所述拳头以外存在手指指甲的特征。当上述四者均为是时,则判定目标区域图像中拳头以外存在手指。
步骤S40,当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
当通过手指的像素特征分析判定拳头以外存在手指时,则每间隔预置时间由摄像头拍摄一张图片,并根据该图片获取拳头及其周边预置范围形成对应的目标区域图像;具体地,上述预置时间和N的大小可根据实际需要进行设置,在此不作进一步地限定。例如预置时间为0.5秒,N为3。从而得到手指动作的连续三张图片,并由系统开辟存储区一存储第一张目标区域图像,存储区二存储第二张目标区域图像,存储区三中存储第三张目标区域图像。
步骤S50,根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
步骤S60,根据所述手指动作行为输出相应的控制指令。
由于上述各目标区域图像存在时间先后顺序,因此可根据各目标区域图像中手指的位置判定,用户手指的动作行为,该手指动作行为包括手指从上往下动作和从下往上动作,上述控制指令的具体形式可根据实际需要进行设置。当该手指识别遥控方法应用于智能电视的频道切换时,手指从上往下动作可对应频道减的控制指令,手指从下往上动作可对应频道加的控制指令。具体地,在进入手指操作指令输入状态时,获取到手指动作行为是从上往下动作时,将输出频道减的控制指令,从而控制智能电视机进行频道减1操作;当获取到手指动作行为是从下往上动作时,将输出频道加的控制指令,从而控制智能电视机进行频道加1操作。
本发明通过获取摄像头拍摄的包含用户手部的图片,并获取图片中拳头及其周边预置范围形成的目标区域图像,从而根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指。在目标区域图像存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成 N张所述目标区域图像,并根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为,然后根据该手指动作行为输出相应的控制指令,从而达到遥控的目的。由于本发明采用了人手手指的像素特征分析用户的手指动作行为,相对于现有技术中采用图片的灰阶亮度Y去识别手指的操作,无需将红绿蓝像素压缩数据到YCBCR进行判断,因此提高了遥控指令识别的效率及准确性。
进一步地,参照图2,基于上述实施例,本实施例中,上述步骤S10包括:
步骤S11,当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
步骤S12,当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
首先需要判断摄像头拍摄的图片中是否存在用户的头部特征;若存在用户的头部特征,则启动手臂识别系统,以识别当前获取的图片中手臂特征是否为举手行为特征。具体地,可根据用户的手臂是否在头部左右,判断用户是否举手。当判定用户为举手时,且该图片中包含用户的手部时,获取摄像头当前拍摄的图片。本实施例,由于根据用户的头部特征及手臂特征判断用户为举手操作时,再进行图片获取,从而提高了控制指令输入的准确性,防止手指的误动作导致错误控制指令的输入。
进一步地,参照图3,基于上述实施例,本实施例中,上述步骤S20包括:
步骤S21,当图片中存在拳头时,读取所述拳头的拳眼坐标;
步骤S22,以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
具体地,上述目标区域图像可以为一矩形区域图像,则上述拳眼优选为位于矩形区域图像底边的中心位置。例如,上述拳眼在上述图片中的坐标为 (100,100)、上述第一预置距离为30、第二预置距离为30、第三预置距离为100时,则上述矩形区域图像的大小为60*100,且矩形局域图像的四个顶角的坐标分别为(70,100)、(130,100)、(70,200)和(130,200)。
进一步地,参照图4,基于上述实施例,本实施例中,上述步骤S50包括:
步骤S51,获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
步骤S52,比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
步骤S53,根据比较的结果确定用户当前输入的手指动作行为。
在手指进行从下往上动作的过程中,手指在拳眼所在列的纵向坐标值将随之改变。例如在第一张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,150),当在第二张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,140),则判定在第一张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值大于第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值,即可确定用户手指的行为动作是从上往下动作;当在第二张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,160),则判定在第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值小于第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值,即可确定用户手指的行为动作是从下往上动作。应当说明的是,比较的对象可根据实际需要进行设置,本实施例中上述第一张目标区域图像和第二张目标区域图像仅用于解释说明,并不限定比较的对象。
可以理解的是,本实施例中,是以手指表面像素进行判断用户手指的行为动作,在其他实施例中还可采用用户手指指甲像素进行判断。具体地,上述步骤S51可以替换为:获取各目标区域图像中手指指甲像素坐标的最大纵坐标值;上述步骤S52可以替换为比较一所述目标区域图像中手指指甲像素坐标的最大纵坐标值与另一所述目标区域图像中手指指甲像素坐标的最大纵坐标值。
进一步地,参照图5,基于上述实施例,本实施例中,在执行上述步骤 S51之前还包括:
步骤S54,分析第一次获取的所述目标区域图像中间行像素信息;
步骤S55,根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;
上述步骤S53具体为:当根据中间行像素信息预判断的用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定的用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
上述目标区域图像的大小可根据实际需要进行设置,本实施例中,优选地,当手指呈伸直状态时,手指一部分位于目标区域图像的上半部分区域内,另一部分位于目标区域图像的下半部分区域内;当手指呈弯曲状态时,手指全部位于目标区域图像的下半部分区域内。当在第一次获取的目标区域图像 (即上述第一张目标区域图像)的中间行像素信息中存在手指表面像素信息时,则可预判定手指为伸直状态,从而预判定用户手指动作行为从上往下动作;当在第一次获取的目标区域图像(即上述第一张目标区域图像)的中间行像素信息中不存在手指表面像素信息时,则可预判定手指为弯曲状态,从而预判定用户手指动作行为从下往上动作。当通过比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值确定的手指行为动作,与根据所述中间行像素信息中是否存在手指表面像素信息确定的手指动作行为一致时,则可根据比较的结果确定用户当前输入的手指动作行为;当不一致时,退出本次的识别过程,不产生控制指令。本实施例中,通过多次进行判定,保证控制指令输入的准确性。
本发明还提供一种手指识别遥控装置,参照图6,在一实施例中,本发明提供的手指识别遥控装置包括:
第一获取模块100,用于获取摄像头拍摄的包含用户手部的图片;
本实施例提供的手指识别遥控方法可应用于智能电视的遥控,具体地,上述摄像头可以为设置于电视电视机上的摄像头,当用户在电视机前方观看电视时,可拍摄获取包含用户手部的图片。
第二获取模块200,用于当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
当获取到摄像头拍摄的包含用户手部的图片后,根据现有的人手拳头识别方法,判断当前获取的图片中是否存在拳头;当存在拳头时,获取拳头及其周边预置范围形成的目标区域图像。例如可以以拳头为基准,向其上方延伸预置距离,形成上述目标区域图像,该目标区域图像为上述图片的一预置大小的矩形框内的区域图像。
判断模块300,用于根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
上述手指的像素特征包括:手指表面像素、手指关节像素和手指指甲像素,通过判断所述目标区域图像中是否存在符合手指表面像素、手指关节像素和手指指甲像素范围的像素点,并判断符合手指表面像素范围、手指关节像素范围和手指指甲像素范围的像素点个数是否大于预设值,来判断所述目标区域图像中所述拳头以外是否存在手指。
例如各像素颜色组成、像素点的色阶值及色阶值的偏差范围如下表所示:
手指表面像素颜色组成 像素点(0-255)色阶值 色阶值的偏差范围
FC(R) 145 10,-10
FC(G) 117 15,-15
FC(B) 113 17,-17
手指关节像素颜色组成 像素点(0-255)色阶值 色阶值的偏差范围
FJ(R) 121 10,-10
FJ(G) 77 15,-15
FJ(B) 68 17,-17
手指指夹像素颜色组成 像素点(0-255)色阶值 色阶值的偏差范围
FF(R) 200 10,-10
FF(G) 200 15,-15
FF(B) 190 17,-17
具体地,以获取到的目标区域图像建立坐标系,在该目标区域图像中预置第一坐标范围形成手指表面像素判断的第一矩形区域,预置第二坐标范围形成第一手指关节像素判断的第二矩形区域,预置第三坐标范围形成第二手指关节像素判断的第三矩形区域,预置第四坐标范围形成手指指甲像素判断的第四矩形区域。判断在第一矩形区域内的符合手指表面像素颜色组成的像素点数量是否大于第一阈值,若是,则表明目标区域图像中所述拳头以外存在手指表面的特征;判断在第二矩形区域内的符合手指关节像素颜色组成的像素点数量是否大于第二阈值,若是,则表明目标区域图像中所述拳头以外存在第一手指关节的特征;判断在第三矩形区域内的符合手指关节像素颜色组成的像素点数量是否大于第三阈值,若是,则表明目标区域图像中所述拳头以外存在第二手指关节的特征;判断在第四矩形区域内的符合手指指甲像素颜色组成的像素点数量是否大于第四阈值,若是,则表明目标区域图像中所述拳头以外存在手指指甲的特征。当上述四者均为是时,则判定目标区域图像中拳头以外存在手指。
处理模块400,用于当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
当通过手指的像素特征分析判定拳头以外存在手指时,则每间隔预置时间由摄像头拍摄一张图片,并根据该图片获取拳头及其周边预置范围形成对应的目标区域图像;具体地,上述预置时间和N的大小可根据实际需要进行设置,在此不作进一步地限定。例如预置时间为0.5秒,N为3。从而得到手指动作的连续三张图片,并由系统开辟存储区一存储第一张目标区域图像,存储区二存储第二张目标区域图像,存储区三中存储第三张目标区域图像。
确定模块500,用于根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
指令输出模块600,用于根据所述手指动作行为输出相应的控制指令。
由于上述各目标区域图像存在时间先后顺序,因此可根据各目标区域图像中手指的位置判定,用户手指的动作行为,该手指动作行为包括手指从上往下动作和从下往上动作,上述控制指令的具体形式可根据实际需要进行设置。当该手指识别遥控方法应用于智能电视的频道切换时,手指从上往下动作可对应频道减的控制指令,手指从下往上动作可对应频道加的控制指令。具体地,在进入手指操作指令输入状态时,获取到手指动作行为是从上往下动作时,将输出频道减的控制指令,从而控制智能电视机进行频道减1操作;当获取到手指动作行为是从下往上动作时,将输出频道加的控制指令,从而控制智能电视机进行频道加1操作。
本发明通过获取摄像头拍摄的包含用户手部的图片,并获取图片中拳头及其周边预置范围形成的目标区域图像,从而根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指。在目标区域图像存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成 N张所述目标区域图像,并根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为,然后根据该手指动作行为输出相应的控制指令,从而达到遥控的目的。由于本发明采用了人手手指的像素特征分析用户的手指动作行为,相对于现有技术中采用图片的灰阶亮度Y去识别手指的操作,无需将红绿蓝像素压缩数据到YCBCR进行判断,因此提高了遥控指令识别的效率及准确性。
进一步地,参照图7,基于上述实施例,本实施例中,上述第一获取模块 100包括:
特征分析单元101,用于当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
第一获取单元102,用于当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
首先需要判断摄像头拍摄的图片中是否存在用户的头部特征;若存在用户的头部特征,则启动手臂识别系统,以识别当前获取的图片中手臂特征是否为举手行为特征。具体地,可根据用户的手臂是否在头部左右,判断用户是否举手。当判定用户为举手时,且该图片中包含用户的手部时,获取摄像头当前拍摄的图片。本实施例,由于根据用户的头部特征及手臂特征判断用户为举手操作时,再进行图片获取,从而提高了控制指令输入的准确性,防止手指的误动作导致错误控制指令的输入。
进一步地,参照图8,基于上述实施例,本实施例中,上述第二获取模块 200包括:
读取单元201,用于当图片中存在拳头时,读取所述拳头的拳眼坐标;
第二获取单元202,用于以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
具体地,上述目标区域图像可以为一矩形区域图像,则上述拳眼优选为位于矩形区域图像底边的中心位置。例如,上述拳眼在上述图片中的坐标为 (100,100)、上述第一预置距离为30、第二预置距离为30、第三预置距离为100时,则上述矩形区域图像的大小为60*100,且矩形局域图像的四个顶角的坐标分别为(70,100)、(130,100)、(70,200)和(130,200)。
进一步地,参照图9,基于上述实施例,本实施例中,上述确定模块500 包括:
第三获取单元501,用于获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
比较单元502,用于比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
确定单元503,用于根据比较的结果确定用户当前输入的手指动作行为。
在手指进行从下往上动作的过程中,手指在拳眼所在列的纵向坐标值将随之改变。例如在第一张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,150),当在第二张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,140),则判定在第一张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值大于第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值,即可确定用户手指的行为动作是从上往下动作;当在第二张目标区域图像中手指纵向坐标值最大的像素点对应的坐标值为(100,160),则判定在第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值小于第二张目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值,即可确定用户手指的行为动作是从下往上动作。应当说明的是,比较的对象可根据实际需要进行设置,本实施例中上述第一张目标区域图像和第二张目标区域图像仅用于解释说明,并不限定比较的对象。
可以理解的是,本实施例中,是以手指表面像素进行判断用户手指的行为动作,在其他实施例中还可采用用户手指指甲像素进行判断。具体地,上述第三获取单元501还可以用于获取各目标区域图像中手指指甲像素坐标的最大纵坐标值;上述比较单元502还可以用于比较一所述目标区域图像中手指指甲像素坐标的最大纵坐标值与另一所述目标区域图像中手指指甲像素坐标的最大纵坐标值。
进一步地,基于上述实施例,本实施例中,上述确定模块500还包括:
像素分析单元504,用于分析第一次获取的所述目标区域图像中间行像素信息;
所述确定单元503 具体用于根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;并根据中间行像素信息预判断用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定的用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
上述目标区域图像的大小可根据实际需要进行设置,本实施例中,优选地,当手指呈伸直状态时,手指一部分位于目标区域图像的上半部分区域内,另一部分位于目标区域图像的下半部分区域内;当手指呈弯曲状态时,手指全部位于目标区域图像的下半部分区域内。当在第一次获取的目标区域图像 (即上述第一张目标区域图像)的中间行像素信息中存在手指表面像素信息时,则可预判定手指为伸直状态,从而预判定用户手指动作行为从上往下动作;当在第一次获取的目标区域图像(即上述第一张目标区域图像)的中间行像素信息中不存在手指表面像素信息时,则可预判定手指为弯曲状态,从而预判定用户手指动作行为从下往上动作。当通过比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值确定的手指行为动作,与根据所述中间行像素信息中是否存在手指表面像素信息确定的手指动作行为一致时,则可根据比较的结果确定用户当前输入的手指动作行为;当不一致时,退出本次的识别过程,不产生控制指令。本实施例中,通过多次进行判定,保证控制指令输入的准确性。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种手指识别遥控方法,其特征在于,手指识别遥控方法包括以下步骤:
获取摄像头拍摄的包含用户手部的图片;
当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
根据所述手指动作行为输出相应的控制指令;
其中,所述手指的像素特征包括手指表面像素、手指关节像素和手指指甲像素,根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指的步骤包括:通过判断所述目标区域图像中是否存在符合手指表面像素RGB色阶范围、手指关节像素RGB色阶范围和手指指甲像素RGB色阶范围的像素点,并判断符合手指表面像素RGB色阶范围、手指关节像素RGB色阶范围和手指指甲像素RGB色阶范围的像素点个数是否大于预设值,来判断所述目标区域图像中所述拳头以外是否存在手指。
2.如权利要求1所述的手指识别遥控方法,其特征在于,所述获取摄像头拍摄的包含用户手部的图片包括:
当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
3.如权利要求1所述的手指识别遥控方法,其特征在于,所述当图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像包括:
当图片中存在拳头时,读取所述拳头的拳眼坐标;
以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
4.如权利要求3所述的手指识别遥控方法,其特征在于,所述根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为包括:
获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
根据比较的结果确定用户当前输入的手指动作行为。
5.如权利要求4所述的手指识别遥控方法,其特征在于,所述获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值之前还包括:
分析第一次获取的所述目标区域图像中间行像素信息;
根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;
所述根据比较的结果确定用户当前输入的手指动作行为具体为:当根据中间行像素信息预判断的用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
6.一种手指识别遥控装置,其特征在于,手指识别遥控装置包括:
第一获取模块,用于获取摄像头拍摄的包含用户手部的图片;
第二获取模块,用于当所述图片中存在拳头时,获取拳头及其周边预置范围形成的目标区域图像;
判断模块,用于根据手指的像素特征分析所述目标区域图像中所述拳头以外是否存在手指;
处理模块,用于当存在手指时,间隔预置时间连续获取N张摄像头拍摄的包含用户手部的图片,并对应形成N张所述目标区域图像;所述N为正整数;
确定模块,用于根据依次获得的所述目标区域图像中手指的像素特征对应的坐标,确定用户当前输入的手指动作行为;
指令输出模块,用于根据所述手指动作行为输出相应的控制指令;
其中,所述手指的像素特征包括手指表面像素、手指关节像素和手指指甲像素,所述判断模块用以通过判断所述目标区域图像中是否存在符合手指表面像素RGB色阶范围、手指关节像素RGB色阶范围和手指指甲像素RGB色阶范围的像素点,并判断符合手指表面像素RGB色阶范围、手指关节像素RGB色阶范围和手指指甲像素RGB色阶范围的像素点个数是否大于预设值,来判断所述目标区域图像中所述拳头以外是否存在手指。
7.如权利要求6所述的手指识别遥控装置,其特征在于,所述第一获取模块包括:
特征分析单元,用于当摄像头当前拍摄的图片中存在人的头部特征时,分析手臂特征;
第一获取单元,用于当所述手臂特征为举手行为特征时,获取摄像头当前拍摄的包含用户手部的图片。
8.如权利要求6所述的手指识别遥控装置,其特征在于,所述第二获取模块包括:
读取单元,用于当图片中存在拳头时,读取所述拳头的拳眼坐标;
第二获取单元,用于以所述拳眼坐标为基点,获取由所述基点向左延伸第一预置距离、向右延伸第二预置距离、向上延伸第三预置距离所形成的区域图像,并设定为目标区域图像。
9.如权利要求8所述的手指识别遥控装置,其特征在于,所述确定模块包括:
第三获取单元,用于获取各目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
比较单元,用于比较一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值与另一所述目标区域图像中拳眼所在列的像素信息中手指表面像素坐标的最大纵坐标值;
确定单元,用于根据比较的结果确定用户当前输入的手指动作行为。
10.如权利要求9所述的手指识别遥控装置,其特征在于,所述确定模块还包括:
像素分析单元,用于分析第一次获取的所述目标区域图像中间行像素信息;
所述确定单元具体用于根据所述中间行像素信息中是否存在手指表面像素信息,预判断用户当前输入的手指动作行为;并当根据中间行像素信息预判断的用户当前输入的手指动作行为与根据手指表面像素坐标的最大纵坐标值确定用户当前输入的手指动作行为一致时,根据比较的结果确定用户当前输入的手指动作行为。
CN201410268236.3A 2014-06-16 2014-06-16 手指识别遥控方法及装置 Active CN105282582B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410268236.3A CN105282582B (zh) 2014-06-16 2014-06-16 手指识别遥控方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410268236.3A CN105282582B (zh) 2014-06-16 2014-06-16 手指识别遥控方法及装置

Publications (2)

Publication Number Publication Date
CN105282582A CN105282582A (zh) 2016-01-27
CN105282582B true CN105282582B (zh) 2019-04-16

Family

ID=55150780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410268236.3A Active CN105282582B (zh) 2014-06-16 2014-06-16 手指识别遥控方法及装置

Country Status (1)

Country Link
CN (1) CN105282582B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111381668B (zh) * 2018-12-27 2024-03-26 上海华博信息服务有限公司 一种基于手指轻扫动作捕捉的拍摄方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011078009A (ja) * 2009-10-01 2011-04-14 Olympus Corp 撮像装置および撮像装置用プログラム
CN102592113A (zh) * 2011-12-23 2012-07-18 哈尔滨工业大学深圳研究生院 一种基于表观特征的静态手势快速识别法
CN103139627A (zh) * 2013-02-07 2013-06-05 上海集成电路研发中心有限公司 智能电视及其手势控制方法
JP5254897B2 (ja) * 2009-07-17 2013-08-07 株式会社 沖情報システムズ 手画像認識装置
CN103365411A (zh) * 2012-03-27 2013-10-23 索尼公司 信息输入设备、信息输入方法和计算机程序

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5254897B2 (ja) * 2009-07-17 2013-08-07 株式会社 沖情報システムズ 手画像認識装置
JP2011078009A (ja) * 2009-10-01 2011-04-14 Olympus Corp 撮像装置および撮像装置用プログラム
CN102592113A (zh) * 2011-12-23 2012-07-18 哈尔滨工业大学深圳研究生院 一种基于表观特征的静态手势快速识别法
CN103365411A (zh) * 2012-03-27 2013-10-23 索尼公司 信息输入设备、信息输入方法和计算机程序
CN103139627A (zh) * 2013-02-07 2013-06-05 上海集成电路研发中心有限公司 智能电视及其手势控制方法

Also Published As

Publication number Publication date
CN105282582A (zh) 2016-01-27

Similar Documents

Publication Publication Date Title
US10747988B2 (en) Method and device for face tracking and smart terminal
US10037466B2 (en) Video processing apparatus, video processing method, and video processing program
US20160154469A1 (en) Mid-air gesture input method and apparatus
CN110674712A (zh) 交互行为识别方法、装置、计算机设备和存储介质
US10509948B2 (en) Method and device for gesture recognition
US7734062B2 (en) Action recognition apparatus and apparatus for recognizing attitude of object
CN102142240B (zh) 实现亮度调节的数据处理设备及方法
US9824263B2 (en) Method for processing image with depth information and computer program product thereof
CN103065134A (zh) 一种具有提示信息的指纹识别装置和方法
CN106056064A (zh) 一种人脸识别方法及人脸识别装置
WO2016175234A1 (ja) 色画像処理方法、色画像処理プログラム、物体認識方法及び装置
CN110866903A (zh) 基于霍夫圆变换技术的乒乓球识别方法
TWI522934B (zh) 智慧型手機之陀螺儀感測器車牌辨識系統及其方法
CN106911922A (zh) 从单个传感器生成的深度图
CN103135748A (zh) 人机交互操作指令的触发控制方法和系统
CN104281839A (zh) 一种人体姿势识别方法和装置
CN103472915B (zh) 基于瞳孔跟踪的阅读控制方法、阅读控制装置及显示设备
CN102073872B (zh) 基于图像的寄生虫虫卵形状识别方法
CN103955682A (zh) 基于surf兴趣点的行为识别方法及装置
WO2017067270A1 (zh) 指纹图像的识别的方法、装置及终端
CN106326823A (zh) 一种获取图片中头像的方法和系统
CN102831408A (zh) 人脸识别方法
CN104050448A (zh) 一种人眼定位、人眼区域定位方法及装置
CN105095837B (zh) 一种台标识别方法和系统
CN111126300B (zh) 一种人体图像检测方法、装置和电子设备及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant