CN114978333B - 一种识别设备、系统及方法 - Google Patents
一种识别设备、系统及方法 Download PDFInfo
- Publication number
- CN114978333B CN114978333B CN202210575967.7A CN202210575967A CN114978333B CN 114978333 B CN114978333 B CN 114978333B CN 202210575967 A CN202210575967 A CN 202210575967A CN 114978333 B CN114978333 B CN 114978333B
- Authority
- CN
- China
- Prior art keywords
- gesture
- target
- laser
- equipment
- recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 76
- 238000001514 detection method Methods 0.000 claims abstract description 107
- 238000004891 communication Methods 0.000 claims abstract description 90
- 238000012545 processing Methods 0.000 claims abstract description 48
- 238000013500 data storage Methods 0.000 claims abstract description 34
- 230000033001 locomotion Effects 0.000 claims description 20
- 238000013507 mapping Methods 0.000 claims description 17
- 238000012544 monitoring process Methods 0.000 claims description 9
- 238000013499 data model Methods 0.000 claims description 8
- 238000001914 filtration Methods 0.000 claims description 6
- 238000007493 shaping process Methods 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000010276 construction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 241001417527 Pempheridae Species 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005265 energy consumption Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000010408 sweeping Methods 0.000 description 2
- 240000001889 Brahea edulis Species 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000009833 condensation Methods 0.000 description 1
- 230000005494 condensation Effects 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
- H04B10/50—Transmitters
- H04B10/501—Structural aspects
- H04B10/503—Laser transmitters
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B15/00—Special procedures for taking photographs; Apparatus therefor
- G03B15/02—Illuminating scene
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Abstract
本申请提供一种识别设备、系统及方法,应用于手势识别,识别设备集成较少的基本功能模块,包括通信模组、激光投射组件、激光采集组件、数据存储模块、数据处理模块以及供电模组;通过激光投射组件向预设区域投射呈线性且间隔均匀分布的多点检测激光,以较少的点云数据得到更加精确的手势识别动作,识别率高。再者,一方面,识别设备体积较小,方便移动以及放置,与外部电子设备在连接、控制方面实现更加灵活手势操作;另一方面,识别设备内部数据存储模块设置多种手势操作指令,功能性强,适用性广。
Description
技术领域
本申请涉及目标物体识别技术领域,特别涉及一种识别设备、系统及方法。
背景技术
目前,大部分无接触式识别设备都基于毫米波探测技术、或者单点激光扫描技术、或者基于图像视觉识别技术。但是,采用基于毫米波探测技术的识别设备仅能识别非常简单的手势;采用基于单点激光扫描技术的识别设备由于需要周期性向探测区域内扫描点云数据,而手势动作移动速度过快、移动方向与设备扫描方向不一致等因素都极易造成获取的点云数据与手势动作不一致,导致获取的点云数据具有较大的延迟、精度不高、适用性差,现有的单点激光扫描技术仅能识别非常简单的手势,应用场景非常有限;而基于图像视觉识别技术的识别设备存在帧率低、运算量大、成本高以及系统复杂度高的问题。
发明内容
为克服相关技术中存在的问题,本申请要解决的技术问题在于提高手势识别的准确率、适用性。
第一方面,本申请实施例提供了一种识别设备,包括:
通信模组,用于与电子设备建立通信连接;
激光投射组件,用于向预设区域投射呈线性且间隔均匀分布的多点检测激光,以形成手势检测区域;
激光采集组件,用于采集反射激光信号,反射激光信号为目标对象进入手势检测区域时,多点检测激光被目标对象反射的反射激光信号;
数据存储模块,用于保存预设手势数据以及与预设手势数据相对应的操作指令;
数据处理模块,用于控制激光投射组件投射多点检测激光,识别目标对象的目标手势,并根据目标手势与预设手势数据进行对比,以获取相对应的操作指令;
供电模组,用于为通信模组、激光投射组件、数据存储模块以及数据处理模块提供电能。
在一些实施方式中,激光投射组件包括:
激光源,用于发射一激光束;
分光透镜,设置于激光束的传输路径上,分光透镜用于将激光束进行分离、整形,以生成对外投射呈线性且间隔均匀分布的多点检测激光。
在一些实施方式中,多点检测激光呈一字线或多线相交或阵列式。
在一些实施方式中,分光透镜包括相对设置的进光面和出光面,进光面靠近激光源,且设置有多个呈阵列式线性排布的微透镜,出光面为一平面;
其中,微透镜的入光面为曲面,且向激光源一侧凸设。
在一些实施方式中,各个微透镜的曲面的曲率不相同。
在一些实施方式中,各个微透镜呈直线阵列排布或矩形阵列排布或多线相交阵列排布;
当各个微透镜呈直线阵列排布时,通过激光投射组件发射一列呈一字线且间隔均匀分布的多点检测激光;
当各个微透镜呈矩形阵列排布时,通过激光投射组件发射多列呈一字线且间隔分布的多点检测激光;
当各个微透镜呈多线相交阵列排布时,通过激光投射组件发射两列或两列以上呈线性相交且间隔分布的多点检测激光。
在一些实施方式中,激光采集组件包括光感应模组和镜头模组;
其中,光感应模组包括光采集部件及激光信号处理部件,光采集部件对应镜头模组设置,用于采集经镜头模组入射的反射激光信号,并将反射激光信号转换为对应的电信号;
激光信号处理部件用于将电信号进行处理,以获取激光点云信息。
在一些实施方式中,数据处理模块包括:
点云滤除单元,用于滤除手部之外的无关点云,得到目标对象的手部的激光点云数据集;
数据构建单元,用于构建目标对象的手部包络的点云数据模型以及对应的点云坐标信息;
轨迹跟踪单元,用于根据不同时刻的点云数据模型以及对应的点云坐标信息按时间顺序进行数据拟合,以获得目标对象的手部运动轨迹;
手势识别单元,用于根据手部运动轨迹获取目标手势。
在一些实施方式中,通信模组至少为无线通信模组和有线通信模组其中一个。
第二方面,本申请实施例还提供了一种手势控制系统,包括电子设备及与电子设备通信连接的识别设备,其中,识别设备为本申请实施例所述的识别设备,识别设备根据采集的目标手势生成控制指令,通过通信模组发送控制指令至电子设备,以控制电子设备。
在一些实施方式中,电子设备为无人机,识别设备安装于无人机并与无人机电连接,其中,识别设备通过激光采集组件实时采集当前目标对象的手势数据,手势数据包括目标对象手部的位置坐标信息;
识别设备根据位置坐标信息生成控制指令并发送给无人机;
无人机根据控制指令调整当前位置。
第三方面,本申请实施例还提供了一种电子设备连接状态检测方法,应用于本申请实施例所述的识别设备,方法包括:
识别设备通过通信模组与电子设备建立通信连接;
识别设备通过激光采集组件采集反射激光信号,并通过数据处理模块识别目标对象的目标手势;
判断目标手势是否为电子设备的连接状态检测手势;
当判定目标手势为连接状态检测手势时,获取识别设备与电子设备的连接状态信息;
通过预设提醒组件展示连接状态信息,以提醒目标对象。
在一些实施方式中,识别设备通过通信模组与电子设备建立通信连接的步骤,包括:
识别设备识别目标对象的目标手势;
当识别到目标手势为设备连接手势时,通过与识别设备的通信模组最近的电子设备或与通信模组进行有线连接的电子设备进行通信连接,设备连接手势为储存于数据存储模块的预设手势数据之一。
第四方面,本申请实施例还提供了一种手势录入方法,应用于本申请实施例所述的识别设备,方法包括:
切换识别设备为手势录入模式;
当识别设备处于手势录入模式时,获取手势检测区域内目标对象的手势信息;
判断手势信息是否为目标操作手势,目标操作手势与目标操作指令相对应;
当确定手势信息为目标操作手势时,将手势信息与目标操作指令设置成映射关系;
将形成映射关系的手势信息、目标操作指令保存于数据存储模块中。
在一些实施方式中,当接收到识别设备录入模式指令时,切换识别设备为手势录入模式,录入模式指令为设置于识别设备的输入装置生成,或者,录入模式指令为识别设备在手势检测区域内检测到的目标手势为预设录入模式手势时生成。
在一些实施方式中,手势信息与目标操作指令为一对一或多对一映射关系。
第五方面,本申请实施例还提供了一种多级手势识别方法,应用于本申请实施例所述的识别设备,识别设备与多个电子设备通信连接,方法包括:
获取手势检测区域内目标对象的第一手势信息,并根据第一手势信息从多个电子设备中选择目标电子设备;
获取手势检测区域内目标对象的第二手势信息,根据第二手势信息控制目标电子设备执行预设操作,第一手势信息、第二手势信息以映射关系保存于数据存储模块中。
第六方面,本申请实施例还提供了一种设备休眠唤醒方法,应用于本申请实施例所述的识别设备,方法包括:
周期性获取识别设备的当前工作状态,以累计识别设备处于闲置状态的闲置持续时长;
当闲置持续时长大于或等于第一预设时长时,数据处理模块启动休眠控制指令,以使得除用于手势识别组件之外的其他器件进入休眠状态;
当在手势检测区域内检测到唤醒手势时,数据处理模块向其他器件发送唤醒指令,以使识别设备进入工作状态。
在一些实施方式中,识别设备与电子设备连接,周期性获取识别设备的当前工作状态的步骤,包括:
判断电子设备是否进入休眠模式;
当判定电子设备进入休眠模式时,判断是否接收到手势控制指令;
当判定接收到手势控制指令时,则识别设备向电子设备发送唤醒指令之后,发送手势控制指令。
第七方面,本申请实施例还提供了一种基于手势的应用场景切换方法,应用于本申请实施例所述的识别设备,方法包括:
当采集到反射激光信号时,判断反射激光信号对应的手势是否为应用场景切换手势;
当判定手势数据为应用场景切换手势时,检测目标切换手势,并根据目标切换手势从多个所述电子设备中选定目标电子设备。
在一些实施方式中,在判断所述反射激光信号对应的手势是否为应用场景切换手势的步骤之前,方法还包括:
建立一个或多个应用场景的目标手势以及与目标手势对应的应用场景切换指令;
将目标手势以及应用场景切换指令保存于数据存储模块中。
第八方面,本申请实施例还提供了一种多设备协同作业系统,系统包括本申请实施例所述的识别设备,系统还包括:
多个电子设备,用于实现不同功能;
具备AP和STA功能的通信模组,用于接收或转发电子设备数据;
多个电子设备与识别设备通过具备AP和STA功能的通信模组进行通信连接。
第九方面,本申请实施例还提供了一种多设备协同作业方法,应用于本申请实施例所述的多设备协同作业系统,方法包括:
监测目标用户的目标手势,判断目标手势是否为设备协同作业手势;
当判定目标手势为设备协同作业手势时,根据设备协同作业手势获取设备协同作业配置信息,并根据设备协同作业配置信息确定目标电子设备,将设备协同作业配置信息发送至目标电子设备。
在一些实施方式中,在监测目标用户的目标手势的步骤之前,方法还包括:
设置设备协同作业配置信息以及相对应的设备协同作业手势,设备协同作业配置信息包括目标电子设备的信息;
将设备协同作业配置信息以及设备协同作业手势储存于数据存储模块中。
综上,相比现有技术,本申请提供一种识别设备、系统及方法,应用于手势识别,识别设备集成较少的基本功能模块,通过激光投射组件向预设区域投射呈线性且间隔均匀分布的多点检测激光,以较少的点云数据得到更加精确的手势识别动作,识别率高。再者,一方面,识别设备体积较小,方便移动以及放置,与外部电子设备在连接、控制方面实现更加灵活手势操作;另一方面,识别设备内部数据存储模块设置多种手势操作指令,功能性强,适用性广。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的识别设备的内部组件示意图;
图2为本申请实施例提供的激光投射组件的结构示意图;
图3为多点检测激光呈一字线时的场景示意图;
图4为多点检测激光呈阵列式时的场景示意图;
图5为本申请实施例提供的分光透镜的结构示意图;
图6为本申请实施例提供的激光采集组件的结构示意图;
图7为本申请实施例提供的识别设备与电子设备通信连接的场景示意图;
图8为本申请实施例提供的数据处理模块的结构示意图。
图9位本申请实施例提供的识别设备限定虚拟检测区域的场景示意图;
图10为本申请实施例提供的一种电子设备连接状态检测方法的步骤流程示意图;
图11为本申请实施例提供的一种手势录入方法的步骤流程示意图;
图12为本申请实施例提供的一种多级手势识别方法的步骤流程示意图;
图13为本申请实施例提供的一种设备休眠唤醒方法的步骤流程示意图;
图14为本申请实施例提供的一种基于手势的应用场景切换方法的步骤流程示意图;
图15为本申请实施例提供的一种多设备协同作业方法的步骤流程示意图;
附图标记:1、识别设备;10、通信模组;11、激光投射组件;110、分光透镜;1100、微透镜;111、激光源;12、激光采集组件;120、镜头模组;121、光感应模组;13、数据存储模块;14、数据处理模块;15、供电模组;2、电子设备。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在本申请的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本申请的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本申请的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
下面结合附图,对本申请的一些实施方式作详细说明,在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
请参考图1,本申请实施例提供了一种识别设备1,包括:
通信模组10,用于与电子设备2建立通信连接;
激光投射组件11,用于向预设区域投射呈线性且间隔均匀分布的多点检测激光,以形成手势检测区域;
激光采集组件12,用于采集反射激光信号,反射激光信号为目标对象进入手势检测区域时,多点检测激光被目标对象反射的反射激光信号;
数据存储模块13,用于保存预设手势数据以及与预设手势数据相对应的操作指令;
数据处理模块14,用于控制激光投射组件11投射多点检测激光,识别目标对象的目标手势,并根据目标手势与预设手势数据进行对比,以获取相对应的操作指令,数据处理模块14与通信模组10、激光投射组件11、激光采集组件12以及数据存储模块13电连接,其中,数据处理模块14为现有设计通用MCU,例如stm32、ARM等处理芯片,现在设计的一些主流stm32、ARM大都内部集成了存储功能、通信功能等,在本申请数据存储模块13包括但不限于集成于数据处理模块14内部、设置于数据处理模块14外部、设置于数据处理模块14内部以及数据存储模块13外部;
供电模组15,用于为通信模组10、激光投射组件11、数据存储模块13以及数据处理模块14提供电能。
在一些实施方式中,预设手势数据为利用预设的人体手部的点云数据按时间顺序进行数据拟合所得到的运动轨迹数据,其中,运动轨迹数据中记录有点云数据在各个时间点的坐标信息。可以理解,数据存储模块13中存储有多组具有映射关系的预设手势数据以及操作指令。数据处理模块14识别到目标对象的目标手势后,即可获取与目标手势匹配度最高的预设手势数据对应的操作指令作为目标手势对应的操作指令。
在本申请实施例中,识别设备1还包括用于承载器件一电路板(PCB板),通信模组10、数据存储模块13、数据处理模块14、供电模组15均设置于电路板上,其中,激光投射组件11和激光采集组件12可以作为一个单独的激光收发模组,进行基本手势点云数据获取功能,之后,激光收发模组与电路板进行连接,传输点云数据给数据处理模块14;又或者,激光投射组件11和激光采集组件12分别设置于电路板上,激光源111以及光感应模组121以贴片的形式安装于电路板上,利于实现小型化。
具体的,通信模组10可以为无线通信模组,也可以为有线通信模组。当通信模组10为无线通信模组时,识别设备1通过如蓝牙,wifi等无线方式与电子设备2建立通信连接;当通信模组10为有线通信模组时,识别设备1通过插线方式与电子设备2建立通信连接,例如USB、Type-C等插线方式。
供电模组15给识别设备1中的各个模块组件供电后,数据处理模块14控制激光投射组件11发射呈线性且间隔均匀分布的多点检测激光,多点检测激光照射到目标对象后形成反射激光信号,反射激光信号被激光采集组件12捕捉到进行处理,获得激光点云信息后传输给数据处理模块14,数据处理模块14根据激光点云信息识别目标手势,并通过数据存储模块13获取与目标手势匹配的操作指令后,即可根据操作指令执行相应的目标任务。
可以理解,当多点检测激光向目标检测区域投射后,所形成的光斑分布趋向于一条直线上时,可以认为这些多检测激光是线性的;另外,当相邻的光斑是以同样的间隔排布在这条这线上时,可以认为这些多线检测激光是间隔均匀分布的,在实际中,在设备生产过程中,由于生产技术以及装配工艺等原因,可能造成有些激光点会有偏移现象,导致相邻光斑之间的间隔存在误差,不保证每一个光斑相邻距离百分百一致,在这种情况下,本申请也认为这些多点检测激光是均匀分布的,应在本申请的保护范围内。
与传统的基于图像或者视觉识别的手势识别设备相比,本申请采用主动发射检测激光进行探测,避免了环境光线变化带来的影响,手势识别准确率高。另外,与基于毫米波探测原理的手势识别设备相比,本申请可以通过反射激光信号采集到目标对象的手势截面信息,所采集到的信息数据量较多,可以识别更复杂的手势。再者,与传统单点扫描式激光雷达相比,通过激光投射组件向预设区域投射呈线性且间隔均匀分布的多点检测激光,以较少的点云数据得到更加精确的手势识别,手势识别率高。
请参考图2,在一些实施方式中,激光投射组件11包括:
激光源111,用于发射一激光束,激光源111可以采用EEL(边发射器)或VCSEL(垂直腔面发射激光器)作为输出激光光线的光源芯片;
分光透镜110,设置于激光束的传输路径上,分光透镜110用于将激光束进行分离、整形,以生成对外投射呈线性且间隔均匀分布的多点检测激光。
通过利用分光透镜110对激光束进行整形分离处理,输出呈线性且间隔均匀分布的多点检测激光以形成手势检测区域。
本实施方式中,由于多点检测激光是由同一个激光源111经过分光透镜110进行分离整形而形成的激光光线,一方面,使得激光投射组件11投射的激光发散角变大,导致手势检测区域的FOV(Field of view,视场角)也比较大,便于获取动作幅度较大手势、通过激光采集组件12采集到的反射激光信号所能提取出来的点云数据也会比较充足,这更有利于复杂手势的探测以及识别。再者,由于多点检测激光是激光投射组件11同一时间向外投射出去的,各个检测激光间隔均匀,使得激光采集组件能够某一时刻采集到大量反射激光信号,快速进行数据处理、手势识别速度快;且对于部分缺失数据,由于发射端发射的激光光线均匀分布,接收端激光采集组件采集的反射激光信号也理应分布均匀,在对于部分缺失数据进行插值处理时,插值数据与实际误差较小,数据有效性多,便于提高手势识别率。
在一些实施方式中,多点检测激光呈一字线或多线相交或阵列式。
请参考图3,图3为多点检测激光呈一字线时的场景示意图,当多点检测激光照射到向目标检测区域投射后,所形成的的光斑均处于同一直线上时,该多点检测激光呈一字线;请参考图4,图4为多点检测激光呈阵列式时的场景示意图,当多点检测激光照射到向目标检测区域投射后,所形成的的光斑布设在多条间隔分布并且相互平行的直线上时,该多点检测激光呈阵列式;同理,当多点检测激光照射到向目标检测区域投射后,所形成的的光斑布设在多条相交的直线上时,该多点检测激光呈多线相交。
可以理解,当多点检测激光呈多线相交或阵列式时,与多点检测激光呈一字线相比,识别设备1通过激光采集组件12采集到的反射激光信号所能提取出来的点云数据会更加充足,这更有利于复杂手势的探测和识别。
请参考图5,在一些实施方式中,分光透镜110包括相对设置的进光面和出光面,进光面靠近激光源111,且设置有多个呈阵列式线性排布的微透镜1100,出光面为一平面;
其中,微透镜1100的入光面为曲面,且向激光源111一侧凸设。
分光透镜110靠近激光源111的一面即为进光面,分光透镜110远离激光源111的一面即为出光面。
激光束进入分光透镜110的进光面时,通过在进光面设置多个呈阵列式线性排布的微透镜1100,可以对激光束进行分离处理,又因为微透镜1100的入光面为曲面,且向激光源111一侧凸设,因此,每一个微透镜1100都具有准直功能,这使得分光透镜110可以对入射的激光束进行整形处理。通过本实施方式所提供的技术方案,可以让最终从分光透镜110的出光面投射出去的多点检测激光是呈线性且间隔均匀分布的。
在一些实施方式中,各个微透镜1100的曲面的曲率不相同。
可以理解,激光源111所发射出的激光束照射到微透镜1100的入射角度可能不同,通过控制微透镜1100的曲面的曲率,可以根据需要调整经过分光透镜110的出射激光的出射角度,以形成更有利于进行手势识别的手势检测区域。
在一些实施方式中,各个微透镜1100呈直线阵列排布或矩形阵列排布或多线相交阵列排布;
当各个微透镜1100呈直线阵列排布时,通过激光投射组件11发射一列呈一字线且间隔均匀分布的多点检测激光;
当各个微透镜1100呈矩形阵列排布时,通过激光投射组件11发射多列呈一字线且间隔分布的多点检测激光;
当各个微透镜1100呈多线相交阵列排布时,通过激光投射组件11发射两列或两列以上呈线性相交且间隔分布的多点检测激光。在一些实施方式中,可以设置多个激光投射组件11,每个激光投射组件11独自发射一列呈一字线且方向不相同的多点检测激光,也能实现多点检测激光呈多列线性相交的效果。
通过设置调整微透镜1100的排布方式,可以使得多点检测激光呈一字线或多线相交或阵列式。
请参考图6,在一些实施方式中,激光采集组件12包括光感应模组121和镜头模组120;
其中,光感应模组121包括光采集部件及激光信号处理部件,光采集部件对应镜头模组120设置,用于采集经镜头模组120入射的反射激光信号,并将反射激光信号转换为对应的电信号;
激光信号处理部件用于将电信号进行处理,以获取激光点云信息,激光信号处理部件可以为FPGA(现场可编程门阵列)处理芯片。
可以理解,镜头模组120可以起到聚光作用,光感应模组121则是将通过镜头模组120聚拢过来的反射激光信号转化成激光点云信息。
请查看图8,在一些实施方式中,数据处理模块14包括:
点云滤除单元141,用于滤除手部之外的无关点云,得到目标对象的手部的激光点云数据集,预设手势检测区域为基于激光投射组件11探测距离进行限定的一个虚拟检测区域;
数据构建单元142,用于构建目标对象的手部(例如手掌或手指)包络的点云数据模型以及对应的点云坐标信息;
轨迹跟踪单元143,用于根据不同时刻的点云数据模型以及对应的点云坐标信息按时间顺序进行数据拟合,以获得目标对象的手部运动轨迹;
手势识别单元144,用于根据手部运动轨迹获取目标手势。
可以理解,在一些实施例中,参考图9,基于一字线激光,点云具有x轴,y轴,x轴为手势左右移动的范围,y轴为手势上下移动范围,以x轴、y轴划分的一个成矩形的二维虚拟平面,设定为手势检测区域,例如以识别设备的激光投射组件为坐标原点建立,当然也可以以激光采集组件或激光投射组件与激光采集组件之间的中轴线作为计算坐标原点,本申请根据实际需要调整距离距离计算原点参考,本申请不作限制。
本申请的一些实施例中,激光采集组件处理的每一个激光点云信息得到X轴、Y轴信息,其中,Y轴表示反射激光信号距离激光采集组件的距离,X轴表示相对于激光采集组件水平位置,进一步地,例如,以-15cm<x<15cm,30cm<y<55cm为范围设定手势检测区域,当激光点云信息的X轴、Y轴信息满足该范围,认定这些激光点云信息为用户手部的点云,为有效数据;相应的,当激光点云信息的X轴、Y轴信息不满足该范围,认定这些激光点云信息为用户的手部之外的无关点云,为无效数据,数据处理模块将进行过滤掉。所述点云数据除了包括坐标数据外,还包括点云数据能量大小以及时间参数。
在一些实施例中,例如激光投射组件投射的多点检测激光分布呈阵列式时,点云具有x轴,y轴,z轴三维信息。通过跟踪x轴,y轴,z轴三维信息就能够获得目标对象的空间三维坐标,根据不同时刻的三维坐标点云数据模型按时间顺序进行数据拟合,以获得目标对象的在三维空间内的手部运动轨迹,实现更加复杂多样的手势动作。
请参考图7,本申请实施例还提供了一种手势控制系统,包括电子设备2及与电子设备2通信连接的识别设备1,其中,识别设备1为本申请实施例所述的识别设备1,识别设备1根据采集的目标手势生成控制指令,通过通信模组10发送控制指令至电子设备2,以控制电子设备2。
可以理解,与识别设备1通信连接的电子设备2包括但不限定为摄像头、扫地机器人、电视机、音响、投影仪、智能灯具等。另外,电子设备2可以为一个或多个,当电子设备2为多个时,与识别设备通信连接的电子设备2可以为想同类型的设备,也可以为不同类型的设备。
示例性的,以电子设备2为电视机为例进行说明,识别设备1内存储有预设手势数据以及操作指令之间的映射关系,当识别设备1识别到对应手势时,可以输出与该手势对应的操作指令。
例如,识别设备1内存储有手势a和音量提高指令的映射关系,在电视机与识别设备1建立通信连接后,用户想通过识别设备1控制电视机提高音量时,则可以在识别设备1的手势检测区域做出提高音量的手势a,识别设备1识别出该手势为手势a后,向电视机发送音量提高指令,以控制电视机执行提高音量的操作。
在一些实施方式中,电子设备2为无人机,识别设备安装于无人机并与无人机电连接。
以电子设备2为无人机为例,识别设备根据采集的目标手势生成控制指令,通过通信模组发送控制指令至电子设备2,以控制电子设备2,包括:
识别设备1通过激光采集组件实时采集当前目标对象的手势数据,手势数据包括目标对象手部的位置坐标信息;
识别设备1根据位置坐标信息生成控制指令并发送给无人机;
无人机根据控制指令调整当前位置。
示例性地,识别设备1内存储有预设手势数据以及控制指令之间的映射关系,当识别设备1识别到对应手势时,可以输出与该手势对应的控制指令。
如,识别设备1内存储有手势b和位置调整指令的映射关系,在无人机与识别设备1建立通信连接后,用户想通过识别设备1控制无人机调整位置时,则可以在识别设备1的手势检测区域做出手势b,识别设备1识别出该手势为手势b后,向无人机发送位置调整指令,以控制无人机执行位置调整的操作。可以理解,控制指令还可以包括用于控制无人机执行悬停、拍照、飞行等任务的指令。
请参照图10,图10为本申请实施例提供的一种电子设备连接状态检测方法的步骤流程示意图。
如图10所示,该电子设备连接状态检测方法应用于本申请实施例的识别设备,包括步骤S10至步骤S14。
步骤S10、识别设备通过通信模组与电子设备建立通信连接;
步骤S11、识别设备通过激光采集组件采集反射激光信号,并通过数据处理模块识别目标对象的目标手势;
步骤S12、判断目标手势是否为电子设备的连接状态检测手势;
步骤S13、当判定目标手势为连接状态检测手势时,获取识别设备与电子设备的连接状态信息;
步骤S14、通过预设提醒组件展示连接状态信息,以提醒目标对象,其中,提醒组件安装于识别设备并与识别设备通信连接,或,提醒组件安装于电子设备并与电子设备通信连接。
提醒组件可以为安装于识别设备1并与识别设备1通信连接的组件,示例性地,识别设备1还设置有LED灯、喇叭或者显示器等提醒组件,并可通过这些提醒组件展示连接状态信息,以提醒目标对象识别设备1与电子设备2是否已经建立通信连接。
识别设备1可以向电子设备2发送连接状态信息,并通过安装于电子设备2并与电子设备2通信连接的提醒组件进行展示连接状态信息。以电子设备2为智能音响,并以提醒组件为智能音响中的喇叭为例进行说明,在识别设备1与智能音响建立通信连接后,当识别设备1检测到连接状态检测手势时,识别设备1可以获取与智能音响的连接状态信息,并将该连接状态信息发送给智能音响,以通过智能音响中的喇叭进行展示。
在一些实施方式中,识别设备通过通信模组与电子设备建立通信连接的步骤,包括:
识别设备识别目标对象的目标手势;
当识别到目标手势为设备连接手势时,通过与识别设备的通信模组最近的电子设备或与通信模组进行有线连接的电子设备进行通信连接,设备连接手势为储存于数据存储模块的预设手势数据之一。
可以理解,与无线连接相比,识别设备1与电子设备2采用有线连接的方式建立通信连接可以取得更好的通信质量;而在识别设备1与电子设备2通过无线连接的方式建立通信时,识别设备1与电子设备2的距离越接近,通信连接的质量也会越好。
本一些实施方式中,当识别设备1识别到目标手势为设备连接手势时,先判断是否存在与通信模组10进行有线连接的电子设备2,如果存在,则与该电子设备2通过有线连接的方式建立通信连接;如果不存在,则先获取识别设备1与各个电子设备2之间的距离,并从各个电子设备2中选取与识别设备1距离最短的电子设备作为目标电子设备,并与该目标电子设备建立通信连接。
通过本实施方式所提供的技术方案,可以尽量确保识别设备1与所连接的电子设备2尽量处于最优的通信状态,可以理解,当用户想要对某一个智能设备进行操作时,通过移动识别设备到与该智能设备附近,识别设备自动连接该智能设备,并部署相关配置参数,例如连接状态、智能设备类型、相关手势条件监测等参数,从而提高了用户体验、更加智能化。
请参照图11,图11为本申请实施例提供的一种手势录入方法的步骤流程示意图。
如图11所示,该手势录入方法应用于本申请实施例的识别设备,包括步骤S20至步骤S24。
步骤S20、切换识别设备为手势录入模式;
步骤S21、当识别设备处于手势录入模式时,获取手势检测区域内目标对象的手势信息;
步骤S22、判断手势信息是否为目标操作手势,目标操作手势与目标操作指令相对应;
步骤S23、当确定手势信息为目标操作手势时,将手势信息与目标操作指令设置成映射关系;
步骤S24、将形成映射关系的手势信息、目标操作指令保存于数据存储模块中。
在切换识别设备1为手势录入模式之前,识别设备1可以确定所要录入的手势对应的目标操作指令是什么指令。识别到手势信息为目标操作手势后,即可将手势信息与目标操作指令建立映射关系并存储到数据存储模块13中。
此后,目标对象只需在手势检测区域示出目标操作手势,识别设备1即可采集到对应的手势信息,并根据该手势信息从数据存储模块13中获取到对应的目标操作指令。
在一些实施方式中,判断手势信息是否为目标操作手势的方式,可以为,在预设时间内,识别设备1在手势检测区域内检测到3次相同或相近的手势信息,具体规则可以根据使用需求进行调整,在此不做限制。
在一些实施方式中,当接收到识别设备录入模式指令时,切换识别设备为手势录入模式,录入模式指令为设置于识别设备的输入装置生成,或者,录入模式指令为识别设备在手势检测区域内检测到的目标手势为预设录入模式手势时生成。
在一些实施方式中,输入装置可以为设置于识别设备1上且与识别设备1电连接的按钮,或者为与识别设备1通信连接的键盘、手机或电视等。示例性的,当输入装置为设置于识别设备1上且与识别设备1电连接的按钮时,目标对象只需按下该按钮,即可让识别设备1进入手势录入模式。另外,当识别设备1检测到目标对象做出预设的录入模式手势时,也可触发识别设备1进入手势录入模式。
在一些实施方式中,手势信息与目标操作指令为一对一或多对一映射关系。
可以理解,不同的人的用手习惯不同,示例性的,当目标对象想通过识别设备1控制电子设备2执行目标任务时,有的人习惯用一个手指做出手势来进行控制,而有的人则习惯用多个手指做出手势来进行控制。此时,通过设置手势信息与目标操作指令为多对一映射关系,则可以实现用不同的手势匹配相同的目标操作指令,让一台识别设备去迎合不同目标对象的使用习惯。
请参照图12,图12为本申请实施例提供的一种多级手势识别方法的步骤流程示意图。
如图12所示,该多级手势识别方法应用于本申请实施例的识别设备,识别设备与多个电子设备通信连接,包括步骤S30至步骤S31。
步骤S30、获取手势检测区域内目标对象的第一手势信息,并根据第一手势信息从多个电子设备中选择目标电子设备;
步骤S31、获取手势检测区域内目标对象的第二手势信息,根据第二手势信息控制目标电子设备执行预设操作,第一手势信息、第二手势信息以映射关系保存于数据存储模块中。
在本实施方式中,当识别设备1与多个电子设备2通信连接时,每个电子设备2都有对应的设备锁定手势以及设备操作手势。
示例性的,假设识别设备1分别与电子设备2a以及电子设备2b通信连接,当识别设备1检测到的第一手势信息对应电子设备2b的设备锁定手势时,确定电子设备2b为目标电子设备。此后,当识别设备1再检测到第二手势信息时,即可根据第二手势信息匹配电子设备2b的设备操作手势,以控制电子设备2b执行目标操作。
通过本实施方式所提供的技术方案,在识别设备1与多个电子设备2通信连接的情况下,目标对象可实现快速的目标电子设备锁定以及相关控制操作。
请参照图13,图13为本申请实施例提供的一种设备休眠唤醒方法的步骤流程示意图。
如图13所示,该设备休眠唤醒方法应用于本申请实施例的识别设备,包括步骤S40至步骤S42。
步骤S40、周期性获取识别设备的当前工作状态,以累计识别设备处于闲置状态的闲置持续时长;
步骤S41、当闲置持续时长大于或等于第一预设时长时,数据处理模块启动休眠控制指令,以使得除用于手势识别组件之外的其他器件进入休眠状态;
步骤S42、当在手势检测区域内检测到唤醒手势时,数据处理模块向其他器件发送唤醒指令,以使识别设备进入工作状态。
当识别设备在连续一段时间内没检测到目标手势时,识别设备1处于闲置状态。在一些实施方式中,第一预设时长可以设置为3分钟、5分钟或者10分钟,也可以根据情况需要设置为其他时长,在此不做限制。
在一些实施方式中,识别设备1的用于手势识别组件包括激光投射组件11、激光采集组件12、数据存储模块13、数据处理模块14、以及供电模组15。当识别设备1的闲置持续时长大于或等于第一预设时长时,通过休眠控制指令可以让如通信模组10之类的其他器件进入休眠状态,以降低识别设备1的能耗。相应的,检测到唤醒手势时,即可通过唤醒指令唤醒之前进入休眠状态的的其他器件,让识别设备1进入工作状态。通过本实施方式所提供的技术方案,可以有效的降低识别设备1的使用能耗。
在一些实施方式中,识别设备与电子设备连接,周期性获取识别设备的当前工作状态的步骤,包括:
判断电子设备是否进入休眠模式;
当判定电子设备进入休眠模式时,判断是否接收到手势控制指令;
当判定接收到手势控制指令时,则识别设备向电子设备发送唤醒指令之后,发送手势控制指令。
可以理解,除了识别设备1可能会进入休眠状态之外,与识别设备1通信连接的电子设备2也有可能会因为自身待机时间过长而处于休眠模式。当识别设备1在手势检测区域检测到目标手势,并根据目标手势匹配到对应的操作指令时,如果判断到电子设备2处于休眠模式,可以先向电子设备2发送唤醒指令,在唤醒电子设备2之后,再向电子设备2发送手势控制指令,以让电子设备2执行目标任务。
请参照图14,图14为本申请实施例提供的一种基于手势的应用场景切换方法的步骤流程示意图。
如图14所示,该基于手势的应用场景切换方法应用于本申请实施例的识别设备,包括步骤S50至步骤S51。
步骤S50、当采集到反射激光信号时,判断反射激光信号对应的手势是否为应用场景切换手势;
步骤S51、当判定手势数据为应用场景切换手势时,检测目标切换手势,并根据目标切换手势从多个所述电子设备中选定目标电子设备。
可以理解,应用场景切换手势可以让识别设备1进入场景切换状态,在识别设备1进入场景切换状态以后,如果识别设备1检测到目标切换手势,即可根据目标切换手势从多个电子设备2中选定目标电子设备,以实现场景切换。
其中,应用场景切换手势可以根据情况需要进行设定。示例性的,当目标对象在识别设备1的手势检测区域中的某个区域范围内示出手势c,并且手势c维持5s没有发生移动时,可以确定该手势c为应用场景切换手势。此时,控制识别设备1退出当前手势应用场景并且进入场景切换状态,在识别设备1后续检测到的目标切换手势时,根据目标切换手势从多个电子设备2中选出目标电子设备,以实现场景切换。
示例性的,当识别设备1同时与显示触摸设备、演讲设备、游戏设备以及阅读设备等电子设备2通信连接时,通过本实施方式所提供的技术方案,可以控制识别设备在如显示触摸设备、演讲设备、游戏设备以及阅读设备等设备之间进行便捷切换控制。
在一些实施方式中,在判断所述反射激光信号对应的手势是否为应用场景切换手势的步骤之前,方法还包括:
建立一个或多个应用场景的目标手势以及与目标手势对应的应用场景切换指令;
将目标手势以及应用场景切换指令保存于数据存储模块中。
本实施方式中,除了可以通过上述手势录入方法建立一个或多个应用场景的目标手势,也可以通过其他方式实现,在此不做限制。
可以理解,不同的目标对象有不用的手势控制习惯,通过本实施方式所提供的技术方案,各个目标对象可以使用各自习惯的目标手势来控制识别设备1进行应用场景切换。
请参考图7,本申请实施例还提供了一种多设备协同作业系统,系统包括本申请实施例所述的识别设备,系统还包括:
多个电子设备,用于实现不同功能;
具备AP和STA功能的通信模组,用于接收或转发电子设备数据;
多个电子设备与识别设备通过具备AP和STA功能的通信模组10进行通信连接。
可以理解,当通信模组10具有AP(Access Point,无线接入点)功能时,识别设备1可以与电子设备2进行wifi通信连接,而当通信模组10具有STA(Station,站点)功能时,识别设备1可以成为wifi网络的连接终端,识别设备1可以通过通信模组10与各个电子设备2进行收发信息。
不同的智能设备具有不用的优缺点,例如电视机显示屏大、高清,智能音箱音效好、摄像头监控范围广、扫地机可以扫地除尘;通过本实施方式所提供的技术方案,可以协调各个电子设备2的功能去解决一些现有技术问题。
示例性的,以下以看电影为例进行说明。看电影时,识别设备1可以与电视机以及智能音响通信连接,电视机在通过显示屏输出图像时,向识别设备1发送音频信号,识别设备1将音频信号转发给智能音箱后,即可让智能音箱输出声音。通过本实施方式所提供的技术方案,可以让观影对象获得较好的观影体验。
同理,扫地机在扫地时,可以通过识别设备1将摄像头监控采集到的楼梯、地毯等图像信息直接转发或经过处理后转发给扫地机,扫地机则根据接收的图像信息进行避障或清洁。
在一些实施方式中,在手机与识别设备1建立通信连接后,目标对象可以通过手机制定多设备协同方案。
示例性的,在手机终端界面,从与识别设备1通信连接的多个电子设备2中选择目标智能设备以及协同操作手势,当识别设备1在手势检测区域检测到协同操作手势时,控制目标智能设备开展协同作业。
以下以目标对象在手机上对设备协同作业配置信息进行设置为例,例如用户在观看影视想获得更好的用户体验为例,在手机操作界面选择具有图像显示功能的电视以及能播放发优质音质的智能音箱作为与识别设备进行连接的目标电子设备,并选择手势d作为协同操作手势为例进行说明。手机将配置好的设备协同作业配置信息发送给识别设备1后,识别设备1即可根据配置数据配置应用场景,并将相应配置命令发送给对应的智能设备,此时,如果识别设备1识别到目标手势为手势d,则开始接收电视发送过来的音频数据,并通过通信模组10转发音频数据给智能音箱进行播放,通过本实施方式所提供的技术方案,可以利用各个电子设备2的优点提高用户体验。
请参照图15,图15为本申请实施例提供的一种多设备协同作业方法的步骤流程示意图。
如图15所示,该多设备协同作业方法应用于本申请实施例的识别设备,包括步骤S60至步骤S61。
步骤S60、监测目标用户的目标手势,判断目标手势是否为设备协同作业手势;
步骤S61、当判定目标手势为设备协同作业手势时,根据设备协同作业手势获取设备协同作业配置信息,并根据设备协同作业配置信息确定目标电子设备,将设备协同作业配置信息发送至目标电子设备。
本实施方式中,可以通过设备协同作业手势来确定参与协同作业的多个目标电子设备,将设备协同作业配置信息发送至目标电子设备后,各个目标电子设备即进入协同工作状态。
在一些实施方式中,在监测目标用户的目标手势的步骤之前,方法还包括:
设置设备协同作业配置信息以及相对应的设备协同作业手势,设备协同作业配置信息包括目标电子设备的信息、目标电子设备设置指令、通信模组配置信息、目标手势录入信息等;
将设备协同作业配置信息以及设备协同作业手势储存于数据存储模块中。
在一些实施方式中,可以通过上述手势录入方法设置设备协同作业手势,除此之外,还可通过其他方法实现设备协同作业手势的录入,在此不做限制。
上文的公开提供了许多不同的实施方式或例子用来实现本申请的不同结构。为了简化本申请的公开,上文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本申请。此外,本申请可以在不同例子中重复参考数字和/或参考字母,这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施方式和/或设置之间的关系。此外,本申请提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (24)
1.一种识别设备,应用于手势识别,其特征在于,包括:
通信模组,用于与电子设备建立通信连接;
激光投射组件,用于向预设区域投射呈线性且间隔均匀分布的多点检测激光,以形成手势检测区域;
激光采集组件,用于采集反射激光信号,所述反射激光信号为目标对象进入所述手势检测区域时,所述多点检测激光被所述目标对象反射的反射激光信号;
数据存储模块,用于保存预设手势数据以及与所述预设手势数据相对应的操作指令;
数据处理模块,用于控制所述激光投射组件投射所述多点检测激光,识别所述目标对象的目标手势,并根据所述目标手势与所述预设手势数据进行对比,以获取相对应的所述操作指令;
供电模组,用于为所述通信模组、所述激光投射组件、所述数据存储模块以及所述数据处理模块提供电能;
其中,所述预设手势数据为利用预设的人体手部的点云数据按时间顺序进行数据拟合所得到的运动轨迹数据,所述运动轨迹数据中记录有所述点云数据在各个时间点的坐标信息,所述目标手势是根据不同时刻的所述点云数据模型以及对应的点云坐标信息按时间顺序进行数据拟合,以获得目标对象的手部运动轨迹,然后根据所述手部运动轨迹获取;
所述数据处理模块获取相对应的所述操作指令包括:获取与所述目标手势匹配度最高的预设手势数据对应的操作指令作为所述目标手势对应的所述操作指令。
2.根据权利要求1所述识别设备,其特征在于,所述激光投射组件包括:
激光源,用于发射一激光束;
分光透镜,设置于所述激光束的传输路径上,所述分光透镜用于将所述激光束进行分离、整形,以生成对外投射呈线性且间隔均匀分布的所述多点检测激光。
3.根据权利要求2所述识别设备,其特征在于,所述多点检测激光呈一字线或多线相交或阵列式。
4.根据权利要求2所述的识别设备,其特征在于,所述分光透镜包括相对设置的进光面和出光面,所述进光面靠近所述激光源,且设置有多个呈阵列式线性排布的微透镜,所述出光面为一平面;
其中,所述微透镜的入光面为曲面,且向所述激光源一侧凸设。
5.根据权利要求4所述的识别设备,其特征在于,各个所述微透镜的曲面的曲率不相同。
6.根据权利要求4所述的识别设备,其特征在于,各个所述微透镜呈直线阵列排布或矩形阵列排布或多线相交阵列排布;
当各个所述微透镜呈直线阵列排布时,通过所述激光投射组件发射一列呈一字线且间隔均匀分布的所述多点检测激光;
当各个所述微透镜呈矩形阵列排布时,通过所述激光投射组件发射多列呈一字线且间隔分布的所述多点检测激光;
当各个所述微透镜呈多线相交阵列排布时,通过所述激光投射组件发射两列或两列以上呈线性相交且间隔分布的所述多点检测激光。
7.根据权利要求1-6中任一项所述的识别设备,其特征在于,所述激光采集组件包括光感应模组和镜头模组;
其中,所述光感应模组包括光采集部件及激光信号处理部件,所述光采集部件对应所述镜头模组设置,用于采集经所述镜头模组入射的反射激光信号,并将所述反射激光信号转换为对应的电信号;
所述激光信号处理部件用于将所述电信号进行处理,以获取所述激光点云信息。
8.根据权利要求7所述的识别设备,其特征在于,所述数据处理模块包括:
点云滤除单元,用于滤除手部之外的无关点云,得到目标对象的手部的所述激光点云数据集;
数据构建单元,用于构建所述目标对象的手部包络的点云数据模型以及对应的点云坐标信息;
轨迹跟踪单元,用于根据不同时刻的所述点云数据模型以及对应的所述点云坐标信息按时间顺序进行数据拟合,以获得所述目标对象的手部运动轨迹;
手势识别单元,用于根据所述手部运动轨迹获取所述目标手势。
9.根据权利要求1-8任一项所述的识别设备,所述通信模组至少为无线通信模组和有线通信模组其中一个。
10.一种手势控制系统,其特征在于,所述手势控制系统包括电子设备及与所述电子设备通信连接的识别设备,其中,所述识别设备为如权利要求1-8任一项所述识别设备,所述识别设备根据采集的目标手势生成控制指令,通过所述通信模组发送所述控制指令至所述电子设备,以控制所述电子设备。
11.根据权利要求10所述手势控制系统,所述电子设备为无人机,所述识别设备安装于所述无人机并与所述无人机电连接,其特征在于:
所述识别设备通过激光采集组件实时采集当前目标对象的手势数据,所述手势数据包括目标对象手部的位置坐标信息;
所述识别设备根据所述位置坐标信息生成控制指令并发送给所述无人机;
所述无人机根据所述控制指令调整当前位置。
12.一种电子设备连接状态检测方法,其特征在于,所述检测方法应用于如权利要求1-9任一项所述的识别设备,所述方法包括:
所述识别设备通过所述通信模组与电子设备建立通信连接;
所述识别设备通过所述激光采集组件采集反射激光信号,并通过所述数据处理模块识别目标对象的目标手势;
判断所述目标手势是否为电子设备的连接状态检测手势;
当判定所述目标手势为所述连接状态检测手势时,获取所述识别设备与所述电子设备的连接状态信息;
通过预设提醒组件展示所述连接状态信息,以提醒所述目标对象。
13.根据权利要求12所述的状态检测方法,其特征在于,所述识别设备通过所述通信模组与电子设备建立通信连接的步骤,包括:
所述识别设备识别所述目标对象的目标手势;
当识别到所述目标手势为设备连接手势时,通过与所述识别设备的通信模组最近的所述电子设备,或与所述通信模组进行有线连接的所述电子设备进行通信连接,所述设备连接手势为储存于所述数据存储模块的预设手势数据之一。
14.一种手势录入方法,其特征在于,所述手势录入方法应用于如权利要求1-9任一项所述的识别设备,所述方法包括:
切换所述识别设备为手势录入模式;
当所述识别设备处于所述手势录入模式时,获取所述手势检测区域内所述目标对象的手势信息;
判断所述手势信息是否为目标操作手势,所述目标操作手势与目标操作指令相对应;
当确定所述手势信息为目标操作手势时,将所述手势信息与所述目标操作指令设置成映射关系;
将形成映射关系的所述手势信息、所述目标操作指令保存于所述数据存储模块中。
15.根据权利要求14所述的手势录入方法,其特征在于,当接收到所述识别设备录入模式指令时,切换所述识别设备为手势录入模式,所述录入模式指令为设置于所述识别设备的输入装置生成,或者,所述录入模式指令为所述识别设备在所述手势检测区域内检测到的所述目标手势为预设录入模式手势时生成。
16.根据权利要求14-15任一项所述的手势录入方法,其特征在于,所述手势信息与所述目标操作指令为一对一或多对一映射关系。
17.一种多级手势识别方法,其特征在于,所述多级手势识别方法应用于如权利要求1-9任一项所述的识别设备,所述识别设备与多个电子设备通信连接,所述方法包括:
获取所述手势检测区域内所述目标对象的第一手势信息,并根据所述第一手势信息从多个所述电子设备中选择目标电子设备;
获取所述手势检测区域内所述目标对象的第二手势信息,根据所述第二手势信息控制所述目标电子设备执行预设操作,所述第一手势信息、所述第二手势信息以映射关系保存于所述数据存储模块中。
18.一种设备休眠唤醒方法,其特征在于,所述设备休眠唤醒方法应用于如权利要求1-9任一项所述的识别设备,所述方法包括:
周期性获取所述识别设备的当前工作状态,以累计所述识别设备处于闲置状态的闲置持续时长;
当所述闲置持续时长大于或等于第一预设时长时,所述数据处理模块启动休眠控制指令,以使得除用于手势识别组件之外的其他器件进入休眠状态;
当在所述手势检测区域内检测到唤醒手势时,所述数据处理模块向所述其他器件发送唤醒指令,以使所述识别设备进入工作状态。
19.根据权利要求18所述的休眠唤醒方法,其特征在于,所述识别设备与电子设备连接,所述周期性获取所述识别设备的当前工作状态的步骤,包括:
判断所述电子设备是否进入休眠模式;
当判定所述电子设备进入休眠模式时,判断是否接收到手势控制指令;
当判定接收到所述手势控制指令时,则所述识别设备向所述电子设备发送唤醒指令之后,发送所述手势控制指令。
20.一种基于手势的应用场景切换方法,其特征在于,所述方法应用于如权利要求1-9任一项所述的识别设备,所述方法包括:
当采集到反射激光信号时,判断所述反射激光信号对应的手势是否为应用场景切换手势;
当判定所述手势数据为应用场景切换手势时,检测目标切换手势,并根据所述目标切换手势从多个所述电子设备中选定目标电子设备。
21.根据权利要求20所述应用场景切换方法,其特征在于,在所述判断所述反射激光信号对应的手势是否为应用场景切换手势的步骤之前,所述方法还包括:
建立一个或多个应用场景的目标手势以及与所述目标手势对应的应用场景切换指令;
将所述目标手势以及所述应用场景切换指令保存于所述数据存储模块中。
22.一种多设备协同作业系统,所述系统包括如权利要求1-8任一项所述的识别设备,其特征在于,所述系统还包括:
多个电子设备,用于实现不同功能;
具备AP和STA功能的通信模组,用于接收或转发所述电子设备数据;
所述多个电子设备与所述识别设备通过所述具备AP和STA功能的通信模组进行通信连接。
23.一种多设备协同作业方法,应用于如权利要求22所述多设备协同作业系统,其特征在于,所述方法包括:
监测目标用户的目标手势,判断所述目标手势是否为设备协同作业手势;
当判定所述目标手势为所述设备协同作业手势时,根据所述设备协同作业手势获取设备协同作业配置信息,并根据所述设备协同作业配置信息确定目标电子设备,将所述设备协同作业配置信息发送至所述目标电子设备。
24.根据如权利要求23所述方法,其特征在于,在监测目标用户的目标手势的步骤之前,所述方法还包括:
设置所述设备协同作业配置信息以及相对应的所述设备协同作业手势,所述设备协同作业配置信息包括所述目标电子设备的信息;
将所述设备协同作业配置信息以及所述设备协同作业手势储存于所述数据存储模块中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210575967.7A CN114978333B (zh) | 2022-05-25 | 2022-05-25 | 一种识别设备、系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210575967.7A CN114978333B (zh) | 2022-05-25 | 2022-05-25 | 一种识别设备、系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114978333A CN114978333A (zh) | 2022-08-30 |
CN114978333B true CN114978333B (zh) | 2024-01-23 |
Family
ID=82955282
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210575967.7A Active CN114978333B (zh) | 2022-05-25 | 2022-05-25 | 一种识别设备、系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114978333B (zh) |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008014826A1 (en) * | 2006-08-03 | 2008-02-07 | Alterface S.A. | Method and device for identifying and extracting images of multiple users, and for recognizing user gestures |
CN101916148A (zh) * | 2010-07-30 | 2010-12-15 | 中山大学 | 基于激光的数据处理方法、装置及激光手写板 |
CN103914152A (zh) * | 2014-04-11 | 2014-07-09 | 周光磊 | 三维空间中多点触控与捕捉手势运动的识别方法与系统 |
JP2014154151A (ja) * | 2013-02-04 | 2014-08-25 | Canon Inc | 特徴を抽出し、軌跡を認識する方法および装置 |
CN206311690U (zh) * | 2016-12-29 | 2017-07-07 | 深圳玩智商科技有限公司 | 一种检测装置及基于光耦的检测电路 |
WO2018076523A1 (zh) * | 2016-10-25 | 2018-05-03 | 科世达(上海)管理有限公司 | 手势识别的方法、装置及车载系统 |
CN107998670A (zh) * | 2017-12-13 | 2018-05-08 | 哈尔滨拓博科技有限公司 | 基于平面手势识别的遥控玩具控制系统 |
CN108255292A (zh) * | 2017-12-06 | 2018-07-06 | 上海永微信息科技有限公司 | 空气成像互动系统、方法、控制设备及存储介质 |
CN108873715A (zh) * | 2018-07-04 | 2018-11-23 | 深圳众厉电力科技有限公司 | 基于手势识别的智能家居控制系统 |
CN108983975A (zh) * | 2018-07-04 | 2018-12-11 | 深圳汇创联合自动化控制有限公司 | 一种基于手势识别的车载终端控制系统 |
CN109658448A (zh) * | 2018-11-29 | 2019-04-19 | 武汉中地地科传媒文化有限责任公司 | 一种基于体感交互的产品展示方法及系统 |
WO2020228644A1 (zh) * | 2019-05-13 | 2020-11-19 | Oppo广东移动通信有限公司 | 基于ar场景的手势交互方法及装置、存储介质、通信终端 |
CN113569635A (zh) * | 2021-06-22 | 2021-10-29 | 惠州越登智能科技有限公司 | 一种手势识别方法及系统 |
CN113646736A (zh) * | 2021-07-17 | 2021-11-12 | 华为技术有限公司 | 手势识别方法、装置、系统及车辆 |
CN113689508A (zh) * | 2021-09-09 | 2021-11-23 | 北京地平线机器人技术研发有限公司 | 点云标注方法、装置、存储介质及电子设备 |
CN113918004A (zh) * | 2020-07-10 | 2022-01-11 | 华为技术有限公司 | 手势识别方法及其装置、介质和系统 |
CN113934307A (zh) * | 2021-12-16 | 2022-01-14 | 佛山市霖云艾思科技有限公司 | 一种根据手势和场景开启电子设备的方法 |
WO2022040954A1 (zh) * | 2020-08-26 | 2022-03-03 | 南京智导智能科技有限公司 | 一种通过手势控制的ar空间可视三维重建方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090278801A1 (en) * | 2008-05-11 | 2009-11-12 | Kuo-Shu Cheng | Method For Executing Command Associated With Mouse Gesture |
EP3610355B1 (en) * | 2017-04-11 | 2021-10-20 | Roundfire, Inc. | Natural language based computer animation |
-
2022
- 2022-05-25 CN CN202210575967.7A patent/CN114978333B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008014826A1 (en) * | 2006-08-03 | 2008-02-07 | Alterface S.A. | Method and device for identifying and extracting images of multiple users, and for recognizing user gestures |
CN101916148A (zh) * | 2010-07-30 | 2010-12-15 | 中山大学 | 基于激光的数据处理方法、装置及激光手写板 |
JP2014154151A (ja) * | 2013-02-04 | 2014-08-25 | Canon Inc | 特徴を抽出し、軌跡を認識する方法および装置 |
CN103914152A (zh) * | 2014-04-11 | 2014-07-09 | 周光磊 | 三维空间中多点触控与捕捉手势运动的识别方法与系统 |
WO2018076523A1 (zh) * | 2016-10-25 | 2018-05-03 | 科世达(上海)管理有限公司 | 手势识别的方法、装置及车载系统 |
CN206311690U (zh) * | 2016-12-29 | 2017-07-07 | 深圳玩智商科技有限公司 | 一种检测装置及基于光耦的检测电路 |
CN108255292A (zh) * | 2017-12-06 | 2018-07-06 | 上海永微信息科技有限公司 | 空气成像互动系统、方法、控制设备及存储介质 |
CN107998670A (zh) * | 2017-12-13 | 2018-05-08 | 哈尔滨拓博科技有限公司 | 基于平面手势识别的遥控玩具控制系统 |
CN108873715A (zh) * | 2018-07-04 | 2018-11-23 | 深圳众厉电力科技有限公司 | 基于手势识别的智能家居控制系统 |
CN108983975A (zh) * | 2018-07-04 | 2018-12-11 | 深圳汇创联合自动化控制有限公司 | 一种基于手势识别的车载终端控制系统 |
CN109658448A (zh) * | 2018-11-29 | 2019-04-19 | 武汉中地地科传媒文化有限责任公司 | 一种基于体感交互的产品展示方法及系统 |
WO2020228644A1 (zh) * | 2019-05-13 | 2020-11-19 | Oppo广东移动通信有限公司 | 基于ar场景的手势交互方法及装置、存储介质、通信终端 |
CN113918004A (zh) * | 2020-07-10 | 2022-01-11 | 华为技术有限公司 | 手势识别方法及其装置、介质和系统 |
WO2022040954A1 (zh) * | 2020-08-26 | 2022-03-03 | 南京智导智能科技有限公司 | 一种通过手势控制的ar空间可视三维重建方法 |
CN113569635A (zh) * | 2021-06-22 | 2021-10-29 | 惠州越登智能科技有限公司 | 一种手势识别方法及系统 |
CN113646736A (zh) * | 2021-07-17 | 2021-11-12 | 华为技术有限公司 | 手势识别方法、装置、系统及车辆 |
CN113689508A (zh) * | 2021-09-09 | 2021-11-23 | 北京地平线机器人技术研发有限公司 | 点云标注方法、装置、存储介质及电子设备 |
CN113934307A (zh) * | 2021-12-16 | 2022-01-14 | 佛山市霖云艾思科技有限公司 | 一种根据手势和场景开启电子设备的方法 |
Non-Patent Citations (1)
Title |
---|
高精度高灵敏人机交互手势控制算法与SOC芯片;赵宇航;李琛;;半导体技术(第03期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114978333A (zh) | 2022-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230205151A1 (en) | Systems and methods of gestural interaction in a pervasive computing environment | |
US11914792B2 (en) | Systems and methods of tracking moving hands and recognizing gestural interactions | |
CN110301118B (zh) | 用于智能助理计算设备的位置校准 | |
CN108476288B (zh) | 拍摄控制方法及装置 | |
US10007330B2 (en) | Region of interest segmentation | |
WO2019109768A1 (zh) | 任务执行方法、终端设备及计算机可读存储介质 | |
US20120327218A1 (en) | Resource conservation based on a region of interest | |
US11388333B2 (en) | Audio guided image capture method and device | |
CN103299259A (zh) | 检测装置、输入装置、投影机以及电子设备 | |
US10739952B2 (en) | Multiple sensors processing system for natural user interface applications | |
CN108399813B (zh) | 基于机器人的学习辅导方法与系统、机器人及手写设备 | |
WO2018014420A1 (zh) | 一种基于发光目标识别的无人机跟踪控制系统及方法 | |
CN203350807U (zh) | 一种带互动功能的显示系统 | |
CN104253944A (zh) | 基于目光连接的声音命令下达装置和方法 | |
CN105262538B (zh) | 一种光信息定位系统 | |
CN111168691B (zh) | 机器人控制方法、控制系统以及机器人 | |
CN114978333B (zh) | 一种识别设备、系统及方法 | |
CN209167945U (zh) | 一种设备 | |
CN108694395A (zh) | 一种新型的物体3d结构识别装置和方法 | |
US20160073087A1 (en) | Augmenting a digital image with distance data derived based on acoustic range information | |
US20180054608A1 (en) | Image capturing device and image capturing method | |
CN209170426U (zh) | 一种设备 | |
US20170128827A1 (en) | Information processing system, information processing apparatus, computer-readable non-transitory storage medium having stored therein information processing program, and hand-held information processing apparatus | |
US11509951B2 (en) | Control device, control method, and electronic device | |
CN104344805A (zh) | 激光测距仪及其操作方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |