CN111258430A - 一种基于单目手势控制的桌面交互系统 - Google Patents
一种基于单目手势控制的桌面交互系统 Download PDFInfo
- Publication number
- CN111258430A CN111258430A CN202010069626.3A CN202010069626A CN111258430A CN 111258430 A CN111258430 A CN 111258430A CN 202010069626 A CN202010069626 A CN 202010069626A CN 111258430 A CN111258430 A CN 111258430A
- Authority
- CN
- China
- Prior art keywords
- gesture
- user
- module
- desktop
- static
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title abstract description 24
- 230000002452 interceptive effect Effects 0.000 claims abstract description 36
- 230000003068 static effect Effects 0.000 claims abstract description 31
- 238000000605 extraction Methods 0.000 claims abstract description 21
- 230000005540 biological transmission Effects 0.000 claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 15
- 238000001514 detection method Methods 0.000 claims abstract description 14
- 230000002093 peripheral effect Effects 0.000 claims abstract description 8
- 238000013527 convolutional neural network Methods 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 7
- 235000021170 buffet Nutrition 0.000 description 5
- 238000009434 installation Methods 0.000 description 5
- 235000012054 meals Nutrition 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 239000011152 fibreglass Substances 0.000 description 2
- 239000002023 wood Substances 0.000 description 2
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
- G06V40/113—Recognition of static hand signs
Abstract
本发明提出一种基于单目手势控制的桌面交互系统,所述系统包括中控模块、手势检测模块、数据传输模块和反馈模块;所述交互系统整体嵌入桌面或独立外设;所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台,具体为:通过单目摄像头检测用户手势图像,从检测到的用户手势图像中提取基于用户手形和姿态的静态手势,结合前序提取结果提取基于时序特征变化的动态手势,根据预设对应关系,将提取的手势结果转换为对应的手势命令并输出至受控设备或后台。所述系统检测准确、控制灵敏,成本低、体积小、功耗低,支持用户自定义手势,操作体验好,并可为复杂的控制及数据交互提供支持。
Description
技术领域
本发明属于手势控制技术领域,特别是涉及一种基于单目手势控制的桌面交互系统。
背景技术
桌面控制与互动是人机交互的主要应用方向之一。在办公领域中,电动升降桌是现代办公中广泛采用的办公设备,可以通过调节桌面高度提供站/坐两种办公位置。而在消费娱乐领域中,各类多媒体触控桌面也为人机交互提供了多样的选择。
然而,目前桌面交互大多采用实体按钮或触屏进行控制,操作区域及灵活性受限,且桌面通常需要为控制区预留空间,影响正常使用。
基于单目摄像头的手势控制能够实现大操作区域内的非接触式操作,可以为用户提供便捷、自然的交互体验,相较于实体按钮及触屏,所支持的手势更为灵活多样,从而能够为复杂的交互控制提供支持。同时,桌面硬件结构只需为摄像头镜头提供安装口,对桌面平整度影响小,不占用桌面空间,无需手势功能时可作为普通桌面使用。此外,相较于其他摄像头方案如深度摄像头、多角度成像等,单目摄像头成本低、结构简单、易于安装与维护,更有利于产品化及批量化。
目前的桌面交互系统中,使用实体按键及触屏设备需要预留按键位及触屏位,操作区域及灵活性受限,且桌面通常需要为控制区预留空间,影响正常使用。操作方式较为固定,定制化程度不高,通常不支持用户自定义操作,对复杂系统支持有限。而使用红外边框的交互系统,边框通常高于桌面,影响桌面平整度。使用投影的交互系统则需要额外的安装空间,或者以外设形式使用,无法镶嵌于桌面内部。
发明内容
本发明目的是为了解决现有技术中的问题,提出了一种基于单目手势控制的桌面交互系统。
本发明是通过以下技术方案实现的,本发明提出一种基于单目手势控制的桌面交互系统,所述系统包括中控模块、手势检测模块、数据传输模块和反馈模块;所述交互系统整体嵌入桌面或独立外设;
所述中控模块分别与所述手势检测模块、数据传输模块和反馈模块相连接,用于控制其他各模块的运行;所述手势检测模块采用单目摄像头检测用户手势图像,所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台从而控制受控设备或后台执行所述手势命令对应的功能,所述中控模块还用于从受控设备或后台获取运行结果,所述运行结果通过反馈模块向用户提供反馈;
所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台,具体为:通过单目摄像头检测用户手势图像,从检测到的用户手势图像中提取基于用户手形和姿态的静态手势,结合前序提取结果提取基于时序特征变化的动态手势,根据预设对应关系,将提取的手势结果转换为对应的手势命令并输出至受控设备或后台。
进一步地,利用卷积神经网络进行静态手势提取,所述卷积神经网络层数不多于8层。
进一步地,所述动态手势提取在静态手势提取基础上进行,所述交互系统存储着一段时间内提取到的静态手势序列,当提取到新的静态手势时,将当前提取结果与前序静态手势进行对比,提取该段时间内的位置变化、形态变化及姿态变化,从而得到动态手势。
进一步地,所述动态手势还包括用户自定义手势,用户能够将交互系统支持的静态手势自行组合,录制符合自身操作习惯的动态手势,所述录制流程具体如下:
步骤1、用户在操作区内做出自定义动态手势,交互系统通过单目摄像头进行录制;
步骤2、用户通过交互系统对录制的视频进行二次截取,保留有效部分;
步骤3、交互系统对截取后视频进行检测及分析;
步骤4、输出并存储新的动态手势。
进一步地,所述反馈模块用于向用户实时提供操作反馈,反馈模式包括视觉、声音及震动中的一种或多种。
本发明的有益效果:
1、将交互系统与传统桌面结合,提供便利的交互终端;
2、使用手势控制进行人机交互,能够识别包括手部静态和动态手势,不局限于触摸操作,操作体验好,方便快捷;
3、采用单目摄像头实现手势控制,成本低;
4、不占用桌面空间,不使用手势控制时,桌面可正常使用;
5、交互系统主体既可隐藏于办公桌本体内,保持办公桌整体外观简洁美观,也可作为桌面外设安装,结构灵活;
6、交互系统体积小、功耗低、集成度高;
7、交互系统既可控制桌面,也可控制其他设备,还可通过连接至数据后台,功能扩展性强。
附图说明
图1为本发明所述基于单目手势控制的桌面交互系统总体框图;
图2为本发明所述基于单目手势控制的桌面交互系统总体运行流程图;
图3为手势提取运行流程图;
图4为静态手势提取流程图;
图5为动态手势提取流程图;
图6为动态手势录制流程图;
图7为手势控制电动升降桌交互系统硬件结构及安装示意图;
图8为手势控制电动升降桌桌面布局示意图;
图9为外设式手势控制电动升降桌示意图;
图10为多功能自助餐桌交互系统硬件结构及安装示意图;
图11为多功能自助餐桌桌面布局示意图;
图12为功能切换示意图。
具体实施方式
下面将结合本发明实施例中的附图对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
结合图1和图2,本发明提出一种基于单目手势控制的桌面交互系统,所述系统包括中控模块、手势检测模块、数据传输模块和反馈模块;所述交互系统整体嵌入桌面或独立外设;使用时,该系统作为面向用户的操作终端,用户可通过该系统控制桌面或其他连接至系统的设备,也可与后台进行数据交互。
所述中控模块分别与所述手势检测模块、数据传输模块和反馈模块相连接,用于控制其他各模块的运行;所述手势检测模块采用单目摄像头检测用户手势图像,硬件上,手势检测模块摄像头能够捕获可见光至红外940nm以内谱段的光线,配合红外补光灯,以保证不同照明条件下的正常使用。所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台从而控制受控设备或后台执行所述手势命令对应的功能,所述中控模块还用于从受控设备或后台获取运行结果,所述运行结果通过反馈模块向用户提供反馈;
结合图3,所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台,具体为:通过单目摄像头检测用户手势图像,从检测到的用户手势图像中提取基于用户手形和姿态的静态手势,结合前序提取结果提取基于时序特征变化的动态手势,根据预设对应关系,将提取的手势结果转换为对应的手势命令并输出至受控设备或后台。
所述静态手势包括:
1、握拳、伸出一个或多个手指等手部形态;
2、手部旋转角、俯仰角等姿态特征;
3、手部位置。
所述动态手势包括:
1、运动轨迹;
2、静态特征的时序变化。
系统采用针对低端嵌入式平台优化的卷积神经网络进行静态手势提取。为保证系统运算效率,网络层数不多于8层,网络输入为单目摄像头采集图像,网络输出为手部静态手势。
为保证检测效果,该卷积神经网络针对桌面应用环境进行训练,涵盖手部不同形态、不同距离、不同环境背景、不同光照的图像数据。
从图像中提取静态手势的流程如图4所示,具体为:
步骤a、输入由单目摄像头采集的图像;
步骤b、利用卷积神经网络进行图像提取;
步骤c、输出静态手势。
所述动态手势提取在静态手势提取基础上进行,所述交互系统存储着一段时间(一般取2-5秒)内提取到的静态手势序列,当提取到新的静态手势时,将当前提取结果与前序静态手势进行对比,提取该段时间内的位置变化、形态变化及姿态变化,从而得到动态手势。提取流程如图5所示,具体如下:
步骤a、输入当前静态手势提取结果;
步骤b、与前序静态手势进行比较,找出各个特征的时序变化;
步骤c、输出动态手势。
所述动态手势还包括用户自定义手势,用户能够将交互系统支持的静态手势自行组合,录制符合自身操作习惯的动态手势,所述录制流程具体如下:录制流程如图6所示,
步骤1、用户在操作区内做出自定义动态手势,交互系统通过单目摄像头进行录制;
步骤2、用户通过交互系统对录制的视频进行二次截取,保留有效部分;
步骤3、交互系统对截取后视频进行检测及分析;
步骤4、输出并存储新的动态手势。
所述数据传输模块将手势命令发送至受控设备或后台并接收状态返回值,支持WiFi、蓝牙、Zigbee及串口通信。
所述反馈模块用于向用户实时提供操作反馈,反馈模式包括视觉、声音及震动中的一种或多种。
实施例1--手势控制电动升降桌
本实施例中,采用本发明提出的桌面交互系统对电动升降桌进行控制。硬件列表如表1所示。系统整体采用一体化结构,镶嵌于桌面中,上表面覆盖木纹图案层,如图7所示,桌面布局如图8所示。闲置时,显示器熄灭,升降桌桌面为平整整体,外观与普通桌面相同,不影响正常使用;使用时显示器点亮,透过木纹图案层显现。升降桌整体外观简洁美观。
表1手势控制电动升降桌硬件列表
序号 | 名称 | 型号 |
1 | 主控芯片 | All Winner H6 |
2 | 计算平台主板 | 搭载主控芯片及摄像头等组件 |
3 | 单目摄像头 | RGB+IR 640x480@60fps |
4 | 操作反馈显示屏 | LED贴片点阵屏@64x64px |
5 | 电动升降桌本体 | 市售 |
升降桌操作手势如表2所示。用户将手部放置于操作区上方做出手势即可执行相应功能。
表2手势控制电动升降桌操作手势
实施例2--外设式手势控制电动升降桌
本实施例将交互系统以外设形式安装,如图9所示。硬件设备与上一实施例基本相同,额外增加桌面台历及蓝牙发送/接收器,如表3所示。系统主体镶嵌于桌面台历中,计算平台主板额外集成蓝牙通信模块。桌面升降杆与蓝牙接收器相连,通过蓝牙协议与系统主体传输数据。台历可放置于距离办公桌1m范围内。用户将手部放置于台历上部做出手势即可执行相应功能。
表3额外所需硬件
序号 | 名称 | 型号 |
1 | 台历 | 内置交互系统主体 |
2 | 蓝牙发送/接收模块 | NXP 88W8997 |
实施例3--多功能自助餐桌
本实施例中,交互系统嵌于桌面中,并与后台数据主机通过WiFi相连,用户可通过交互系统自助点餐或收看新闻。硬件设备如表4所示。硬件安装方式如图10所示,与实施例1主要区别在于使用了深色透明玻璃钢桌面,无需在桌面开孔。桌面布局如图11所示。用户将手部放置于操作区上方做出手势即可执行相应功能。同时,交互系统通过WiFi连接至饭店收银台,发送用户点餐内容。
表4多功能自助餐桌硬件列表
序号 | 名称 | 型号 |
1 | 主控芯片 | All Winner H6 |
2 | 计算平台主板 | 搭载主控芯片及摄像头等组件 |
3 | 蓝牙发送/接收模块 | NXP 88W8997 |
4 | 单目摄像头 | RGB+IR 640x480@60fps |
5 | 操作反馈显示屏 | 市售,高亮度LED显示器 |
6 | 餐桌本体 | 市售,深色透明玻璃钢桌面 |
交互系统具备时间显示、新闻播报、自助点餐三项功能。系统闲置时为时间显示状态,可通过手势在不同功能间切换,如图12所示。在时间显示状态下,挥手进入自助点餐状态;自助点餐状态下挥手回到时间显示状态,手部持续旋转进入新闻播放状态;新闻播放状态下挥手回到时间显示状态,手部持续旋转则进入自助点餐状态。
自助点餐状态下操作方式如表5所示。用户点餐后,交互系统将向收银台发送订餐内容,完成订餐。
表5多功能自助餐桌操作手势
序号 | 名称 | 功能 |
1 | 手部上下左右挥动 | 菜单导航 |
2 | 做出数字手势,短时间保持 | 订购指定份数的餐品 |
3 | 遮盖摄像头,长时间保持 | 下单 |
综上,本发明提出一种基于单目手势控制的桌面交互系统,将单目手势控制与传统桌面结合,使桌面成为多功能、智能化的操作终端,为用户提供良好的交互体验,所述交互系统检测准确、控制灵敏,成本低、体积小、功耗低,支持用户自定义手势,操作体验好,并可为复杂的控制及数据交互提供支持。
以上对本发明所提出的一种基于单目手势控制的桌面交互系统,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (5)
1.一种基于单目手势控制的桌面交互系统,其特征在于:所述系统包括中控模块、手势检测模块、数据传输模块和反馈模块;所述交互系统整体嵌入桌面或独立外设;
所述中控模块分别与所述手势检测模块、数据传输模块和反馈模块相连接,用于控制其他各模块的运行;所述手势检测模块采用单目摄像头检测用户手势图像,所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台从而控制受控设备或后台执行所述手势命令对应的功能,所述中控模块还用于从受控设备或后台获取运行结果,所述运行结果通过反馈模块向用户提供反馈;
所述中控模块对检测到的用户手势图像进行处理分析,得到手势命令,并将手势命令通过数据传输模块发送至受控设备或后台,具体为:通过单目摄像头检测用户手势图像,从检测到的用户手势图像中提取基于用户手形和姿态的静态手势,结合前序提取结果提取基于时序特征变化的动态手势,根据预设对应关系,将提取的手势结果转换为对应的手势命令并输出至受控设备或后台。
2.根据权利要求1所述的系统,其特征在于:利用卷积神经网络进行静态手势提取,所述卷积神经网络层数不多于8层。
3.根据权利要求2所述的系统,其特征在于:所述动态手势提取在静态手势提取基础上进行,所述交互系统存储着一段时间内提取到的静态手势序列,当提取到新的静态手势时,将当前提取结果与前序静态手势进行对比,提取该段时间内的位置变化、形态变化及姿态变化,从而得到动态手势。
4.根据权利要求3所述的系统,其特征在于:所述动态手势还包括用户自定义手势,用户能够将交互系统支持的静态手势自行组合,录制符合自身操作习惯的动态手势,所述录制流程具体如下:
步骤1、用户在操作区内做出自定义动态手势,交互系统通过单目摄像头进行录制;
步骤2、用户通过交互系统对录制的视频进行二次截取,保留有效部分;
步骤3、交互系统对截取后视频进行检测及分析;
步骤4、输出并存储新的动态手势。
5.根据权利要求1所述的系统,其特征在于:所述反馈模块用于向用户实时提供操作反馈,反馈模式包括视觉、声音及震动中的一种或多种。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010069626.3A CN111258430A (zh) | 2020-01-21 | 2020-01-21 | 一种基于单目手势控制的桌面交互系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010069626.3A CN111258430A (zh) | 2020-01-21 | 2020-01-21 | 一种基于单目手势控制的桌面交互系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111258430A true CN111258430A (zh) | 2020-06-09 |
Family
ID=70948021
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010069626.3A Pending CN111258430A (zh) | 2020-01-21 | 2020-01-21 | 一种基于单目手势控制的桌面交互系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111258430A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112181133A (zh) * | 2020-08-24 | 2021-01-05 | 东南大学 | 基于静态和动态手势交互任务的模型评估方法及系统 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102710908A (zh) * | 2012-05-31 | 2012-10-03 | 无锡商业职业技术学院 | 一种基于手势控制电视机的装置 |
US20150103004A1 (en) * | 2013-10-16 | 2015-04-16 | Leap Motion, Inc. | Velocity field interaction for free space gesture interface and control |
CA2837808A1 (en) * | 2013-12-20 | 2015-06-20 | Chris Argiro | Video-game controller assemblies for progressive control of actionable-objects displayed on touchscreens |
CN105045503A (zh) * | 2015-07-09 | 2015-11-11 | 陈海峰 | 无接触触摸屏的控制系统及方法 |
PL411337A1 (pl) * | 2015-02-23 | 2016-08-29 | Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością | Sposób interakcji z obrazami wolumetrycznymi za pomocą gestów i system do interakcji z obrazami wolumetrycznymi za pomocą gestów |
CN106502570A (zh) * | 2016-10-25 | 2017-03-15 | 科世达(上海)管理有限公司 | 一种手势识别的方法、装置及车载系统 |
CN107688391A (zh) * | 2017-09-01 | 2018-02-13 | 广州大学 | 一种基于单目视觉的手势识别方法和装置 |
CN108491070A (zh) * | 2018-03-02 | 2018-09-04 | 歌尔股份有限公司 | 基于桌面投影的交互设备及交互方法 |
CN109190496A (zh) * | 2018-08-09 | 2019-01-11 | 华南理工大学 | 一种基于多特征融合的单目静态手势识别方法 |
CN109583404A (zh) * | 2018-12-06 | 2019-04-05 | 哈尔滨拓博科技有限公司 | 一种基于特征图案识别的平面手势控制系统及控制方法 |
CN109614922A (zh) * | 2018-12-07 | 2019-04-12 | 南京富士通南大软件技术有限公司 | 一种动静态手势识别方法和系统 |
CN209765441U (zh) * | 2019-02-28 | 2019-12-10 | 哈尔滨拓博科技有限公司 | 一种多模式动态手势识别装置 |
-
2020
- 2020-01-21 CN CN202010069626.3A patent/CN111258430A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102710908A (zh) * | 2012-05-31 | 2012-10-03 | 无锡商业职业技术学院 | 一种基于手势控制电视机的装置 |
US20150103004A1 (en) * | 2013-10-16 | 2015-04-16 | Leap Motion, Inc. | Velocity field interaction for free space gesture interface and control |
CA2837808A1 (en) * | 2013-12-20 | 2015-06-20 | Chris Argiro | Video-game controller assemblies for progressive control of actionable-objects displayed on touchscreens |
PL411337A1 (pl) * | 2015-02-23 | 2016-08-29 | Samsung Electronics Polska Spółka Z Ograniczoną Odpowiedzialnością | Sposób interakcji z obrazami wolumetrycznymi za pomocą gestów i system do interakcji z obrazami wolumetrycznymi za pomocą gestów |
CN105045503A (zh) * | 2015-07-09 | 2015-11-11 | 陈海峰 | 无接触触摸屏的控制系统及方法 |
CN106502570A (zh) * | 2016-10-25 | 2017-03-15 | 科世达(上海)管理有限公司 | 一种手势识别的方法、装置及车载系统 |
CN107688391A (zh) * | 2017-09-01 | 2018-02-13 | 广州大学 | 一种基于单目视觉的手势识别方法和装置 |
CN108491070A (zh) * | 2018-03-02 | 2018-09-04 | 歌尔股份有限公司 | 基于桌面投影的交互设备及交互方法 |
CN109190496A (zh) * | 2018-08-09 | 2019-01-11 | 华南理工大学 | 一种基于多特征融合的单目静态手势识别方法 |
CN109583404A (zh) * | 2018-12-06 | 2019-04-05 | 哈尔滨拓博科技有限公司 | 一种基于特征图案识别的平面手势控制系统及控制方法 |
CN109614922A (zh) * | 2018-12-07 | 2019-04-12 | 南京富士通南大软件技术有限公司 | 一种动静态手势识别方法和系统 |
CN209765441U (zh) * | 2019-02-28 | 2019-12-10 | 哈尔滨拓博科技有限公司 | 一种多模式动态手势识别装置 |
Non-Patent Citations (1)
Title |
---|
何汉武等: "《增强现实交互方法与实现》", 华中科技大学出版社 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112181133A (zh) * | 2020-08-24 | 2021-01-05 | 东南大学 | 基于静态和动态手势交互任务的模型评估方法及系统 |
CN112181133B (zh) * | 2020-08-24 | 2024-05-07 | 东南大学 | 基于静态和动态手势交互任务的模型评估方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11650626B2 (en) | Systems and methods for extending a keyboard to a surrounding surface using a wearable extended reality appliance | |
CN101984384B (zh) | 一种移动终端及其操控技术的设计方法 | |
CN104536766B (zh) | 一种电子设备的控制方法及电子设备 | |
CN104204994B (zh) | 增强现实计算装置、设备和系统 | |
CN106098019B (zh) | 一种调节显示参数的方法及电子设备 | |
WO2013134975A1 (en) | Method of Scene Recognition Based Virtual Touch Event | |
US9958967B2 (en) | Method and electronic device for operating electronic pen | |
CN109471586B (zh) | 一种键帽配色方法、装置和终端设备 | |
CN110221761A (zh) | 显示方法及终端设备 | |
CN110032156A (zh) | 家居设备的控制和调整方法、终端及家居设备 | |
WO2023066294A1 (zh) | 图标显示方法、装置及电子设备 | |
CN109634438A (zh) | 一种输入法的控制方法及终端设备 | |
CN111258430A (zh) | 一种基于单目手势控制的桌面交互系统 | |
CN108196464A (zh) | 一种基于集成键的智能家居系统 | |
CN104503267A (zh) | 电器设备及其开待机控制方法 | |
CN109976653A (zh) | 一种信息输入方法及终端设备 | |
CN108540668B (zh) | 一种程序启动方法及移动终端 | |
CN109582194A (zh) | 一种显示控制方法及移动终端 | |
CN110059627A (zh) | 一种显示控制方法及终端 | |
CN109557697A (zh) | 一种显示调节方法及终端 | |
CN106033286A (zh) | 基于投影显示的虚拟触控交互方法、装置及机器人 | |
US10984214B2 (en) | Method and device for unlocking fingerprint | |
CN110381212A (zh) | 终端的控制方法、终端及计算机可读存储介质 | |
CN109947321A (zh) | 界面显示方法、可穿戴设备及计算机可读存储介质 | |
JP2023526779A (ja) | フォントファイルの処理方法、電子機器及び可読記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200609 |
|
WD01 | Invention patent application deemed withdrawn after publication |