CN108549490A - 一种基于Leap Motion设备的手势识别互动方法 - Google Patents
一种基于Leap Motion设备的手势识别互动方法 Download PDFInfo
- Publication number
- CN108549490A CN108549490A CN201810415133.3A CN201810415133A CN108549490A CN 108549490 A CN108549490 A CN 108549490A CN 201810415133 A CN201810415133 A CN 201810415133A CN 108549490 A CN108549490 A CN 108549490A
- Authority
- CN
- China
- Prior art keywords
- user
- gesture
- finger
- gesticulates
- manipulator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/0005—Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/003—Manipulators for entertainment
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供了一种基于Leap Motion设备的手势识别互动方法，通过Leap Motion设备采集用户的手部动作，基于所述手部动作获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌移动或旋转的方向与速度、手掌朝向的方向与法向量、手指分开或聚合的信息；通过分析上述获取得到的信息识别出用户的手势；将用户的手势与预设的手势进行匹配；当与预设手势匹配时，控制仿生机械手做出相应的手势动作进行人机互动，可以让不喜欢与人们沟通的自闭症患者了解和熟悉人们日常使用的手势，并学习模仿相应的互动动作，可以增加人机交互的趣味性，协助自闭症患者克服人际交往障碍。
Description
技术领域
本发明涉及人机智能交互技术领域，特别是涉及一种基于Leap Motion设备的手势识别互动方法。
背景技术
这个世界上有一群不被人们理解的孩子，他们无法与正常人进行沟通，他们沉浸在自己小小的世界里，无法理解正常人平时用的手势，他们就像是天上的星星，在漆黑的夜里孤独地闪烁着，他们就是被人们称为星星的孩子的自闭症患者。
自闭症，又称孤独症(autism)或孤独性障碍(autistic disorder)等，是广泛性发育障碍(pervasive developmental disorder，PDD)的代表性疾病，起病于婴幼儿期，主要表现为不同程度的言语发育障碍、人际交往障碍、兴趣狭窄和行为方式刻板。而手势是人们日常交流中一种非常重要的沟通方式，如何使不喜欢与人们沟通的自闭症患者了解和熟悉人们日常用的手势并与人们互动是人们亟需解决的问题。
发明内容
基于此，有必要提供一种基于Leap Motion设备的手势识别互动方法，其能让自闭症患者了解和熟悉人们日常用的基本手势并与之互动。
一种基于Leap Motion设备的手势识别互动方法，包括：
通过Leap Motion设备采集用户的手部动作，基于所述手部动作获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌移动或旋转的方向与速度、手掌朝向的方向与法向量、手指分开或聚合的信息；
通过分析上述获取得到的信息识别出用户的手势；
将用户的手势与预设的手势进行匹配；
所述预设的手势包括：挥手、握手、碰拳、手指比划数字一、手指比划数字二、手指比划数字三、手指比划数字四、手指比划数字五、手指比划数字零；
当用户的手势与挥手匹配时，则控制仿生机械手向用户进行挥手的动作；
当用户的手势与握手匹配时，则控制仿生机械手与用户进行握手的动作；
当用户的手势与碰拳匹配时，则控制仿生机械手与用户进行碰拳的动作；
当用户的手势与手指比划数字一匹配时，则控制仿生机械手的手指比划数字四的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字二匹配时，则控制仿生机械手的手指比划数字三的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字三匹配时，则控制仿生机械手的手指比划数字二的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字四匹配时，则控制仿生机械手的手指比划数字一的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字五匹配时，则控制仿生机械手的手指比划数字零的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字零匹配时，则控制仿生机械手的手指比划数字五的动作，与用户模拟相加等于五的游戏。
在其中一个实施例中，所述仿生机械手通过接收单片机发送的控制指令调整舵机组状态，完成指定的手势动作。
在其中一个实施例中，所述方法还包括更新预设的手势，并设置仿生机械手做出相应的动作进行互动。
本发明提供的一种基于Leap Motion设备的手势识别互动方法，通过Leap Motion设备采集用户的手部动作，基于所述手部动作获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌移动或旋转的方向与速度、手掌朝向的方向与法向量、手指分开或聚合的信息；通过分析上述获取得到的信息识别出用户的手势；将用户的手势与预设的手势进行匹配；所述预设的手势包括：挥手、握手、碰拳、手指比划数字一、手指比划数字二、手指比划数字三、手指比划数字四、手指比划数字五、手指比划数字零；当用户的手势与挥手匹配时，则控制仿生机械手向用户进行挥手的动作；当用户的手势与握手匹配时，则控制仿生机械手与用户进行握手的动作；当用户的手势与碰拳匹配时，则控制仿生机械手与用户进行碰拳的动作；当用户的手势与手指比划数字一匹配时，则控制仿生机械手的手指比划数字四的动作，与用户模拟相加等于五的游戏；当用户的手势与手指比划数字二匹配时，则控制仿生机械手的手指比划数字三的动作，与用户模拟相加等于五的游戏；当用户的手势与手指比划数字三匹配时，则控制仿生机械手的手指比划数字二的动作，与用户模拟相加等于五的游戏；当用户的手势与手指比划数字四匹配时，则控制仿生机械手的手指比划数字一的动作，与用户模拟相加等于五的游戏；当用户的手势与手指比划数字五匹配时，则控制仿生机械手的手指比划数字零的动作，与用户模拟相加等于五的游戏；当用户的手势与手指比划数字零匹配时，则控制仿生机械手的手指比划数字五的动作，与用户模拟相加等于五的游戏。本发明通过捕捉识别并匹配出预设的手势，并控制仿生机械手做出相应的手势动作进行人机互动，可以让不喜欢与人们沟通的自闭症患者了解和熟悉人们日常使用的手势，并学习模仿相应的互动动作，可以增加人机交互的趣味性，具有关爱自闭症患者、协助自闭症患者克服人际交往障碍的作用，另外，本发明具有快速准确识别用户手势的优点。
附图说明
图1为一个实施例中一种基于Leap Motion设备的手势识别互动方法流程图；
图2为一个实施例中一种基于Leap Motion设备的手势识别互动的系统框图；
图3为一个实施例中Leap Motion设备的三维空间坐标示意图；
图4为一个实施例中Leap Motion设备获取的手部的整体图像及手指方向示意图；
图5为一个实施例中Leap Motion设备获取的用户手部的整体图像及手掌朝向的方向与法向量示意图；
图6为一个实施例中识别出的用户手势三维示意图；
图7为一个实施例中仿生机械手的电信号控制示意图；
图8为一个实施例中控制仿生机械手的手指比划数字五的动作示意图；
图9为一个实施例中控制仿生机械手与用户进行握手的动作示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
除非上下文另有特定清楚的描述，本发明中的元件和组件，数量既可以单个的形式存在，也可以多个的形式存在，本发明并不对此进行限定。本发明中的步骤虽然用标号进行了排列，但并不用于限定步骤的先后次序，除非明确说明了步骤的次序或者某步骤的执行需要其他步骤作为基础，否则步骤的相对次序是可以调整的。可以理解，本文中所使用的术语“和/或”涉及且涵盖相关联的所列项目中的一者或一者以上的任何和所有可能的组合。
在一个实施例中，如图2所示，一种基于Leap Motion设备的手势识别互动系统，包括依次电连接的Leap Motion设备100、单片机200、仿生机械手300，所述Leap Motion设备通过捕捉用户的手部动作获取用户的手势，并将获取的用户手势信息发送给单片机200，单品机200接收该用户手势信息并与系统预设的手势进行匹配，若匹配成功，则发送相应的控制信息给仿生机械手300，让其执行相应的动作与用户进行互动。
在一个实施例中，如图1所示，一种基于Leap Motion设备的手势识别互动方法，包括：
步骤S10，通过Leap Motion设备采集用户的手部动作，基于所述手部动作获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌移动或旋转的方向与速度、手掌朝向的方向与法向量、手指分开或聚合的信息；
步骤S20，通过分析上述获取得到的信息识别出用户的手势；
如图3、图4、图5、图6所示，Leap Motion设备根据内置的两个摄像头从不同角度捕捉用户手部动作的画面，重建出手掌在真实世界三维空间的运动信息。检测的范围大概在传感器上方25毫米到600毫米之间，检测的空间大体是一个倒四棱锥体。Leap Motion设备建立一个直角座标系，座标的原点是Leap Motion设备的中心，座标的X轴平行于LeapMotion设备，指向屏幕右方，Y轴指向上方，Z轴指向背离屏幕的方向。
当Leap Motion设备检测到用户的手、手指、或者是手势时，设备赋予它(用户的手、手指、或者是手势)一个唯一的ID号码作为标记，只要这个实体不出设备的可视区域，这个ID号就会一直不变，在每一帧中，Leap Motion设备获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌朝向的方向与法向量、手指分开或聚合的信息，并通过当前的帧与更早的帧的比较获得帧动画，从而获得手掌移动或旋转的方向与速度、手指的缩放动作信息。通过综合分析上述获取得到的信息判断并识别出用户的手势。本发明通过大量的实验发现，当用户的手部与Leap Motion设备的距离为30毫米到550毫米时，Leap Motion设备采集捕捉用户手势的效果更佳；在其中一个实施例中，当用户的手部与Leap Motion设备的距离为35毫米到500毫米时，Leap Motion设备采集捕捉用户手势的效果最佳。
在其中一个实施例中，Leap Motion设备通过测量各个手指头到手掌心的距离，计算出手指长度信息，并结合手指长度信息和手指头坐标信息识别出人体的手势；在其中一个实施例中，Leap Motion设备通过比较分析连续几帧手掌心和每个指关节骨骼空间三维位置坐标的变化识别人体的手势。本发明提供的解决方案不仅可以识别静态的用户手势，也可以识别动态的用户手势，而且识别速度快，准确度高。
步骤S30，将用户的手势与预设的手势进行匹配；
将上述识别出来的用户的手势与系统中预设的手势进行匹配，所述预设的手势包括：挥手、握手、碰拳、手指比划数字一、手指比划数字二、手指比划数字三、手指比划数字四、手指比划数字五、手指比划数字零；
在其中一个实施例中，利用模板匹配的方法以及最大概率和最近邻准则将用户的手势与预设的手势进行匹配，具体包括匹配掌心朝向、手伸出的方向、手指伸出的状态与数量、相邻指骨间的角度、食指近指关节的方向、大拇指与食指指尖距离、食指与中指的指尖距离、无名指与中指的指尖距离、无名指与小指的指尖距离、各个手指尖与手掌心的距离、手掌移动或转动的方向中的一项或几项。本发明可以快速准确的识别出与预设手势相匹配的用户手势。
步骤S41，当用户的手势与挥手匹配时，则控制仿生机械手向用户进行挥手的动作；
步骤S42，当用户的手势与握手匹配时，则控制仿生机械手与用户进行握手的动作；
步骤S43，当用户的手势与碰拳匹配时，则控制仿生机械手与用户进行碰拳的动作；
步骤S44，当用户的手势与手指比划数字一匹配时，则控制仿生机械手的手指比划数字四的动作，与用户模拟相加等于五的游戏；
步骤S45，当用户的手势与手指比划数字二匹配时，则控制仿生机械手的手指比划数字三的动作，与用户模拟相加等于五的游戏；
步骤S46，当用户的手势与手指比划数字三匹配时，则控制仿生机械手的手指比划数字二的动作，与用户模拟相加等于五的游戏；
步骤S47，当用户的手势与手指比划数字四匹配时，则控制仿生机械手的手指比划数字一的动作，与用户模拟相加等于五的游戏；
步骤S48，当用户的手势与手指比划数字五匹配时，则控制仿生机械手的手指比划数字零的动作，与用户模拟相加等于五的游戏；
步骤S49，当用户的手势与手指比划数字零匹配时，则控制仿生机械手的手指比划数字五的动作，与用户模拟相加等于五的游戏。
本发明通过捕捉识别并匹配出预设的手势，并控制仿生机械手做出相应的手势动作进行人机互动，可以让不喜欢与人们沟通的自闭症患者了解和熟悉人们日常使用的手势，并学习模仿相应的互动动作，可以增加人机交互的趣味性，具有关爱自闭症患者、协助自闭症患者克服人际交往障碍的作用，另外，本发明具有快速准确识别用户手势的优点。
在其中一个实施例中，如图7所示，所述仿生机械手300包括微控制器和多个舵机，所述多个舵机分别与微控制器电连接，所述微控制器与单片机200电连接，所述微控制器通过接收单片机发送的控制指令调整舵机组状态，完成指定的手势动作。在其中一个实施例中，仿生机械手的舵机组包括15个舵机，其中，拇指的两个指关节处包括2个舵机，其他四个手指的三个指关节处分别包括3个舵机，手腕的关节处包含1个舵机，仿生机械手通过调整15个舵机的状态，控制仿生机械手的各个指关节、手腕关节弯曲或伸直从而让仿生机械手做出各种模仿人手手势的动作。当然，根据需要，仿生机械手也可以包含更多的舵机，从而让仿生机械手做出的手势动作更加细致，更加逼真。
在其中一个实施例中，如图8所示，当Leap Motion设备捕捉识别到的用户手势与预设的手势中手指比划数字零匹配时，单片机通过发送控制指令给仿生机械手的微控制器，控制仿生机械手的舵机组调整状态、让仿生机械手的手指比划数字五的动作，与用户模拟相加等于五的游戏。如图9所示，当Leap Motion设备捕捉识别到的用户手势与预设的手势中握手的手势匹配时，单片机通过发送控制指令给仿生机械手的微控制器，控制仿生机械手的舵机组调整状态、让仿生机械手与用户进行握手的动作，与用户进行握手互动。
在其中一个实施例中，该方法还包括更新预设的手势，并设置仿生机械手做出相应的动作进行互动。根据用户的需要，可以自定义预设的手势库，例如增加猜拳的手势剪刀、石头、布，并设置仿生机械手做出相同的手势，或者设置仿生机械手做出猜拳能赢的动作。在其中一个实施例中，当捕捉识别到用户手部的手势为剪刀时，控制仿生机械手做出石头的动作，当捕捉识别到用户手部的手势为石头时，控制仿生机械手做出布的动作，当捕捉识别到用户手部的手势为布时，控制仿生机械手做出剪刀的动作，与用户进行互动，增加人机互动的乐趣。当然，用户也可以根据需要删除预设手势库中的手势，例如，当用户已经熟悉并掌握了预设手势库中的某个手势时可以将其从预设手势库中删掉。在其中一个实施例中，用户已经非常熟悉并掌握了握手的手势时，将握手手势从预设手势库中删掉，将预设手势库的存储空间空出来存放其他需要掌握学习的手势。
孤独症(autism)，又称自闭症或孤独性障碍(autistic disorder)等，是广泛性发育障碍(pervasive developmental disorder，PDD)的代表性疾病，起病于婴幼儿期，主要表现为不同程度的言语发育障碍、人际交往障碍、兴趣狭窄和行为方式刻板。
由于自闭症患者存在比较严重的人际交往障碍，所以一种简单但却能够让其喜欢的有趣“玩具”显得非常重要，该“玩具”可以助其学习和熟悉人们日常用的手势并与之互动，协助自闭症患者克服人际交往的障碍。而本发明正是为了给自闭症患者提供这样一种“玩具”般的方法和系统。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术用户员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (3)
1.一种基于Leap Motion设备的手势识别互动方法，其特征在于，包括：
通过Leap Motion设备采集用户的手部动作，基于所述手部动作获取用户手部的整体图像、手掌心和每个指关节骨骼空间三维位置坐标、手掌和手指弯曲的弧度、手掌移动或旋转的方向与速度、手掌朝向的方向与法向量、手指分开或聚合的信息；
通过分析上述获取得到的信息识别出用户的手势；
将用户的手势与预设的手势进行匹配；
所述预设的手势包括：挥手、握手、碰拳、手指比划数字一、手指比划数字二、手指比划数字三、手指比划数字四、手指比划数字五、手指比划数字零；
当用户的手势与挥手匹配时，则控制仿生机械手向用户进行挥手的动作；
当用户的手势与握手匹配时，则控制仿生机械手与用户进行握手的动作；
当用户的手势与碰拳匹配时，则控制仿生机械手与用户进行碰拳的动作；
当用户的手势与手指比划数字一匹配时，则控制仿生机械手的手指比划数字四的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字二匹配时，则控制仿生机械手的手指比划数字三的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字三匹配时，则控制仿生机械手的手指比划数字二的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字四匹配时，则控制仿生机械手的手指比划数字一的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字五匹配时，则控制仿生机械手的手指比划数字零的动作，与用户模拟相加等于五的游戏；
当用户的手势与手指比划数字零匹配时，则控制仿生机械手的手指比划数字五的动作，与用户模拟相加等于五的游戏。
2.根据权利要求1所述的方法，其特征在于，所述仿生机械手通过接收单片机发送的控制指令调整舵机组状态，完成指定的手势动作。
3.根据权利要求1所述的方法，其特征在于，还包括：更新预设的手势，并设置仿生机械手做出相应的动作进行互动。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810415133.3A CN108549490A (zh) | 2018-05-03 | 2018-05-03 | 一种基于Leap Motion设备的手势识别互动方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810415133.3A CN108549490A (zh) | 2018-05-03 | 2018-05-03 | 一种基于Leap Motion设备的手势识别互动方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108549490A true CN108549490A (zh) | 2018-09-18 |
Family
ID=63513452
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810415133.3A Pending CN108549490A (zh) | 2018-05-03 | 2018-05-03 | 一种基于Leap Motion设备的手势识别互动方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108549490A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109753876A (zh) * | 2018-12-03 | 2019-05-14 | 西北工业大学 | 一种三维手势的提取识别和三维手势交互系统的构建方法 |
| CN109948542A (zh) * | 2019-03-19 | 2019-06-28 | 北京百度网讯科技有限公司 | 手势识别方法、装置、电子设备和存储介质 |
| CN110263742A (zh) * | 2019-06-26 | 2019-09-20 | 北京字节跳动网络技术有限公司 | 用于识别图像的方法和装置 |
| CN110263743A (zh) * | 2019-06-26 | 2019-09-20 | 北京字节跳动网络技术有限公司 | 用于识别图像的方法和装置 |
| CN110275610A (zh) * | 2019-05-27 | 2019-09-24 | 山东科技大学 | 一种基于LeapMotion体感控制器的协同手势控制采煤仿真控制方法 |
| CN110389652A (zh) * | 2019-01-03 | 2019-10-29 | 上海工程技术大学 | 一种基于Leap Motion的起落架虚拟维修教学方法 |
| CN110850970A (zh) * | 2019-10-25 | 2020-02-28 | 智亮君 | 基于手模的握手交互方法及系统、手模、存储介质 |
| CN112000224A (zh) * | 2020-08-24 | 2020-11-27 | 北京华捷艾米科技有限公司 | 一种手势交互方法及系统 |
| CN112121280A (zh) * | 2020-08-31 | 2020-12-25 | 浙江大学 | 一种心音盒的控制方法及控制系统 |
| CN112198962A (zh) * | 2020-09-30 | 2021-01-08 | 聚好看科技股份有限公司 | 一种与虚拟现实设备交互的方法及虚拟现实设备 |
| CN113553884A (zh) * | 2020-04-26 | 2021-10-26 | 武汉Tcl集团工业研究院有限公司 | 手势识别方法、终端设备及计算机可读存储介质 |
| CN117806466A (zh) * | 2024-03-02 | 2024-04-02 | 良基（厦门）自动化设备有限公司 | 一种手势控制全自动洗碗机的控制方式 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104308844A (zh) * | 2014-08-25 | 2015-01-28 | 中国石油大学(华东) | 一种五指仿生机械手的体感控制方法 |
| CN105034006A (zh) * | 2015-08-28 | 2015-11-11 | 昆山塔米机器人有限公司 | 一种基于LeapMotion设备的猜拳机器人及猜拳手势识别方法 |
| CN205075063U (zh) * | 2015-08-28 | 2016-03-09 | 昆山塔米机器人有限公司 | 一种基于LeapMotion设备的猜拳机器人 |
| CN105489088A (zh) * | 2016-01-13 | 2016-04-13 | 宋纪元 | 一种语音仿生手语双向翻译系统 |
| CN105867630A (zh) * | 2016-04-21 | 2016-08-17 | 深圳前海勇艺达机器人有限公司 | 机器人的手势识别方法及装置及机器人系统 |
| CN106272409A (zh) * | 2016-08-03 | 2017-01-04 | 北京航空航天大学 | 基于手势识别的机械臂控制方法及系统 |
| CN107015656A (zh) * | 2017-04-13 | 2017-08-04 | 华中科技大学 | 一种用于闭环人机交互的大面积网格型表皮电子系统 |
| CN107553499A (zh) * | 2017-10-23 | 2018-01-09 | 上海交通大学 | 一种多轴机械臂的自然手势运动控制系统和方法 |
-
2018
- 2018-05-03 CN CN201810415133.3A patent/CN108549490A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104308844A (zh) * | 2014-08-25 | 2015-01-28 | 中国石油大学(华东) | 一种五指仿生机械手的体感控制方法 |
| CN105034006A (zh) * | 2015-08-28 | 2015-11-11 | 昆山塔米机器人有限公司 | 一种基于LeapMotion设备的猜拳机器人及猜拳手势识别方法 |
| CN205075063U (zh) * | 2015-08-28 | 2016-03-09 | 昆山塔米机器人有限公司 | 一种基于LeapMotion设备的猜拳机器人 |
| CN105489088A (zh) * | 2016-01-13 | 2016-04-13 | 宋纪元 | 一种语音仿生手语双向翻译系统 |
| CN105867630A (zh) * | 2016-04-21 | 2016-08-17 | 深圳前海勇艺达机器人有限公司 | 机器人的手势识别方法及装置及机器人系统 |
| CN106272409A (zh) * | 2016-08-03 | 2017-01-04 | 北京航空航天大学 | 基于手势识别的机械臂控制方法及系统 |
| CN107015656A (zh) * | 2017-04-13 | 2017-08-04 | 华中科技大学 | 一种用于闭环人机交互的大面积网格型表皮电子系统 |
| CN107553499A (zh) * | 2017-10-23 | 2018-01-09 | 上海交通大学 | 一种多轴机械臂的自然手势运动控制系统和方法 |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109753876A (zh) * | 2018-12-03 | 2019-05-14 | 西北工业大学 | 一种三维手势的提取识别和三维手势交互系统的构建方法 |
| CN110389652A (zh) * | 2019-01-03 | 2019-10-29 | 上海工程技术大学 | 一种基于Leap Motion的起落架虚拟维修教学方法 |
| CN110389652B (zh) * | 2019-01-03 | 2023-04-28 | 上海工程技术大学 | 一种基于Leap Motion的起落架虚拟维修教学方法 |
| CN109948542A (zh) * | 2019-03-19 | 2019-06-28 | 北京百度网讯科技有限公司 | 手势识别方法、装置、电子设备和存储介质 |
| CN110275610B (zh) * | 2019-05-27 | 2022-09-30 | 山东科技大学 | 一种基于LeapMotion体感控制器的协同手势控制采煤仿真控制方法 |
| CN110275610A (zh) * | 2019-05-27 | 2019-09-24 | 山东科技大学 | 一种基于LeapMotion体感控制器的协同手势控制采煤仿真控制方法 |
| CN110263742A (zh) * | 2019-06-26 | 2019-09-20 | 北京字节跳动网络技术有限公司 | 用于识别图像的方法和装置 |
| CN110263743A (zh) * | 2019-06-26 | 2019-09-20 | 北京字节跳动网络技术有限公司 | 用于识别图像的方法和装置 |
| CN110263743B (zh) * | 2019-06-26 | 2023-10-13 | 北京字节跳动网络技术有限公司 | 用于识别图像的方法和装置 |
| CN110850970A (zh) * | 2019-10-25 | 2020-02-28 | 智亮君 | 基于手模的握手交互方法及系统、手模、存储介质 |
| CN113553884B (zh) * | 2020-04-26 | 2023-04-18 | 武汉Tcl集团工业研究院有限公司 | 手势识别方法、终端设备及计算机可读存储介质 |
| CN113553884A (zh) * | 2020-04-26 | 2021-10-26 | 武汉Tcl集团工业研究院有限公司 | 手势识别方法、终端设备及计算机可读存储介质 |
| CN112000224A (zh) * | 2020-08-24 | 2020-11-27 | 北京华捷艾米科技有限公司 | 一种手势交互方法及系统 |
| CN112121280A (zh) * | 2020-08-31 | 2020-12-25 | 浙江大学 | 一种心音盒的控制方法及控制系统 |
| CN112198962A (zh) * | 2020-09-30 | 2021-01-08 | 聚好看科技股份有限公司 | 一种与虚拟现实设备交互的方法及虚拟现实设备 |
| CN112198962B (zh) * | 2020-09-30 | 2023-04-28 | 聚好看科技股份有限公司 | 一种与虚拟现实设备交互的方法及虚拟现实设备 |
| CN117806466A (zh) * | 2024-03-02 | 2024-04-02 | 良基（厦门）自动化设备有限公司 | 一种手势控制全自动洗碗机的控制方式 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108549490A (zh) | 一种基于Leap Motion设备的手势识别互动方法 | |
| CN207752446U (zh) | 一种基于Leap Motion设备的手势识别互动系统 | |
| Yang et al. | Gesture interaction in virtual reality | |
| CN113238650B (zh) | 手势识别和控制的方法、装置及虚拟现实设备 | |
| US10317997B2 (en) | Selection of optimally positioned sensors in a glove interface object | |
| CN105929940B (zh) | 基于细分特征值法的快速三维动态手势识别方法及系统 | |
| KR20230170086A (ko) | 가상 및 그래픽 엘리먼트들을 애니메이팅하고 제어하기 위한 손 제스처 | |
| Luzhnica et al. | A sliding window approach to natural hand gesture recognition using a custom data glove | |
| CN110457414A (zh) | 离线地图处理、虚拟对象显示方法、装置、介质和设备 | |
| CN109597485B (zh) | 一种基于双指角域特征的手势交互系统及其工作方法 | |
| Maisto et al. | An accurate algorithm for the identification of fingertips using an RGB-D camera | |
| CN110113523A (zh) | 智能拍照方法、装置、计算机设备及存储介质 | |
| CN104090465B (zh) | 一种三维交互式投影成像方法 | |
| CN109671141A (zh) | 图像的渲染方法和装置、存储介质、电子装置 | |
| CN107633551B (zh) | 一种虚拟键盘的展示方法及装置 | |
| CN110348370B (zh) | 一种人体动作识别的增强现实系统及方法 | |
| CN109839827A (zh) | 一种基于全空间位置信息的手势识别智能家居控制系统 | |
| Aditya et al. | Recent trends in HCI: A survey on data glove, LEAP motion and microsoft kinect | |
| Ong et al. | Investigation of feature extraction for unsupervised learning in human activity detection | |
| Jiang et al. | independent hand gesture recognition with Kinect | |
| Vokorokos et al. | Motion sensors: Gesticulation efficiency across multiple platforms | |
| CN109800645A (zh) | 一种动作捕捉系统及其方法 | |
| CN111640183A (zh) | 一种ar数据展示控制方法及装置 | |
| Hoshino et al. | Copycat hand—robot hand imitating human motions at high speed and with high accuracy | |
| CN110321008B (zh) | 基于ar模型的交互方法、装置、设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |