CN111376246A - 一种机器人操作控制方法、手势识别装置以及机器人 - Google Patents

一种机器人操作控制方法、手势识别装置以及机器人 Download PDF

Info

Publication number
CN111376246A
CN111376246A CN201811613474.8A CN201811613474A CN111376246A CN 111376246 A CN111376246 A CN 111376246A CN 201811613474 A CN201811613474 A CN 201811613474A CN 111376246 A CN111376246 A CN 111376246A
Authority
CN
China
Prior art keywords
palm
robot
gesture
control module
gesture recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811613474.8A
Other languages
English (en)
Inventor
熊友军
李亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ubtech Robotics Corp
Original Assignee
Ubtech Robotics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ubtech Robotics Corp filed Critical Ubtech Robotics Corp
Priority to CN201811613474.8A priority Critical patent/CN111376246A/zh
Publication of CN111376246A publication Critical patent/CN111376246A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J3/00Manipulators of master-slave type, i.e. both controlling unit and controlled unit perform corresponding spatial movements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1615Programme controls characterised by special kind of manipulator, e.g. planar, scara, gantry, cantilever, space, closed chain, passive/active joints and tendon driven manipulators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Manipulator (AREA)

Abstract

一种机器人操作控制方法、手势识别装置以及机器人,该方法包括以下步骤:在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;第一控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;该第一控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势;该第一控制模块根据该当前手势确定机器人动作;发送该机器人动作至连接的机器人完成第一操控。

Description

一种机器人操作控制方法、手势识别装置以及机器人
技术领域
本申请涉及机器人操控技术领域,特别是涉及一种机器人操作控制方法、手势识别装置以及机器人。
背景技术
随着人工智能、计算机软硬件技术的发展,机器人获得了快速发展并具有一定的智能目前在多个领域被广泛应用。
目前机器人的操控方式,比如操作可移动积木模型,只能是通过触摸移动终端屏幕上的虚拟操控按键来完成,或者操控按键为硬件,通过配备带按键的遥控器完成对机器人的控制。但是单一的按钮操控,一方面操控类型比较有限,无法顺畅实现翻转等辅助动作,另一方面用户通过机器人操作模型时体验比较差。
在现有技术中的机器人操控中,触敏显示器与通用机器人控制器之间通讯连接,通过用户在该触敏显示器上的不同预定动作方向,该通用机器人末端位置在立体空间的XY平面或Z轴方向上做相应的运动,当用户在该触敏显示器上的预定动作停止时,该通用机器人末端位置在立体空间中的相应运动也结束。但是,通过触敏显示器完成的操控,操控指令简单,无法控制通用机器人末端完成复杂细腻的动作。
因此,现有的机器人操作控制技术还有待于改进和发展。
发明内容
本申请针对以上存在的技术问题,提供一种摆脱触敏显示界面或者遥控器的约束,通过超声波手势识别装置实时采集用户单手或者双手的多维度手势信息,通过该手势信息控制机器人完成各类动作,不仅手势识别灵敏准确,增强对机器人的操控性,而且增加用户操控机器人趣味性的机器人操作控制方法以及机器人。
第一方面,本申请实施方式提供的技术方案是:提供一种机器人操作控制方法,包括以下步骤:
在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
第一控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;
该第一控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势;
该第一控制模块根据该当前手势确定机器人动作;
发送该机器人动作至连接的机器人完成第一操控。
该机器人操作控制方法中,该第一控制模块连接至第二控制模块,该第二控制模块设置在第二手势识别装置上,
在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
第二控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;
该第二控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定第二手势;
该第二控制模块根据该第二手势确定第二机器人动作,
发送该第二机器人动作至连接的机器人完成第二操控。
优选地,在根据该距离变化值集合确定当前手势的步骤中,还包括:
提取该距离变化值集合的识别特征;
根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
第二方面,本申请实施方式提供的技术方案是:提供一种手势识别装置,包括手势识别箱以及设置在该手势识别箱上的控制模块,该手势识别箱包括多个合围成箱体的检测壁以及一供手伸入的操作口,每一测试壁上设置若干连接至控制模块的超声传感器,该控制模块包括测量单元以及手势识别单元,
该测量单元用于以设定频率获取该超声传感器测量手掌的距离数据;
该手势识别单元用于根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
优选地,该控制模块还包括初始化单元、对接单元以及输出接口,该初始化单元用于在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
在确定该当前手势后,该对接单元用于根据该当前手势确定机器人动作;
该输出接口用于发送该机器人动作至连接的机器人完成第一操控。
具体实施时,该输出接口连接至机器人,该手势识别箱包括左检测壁、右检测壁、上检测壁、下检测壁以及后检测壁,每一检测壁上装设若干超声传感器。
第三方面,本申请实施方式提供的技术方案是:提供一种机器人,包括机身、第一机械手,该机身设置主控制器,还包括手势识别箱以及设置在该手势识别箱上的第一控制模块,该第一控制模块连接至该主控制器,该手势识别箱包括多个检测壁以及一供手伸入的操作口,每一测试壁上设置若干连接至控制模块的超声传感器,该控制模块包括测量单元以及手势识别单元,
该测量单元用于以设定频率获取该超声传感器测量手掌的距离数据;
该手势识别单元用于根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
优选地,该机器人的控制模块还包括初始化单元、对接单元以及输出接口,
该初始化单元用于在手掌伸入手势识别箱时,初始化程序并记录手掌原始数据;
在确定该当前手势后,该对接单元用于根据该当前手势确定机器人动作;
该输出接口用于发送该机器人动作至机器人的主控制器完成对第一机械手的操控。
除了单手控制,本实施例还提供双手操控方案,该机器人还包括第二机械手,该主控制器连接第二手势识别箱以及设置在该手势识别箱上的第二控制模块,
该第一控制模块连接至第二控制模块,
在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
第二控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;
该第二控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定第二手势;
该第二控制模块根据该第二手势确定第二机器人动作,
发送该第二机器人动作至连接的机器人完成对第二机械手的操控。
具体实施时,该手势识别单元包括提取单元以及查询单元:
该提取单元用于提取该距离变化值集合的识别特征;
该查询单元用于根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
优选地,该第一控制模块与第二控制模块通过无线网络连接至该主控制器。
具体实施时,该机器人动作包括前进、后退、左移、右移、抓握、抓起以及翻转。
第四方面,本申请实施方式提供的技术方案是:提供一种计算机程序产品,该计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序,该计算机程序包括程序指令,当该程序指令被计算机执行时,使该计算机执行前述的方法。
本申请实施方式的有益效果是:本实施例的机器人操作控制方法以及机器人,通过超声波手势识别装置实时采集用户单手或者双手的多维度手势信息,通过该手势信息控制机器人完成各类动作,不仅手势识别灵敏准确,增强对机器人的操控性,而且增加用户操控机器人的趣味性。
本实施例的机器人操作控制方法以及机器人,通过设置至少一手势识别装置,利用超声波识别手掌多维度信息,并实时跟踪手掌的手势,识别的手势可用于连接的机器人操作和控制。使用时将手放入一个该手势识别装置的盒体中,盒体的五个面均布满了微型超声传感器。手掌的移动、握手、翻转、倾斜甚至弯曲手指和弹手指等微小动作都可以检测捕捉到,手势识别非常灵敏。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。
图1是本申请实施例的机器人操作控制方法的主要处理流程图;
图2是本申请实施例的机器人操作控制方法的完整处理流程图;
图3是本申请实施例的手势识别装置中超声传感器的布设简图;
图4是本申请实施例的双手机器人的手势识别模块图;
图5是本申请实施例的机器人的操控示意图;以及
图6是本申请实施例的机器人的硬件架构简图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本申请实施例作进一步详细说明。在此,本申请的示意性实施例及其说明用于解释本申请,但并不作为对本申请的限定。
请一并参考图1与图5,本申请涉及机器人操作控制方法、手势识别装置以及机器人。
本实施例的机器人操作控制方法以及机器人,采用一个或者两个超声波手势识别装置实时采集用户单手或者双手的多维度超声手势信息。该机器人实时跟踪手掌的手势,建立识别的手势与机器人动作之间的映射关系库。该识别的手势可用于操作或者控制连接的机器人完成对应指示的动作。本申请的机器人操作控制方法以及机器人通过该手势信息控制机器人完成各类动作,不仅手势识别灵敏准确,增强对机器人的操控性,而且增加用户操控机器人的趣味性。使用时单手放入一个该手势识别装置的盒体或者双手分别放入对应的手势识别装置的盒体,改变手势即可完成对机器人的操作和控制。
本申请中,每一手势识别装置呈盒体构造,盒体的五个面均布满了微型超声传感器。手掌的移动、握手、翻转、倾斜甚至弯曲手指和弹手指等微小动作都可以检测捕捉到,手势识别非常灵敏。
实施例1
如图3以及图5所示,本实施例的手势识别装置,包括手势识别箱以及设置在该手势识别箱上的控制模块。该手势识别装置的数据根据具体应用场景的需要设定,比如,机器人连接两个手势识别装置,第一手势识别装置包括第一手势识别箱60以及设置在该手势识别箱60上的第一控制模块62;第二手势识别装置包括第二手势识别箱70以及设置在该第二手势识别箱70上的第二控制模块72。以下说明以第一手势识别装置为例加以说明。
该手势识别箱包括左检测壁、右检测壁、上检测壁、下检测壁以及后检测壁,每一检测壁上装设若干超声传感器。以左检测壁63为例,该左检测壁63上设置多列超声传感器65,超声传感器65设置的数量越多,则采集手掌的距离数据越多,反应手掌手势状态越精密,比如精细到手指的屈伸和移动。
该五个检测壁合围成箱体,该手势识别箱还包括一供手掌伸入的操作口,用户通过该操作口伸入该手势识别箱中。每一测试壁上设置的若干超声传感器均连接至该手势识别箱对应的控制模块。比如连接至第一控制模块62。
该第一控制模块62存储有多个软件模块,并收集的所有超声传感器反馈的距离数据。该第一控制模块62根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
该第一控制模块62包初始化单元620、测量单元622以及手势识别单元624、对接单元626以及输出接口628。
同样地,对于双手操控的机器人,还设置供另一手掌使用的第二手势识别装置。该第二手势识别装置包括第二手势识别箱70以及设置在该手势识别箱70上的第二控制模块72。该第二控制模块72包初始化单元720、测量单元722以及手势识别单元724、对接单元726以及输出接口728。
该初始化单元(620以及720)用于在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
该测量单元(622以及722)用于以设定频率获取该超声传感器测量手掌的距离数据。
该手势识别单元(624以及724)用于根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
在确定该当前手势后,该对接单元(626以及726)用于根据该当前手势确定机器人动作。
该输出接口(628以及728)连接至机器人,该输出接口用于发送该机器人动作至连接的机器人完成第一操控。
实施例2
请再次参考图5,本实施例的机器人包括机身10、第一臂部41、第二臂部42、第一足部31以及第二足部32。该机身10的腰部20设置可有线或者无线连接至第一手势识别装置与第二手势识别装置的主控制器22。该第一臂部41末端设置第一机械手51、该第二臂部42末端设置第二机械手52。
第一手势识别装置包括第一手势识别箱60以及设置在该手势识别箱60上的第一控制模块62;第二手势识别装置包括第二手势识别箱70以及设置在该第二手势识别箱70上的第二控制模块72。以下说明以第一手势识别装置为例加以说明。
该手势识别箱包括左检测壁、右检测壁、上检测壁、下检测壁以及后检测壁,每一检测壁上装设若干超声传感器。以左检测壁63为例,该左检测壁63上设置多列超声传感器65。
每一手势识别箱还设置一供手掌伸入的操作口。
如图4所示,该第一控制模块62存储有多个软件模块,并收集的所有超声传感器反馈的距离数据。该第一控制模块62根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
该第一控制模块62包初始化单元620、测量单元622以及手势识别单元624、对接单元626以及输出接口628。
同样地,对于双手操控的机器人,还设置供另一手掌使用的第二手势识别装置。该第二手势识别装置包括第二手势识别箱70以及设置在该手势识别箱70上的第二控制模块72。该第二控制模块72包初始化单元720、测量单元722以及手势识别单元724、对接单元726以及输出接口728。
该初始化单元(620以及720)用于在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
该测量单元(622以及722)用于以设定频率获取该超声传感器测量手掌的距离数据。
该手势识别单元(624以及724)用于根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势。
在确定该当前手势后,该对接单元(626以及726)用于根据该当前手势确定机器人动作。
该输出接口(628以及728)连接至机器人,该输出接口用于发送该机器人动作至机器人的主控制器22完成对第一机械手51的操控。
本实施例的机器人既可以通过一个手势识别装置实现单手控制机器人,也可以通过两个手势识别装置,对机器人实现更细腻的双手操控。
在本实施例的双手操控方案中,该机器人还包括第二机械手52,该主控制器22连接第二手势识别箱以及设置在该手势识别箱上的第二控制模块72,
该第一控制模块62连接至第二控制模块72,
在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
第二控制模块72以设定频率获取该超声传感器测量的该手掌的距离数据;
该第二控制模块72根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定第二手势;
该第二控制模块72根据该第二手势确定第二机器人动作,
发送该第二机器人动作至连接的机器人完成对第二机械手52的操控。
该手势识别单元(624以及724)还包括特征提取和查询的处理过程。在系统模块上,该手势识别单元(624以及724)包括提取单元以及查询单元。
该提取单元用于提取该距离变化值集合的识别特征。
该查询单元用于根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
本实施例中,该第一控制模块62与第二控制模块72通过有线或者无线网络连接至该主控制器22。
该机器人动作包括前进、后退、左移、右移、抓握、抓起以及翻转等动作,在性能更好的处理器支持下,更细腻的手掌指尖动作也可捕获和识别。
实施例3
请参考图1,本申请实施例的机器人操作控制方法,包括以下步骤:
步骤101:在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据,记录手掌原始数据后,手掌可以开始活动,以供超声波传感器采集距离数据以及计算距离数据变化率;
步骤102:采集完手掌原始数据以后,根据对机器人的操控需求改变手形,第一控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;
步骤103:该第一控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势;
步骤104:该第一控制模块根据该当前手势确定机器人动作;
步骤105:发送该机器人动作至连接的机器人完成第一操控。
以上是单手使用手势识别装置,操控机器人的处理流程。
在单手操控机器人的基础上,给机器人的主控制器22叠加融合另一手势识别装置输入的第二手势数据,可操控该机器人完成更复杂的动作。
请一并参考图2,在该机器人双手操作控制方法中,该第一控制模块62连接至第二控制模块72,由该第一控制模块62或者该第二控制模块72单独完成动作的融合叠加。或者该第一控制模块62与该第二控制模块72均连接至主控制器22,由主控制器完成动作的融合叠加。
在机器人双手操控过程中:
步骤201:在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
步骤202:第二控制模块以设定频率获取该超声传感器测量的该手掌的距离数据;
步骤203:该第二控制模块根据当前该手掌的距离数据以及至少一设定时间间隔后的该手掌的距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定第二手势;
步骤204:该第二控制模块根据该第二手势确定第二机器人动作,
步骤205:发送该第二机器人动作至连接的机器人完成第二操控。
对单手操作而言,在手势识别的步骤103具体实施时,还包括以下步骤:
步骤103-1:提取该距离变化值集合的识别特征;
步骤103-2:根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
同样,对双手操作而言,手势识别的步骤103与手势识别的步骤203同时进行,在手势识别的步骤203具体实施时,还包括以下步骤:
步骤203-1:提取该距离变化值集合的识别特征;
步骤203-2:根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
本实施例的机器人操作控制方法以及机器人。本实施例的机器人操作控制方法以及机器人,通过超声波手势识别装置实时采集用户单手或者双手的多维度手势信息,通过该手势信息控制机器人完成各类动作,不仅手势识别灵敏准确,增强对机器人的操控性,而且增加用户操控机器人的趣味性。
本实施例的机器人操作控制方法以及机器人,通过设置至少一手势识别装置,利用超声波识别手掌多维度信息,并实时跟踪手掌的手势,识别的手势可用于连接的机器人操作和控制。使用时将手放入一个该手势识别装置的盒体中,盒体的五个面均布满了微型超声传感器。手掌的移动、握手、翻转、倾斜甚至弯曲手指和弹手指等微小动作都可以检测捕捉到,手势识别非常灵敏。
本实施例中的若干超声传感器将检测到的手势的距离数据传送到主控制器22进行存储和计算。该主控制器22计算当前手掌的距离数据以及至少一设定时间间隔后的该手掌距离数据,确定所有超声传感器相对于该手掌的距离变化值集合,并根据该距离变化值集合确定当前手势,根据该当前手势确定机器人相应的操作的命令。本申请的手势识别装置,可以通过单手或者双手移动、翻转、屈伸手指、倾斜手掌等动作来控制机器人的运动,增强了用户在操作机器人时的趣味性。
图6是本申请实施例提供的机器人设备600的硬件结构示意图,如图6所示,该设备600包括:
一个或多个处理器610、存储器620以及通信组件650,图6中以一个处理器610为例。该存储器620存储有可被该至少一个处理器610执行的指令,,亦即计算机程序640,该指令被该至少一个处理器执行时,通过通信组件650建立数据通道,以使该至少一个处理器能够执行该机器人操作控制方法。
处理器610、存储器620以及通信组件650可以通过总线或者其他方式连接,图6中以通过总线连接为例。
存储器620作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本申请实施例中的机器人操作控制方法对应的程序指令/模块。处理器610通过运行存储在存储器620中的非易失性软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例中的机器人操作控制方法。
存储器620可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据机器人的使用所创建的数据等。此外,存储器620可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器620可选包括相对于处理器610远程设置的存储器,这些远程存储器可以通过网络连接至机器人。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器620中,当被所述一个或者多个处理器610执行时,执行上述机器人操作控制方法,例如,执行以上描述的图1中的方法步骤101至步骤105,或者执行图2中的方法步骤201至步骤205;实现附图4第一控制模块62以及第二控制模块72等的功能。
上述产品可执行本申请实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请实施例所提供的方法。
本申请实施例提供了一种非易失性计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行,例如,执行以上描述的图1中的方法步骤101至步骤105,或者执行图2中的方法步骤201至步骤205;实现附图4第一控制模块62以及第二控制模块72等的功能。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;在本申请的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,步骤可以以任意顺序实现,并存在如上所述的本申请的不同方面的许多其它变化,为了简明,它们没有在细节中提供;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (13)

1.一种机器人操作控制方法,其特征在于,包括以下步骤:
在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
改变手形,第一控制模块以设定频率获取所述超声传感器测量的所述手掌的距离数据;
所述第一控制模块根据当前所述手掌的距离数据以及至少一设定时间间隔后的所述手掌的距离数据,确定所有超声传感器相对于所述手掌的距离变化值集合,并根据所述距离变化值集合确定当前手势;
所述第一控制模块根据所述当前手势确定机器人动作;
发送所述机器人动作至连接的机器人完成第一操控。
2.根据权利要求1所述的机器人操作控制方法,其特征在于,所述第一控制模块连接至第二控制模块,所述第二控制模块设置在第二手势识别装置上,
在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
第二控制模块以设定频率获取所述超声传感器测量的所述手掌的距离数据;
所述第二控制模块根据当前所述手掌的距离数据以及至少一设定时间间隔后的所述手掌的距离数据,确定所有超声传感器相对于所述手掌的距离变化值集合,并根据所述距离变化值集合确定第二手势;
所述第二控制模块根据所述第二手势确定第二机器人动作,
发送所述第二机器人动作至连接的机器人完成第二操控。
3.根据权利要求1所述的机器人操作控制方法,其特征在于,
在根据所述距离变化值集合确定当前手势的步骤中,还包括:
提取所述距离变化值集合的识别特征;
根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
4.一种手势识别装置,其特征在于,包括手势识别箱以及设置在所述手势识别箱上的控制模块,所述手势识别箱包括多个合围成箱体的检测壁以及一供手伸入的操作口,每一测试壁上设置若干连接至控制模块的超声传感器,所述控制模块包括测量单元以及手势识别单元,
所述测量单元用于以设定频率获取所述超声传感器测量手掌的距离数据;
所述手势识别单元用于根据当前所述手掌的距离数据以及至少一设定时间间隔后的所述手掌的距离数据,确定所有超声传感器相对于所述手掌的距离变化值集合,并根据所述距离变化值集合确定当前手势。
5.根据权利要求4所述的手势识别装置,其特征在于,所述控制模块还包括初始化单元、对接单元以及输出接口,
所述初始化单元用于在手掌伸入设置若干超声传感器的第一手势识别装置时,初始化程序并记录手掌原始数据;
在确定所述当前手势后,所述对接单元用于根据所述当前手势确定机器人动作;
所述输出接口用于发送所述机器人动作至连接的机器人完成第一操控。
6.根据权利要求5所述的手势识别装置,其特征在于,所述输出接口连接至机器人,所述手势识别箱包括左检测壁、右检测壁、上检测壁、下检测壁以及后检测壁,每一检测壁上装设若干超声传感器。
7.一种机器人,包括机身、第一机械手,所述机身设置主控制器,其特征在于,还包括手势识别箱以及设置在所述手势识别箱上的第一控制模块,所述第一控制模块连接至所述主控制器,所述手势识别箱包括多个检测壁以及一供手伸入的操作口,每一测试壁上设置若干连接至控制模块的超声传感器,所述控制模块包括测量单元以及手势识别单元,
所述测量单元用于以设定频率获取所述超声传感器测量手掌的距离数据;
所述手势识别单元用于根据当前所述手掌的距离数据以及至少一设定时间间隔后的所述手掌的距离数据,确定所有超声传感器相对于所述手掌的距离变化值集合,并根据所述距离变化值集合确定当前手势。
8.根据权利要求7所述的机器人,其特征在于,所述控制模块还包括初始化单元、对接单元以及输出接口,
所述初始化单元用于在手掌伸入手势识别箱时,初始化程序并记录手掌原始数据;
在确定所述当前手势后,所述对接单元用于根据所述当前手势确定机器人动作;
所述输出接口用于发送所述机器人动作至机器人的主控制器完成对第一机械手的操控。
9.根据权利要求8所述的机器人,其特征在于,所述机器人还包括第二机械手,所述主控制器连接第二手势识别箱以及设置在所述手势识别箱上的第二控制模块,
所述第一控制模块连接至第二控制模块,
在另一手掌伸入设置若干超声传感器的第二手势识别装置时,初始化程序并记录手掌原始数据;
第二控制模块以设定频率获取所述超声传感器测量的所述手掌的距离数据;
所述第二控制模块根据当前所述手掌的距离数据以及至少一设定时间间隔后的所述手掌的距离数据,确定所有超声传感器相对于所述手掌的距离变化值集合,并根据所述距离变化值集合确定第二手势;
所述第二控制模块根据所述第二手势确定第二机器人动作,
发送所述第二机器人动作至连接的机器人完成对第二机械手的操控。
10.根据权利要求9所述的机器人,其特征在于,所述手势识别单元包括提取单元以及查询单元:
所述提取单元用于提取所述距离变化值集合的识别特征;
所述查询单元用于根据识别特征与手势的映射关系库,查询确认当前识别特征对应的手势。
11.根据权利要求7-10任意一项所述的机器人,其特征在于,所述第一控制模块与第二控制模块通过无线网络连接至所述主控制器。
12.根据权利要求10所述的机器人,其特征在于,所述机器人动作包括前进、后退、左移、右移、抓握、抓起以及翻转。
13.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行权利要求1-3任一项所述的方法。
CN201811613474.8A 2018-12-27 2018-12-27 一种机器人操作控制方法、手势识别装置以及机器人 Pending CN111376246A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811613474.8A CN111376246A (zh) 2018-12-27 2018-12-27 一种机器人操作控制方法、手势识别装置以及机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811613474.8A CN111376246A (zh) 2018-12-27 2018-12-27 一种机器人操作控制方法、手势识别装置以及机器人

Publications (1)

Publication Number Publication Date
CN111376246A true CN111376246A (zh) 2020-07-07

Family

ID=71213357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811613474.8A Pending CN111376246A (zh) 2018-12-27 2018-12-27 一种机器人操作控制方法、手势识别装置以及机器人

Country Status (1)

Country Link
CN (1) CN111376246A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918163A (zh) * 2020-07-24 2020-11-10 青岛歌尔智能传感器有限公司 人机交互控制方法、装置、设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104267819A (zh) * 2014-10-09 2015-01-07 苏州触达信息技术有限公司 可手势唤醒的电子设备以及电子设备手势唤醒方法
CN105022471A (zh) * 2014-04-23 2015-11-04 王建勤 基于压力传感器阵列进行手势识别的装置与方法
CN105094373A (zh) * 2015-07-30 2015-11-25 深圳汇达高科科技有限公司 操作工业机器人的手势采集装置和相应手势采集方法
CN106446801A (zh) * 2016-09-06 2017-02-22 清华大学 基于超声主动探测的微手势识别方法及系统
CN108406772A (zh) * 2018-04-13 2018-08-17 郑州东青信息科技有限公司 一种基于手势识别的多感应仿生机械手

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105022471A (zh) * 2014-04-23 2015-11-04 王建勤 基于压力传感器阵列进行手势识别的装置与方法
CN104267819A (zh) * 2014-10-09 2015-01-07 苏州触达信息技术有限公司 可手势唤醒的电子设备以及电子设备手势唤醒方法
CN105094373A (zh) * 2015-07-30 2015-11-25 深圳汇达高科科技有限公司 操作工业机器人的手势采集装置和相应手势采集方法
CN106446801A (zh) * 2016-09-06 2017-02-22 清华大学 基于超声主动探测的微手势识别方法及系统
CN108406772A (zh) * 2018-04-13 2018-08-17 郑州东青信息科技有限公司 一种基于手势识别的多感应仿生机械手

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918163A (zh) * 2020-07-24 2020-11-10 青岛歌尔智能传感器有限公司 人机交互控制方法、装置、设备及计算机可读存储介质
CN111918163B (zh) * 2020-07-24 2022-06-21 青岛歌尔智能传感器有限公司 人机交互控制方法、装置、设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
WO2021082749A1 (zh) 一种基于人工智能的动作识别方法和相关装置
US8954195B2 (en) Hybrid gesture control haptic system
US11409357B2 (en) Natural human-computer interaction system based on multi-sensing data fusion
CN106326881B (zh) 用于实现人机交互的手势识别方法和手势识别设备
JP6144743B2 (ja) ウェアラブル装置
Jingqiu et al. An ARM-based embedded gesture recognition system using a data glove
CN108159685B (zh) 基于陀螺仪的虚拟摇杆控制方法和系统及其介质和设备
CN103559041A (zh) 一种屏幕显示方法及终端
CN104731307A (zh) 一种体感动作识别方法及人机交互装置
CN102402290A (zh) 一种肢体姿势识别方法及系统
KR102014010B1 (ko) 머신 제어를 위한 제스처 기반 스위치를 위한 방법 및 시스템
CN108972593A (zh) 一种工业机器人系统下的控制方法及系统
WO2020186826A1 (zh) 基于智能手环的游戏控制方法、智能手环及存储介质
CN109491579A (zh) 对虚拟对象进行操控的方法和装置
WO2014048170A1 (zh) 应用于终端的空中手势识别方法及装置
CN113183150A (zh) 仿生手控制优化方法、系统及电子设备
CN110201387A (zh) 对象控制方法和装置、存储介质及电子装置
CN107145232A (zh) 一种利用电容检测识别用户手部行为的方法和装置
CN113119104B (zh) 机械臂控制方法、机械臂控制装置、计算设备及系统
CN106512391B (zh) 一种双手手势识别方法及基于其的模拟驾驶系统、方法
CN106598422B (zh) 混合操控方法及操控系统和电子设备
CN113814951B (zh) 一种主从机器人的控制方法、系统及存储介质
CN111376246A (zh) 一种机器人操作控制方法、手势识别装置以及机器人
Sharma et al. Design and implementation of robotic hand control using gesture recognition
CN111290574A (zh) 一种利用手势控制无人机的方法,设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200707

RJ01 Rejection of invention patent application after publication