CN111745644B - 基于手势的遥控小车控制方法、系统和存储介质 - Google Patents

基于手势的遥控小车控制方法、系统和存储介质 Download PDF

Info

Publication number
CN111745644B
CN111745644B CN202010474353.0A CN202010474353A CN111745644B CN 111745644 B CN111745644 B CN 111745644B CN 202010474353 A CN202010474353 A CN 202010474353A CN 111745644 B CN111745644 B CN 111745644B
Authority
CN
China
Prior art keywords
palm
remote control
controlling
data
inclination angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010474353.0A
Other languages
English (en)
Other versions
CN111745644A (zh
Inventor
黄昌正
周言明
陈曦
黄庆麟
伍景生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dongguan Yilian Interation Information Technology Co ltd
Fantasy Zhuhai Technology Co ltd
Guangzhou Huantek Co ltd
Original Assignee
Fantasy Zhuhai Technology Co ltd
Guangzhou Huantek Co ltd
Dongguan Yilian Interation Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fantasy Zhuhai Technology Co ltd, Guangzhou Huantek Co ltd, Dongguan Yilian Interation Information Technology Co ltd filed Critical Fantasy Zhuhai Technology Co ltd
Priority to CN202010474353.0A priority Critical patent/CN111745644B/zh
Publication of CN111745644A publication Critical patent/CN111745644A/zh
Application granted granted Critical
Publication of CN111745644B publication Critical patent/CN111745644B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/006Controls for manipulators by means of a wireless system for controlling one or several manipulators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J5/00Manipulators mounted on wheels or on carriages
    • B25J5/007Manipulators mounted on wheels or on carriages mounted on wheels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014Hand-worn input/output arrangements, e.g. data gloves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本发明公开了一种基于手势的遥控小车控制方法、系统和存储介质,所述方法包括:获取所述穿戴设备的第一重力数据和第一预设时间内的角速度数据;根据所述第一重力数据和所述角速度数据控制所述遥控小车。本发明通过穿戴设备获取第一重力数据和第一预设时间内的角速度数据,通过对第一重力数据和角速度数据进行识别得到对应的手势,通过系统预存的手势数据和遥控小车运动数据的实现对于遥控小车的控制;相较于现有的图像识别遥控小车控制方法,本发明通过穿戴设备对手势进行识别,其识别效率更高。本发明可广泛应用于感应遥控设备控制领域中。

Description

基于手势的遥控小车控制方法、系统和存储介质
技术领域
本发明涉及感应遥控设备控制技术领域,尤其涉及一种基于手势的遥控小车控制方法、系统和存储介质。
背景技术
目前的基于手势识别的遥控小车基本都采用计算机视觉技术。该技术类型主要是通过部署在遥控小车车身上的摄像头捕捉人的位姿或手势,利用特定算法,来识别出手势并转换为对应的指令,进而实现遥控小车的智能化操作。基于计算机视觉技术的手势识别遥控小车由于安装在车身上的摄像头捕捉范围受限;当遥控小车旋转导致摄像头无法对准人的手部,或者人的手部因为各种动作脱离了摄像头范围时,摄像头就无法及时、正常地进行手势识别或动作捕捉,也就无法正常地获取人的指令,导致遥控小车无法正常运作,遥控小车手势识别的识别效率率较低。
发明内容
有鉴于此,本发明的目的是提供一种基于手势的遥控小车控制方法、系统和存储介质,以提高遥控小车手势识别的效率。
本发明所采用的第一技术方案是:
一种基于手势的遥控小车控制方法,包括:
获取第一激活指令,根据所述第一激活指令激活穿戴设备;
获取第二激活指令,根据所述第二激活指令激活遥控小车;
获取所述穿戴设备的第一重力数据和第一预设时间内的角速度数据;
根据所述第一重力数据和所述角速度数据控制所述遥控小车。
进一步,所述根据所述第一重力数据和所述角速度数据控制所述遥控小车,其具体包括:
根据所述第一重力数据获取第一掌心朝向和第一手掌倾角;
根据所述角速度数据获取手掌平移方向;
根据所述第一掌心朝向、所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
进一步,所述根据所述第一掌心朝向、第一手掌倾角和手掌平移方向控制所述遥控小车,其具体包括:
确定所述第一掌心朝向为预设方向,根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
进一步,所述根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车,其具体包括:
根据所述第一手掌倾角控制所述遥控小车的移动方向和移动速度;
根据所述手掌平移方向控制所述遥控小车的旋转方向。
进一步,所述基于手势的遥控小车控制方法还包括:
获取第三激活指令,根据所述第三激活指令激活机械臂;
获取所述穿戴设备的第二重力数据和第二预设时间内的加速度数据;
根据所述第二重力数据和所述加速度数据控制所述机械臂;
其中,所述机械臂设置于所述遥控小车上。
进一步,所述根据所述第二重力数据和所述加速度数据控制所述机械臂,其具体包括:
根据所述第二重力数据获取第二掌心朝向和第二手掌倾角;
根据所述加速度数据获取手掌在竖直方向上的移动轨迹;
根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
进一步,所述根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
确定所述第二掌心朝向为预设方向,根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
进一步,所述根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
根据所述手掌在竖直方向上的移动轨迹控制所述机械臂的朝向;
根据所述第二手掌倾角控制所述机械臂在垂直平面上的位置。
本发明所采用的第二技术方案是:
一种基于手势的遥控小车控制系统,包括:
穿戴设备,用于获取第一激活指令、第二激活指令、第一重力数据和第一预设时间内的角速度数据;根据所述第一激活指令激活穿戴设备;根据所述第二激活指令激活遥控小车;
遥控小车,用于根据所述第一重力数据和所述角速度数据进行移动。
本发明所采用的第三技术方案是:
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如所述的基于手势的遥控小车控制方法。
与现有技术相比较,本发明通过穿戴设备获取第一重力数据和第一预设时间内的角速度数据,通过对第一重力数据和角速度数据进行识别得到对应的手势,通过手势实现对于遥控小车的控制;相较于现有的图像识别遥控小车控制方法,本发明通过穿戴设备对手势进行识别,其识别效率更高。
附图说明
图1为本发明实施例基于手势的遥控小车控制系统的结构图;
图2为本发明实施例基于手势的遥控小车控制方法的步骤流程图;
图3为本发明实施例基于手势的遥控小车控制系统的穿戴设备结构图;
图4为本发明实施例基于手势的遥控小车控制系统的穿戴设备上柔性电路板的硬件结构框图;
图5为本发明实施例基于手势的遥控小车控制方法的遥控小车和机械臂的结构图。
具体实施方式
以下将结合实施例和附图对本发明的构思、具体结构及产生的技术效果进行清楚、完整的描述,以充分地理解本发明的目的、方案和效果。
下面结合附图和具体实施例对本发明做进一步的详细说明。对于以下实施例中的步骤编号,其仅为了便于阐述说明而设置,对步骤之间的顺序不做任何限定,实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。此外,对于以下实施例中所述的若干个,其表示为至少一个。
本发明实施例提供了一种基于手势的遥控小车控制方法,参照图2,包括:
S210、获取第一激活指令,根据所述第一激活指令激活穿戴设备;
S220、获取第二激活指令,根据所述第二激活指令激活遥控小车;
S230、获取所述穿戴设备的第一重力数据和第一预设时间内的角速度数据;
S240、根据所述第一重力数据和所述角速度数据控制所述遥控小车。
具体的,参照图1,在本方法中涉及穿戴设备100、机械臂200和遥控小车300,穿戴设备100分别与机械臂200和遥控小车300通信,其通信方式可以采用蓝牙、无线网络等方式进行通信。穿戴设备100由用户佩戴在手指上,用于获取用户的手势信息,机械臂200和遥控小车300会根据获取到的手势信息进行运动,穿戴设备100可以通过戒指的方式进行实现,使用戒指的方式进行实现,相比于传统的穿戴设备体积更小,轻巧而便携,适用于各种场合;遥控小车300上的车轮为麦克纳姆轮,可以实现全方位的移动;遥控小车300上还设置有LED灯,用于在遥控小车300移动的时候进行照明。
参照图3,穿戴设备包括柔性电路板301和外壳302。柔性电路板是穿戴设备内部各元器件的支撑体与通电载体,负责将各元器件连接起来。外壳302采用不导电、轻质和硬度高的材料,保护内部电路不被影响的同时,保护内部元器件不被破坏。
参照图4,柔性电路板301上设置有电容触摸按键的触摸区域401、电容触摸按键的集成电路芯片402、九轴惯性传感器403、微控制单元404、复位电路405、充电接口406、充放电电路407、电源模块408以及重力传感器409。
电容触摸按键的触摸区域401为电容触摸按键的触摸区域,其作用是读取电容变化。当人的手指放在触摸区域上面时,触摸区域的电容会发生变化。
电容触摸按键的集成电路芯片402为电容触摸按键的集成电路芯片,与触摸区域相连,当人的手指放在触摸区域上面时,触摸区域的电容会发生变化,集成电路根据电容变化判断按键被按下。
电容触摸按键的触摸区域401和电容触摸按键的集成电路芯片402共同构成电容触摸按键,电容触摸按键基于人体的电流感应运作。其包括触摸区域和单通道微处理器,按键整体事实上是一个集成电路芯片。当人的手指放在触摸区域上面时,触摸区域的电容会发生变化,而电容的变化被单通道微处理器读取并判断是否为人手的触摸,进而实现按键的功能。
九轴惯性传感器403包括三轴陀螺仪、三轴加速度计以及三轴磁感应传感器,其作用是获取穿戴设备发生的惯性运动状态,并将这些运动状态转化为电信号。其中,陀螺仪获取穿戴设备的角度与方向信息,加速度计测量穿戴设备在空间中个方向的加速度,而磁感应传感器则用于消除加速度计和陀螺仪在个方向上的累计偏差。九州惯性传感器通过I2C接口与4集成了无线传输模块的微处理器相连。
微控制单元404为集成了无线传输模块的微控制单元,负责将穿戴设备的运动状态进行计算并转化为遥控指令,并将指令通过无线传输的方式发送到遥控小车上,进而实现操作遥控小车的功能。
复位电路405用于使电路恢复到起始状态,在开发、维修过程中作为检修、测试的触点来使用。
充电接口406可以使用USB Type-C充电接口,可以通过具备Type-C接口的数据线与外部电源连接,进而将电流传输到充放电电路407。
电源模块408用于为柔性电路板301上各元器件进行供电,电源模块408通过充放电电路407充电接口406连接。
重力传感器409用于确认佩戴穿戴设备时手掌的朝向,比如可以得出掌心是否朝下,以及手掌朝前、后、左、右各个方向的倾斜角。
九轴惯性传感器403和重力传感器409用于检测穿戴设备的角速度数据、加速度数据以及重力数据,通过角速度数据、加速度数据以及重力数据计算得到用户手势,根据用户手势实现对于遥控小车300和机械臂200的控制。
第一激活指令用于激活穿戴设备,当穿戴设备接收到第一激活指令之后才会开始识别用户手势。第一激活指令可以通过长按电容触摸按键进行触发。
第二激活指令用于激活遥控小车,当遥控小车接收到第二激活指令之后才会启动控制模式,用户才能通过手势对于小车进行控制。第二激活指令可以通过双击电容触摸按键进行触发。
第一重力数据用于检测用户的掌心朝向和手掌倾角,通过重力传感器409的读数,可以确认佩戴穿戴设备用户手掌的朝向,比如可以得出掌心是否朝下,以及手掌朝前、后、左、右各个方向的倾斜角。
角速度数据用于检测用户手掌的平移方向,通过九轴惯性传感器403可以获取穿戴设备的角速度,通过穿戴设备的角速度可以确认佩戴穿戴设备用户手掌的平移方向为顺时针还是逆时针。
通过获取穿戴设备100的第一重力数据和角速度数据,可以根据第一重力数据和角速度数据推导出用户的手势信息,通过用户的手势信息实现对于遥控小车300的控制,相较于传统的图像识别方式能够适用于更多的场景。
进一步作为可选的实施方式,所述根据所述第一重力数据和所述角速度数据控制所述遥控小车,其具体包括:
根据所述第一重力数据获取第一掌心朝向和第一手掌倾角;
根据所述角速度数据获取手掌平移方向;
根据所述第一掌心朝向、所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
具体的,通过穿戴设备上的重力传感器获取穿戴设备的重力数据,利用重力分量计算可以得到手掌与水平面的仰角数值,即手掌的倾角和手掌掌心的朝向;通过穿戴设备上的九轴惯性传感器的角速度可以计算得到手掌的平移方向;根据掌心朝向、手掌倾角和手掌平移方向等手势信息实现对于遥控小车的控制。
通过手掌倾角和手掌平移方向实现对于遥控小车的控制,相较于其他手势控制方式更为简便。
进一步作为可选的实施方式,所述根据所述第一掌心朝向、第一手掌倾角和手掌平移方向控制所述遥控小车,其具体包括:
确定所述第一掌心朝向为预设方向,根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
具体的,只有在第一掌心朝向为预设方向的情况下,才会实现对于遥控小车的控制。预设方向可以设置为朝下,即在检测到掌心朝下的情况下才会开启手势识别;也可以配合长按电容触摸按键作为触发条件,实现对于遥控小车手势识别的限定触发,即在掌心朝下且电容触摸按键被按下的情况下实现对于手势的识别。
通过掌心朝向实现对于手势识别的筛选,可以减少误触发的情况,提高手势控制的稳定性。
进一步作为可选的实施方式,所述根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车,其具体包括:
根据所述第一手掌倾角控制所述遥控小车的移动方向和移动速度;
根据所述手掌平移方向控制所述遥控小车的旋转方向。
具体的,根据手掌倾角控制遥控小车的移动方向和移动速度,手掌倾角可以拆分为手掌倾斜方向和手掌倾斜角度,手掌倾斜方向用于控制遥控小车的移动方向,手掌倾斜角度用于控制遥控小车的移动速度。当手掌与水平面之间倾斜角处于0~15°之间,认为手掌为水平静止状态,遥控小车保持停止运动状态;当手掌与水平面之间倾斜角为15~30°之间,遥控小车为速度1的模式,朝着手掌对应方向移动;当倾斜角为30~45°之间时,遥控小车为速度2的模式,朝着手掌对应方向移动;当倾斜角大于45°时,遥控小车为速度3的模式,朝着手掌对应方向移动。当有两个方向的倾斜角都大于15°时,遥控小车会始终以速度2的模式,朝着手掌对应的方向移动,该行进状态无法变速。
根据手掌平移方向控制遥控小车的旋转方向,手掌平移方向可以分为顺时针平移和逆时针平移。当手掌绕逆时针并水平地转动时,遥控小车绕自体进行左旋转;当手掌绕顺时针并水平地转动时,遥控小车绕自体进行右旋转。
相较于其他的手势控制方式,使用手掌倾角控制遥控小车的移动方向和移动速度,使用手掌在水平面上的平移方向控制遥控小车的旋转方向更为匹配。在遥控小车移动方向和移动速度的技术上加入了遥控小车的旋转方向的控制,提高了遥控小车在移动上的灵活性。
进一步作为可选的实施方式,所述基于手势的遥控小车控制方法还包括:
获取第三激活指令,根据所述第三激活指令激活机械臂;
获取所述穿戴设备的第二重力数据和第二预设时间内的加速度数据;
根据所述第二重力数据和所述加速度数据控制所述机械臂;
其中,所述机械臂设置于所述遥控小车上。
具体的,第三激活指令用于激活机械臂,在激活机械臂的同时会让遥控小车保持待机状态。第三激活指令可以通过掌心朝左且双击电容触摸按键触发。
第二重力数据用于检测用户的掌心朝向和手掌倾角,通过重力传感器的读数,可以确认佩戴穿戴设备用户手掌的朝向,比如可以得出掌心是否朝下,以及手掌朝前、后、左、右各个方向的倾斜角。
加速度数据用于检测用户手掌绕竖直方向转圈的方向,通过九轴惯性传感器可以获取穿戴设备的加速度,通过穿戴设备的加速度可以确认佩戴穿戴设备用户手掌在竖直方向上的运动轨迹为顺时针还是逆时针。
在遥控小车上设置机械臂,可以扩宽遥控小车的功能,使得遥控小车能够在移动的基础上实现对于物体的抓取和放置。
进一步作为可选的实施方式,所述根据所述第二重力数据和所述加速度数据控制所述机械臂,其具体包括:
根据所述第二重力数据获取第二掌心朝向和第二手掌倾角;
根据所述加速度数据获取手掌在竖直方向上的移动轨迹;
根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
具体的,通过穿戴设备上的重力传感器获取穿戴设备的重力数据,利用重力分量计算可以得到手掌与水平面的仰角数值,即手掌的倾角和手掌掌心的朝向;通过穿戴设备上的九轴惯性传感器的加速度可以计算得到手掌在竖直方向上的运动轨迹;根据掌心朝向、手掌倾角和在竖直方向上的运动轨迹等手势信息实现对于机械臂的控制。
通过重力数据和手掌倾角实现对于手势信息的检测,使得可以通过穿戴设备实现对于机械臂的手势控制。
进一步作为可选的实施方式,所述根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
确定所述第二掌心朝向为预设方向,根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
具体的,只有在第二掌心朝向为预设方向的情况下,才会实现对于机械臂的控制。预设方向可以设置为朝下,即在检测到掌心朝下的情况下才会开启手势识别。
通过掌心朝向实现对于手势识别的筛选,可以减少误触发的情况,提高手势控制的稳定性。
进一步作为可选的实施方式,所述根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
根据所述手掌在竖直方向上的移动轨迹控制所述机械臂的朝向;
根据所述第二手掌倾角控制所述机械臂在垂直平面上的位置。
具体的,在检测到手掌掌心朝下的情况下,确定电容触摸按键没有被按下,会根据手掌在竖直方向上的移动轨迹控制机械臂的朝向;在检测到手掌掌心朝下的情况下,确定电容触摸按键被短暂按下,会根据电容触摸按键控制机械臂进行抓取和松开;检测到手掌掌心朝下的情况下,确定电容触摸按键被长按,会根据手掌倾角控制机械臂在垂直平面上的位置。
参照图5,机械臂上设置有第一舵机501、第二舵机502、第三舵机503、第四舵机504和第五舵机505,第一舵机501设置正在机械臂底座上,用于控制机械臂在水平平面上,即三维空间中的X轴和Y轴形成的平面上的转动,也就是控制机械臂整体左旋转或右旋转。第二舵机502、第三舵机503和第四舵机504共同控制机械臂在垂直平面,即三维空间中的X轴与Z轴的移动。第五舵机505用于控制机械臂上机械手的抓取和松开。
根据手掌在竖直方向上的移动轨迹控制机械臂的朝向,在检测到手掌绕竖直方向逆时针旋转会控制第一舵机501逆时针转动,在检测到手掌绕竖直方向顺时针旋转会控制第一舵机501顺时针转动。通过手掌绕竖直方向转圈可以控制机械臂的朝向。
根据电容触摸按键控制机械臂进行抓取和松开,在检测到电容触摸按键被短暂按下后,会控制第五舵机505来控制机械臂夹子的松开和闭合。通过按压电容触摸按键可以控制机械臂的抓取和松开。
根据手掌倾角控制机械臂在垂直平面上的位置,其控制原理为在数据库中预存手掌倾角对应的机械臂二维坐标,在检测到一个手掌倾角后,会根据手掌倾角在数据库中获取对应的机械臂二维坐标;将对应的机械臂二维坐标转换为对应的舵机角度,控制第二舵机502、第三舵机503和第四舵机504转动到对应的舵机角度,从而实现对于机械臂在垂直平面的控制。可以通过穿戴设备上的惯性传感器通过重力分量计算出手掌与水平面的仰角数值,范围在-90~90度之间,.在-90~90仰角度数值中,每间隔3度为一个操作指令。每个操作指令对应一组操作第二舵机502、第三舵机503和第四舵机504的行程数值。三个舵机会根据对应的行程数值驱动机械臂移动到垂直平面上,即三维空间中X轴与Z轴形成的平面上对应的坐标点。因为指令只有60个,因此,行程数值也只有对应的60组,也就是说,通过指令能控制机械臂在垂直平面上最多60个坐标点上移动。第二舵机502、第三舵机503和第四舵机504的行程数值可以通过软件去修改,可以根据实际需求进行编辑,或者提前准备多组行程数值表提供选择。
通过手掌倾角、手掌在竖直方向上的移动轨迹和电容触摸按键的配合,实现对于机械臂的转动、移动和抓取控制,将复杂的机械臂动作使用简单的手势识别进行控制。
本发明实施例还提供了一种基于手势的遥控小车控制系统,参照图1,包括:
穿戴设备100,用于获取第一激活指令、第二激活指令、第一重力数据和第一预设时间内的角速度数据;根据所述第一激活指令激活穿戴设备;根据所述第二激活指令激活遥控小车300;
遥控小车300,用于根据所述第一重力数据和所述角速度数据进行移动。
具体的,本系统包括穿戴设备100、机械臂200和遥控小车300,穿戴设备100分别与机械臂200和遥控小车300通信,其通信方式可以采用蓝牙、无线网络等方式进行通信。穿戴设备100由用户佩戴在手指上,用于获取用户的手势,机械臂200和遥控小车300会根据手势进行运动;
上述方法实施例中的内容均适用于本系统实施例中,本系统实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如所述的基于手势的遥控小车控制方法。
具体的,存储介质存储有处理器可执行的指令,处理器可执行的指令在由处理器执行时用于执行上述方法实施例中任一个技术方案所述的一种交互信息处理方法步骤。对于所述存储介质,其可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。可见,上述方法实施例中的内容均适用于本存储介质实施例中,本存储介质实施例所具体实现的功能与上述方法实施例相同,并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种元件,但这些元件不应限于这些术语。这些术语仅用来将同一类型的元件彼此区分开。例如,在不脱离本公开范围的情况下,第一元件也可以被称为第二元件,类似地,第二元件也可以被称为第一元件。本文所提供的任何以及所有实例或示例性语言(“例如”、“如”等)的使用仅意图更好地说明本发明的实施例,并且除非另外要求,否则不会对本发明的范围施加限制。
以上所述,只是本发明的较佳实施例而已,本发明并不局限于上述实施方式,只要其以相同的手段达到本发明的技术效果,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。在本发明的保护范围内其技术方案和/或实施方式可以有各种不同的修改和变化。

Claims (8)

1.一种基于手势的遥控小车控制方法,其特征在于,包括:
获取第一激活指令,根据所述第一激活指令激活穿戴设备;
获取第二激活指令,根据所述第二激活指令激活遥控小车;
获取所述穿戴设备的第一重力数据和第一预设时间内的角速度数据;
根据所述第一重力数据和所述角速度数据控制所述遥控小车;
获取第三激活指令,根据所述第三激活指令激活机械臂,所述机械臂设置于所述遥控小车上;
获取所述穿戴设备的第二重力数据和第二预设时间内的加速度数据;
根据所述第二重力数据获取第二掌心朝向和第二手掌倾角;
根据所述加速度数据获取手掌在竖直方向上的移动轨迹;
根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
2.根据权利要求1所述的基于手势的遥控小车控制方法,其特征在于,所述根据所述第一重力数据和所述角速度数据控制所述遥控小车,其具体包括:
根据所述第一重力数据获取第一掌心朝向和第一手掌倾角;
根据所述角速度数据获取手掌平移方向;
根据所述第一掌心朝向、所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
3.根据权利要求2所述的基于手势的遥控小车控制方法,其特征在于,所述根据所述第一掌心朝向、第一手掌倾角和手掌平移方向控制所述遥控小车,其具体包括:
确定所述第一掌心朝向为预设方向,根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车。
4.根据权利要求3所述的基于手势的遥控小车控制方法,其特征在于,所述根据所述第一手掌倾角和所述手掌平移方向控制所述遥控小车,其具体包括:
根据所述第一手掌倾角控制所述遥控小车的移动方向和移动速度;
根据所述手掌平移方向控制所述遥控小车的旋转方向。
5.根据权利要求1所述的基于手势的遥控小车控制方法,其特征在于,所述根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
确定所述第二掌心朝向为预设方向,根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂。
6.根据权利要求5所述的基于手势的遥控小车控制方法,其特征在于,所述根据所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,其具体包括:
根据所述手掌在竖直方向上的移动轨迹控制所述机械臂的朝向;
根据所述第二手掌倾角控制所述机械臂在垂直平面上的位置。
7.一种基于手势的遥控小车控制系统,其特征在于,包括:
穿戴设备,用于获取第一激活指令、第二激活指令、第三激活指令、第一重力数据、第一预设时间内的角速度数据、第二重力数据和第二预设时间内的加速度数据;根据所述第一激活指令激活穿戴设备;根据所述第二激活指令激活遥控小车;根据所述第三激活指令激活机械臂;根据所述第二重力数据获取第二掌心朝向和第二手掌倾角;根据所述加速度数据获取手掌在竖直方向上的移动轨迹;
遥控小车,用于根据所述第一重力数据和所述角速度数据进行移动,并根据所述第二掌心朝向、所述第二手掌倾角和所述手掌在竖直方向上的移动轨迹控制所述机械臂,所述机械臂设置于所述遥控小车上。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的基于手势的遥控小车控制方法。
CN202010474353.0A 2020-05-29 2020-05-29 基于手势的遥控小车控制方法、系统和存储介质 Active CN111745644B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010474353.0A CN111745644B (zh) 2020-05-29 2020-05-29 基于手势的遥控小车控制方法、系统和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010474353.0A CN111745644B (zh) 2020-05-29 2020-05-29 基于手势的遥控小车控制方法、系统和存储介质

Publications (2)

Publication Number Publication Date
CN111745644A CN111745644A (zh) 2020-10-09
CN111745644B true CN111745644B (zh) 2023-06-30

Family

ID=72674424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010474353.0A Active CN111745644B (zh) 2020-05-29 2020-05-29 基于手势的遥控小车控制方法、系统和存储介质

Country Status (1)

Country Link
CN (1) CN111745644B (zh)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103744427B (zh) * 2014-01-06 2016-08-17 山东大学 加速度传感手势操作系统及操作方法
US10251241B2 (en) * 2015-03-27 2019-04-02 Osram Sylvania Inc. Gesture-based control techniques for lighting systems
CN107485864A (zh) * 2017-08-17 2017-12-19 刘嘉成 一种穿戴式手势遥控方法及其穿戴式手势遥控装置
US11771283B2 (en) * 2017-12-06 2023-10-03 BISSELL , Inc. Method and system for manual control of autonomous floor cleaner
CN108381511A (zh) * 2018-04-28 2018-08-10 刘宇栋 基于感应遥控手套的手势控制移动平台
CN109116980A (zh) * 2018-06-25 2019-01-01 中山大学新华学院 一种手势识别智能机器人系统
CN109901708A (zh) * 2018-12-28 2019-06-18 北京邮电大学 一种柔性智能手套
CN110695990A (zh) * 2019-09-23 2020-01-17 江苏理工学院 一种基于Kinect手势识别的机械臂控制系统

Also Published As

Publication number Publication date
CN111745644A (zh) 2020-10-09

Similar Documents

Publication Publication Date Title
US11975446B2 (en) Sensorized robotic gripping device
US11249554B2 (en) Method and apparatus for selecting between multiple gesture recognition systems
US20190176326A1 (en) Robot Grip Detection Using Non-Contact Sensors
US7821494B2 (en) Inertial mouse
US10248217B2 (en) Motion detection system
CN101794171A (zh) 基于红外光运动捕捉的无线感应交互系统
CN210052132U (zh) 一种触控笔及屏幕书写系统
KR102582863B1 (ko) 사용자 의도 기반 제스처 인식 방법 및 장치
US7825898B2 (en) Inertial sensing input apparatus
US11023052B2 (en) Method for outputting command by detecting object movement and system thereof
WO2003079179A1 (en) Motion mouse system
CN105824411A (zh) 基于虚拟现实的交互控制方法及装置
CN107756398A (zh) 机器人视觉引导方法、装置及设备
CN105302021A (zh) 人机协作再制造中控制机器人运动的穿戴式手势控制装置
US10739823B2 (en) Motion control assembly with battery pack
TWI788607B (zh) 人機交互系統和人機交互方法
CN111745644B (zh) 基于手势的遥控小车控制方法、系统和存储介质
CN210401976U (zh) 一种云台相机
JP3159906U (ja) 画像処理モジュール
CN111475019A (zh) 一种虚拟现实的手势交互系统和方法
CN111831103A (zh) 头戴式显示系统、相关方法以及相关计算机可读取存储介质
EP1775656A1 (en) Inertial sensing input apparatus
Chu et al. A study of motion recognition system using a smart phone
JP2011205619A (ja) 画像処理装置、画像処理方法、コンピュータプログラム、及び、電子機器
KR20110045564A (ko) 3차원 아바타 제어 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20230612

Address after: Room 246, Building 9, No.1 Xuefu Road, Songshan Lake Park, Guangzhou City, Guangdong Province, 523830

Applicant after: DONGGUAN YILIAN INTERATION INFORMATION TECHNOLOGY Co.,Ltd.

Applicant after: Fantasy (Zhuhai) Technology Co.,Ltd.

Applicant after: GUANGZHOU HUANTEK Co.,Ltd.

Address before: 523808 room 246, building 9, No.1 Xuefu Road, Songshanhu Park, Dongguan City, Guangdong Province

Applicant before: DONGGUAN YILIAN INTERATION INFORMATION TECHNOLOGY Co.,Ltd.

Applicant before: GUANGZHOU HUANTEK Co.,Ltd.

GR01 Patent grant
GR01 Patent grant