CN112276944A - 一种基于意图识别的人机协作系统控制方法 - Google Patents

一种基于意图识别的人机协作系统控制方法 Download PDF

Info

Publication number
CN112276944A
CN112276944A CN202011116797.3A CN202011116797A CN112276944A CN 112276944 A CN112276944 A CN 112276944A CN 202011116797 A CN202011116797 A CN 202011116797A CN 112276944 A CN112276944 A CN 112276944A
Authority
CN
China
Prior art keywords
human
intention
neural network
mechanical arm
robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011116797.3A
Other languages
English (en)
Inventor
尤波
焦龙
李佳钰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin University of Science and Technology
Original Assignee
Harbin University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin University of Science and Technology filed Critical Harbin University of Science and Technology
Priority to CN202011116797.3A priority Critical patent/CN112276944A/zh
Publication of CN112276944A publication Critical patent/CN112276944A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • B25J9/161Hardware, e.g. neural networks, fuzzy logic, interfaces, processor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1612Programme controls characterised by the hand, wrist, grip control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1628Programme controls characterised by the control loop
    • B25J9/1633Programme controls characterised by the control loop compliant, force, torque control, e.g. combined with position control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Manipulator (AREA)

Abstract

本发明公开一种基于意图识别的人机协作控制方法,包括机械臂、运动意图估计系统以及控制系统,所述机械臂包含端部受动器以及力传感手柄,所述力传感手柄设置在机械臂的端部受动器上,用于测量肢体向所述机械臂施加的力。采用基于径向基神经网络的运动意图识别系统估计出人的意图信息,这里将人的运动意图简化为人类肢体与机械臂作用点处的速度。控制系统根据意图信息对机械臂产生控制输入,并驱动机械臂端部受动器达到预定速度。在以接触力为交互信息的人机协作中,该方法既减小了合作者的作用力,又改善了机器人运动的柔顺性,达到人机同步运动的效果。

Description

一种基于意图识别的人机协作系统控制方法
技术领域
本发明涉及一种人-机协作系统的控制方法。
背景技术
人类擅长问题分析和方法制定,机器人有较高的执行性和稳定性,对于复杂的作业任务,人-机协作的需求越来越广泛。人-机协作既可以减轻人类的劳动负担,降低人力成本,还能提高生产效率。在工业生产中,既需要人-机协作来摆脱人类的重复性高的繁重工作,又需要人-机协作来解决机器人难以单独应对复杂生产任务。然而在人-机协作中难以使机器了解人类的运动意图,从而无法使机器实现自主工作。
发明内容
本发明的主要目的是提出一种基于意图识别的人-机协作系统控制方法,解决上述存在的工业生产问题。
一种基于意图识别的人-机协作系统控制方法,所述人-机协作系统包括机械臂、意图估计系统以及控制系统,所述机械臂包含端部受动器以及力传感手柄,所述力传感手柄设置在机械臂的端部受动器上,用于测量肢体向所述机械臂施加的力。所述意图估计系统包括离线训练神经网络和在线预测人的意图两部分,采用径向基神经网络估计出人的意图信息,这里将人的意图简化为人类肢体与机械臂作用点处的速度。控制系统根据意图信息对机械臂产生控制输入,并驱动端部受动器达到预定速度,实现主动跟随。所述协作控制方法包括以下步骤:
Step1,建立人的意图信息与系统动态特性的关系,根据阻抗控制模型获取样本数据,对意图估计系统的径向基神经网络进行离线训练。
Step2:在人交互机协作中,不断采集系统中的人-机交互力、机械臂的末端位置和速度信息,根据Step1中得到的神经网络,不断预测出人的意图信息。
Step3:将运动意图信息,即人类肢体与机械臂作用点处的意图速度信息依据笛卡尔空间与关节空间的转换关系,得到机器人运动信息,并赋予机器人驱动器。
进一步的所述阻抗控制模型表述为:
Figure BDA0002730572500000011
其中Md,Bd分别为期望的质量矩阵和阻尼矩阵,
Figure BDA0002730572500000012
分别是机器人末端加速度,速度和期望的末端速度,f为实际交互作用力,fd为期望的交互作用力。合理设置Md,Bd,fd的值,得到样本数据
Figure BDA0002730572500000021
f。
所述径向基神经网络表述为:
Figure BDA0002730572500000022
其中,y为神经网络的输出,p为隐节点数,wi为隐含层到输出层的权重,σ为径向基函数的扩展常数,x为神经网络的输入,ci为神经网络基函数中心。
进一步的,在步骤Step2中,为了使人-机协作达到同步的目的,设定
Figure BDA0002730572500000023
其中
Figure BDA0002730572500000024
为人的速度控制意图。
在线估计意图过程中,不断采集系统中的交互力、机器人的末端位置和速度信息,采用离线训练的神经网络,不断预测出人的意图信息,即
Figure BDA0002730572500000025
根据Step2得到的意图信息,得到机械臂的目标速度
Figure BDA0002730572500000026
将所述目标速度转换为所述机械臂的输入控制信号u。
其中输入控制信号u满足:
Figure BDA0002730572500000027
其中:
Mr(q)=J-T(q)M(q)J-1(q)
Figure BDA0002730572500000028
Gr(q)=J-T(q)G(q),u=J-T(q)τ (4)
M(q)∈Rn×n为对称有界的正定惯性矩阵,
Figure BDA0002730572500000029
表示科里奥利以及离心力,G(q)∈Rn为重力,τ∈Rn为控制输入向量,J(q)∈Rn×n为Jacobian矩阵,q为所述机械臂关节的角度,f为合作者在交互点处施加的力。
附图说明
图1是本发明提供的人-机协作系统的结构示意图。
图2是本发明提供的基于意图识别的人-机协作系统控制框架。
具体实施方式
以下结合附图对本方法的具体实施进行详细的说明。
请参照图1和图2,一种基于意图识别的人-机协作系统控制方法,所述人-机协作系统包括机械臂10、意图估计系统以及控制系统,所述机械臂10包含端部受动器13以及力传感手柄12,所述力传感手柄12设置在机械臂的端部受动器13上,用于测量人类肢体向所述机械臂10施加的力。所述端部受动器13可以根据物体的尺寸和形状来挑选并放置。
所述意图估计系统包括离线训练和在线预测两部分。
所述控制系统如图2,当开关在1处闭合时为阻抗控制系统,当开关在2处闭合时为意图估计控制系统。
所述实施方法包括以下步骤:
Step1:根据阻抗控制模型获取样本数据,对径向基神经网络进行离线训练,得到径向基神经网络。
Step2:在实时交互的在线预测中,不断采集系统中的交互力、机械臂的末端位置和速度信息,根据Step1中得到的神经网络,不断预测出人的意图信息。
Step3:将意图信息,即人类肢体与机械臂作用点的意图速度信息依据笛卡尔空间与关节空间的转换关系,得到机器人运动信息,并赋予机器人驱动器运动信息。
在样本数据采集阶段,此时为阻抗控制系统。人类肢体作用在力传感手柄12上,在预定轨迹上以一定速度拖动机械臂的端部受动器。
通过力传感手柄12测量肢体向所述机械臂10施加的力f。机器人当前的末端位置x和速度
Figure BDA00027305725000000311
采用伺服电机编码器的返回值,再由关节空间和笛卡尔空间的转换关系计算得到。合理设置Md,Bd,fd的值,根据阻抗控制模型得到数据
Figure BDA0002730572500000031
按照一定的采样周期进行采样,得到足够的训练样本数据
Figure BDA0002730572500000032
其中
Figure BDA0002730572500000033
作为径向基神经网路的输入,
Figure BDA0002730572500000034
作为径向基神经网络的输出。
神经网络的训练中,用K-means聚类方法来确定径向基神经网络隐节点的径向基函数的数据中心ci,并根据各中心之间的距离确定隐节点的扩展常数σ。用伪逆法求输出层的权值W=[w1,w2,...wp]。得到径向基神经网络模型。
在线估计阶段,在训练阶段设定的轨迹上拖动机械臂末端受动器,不断采集系统中的交互力f、机器人的末端位置x和速度
Figure BDA0002730572500000035
方法同样本数据采集。采用离线训练得到的神经网络,不断预测出人的意图速度信息,即
Figure BDA0002730572500000036
控制系统根据得到的意图速度信息
Figure BDA0002730572500000037
对机械臂10产生控制输入信号u,并驱动端部受动器13跟随人的意图速度
Figure BDA0002730572500000038
所述机械臂10在关节空间描述为:
Figure BDA0002730572500000039
其中M(q)∈Rn×n为对称有界的正定惯性矩阵,
Figure BDA00027305725000000310
表示科里奥利以及离心力,G(q)∈Rn为重力,τ∈Rn为控制输入向量,J(q)∈Rn×n为Jacobian矩阵,q为所述机械臂关节的角度。
从而得到输入控制信号u,u满足:
Figure BDA0002730572500000041
其中:
Figure BDA0002730572500000042
从而实现所述机械臂10主动跟随人类肢体运动。

Claims (3)

1.一种基于意图识别的人机协作系统控制方法,所述人-机协作系统包括机械臂、意图估计系统以及控制系统,所述机械臂包含端部受动器以及力传感手柄,所述力传感手柄设置在机械臂的端部受动器,用于测量肢体向所述机械臂施加的力。所述意图估计系统包括离线训练神经网络和在线预测人的意图两部分,采用径向基神经网络估计出人的运动意图信息,这里将人的运动意图简化为人类肢体与机械臂作用点的速度。控制系统根据人的运动意图信息对机械臂产生控制输入,并驱动端部受动器达到期望速度。在以接触力为交互信息的人机协作中,该方法既减小的了合作者的作用力,又改善了机器人运动的柔顺性,达到人机同步运动。所述控制方法包括以下步骤:
Step1:建立人的运动意图信息与系统动态表现的关系,根据阻抗控制模型获取样本数据,对意图估计系统的径向基神经网络进行离线训练。
Step2:在接触式人机协作中,不断采集系统中的交互力、机械臂的末端位置和速度信息,根据Step1中得到的神经网络模型,不断预测出人的运动意图信息。
Step3:将运动意图信息,即人类肢体与机械臂作用点的意图速度信息依据笛卡尔空间与关节空间的转换关系,得到机器人运动信息,并赋予机器人驱动器。
2.根据权利要求1所述的基于意图识别的人机协作系统控制方法,考虑常规基于模型的意图识别方法存在肢体阻抗参数多变且估计困难等问题,难以实现强随机性人机协作系统中的意图识别。采用机器学习的方法建立人的运动意图信息与系统动态表现的关系。机器人与人的合作,不需设置“回弹力”,因此设计机器人阻抗控制刚度参数为0,即Kd=0,所述阻抗控制模型表述为:
Figure FDA0002730572490000011
其中Md,Bd分别为期望的质量矩阵和阻尼矩阵,
Figure FDA0002730572490000012
分别是机器人末端加速度,速度和期望的末端速度,f为实际作用力,fd为期望的交互力。离线训练阶段,合理设置Md,Bd,fd的值,数据
Figure FDA0002730572490000013
x,f可由传感器测试得到,
Figure FDA0002730572490000014
可由式(1)计算得到,从而得到样本数据。为了使采集到的数据最大程度覆盖人机协作空间数据,使训练的样本更具有代表性,需要合作者在数据采集的过程中尽量以多个速度在机器人的运动空间内移动,来满足不同的任务需求。
这里将人的意图简化为人类肢体与机械臂作用点处的速度。因此,径向基神经网络中的输出层大小设为一层,适合于合作者意图识别的径向基神经网络的表达式为:
Figure FDA0002730572490000015
其中,y为神经网络的输出,p为隐节点数大小,wi为隐含层到输出层的权重值,σ为径向基函数的扩展常数,x为神经网络的输入,ci为神经网络基函数中心。神经网络的训练中,用K-means聚类方法来确定径向基神经网络隐节点的径向基函数的数据中心ci,并根据各中心之间的距离确定隐节点的扩展常数σ。用伪逆法求输出层的权值W=[w1,w2,...wp]。得到径向基神经网络模型。
3.根据权利要求2所述的基于意图识别的人机协作系统控制方法,其特征在于,在Step2中,当操作者与机械臂进行物理人机协作,需要按意图速度拖拽机械臂末端完成作业任务时,系统处于在线预测阶段,不断采集人机交互力、机器人的末端位置和速度信息,采用Step2中离线训练的神经网络,预测出人的意图速度信息,即
Figure FDA0002730572490000021
使得期望的机器人末端速度与人的意图速度相同,实现运动同步。
在Step3中,根据Step2得到的意图速度信息,得到机械臂的期望速度
Figure FDA0002730572490000022
将所述期望速度转换为所述机械臂的输入控制信号u。其中输入控制信号u满足:
Figure FDA0002730572490000023
其中:
Figure FDA0002730572490000024
M(q)∈Rn×n为对称有界的正定惯性矩阵,
Figure FDA0002730572490000025
表示科里奥利以及离心力,G(q)∈Rn为重力,τ∈Rn为控制输入向量,J(q)∈Rn×n为Jacobian矩阵,q为所述机械臂关节的角度。
CN202011116797.3A 2020-10-19 2020-10-19 一种基于意图识别的人机协作系统控制方法 Pending CN112276944A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011116797.3A CN112276944A (zh) 2020-10-19 2020-10-19 一种基于意图识别的人机协作系统控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011116797.3A CN112276944A (zh) 2020-10-19 2020-10-19 一种基于意图识别的人机协作系统控制方法

Publications (1)

Publication Number Publication Date
CN112276944A true CN112276944A (zh) 2021-01-29

Family

ID=74497534

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011116797.3A Pending CN112276944A (zh) 2020-10-19 2020-10-19 一种基于意图识别的人机协作系统控制方法

Country Status (1)

Country Link
CN (1) CN112276944A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112947093A (zh) * 2021-04-07 2021-06-11 长春工业大学 一种机器人分散鲁棒跟踪控制方法、系统及存储介质
CN113059570A (zh) * 2021-04-09 2021-07-02 华南理工大学 基于人体动态臂力估计模型的人-机器人协同控制方法
CN113524175A (zh) * 2021-06-22 2021-10-22 香港理工大学深圳研究院 一种基于多模态行为在线预测的人机协作方法和系统
CN113733105A (zh) * 2021-10-18 2021-12-03 哈尔滨理工大学 一种基于人的意图识别的协作机械臂模糊变导纳控制系统及方法
CN114344077A (zh) * 2021-12-07 2022-04-15 华南理工大学 基于semg运动意图识别的柔顺上肢康复机器人系统
CN114932557A (zh) * 2022-06-24 2022-08-23 合肥工业大学 一种运动学约束下基于能量消耗的自适应导纳控制方法
CN115463003A (zh) * 2022-09-09 2022-12-13 燕山大学 一种基于信息融合的上肢康复机器人控制方法
CN115708758A (zh) * 2022-11-19 2023-02-24 哈尔滨理工大学 一种基于柔性机械臂和人体肌电信号的上肢康复模式及训练方法
CN117338436A (zh) * 2023-12-06 2024-01-05 鸡西鸡矿医院有限公司 一种机械手及其控制方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106003049A (zh) * 2016-07-05 2016-10-12 李亚楠 人-机协作系统的控制方法
CN109394472A (zh) * 2018-09-19 2019-03-01 宁波杰曼智能科技有限公司 一种基于神经网络分类器的康复机器人运动意图识别方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106003049A (zh) * 2016-07-05 2016-10-12 李亚楠 人-机协作系统的控制方法
CN109394472A (zh) * 2018-09-19 2019-03-01 宁波杰曼智能科技有限公司 一种基于神经网络分类器的康复机器人运动意图识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘智光: "人机协作中机器人力感知与柔顺控制方法研究", 《中国优秀博硕士学位论文全文数据库(博士)信息科技辑》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112947093A (zh) * 2021-04-07 2021-06-11 长春工业大学 一种机器人分散鲁棒跟踪控制方法、系统及存储介质
CN113059570B (zh) * 2021-04-09 2022-05-24 华南理工大学 基于人体动态臂力估计模型的人-机器人协同控制方法
CN113059570A (zh) * 2021-04-09 2021-07-02 华南理工大学 基于人体动态臂力估计模型的人-机器人协同控制方法
CN113524175A (zh) * 2021-06-22 2021-10-22 香港理工大学深圳研究院 一种基于多模态行为在线预测的人机协作方法和系统
CN113524175B (zh) * 2021-06-22 2022-08-12 香港理工大学深圳研究院 一种基于多模态行为在线预测的人机协作方法和系统
CN113733105A (zh) * 2021-10-18 2021-12-03 哈尔滨理工大学 一种基于人的意图识别的协作机械臂模糊变导纳控制系统及方法
CN114344077A (zh) * 2021-12-07 2022-04-15 华南理工大学 基于semg运动意图识别的柔顺上肢康复机器人系统
CN114932557A (zh) * 2022-06-24 2022-08-23 合肥工业大学 一种运动学约束下基于能量消耗的自适应导纳控制方法
CN115463003A (zh) * 2022-09-09 2022-12-13 燕山大学 一种基于信息融合的上肢康复机器人控制方法
CN115463003B (zh) * 2022-09-09 2024-09-20 燕山大学 一种基于信息融合的上肢康复机器人控制方法
CN115708758A (zh) * 2022-11-19 2023-02-24 哈尔滨理工大学 一种基于柔性机械臂和人体肌电信号的上肢康复模式及训练方法
CN117338436A (zh) * 2023-12-06 2024-01-05 鸡西鸡矿医院有限公司 一种机械手及其控制方法
CN117338436B (zh) * 2023-12-06 2024-02-27 鸡西鸡矿医院有限公司 一种机械手及其控制方法

Similar Documents

Publication Publication Date Title
CN112276944A (zh) 一种基于意图识别的人机协作系统控制方法
Li et al. Asymmetric bimanual control of dual-arm exoskeletons for human-cooperative manipulations
CN110275436B (zh) 一种多单臂机械手的rbf神经网络自适应控制方法
CN108714896A (zh) 一种基于柔体动力学模型的机器人柔性力矩前馈控制方法
CN111015649B (zh) 一种驱控一体化控制系统
CN110000795A (zh) 一种视觉伺服控制的方法、系统及设备
CN107957684A (zh) 一种基于虚拟速度向量场的机器人三维无碰轨迹规划方法
CN110703604B (zh) 一种外骨骼动力学模型参数辨识方法及外骨骼装置
CN110053044B (zh) 一种并联机器人串类水果夹取无模型自适应光滑滑模阻抗控制方法
CN105404744B (zh) 一种空间机械臂全状态动力学半物理仿真系统
CN111230882B (zh) 水果分拣并联机器人夹持机构的自适应变阻抗控制方法
CN110597072A (zh) 机器人导纳柔顺控制方法及系统
CN114043480A (zh) 一种基于模糊控制的自适应阻抗控制算法
CN110154024B (zh) 一种基于长短期记忆神经网络增量模型的装配控制方法
CN110941183A (zh) 一种基于神经网络的工业机器人动力学辨识方法
CN109240092A (zh) 基于多智能体可重构模块化柔性机械臂轨迹跟踪控制方法
CN113910247B (zh) 考虑关节间隙演化的工业机器人末端轨迹控制方法及系统
CN111309152A (zh) 一种基于意图识别和阻抗匹配的人机柔性交互系统及方法
CN114131617A (zh) 一种工业机器人的智能柔顺控制方法和装置
CN111203883B (zh) 面向机器人电子元器件装配的自学习模型预测控制方法
CN211742054U (zh) 一种基于意图识别和阻抗匹配的人机柔性交互系统
CN114594757B (zh) 一种协作机器人的视觉路径规划方法
Zhang et al. Neural Network Based Friction Compensation for Joints in Robotic Motion Control
CN110488608B (zh) 用于驱控一体化控制系统的智能化动力学参数辩识方法及模块
CN116330259A (zh) 一种基于决策树的协作机器人碰撞检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20210129

WD01 Invention patent application deemed withdrawn after publication