CN102166755A - 一种遥操作机器人的机械手末端三维接触力测量方法 - Google Patents

一种遥操作机器人的机械手末端三维接触力测量方法 Download PDF

Info

Publication number
CN102166755A
CN102166755A CN 201110030371 CN201110030371A CN102166755A CN 102166755 A CN102166755 A CN 102166755A CN 201110030371 CN201110030371 CN 201110030371 CN 201110030371 A CN201110030371 A CN 201110030371A CN 102166755 A CN102166755 A CN 102166755A
Authority
CN
China
Prior art keywords
mechanical
dimensional
paw
force sensor
dimensional force
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201110030371
Other languages
English (en)
Other versions
CN102166755B (zh
Inventor
宋爱国
马俊青
茅晨
吴涓
崔建伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN2011100303710A priority Critical patent/CN102166755B/zh
Publication of CN102166755A publication Critical patent/CN102166755A/zh
Application granted granted Critical
Publication of CN102166755B publication Critical patent/CN102166755B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Force Measurement Appropriate To Specific Purposes (AREA)
  • Manipulator (AREA)

Abstract

本发明提出一种遥操作机器人的机械手末端三维接触力测量方法,所述遥操作机械手包括机械手臂与机械手爪的联接总体,其特征在于:设置两个三维力传感器,第一三维力传感器设置在机械手臂前臂与机械手爪之间;第二三维力传感器设置在机械手臂后臂与机械手臂前臂之间;定义机械手爪的质量为m,机械手爪、机械手臂前臂以及第一三维力传感器的总质量为M,带入求解公式,直接计算遥操作机械手与周围环境的三维接触力。本方法不需装载加速度计和加速度的求解即可有效地消除惯性力的干扰,提高了三维力传感器对机械手接触力的测量精度,并具有简单、方便、准确等特点。

Description

一种遥操作机器人的机械手末端三维接触力测量方法
技术领域
本发明涉及遥操作机器人机械手的力参数测定方法,尤其涉及一种遥操作机器人的机械手末端三维接触力测量方法。该方法基于设置了两个三维力传感器,适用于减少或消除遥操作机械手非匀速运动产生的惯性力对三维力传感器接触力的测量所产生的影响。
背景技术
遥操作机器人是指在人的操作下能在人难以接近或对人有害的环境中,完成比较复杂操作的一种远距离操作系统。遥操作机器人技术是当前交互式机器人技术的前沿,它可广泛应用于远程医疗、空间探索、海洋开发等领域。遥操作机械手爪装载于遥操作机器人机械臂的前端,可以进行机器人与外部环境的力触觉交互等作业。三维力传感器装配于遥操作机械手爪的后端,是测量机械手爪与环境接触过程中相互作用力的基础设备,是遥操作机械手实现力控制的信息获取装置。要实现对遥操作机械臂或机械手爪准确的力控制,就必须对机械手爪与环境接触过程中的相互作用力进行准确测量。
当遥操作机械手在进行搬运、焊接、抓取等各种作业时,三维力传感器所测出的力信息除了机械手爪与周围环境的接触力以外,还包括由于遥操作机械臂及机械手爪由于非匀速运动而产生的惯性力。然而,遥操作机器人控制系统所需的力信号是机械手爪与周围环境的接触力。为了保证三维力传感器准确地检测出接触力,必须从三维力传感器的输出信号中除去由于遥操作机械臂及机械手爪非匀速运动而产生的惯性力成分。
国内外对于消除惯性力干扰的遥操作机械手末端三维力的测量方法的研究少之又少。南京邮电学院计算机工程系的陈辉在1995年提出基于半导体应变片式加速度计的消除惯性力对机器人腕力传感器输出的影响的方法,灵敏度较低、功耗较大且不易装配。
发明内容
本发明提出一种遥操作机器人的机械手末端三维接触力测量方法,是一种可以消除惯性力干扰的基于两个三维力传感器的机械手末端三维接触力测量方法,将两个三维力传感器分别装载于遥操作机械手爪与机械臂前臂之间以及遥操作机械臂前臂与后臂之间,根据两个三维力传感器分别所测得的力以及遥操作机械臂前臂和机械手爪等相关工件的质量,带入相关公式,直接求解遥操作机械手与周围环境的三维接触力。该方法不需装载加速度计和加速度的求解即可有效地消除惯性力的干扰,提高了三维力传感器对机械手接触力的测量精度,并具有简单、方便、准确等特点。
本发明采用如下技术方案:
一种遥操作机器人的机械手末端三维接触力测量方法,所述机械手包括机械手臂与机械手爪的联接总体,机械手爪设置在机械手臂的前端,三维力传感器设置在机械手爪与机械手臂之间,其特征在于:设置两个三维力传感器,第一三维力传感器设置在机械手臂前臂与机械手爪之间;第二三维力传感器设置在机械手臂后臂与机械手臂前臂之间;定义机械手爪的质量为m,机械手爪、机械手臂前臂以及第一三维力传感器的总质量为M;
开启第一、第二两个三维力传感器,当机械手爪和机械手臂前臂进行动作并做非匀速运动时,两个三维力传感器同时测力,第一三维力传感器的测得的力为:Fx1,Fy1,Fz1,包括机械手爪与周围环境的接触力fx,fy,fz和机械手爪非匀速运动产生的惯性力fxm,fym,fzm;第二三维力传感器的测得的力为:Fx2,Fy2,Fz2,包括机械手爪与周围环境的接触力fx,fy,fz和机械手爪、机械臂前臂、第一三维力传感器非匀速运动产生的惯性力fxM,fyM,fzM
则两个传感器所测得的力分别为:
第一三维力传感器 F x 1 = f x + f xm F y 1 = f y + f ym F z 1 = f z + f zm - - - ( 1 )
第二三维力传感器 F x 2 = f x + f xM F y 2 = f y + f yM F z 2 = f z + f zM - - - ( 2 )
设机械手爪与机械手臂前臂三个方向的线加速度分别为ax,ay,az,则机械手爪由于非匀速运动产生的惯性力fxm,fym,fzm与机械手爪、机械臂前臂、第一三维力传感器非匀速运动产生的惯性力fxM,fyM,fzM表示为:
f xm = - m × a x f ym = - m × a y f zm = - m × a z - - - ( 3 )
f xM = - M × a x f yM = - M × a y f zM = - M × a z - - - ( 4 )
将式(3)、式(4)分别代入式(1)、式(2)得:
F x 1 = f x - m × a x F y 1 = f y - m × a y F z 1 = f z - m × a z - - - ( 5 )
F x 2 = f x - M × a x F y 2 = f y - M × a y F z 2 = f z - M × a z - - - ( 6 )
将第一三维力传感器的测得力Fx1,Fy1,Fz1和第二三维力传感器的测得力Fx2,Fy2,Fz2分别带入式(5)、式(6)得
f x = MF x 1 - m F x 2 M - m f y = MF y 1 - m F y 2 M - m fz = MF z 1 - m F z 2 M - m - - - ( 7 )
由式(7)得知,通过已知的m和M,以及两个传感器分别测得三个方向的分力Fx1,Fy1,Fz1和Fx2,Fy2,Fz2,直接计算出遥操作机械手爪与周围环境的三维接触力fx,fy,fz,从三维力传感器的输出信号中除去由于遥操作机械臂及机械手爪非匀速运动而产生的惯性力成分,消除了惯性力的干扰,再由控制模块将求解出的fx,fy,fz通过PID控制算法,对遥操作机械手爪和遥操作机械臂进行反馈控制。
与现有技术相比,本发明的优点及显著效果为:(1)消除了惯性力的干扰,提高了三维力传感器的测力精度。(2)结构简单,不需使用加速度计而仅用两个三维力传感器就消除了惯性力的干扰,节约了硬件和软件资源。(3)无需进行加速度的求解而直接求解接触力,算法简单可靠,速度较快且成本较低。
附图说明
图1是本发明方法的流程图;
图2是本发明的结构示意图;
图3是本发明实施例原理框图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步说明。
参照图2,为临场感遥操作机器人机械手装置,其主要任务是在人们难以靠近的高温、高压、强辐射、窒息等极限环境实施物体抓取等作业。包括遥操作机械手爪1,第一三维力传感器3,遥操作机械臂前臂5,第二三维力传感器7,由铰链构成的遥操作机器人肘关节10,铰链与前臂之间用于固定第二三维力传感器的基座9和遥操作机械臂后臂11。第一三维力传感器3通过其底端的法兰盘4固定于遥操作机械臂前臂5的前端并通过第一三维力传感器顶端的法兰盘2与遥操作机械手爪的底部连接。第二三维力传感器7通过其底部的法兰盘8固定于基座9的前端,并通过其顶端法兰盘6与遥操作机械臂前臂4的后端连接。由铰链构成的遥操作机器人肘关节10用于连接基座9和遥操作机械臂后臂11。机械手爪1与第一三维力传感器3之间,第一三维力传感器3与遥操作机械臂前臂5之间,遥操作机械臂前臂5与第二三维力传感器7之间以及第二三维力传感器7与基座9之间均为刚性连接。临场感遥操作机器人进行临场感作业时,机械手爪1,第一三维力传感器3,遥操作机械臂前臂5,第二三维力传感器7和基座9的中心轴保持在同一条直线上,不会发生相对移动和转动。由铰链构成的遥操作机器人肘关节10将基座9和遥操作机械臂后臂11连接,并使得由机械手爪1,第一三维力传感器3,操作机械臂前臂5,第二三维力传感器7,基座9构成的遥操作机械臂前半部分与遥操作机械臂后臂11可一发生绕由铰链构成的遥操作机器人肘关节10的相对转动。机械手爪1的手爪可以张开与闭合进行临场感作业。其中遥操作机械手爪1的质量为m;遥操作机械手爪1、遥操作机械臂前臂5和第一三维力传感器3(包括法兰盘2和4)的总质量为M。
参看图1、3,临场感遥操作机器人进行临场感作业时,由遥操作机械手爪受到与外界环境的三维接触力为(fx,fy,fz),并由于非匀速运动而产生三维惯性力(fxm,fym,fzm)。遥操作机械手爪将(fx,fy,fz)与(fxm,fym,fzm)传递给第一三维力传感器进行力信号的测量,并将力信号转换为电压信号输出。设第一三维力传感器测得的力信号为(F1x,F1y,F1z),则
(F1x,F1y,F1z)=(fx+fmx,fy+fmy,fz+fmz)
同时,第一三维力传感器也由于非匀速运动而产生三维惯性力(f1x,f1y,f1z),并将(fx,fy,fz),fxm,fym,fzm),(f1x,f1y,f1z)与传递给遥操作机械臂前臂。遥操作机械臂前臂将(fx,fy,fz),(fxm,fym,fzm),(f1x,f1y,f1z)以及自身非匀速运动而产生三维惯性力(f3x,f3y,f3z)传递给第二三维力传感器。设机械手、机械臂前臂、第一三维力传感器非匀速运动产生的惯性力总和为(fMx,fMy,fMz),即
(fMx,fMy,fMz)=(fmx+f1x+f3x,fmy+f1y+f3y,fmz+f1z+f3z)
设第二三维力传感器测得的力信号为(Fx2,Fy2,Fz2),则
(Fx2,Fy2,Fz2)=(fx+fMx,fy+fMy,fz+fMz)。
第一、第二三维力传感器分别将其输出的电压信号传送至数据采集与AD转换模块。数据采集与AD转换模块将模拟的电压信号转换为数字信号后,传送至接触力求解模块。由接触力求解模块判断数字信号所对应的第一、第二三维力传感器所测力值的大小,将换算出的测得力(F1x,F1y,F1z)与(Fx2,Fy2,Fz2)代入式
f x = MF x 1 - m F x 2 M - m f y = MF y 1 - m F y 2 M - m fz = MF z 1 - m F z 2 M - m
即求出遥操作机械手与周围环境的接触力,消除了惯性力的干扰。随后由控制模块将求解出的遥操作机械手与周围环境的接触力通过PID控制算法,对遥操作机械手爪和遥操作机械臂进行反馈控制。上述数据采集与AD转换模块、接触力求解模块、PID控制算法以及控制模块均为成熟技术,不再赘述。

Claims (1)

1.一种遥操作机器人的机械手末端三维接触力测量方法,所述机械手包括机械手臂与机械手爪的联接总体,机械手爪设置在机械手臂的前端,三维力传感器设置在机械手爪与机械手臂之间,其特征在于:设置两个三维力传感器,第一三维力传感器设置在机械手臂前臂与机械手爪之间;第二三维力传感器设置在机械手臂后臂与机械手臂前臂之间;定义机械手爪的质量为m,机械手爪、机械手臂前臂以及第一三维力传感器的总质量为M;
开启第一、第二两个三维力传感器,当机械手爪和机械手臂前臂进行动作并做非匀速运动时,两个三维力传感器同时测力,第一三维力传感器的测得的力为:Fx1,Fy1,Fz1,包括机械手爪与周围环境的接触力fx,fy,fz和机械手爪非匀速运动产生的惯性力fxm,fym,fzm;第二三维力传感器的测得的力为:Fx2,Fy2,Fz2,包括机械手爪与周围环境的接触力fx,fy,fz和机械手爪、机械臂前臂、第一三维力传感器非匀速运动产生的惯性力fxM,fyM,fzM
则两个传感器所测得的力分别为:
第一三维力传感器 F x 1 = f x + f xm F y 1 = f y + f ym F z 1 = f z + f zm - - - ( 1 )
第二三维力传感器 F x 2 = f x + f xM F y 2 = f y + f yM F z 2 = f z + f zM - - - ( 2 ) ;
设机械手爪与机械手臂前臂三个方向的线加速度分别为ax,ay,az,则机械手爪由于非匀速运动产生的惯性力fxm,fym,fzm与机械手爪、机械臂前臂、第一三维力传感器非匀速运动产生的惯性力fxM,fyM,fzM表示为:
f xm = - m × a x f ym = - m × a y f zm = - m × a z - - - ( 3 )
f xM = - M × a x f yM = - M × a y f zM = - M × a z - - - ( 4 )
将式(3)、式(4)分别代入式(1)、式(2)得:
F x 1 = f x - m × a x F y 1 = f y - m × a y F z 1 = f z - m × a z - - - ( 5 )
F x 2 = f x - M × a x F y 2 = f y - M × a y F z 2 = f z - M × a z - - - ( 6 )
将第一三维力传感器的测得力Fx1,Fy1,Fz1和第二三维力传感器的测得力Fx2,Fy2,Fz2分别带入式(5)、式(6)得
f x = MF x 1 - m F x 2 M - m f y = MF y 1 - m F y 2 M - m fz = MF z 1 - m F z 2 M - m - - - ( 7 )
通过(7)式直接求解出遥操作机械手爪与周围环境的三维接触力fx,fy,fz,从三维力传感器的输出信号中除去由于遥操作机械臂及机械手爪非匀速运动而产生的惯性力成分,消除了惯性力的干扰,再由控制模块将求解出的fx,fy,fz通过PID控制算法,对遥操作机械手爪和遥操作机械臂进行反馈控制。
CN2011100303710A 2011-01-26 2011-01-26 一种遥操作机器人的机械手末端三维接触力测量方法 Expired - Fee Related CN102166755B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011100303710A CN102166755B (zh) 2011-01-26 2011-01-26 一种遥操作机器人的机械手末端三维接触力测量方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011100303710A CN102166755B (zh) 2011-01-26 2011-01-26 一种遥操作机器人的机械手末端三维接触力测量方法

Publications (2)

Publication Number Publication Date
CN102166755A true CN102166755A (zh) 2011-08-31
CN102166755B CN102166755B (zh) 2012-08-22

Family

ID=44488176

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100303710A Expired - Fee Related CN102166755B (zh) 2011-01-26 2011-01-26 一种遥操作机器人的机械手末端三维接触力测量方法

Country Status (1)

Country Link
CN (1) CN102166755B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102967484A (zh) * 2012-10-31 2013-03-13 东南大学 一种小行星岩石采样机械臂装置
CN103158150A (zh) * 2013-04-03 2013-06-19 哈尔滨工业大学 空间机械臂间隙可调的柔性关节模拟装置
CN103512694A (zh) * 2012-06-29 2014-01-15 佳能株式会社 力传感器和包括力传感器的机器人臂
CN103568003A (zh) * 2013-10-12 2014-02-12 上海交通大学 面向mcf装备真空室的远程运载机械臂
CN103568011A (zh) * 2012-07-20 2014-02-12 精工爱普生株式会社 控制系统、程序以及机械装置的控制方法
CN104625676A (zh) * 2013-11-14 2015-05-20 沈阳新松机器人自动化股份有限公司 轴孔装配工业机器人系统及其工作方法
CN105643641A (zh) * 2014-11-11 2016-06-08 沈阳新松机器人自动化股份有限公司 力传感器标定装置、标定方法及力控制机器人
CN107848122A (zh) * 2015-07-27 2018-03-27 库卡罗伯特有限公司 具有力测量装置的机器人

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1400084A (zh) * 2001-08-01 2003-03-05 中国科学院沈阳自动化研究所 一种适于球形薄壁脆性壳体抓取的特种机械手
CN101421081A (zh) * 2006-02-24 2009-04-29 菲尔罗伯蒂克斯顺从式机器人技术有限公司 机械臂
EP2067581A1 (en) * 2007-12-05 2009-06-10 Korea Atomic Energy Research Institute Cable-driven manipulator with a cable compensation device
CN101664931A (zh) * 2009-09-23 2010-03-10 清华大学 可调压力并带有力传感器的机械臂
JP2010069584A (ja) * 2008-09-19 2010-04-02 Yaskawa Electric Corp マニピュレータの制御装置および制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1400084A (zh) * 2001-08-01 2003-03-05 中国科学院沈阳自动化研究所 一种适于球形薄壁脆性壳体抓取的特种机械手
CN101421081A (zh) * 2006-02-24 2009-04-29 菲尔罗伯蒂克斯顺从式机器人技术有限公司 机械臂
EP2067581A1 (en) * 2007-12-05 2009-06-10 Korea Atomic Energy Research Institute Cable-driven manipulator with a cable compensation device
JP2010069584A (ja) * 2008-09-19 2010-04-02 Yaskawa Electric Corp マニピュレータの制御装置および制御方法
CN101664931A (zh) * 2009-09-23 2010-03-10 清华大学 可调压力并带有力传感器的机械臂

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9027417B2 (en) 2012-06-29 2015-05-12 Canon Kabushiki Kaisha Force sensor and robot arm including force sensor
CN103512694B (zh) * 2012-06-29 2016-03-23 佳能株式会社 力传感器和包括力传感器的机器人臂
CN103512694A (zh) * 2012-06-29 2014-01-15 佳能株式会社 力传感器和包括力传感器的机器人臂
CN103568011A (zh) * 2012-07-20 2014-02-12 精工爱普生株式会社 控制系统、程序以及机械装置的控制方法
CN103568011B (zh) * 2012-07-20 2017-04-12 精工爱普生株式会社 控制系统、程序以及机械装置的控制方法
CN102967484A (zh) * 2012-10-31 2013-03-13 东南大学 一种小行星岩石采样机械臂装置
CN103158150B (zh) * 2013-04-03 2015-05-20 哈尔滨工业大学 空间机械臂间隙可调的柔性关节模拟装置
CN103158150A (zh) * 2013-04-03 2013-06-19 哈尔滨工业大学 空间机械臂间隙可调的柔性关节模拟装置
CN103568003A (zh) * 2013-10-12 2014-02-12 上海交通大学 面向mcf装备真空室的远程运载机械臂
CN103568003B (zh) * 2013-10-12 2016-07-06 上海交通大学 面向mcf装备真空室的远程运载机械臂
CN104625676A (zh) * 2013-11-14 2015-05-20 沈阳新松机器人自动化股份有限公司 轴孔装配工业机器人系统及其工作方法
CN104625676B (zh) * 2013-11-14 2016-09-14 沈阳新松机器人自动化股份有限公司 轴孔装配工业机器人系统及其工作方法
CN105643641A (zh) * 2014-11-11 2016-06-08 沈阳新松机器人自动化股份有限公司 力传感器标定装置、标定方法及力控制机器人
CN105643641B (zh) * 2014-11-11 2017-08-11 沈阳新松机器人自动化股份有限公司 力传感器标定装置、标定方法及力控制机器人
CN107848122A (zh) * 2015-07-27 2018-03-27 库卡罗伯特有限公司 具有力测量装置的机器人
CN107848122B (zh) * 2015-07-27 2021-04-30 库卡罗伯特有限公司 具有力测量装置的机器人

Also Published As

Publication number Publication date
CN102166755B (zh) 2012-08-22

Similar Documents

Publication Publication Date Title
CN102166755B (zh) 一种遥操作机器人的机械手末端三维接触力测量方法
Bolopion et al. A review of haptic feedback teleoperation systems for micromanipulation and microassembly
Xie et al. Design and development of a high-speed and high-rotation robot with four identical arms and a single platform
CN105196294B (zh) 采用位置测量的可重构机械臂分散控制系统及控制方法
Oh et al. Multi-axial force/torque sensor calibration method based on deep-learning
CN105204441B (zh) 手推示教式五轴抛光打磨机器人
Li et al. Research on a novel parallel spoke piezoelectric 6-DOF heavy force/torque sensor
CN110861097A (zh) 减小机械臂振动的力控末端执行机构及力控方法
CN104748840A (zh) 柔性关节柔性臂杆振动特性分析与控制的方法及实验装置
CN202097745U (zh) 一种遥操作机器人的机械手末端三维接触力测量装置
CN103868996A (zh) 用于无损检测的双机械手工件坐标系自动重合方法
CN208759596U (zh) 一种用于机器人的触觉控制组件
CN116481695A (zh) 手术机器人的实际作用力确定方法、装置、设备及介质
CN201773112U (zh) 一种afm的重定位系统
Kobayashi et al. Comparison of force control performance based on only acceleration sensor with KF/EKF
CN203274986U (zh) 变频电机加减速性能测试实时转矩测量装置
Lam et al. Motion sensing for robot hands using MIDS
Fang et al. Dual-arm robot modular joint design and error analysis
CN201760878U (zh) 一种移动机器人
Carricato et al. Inverse static analysis of a planar system with flexural pivots
CN205448955U (zh) 手推示教工业机器人的三维测量传感系统
CN104166375A (zh) 基于计算机的机床测试系统
Wu et al. Design of fingertip pressure sensors for prosthetic hands
CN106742088B (zh) 被动式多维力-力矩伺服加载平台控制系统及其控制方法
Gong et al. On-line and simultaneous calibration of wrist-mounted Force/Torque sensor and tool Forces/Torques for manipulation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20110831

Assignee: JIANGSU TIANHONG MACHINERY INDUSTRIAL Co.,Ltd.

Assignor: Southeast University

Contract record no.: 2015320000210

Denomination of invention: Method for measuring three-dimensional contact force of tail end of mechanical hand of teleoperation robot

Granted publication date: 20120822

License type: Exclusive License

Record date: 20150414

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120822

CF01 Termination of patent right due to non-payment of annual fee