JPH02309202A - 位置測定装置 - Google Patents
位置測定装置Info
- Publication number
- JPH02309202A JPH02309202A JP13067289A JP13067289A JPH02309202A JP H02309202 A JPH02309202 A JP H02309202A JP 13067289 A JP13067289 A JP 13067289A JP 13067289 A JP13067289 A JP 13067289A JP H02309202 A JPH02309202 A JP H02309202A
- Authority
- JP
- Japan
- Prior art keywords
- images
- pictures
- distance
- bright lines
- correspondence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims 1
- 238000005259 measurement Methods 0.000 abstract description 3
- 238000000034 method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 239000013256 coordination polymer Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
本発明は、同一認識物体をそれに対する相対位置の異な
る2つの位置で撮像し、その2つの画像における対応点
の座標から、その対応点の実空間での空間座標を決定す
る測定装置に関する。この装置は、認識物体の位置や距
離を測定することが必要なロボット制御装置や他の自動
制御装置に応用される。
る2つの位置で撮像し、その2つの画像における対応点
の座標から、その対応点の実空間での空間座標を決定す
る測定装置に関する。この装置は、認識物体の位置や距
離を測定することが必要なロボット制御装置や他の自動
制御装置に応用される。
この種の装置においては、位置測定精度を向上させるた
めには、2つの画像における対応点対を如何に精度良く
決定するかが必要である。 その画像の対応関係を決定する方法として、画像の明る
さとその微分値(エツジ)を用いて、両画像の各点にお
ける類似度を求め、その類似度から対応関係を決定する
方法(特開昭62−291503号公報)やエツジとエ
ツジの間の区間の明るさに関する情報を用いて、エツジ
単位で対応を決定する方法(「動的計画法によるステレ
オ画像の区間対応法」信学論J68−D P2S5)が
知られている。
めには、2つの画像における対応点対を如何に精度良く
決定するかが必要である。 その画像の対応関係を決定する方法として、画像の明る
さとその微分値(エツジ)を用いて、両画像の各点にお
ける類似度を求め、その類似度から対応関係を決定する
方法(特開昭62−291503号公報)やエツジとエ
ツジの間の区間の明るさに関する情報を用いて、エツジ
単位で対応を決定する方法(「動的計画法によるステレ
オ画像の区間対応法」信学論J68−D P2S5)が
知られている。
ところが、上記の両方法とも、各画素での明るさに関す
る情報を用いているため、処理速度が遅く、且つ、同一
の線状物体が不規則に積み重なっている場合等では明る
さレベルの分布が良く似ていることから、2つの画像の
対応付けを誤り易いという欠点がある。 本発明は上記課題を解決するために成されたものであり
、その目的は、同一の線状物体が不規則に積み重なって
いる場合でも、高速で確実な画像の対応関係が決定でき
、その結果、認識対象物体の3次元的位置や認識対応物
体までの距離を精度良く測定できるようにすることであ
る。
る情報を用いているため、処理速度が遅く、且つ、同一
の線状物体が不規則に積み重なっている場合等では明る
さレベルの分布が良く似ていることから、2つの画像の
対応付けを誤り易いという欠点がある。 本発明は上記課題を解決するために成されたものであり
、その目的は、同一の線状物体が不規則に積み重なって
いる場合でも、高速で確実な画像の対応関係が決定でき
、その結果、認識対象物体の3次元的位置や認識対応物
体までの距離を精度良く測定できるようにすることであ
る。
上記課題を解決するための発明の構成は、実空間に置か
れた認識物体とカメラとの相対的位置関係が異なる2つ
の位置において、前記認識物体をそれぞれ撮像して2つ
の画像を作成する画像作成手段と、その画像作成手段に
より作成された2つの画像の対応関係を決定し、2つの
画像における対応点の座標から、その対応点の実空間で
の位置を演算する演算手段とを備えた位置計測装置にお
いて、 前記演算手段を、前記2つの画像における輝線の傾きと
輝線間の距離を演算し、前記2つの画像において、輝線
の傾きと輝線間の距離を照合し、その照合結果により、
2つの画像の対応関係を決定するものとしたことである
。
れた認識物体とカメラとの相対的位置関係が異なる2つ
の位置において、前記認識物体をそれぞれ撮像して2つ
の画像を作成する画像作成手段と、その画像作成手段に
より作成された2つの画像の対応関係を決定し、2つの
画像における対応点の座標から、その対応点の実空間で
の位置を演算する演算手段とを備えた位置計測装置にお
いて、 前記演算手段を、前記2つの画像における輝線の傾きと
輝線間の距離を演算し、前記2つの画像において、輝線
の傾きと輝線間の距離を照合し、その照合結果により、
2つの画像の対応関係を決定するものとしたことである
。
演算手段により、2つの画像における輝線の傾きと輝線
間の距離が演算される。そして、2つの画像において、
輝線の傾きと輝線間の距離を照合し、その照合結果によ
り、2つの画像の対応関係が決定される。対応関係が決
定された後は、たとえば、実空間における認識物体の注
目点に対応する点の2つの画像における座標が決定され
、その座標から注目点の空間座標が演算される。このよ
うにして、対象物体の実空間での位置を精度良く測定す
ることができる。
間の距離が演算される。そして、2つの画像において、
輝線の傾きと輝線間の距離を照合し、その照合結果によ
り、2つの画像の対応関係が決定される。対応関係が決
定された後は、たとえば、実空間における認識物体の注
目点に対応する点の2つの画像における座標が決定され
、その座標から注目点の空間座標が演算される。このよ
うにして、対象物体の実空間での位置を精度良く測定す
ることができる。
以下、本発明を具体的な一実施例に基づいて説明する。
第1図において、屈曲した円筒状の多数の認識物体1の
上部には、その認識物体1に対する相対位置の異なる2
つの位置にカメラ2a、2bが配設されており、更にそ
の上方に照明装置3が配設されている。 カメラ2a、2bは平行であり、その走査線方向が認識
物体1とほぼ垂直なX軸方向となり、且つ、エピポーラ
線がX軸と平行となるように配設されている。 一方、カメラ2a、2bの出力する映像信号は、本位置
測定装置10に入力してる。 位置測定装置10は画像入力部4と画像メモリ5と前処
理部6と対応点決定部7と3次元位置計算部8とで構成
されている。 画像入力部4は2つのカメラ2a、2bの出力する映像
信号を画素毎にサンプリングして2次元濃淡画像を作成
し、その濃淡画像を画像メモリ5に記憶する装置である
。 画像メモリ5はRAMで構成されており、各画素毎に、
即ち、メモリの各アドレスに、ディジタル化された濃淡
レベルが記憶される。そして、カメラ2aにより撮像さ
れた画像データを記憶する第1画像メモリ51とカメラ
2bにより撮像された画像データを記憶する第2画像メ
モリ52とを有している。以下、カメラ2aにより撮像
され第1画像メモリ51に記憶された画像を画像Aとい
い、カメラ2bにより撮像され第2画像メモリ52に記
憶された画像を画像Bという。 前処理部6は、ウィンドウ設定部61と特徴抽出部62
とで構成されている。 ウィンドウ設定部61は、認識物体の注目点(ロボット
により握持される点)を抽出した後、その注目点を通る
走査線(X軸)方向に沿って、その走査線に垂直に数画
素の幅を有した一定の短冊状のウィンドウ領域を設定す
る装置である。注目点は、画像Aの濃淡レベルに対して
一定のしきい値を設定して輝部を抽出し、2値化、細線
化処理を施して、輝線を抽出した後、最長輝線の中点と
して抽出される。第3図(a)、(ハ)に示すように、
ウィンドウ領域W A、Wmは、画像A1画像Bに対し
て設定され、その領域において複数の輝線TA、、 T
□等が存在する。 特徴抽出部62はそのウィンドウ領域WA、W。 において、その輝線TAI、 Tijの傾きθ1.θ、
jや隣接する輝線間TAI−I TAl、TIJ−14
11Jの距離JAIII1.jを演算する装置である。 このようにして、各ウィンドウ領域WA、W。 において、左から順に傾きθ□、θ、、と距#1AAi
。 lslの並びが求められる。 対応点決定部7は、ウィンドウ領域W A、 W aに
存在する輝線間の対応関係を演算する装置である。 任意の1つの対応関係における不一致度ρは、次式で求
められる。 ρ=E(α・1θ1−θIIJI+β・l 12As
l@」1)ここで、α、βは重み定数である。Eは抽出
された輝線の並びに関する総和である。 そして、ウィンドウ領域WAとW、とで、輝線の可能な
全対応関係に対する不一致度ρが最小となる対応関係が
求める最一致対応関係となる。 3次元位置計算ff1s8は、ウィンドウ領域WAとW
sとにおいて、注目点の座標(XAm+ yA、)+
(XBm+y、、)を求め、その座標から次式を用いて
注目点の空間座標(X、 Y、 Z)を求める装置であ
る。 ここで、a + 〜a + + + b + 〜b +
+は、カメラ2a12b及びそのカメラ配置に依存す
る定数であり、S A +S、はスケールファクタに関
する変数である。 上記のような装置によれば、同一の線状物体がランダム
に積み重なった場合にも、従来の装置では困難であった
2つの画像での精度の良い対応関係を高速度で求めるこ
とができる。この結果、認識物体の注目点の空間座標や
その認識物体までの距離を精度良く検出することが可能
となる。 尚、上記の前処理部6、対応点決定部7.3次元位置演
算部8は、第2図に示すコンピュータシステムによって
実際には構成した。 そのCPU 11の処理手順を第4図を参照して説明す
る。 ステップ100では、第1画像メモリ51に記憶されて
いる画(glAをワークメモリ12に転送し、その画像
を画像Awとする。次に、ステップ102で、その画像
Awをあるしきい値に対して2値化し、さらに細線化処
理を施して、第5図に示すように円筒状の認識物体1の
輝線を抽出する。次に、ステップ104で、各輝線を追
跡して、その輝線の長さを求め、最長輝線LTを決定す
る。そして、次のステップ106で、その最長輝線LT
をロボットが次に把持する把持物体の輝線とし、その最
長輝線LTの中点閘を注目点、即ち、把持点として、そ
の中点Mの座標 (XA4. yAjを求める。 次に、ステップ108で、YAII−Δ+yAs+Δ。 のX軸に平行な短冊状のウィンドウ領域WA、WSを画
像A、Bにおいて、設定する。 次のステップ110では、そのウィンドウ領域WA。 W、での、画像A、Bを2値化し、更に細線化処理を施
して、第3図に示すように認識物体1の輝線を抽出する
。 次にステップ112で、ウィンドウ領域WA、W。 の輝線の傾き、及び輝線間の長さを演算して、それらの
データ列を求める。 次に、ウィンドウ領域WAとWllとにおいて、データ
列の全対応関係に対して(1)式の不一致度を演算し、
その不一致度が最小となる対応関係を決定する。次に、
その対応関係により、ステップ116において、画像A
での注目点の座標<XAa、YAII)に対応する画像
Bでの座標(XB**yB@)を求める。 次に、ステップ118において、各座標からC2,)式
を用いて、注目点を空間座標(X、 Y、 Z)が求め
られ、ロボット制御装置14にその値が出力される。 尚、上記実施例では、輝線間の距離を隣接する輝線間の
距離としているが、最左端の輝線に対する距離を用いて
も良い。
上部には、その認識物体1に対する相対位置の異なる2
つの位置にカメラ2a、2bが配設されており、更にそ
の上方に照明装置3が配設されている。 カメラ2a、2bは平行であり、その走査線方向が認識
物体1とほぼ垂直なX軸方向となり、且つ、エピポーラ
線がX軸と平行となるように配設されている。 一方、カメラ2a、2bの出力する映像信号は、本位置
測定装置10に入力してる。 位置測定装置10は画像入力部4と画像メモリ5と前処
理部6と対応点決定部7と3次元位置計算部8とで構成
されている。 画像入力部4は2つのカメラ2a、2bの出力する映像
信号を画素毎にサンプリングして2次元濃淡画像を作成
し、その濃淡画像を画像メモリ5に記憶する装置である
。 画像メモリ5はRAMで構成されており、各画素毎に、
即ち、メモリの各アドレスに、ディジタル化された濃淡
レベルが記憶される。そして、カメラ2aにより撮像さ
れた画像データを記憶する第1画像メモリ51とカメラ
2bにより撮像された画像データを記憶する第2画像メ
モリ52とを有している。以下、カメラ2aにより撮像
され第1画像メモリ51に記憶された画像を画像Aとい
い、カメラ2bにより撮像され第2画像メモリ52に記
憶された画像を画像Bという。 前処理部6は、ウィンドウ設定部61と特徴抽出部62
とで構成されている。 ウィンドウ設定部61は、認識物体の注目点(ロボット
により握持される点)を抽出した後、その注目点を通る
走査線(X軸)方向に沿って、その走査線に垂直に数画
素の幅を有した一定の短冊状のウィンドウ領域を設定す
る装置である。注目点は、画像Aの濃淡レベルに対して
一定のしきい値を設定して輝部を抽出し、2値化、細線
化処理を施して、輝線を抽出した後、最長輝線の中点と
して抽出される。第3図(a)、(ハ)に示すように、
ウィンドウ領域W A、Wmは、画像A1画像Bに対し
て設定され、その領域において複数の輝線TA、、 T
□等が存在する。 特徴抽出部62はそのウィンドウ領域WA、W。 において、その輝線TAI、 Tijの傾きθ1.θ、
jや隣接する輝線間TAI−I TAl、TIJ−14
11Jの距離JAIII1.jを演算する装置である。 このようにして、各ウィンドウ領域WA、W。 において、左から順に傾きθ□、θ、、と距#1AAi
。 lslの並びが求められる。 対応点決定部7は、ウィンドウ領域W A、 W aに
存在する輝線間の対応関係を演算する装置である。 任意の1つの対応関係における不一致度ρは、次式で求
められる。 ρ=E(α・1θ1−θIIJI+β・l 12As
l@」1)ここで、α、βは重み定数である。Eは抽出
された輝線の並びに関する総和である。 そして、ウィンドウ領域WAとW、とで、輝線の可能な
全対応関係に対する不一致度ρが最小となる対応関係が
求める最一致対応関係となる。 3次元位置計算ff1s8は、ウィンドウ領域WAとW
sとにおいて、注目点の座標(XAm+ yA、)+
(XBm+y、、)を求め、その座標から次式を用いて
注目点の空間座標(X、 Y、 Z)を求める装置であ
る。 ここで、a + 〜a + + + b + 〜b +
+は、カメラ2a12b及びそのカメラ配置に依存す
る定数であり、S A +S、はスケールファクタに関
する変数である。 上記のような装置によれば、同一の線状物体がランダム
に積み重なった場合にも、従来の装置では困難であった
2つの画像での精度の良い対応関係を高速度で求めるこ
とができる。この結果、認識物体の注目点の空間座標や
その認識物体までの距離を精度良く検出することが可能
となる。 尚、上記の前処理部6、対応点決定部7.3次元位置演
算部8は、第2図に示すコンピュータシステムによって
実際には構成した。 そのCPU 11の処理手順を第4図を参照して説明す
る。 ステップ100では、第1画像メモリ51に記憶されて
いる画(glAをワークメモリ12に転送し、その画像
を画像Awとする。次に、ステップ102で、その画像
Awをあるしきい値に対して2値化し、さらに細線化処
理を施して、第5図に示すように円筒状の認識物体1の
輝線を抽出する。次に、ステップ104で、各輝線を追
跡して、その輝線の長さを求め、最長輝線LTを決定す
る。そして、次のステップ106で、その最長輝線LT
をロボットが次に把持する把持物体の輝線とし、その最
長輝線LTの中点閘を注目点、即ち、把持点として、そ
の中点Mの座標 (XA4. yAjを求める。 次に、ステップ108で、YAII−Δ+yAs+Δ。 のX軸に平行な短冊状のウィンドウ領域WA、WSを画
像A、Bにおいて、設定する。 次のステップ110では、そのウィンドウ領域WA。 W、での、画像A、Bを2値化し、更に細線化処理を施
して、第3図に示すように認識物体1の輝線を抽出する
。 次にステップ112で、ウィンドウ領域WA、W。 の輝線の傾き、及び輝線間の長さを演算して、それらの
データ列を求める。 次に、ウィンドウ領域WAとWllとにおいて、データ
列の全対応関係に対して(1)式の不一致度を演算し、
その不一致度が最小となる対応関係を決定する。次に、
その対応関係により、ステップ116において、画像A
での注目点の座標<XAa、YAII)に対応する画像
Bでの座標(XB**yB@)を求める。 次に、ステップ118において、各座標からC2,)式
を用いて、注目点を空間座標(X、 Y、 Z)が求め
られ、ロボット制御装置14にその値が出力される。 尚、上記実施例では、輝線間の距離を隣接する輝線間の
距離としているが、最左端の輝線に対する距離を用いて
も良い。
本発明は、認識物体に対する相対位置の異なる位置で得
られた2つの画像の対応関係を決定し、2つの画像にお
ける対応点の座標から、その対応点の実空間での位置を
演算する位置計測装置において、2つの画像における輝
線の傾きと輝線間の距離を演算し、2つの画像において
、輝線の傾きと輝線間の距離を照合し、その照合結果に
より、2つの画像の対応関係を決定するようにしている
ので、多数の線状の認識物体が多数積み重ねられている
場合にも、2つの画像の精度の良い対応関係が決定でき
、したがって、注目点の実空間での位置を精度且つ高速
度で検出することが可能となる。
られた2つの画像の対応関係を決定し、2つの画像にお
ける対応点の座標から、その対応点の実空間での位置を
演算する位置計測装置において、2つの画像における輝
線の傾きと輝線間の距離を演算し、2つの画像において
、輝線の傾きと輝線間の距離を照合し、その照合結果に
より、2つの画像の対応関係を決定するようにしている
ので、多数の線状の認識物体が多数積み重ねられている
場合にも、2つの画像の精度の良い対応関係が決定でき
、したがって、注目点の実空間での位置を精度且つ高速
度で検出することが可能となる。
第1図は本発明の具体的な一実施例に係る位置測定装置
の構成を示したブロック図、第2図は同実施例装置の具
体的構成を示したブロック図、第3図はウィンドウ領域
を示した説明図、第4図は実施例装置に使用されたCP
Uの処理手順を示したフローチャート、第5図は注目点
抽出の方法を示した説明図である。 1・認識物体 2a、2b ・カメラ 3°照明装置
の構成を示したブロック図、第2図は同実施例装置の具
体的構成を示したブロック図、第3図はウィンドウ領域
を示した説明図、第4図は実施例装置に使用されたCP
Uの処理手順を示したフローチャート、第5図は注目点
抽出の方法を示した説明図である。 1・認識物体 2a、2b ・カメラ 3°照明装置
Claims (1)
- 【特許請求の範囲】 実空間に置かれた認識物体とカメラとの相対的位置関係
が異なる2つの位置において、前記認識物体をそれぞれ
撮像して2つの画像を作成する画像作成手段と、その画
像作成手段により作成された2つの画像の対応関係を決
定し、2つの画像における対応点の座標から、その対応
点の実空間での位置を演算する演算手段とを備えた位置
計測装置において、 前記演算手段は、前記2つの画像における輝線の傾きと
輝線間の距離を演算し、前記2つの画像において、輝線
の傾きと輝線間の距離を照合し、その照合結果により、
2つの画像の対応関係を決定するものであることを特徴
とする位置計測装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP13067289A JPH0663743B2 (ja) | 1989-05-23 | 1989-05-23 | 位置測定装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP13067289A JPH0663743B2 (ja) | 1989-05-23 | 1989-05-23 | 位置測定装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH02309202A true JPH02309202A (ja) | 1990-12-25 |
JPH0663743B2 JPH0663743B2 (ja) | 1994-08-22 |
Family
ID=15039856
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP13067289A Expired - Fee Related JPH0663743B2 (ja) | 1989-05-23 | 1989-05-23 | 位置測定装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH0663743B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019163671A1 (ja) | 2018-02-23 | 2019-08-29 | 倉敷紡績株式会社 | 線状物の先端移動方法、制御装置、および、三次元カメラ |
WO2019188198A1 (ja) | 2018-03-30 | 2019-10-03 | 倉敷紡績株式会社 | 線状物の3次元計測装置、および、線状物の3次元計測方法 |
-
1989
- 1989-05-23 JP JP13067289A patent/JPH0663743B2/ja not_active Expired - Fee Related
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019163671A1 (ja) | 2018-02-23 | 2019-08-29 | 倉敷紡績株式会社 | 線状物の先端移動方法、制御装置、および、三次元カメラ |
WO2019188198A1 (ja) | 2018-03-30 | 2019-10-03 | 倉敷紡績株式会社 | 線状物の3次元計測装置、および、線状物の3次元計測方法 |
KR20200137003A (ko) | 2018-03-30 | 2020-12-08 | 구라시키 보세키 가부시키가이샤 | 선형물의 3차원 계측 장치, 및, 선형물의 3차원 계측 방법 |
Also Published As
Publication number | Publication date |
---|---|
JPH0663743B2 (ja) | 1994-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9818023B2 (en) | Enhanced face detection using depth information | |
CN103530599B (zh) | 一种真实人脸和图片人脸的区别方法和系统 | |
US5081689A (en) | Apparatus and method for extracting edges and lines | |
US6751338B1 (en) | System and method of using range image data with machine vision tools | |
JPH0685183B2 (ja) | 2次元像による3次元物体の同定方法 | |
WO2018049704A1 (en) | Vehicle detection, tracking and localization based on enhanced anti-perspective transformation | |
WO2015113608A1 (en) | Method for recognizing objects | |
CN110120013A (zh) | 一种点云拼接方法及装置 | |
CN110288040B (zh) | 一种基于拓扑验证的图像相似评判方法及设备 | |
CN109344758B (zh) | 基于改进局部二值模式的人脸识别方法 | |
CN113313725B (zh) | 含能材料药桶的桶口识别方法及系统 | |
CN1573798A (zh) | 图像处理装置 | |
CN116188763A (zh) | 一种基于YOLOv5的纸箱识别定位及放置角度的测量方法 | |
JPH02309202A (ja) | 位置測定装置 | |
CN106056599B (zh) | 一种基于物体深度数据的物体识别算法及装置 | |
KR20160148806A (ko) | 방향정보를 이용한 객체 검출기 생성 방법, 이를 이용한 객체 검출 장치 및 방법 | |
KR101156547B1 (ko) | 알지비 이미지 및 깊이 이미지를 이용한 얼굴 및 손 탐색 방법 | |
CA2230197C (en) | Strand orientation sensing | |
JPH07168941A (ja) | 画像処理装置 | |
Kumar et al. | Texture and shape based object detection strategies | |
CN113610790B (zh) | 一种基于图像识别的气体扩散层纤维测量方法 | |
Fathi et al. | Machine vision-based infrastructure as-built documentation using edge points | |
KR20240091487A (ko) | 3차원 공간 복원 데이터의 정밀도 분석 장치 및 방법 | |
JPH0981778A (ja) | モデリング装置およびモデリング方法 | |
Au et al. | Affine invariant recognition of 2D occluded objects using geometric hashing and distance transformation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
LAPS | Cancellation because of no payment of annual fees |