JP2937235B2 - Recognition dictionary learning method and apparatus - Google Patents
Recognition dictionary learning method and apparatusInfo
- Publication number
- JP2937235B2 JP2937235B2 JP8235955A JP23595596A JP2937235B2 JP 2937235 B2 JP2937235 B2 JP 2937235B2 JP 8235955 A JP8235955 A JP 8235955A JP 23595596 A JP23595596 A JP 23595596A JP 2937235 B2 JP2937235 B2 JP 2937235B2
- Authority
- JP
- Japan
- Prior art keywords
- dictionary
- pattern
- input
- learning
- degree
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Character Discrimination (AREA)
- Image Analysis (AREA)
Description
【0001】[0001]
【発明の属する技術分野】本発明は認識辞書学習方法お
よび装置に関し、特にマトリクス・マッチング法に基づ
くパターン認識装置に用いられる認識辞書学習方法およ
びそれを適用した認識辞書学習装置に関する。The present invention relates to a recognition dictionary learning method and apparatus, and more particularly to a recognition dictionary learning method used in a pattern recognition apparatus based on a matrix matching method and a recognition dictionary learning apparatus to which the method is applied.
【0002】[0002]
【従来の技術】マトリクス・マッチング法とは、2値の
マスクパターン(テンプレート)を認識辞書として複数
用意し、2値の入力パターンとの重なり具合から入力パ
ターンを判定するものである(例えば、特公昭60−2
714号公報「印字文字認識装置」参照)。文字認識を
例にとると、図5に示すように、2値の入力パターンに
対し正特徴と呼ぶテンプレートと負特徴と呼ぶテンプレ
ートとの組からなる辞書パターンをカテゴリごとに複数
個用意し、正特徴の黒画素と入力パターンの白画素とが
一致する画素数を正特徴の不一致度とし、負特徴の黒画
素と入力パターンの黒画素とが一致する画素数を負特徴
の不一致度とし、正特徴の不一致度と負特徴の不一致度
との和が最も小さい辞書パターンが属するカテゴリを認
識結果とする。2. Description of the Related Art In a matrix matching method, a plurality of binary mask patterns (templates) are prepared as a recognition dictionary, and an input pattern is determined based on the degree of overlap with a binary input pattern (for example, Kosho 60-2
714, "Printed character recognition device". Taking character recognition as an example, as shown in FIG. 5, a plurality of dictionary patterns each comprising a set of a template called a positive feature and a template called a negative feature for a binary input pattern are prepared for each category. The number of pixels where the black pixel of the feature and the white pixel of the input pattern match is defined as the positive feature mismatch degree, and the number of pixels where the black pixel of the negative feature matches the black pixel of the input pattern is defined as the negative feature mismatch degree. The category to which the dictionary pattern having the smallest sum of the feature mismatch degree and the negative feature mismatch degree belongs is set as the recognition result.
【0003】入力パターンと同じ画素数で画素値が実数
である辞書パターンの場合には、コホーネンによる学習
ベクトル量子化(LVQ)と呼ばれる学習方法によって
自動的にテンプレートを作成できることが知られている
が[T.Kohonen:”The Neural P
honetic Typewriter”,IEEEC
omputer,Vol.21,No.3,pp.11
−22]、マトリクス・マッチング法で用いられる2値
のテンプレートの作成には、このLVQを用いることは
できない。It is known that in the case of a dictionary pattern in which the number of pixels is the same as the input pattern and the pixel value is a real number, a template can be automatically created by a learning method called learning vector quantization (LVQ) by Kohonen. [T. Kohonen: "The Neural P
Honetic Typewriter ”, IEEE
Omputer, Vol. 21, No. 3, pp. 11
-22], this LVQ cannot be used to create a binary template used in the matrix matching method.
【0004】そこで、図6に示す手順による辞書パター
ンの作成方法が、公知の技術として用いられている。す
なわち、2値の原画像301に対し、収縮処理部302
で黒画素の収縮処理を行って正特徴のテンプレート30
3を作成し、また原画像301に対して膨張処理部30
4で黒画素の膨張処理を行った後、反転処理部305で
白黒反転処理を行い、負特徴のテンプレート306を作
成する。Therefore, a method of creating a dictionary pattern by the procedure shown in FIG. 6 is used as a known technique. That is, a contraction processing unit 302 is applied to the binary original image 301.
Performs the contraction processing of the black pixel by using the template 30 of the positive feature.
3 and the expansion processing unit 30
After performing the black pixel expansion processing in step 4, the black-and-white inversion processing is performed in the inversion processing unit 305 to create a template 306 having a negative feature.
【0005】[0005]
【発明が解決しようとする課題】しかしながら、上述し
た従来の辞書パターンの作成方法では、他のカテゴリに
属するパターンについては何も考慮せず、カテゴリごと
に辞書パターンを作成しているため、認識誤りが多く、
人間が試行錯誤で辞書パターンを修正しなくてはならな
いという問題点があった。これについて、以下に簡単に
説明する。However, in the above-described conventional method for creating a dictionary pattern, no consideration is given to patterns belonging to other categories, and dictionary patterns are created for each category. Many,
There was a problem that a human had to correct the dictionary pattern by trial and error. This will be briefly described below.
【0006】正特徴のテンプレートおよび負特徴のテン
プレートがともに白画素である領域を不感領域と呼ぶこ
とにする。不感領域においては、入力画素が黒、白にか
かわらず不一致数は常に0となるため、この不感領域を
広げることで、多少変形した入力パターンについても不
一致度を0に近づけることができる。しかし、不感領域
を広げすぎると、他のカテゴリに属するパターンに対し
ても不一致度が小さくなってしまうため、認識誤りが増
加する。認識精度を上げるためには、認識誤りを減らす
ようにこの不感領域を調整する必要があるが、従来の膨
張収縮処理に基づく認識辞書作成方法では、他のカテゴ
リに属するパターンが考慮されていないために認識誤り
が多く、人間が試行錯誤的に辞書パターンを修正する必
要があった。An area in which both the positive feature template and the negative feature template are white pixels will be referred to as a dead area. In the dead area, the number of mismatches is always 0 irrespective of whether the input pixel is black or white. Therefore, by expanding the dead area, the degree of mismatch can be made close to 0 even for a slightly deformed input pattern. However, if the dead area is excessively widened, the degree of inconsistency becomes small even for patterns belonging to other categories, so that recognition errors increase. In order to increase recognition accuracy, it is necessary to adjust this dead area so as to reduce recognition errors.However, the conventional method of creating a recognition dictionary based on dilation / contraction processing does not consider patterns belonging to other categories. There were many recognition errors, and humans had to correct the dictionary pattern by trial and error.
【0007】本発明の目的は、従来の膨張収縮処理に基
づく認識辞書作成方法で作成された辞書パターンでは認
識精度が上がらないという課題を除去し、人間の試行錯
誤による辞書パターンの修正作業を必要としない高精度
な認識辞書を自動生成する認識辞書学習方法を提供する
ことにある。An object of the present invention is to eliminate the problem that the recognition accuracy is not improved with a dictionary pattern created by a conventional recognition dictionary creation method based on expansion / shrinkage processing, and it is necessary to correct the dictionary pattern by human trial and error. Another object of the present invention is to provide a recognition dictionary learning method for automatically generating a high-precision recognition dictionary.
【0008】また、本発明の他の目的は、上記認識辞書
学習方法を適用した認識辞書学習装置を提供することに
ある。It is another object of the present invention to provide a recognition dictionary learning apparatus to which the above-described recognition dictionary learning method is applied.
【0009】[0009]
【課題を解決するための手段】本願の第1の発明に係る
認識辞書学習方法は、マトリクス・マッチング法に基づ
くパターン認識装置で用いられる認識辞書の学習方法で
あって、辞書パターンの初期設定を行う初期値設定段階
と、学習用に用意した入力パターン群の中から1つの入
力パターンを選択する入力段階と、該入力パターンと同
じカテゴリに属する辞書パターン群の中から該入力パタ
ーンとの不一致度が最小となる第1の辞書パターンおよ
びその第1の不一致度と、該入力パターンと異なるカテ
ゴリに属する辞書パターン群の中から該入力パターンと
の不一致度が最小となる第2の辞書パターンおよびその
第2の不一致度とを求める辞書検索段階と、辞書パター
ンを修正する頻度を計算する修正頻度計算段階と、該修
正頻度に従って第1の辞書パターンの不感領域が大きく
なるように、かつ第2の辞書パターンの不感領域が小さ
くなるように修正する辞書修正段階と、辞書パターンの
学習の終了を判定する終了判定段階とを含むことを特徴
とする。A recognition dictionary learning method according to a first aspect of the present invention is a method for learning a recognition dictionary used in a pattern recognition apparatus based on a matrix matching method, wherein initialization of a dictionary pattern is performed. An initial value setting step to be performed, an input step of selecting one input pattern from a group of input patterns prepared for learning, and a degree of mismatch between the input pattern and a dictionary pattern group belonging to the same category as the input pattern. Is the first dictionary pattern and the first degree of inconsistency thereof, and a dictionary pattern group belonging to a category different from the input pattern and the second dictionary pattern and the second dictionary pattern having the least degree of inconsistency with the input pattern A dictionary search step for obtaining a second degree of inconsistency; a correction frequency calculation step for calculating a frequency for correcting the dictionary pattern; A dictionary correction step of correcting the dead area of the dictionary pattern to be large and a dead area of the second dictionary pattern to be small, and an end determination step of determining the end of learning of the dictionary pattern. Features.
【0010】また、本願の第2の発明に係る認識辞書学
習装置は、マトリクス・マッチング法に基づくパターン
認識装置で用いられる認識辞書の学習方法を適用した認
識辞書学習装置において、辞書パターンの初期設定を行
う初期値設定手段と、学習用に用意した入力パターン群
の中から1つの入力パターンを選択する入力手段と、該
入力パターンと同じカテゴリに属する辞書パターン群の
中から該入力パターンとの不一致度が最小となる第1の
辞書パターンおよびその第1の不一致度と、該入力パタ
ーンと異なるカテゴリに属する辞書パターン群の中から
該入力パターンとの不一致度が最小となる第2の辞書パ
ターンおよびその第2の不一致度とを求める辞書検索手
段と、辞書パターンを修正する頻度を計算する修正頻度
計算手段と、該修正頻度に従って第1の辞書パターンの
不感領域が大きくなるように、かつ第2の辞書パターン
の不感領域が小さくなるように修正する辞書修正手段
と、辞書パターンの学習の終了を判定する終了判定手段
とを有することを特徴とする。A recognition dictionary learning apparatus according to a second aspect of the present invention is a recognition dictionary learning apparatus to which a recognition dictionary learning method used in a pattern recognition apparatus based on a matrix matching method is applied. Means for selecting one input pattern from a group of input patterns prepared for learning, and a mismatch between the input pattern and a dictionary pattern group belonging to the same category as the input pattern. A first dictionary pattern having a minimum degree of mismatch and a first mismatch degree thereof, and a second dictionary pattern having a minimum degree of mismatch with the input pattern from a dictionary pattern group belonging to a category different from the input pattern; Dictionary search means for obtaining the second degree of inconsistency; correction frequency calculation means for calculating the frequency of correcting the dictionary pattern; Dictionary correction means for correcting the dead area of the first dictionary pattern to be larger and the dead area of the second dictionary pattern to be smaller in accordance with the frequency; and end determination means for determining the end of learning of the dictionary pattern. It is characterized by having.
【0011】さらに、本願の第3の発明に係る認識辞書
学習方法は、第1の発明に係る認識辞書学習方法におい
て、前記第1の不一致度と前記第2の不一致度との差が
小さいほど辞書パターンを修正する頻度を高くするよう
に修正頻度を計算する前記修正頻度計算段階を含むこと
を特徴とする。Further, the recognition dictionary learning method according to the third invention of the present application is the recognition dictionary learning method according to the first invention, wherein the difference between the first degree of mismatch and the second degree of mismatch is smaller. The method further includes the step of calculating a correction frequency so as to increase the frequency of correcting the dictionary pattern.
【0012】さらにまた、本願の第4の発明に係る認識
辞書学習装置は、第2の発明に係る認識辞書学習装置に
おいて、前記第1の不一致度と前記第2の不一致度との
差が小さいほど辞書パターンを修正する頻度を高くする
ように修正頻度を計算する前記修正頻度計算手段を備え
ることを特徴とする。Furthermore, a recognition dictionary learning device according to a fourth invention of the present application is the recognition dictionary learning device according to the second invention, wherein the difference between the first degree of mismatch and the second degree of mismatch is small. The correction frequency calculating means for calculating the correction frequency so as to increase the frequency of correcting the dictionary pattern.
【0013】[0013]
【発明の実施の形態】次に、本発明の実施の形態につい
て、図面を参照して詳細に説明する。Next, an embodiment of the present invention will be described in detail with reference to the drawings.
【0014】図1は、本発明の一実施の形態に係る認識
辞書学習方法を適用した認識辞書学習装置の基本構成を
示すブロック図である。本実施の形態に係る認識辞書学
習装置は、辞書パターンの初期設定を行う初期値設定手
段(段階)101と、学習用に用意した入力パターン群
の中から1つの入力パターンXを選択する入力手段(段
階)102と、該入力パターンXと同じカテゴリに属す
る辞書パターン群の中から該入力パターンXとの不一致
度が最小となる第1の辞書パターンW1およびその第1
の不一致度D1と、該入力パターンXと異なるカテゴリ
に属する辞書パターン群の中から該入力パターンXとの
不一致度が最小となる第2の辞書パターンW2およびそ
の第2の不一致度D2とを求める辞書検索手段(段階)
103と、辞書パターンを修正する頻度を計算する修正
頻度計算手段(段階)105と、該修正頻度に従って第
1の辞書パターンW1の不感領域が大きくなるように、
かつ第2の辞書パターンW2の不感領域が小さくなるよ
うに修正する辞書修正手段104(段階)と、辞書パタ
ーンの学習の終了を判定する終了判定手段(段階)10
6とから構成されている。終了判定手段106におい
て、辞書パターンの学習が終了していないと判断された
場合には、入力手段102へ処理帰還する。FIG. 1 is a block diagram showing a basic configuration of a recognition dictionary learning apparatus to which a recognition dictionary learning method according to one embodiment of the present invention is applied. The recognition dictionary learning apparatus according to the present embodiment includes an initial value setting means (step) 101 for initial setting of a dictionary pattern, and an input means for selecting one input pattern X from an input pattern group prepared for learning. (Step) 102, a first dictionary pattern W1 and a first dictionary pattern W1 having a minimum degree of inconsistency with the input pattern X from a dictionary pattern group belonging to the same category as the input pattern X;
, A second dictionary pattern W2 having the minimum degree of mismatch with the input pattern X and a second degree of mismatch D2 thereof from a dictionary pattern group belonging to a category different from that of the input pattern X. Dictionary search means (stage)
103, a correction frequency calculating means (step) 105 for calculating a frequency of correcting the dictionary pattern, and a dead area of the first dictionary pattern W1 is increased according to the correction frequency.
And dictionary correction means 104 (step) for correcting the dead area of the second dictionary pattern W2 so as to be small, and end determination means (step) 10 for determining the end of learning of the dictionary pattern.
6 is comprised. When the end determination unit 106 determines that the learning of the dictionary pattern has not been completed, the process returns to the input unit 102.
【0015】図2は、図1において破線で囲った辞書修
正手段104および修正頻度計算手段105の処理を示
すフローチャートである。FIG. 2 is a flowchart showing the processing of the dictionary correction means 104 and correction frequency calculation means 105 enclosed by broken lines in FIG.
【0016】図3は、本実施の形態に係る認識辞書学習
方法および装置で用いられる入力パターンおよび辞書パ
ターンの画素値を示す図である。すなわち、入力パター
ンの総画素数をNとし、入力パターンの画素が○の場合
は−1、●の場合は+1とすると、入力パターンは(−
1,1)を要素値とするN次元の配列とみなすことがで
き、これをX[i]と表記する。ただし、iは1からN
までの値である。辞書パターンについては、(正特徴,
負特徴)の組が(○,●)の場合は−1、(○,○)の
場合は0、(●,○)の場合は+1とすると、辞書パタ
ーンは{−1,0,1}を要素値とするN次元の配列と
みなすことができ、これをW1[i]あるいはW2
[i]と表記する。FIG. 3 is a diagram showing pixel values of an input pattern and a dictionary pattern used in the recognition dictionary learning method and apparatus according to the present embodiment. That is, if the total number of pixels of the input pattern is N, and if the pixels of the input pattern are ○, −1, and if the pixel is ●, +1, then the input pattern is (−
It can be regarded as an N-dimensional array having (1, 1) as an element value, and this is expressed as X [i]. Where i is 1 to N
The value up to. For dictionary patterns, (Positive feature,
If the set of (negative features) is (○, ●), −1, if (○, ○) is 0, and if (●, ○) is +1, the dictionary pattern is {-1, 0, 1}. Can be regarded as an N-dimensional array in which W1 [i] or W2
Notated as [i].
【0017】入力パターンXと同じカテゴリに属する辞
書パターン群の中で、最も不一致度の小さい辞書パター
ンをW1とし、その不一致度をD1とする。同様に、入
力パターンXと異なるカテゴリに属する辞書パターン群
の中で、最も不一致度の小さい辞書パターンをW2と
し、その不一致度をD2とする。マトリクス・マッチン
グ法では、不一致度の最も小さい辞書パターンが属する
カテゴリが認識結果となるので、D1<D2の場合には
正認識、D1≧D2の場合には誤認識と判断される。In the dictionary pattern group belonging to the same category as the input pattern X, the dictionary pattern having the lowest degree of mismatch is W1 and the degree of mismatch is D1. Similarly, among the dictionary pattern groups belonging to a category different from the input pattern X, the dictionary pattern with the smallest degree of mismatch is W2, and the degree of mismatch is D2. In the matrix matching method, the category to which the dictionary pattern with the lowest degree of mismatch belongs is the recognition result. Therefore, if D1 <D2, correct recognition is performed, and if D1 ≧ D2, erroneous recognition is determined.
【0018】図4を用いて詳しく説明する。入力パター
ンのある画素に着目すると、入力パターンの画素値に対
する、辞書パターンの正特徴および負特徴の画素値の組
合せは、図4に示すように全部で6通りある。ここで、
●および○は、画素値が黒および白の場合をそれぞれ表
しており、正特徴および負特徴がともに黒である組合せ
は発生しないものとする。これらの組合せに対する不一
致度は、入力が○かつ正特徴が●、および入力が●かつ
負特徴が●のときにのみ1となり、その他については0
となる。This will be described in detail with reference to FIG. Focusing on pixels having an input pattern, there are a total of six combinations of pixel values of the positive and negative features of the dictionary pattern with respect to the pixel values of the input pattern, as shown in FIG. here,
● and ○ represent the case where the pixel value is black and white, respectively, and it is assumed that a combination in which both the positive feature and the negative feature are black does not occur. The degree of inconsistency for these combinations is 1 only when the input is 特 徴 and the positive feature is ●, and the input is ● and the negative feature is ●.
Becomes
【0019】辞書修正手段104は、辞書パターンW1
については、次のように修正を行う。入力パターンXの
画素値X[i]が○かつ辞書パターンW1の正特徴が●
の場合は辞書パターンW1の正特徴を●から○に修正
し、入力パターンXの画素値X[i]が●かつ辞書パタ
ーンW1の負特徴が●の場合は辞書パターンW1の負特
徴を●から○に修正する。上記以外の部分、すなわち図
4で−で示した部分については変更しない。修正された
画素に対する不一致度は1から0に減少するため、不一
致度D1の値は減少する。The dictionary correction means 104 includes a dictionary pattern W1
Is modified as follows. The pixel value X [i] of the input pattern X is ○ and the positive feature of the dictionary pattern W1 is ●
In the case of, the positive feature of the dictionary pattern W1 is modified from ● to ○, and when the pixel value X [i] of the input pattern X is ● and the negative feature of the dictionary pattern W1 is ●, the negative feature of the dictionary pattern W1 is changed from ●. Correct to ○. Portions other than the above, that is, portions indicated by-in FIG. 4 are not changed. Since the degree of mismatch for the corrected pixel decreases from 1 to 0, the value of the degree of mismatch D1 decreases.
【0020】また、辞書修正手段104は、辞書パター
ンW2については、次のように修正を行う。入力パター
ンXの画素値X[i]が○かつ辞書パターンW2の正特
徴および辞書パターンW2の負特徴がともに○の場合は
辞書パターンW2の正特徴を○から●に修正し、入力パ
ターンXの画素値X[i]が●かつ辞書パターンW2の
正特徴および辞書パターンW2の負特徴がともに○の場
合は辞書パターンW2の負特徴を○から●に修正する。
上記以外の部分、すなわち図4で−で示した部分につい
ては変更しない。修正された画素に対する不一致度は0
から1に増加するため、不一致度D2の値は増加する。The dictionary correction means 104 corrects the dictionary pattern W2 as follows. When the pixel value X [i] of the input pattern X is ○ and the positive feature of the dictionary pattern W2 and the negative feature of the dictionary pattern W2 are both ○, the positive feature of the dictionary pattern W2 is corrected from ○ to ●, If the pixel value X [i] is ● and both the positive feature of the dictionary pattern W2 and the negative feature of the dictionary pattern W2 are ○, the negative feature of the dictionary pattern W2 is corrected from ○ to ●.
Portions other than the above, that is, portions indicated by-in FIG. 4 are not changed. The degree of inconsistency for the corrected pixel is 0
From 1 to 1, the value of the degree of mismatch D2 increases.
【0021】不感領域は正特徴および負特徴とともに○
である画素の集合であるから、上記の修正により、辞書
パターンW1は不感領域が増え、辞書パターンW2は不
感領域が減ることになる。しかし、入力パターンXの画
素全てについて上記の修正を行うと、入力パターンXご
とに辞書パターンが大きく変化し、必ずしも学習データ
全体に対する誤読を低減しない問題があるので、辞書修
正手段104は、画素ごとに1以下の確率で上記の修正
を行う。すなわち、辞書修正手段104は、修正頻度計
算手段105で計算された修正頻度で修正を行うことに
より、上記の修正条件を満たす画素の一部についてのみ
修正を行う。The dead area is represented by ○ together with positive and negative features.
, The dictionary pattern W1 increases the dead area, and the dictionary pattern W2 decreases the dead area. However, if the above correction is performed for all the pixels of the input pattern X, the dictionary pattern greatly changes for each input pattern X, and there is a problem that erroneous reading for the entire learning data is not necessarily reduced. The above correction is made with a probability of 1 or less. That is, the dictionary correction unit 104 corrects only a part of the pixels satisfying the above-described correction condition by performing the correction with the correction frequency calculated by the correction frequency calculation unit 105.
【0022】次に、このように構成された本実施の形態
に係る認識辞書学習装置の動作について、その認識辞書
学習方法とともに説明する。Next, the operation of the thus configured recognition dictionary learning apparatus according to the present embodiment will be described together with its recognition dictionary learning method.
【0023】まず、初期値設定手段101は、辞書パタ
ーンの初期設定を行う。First, the initial value setting means 101 performs initial setting of a dictionary pattern.
【0024】次に、入力手段102は、学習用に用意し
た入力パターン群の中から1つの入力パターンXを選択
する。Next, the input means 102 selects one input pattern X from an input pattern group prepared for learning.
【0025】続いて、辞書検索手段103は、入力手段
102で選択された入力パターンXと同じカテゴリに属
する辞書パターン群の中から該入力パターンXとの不一
致度が最小となる第1の辞書パターンW1およびその第
1の不一致度D1と、該入力パターンXと異なるカテゴ
リに属する辞書パターン群の中から該入力パターンXと
の不一致度が最小となる第2の辞書パターンW2および
その第2の不一致度D2とを求める。Subsequently, the dictionary search means 103 selects a first dictionary pattern which minimizes the degree of mismatch with the input pattern X from a group of dictionary patterns belonging to the same category as the input pattern X selected by the input means 102. W1 and its first inconsistency D1 and a second dictionary pattern W2 and its second inconsistency that minimize the inconsistency between the input pattern X and a dictionary pattern group belonging to a category different from the input pattern X The degree D2 is obtained.
【0026】次に、修正頻度計算手段105は、第1の
不一致度D1および第2の不一致度D2を用いた所定の
関数F1およびF2によって、修正頻度を表す量a1お
よびa2をそれぞれ計算する(ステップS201)。量
a1およびa2は、0以上、1以下の実数であって、例
えばD1<D2のときにはa1=0.01,a2=0、
D1≧D2のときにはa1=0,a2=0.01と設定
する。Next, the correction frequency calculating means 105 calculates the quantities a1 and a2 representing the correction frequency by predetermined functions F1 and F2 using the first degree of mismatch D1 and the second degree of mismatch D2, respectively (FIG. 2). Step S201). The quantities a1 and a2 are real numbers from 0 to 1 and, for example, when D1 <D2, a1 = 0.01, a2 = 0,
When D1 ≧ D2, a1 = 0 and a2 = 0.01 are set.
【0027】次に、辞書修正手段104は、カウンタi
の値を1に設定する(ステップS202)。Next, the dictionary correction means 104 sets the counter i
Is set to 1 (step S202).
【0028】続いて、辞書修正手段104は、第1の辞
書パターンW1の要素値W1[i]と該入力パターンX
の要素値X[i]との比較を行い(ステップS20
3)、要素値W1[i]と要素値−X[i]とが等しい
場合にはステップS204に進み、そうでない場合には
ステップS206に進む。Subsequently, the dictionary correction means 104 outputs the element value W1 [i] of the first dictionary pattern W1 and the input pattern X
Is compared with the element value X [i] (step S20).
3) If the element value W1 [i] is equal to the element value -X [i], the process proceeds to step S204; otherwise, the process proceeds to step S206.
【0029】ステップS204では、辞書修正手段10
4は、0から1までの一様乱数を発生し、得られた値r
andと量a1との比較を行い、値randが量a1よ
り小さい場合にはステップS205に進み、そうでない
場合にはステップS206に進む。In step S204, the dictionary correction means 10
4 generates a uniform random number from 0 to 1 and obtains an obtained value r
and is compared with the amount a1, and if the value rand is smaller than the amount a1, the process proceeds to step S205; otherwise, the process proceeds to step S206.
【0030】ステップS205では、辞書修正手段10
4は、第1の辞書パターンW1の要素値W1[i]の修
正を行う。詳しくは、W1[i]=W1[i]+X
[i]を演算する。In step S205, the dictionary correction means 10
No. 4 corrects the element value W1 [i] of the first dictionary pattern W1. Specifically, W1 [i] = W1 [i] + X
[I] is calculated.
【0031】ステップS206では、辞書修正手段10
4は、カウンタiが入力パターンXの画素数Nと等しい
場合には、処理を終了し、そうでない場合にはカウンタ
iの値を1増加させ(ステップS207)、ステップS
203に戻る。In step S206, the dictionary correction means 10
In step S4, if the counter i is equal to the number N of pixels of the input pattern X, the process ends; otherwise, the value of the counter i is increased by 1 (step S207), and step S207 is performed.
Return to 203.
【0032】他方、ステップS208では、辞書修正手
段104は、カウンタiの値を1に設定する。On the other hand, in step S208, the dictionary correction means 104 sets the value of the counter i to 1.
【0033】次に、辞書修正手段104は、第2の辞書
パターンW2の要素値W2[i]を0と比較し(ステッ
プS209)、0に等しい場合にはステップS210に
進み、そうでない場合にはステップS212に進む。Next, the dictionary correction means 104 compares the element value W2 [i] of the second dictionary pattern W2 with 0 (step S209), and when it is equal to 0, proceeds to step S210. Goes to step S212.
【0034】ステップS210では、辞書修正手段10
4は、0から1までの一様乱数を発生し、得られた値r
andと量a2との比較を行い、値randが量a2よ
り小さい場合にはステップS211に進み、そうでない
場合にはステップS212に進む。In step S210, the dictionary correction means 10
4 generates a uniform random number from 0 to 1 and obtains an obtained value r
and is compared with the quantity a2. If the value rand is smaller than the quantity a2, the process proceeds to step S211. If not, the process proceeds to step S212.
【0035】ステップS211では、辞書修正手段10
4は、第2の辞書パターンW2の要素値W2[i]の修
正を行う。詳しくは、W2[i]=W2[i]−X
[i]を演算する。In step S211, the dictionary correction means 10
No. 4 corrects the element value W2 [i] of the second dictionary pattern W2. Specifically, W2 [i] = W2 [i] -X
[I] is calculated.
【0036】ステップS212では、辞書修正手段10
4は、カウンタiが入力パターンXの画素数Nと等しい
場合には処理を終了し、そうでない場合にはカウンタi
を1増加させ(ステップS213)、ステップS209
に戻る。In step S212, the dictionary correction means 10
4 terminates the processing if the counter i is equal to the number N of pixels of the input pattern X, otherwise, the counter i
Is incremented by 1 (step S213), and step S209
Return to
【0037】ステップS201における修正頻度を表す
量a1およびa2の設定に関し、第1の実施の形態に係
る認識辞書学習方法および装置では、修正頻度計算手段
105が、例えばD1<D2のときにはa1=0.0
1,a2=0、D1≧D2のときにはa1=0,a2=
0.01と設定することにより、入力パターンXが正認
識のとき(D1<D2)には第1の辞書パターンW1の
みを低い頻度で修正し、誤認識のとき(D1≧D2)に
は第2の辞書パターンW2のみを低い頻度で修正してい
る。Regarding the setting of the quantities a1 and a2 representing the correction frequency in step S201, in the recognition dictionary learning method and apparatus according to the first embodiment, the correction frequency calculation means 105 determines that a1 = 0 when D1 <D2, for example. .0
1, when a2 = 0 and D1 ≧ D2, a1 = 0 and a2 =
By setting 0.01, when the input pattern X is correctly recognized (D1 <D2), only the first dictionary pattern W1 is corrected at a low frequency, and when the input pattern X is incorrectly recognized (D1 ≧ D2), the first dictionary pattern W1 is corrected. Only the second dictionary pattern W2 is modified at a low frequency.
【0038】また、ステップS201における修正頻度
を表す量a1およびa2の設定に関し、他の数値例で
は、修正頻度計算手段105は、例えばa1=0.0
1,a2=0.01と設定する。この場合、入力パター
ンXが正認識であるか誤認識であるかにかかわらず、第
1の辞書パターンW1と第2の辞書パターンW2との両
方を修正することになる。Further, regarding the setting of the quantities a1 and a2 representing the correction frequency in step S201, in another numerical example, the correction frequency calculation means 105 determines that a1 = 0.0
1, a2 = 0.01 is set. In this case, both the first dictionary pattern W1 and the second dictionary pattern W2 are corrected irrespective of whether the input pattern X is correct recognition or incorrect recognition.
【0039】ところで、誤認識する入力パターンは主に
カテゴリ境界付近に多く存在することが知られている。
マトリクス・マッチング法では、不一致度D1およびD
2を用いて入力パターンを判定しており、不一致度D1
とD2とが近い値を示す入力パターンはカテゴリ境界付
近に存在すると考えられる。不一致度D1とD2との値
の差が小さいほど高い頻度で辞書パターンの修正を行え
ば、カテゴリ境界付近に存在する誤認識しやすいパター
ンを高い頻度で学習することになり、誤読がより低減さ
れる。By the way, it is known that many erroneously recognized input patterns mainly exist near the category boundary.
In the matrix matching method, the inconsistencies D1 and D1
2 is used to determine the input pattern, and the degree of mismatch D1
It is conceivable that the input pattern in which D2 and D2 have close values exists near the category boundary. If the dictionary pattern is corrected with a higher frequency as the difference between the values of the degrees of mismatch D1 and D2 is smaller, a pattern that is likely to be erroneously recognized near the category boundary is learned with a higher frequency, and misreading is further reduced. You.
【0040】そこで、ステップS201における修正頻
度を表す量a1およびa2の設定に関し、別の数値例で
は、修正頻度計算手段105は、例えばD1<D2のと
きにはa1=max(0,0.01×(1−|D1−D
2|/10)),a2=0、D1≧D2のときにはa1
=0,a2=max(0,0.01×(1−|D1−D
2|/10))と設定する。ここで、|x|はxの絶対
値を表し、max(a,b)はa,bのうち大きい値を
出力する関数である。この場合、入力パターンXが正認
識のとき(D1<D2)には第1の辞書パターンW1の
みを不一致度D1とD2との差が小さいほど高い頻度で
修正し、入力パターンXが誤認識のとき(D1≧D2)
には第2の辞書パターンW2のみを不一致度D1とD2
との差が小さいほど高い頻度で修正することになる。Therefore, regarding the setting of the quantities a1 and a2 representing the correction frequency in step S201, in another numerical example, the correction frequency calculating means 105 determines that a1 = max (0, 0.01 × (0, 0.01 × (D1 <D2)) 1- | D1-D
2 | / 10)), when a2 = 0 and D1 ≧ D2, a1
= 0, a2 = max (0, 0.01 × (1- | D1-D
2 | / 10)). Here, | x | represents the absolute value of x, and max (a, b) is a function that outputs the larger value of a and b. In this case, when the input pattern X is correctly recognized (D1 <D2), only the first dictionary pattern W1 is corrected more frequently as the difference between the degrees of mismatch D1 and D2 is smaller, and the input pattern X is incorrectly recognized. When (D1 ≧ D2)
Include only the second dictionary pattern W2 with inconsistencies D1 and D2.
The smaller the difference, the higher the frequency of correction.
【0041】また、ステップS201における修正頻度
を表す量a1およびa2の設定に関し、別の数値例で
は、修正頻度計算手段105は、例えばa1=max
(0,0.01×(1−|D1−D2|/10)),a
2=a1と設定する。この場合、入力パターンXが正認
識であるか誤認識であるかにかかわらず、不一致度D1
とD2との差が小さいほど高い頻度で第1の辞書パター
ンW1と第2の辞書パターンW2との両方を修正するこ
とになる。Further, regarding the setting of the quantities a1 and a2 representing the correction frequency in step S201, in another numerical example, the correction frequency calculation means 105 determines, for example, that a1 = max
(0,0.01 × (1- | D1-D2 | / 10)), a
2 = a1 is set. In this case, regardless of whether the input pattern X is correct recognition or erroneous recognition, the mismatch degree D1
The smaller the difference between D1 and D2, the more frequently both the first dictionary pattern W1 and the second dictionary pattern W2 are corrected.
【0042】なお、上記実施の形態では、入力パターン
Xを{−1,1}を要素値とする配列とし、辞書パター
ンW1およびW2を{−1,0,1}を要素値とする配
列としたが、もちろん白画素および黒画素の組合せを用
いても本発明は有効である。In the above embodiment, the input pattern X is an array having {-1, 1} as element values, and the dictionary patterns W1 and W2 are arrays having {-1, 0, 1} as element values. However, the present invention is, of course, effective even if a combination of white pixels and black pixels is used.
【0043】また、上記実施の形態では、ステップS2
04およびS210における値randの計算に一様乱
数を用いたが、任意の確率分布を用いても構わない。従
って、本発明は上記実施の形態に限定されるものではな
い。Also, in the above embodiment, step S2
Although a uniform random number is used for calculating the value rand in steps 04 and S210, an arbitrary probability distribution may be used. Therefore, the present invention is not limited to the above embodiment.
【0044】[0044]
【発明の効果】以上の説明から明らかなように、本発明
の認識辞書学習方法によれば、辞書パターンの初期設定
を行う初期値設定段階と、学習用に用意した入力パター
ン群の中から1つの入力パターンを選択する入力段階
と、該入力パターンと同じカテゴリに属する辞書パター
ン群の中から該入力パターンとの不一致度が最小となる
第1の辞書パターンおよびその第1の不一致度と、該入
力パターンと異なるカテゴリに属する辞書パターン群の
中から該入力パターンとの不一致度が最小となる第2の
辞書パターンおよびその第2の不一致度とを求める辞書
検索段階と、辞書パターンを修正する頻度を計算する修
正頻度計算段階と、該修正頻度に従って第1の辞書パタ
ーンの不感領域が大きくなるように、かつ第2の辞書パ
ターンの不感領域が小さくなるように修正する辞書修正
段階と、辞書パターンの学習の終了を判定する終了判定
段階とを含むようにしたことにより、辞書パターンの不
感領域が自動的に設定されるので、人間が試行錯誤で辞
書パターンを修正する必要がない高精度の認識辞書を自
動生成することができるという効果がある。As is apparent from the above description, according to the recognition dictionary learning method of the present invention, an initial value setting step for initial setting of a dictionary pattern and one of input pattern groups prepared for learning are performed. An input step of selecting one input pattern; a first dictionary pattern having a minimum degree of inconsistency with the input pattern from a dictionary pattern group belonging to the same category as the input pattern; and a first degree of inconsistency thereof; A dictionary search step of obtaining a second dictionary pattern that minimizes the degree of inconsistency with the input pattern from a group of dictionary patterns belonging to a category different from the input pattern and a frequency of correcting the dictionary pattern And calculating the dead area of the first dictionary pattern so that the dead area of the first dictionary pattern is increased in accordance with the correction frequency. By including a dictionary correction step to correct the size of the dictionary pattern and an end determination step to determine the end of the learning of the dictionary pattern, the insensitive area of the dictionary pattern is automatically set. Thus, there is an effect that a high-precision recognition dictionary that does not need to correct the dictionary pattern can be automatically generated.
【0045】また、本発明の認識辞書学習装置によれ
ば、辞書パターンの初期設定を行う初期値設定手段と、
学習用に用意した入力パターン群の中から1つの入力パ
ターンを選択する入力手段と、該入力パターンと同じカ
テゴリに属する辞書パターン群の中から該入力パターン
との不一致度が最小となる第1の辞書パターンおよびそ
の第1の不一致度と、該入力パターンと異なるカテゴリ
に属する辞書パターン群の中から該入力パターンとの不
一致度が最小となる第2の辞書パターンおよびその第2
の不一致度とを求める辞書検索手段と、辞書パターンを
修正する頻度を計算する修正頻度計算手段と、該修正頻
度に従って第1の辞書パターンの不感領域が大きくなる
ように、かつ第2の辞書パターンの不感領域が小さくな
るように修正する辞書修正手段と、辞書パターンの学習
の終了を判定する終了判定手段とを備えるようにしたこ
とにより、辞書パターンの不感領域が自動的に設定され
るので、人間が試行錯誤で辞書パターンを修正する必要
がない高精度の認識辞書を自動生成することができると
いう効果がある。Further, according to the recognition dictionary learning apparatus of the present invention, initial value setting means for initial setting of a dictionary pattern,
An input unit for selecting one input pattern from a group of input patterns prepared for learning; and a first unit for minimizing the degree of mismatch with the input pattern from a dictionary pattern group belonging to the same category as the input pattern. A dictionary pattern and a first degree of inconsistency thereof, and a second dictionary pattern and a second dictionary pattern thereof in which the degree of inconsistency between the input pattern and a dictionary pattern belonging to a category different from the input pattern is minimized.
Search means for calculating the degree of inconsistency of the first dictionary pattern, correction frequency calculation means for calculating the frequency of correcting the dictionary pattern, and a second dictionary pattern in which the dead area of the first dictionary pattern is increased according to the correction frequency. By providing a dictionary correction means for correcting the dead area of the dictionary to be smaller and an end determination means for determining the end of learning of the dictionary pattern, the dead area of the dictionary pattern is automatically set. There is an effect that a highly accurate recognition dictionary that does not require a human to correct a dictionary pattern by trial and error can be automatically generated.
【図1】本発明の一実施の形態に係る認識辞書学習方法
を適用した認識辞書学習装置の基本構成および動作処理
手順を示したブロック図兼フローチャートである。FIG. 1 is a block diagram and a flowchart showing a basic configuration and an operation processing procedure of a recognition dictionary learning apparatus to which a recognition dictionary learning method according to an embodiment of the present invention is applied.
【図2】図1中の辞書修正手段および修正頻度計算手段
の処理を示すフローチャートである。FIG. 2 is a flowchart showing processing of a dictionary correction unit and a correction frequency calculation unit in FIG.
【図3】本実施の形態に係る認識辞書学習方法および装
置で用いる入力パターンの値および辞書パターンの値を
説明する図である。FIG. 3 is a diagram illustrating values of input patterns and dictionary patterns used in the recognition dictionary learning method and apparatus according to the present embodiment.
【図4】本実施の形態に係る認識辞書学習方法および装
置における辞書の修正方法を説明するための図である。FIG. 4 is a diagram for explaining a dictionary correction method in the recognition dictionary learning method and apparatus according to the present embodiment.
【図5】マトリクス・マッチング法を説明するための図
である。FIG. 5 is a diagram for explaining a matrix matching method.
【図6】従来の辞書パターンの作成方法を説明するため
の原理ブロック図である。FIG. 6 is a principle block diagram for explaining a conventional dictionary pattern creation method.
101 初期値設定手段(段階) 102 入力手段(段階) 103 辞書検索手段(段階) 104 辞書修正手段(段階) 105 修正頻度計算手段(段階) 106 終了判定手段(段階) Reference Signs List 101 Initial value setting means (step) 102 Input means (step) 103 Dictionary search means (step) 104 Dictionary correction means (step) 105 Correction frequency calculation means (step) 106 Termination determination means (step)
Claims (4)
ーン認識装置で用いられる認識辞書の学習方法におい
て、 辞書パターンの初期設定を行う初期値設定段階と、 学習用に用意した入力パターン群の中から1つの入力パ
ターンを選択する入力段階と、 該入力パターンと同じカテゴリに属する辞書パターン群
の中から該入力パターンとの不一致度が最小となる第1
の辞書パターンおよびその第1の不一致度と、該入力パ
ターンと異なるカテゴリに属する辞書パターン群の中か
ら該入力パターンとの不一致度が最小となる第2の辞書
パターンおよびその第2の不一致度とを求める辞書検索
段階と、 辞書パターンを修正する頻度を計算する修正頻度計算段
階と、 該修正頻度に従って第1の辞書パターンの不感領域が大
きくなるように、かつ第2の辞書パターンの不感領域が
小さくなるように修正する辞書修正段階と、 辞書パターンの学習の終了を判定する終了判定段階とを
含むことを特徴とする認識辞書学習方法。1. A method for learning a recognition dictionary used in a pattern recognition apparatus based on a matrix matching method, comprising: an initial value setting step for initial setting of a dictionary pattern; and one of input pattern groups prepared for learning. An input step of selecting an input pattern; and a first step of minimizing a degree of mismatch with the input pattern from a dictionary pattern group belonging to the same category as the input pattern.
And the second dictionary pattern and the second degree of mismatch that minimize the degree of mismatch with the input pattern from a group of dictionary patterns belonging to a category different from the input pattern. , A correction frequency calculation step of calculating a frequency of correcting the dictionary pattern, and a dead area of the first dictionary pattern is increased according to the correction frequency. A recognition dictionary learning method, comprising: a dictionary modification step of modifying the dictionary pattern to be smaller; and an end determination step of determining an end of learning of the dictionary pattern.
ーン認識装置で用いられる認識辞書の学習方法を適用し
た認識辞書学習装置において、 辞書パターンの初期設定を行う初期値設定手段と、 学習用に用意した入力パターン群の中から1つの入力パ
ターンを選択する入力手段と、 該入力パターンと同じカテゴリに属する辞書パターン群
の中から該入力パターンとの不一致度が最小となる第1
の辞書パターンおよびその第1の不一致度と、該入力パ
ターンと異なるカテゴリに属する辞書パターン群の中か
ら該入力パターンとの不一致度が最小となる第2の辞書
パターンおよびその第2の不一致度とを求める辞書検索
手段と、 辞書パターンを修正する頻度を計算する修正頻度計算手
段と、 該修正頻度に従って第1の辞書パターンの不感領域が大
きくなるように、かつ第2の辞書パターンの不感領域が
小さくなるように修正する辞書修正手段と、 辞書パターンの学習の終了を判定する終了判定手段とを
有することを特徴とする認識辞書学習装置。2. A recognition dictionary learning apparatus to which a recognition dictionary learning method used in a pattern recognition apparatus based on a matrix matching method is applied, wherein initial value setting means for performing initial setting of a dictionary pattern, and an input prepared for learning. An input unit that selects one input pattern from a group of patterns; and a first unit that minimizes a degree of mismatch with the input pattern from a group of dictionary patterns belonging to the same category as the input pattern.
And the second dictionary pattern and the second degree of mismatch that minimize the degree of mismatch with the input pattern from a group of dictionary patterns belonging to a category different from the input pattern. , A correction frequency calculation means for calculating the frequency of correcting the dictionary pattern, and a dead area of the first dictionary pattern is increased according to the correction frequency. A recognition dictionary learning apparatus, comprising: a dictionary correction unit for correcting a dictionary pattern to be smaller; and an end determination unit for determining the end of learning of a dictionary pattern.
て、前記第1の不一致度と前記第2の不一致度との差が
小さいほど辞書パターンを修正する頻度を高くするよう
に修正頻度を計算する前記修正頻度計算段階を含むこと
を特徴とする認識辞書学習方法。3. The recognition dictionary learning method according to claim 1, wherein the correction frequency is calculated such that the smaller the difference between the first degree of mismatch and the second degree of mismatch, the higher the frequency of correcting the dictionary pattern. A learning method for learning a recognition dictionary.
て、前記第1の不一致度と前記第2の不一致度との差が
小さいほど辞書パターンを修正する頻度を高くするよう
に修正頻度を計算する前記修正頻度計算手段を備えるこ
とを特徴とする認識辞書学習装置。4. The recognition dictionary learning apparatus according to claim 2, wherein the correction frequency is calculated so that the smaller the difference between the first degree of mismatch and the second degree of mismatch, the higher the frequency of correcting the dictionary pattern. A recognition dictionary learning device comprising the correction frequency calculating means.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP8235955A JP2937235B2 (en) | 1996-08-19 | 1996-08-19 | Recognition dictionary learning method and apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP8235955A JP2937235B2 (en) | 1996-08-19 | 1996-08-19 | Recognition dictionary learning method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH1063857A JPH1063857A (en) | 1998-03-06 |
JP2937235B2 true JP2937235B2 (en) | 1999-08-23 |
Family
ID=16993695
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP8235955A Expired - Fee Related JP2937235B2 (en) | 1996-08-19 | 1996-08-19 | Recognition dictionary learning method and apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2937235B2 (en) |
-
1996
- 1996-08-19 JP JP8235955A patent/JP2937235B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH1063857A (en) | 1998-03-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3088171B2 (en) | Self-organizing pattern classification system and classification method | |
CN111814466B (en) | Information extraction method based on machine reading understanding and related equipment thereof | |
Myers et al. | Bayesian graph edit distance | |
JP2882569B2 (en) | Document format recognition execution method and apparatus | |
US5040222A (en) | Pattern generation method for registering handwriting | |
JP3260979B2 (en) | Character recognition method | |
CN110825857B (en) | Multi-round question and answer identification method and device, computer equipment and storage medium | |
US6643647B2 (en) | Word string collating apparatus, word string collating method and address recognition apparatus | |
US5787197A (en) | Post-processing error correction scheme using a dictionary for on-line handwriting recognition | |
CN112149825A (en) | Neural network model training method and device, electronic equipment and storage medium | |
CN116186658A (en) | User identity verification data processing system | |
US5555439A (en) | Learning system and a learning pattern showing method for a neural network | |
JP2937235B2 (en) | Recognition dictionary learning method and apparatus | |
CN113177405A (en) | Method, device and equipment for correcting data errors based on BERT and storage medium | |
CN115909381A (en) | Text image recognition method, system and related device | |
CN114970732A (en) | Posterior calibration method and device for classification model, computer equipment and medium | |
JP4614582B2 (en) | Partial template generator | |
JP3303253B2 (en) | Pattern matching method and apparatus | |
JP7367857B2 (en) | Model generation device, model generation method, image processing device, image processing method, and program | |
JP2882327B2 (en) | Line figure matching device | |
JPH10340348A (en) | Image aligning method, facsimile character recognizing method and recording medium | |
JPH0581471A (en) | Method for deciding aray direction of character in image | |
JP3162419B2 (en) | Recognition dictionary update method | |
JP3213151B2 (en) | Learning method and learning device for pattern recognition device using neural network | |
CN115984869A (en) | Text correction method and device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080611 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090611 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100611 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100611 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110611 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110611 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120611 Year of fee payment: 13 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120611 Year of fee payment: 13 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130611 Year of fee payment: 14 |
|
LAPS | Cancellation because of no payment of annual fees |