JP3301467B2 - Image pattern identification and recognition method - Google Patents

Image pattern identification and recognition method

Info

Publication number
JP3301467B2
JP3301467B2 JP29179494A JP29179494A JP3301467B2 JP 3301467 B2 JP3301467 B2 JP 3301467B2 JP 29179494 A JP29179494 A JP 29179494A JP 29179494 A JP29179494 A JP 29179494A JP 3301467 B2 JP3301467 B2 JP 3301467B2
Authority
JP
Japan
Prior art keywords
pattern
character
recognition
binary mask
category
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP29179494A
Other languages
Japanese (ja)
Other versions
JPH07282199A (en
Inventor
紀博 萩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP29179494A priority Critical patent/JP3301467B2/en
Publication of JPH07282199A publication Critical patent/JPH07282199A/en
Application granted granted Critical
Publication of JP3301467B2 publication Critical patent/JP3301467B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Character Discrimination (AREA)
  • Image Analysis (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は入力パターンが白または
黒で表わされる2値パターンの画像パターン同定・認識
方法に関する。2値パターンの代表例である印刷漢字、
手書き漢字、英数字、記号、数式、図形など多くの文字
・図形カテゴリを対象とする場合には、かすれ、つぶれ
などの雑音が加わった画像、縞模様などからなるデザイ
ン処理を施した文字画像、さらには白抜き文字などを認
識する文字認識方法に適用できる。また災害、医療など
で用いる多項目の診断結果をもとに、システムで起きる
複数の障害や病気のカテゴリを認識する方法にも適用で
きる。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method for identifying and recognizing a binary pattern in which an input pattern is expressed in white or black. Printed kanji, which is a typical example of a binary pattern,
When targeting many character and figure categories such as handwritten kanji, alphanumeric characters, symbols, mathematical formulas, figures, etc. Further, the present invention can be applied to a character recognition method for recognizing white characters and the like. Also, the present invention can be applied to a method of recognizing a plurality of categories of disorders and illnesses occurring in the system based on the results of diagnosis of various items used in disasters, medical treatment, and the like.

【0002】[0002]

【従来の技術】従来、漢字OCR(Optical Characte
r Reader)などの文字認識処理装置や図面認識装置で
は、文字や図形パターンから認識のための特徴をベクト
ルの形で抽出し、予め作成してある標準辞書内の各カテ
ゴリの標準パターンベクトルとの間で類似度または相違
度などの識別関数を求めて、もっとも類似した文字また
は図形カテゴリを認識結果とする方法が知られている。
従来の文字認識などの特徴ベクトルの要素には、文字線
の方向や接続関係、位置関係などの文字線構造を反映し
た特徴量が広く用いられているが、特異なテキスチャで
構成されているデザイン文字や、かすれ、つぶれ、文字
背景雑音などが激しい画像に対して、これらの特徴量が
大きく変動してしまい、十分な認識精度を得ることがほ
とんど不可能であった。
2. Description of the Related Art Conventionally, kanji OCR (Optical Characte
r Reader) and character recognition processing devices and drawing recognition devices extract features for recognition from characters and graphic patterns in the form of vectors and compare them with standard pattern vectors of each category in a standard dictionary created in advance. A method is known in which a discriminant function such as a similarity or a difference is obtained between the characters and a category of the most similar character or figure is determined as a recognition result.
Conventionally, features that reflect the character line structure, such as character line direction, connection relationship, and positional relationship, are widely used as elements of feature vectors such as character recognition.However, designs with unique textures For images in which characters, blurring, crushing, character background noise, and the like are intense, these feature amounts greatly fluctuate, making it almost impossible to obtain sufficient recognition accuracy.

【0003】また、従来の文字認識で入力の白黒パター
ンを特徴ベクトルの要素とし、予め作成してある標準辞
書内の各カテゴリの標準パターンベクトル(特徴ベクト
ルと同様に2値パターンで表現)との間で共に黒画素と
なる数をもとにした識別関数として、単純類似度が知ら
れている。しかし、この方法では、特異なテキスチャで
構成されているデザイン文字や文字背景雑音などが激し
い画像に対して、標準パターンベクトルの黒画素数が多
いカテゴリに誤認識してしまう問題があった。
[0003] In addition, a black-and-white pattern input by conventional character recognition is used as an element of a feature vector, and a standard pattern vector of each category in a standard dictionary created in advance (expressed as a binary pattern like a feature vector) is used. Simple similarity is known as a discriminant function based on the number of black pixels between them. However, this method has a problem that an image composed of peculiar textures, such as design characters or character background noise, is erroneously recognized as a category having a large number of black pixels in the standard pattern vector.

【0004】[0004]

【発明が解決しようとする課題】上記のように、従来の
OCRをはじめとする認識技術は、デザイン文字、かす
れ、つぶれ、文字背景雑音、白ぬき文字混在などによっ
て誤認識となる文字などを正しく認識できる手法が十分
に確立していないという問題点があった。本発明の目的
は、デザイン文字やかすれ、つぶれなどの激しい文字変
形、白ぬき文字が混在した文字列などに対処できる認識
機能をもつ画像パターンの同定・認識方法を提供するこ
とにある。
As described above, the conventional OCR and other recognition techniques correctly recognize characters that are erroneously recognized due to design characters, blurring, crushing, character background noise, and mixed white characters. There was a problem that a recognizable method was not sufficiently established. SUMMARY OF THE INVENTION An object of the present invention is to provide an image pattern identification / recognition method having a recognition function capable of coping with severe character deformation such as design characters, blurring, and crushing, and character strings in which white characters are mixed.

【0005】[0005]

【課題を解決するための手段】上記目的を達成するため
に請求項1に記載の発明は、入力された2値画像パター
ンに対して、予め作成済みの認識カテゴリ毎の各2値マ
スクパターンと照合して該2値画像パターンが属する認
識カテゴリを決定する画像パターン同定・認識方法であ
って、前記入力2値画像パターンの黒部を計数する第1
ステップと、前記入カ2値画像パターンの黒部が、前記
認識カテゴリ毎の2値マスクパターンの黒部に含まれる
個数を計数する第2ステップと、前記第2のステップで
計数した数(以下Ciという(iはカテゴリ数))と前
記認識カテゴリ毎の黒部の数(以下Biという(iはカ
テゴリ数))を比較する第3のステップと、前記前記第
1のステップで計数した数(以下Aという)とCiを比
較する第4のステップを有し、 前記第3のステップでC
i≦Biかつ前記第4のステップでA=Ciとなる認識
カテゴリiがただ一つしか存在しない場合に、前記入力
2値画像パターンは前記認識カテゴリiに属するとする
同定手順を有することを特徴とする。
[MEANS FOR SOLVING THE PROBLEMS] To achieve the above object
The invention according to claim 1, wherein the input binary image pattern
For each of the previously created binary categories for each recognition category,
The pattern to which the binary image pattern belongs.
Image category identification and recognition method
Thus, the first step of counting the black portions of the input binary image pattern
Step and the black portion of the input binary image pattern
Included in the black part of the binary mask pattern for each recognition category
A second step of counting the number, and the second step
The number counted (hereinafter referred to as Ci (i is the number of categories))
The number of black parts for each recognition category (hereinafter referred to as Bi (i is
A third step of comparing the number of categories)),
Ratio of the number counted in one step (hereinafter referred to as A) to Ci
A fourth step of compare, C in the third step
Recognition where i ≦ Bi and A = Ci in the fourth step
If there is only one category i, enter
Assume that the binary image pattern belongs to the recognition category i
It has an identification procedure .

【0006】また、請求項2に記載の発明は、請求項1
記載の画像パターン同定・認識方法において、前記第3
のステップでCi≦Biかつ前記第4のステップでA=
Ciとなる認識カテゴリiが複数存在する場合に、前記
入力2値画像パターンを棄却する棄却手順を有すること
を特徴とする。
[0006] The invention described in claim 2 is the invention according to claim 1.
In the image pattern identification / recognition method described in the above,
In the step, Ci ≦ Bi and in the fourth step, A =
When there are a plurality of recognition categories i serving as Ci,
Have a rejection procedure to reject the input binary image pattern
It is characterized by.

【0007】また、請求項3に記載の発明は、入力され
た2値画像パターンに対して、予め作成済みの認識カテ
ゴリ毎の各2値マスクパターンと照合して該2値画像パ
ターンが属する認識カテゴリを決定する画像パターン同
定・認識方法であって、前記入力2値画像パターンの白
部を計数する第1ステップと、前記入カ2値画像パター
ンの白部が、前記認識カテゴリ毎の2値マスクパターン
の白部に含まれる個数を計数する第2ステップと、前記
第2のステップで計数した数(以下Ciという(iはカ
テゴリ数))と前記認識カテゴリ毎の白部の数(以下B
iという(iはカテゴリ数))を比較する第3のステッ
プと、前記前記第1のステップで計数した数(以下Aと
いう)とCiを比較する第4のステップを有し、前記第
3のステップでCi≦Biかつ前記第4のステップでA
=Ciとなる認識カテゴリiがただ一つしか存在しない
場合に、前記入力2値画像パターンは前記認識カテゴリ
iに属するとする同定手順を有することを特徴とする。
[0007] Further , the invention according to claim 3 provides an input
A recognition category created in advance for the binary image pattern
The binary image pattern is compared with each binary mask pattern for each
The image pattern that determines the recognition category to which the turn belongs
A method of determining and recognizing a white image of the input binary image pattern.
A first step of counting the number of copies, the input binary image pattern
Is the binary mask pattern for each recognition category
A second step of counting the number included in the white part of the
The number counted in the second step (hereinafter referred to as Ci (i is
Number of categories)) and the number of white parts for each recognition category (hereinafter B
i (where i is the number of categories)
And the number counted in the first step (hereinafter A and A)
A fourth step of comparing Ci) with Ci.
In the third step, Ci ≦ Bi and in the fourth step, A
= Ci, there is only one recognition category i
If the input binary image pattern is in the recognition category
It has an identification procedure that belongs to i.

【0008】また、請求項4に記載の発明は、請求項3
記載の画像パターン同定・認識方法において、前記第3
のステップでCi≦Biかつ前記第4のステップでA=
Ciとなる認識カテゴリiが複数存在する場合に、前記
入力2値画像パターンを棄却する棄却手順を有すること
を特徴とする。
[0008] The invention described in claim 4 is the invention according to claim 3.
In the image pattern identification / recognition method described in the above,
In the step, Ci ≦ Bi and in the fourth step, A =
When there are a plurality of recognition categories i serving as Ci,
Have a rejection procedure to reject the input binary image pattern
It is characterized by.

【0009】[0009]

【0010】[0010]

【作用】上記構成によれば、入力された2値画像パター
ンと、予め作成済みの認識カテゴリ毎の各2値マスクパ
ターンを照合して、該2値画像パターンが属する認識カ
テゴリを効率よく同定、認識または棄却することができ
る。
According to the above arrangement, the input binary image pattern
And a binary mask pattern for each recognition category that has been created in advance.
By checking the turn, the recognition pattern to which the binary image pattern belongs
Efficiently identify, recognize or reject categories
You.

【0011】[0011]

【実施例】以下、本発明の一実施例について図面により
説明する。図1は本発明の方法を適用する画像パターン
同定・認識処理装置の構成例を示すブロック図で、1は
2値画像パターン記憶回路、2は正規化処理回路、3は
2値マスクパターン記憶回路、4は同定・認識判定回
路、5は2値マスクパターン作成回路、6は画像入出力
装置である。2値画像パターン記憶回路1は、同定また
は認識する文字や図形の2値画像パターンを記憶してい
る。該2値画像パターンはn画素からなり、例えば白画
素は“0”、黒画素は“1”である。
An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing a configuration example of an image pattern identification / recognition processing apparatus to which the method of the present invention is applied. 1 is a binary image pattern storage circuit, 2 is a normalization processing circuit, and 3 is a binary mask pattern storage circuit. 4 is an identification / recognition determination circuit, 5 is a binary mask pattern creation circuit, and 6 is an image input / output device. The binary image pattern storage circuit 1 stores a binary image pattern of a character or a figure to be identified or recognized. The binary image pattern is composed of n pixels, for example, white pixels are “0” and black pixels are “1”.

【0012】正規化処理回路2は、2値画像パターン記
憶回路1から取り出されたn画素からなる2値画像パタ
ーンを入力し、例えば、従来から知られている重心と2
次モーメントを用いて位置および大きさの正規化処理を
行う。2値マスクパターン記憶回路3は、入力画像パタ
ーンの同定および認識判定に用いる各カテゴリの2値マ
スクパターンを、あらかじめ各カテゴリ毎に一つあるい
は複数(一般には複数)記憶している。
The normalization processing circuit 2 inputs a binary image pattern composed of n pixels extracted from the binary image pattern storage circuit 1 and, for example, calculates a conventionally known centroid and 2
The position and size are normalized using the next moment. The binary mask pattern storage circuit 3 stores in advance one or more (generally a plurality) binary mask patterns of each category used for identification and recognition determination of an input image pattern.

【0013】同定・認識判定回路4は、正規化処理回路
2からn画素の2値画像パターンを入力し、2値マスク
パターン記憶回路3の各カテゴリの2値マスクパターン
と照合して、例えば、入力画像パターンの黒部(または
白部)が特定のカテゴリの2値マスクパターンの黒部
(または白部)に含まれ、かつ、その2値マスクパター
ン黒部(または白部)と他のカテゴリの2値マスクパタ
ーン黒部(または白部)との重複部分だけに含まれてい
なければ、その特定のカテゴリであると同定、認識し、
入力画像パターンの黒部(または白部)がその重複部分
だけに含まれている場合は棄却し、それ以外の場合は入
力画像パターンの白部または黒部の情報をもとに、公知
の類似度等の識別関数または白ぬき文字などを高精度に
認識する識別関数による認識または棄却を行い、認識結
果を出力する。
The identification / recognition determination circuit 4 receives the binary image pattern of n pixels from the normalization processing circuit 2 and compares it with the binary mask pattern of each category in the binary mask pattern storage circuit 3 to, for example, The black part (or white part) of the input image pattern is included in the black part (or white part) of the binary mask pattern of the specific category, and the binary mask pattern black part (or white part) and the binary of the other category If it is not included only in the overlapping part with the black part (or white part) of the mask pattern, it will be identified and recognized as that particular category,
If the black portion (or white portion) of the input image pattern is included only in the overlapping portion, the image is rejected. Otherwise, the similarity or the like is known based on the white or black portion of the input image pattern. Or a recognition function using a recognition function that recognizes white characters or the like with high accuracy, and outputs a recognition result.

【0014】2値マスクパターン作成回路5は、画像入
出力装置6から出力される画像情報および正規化処理回
路2から追加・更新または新規作成カテゴリの正規化さ
れた2値画像パターンを入力し、2値マスクパターンを
作成する。該2値マスクパターン作成回路5で作成され
た2値マスクパターンが、2値マスクパターン記憶回路
3に新規に登録、あるいは、該2値マスクパターン記憶
回路3の内容に追加・更新される。
The binary mask pattern creation circuit 5 receives the image information output from the image input / output device 6 and the normalized binary image pattern of the added / updated or newly created category from the normalization processing circuit 2. Create a binary mask pattern. The binary mask pattern created by the binary mask pattern creation circuit 5 is newly registered in the binary mask pattern storage circuit 3, or added to or updated in the contents of the binary mask pattern storage circuit 3.

【0015】画像入出力装置6は、同定・認識判定回路
4から出力される文字または図形カテゴリ番号、識別関
数値、2値画像パターンなどの分類結果の情報を入力
し、該情報を表示し、また、例えば、キーボードやマウ
スなどによって画像情報を入力し、表示する。さらに、
該画像入出力装置6は2値マスクパターン作成回路5に
2値マスクパターンの新規作成または更新に必要となる
情報を送出する。
The image input / output device 6 inputs classification result information such as a character or graphic category number, a discrimination function value, and a binary image pattern output from the identification / recognition determination circuit 4, and displays the information. In addition, for example, image information is input and displayed using a keyboard, a mouse, or the like. further,
The image input / output device 6 sends information required for newly creating or updating a binary mask pattern to the binary mask pattern creating circuit 5.

【0016】初めに、図1を参照して、入力画像パター
ンの同定および認識処理について説明する。2値画像パ
ターン記憶回路1から同定・認識対象文字の2値画像パ
ターンが読み出され、正規化処理回路2において該文字
画像パターンに対して位置および大きさの正規化が行わ
れた後、同定・認識判定回路4に入力される。ここで、
正規化処理回路2で正規化された文字画像パターンを正
規化文字パターンXと呼ぶことにする。正規化文字パタ
ーンXは、X=(x1,x2,…,xi,…xn)なるn個
の要素をもつベクトルで表現でき、各要素xiは画像位
置i(=1,2,…,n)の画素値(例えばxi
“0”を白点、xi=“1”を黒点とする)を表す。
First, the identification and recognition processing of an input image pattern will be described with reference to FIG. After the binary image pattern of the character to be identified / recognized is read out from the binary image pattern storage circuit 1 and the position and size of the character image pattern are normalized in the normalization processing circuit 2, the identification is performed. Input to the recognition determination circuit 4; here,
The character image pattern normalized by the normalization processing circuit 2 is referred to as a normalized character pattern X. Normalized character pattern X is, X = (x 1, x 2, ..., x i, ... x n) can be represented by a vector having made n elements, each element x i is the image position i (= 1, 2 ,..., N) (eg, x i =
“0” is a white point, and x i = “1” is a black point).

【0017】同定・認識判定回路4は、正規化文字パタ
ーンXに対して、2値マスクパターン記憶回路3の第j
文字カテゴリ(j=1,2,…,J)のk番目(k=
1,2,…,Kj)の2値マスクパターンMjkと照合す
る。MjkはMjk=(m1,m2,…mi,…,mnjkで表
すと、各miは2値をとり、例えばmi=“0”ならば白
点、mi=“1”なら黒点を表す。
The identification / recognition determination circuit 4 stores the normalized character pattern X in the j-th mask pattern storage circuit 3.
The k-th character (k = k) of the character category (j = 1, 2,..., J)
1, 2,..., K j ) are compared with the binary mask pattern M jk . M jk is M jk = (m 1, m 2, ... m i, ..., m n) is represented by jk, each m i takes a binary, for example m i = "0" if the white point, m i = “1” indicates a black point.

【0018】照合の例として、正規化文字パターンXと
2値マスクパターンMjkとを照合する場合を説明する。
図2に、処理フローチャートの一例を示す。はじめに、
正規化文字パターンXの要素xiと2値マスクパターン
jkの要素miとの間で、(a)xi=“1”となる個数
Aと、(b)mi=“1”となる個数Bjkと、(c)xi
=“1”かつmi=“1”となる個数Cjkと、(d)xi
=“1”かつmi=“0”となる個数Djkと、を計数す
る(ステップ101)。
As an example of the comparison, a case where the normalized character pattern X and the binary mask pattern Mjk are compared will be described.
FIG. 2 shows an example of the processing flowchart. First,
Between the normalized character pattern X of the elements x i and binary elements m i of the mask pattern M jk, and the number A of the (a) x i = "1 ", and (b) m i = "1 " The number B jk and (c) x i
= “1” and the number C jk such that m i = “1”, and (d) x i
= “1” and the number D jk for which m i = “0” are counted (step 101).

【0019】次に、以下に示す条件(1)から条件
(3)まで、順に判定処理を行い、同定、棄却、認識を
判定する(ステップ102)。 条件(1):もし、Cjk≦BjkかつA=Cjkを満たす文
字カテゴリjがただ1個のカテゴリしか存在しない場
合、入力文字は文字カテゴリjに同定できたと判定する
(ステップ110)。 条件(2):もし、Cjk≦BjkかつA=Cjkを満たす文
字カテゴリjが2個以上存在する場合、入力文字は棄却
と判定する(ステップ120)。 条件(3):条件(1)、条件(2)を満す文字カテゴ
リが1個もない場合は、正規化文字パターンXと2値マ
スクパターンMjkとの間で、背景雑音の激しい文字や白
抜き文字を認識する識別関数あるいは公知の識別関数を
用いて認識処理を行い(ステップ103)、認識または
棄却を判定する(ステップ104)。そして、認識され
た場合、その文字カテゴリを候補カテゴリとする(ステ
ップ130)。
Next, determination processing is performed in order from condition (1) to condition (3) shown below, and identification, rejection, and recognition are determined (step 102). Condition (1): If there is only one character category j that satisfies C jk ≦ B jk and A = C jk , it is determined that the input character has been identified as the character category j (step 110). Condition (2): If there are two or more character categories j satisfying C jk ≦ B jk and A = C jk , it is determined that the input character is rejected (step 120). Condition (3): When there is no character category that satisfies the conditions (1) and (2), a character with a strong background noise between the normalized character pattern X and the binary mask pattern Mjk Recognition processing is performed using an identification function for recognizing outline characters or a known identification function (step 103), and recognition or rejection is determined (step 104). If the character category is recognized, the character category is set as a candidate category (step 130).

【0020】ここで、条件(3)の場合の認識処理(ス
テップ103)の一実施例として、識別関数に本発明に
よる新しい類似度SH(X,Mjk)を用いる場合につい
て説明する。即ち、正規化文字パターンXの黒画素数A
に対して、次式で表す類似度SH(X,Mjk)を計算す
る。
Here, as an embodiment of the recognition processing (step 103) in the case of the condition (3), a case where a new similarity S H (X, M jk ) according to the present invention is used for a discrimination function will be described. That is, the number of black pixels A of the normalized character pattern X
, A similarity S H (X, M jk ) represented by the following equation is calculated.

【0021】[0021]

【数1】 (Equation 1)

【0022】認識の判定結果としては、最大の類似度を
もつ文字カテゴリjを第1位に認識した文字カテゴリと
して出力する。この場合、類似度SH(X,Mjk)は文
字線の方向や接続関係などの文字線構造に関する特徴量
を抽出しなくてすむため、特徴抽出の処理が簡易にな
り、しかも、かすれ、つぶれ、文字背景の雑音などによ
って、これらの文字線構造が変形しても認識性能に影響
を受けにくい特長を持っている。なお、条件(3)の場
合の認識処理では、上記類似度SH(X,Mjk)の絶対
値|SH(X,Mjk)|を識別関数に用いてもよい。
As a result of the recognition, the character category j having the highest similarity is output as the character category recognized first. In this case, since the similarity S H (X, M jk ) does not need to extract a feature amount related to the character line structure such as the direction of the character line and the connection relationship, the feature extraction process is simplified, and furthermore, the blur is reduced. It has a feature that even if these character line structures are deformed due to crushing, noise in the character background, or the like, the recognition performance is not easily affected. In the recognition processing in the case of the condition (3), the absolute value | S H (X, M jk ) | of the similarity S H (X, M jk ) may be used as the identification function.

【0023】次に、同定・認識・棄却判定処理の具体的
な処理を図3を参照して説明する。図3は、n=16
(画素)、2文字カテゴリ(j=1,2)、K1=1,
2=2の場合の正規化文字パターンXと2値マスクパ
ターンMjkとの例を示したものである。11は2値マス
クパターンM11(第1文字カテゴリの第1番目の2値マ
スクパターン)で、mi=“1”となる個数B11=8で
ある。12は2値マスクパターンM21(第2文字カテゴ
リの第1番目の2値マスクパターン)で、mi=“1”
となる個数B21=7である。 13は2値マスクパター
ンM22(第2文字カテゴリの第2番目の2値マスクパタ
ーン)で、mi=“1”となる個数B22=8である。2
1〜26は正規化文字パターンXの6つのパターン例で
ある。なお、正規化文字パターン25は正規化文字パタ
ーン24の正規化文字パターンを白黒反転した白抜き文
字パターンを示したものである。
Next, the specific processing of the identification / recognition / rejection determination processing will be described with reference to FIG. FIG. 3 shows that n = 16
(Pixel), 2 character category (j = 1, 2), K 1 = 1,
This shows an example of a normalized character pattern X and a binary mask pattern M jk when K 2 = 2. Numeral 11 denotes a binary mask pattern M 11 (the first binary mask pattern of the first character category), and the number B 11 = 8 when mi = "1". Reference numeral 12 denotes a binary mask pattern M 21 (the first binary mask pattern of the second character category), and m i = “1”
Is B 21 = 7. 13 is a binary mask pattern M 22 (first second binary mask pattern of the second character category), a number B 22 = 8 serving as m i = "1". 2
1 to 26 are six examples of the normalized character pattern X. It should be noted that the normalized character pattern 25 is a white character pattern obtained by inverting the normalized character pattern of the normalized character pattern 24 in black and white.

【0024】初めに、正規化文字パターン21の正規化
文字パターンXと2値マスクパターン11〜13の各2
値マスクパターンMjkとを照合する場合を説明する。x
i=“1”となる個数A=5で、xi=“1”かつmi
“1”となる個数はそれぞれC11=5,C21=4,C22
=3となり、2値マスクパターン11の2値マスクパタ
ーンM11だけが、条件(1)を満たすため、正規化文字
パターン21の正規化文字パターンXは、第1文字カテ
ゴリに同定される。
First, the normalized character pattern X of the normalized character pattern 21 and each of the binary mask patterns 11 to 13
The case of collating with the value mask pattern Mjk will be described. x
When the number A = 5 where i = “1”, x i = “1” and m i =
The numbers that become “1” are C 11 = 5, C 21 = 4, C 22, respectively.
= 3, only the binary mask pattern M 11 of the binary mask patterns 11, to satisfy the condition (1), the normalized character pattern X of the normalized character pattern 21 is identified in the first character category.

【0025】次に、正規化文字パターン22の正規化文
字パターンXの場合は、A=6で、xi=“1”かつmi
=“1”となる個数はそれぞれC11=5,C21=6,C
22=5となり、2値マスクパターンM21だけが、条件
(1)を満たすため、正規化文字パターン22の正規化
文字パターンXは、第2文字カテゴリに同定される。
Next, in the case of the normalized character pattern X of the normalized character pattern 22, A = 6, x i = “1” and m i
= “1” are respectively C 11 = 5, C 21 = 6, C
22 = 5, only the binary mask pattern M 21 is, to satisfy the condition (1), the normalized character pattern X of the normalized character pattern 22 is identified in the second character category.

【0026】次に、正規化文字パターン23の正規化文
字パターンXの場合は、A=4で、xi=“1”かつmi
=“1”となる個数はそれぞれC11=4,C21=4,C
22=3となり、2値マスクパターン11の2値マスクパ
ターンM11と2値マスクパターン12の2値マスクパタ
ーンM21が、条件(2)を満たすため、正規化文字パタ
ーン23の正規化文字パターンXは、棄却される。
Next, in the case of the normalized character pattern X of the normalized character pattern 23, A = 4, x i = “1” and m i
= “1” means that C 11 = 4, C 21 = 4, C
22 = 3, and the binary mask pattern M 11 of the binary mask pattern 11 and the binary mask pattern M 21 of the binary mask pattern 12 satisfy the condition (2). X is rejected.

【0027】また、正規化文字パターン24の正規化文
字パターンXの場合は、A=7で、xi=“1”かつmi
=“1”となる個数はそれぞれC11=5,C21=6,C
22=6となり、2値マスクパターン11〜13のいずれ
の2値マスクパターンも、条件(1)および(2)を満
たさないため、条件(3)の識別関数が実行される。
In the case of the normalized character pattern X of the normalized character pattern 24, A = 7, x i = “1” and m i
= “1” are respectively C 11 = 5, C 21 = 6, C
22 = 6, and none of the binary mask patterns 11 to 13 satisfies the conditions (1) and (2), so that the identification function of the condition (3) is executed.

【0028】この場合、正規化文字パターン24の正規
化文字パターンXと2値マスクパターン11〜13の各
2値マスクパターンMjkとの類似度SHは、
In this case, the similarity S H between the normalized character pattern X of the normalized character pattern 24 and each of the binary mask patterns M jk of the binary mask patterns 11 to 13 is:

【0029】[0029]

【数2】 (Equation 2)

【0030】となり、2値マスクパターン12の2値マ
スクパターンM21が最も類似度が高くなり、第2文字カ
テゴリが第1位の認識結果となる。
The next, the binary mask pattern M 21 is most similarity of the binary mask patterns 12 is increased, the second character category is the recognition result of the first position.

【0031】最後に、正規化パターン25の正規化パタ
ーンX、すなわち正規化文字パターン24を白黒反転し
た白ぬき文字パターンの場合は、A=9で、xi
“1”かつmi=“1”となる個数は、それぞれC11
3,C21=1,C22=2となり、2値マスクパターン1
1〜13のいずれの2値マスクパターンMjkも条件
(1)および(2)を満たさないため、条件(3)の識
別関数が実行される。ここで、識別関数として、上記の
類似度SH(X,Mjk)に代えて、その絶対値|S
H(X,Mjk)|を用いた場合、正規化文字パターン2
5の正規化文字パターンXと2値マスクパターン11〜
13の各2値マスクパターンMjkとの類似度|SH
は、
Finally, in the case of the normalized pattern X of the normalized pattern 25, that is, the white character pattern obtained by inverting the normalized character pattern 24 in black and white, A = 9 and x i =
The numbers of “1” and m i = “1” are C 11 =
3, C 21 = 1, C 22 = 2, binary mask pattern 1
Since the binary mask pattern M jk of any 1-13 also conditions (1) and does not satisfy the (2), the identification function of the condition (3) is executed. Here, instead of the similarity S H (X, M jk ), the absolute value | S
When H (X, Mjk ) | is used, the normalized character pattern 2
5 normalized character pattern X and binary mask patterns 11 to 11
13 with each binary mask pattern M jk | S H |
Is

【0032】[0032]

【数3】 (Equation 3)

【0033】となり、2値マスクパターン12の2値マ
スクパターンM21が最も類似度が高くなり、正規化文字
パターン24の白黒反転パターンである正規化文字パタ
ーン25に対しても、同様に第2文字カテゴリが第1位
の認識結果となる。
The binary mask pattern M 21 of the binary mask pattern 12 has the highest similarity, and the same applies to the normalized character pattern 25 which is a black-and-white inverted pattern of the normalized character pattern 24. The character category is the first recognition result.

【0034】次に、上述した条件(3)の認識処理(ス
テップ103)の他の実施例を説明する。次の実施例で
は、条件(3)の場合の認識処理における識別関数とし
て、下式に示す本発明による他の新規な類似度S
c(X,Mjk)を用いる。
Next, another embodiment of the recognition process (step 103) for the above condition (3) will be described. In the following embodiment, as a discriminant function in the recognition process in the case of the condition (3), another novel similarity S according to the present invention represented by the following expression is used.
c (X, M jk ) is used.

【0035】[0035]

【数4】 (Equation 4)

【0036】この新規の類似度Sc(X,Mjk)の分子
の項は、入力と2値マスクパターンで、 xi=“1”か
つmi=“1”となる個数Cjkとxi=“0”かつmi
“0”となる個数(n−Bjk−Djk)との積から、xi
=“0”かつmi=“1”となる個数(Bjk−Cjk)と
i=“1”かつmi=“0”となる個数Djkとの積を差
し引いた値から、 Cjk(n−Bjk−Djk)−(Bjk−Cjk)・Djk=n・
jk−A・Bjk と導いたものである。図3に示す正規化文字パターン2
4の正規化文字パターンXと各2値マスクパターン11
〜13の各2値マスクパターンMjkとの類似度Scは、
The term of the numerator of the new similarity S c (X, M jk ) is the number of C jk and x satisfies x i = “1” and m i = “1” in the input and the binary mask pattern. i = "0" and m i =
From the product of the number that becomes “0” (n−B jk −D jk ), x i
= "0" and the value obtained by subtracting the product of the m i = "1" and becomes the number (B jk -C jk) and x i = "1" and m i = "0" becomes the number D jk, C jk (n−B jk −D jk ) − (B jk −C jk ) · D jk = n ·
This is derived from C jk -A · B jk . Normalized character pattern 2 shown in FIG.
4 normalized character pattern X and each binary mask pattern 11
The similarity S c of each of the binary mask patterns M jk to 13 is

【0037】[0037]

【数5】 (Equation 5)

【0038】となり、類似度SH(X,Mjk)を用いた
場合と同様に、2値マスクパターン12の2値マスクパ
ターンM21が最も類似度が高くなり、第2文字カテゴリ
が第1位の認識結果となる。
As in the case where the similarity S H (X, M jk ) is used, the binary mask pattern M 21 of the binary mask pattern 12 has the highest similarity, and the second character category is the first character category. The result of the recognition of the position is obtained.

【0039】また、正規化文字パターン24を白黒反転
した白抜き文字パターンである正規化文字パターン25
の正規化文字パターンXの場合に、条件(3)の識別関
数の実行において、識別関数として類似度Sc(X,M
jk)の絶対値|Sc(X,Mj k)|を用いたとき、正規
化文字パターン25と各2値マスクパターン11〜13
との類似度|Sc|は、
A normalized character pattern 25 which is a white character pattern obtained by inverting the normalized character pattern 24 in black and white
In the case of the normalized character pattern X, the similarity S c (X, M
jk ), the normalized character pattern 25 and each of the binary mask patterns 11 to 13 are used when the absolute value | S c (X, M j k ) |
The similarity | S c |

【0040】[0040]

【数6】 (Equation 6)

【0041】となり、2値マスクパターン12の2値マ
スクパターンM21が最も類似度が高くなり、正規化文字
パターン24の場合と同様に、正規化文字パターン25
に対しても、第2文字カテゴリが第1位の認識結果とな
る。
The binary mask pattern M 21 of the binary mask pattern 12 has the highest similarity, and the normalized character pattern 25 is the same as the normalized character pattern 24.
, The second character category is the first recognition result.

【0042】次に、同定・棄却判定処理の他の方法を説
明する。この方法では、上記の条件(1)〜(3)の判
定において、識別関数に前述した新規の類似度S
c(X,Mj k)を用い処理を行う。なお、以下の説明で
は、上記の条件(1)〜(3)に対応する条件を、それ
ぞれ条件(1a)〜(3a)とする。
Next, another method of the identification / rejection determination processing will be described. In this method, in the determination of the above conditions (1) to (3), the new similarity S
Processing is performed using c (X, M j k ). In the following description, conditions corresponding to the above conditions (1) to (3) are referred to as conditions (1a) to (3a), respectively.

【0043】この同定・認識・棄却判定処理では、正規
化文字パターンXの要素xiと2値マスクパターンMjk
の要素miとの間で、前記のA、Bjk、Cjkを計数し
(ステップ101参照)、類似度Sc(X,Mjk)を計
算し、予め2値マスクパターン記憶回路3に格納された
各2値マスクパターンの同定しきい値tjkを用いて、以
下に示す条件(1a)〜(3a)の処理を順次行う(ス
テップ102参照)。なお、2値マスクパターンの同定
しきい値tjkの設定方法の詳細については、後述する。
In the identification / recognition / rejection determination process, the element x i of the normalized character pattern X and the binary mask pattern M jk
The elements A, B jk , and C jk are counted between the elements m i (see step 101), the similarity S c (X, M jk ) is calculated, and stored in the binary mask pattern storage circuit 3 in advance. The processing of the following conditions (1a) to (3a) is sequentially performed using the stored identification threshold value t jk of each binary mask pattern (see step 102). The details of the method of setting the identification threshold value t jk of the binary mask pattern will be described later.

【0044】条件(1a):Sc(X,Mjk)≧tjk
満たす文字カテゴリjがただ1個のカテゴリしか存在し
ない場合、入力文字は文字カテゴリjに同定できたと判
定する(ステップ110参照)。
Condition (1a): If there is only one character category j that satisfies S c (X, M jk ) ≧ t jk , it is determined that the input character has been identified as character category j (step 110). reference).

【0045】条件(2a):Sc(X,Mjk)≧tjk
満たす文字カテゴリjが2個以上存在する場合、入力文
字は棄却と判定する(ステップ120参照)。
Condition (2a): If there are two or more character categories j satisfying S c (X, M jk ) ≧ t jk , it is determined that the input character is rejected (see step 120).

【0046】条件(3a):条件(1a)または条件
(2a)を満す文字カテゴリが1個もない場合は、正規
化文字パターンXと2値マスクパターンMjkとの間で、
類似度Scを識別関数として用いて認識処理を行い(ス
テップ103参照)、類似度Sc(X,Mjk)≧ujk
満たす文字カテゴリjが存在する場合は、最も類似度が
高い、2値マスクパターンMjkの文字カテゴリを第1位
の認識結果として出力する(ステップ130参照)。他
方、類似度Sc(X,Mjk)≧ujkを満たす文字カテゴ
リjが存在しない場合、すなわち、すべての2値マスク
パターンMjkについて類似度Sc(X,Mjk)<ujk
なる場合は、認識棄却と判定する(ステップ120参
照)。なお、変数ujkは、各2値マスクパターンMjk
ついて、予め設定してある棄却判定のためのしきい値で
あり、同定しきい値tjkよりもさらに小さい値(uj k
jk)に設定されている。
Condition (3a): If there is no character category that satisfies condition (1a) or condition (2a), the normalized character pattern X and the binary mask pattern Mjk
A recognition process is performed using the similarity S c as a discriminant function (see step 103). If there is a character category j that satisfies the similarity S c (X, M jk ) ≧ u jk , The character category of the binary mask pattern Mjk is output as the first recognition result (see step 130). On the other hand, if there is no character category j that satisfies the similarity S c (X, M jk ) ≧ u jk , that is, the similarity S c (X, M jk ) <u jk for all the binary mask patterns M jk If so, it is determined that the recognition is rejected (see step 120). Incidentally, the variable u jk for each binary mask pattern M jk, is the threshold for rejection determination that is set in advance, even smaller than the identified threshold value t jk (u j k <
t jk ).

【0047】ここで、同定、棄却判定処理の具体的な処
理を再び図3を参照して説明する。初めに、正規化文字
パターン22の正規化文字パターンXと2値マスクパタ
ーン11〜13の各2値マスクパターンMjkと照合する
場合を説明する。正規化文字パターン22と各2値マス
クパターン11〜13との類似度Sc
Here, the specific processing of the identification / rejection determination processing will be described again with reference to FIG. First , a case where the normalized character pattern X of the normalized character pattern 22 is compared with the binary mask patterns Mjk of the binary mask patterns 11 to 13 will be described. The similarity S c between the normalized character pattern 22 and each of the binary mask patterns 11 to 13 is

【0048】[0048]

【数7】 (Equation 7)

【0049】となり、2値マスクパターンM21だけが条
件(1a)を満たすため、正規化文字パターン22の正
規化文字パターンXは第2文字カテゴリに同定される。
次に、正規化文字パターン26の場合は、2値マスクパ
ターン11〜13の各2値マスクパターンとの類似度S
cは、
The next, only the binary mask pattern M 21 is to satisfy the condition (1a), the normalized character pattern X of the normalized character pattern 22 is identified in the second character category.
Next, in the case of the normalized character pattern 26, the similarity S of each of the binary mask patterns 11 to 13 with each of the binary mask patterns is set.
c is

【0050】[0050]

【数8】 (Equation 8)

【0051】となり、2値マスクパターン11の2値マ
スクパターンM11と2値マスクパターン12の2値マス
クパターンM21が条件(2a)を満たすため、26の正
規化文字パターンXは棄却される。また、正規化文字パ
ターン23の場合は、各2値マスクパターン11〜13
との類似度Scは、
The next, since the binary mask pattern M 11 and binary binary mask pattern M 21 of the mask pattern 12 of the binary mask pattern 11 satisfies the condition (2a), the normalized character pattern X of 26 is rejected . In the case of the normalized character pattern 23, each of the binary mask patterns 11 to 13
The similarity S c with

【0052】[0052]

【数9】 (Equation 9)

【0053】となり、2値マスクパターン11〜13の
いずれの2値マスクパターンも条件(1a)及び条件
(2a)を満たさないため、条件(3a)の類似度Sc
の識別関数が実行される。条件(3a)では、2値マス
クパターン12の2値マスクパターンM21が最も類似度
が高いので、第2文字カテゴリが第1位の認識結果とな
る。
Since none of the binary mask patterns 11 to 13 satisfy the conditions (1a) and (2a), the similarity S c of the condition (3a) is satisfied.
Is executed. In condition (3a), because of the high binary mask pattern M 21 is most similarity of the binary mask pattern 12, the second character category is the recognition result of the first position.

【0054】次に、誤認識した文字や未学習の文字等か
ら2値マスクパターンを新規に作成し、2値マスクパタ
ーン記憶回路3の内容を追加・更新する処理について、
二、三の実施例を説明する。
Next, a process of newly creating a binary mask pattern from erroneously recognized characters or unlearned characters and adding / updating the contents of the binary mask pattern storage circuit 3 will be described.
A few embodiments will be described.

【0055】<実施例1>これは、入力画像パターンの
黒部または白部の情報をもとに、公知の識別関数として
次式に示す類似度Sを用いて、反復学習により2値マス
クパターンを作成する例である。
<Embodiment 1> In this embodiment, a binary mask pattern is formed by iterative learning using a similarity S represented by the following equation as a known discrimination function based on information on a black portion or a white portion of an input image pattern. This is an example of creating.

【0056】[0056]

【数10】 (Equation 10)

【0057】まず、画像入出力装置6から、追加・更新
または新規に作成(ここでは追加とする)すべき文字カ
テゴリ(第j文字カテゴリとする)に関する情報が2値
マスクパターン作成回路5に入力される。2値マスクパ
ターン作成回路5は、追加すべき入力画像に対して、正
規化処理回路2から得られる、学習すべき第j文字カテ
ゴリに属するN個の入力画像パターン(正規化文字パタ
ーン)X1,X2,…,XNについて、以下のステップで
新しい2値マスクパターンMj(k+1)を作成する。
First, information relating to a character category to be added / updated or newly created (added here) (hereinafter referred to as a j-th character category) is input to the binary mask pattern creation circuit 5 from the image input / output device 6. Is done. The binary mask pattern creation circuit 5 obtains N input image patterns (normalized character patterns) X 1 belonging to the j-th character category to be learned and obtained from the normalization processing circuit 2 for the input image to be added. , X 2 ,..., X N , a new binary mask pattern M j (k + 1) is created in the following steps.

【0058】(ステップ1)N個の入力画像パターンX
1,X2,…,XNについて、xi=“1”となる個数Aの
合計ATと画素位置iでxi=“1”となる入力画像パタ
ーンXの合計個数Aiを計数する。Aiを大きい順に並べ
替え、その列をA’1,A’2,…,A’l,…,A’n
おくと、予め設定したしきい値a(0<a<1)に対し
(Step 1) N input image patterns X
1, X 2, ..., the X N, which counts the total number A i of the input image pattern X as the x i = "1" a total of A T and the pixel position i of the number A of the x i = "1" . Sorted in descending order of A i, the column A '1, A' 2, ..., A 'l, ..., A' by placing the n, with respect to threshold a previously set (0 <a <1) hand

【0059】[0059]

【数11】 [Equation 11]

【0060】を満すLを求める。ただし、Nが小さい場
合、たとえばN=1の場合はa=1とする。
L that satisfies is obtained. However, when N is small, for example, when N = 1, a = 1.

【0061】(ステップ2)l=1,2,…,Lの各順
位に対応する画像位置iについて、2値マスクパターン
j(k+1)の要素をmi=“1”とし、それ以外の画像位
置iをmi=“0”に設定する。
(Step 2) For an image position i corresponding to each rank of l = 1, 2,..., L, the element of the binary mask pattern M j (k + 1) is set to m i = “1”. Image positions i other than are set to m i = “0”.

【0062】(ステップ3)N個の入力画像パターンX
1,X2,…,XNの各画像Xtとステップ2で作成した2
値マスクパターンMj(k+1)との間で類似度S(Xt,M
j(k+1))を計算し、最大類似度となる画像Xtを求め、
その画像Xtを新しい2値マスクパターンMj ( k+1)に置
き換える。
(Step 3) N input image patterns X
1, X 2, ..., created in the image X t and Step 2 of X N 2
Similarity S ( Xt , M ) with the value mask pattern Mj (k + 1).
j (k + 1) ) to obtain an image Xt having the maximum similarity.
The image Xt is replaced with a new binary mask pattern M j ( k + 1) .

【0063】(ステップ4)再度、N個の入力画像
1,X2,…,XNについて、各画像Xlと、すでに2値
マスクパターン記憶回路3に記憶されているすべての2
値マスクパターンMjkおよびステップ3で作成した2値
マスクパターンMj(k+1)との間で類似度Sを計算し、認
識する。もし、N個の画像すべてが第j文字カテゴリに
認識されればステップ6へ、さもなければステップ5へ
いく。
(Step 4) Again, for the N input images X 1 , X 2 ,..., X N , each image X l and all the 2 Xs already stored in the binary mask pattern storage circuit 3
The similarity S between the value mask pattern Mjk and the binary mask pattern Mj (k + 1) created in step 3 is calculated and recognized. If all N images are recognized as the j-th character category, go to step 6, otherwise go to step 5.

【0064】(ステップ5)第j文字カテゴリに正しく
認識されたM(<N)個の画像について、ステップ1お
よびステップ2と同様の手順で2値マスクパターンM
j(k+1)を作成し、2値マスクパターン記憶回路3に記憶
する。残りの(N−M)個の画像については、k=k+
1、N=N−Mとしてステップ1へもどる。
(Step 5) For the M (<N) images correctly recognized in the j-th character category, the binary mask pattern M
j (k + 1) is created and stored in the binary mask pattern storage circuit 3. For the remaining (N−M) images, k = k +
1. Return to step 1 as N = N−M.

【0065】(ステップ6)ステップ1およびステップ
2と同様の手順で2値マスクパターンMj(k+1)を作成
し、2値マスクパターン記憶回路3に記憶して終了とす
る。
(Step 6) A binary mask pattern M j (k + 1) is created in the same procedure as in steps 1 and 2, and stored in the binary mask pattern storage circuit 3 to end the processing.

【0066】<実施例2>これは、入力画像パターン
(サンプルパターン)の黒部または白部の情報をもと
に、類似度SHを用いて、反復学習により新規に各文字
カテゴリの2値マスクパターンおよび同定しきい値を作
成する例である。
<Embodiment 2> This is based on the information on the black part or the white part of the input image pattern (sample pattern), and by using the similarity S H by iterative learning, a new binary mask of each character category is obtained. It is an example of creating a pattern and an identification threshold.

【0067】まず、画像入出力装置6から、新規に作成
すべき文字カテゴリ(第j文字カテゴリとする)に関す
る情報が2値マスクパターン作成回路5に入力される。
2値マスクパターン作成回路5は入力画像に対して、正
規化処理回路2から得られる、新規に作成すべき文字カ
テゴリj=1,2,…,Jの各文字カテゴリについて、
以下のステップでKj個の2値マスクパターンMj1,M
j2,…,Mjk,…,Mj k jを作成する。
First, information relating to a character category to be newly created (referred to as a j-th character category) is input to the binary mask pattern creation circuit 5 from the image input / output device 6.
The binary mask pattern creation circuit 5 applies a character category j = 1, 2,..., J to be newly created, obtained from the normalization processing circuit 2, to the input image.
In the following steps, K j binary mask patterns M j1 , M
j2, ..., M jk, ... , to create a M j k j.

【0068】(ステップ1a)新規に作成すべき第j文
字カテゴリの2値マスクパターンの個数をKj=1とす
る。第j文字カテゴリに属するNj個の入力画像パター
ン(正規化文字パターン)X1,X2,…XNjについて、
i=“1”となる個数ATと画素位置iでxi=“1”
となる個数Aiを計数する。そして、画素位置iのxi
“1”となる個数の割合Ai/Njと全画素のxi
“1”となる個数の割合AT/(nNj)を次式のように
比べて、2値マスクパターンMj1を作成する。もし、A
i/Nj≧AT/(nNj)ならば、 Mj1の要素をmi=“1”に設定 さもなければ、 Mj1の要素をmi=“0”に設定 また、入力画像パターン(正規化文字パターン)X1
2,…,XNjに対して2値マスクパターンMj1の作成
に用いたパターンとしてラベルj1を割り当てる。新規
に作成すべき文字カテゴリすべてについて、上記処理を
行う。
(Step 1a) The number of binary mask patterns of the j-th character category to be newly created is set to K j = 1. For N j input image patterns (normalized character patterns) X 1 , X 2 ,... X Nj belonging to the j-th character category,
x i = “1” at the number A T where x i = “1” and the pixel position i
Counting the number A i to be. Then, x i at pixel position i =
The ratio A i / N j of the number of “1” and x i =
The binary mask pattern M j1 is created by comparing the ratio A T / (nN j ) of “1” with the following equation. If A
i / N j ≧ A T / if (nN j), setting the elements of M j1 to m i = "1" otherwise, set the element of M j1 to m i = "0" In addition, the input image pattern (Normalized character pattern) X 1 ,
A label j1 is assigned to X 2 ,..., X Nj as the pattern used to create the binary mask pattern M j1 . The above processing is performed for all character categories to be newly created.

【0069】(ステップ2a)新規に作成すべき全入力
画像パターンXtについて、全文字カテゴリの全2値マ
スクパターンMjkとの間で類似度SH(Xt,Mjk)を計
算し、最大類似度をもつMlhを求める。いま、すでに入
力画像パターンXtにラベルjkが割り当てられている
とする。もし、l=jならば、Xtは第j文字カテゴリ
に正しく認識できたと判定して、新たにラベルjhを割
り当てる。さもなければ、Xtは誤認識したと判定し
て、新たにラベルjeを割り当てる。この処理終了後
に、もし、全入力画像パターンXtについて、誤認識し
たと判定するXtがなければ、ステップ4aへ進む。さ
もなければ、ステップ3aへ進む。
(Step 2a) For all input image patterns X t to be newly created, the similarity S H (X t , M jk ) is calculated between all the binary mask patterns M jk of all character categories. Find M lh having the maximum similarity. Now, it is assumed that the label jk is already assigned to the input image pattern X t. If, if l = j, X t is determined that can be correctly recognized by the j-th character category, assign a new label jh. Otherwise, it is determined that Xt has been erroneously recognized, and a new label je is assigned. After this process is completed, if for all input image patterns X t, unless erroneous recognized and determines X t is, the flow proceeds to step 4a. Otherwise, go to step 3a.

【0070】(ステップ3a)新規に作成すべき第j文
字カテゴリについてh=1とおく。ラベルjkが割り当
てられているすべての入力画像パターンについて、も
し、入力画像パターンが1つ以上存在すれば、ステップ
1aと同様の手順で新しい2値マスクパターンMjhを作
成し、h=h+1とおく。第j文字カテゴリのKj個の
ラベルすべてについて、この判定処理を行う。次に、も
し、ラベルjeを割り当てられている入力画像パターン
が1つ以上存在するならば、それらの入力画像パターン
tすべてについて、ステップ1aと同様の手順で、一
時的な2値マスクパターンMjeを作成し、すべてのXt
とMjeとの間で類似度SH(Xt,Mje)を計算し、最大
類似度をもつ入力画像パターンXSを新規の2値マスク
パターンMjhとし、h=h+1とおく。第j文字カテゴ
リについて新しい2値マスクパターンの個数をKj=h
とおく。新規に作成すべきすべての文字カテゴリについ
て、この処理を繰り返し、新しい2値マスクパターンを
2値マスクパターン記憶回路3に記憶する。そして、ス
テップ2aへ戻る。
(Step 3a) h = 1 is set for the j-th character category to be newly created. If there is one or more input image patterns for all the input image patterns to which the label jk is assigned, a new binary mask pattern M jh is created in the same procedure as in Step 1a, and h = h + 1 is set. . This determination process is performed for all K j labels of the j-th character category. Next, If the input image pattern is present at least one assigned a label je, for all their input image patterns X t, the same procedure as step 1a, the temporary binary mask pattern M create je and all x t
A similarity S H (X t, M je ) was calculated with the M je, the input image pattern X S having the maximum similarity as a novel binary mask pattern M jh, put the h = h + 1. Let K j = h be the number of new binary mask patterns for the jth character category.
far. This process is repeated for all character categories to be newly created, and a new binary mask pattern is stored in the binary mask pattern storage circuit 3. Then, the process returns to step 2a.

【0071】(ステップ4a)各2値マスクパターンM
jkと第j文字カテゴリ以外の全入力画像パターンXt
の間で、類似度SH(Xt,Mjk)を計算し、各2値マス
クパターンMjkについての最大類似度tjkを求め、この
最大類似度を2値マスクパターンMjkの同定しきい値t
jkに割り当て、これを2値マスクパターン記憶回路3に
記憶する。全2値マスクパターンについて、これらの処
理が終われば終了する。
(Step 4a) Each binary mask pattern M
jk and between all the input image patterns X t other than the j character category, the similarity S H (X t, M jk ) was calculated to obtain the maximum similarity t jk for each binary mask pattern M jk , The maximum similarity is determined by the identification threshold t of the binary mask pattern Mjk.
jk , and this is stored in the binary mask pattern storage circuit 3. When these processes are completed for all the binary mask patterns, the process ends.

【0072】<実施例3>これは、類似度SHを用いる
ことは実施例2と同様であるが、誤認識した文字や未学
習文字の画像パターンを用いて2値マスクパターンおよ
び同定しきい値を更新する例である。まず、画像入出力
装置6から、更新すべき文字カテゴリ(第j文字カテゴ
リとする)に関する情報が2値マスクパターン作成回路
5に入力される。2値マスクパターン作成回路5は入力
画像に対して、正規化処理回路2から得られる、更新す
べき文字カテゴリj=1,2,…,Jの各文字カテゴリ
について、以下のステップで2値マスクパターンを更新
する。
<Embodiment 3> This is similar to Embodiment 2 using the similarity S H , but uses a binary mask pattern and an identification threshold using an image pattern of a character that has been incorrectly recognized or an unlearned character. This is an example of updating a value. First, information relating to a character category to be updated (referred to as a j-th character category) is input from the image input / output device 6 to the binary mask pattern creation circuit 5. The binary mask pattern creation circuit 5 applies a binary mask to the input image in the following steps for each of the character categories j = 1, 2,..., J to be updated, obtained from the normalization processing circuit 2. Update the pattern.

【0073】(ステップ1b)更新前の第j文字カテゴ
リの2値マスクパターンの個数をKjとする。更新すべ
き全入力画像パターンXtについて、全文字カテゴリの
全2値マスクパターンMjk(j=1,2…,J)(k=
1,2…,Kj)との間で類似度SH(Xt,Mjk)を計
算し、最大類似度をもつMlhを求める。いま、入力画像
パターンXtが第j文字カテゴリに属するとする。も
し、l≠jならば、Xtは誤認識したと判定して、新た
にラベルjeを割り当てる。更新すべき全文字カテゴリ
について、この処理終了後に、もし、全入力画像パター
ンXtについて、誤認識したと判定するXtがなければ、
ステップ3bへ進む。さもなければ、ステップ2bへ進
む。
(Step 1b) The number of binary mask patterns of the j-th character category before updating is set to K j . For all the input image patterns X t be updated, all the binary mask pattern M jk of all character category (j = 1,2 ..., J) (k =
The similarity S H (X t , M jk ) is calculated with respect to 1, 2,..., K j ) to find M lh having the maximum similarity. Now, the input image pattern X t is to belong to the j-th character category. If, if l ≠ j, it is determined that X t has been incorrectly recognized and assigns a new label je. After this processing is completed for all the character categories to be updated, if there is no Xt that determines that all input image patterns Xt have been erroneously recognized,
Proceed to step 3b. Otherwise, go to step 2b.

【0074】(ステップ2b)ラベルjeが割り当てら
れた入力画像パターンXtすべてについて、実施例2の
ステップ1aと同様の手順で、一時的な2値マスクパタ
ーンMjeを作成し、すべてのXtとMjeとの間で類似度
H(Xt,Mje)を計算し、最大類似度をもつ入力画像
パターンXsを追加すべき2値マスクパターンMj(Kj+1)
として2値マスクパターン記憶回路3に記憶する。ま
た、Kj=Kj+1とおき、ステップ1bへ戻る。
(Step 2b) For all the input image patterns X t to which the label je is assigned, a temporary binary mask pattern M je is created in the same procedure as in step 1a of the second embodiment, and all the X t and M similarity S H (X t, M je ) between je was calculated, binary mask pattern should be added to the input image pattern X s having the maximum similarity M j (Kj + 1)
Is stored in the binary mask pattern storage circuit 3. Also, K j = K j +1 is set, and the process returns to step 1b.

【0075】(ステップ3b)各2値マスクパターンM
jkと第j文字カテゴリ以外の全入力画像パターンXt
あれば、そのXtとの間で類似度SH(Xt,Mjk)を計
算し、各2値マスクパターンMjkについての最大類似度
t’jkを求め、この最大類似度がすべて2値マスクパタ
ーン記憶回路3に記憶されている同定しきい値tjk(新
規に作成される場合はtjk=−n)よりも大きい場合
は、2値マスクパターンMjkの同定しきい値tjk=t'
jkに更新し、新しい値を2値マスクパターン記憶回路3
に記憶する。全2値マスクパターンについて、これらの
処理が終われば終了する。
(Step 3b) Each binary mask pattern M
If there is jk and all the input image patterns X t other than the j character category, the similarity S H (X t, M jk ) was calculated between the X t, the maximum for each binary mask pattern M jk When the similarity t ′ jk is obtained and this maximum similarity is larger than the identification threshold value t jk (t jk = −n when newly created) stored in the binary mask pattern storage circuit 3 Is the identification threshold value t jk = t ′ of the binary mask pattern M jk
jk and update the new value to the binary mask pattern storage circuit 3
To memorize. When these processes are completed for all the binary mask patterns, the process ends.

【0076】ここで、第2および第3の実施例では、識
別関数に類似度SHを用いた場合を述べたが、識別関数
として、類似度SHの絶対値を用いることも可能であ
る。
Here, in the second and third embodiments, the case where the similarity S H is used as the discrimination function has been described. However, the absolute value of the similarity S H can be used as the discrimination function. .

【0077】また、2値マスクパターンを作成する方法
としては、これ以外にも公知の統計的推論による方法
(たとえば「統計学」鈴木哲夫著(朝倉書店)や「Pat
tern classification and scence analysis」 R.O.
Duda and P.E.Hart著(John Wiley & Sons I
ns.))による方法を用いることも可能である。また、
第1の実施例においても、どの文字カテゴリにも含まれ
ない画像パターンがあった場合にも、その画像パターン
を用いて新たな文字カテゴリの2値マスクパターンを作
成することが可能である。
In addition, as a method of creating a binary mask pattern, other methods based on known statistical inference (for example, “Statistics” written by Tetsuo Suzuki (Asakura Shoten) or “Pat
tern classification and scence analysis " O.
Duda and P.S. E. FIG. By Hart (John Wiley & Sons I
ns.)). Also,
Also in the first embodiment, when there is an image pattern that is not included in any character category, a binary mask pattern of a new character category can be created using the image pattern.

【0078】さらに、以上の説明では文字を中心に示し
たが、図形などの一般の2値画像についても同様に処理
可能である。一例として、医療などで用いる多項目の診
断結果をもとに、病気のカテゴリを認識する方法に適用
する場合を、以下、簡単に説明する。例えば、複数の診
断項目の結果を、図3に示すような2値画像パターンと
してチェックシート上に表し(例えば、血圧の項目であ
れば、血圧が高ければ“1”、低ければ“0”としてそ
の項目に該当する位置に“黒”または“白”で表
す。)、このチェックシート上のパターンを2値画像パ
ターンとして入力し、各病名のカテゴリの典型的な診断
データに基づいて、予め記憶させておいた2値マスクパ
ターンとの照合をとり、病名のカテゴリを認識する。こ
のように、認識対象を2値画像化した後、上記の実施例
のようにして認識することによって、病名のカテゴリの
認識性能を向上させることができる。
Further, in the above description, characters are mainly shown. However, general binary images such as figures can be processed in the same manner. As an example, a case where the present invention is applied to a method of recognizing a disease category based on a diagnosis result of multiple items used in medical treatment or the like will be briefly described below. For example, the results of a plurality of diagnostic items are represented on a check sheet as a binary image pattern as shown in FIG. 3 (for example, if the item is blood pressure, it is “1” if the blood pressure is high, and “0” if it is low. The pattern on this check sheet is input as a binary image pattern and stored in advance based on typical diagnostic data of the category of each disease name. The category of the disease name is recognized by collating with the binary mask pattern thus set. In this way, after the recognition target is converted into a binary image, the recognition is performed as in the above-described embodiment, whereby the recognition performance of the disease name category can be improved.

【0079】[0079]

【発明の効果】以上説明したようにこの発明によれば、
入力画像パターンと標準辞書に予め記憶してある2値マ
スクパターンとを比較して入力画像を同定・棄却または
認識することにより、OCRの利用者が誤認識やリジェ
クトパターンを逐次、目視により再検査し修正していく
作業において、同定された画像については再検査する必
要が不要となり、仕事の負担が軽減される利点がある。
また、従来の文字認識法では、認識特徴の1要素が深さ
n(n>1)ビットで記憶する場合が多いが、本発明で
は2値マスクパターンの各要素は1ビットで表現できる
ので、記憶容量が1/nに削減できる。さらに、公知の
画像符号化法を併用することで、2値マスクパターンの
記憶容量を更に削減でき、処理効率が高く、辞書容量が
コンパクトですむという利点を持つ。
As described above, according to the present invention,
By comparing the input image pattern with a binary mask pattern previously stored in a standard dictionary to identify, reject, or recognize the input image, the OCR user can sequentially visually inspect the erroneously recognized or rejected pattern. In the correction work, it is not necessary to re-examine the identified image, which is advantageous in that the work load is reduced.
Also, in the conventional character recognition method, one element of the recognition feature is often stored at a depth of n (n> 1) bits. However, in the present invention, since each element of the binary mask pattern can be represented by 1 bit, The storage capacity can be reduced to 1 / n. Further, by using a known image coding method together, the storage capacity of the binary mask pattern can be further reduced, and the processing efficiency is high and the dictionary capacity is compact.

【0080】また、課題を解決する手段の欄で述べた第
一の方法、第二の方法又は第三の方法のいずれの方法に
よっても、文字線の方向や接続関係などの文字線構造に
関する特徴量を抽出しなくてすむため、特徴抽出の処理
が簡易になり、しかも、かすれ、つぶれ、文字背景の雑
音などによって、これらの文字構造が変形しても認識性
能に影響を受けにくい利点がある。かすれ、つぶれ、文
字背景の雑音だけでなく、文字部を黒点、背景を白点と
して構成される画像パターンから作成した2値マスクパ
ターンを用いても、文字部が白点、背景が黒点として構
成される、いわゆる白抜き文字についてのかすれ、つぶ
れ、文字背景の雑音などに対しても高い認識性能をもつ
利点ある。
In any of the first method, the second method, and the third method described in the section of the means for solving the problems, the characteristics relating to the character line structure such as the direction of the character line and the connection relationship. Since there is no need to extract the amount, the feature extraction process is simplified, and furthermore, there is an advantage that even if these character structures are deformed due to blurring, crushing, noise of the character background, etc., the recognition performance is not affected. . Even if a binary mask pattern created from an image pattern composed of a black point in the character portion and a white point in the background is used as well as a blur, crush, and noise in the character background, the character portion is configured as a white point and the background in a black point There is an advantage that high recognition performance can be obtained even for blurring, crushing, and background noise of so-called white characters.

【0081】なお、第一の方法によれば入力画像パター
ンと標準辞書に予め記憶してある2値マスクパターンと
を比較して入力画像を同定・棄却または認識することに
より、OCRの利用者が誤認識やリジェクトパターンを
逐次、目視により再検査し修正していく作業において、
認識された画像については再検査する必要が不要とな
り、仕事の負担が軽減される利点もある。
According to the first method, an OCR user can identify, reject, or recognize an input image by comparing the input image pattern with a binary mask pattern stored in advance in a standard dictionary. In the work of sequentially revising and correcting misrecognition and reject patterns visually,
There is no need to re-examine the recognized image, and there is an advantage that the work load is reduced.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明による画像パターンの同定・認識処理装
置の構成例を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration example of an image pattern identification / recognition processing device according to the present invention.

【図2】本発明による同定・棄却・認識の判定処理の一
例のフローチャートである。
FIG. 2 is a flowchart of an example of identification / rejection / recognition determination processing according to the present invention.

【図3】同定・棄却・認識の具体的判定処理を説明する
ためのパターン例を示す図である。
FIG. 3 is a diagram showing an example of a pattern for explaining specific determination processing of identification, rejection, and recognition.

【符号の説明】[Explanation of symbols]

1 2値画像パターン記憶回路 2 正規化処理回路 3 2値マスクパターン記憶回路 4 認識判定回路 5 2値マスクパターン作成回路 6 画像入出力装置 Reference Signs List 1 binary image pattern storage circuit 2 normalization processing circuit 3 binary mask pattern storage circuit 4 recognition determination circuit 5 binary mask pattern creation circuit 6 image input / output device

Claims (4)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 入力された2値画像パターンに対して、
予め作成済みの認識カテゴリ毎の各2値マスクパターン
と照合して該2値画像パターンが属する認識カテゴリを
決定する画像パターン同定・認識方法であって、 前記入力2値画像パターンの黒部を計数する第1ステッ
プと、前記入カ2値画像パターンの黒部が、前記認識カ
テゴリ毎の2値マスクパターンの黒部に含まれる個数を
計数する第2ステップと、前記第2のステップで計数し
た数(以下Ciという(iはカテゴリ数))と前記認識
カテゴリ毎の黒部の数(以下Biという(iはカテゴリ
数))を比較する第3のステップと、前記前記第1のス
テップで計数した数(以下Aという)とCiを比較する
第4のステップを有し、 前記第3のステップでCi≦Biかつ前記第4のステッ
プでA=Ciとなる認識カテゴリiがただ一つしか存在
しない場合に、前記入力2値画像パターンは前記認識カ
テゴリiに属するとする同定手順を有することを特徴と
する画像パターン同定・認識方法。
1. An input binary image pattern,
An image pattern identification / recognition method for determining a recognition category to which a binary image pattern belongs by comparing each binary mask pattern for each recognition category that has been created in advance, wherein a black portion of the input binary image pattern is counted. A first step, a second step of counting the number of black portions of the input binary image pattern included in the black portions of the binary mask pattern for each of the recognition categories, and a number counted in the second step (hereinafter, referred to as A third step of comparing Ci (where i is the number of categories) and the number of black portions for each of the recognition categories (hereinafter Bi (where i is the number of categories)) and the number counted in the first step (hereinafter referred to as Bi) A) and Ci, and there is only one recognition category i where Ci ≦ Bi in the third step and A = Ci in the fourth step. If not, the image pattern identification and recognition method characterized in that it comprises identification procedure the input binary image pattern and belongs to the recognition category i.
【請求項2】 前記第3のステップでCi≦Biかつ前
記第4のステップでA=Ciとなる認識カテゴリiが複
数存在する場合に、前記入力2値画像パターンを棄却す
る棄却手順を有することを特徴とする請求項1記載の画
像パターン同定・認識方法。
2. A rejection procedure for rejecting the input binary image pattern when there are a plurality of recognition categories i in which Ci ≦ Bi in the third step and A = Ci in the fourth step. The image pattern identification / recognition method according to claim 1, wherein:
【請求項3】 入力された2値画像パターンに対して、
予め作成済みの認識カテゴリ毎の各2値マスクパターン
と照合して該2値画像パターンが属する認識カテゴリを
決定する画像パターン同定・認識方法であって、 前記入力2値画像パターンの白部を計数する第1ステッ
プと、前記入カ2値画像パターンの白部が、前記認識カ
テゴリ毎の2値マスクパターンの白部に含まれる個数を
計数する第2ステップと、前記第2のステップで計数し
た数(以下Ciという(iはカテゴリ数))と前記認識
カテゴリ毎の白部の数(以下Biという(iはカテゴリ
数))を比較する第3のステップと、前記前記第1のス
テップで計数した数(以下Aという)とCiを比較する
第4のステップを有し、 前記第3のステップでCi≦Biかつ前記第4のステッ
プでA=Ciとなる認識カテゴリiがただ一つしか存在
しない場合に、前記入力2値画像パターンは前記認識カ
テゴリiに属するとする同定手順を有することを特徴と
する画像パターン同定・認識方法。
3. An input binary image pattern,
An image pattern identification / recognition method for determining a recognition category to which a binary image pattern belongs by comparing with a previously created binary mask pattern for each recognition category, wherein a white portion of the input binary image pattern is counted. A first step of counting the number of white portions of the input binary image pattern included in a white portion of the binary mask pattern for each of the recognition categories, and a second step of counting the number of white portions of the binary mask pattern for each recognition category. A third step of comparing the number (hereinafter referred to as Ci (i is the number of categories)) with the number of white portions (hereinafter referred to as Bi (i is the number of categories) for each recognition category), and counting in the first step. A fourth step of comparing Ci with the calculated number (hereinafter referred to as A), and there is only one recognition category i in which Ci ≦ Bi in the third step and A = Ci in the fourth step. If not, the image pattern identification and recognition method characterized in that it comprises identification procedure the input binary image pattern and belongs to the recognition category i.
【請求項4】 前記第3のステップでCi≦Biかつ前
記第4のステップでA=Ciとなる認識カテゴリiが複
数存在する場合に、前記入力2値画像パターンを棄却す
る棄却手順を有することを特徴とする請求項3記載の画
像パターン同定・認識方法。
4. A rejection procedure for rejecting the input binary image pattern when there are a plurality of recognition categories i in which Ci ≦ Bi in the third step and A = Ci in the fourth step. 4. The image pattern identification / recognition method according to claim 3, wherein:
JP29179494A 1993-12-02 1994-11-25 Image pattern identification and recognition method Expired - Fee Related JP3301467B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP29179494A JP3301467B2 (en) 1993-12-02 1994-11-25 Image pattern identification and recognition method

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP30250793 1993-12-02
JP6-20682 1994-02-17
JP2068294 1994-02-17
JP5-302507 1994-02-17
JP29179494A JP3301467B2 (en) 1993-12-02 1994-11-25 Image pattern identification and recognition method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2002066019A Division JP3657565B2 (en) 1993-12-02 2002-03-11 Image pattern identification and recognition method

Publications (2)

Publication Number Publication Date
JPH07282199A JPH07282199A (en) 1995-10-27
JP3301467B2 true JP3301467B2 (en) 2002-07-15

Family

ID=27283136

Family Applications (1)

Application Number Title Priority Date Filing Date
JP29179494A Expired - Fee Related JP3301467B2 (en) 1993-12-02 1994-11-25 Image pattern identification and recognition method

Country Status (1)

Country Link
JP (1) JP3301467B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5769029B2 (en) * 2012-03-13 2015-08-26 株式会社日立情報通信エンジニアリング Character recognition device, recognition dictionary generation device, and normalization method

Also Published As

Publication number Publication date
JPH07282199A (en) 1995-10-27

Similar Documents

Publication Publication Date Title
Denker et al. Neural network recognizer for hand-written zip code digits
US7327883B2 (en) Character recognition system and method
US6687401B2 (en) Pattern recognizing apparatus and method
US6327386B1 (en) Key character extraction and lexicon reduction for cursive text recognition
KR100249055B1 (en) Character recognition apparatus
US5005205A (en) Handwriting recognition employing pairwise discriminant measures
Hossain et al. Recognition and solution for handwritten equation using convolutional neural network
JP5003051B2 (en) Automatic mail sorting machine and automatic mail sorting method
US20040146200A1 (en) Segmenting touching characters in an optical character recognition system to provide multiple segmentations
Kef et al. A novel fuzzy approach for handwritten Arabic character recognition
KR20200068073A (en) Improvement of Character Recognition for Parts Book Using Pre-processing of Deep Learning
EP0656602B1 (en) Image pattern identification/recognition method
Chhabra et al. High-order statistically derived combinations of geometric features for handprinted character recognition
JP3301467B2 (en) Image pattern identification and recognition method
JP3095069B2 (en) Character recognition device, learning method, and recording medium storing character recognition program
JP3657565B2 (en) Image pattern identification and recognition method
Hebert et al. Writing type and language identification in heterogeneous and complex documents
Islam et al. Bengali handwritten character recognition using modified syntactic method
Aktaruzzaman et al. Improved low-cost recognition system for handwritten Bengali numerals
JP3207566B2 (en) Character recognition method
JP2906758B2 (en) Character reader
JPH0562021A (en) Optical type character recognition (ocr) system for recognizing standard font and user assigned custom font
JP3463255B2 (en) Multi-valued image pattern recognition processing method
CA2421673C (en) Character recognition system and method
Chhabra Anatomy of a hand-filled form reader

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090426

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090426

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100426

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100426

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110426

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120426

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130426

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees