JP2573438B2 - Pattern identification method and apparatus - Google Patents
Pattern identification method and apparatusInfo
- Publication number
- JP2573438B2 JP2573438B2 JP17398191A JP17398191A JP2573438B2 JP 2573438 B2 JP2573438 B2 JP 2573438B2 JP 17398191 A JP17398191 A JP 17398191A JP 17398191 A JP17398191 A JP 17398191A JP 2573438 B2 JP2573438 B2 JP 2573438B2
- Authority
- JP
- Japan
- Prior art keywords
- density
- pattern
- template
- order
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 56
- 238000006243 chemical reaction Methods 0.000 claims description 20
- 238000004364 calculation method Methods 0.000 claims description 11
- 238000010586 diagram Methods 0.000 description 9
- 238000000605 extraction Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 238000005286 illumination Methods 0.000 description 4
- 244000309464 bull Species 0.000 description 3
- 238000004587 chromatography analysis Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
Landscapes
- Image Analysis (AREA)
Description
【0001】[0001]
【産業上の利用分野】この発明は、パターン識別方法お
よび装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method and an apparatus for pattern identification.
【0002】[0002]
【従来の技術】パターン識別技術の1ジャンルとしてテ
ンプレート・マッチングが広く知られているが、このテ
ンプレート・マッチングに関して、従来、以下の如き問
題があった。2. Description of the Related Art As one genre of pattern identification technology, template matching is widely known, but there have been the following problems with this template matching.
【0003】即ち、識別対象画像の濃度分布をそのまま
用いて、多値のテンプレート・マッチングを行なう場
合、画像読取時の照明の影響を受け易く、照明状態が変
化すると類似度あるいは非類似度が異なり、識別対象画
像自体のコントラスト変化等によっても識別能力が低下
する。That is, when performing multi-valued template matching using the density distribution of an image to be identified as it is, it is easily affected by illumination at the time of image reading, and the similarity or dissimilarity differs when the illumination state changes. Also, the discrimination ability is reduced due to a change in contrast of the discrimination target image itself.
【0004】[0004]
【発明が解決しようとする課題】この発明は、上記の如
き事情に鑑みてなされたものであって、従来のテンプレ
ート・マッチングを改良し、照明条件や識別対象画像の
コントラスト変化等の影響を受けにくい、新規なパター
ン識別方法および、この方法を実施する装置の提供を目
的とする。SUMMARY OF THE INVENTION The present invention has been made in view of the above-described circumstances, and improves the conventional template matching to be influenced by illumination conditions and changes in contrast of an image to be identified. It is an object of the present invention to provide a new and difficult pattern identification method and an apparatus for implementing the method.
【0005】[0005]
【課題を解決するための手段】請求項1の発明のパター
ン識別方法は、従来から知られたテンプレート・マッチ
ング方式の識別方法であって、その特徴とする処は、
「テンプレートと同サイズに切り出された識別パターン
の各画素の濃度を、その濃度順位に応じて、テンプレー
ト要素の濃度で置き換えて比較パターンを作成し、この
比較パターンとテンプレートとの類似度もしくは非類似
度を演算する」点にある。The pattern identification method according to the first aspect of the present invention is a conventionally known template matching type identification method.
"A comparison pattern is created by replacing the density of each pixel of the identification pattern cut out to the same size as the template with the density of the template element according to the density order, and the similarity or dissimilarity between the comparison pattern and the template. Calculate the degree. "
【0006】請求項2記載の発明のパターン識別方法
は、上記請求項1の方法を具体化したものであって、
「画像入力工程と、切り出し領域設定工程と、切り出し
工程と、濃度順テーブル作成工程と、濃度変換工程と、
マッチング工程と、判定工程と」を含む。 [0006] The pattern identification method according to the second aspect of the present invention.
Is an embodiment of the method of claim 1,
"Image input process, cropping area setting process, and cropping
Process, density order table creation process, density conversion process,
Matching step and determination step ".
【0007】この方法を表したフローチャートである図
1を参照して説明する。「画像入力工程」は、識別対象
画像を読取り、画素ごとの濃度をデジタル信号として記
憶する工程である。The method will be described with reference to FIG. 1 which is a flowchart showing the method. The “image input step” is a step of reading the image to be identified and storing the density of each pixel as a digital signal.
【0008】「切り出し領域設定工程」は、画像入力工
程により記憶された画像情報に対して、パターン識別を
行なう領域として切り出し領域と切り出し開始位置とを
設定する工程である。[0008] The "cutout area setting step" is a step of setting a cutout area and a cutout start position as areas for performing pattern identification on the image information stored in the image input step.
【0009】「切り出し工程」は、切り出し領域から、
テンプレートと同サイズの識別パターンを切りだす工程
である。[0009] The "cutting step" is performed from the cut area.
This is a step of cutting out an identification pattern of the same size as the template.
【0010】「濃度順テーブル作成工程」は、切り出さ
れた識別パターンの、各画素の濃度を、濃度順に再配置
して、濃度順テーブルを作成する工程である。 The “density order table creation step”
The density of each pixel of the identified pattern is rearranged in the order of density
Then, a density order table is created.
【0011】「濃度変換工程」は、作製された濃度順テ
ーブルと、予め用意されたテンプレート濃度順テーブル
により、識別パターンの各画素の濃度を順次、対応する
順位のテンプレート濃度順テーブルの値に置き換えて、
比較パターンを作成する工程である。 The “density conversion step” is performed in the order of the produced density.
Table and template density order table prepared in advance
, The density of each pixel of the identification pattern sequentially corresponds to
Replaced with the values in the ranking template density order table,
This is a step of creating a comparison pattern.
【0012】図1のフロー図で、第4ステップに当たる
「濃度変換」は、上記「濃度順テーブル作成工程」と
「濃度変換工程」とを、まとめて示している。 In the flowchart of FIG . 1, this corresponds to the fourth step.
The “density conversion” is the same as the “density order table creation process” described above.
"Density conversion step" is shown together.
【0013】「マッチング工程」は、比較パターンと、
テンプレートとの類似度もしくは非類似度を演算する工
程である。The “matching step” includes a comparison pattern,
This is a step of calculating the similarity or the dissimilarity with the template.
【0014】上記の「切り出し工程からマッチング工
程」までは、識別パターンの切り出し位置を変えて、切
り出し領域に渡って繰り返される。[0014] The above-described "from the cutting step to the matching step" is repeated over the cutting area by changing the cutting position of the identification pattern.
【0015】「判定工程」は、マッチング工程による演
算結果に基づき、上記切り出し領域内に、テンプレート
と同一もしくは類似のパターンが、存在するか否かを判
定する工程である。The "determining step" is a step of determining whether or not a pattern identical or similar to the template exists in the cut-out area based on the calculation result of the matching step.
【0016】上記請求項2記載の方法においては、「濃
度順テーブル作成工程において、切り出された識別パタ
ーンの、各画素の濃度とアドレスとを濃度順に再配置し
て、濃度順テーブルとともに、濃度順画像アドレステー
ブルを作成」することができる。この場合には、上記濃
度変換工程が「作成された濃度順テーブルの各画素濃度
を、所定の濃度番号付与方式に従って、濃度番号の配列
に変換する濃度番号テーブル作成工程」と、「作成され
た濃度番号テーブルの各テーブル要素を、予め用意され
たテンプレート濃度順テーブルの要素の順番を示すイン
デックスとして 、要素の濃度を読み出し、その濃度を、
上記テーブル要素により指定されるアドレスへ書き込ん
で、比較パターンを作成する比較パターン作成工程」と
を有するように構成することが出来る(請求項3)。 In the method according to the second aspect, the "concentration"
In the degree order table creation process, the identification pattern
The density and address of each pixel of the pattern in the order of density.
And the density order image address table together with the density order table.
Bull "can be created. In this case,
Degree conversion process is "Density of each pixel of the created density order table
According to a predetermined density numbering method.
Concentration number table creation process to convert to
Each table element of the density number table
To indicate the order of the elements in the template density order table
Read the density of the element as a dex ,
Write to the address specified by the above table element
Then, a comparison pattern creation process to create a comparison pattern "
(Claim 3).
【0017】請求項4記載のパターン識別装置は、上記
請求項2の方法を実施する装置であって、「読取手段
と、記憶手段と、切り出し手段と、濃度順テーブル作成
手段と、濃度変換手段と、演算手段と、制御識別手段
と」を有する。 According to a fourth aspect of the present invention, in the pattern identification device,
Apparatus for implementing the method of claim 2, wherein "reading means"
, Storage means, cutout means, density order table creation
Means, density conversion means, calculation means, control identification means
And ".
【0018】「読取手段」は、識別対象画像を読取る手
段である。この読取手段は、テレビカメラや1次元セン
サー、2次元センサー等、識別対象画像の、画素ごとの
濃度を電気信号に変換する手段と、この変換された信号
を「デジタル信号」に変換するA/D変換器とで構成で
きる。例えば、A/D変換器として、8ビットのものを
用いれば、各画素の濃度を256(=28)段階に多値
化できる。「記憶手段」は、読取られた識別対象画像の
画素ごとの濃度を、デジタル信号として記憶する手段で
ある。The "reading means" is means for reading an image to be identified. The reading means is a television camera or a one-dimensional sensor, a two-dimensional sensor or the like, and converts the identification object image, means for converting the density of each pixel into an electrical signal, the signal converted into the "digital signal" A / It can be configured with a D converter. For example, the A / D converter, by using those 8 bits, can be multi-valued in a concentration of 256 (= 2 8) stages of each pixel. "Storage means", the concentration of each pixel of the reading obtained identification object image, a means for and storing the digital signal.
【0019】「切り出し手段」は、記憶手段に記憶され
た画像情報に対して、パターン識別を行なう領域として
の切り出し領域と切り出し開始位置とを設定し、設定さ
れた切り出し領域から、テンプレートと同サイズの識別
パターンを、切り出す手段である。The "cutout means" sets a cutout area as a pattern identification area and a cutout start position with respect to the image information stored in the storage means, and sets the same size as the template from the set cutout area. the identification pattern is a means for cutting.
【0020】「濃度順テーブル作成手段」は、切り出さ
れた識別パターンの、各画素の濃度を濃度順に再配置し
て、濃度順テーブルを作成する手段である。 The "density order table creating means" rearranges the density of each pixel of the cut-out identification pattern in the order of density.
Means for creating a density order table.
【0021】「濃度変換手段」は、作成された濃度順テ
ーブルと、予め用意されたテンプレート濃度順テーブル
とにより、識別パターンの各画素の濃度を順次、対応す
る順位のテンプレート濃度順テーブルの値に置き換え
て、比較パターンを作成する手段である。 The "density converting means" includes a created density order table and a prepared template density order table.
, The density of each pixel of the identification pattern is sequentially corresponded.
Replaced with the values in the template density order table
Means for creating a comparison pattern.
【0022】「演算手段」は、比較パターンとテンプレ
ートとの類似度もしくは非類似度を演算するマッチング
工程を行なう手段である。類似度もしくは非類似度を演
算する「演算式」としては、従来からテンプレート・マ
ッチングで知られた各種の式を適宜利用することができ
る。The "calculating means" is a matching device for calculating the similarity or dissimilarity between the comparison pattern and the template.
It is a means for performing the process. Perform similarity or dissimilarity
The “operation expression” to calculate
Various formulas known for the switching can be appropriately used .
【0023】「制御識別手段」は、演算手段のマッチン
グ工程による演算結果に基づき、上記切り出し領域内に
「テンプレートと同一もしくは類似のパターン」が存在
するか否かを判定する手段である。The "control identification means" is a match of the arithmetic means.
Based on the calculation result of the
"Same or similar pattern as template" exists
This is a means for determining whether or not to perform .
【0024】上記請求項4記載のパターン識別装置にお
いては、濃度順テーブル作成手段に、「切り出された識
別パターンの、各画素の濃度とアドレスとを濃度順に再
配置して、濃度順テーブルと濃度順画像アドレステーブ
ルとを作成させる」ことができる。この場合、濃度変換
手段が、「作成された濃度順テーブルの各画素濃度を、
所定の濃度番号付与方式に従って濃度番号の配列に変換
する濃度番号テーブル作成手段」と、「作成された濃度
番号テーブルの各テーブル要素を、予め用意されたテン
プレート濃度順テーブルの要素の順番を示すインデック
スとして、要素の濃度を読み出し、その濃度を、上記テ
ーブル要素により指定されるアドレスへ書き込んで、比
較パターンを作成する比較パターン作成手段」とを有す
るように構成することが出来る(請求項5)。このよう
にすると、上記請求項3記載のパターン識別方法を実施
することができる。 [0024] In the pattern identification apparatus according to the fourth aspect,
In the density order table creation means,
The density and address of each pixel of another pattern are re-ordered in the order of density.
Arrange, density order table and density order image address table
And create it. " In this case, the density conversion
Means is that "each pixel density of the created density order table
Convert to density number array according to the specified density numbering method
Means for creating density number table "and"
Each table element of the number table is
Index indicating the order of elements in the plate concentration order table
Read the density of the element as the
Write to the address specified by the
Comparison pattern creating means for creating a comparison pattern "
(Claim 5). like this
Then, the pattern identification method according to claim 3 is implemented.
can do.
【0025】上記の記憶手段と、切り出し手段と、濃度
順テーブル作成手段と、濃度変換手段と、演算手段およ
び制御識別手段とは、コンピューターもしくはコンピュ
ーターと付加的なメモリーとでこれらを構成することが
できる。The above storage means, cutting out means, density
Order table creating means, density converting means, calculating means and
Computer and computer identification means.
These can be made up of data and additional memory .
【0026】[0026]
【作用】図2は、請求項5記載の、パターン識別装置を
機能ブロック図として示している。図示のように、識別
対象画像は、映像信号として画像入力部21により読取
られ、A/D変換部22で、画素ごとの濃度がデジタル
信号に変換され、画像メモリー23に記憶される。画像
入力部21は、前述のようにテレビカメラ等であり、A
/D変換部22とともに前記「読取手段」を構成する。
また画像メモリー23は前記「記憶手段」を構成する。FIG. 2 is a functional block diagram of the pattern identification device according to the fifth aspect . As shown, the identification object image is read by the image input unit 21 as a video signal, by the A / D converter 22, is converted into a density is de digital signal for each pixel, is stored in the image memory 23. The image input unit 21 is a television camera or the like as described above.
Together with the / D converter 22, the "reading means" is constituted.
The image memory 23 constitutes the "storage means" .
【0027】「切り出し手段」を構成する、画像切り出
し部24は、画像メモリー23に記憶された画像情報に
対して、パターン識別を行なう領域として「切り出し領
域と切り出し開始位置と」を設定し、設定された切り出
し領域から、テンプレートと同サイズの識別パターンを
切り出す。即ち、画像切り出し部24は、「切り出し領
域設定工程」と「切り出し工程」とを行なう。The image cut-out unit 24 , which constitutes “cut-out means” , sets the “cut- out area ” as an area for performing pattern identification on the image information stored in the image memory 23.
And an extraction start position, and an identification pattern having the same size as the template is extracted from the set extraction area. In other words, the image cut-out section 24, "cut out territory
Area setting step "and" cutout step " .
【0028】図3に、切り出し領域の設定と、切り出し
工程とを説明図的に示す。破線で示す領域30は、記憶
手段としての画像メモリー23に記憶された「識別対象
画像全体」のデータ領域である。このデータ領域30中
に、実線で示された領域31が「切り出し領域」であ
る。即ち、この切り出し領域31中の画像情報がマッチ
ングの対象となる。FIG. 3 is an explanatory diagram showing the setting of the cut-out area and the cut-out process. The area 30 indicated by the broken line is the “identification target” stored in the image memory 23 as storage means.
This is the data area of the “entire image” . During this data area 30, a region 31 shown by the solid line is "cut-out region". That is, the image information in the cutout area 31 is a target for matching.
【0029】切り出し領域31中に描かれた、ハッチを
施した矩形の領域32が、切り出される「識別パター
ン」である。この識別パターン32は、テンプレートと
同じサイズを有し、切り出し開始位置から切り出し終了
位置まで、所定の順序で次々に切り出され、切り出され
る識別パターンの一つ一つが、テンプレートのパターン
とのマッチングの対象となる。The hatched rectangular area 32 drawn in the cutout area 31 is the "identification pattern" to be cut out. The identification pattern 32 has the same size as the template, and is cut out one after another in a predetermined order from the cutout start position to the cutout end position, and each of the cutout identification patterns is a target for matching with the template pattern. Becomes
【0030】図2に戻ると、切り出された識別パターン
は、「濃度順テーブル作成手段」を構成する、濃度順テ
ーブル作成部25において、「濃度順テーブル」に作成
される。即ち、切り出された識別パターンにおける、各
画素のアドレス及び濃度情報(多値のデジタル情報)
が、濃度の濃い順もしくは薄い順にソートされる。Returning to FIG. 2, the cut-out identification pattern is created in a "density order table" by a density order table creation unit 25 constituting "density order table creation means" . That is, in the cut-out identification pattern, address and density information of each pixel (digital information multivalued)
Are sorted in ascending or descending order of density.
【0031】ソートされた濃度情報は、ソートされる順
序に従って再配置され、「濃度順テ ーブル」が作成され
る。[0031] sorted concentration information is re-arranged according to the order in which they are sorted, "concentration order tables" is created.
【0032】請求項2記載の方法では、濃度順テーブル
作成工程により、上記濃度順テーブルが作成されるのみ
であるが、請求項3記載の方法では、上記濃度順テーブ
ルが作成される一方において、「アドレス」も、ソート
される順序に再配置されて、「濃度順画像アドレステー
ブル」が作成される。これら2つのテーブルは、互いに
マトリックス的に対応し、対応する位置にある濃度とア
ドレスとが、識別パターンにおける「各画素アドレスと
その画素の濃度と」を表す。 In the method according to the second aspect, the density order table
Only the above density order table is created by the creation process
However, in the method according to claim 3, the concentration order tape
While the file is created, the "address" is also sorted
Are arranged in the order in which
Bull "is created. These two tables are
The matrix corresponds to the density and
The dress is the same as “each pixel address and
And the density of the pixel.
【0033】識別パターンから、濃度順テーブルと濃度
順画像アドレステーブルを作成する状態を、図4の上の
部分に模式的に示す。勿論、「画像アドレス」とは、切
り出された識別パターンの、各画素のアドレス情報であ
る。A state in which a density order table and a density order image address table are created from the identification pattern is schematically shown in the upper part of FIG. Of course, the "image address", the cut identification pattern, the address information of each pixel.
【0034】図4を参照すると、上記のように作成され
た濃度順テーブルから、「濃度番号テーブル」が作成さ
れる。濃度番号テーブルの作成は、濃度順テーブルの各
画素濃度を、所定の濃度番号付与方式に従って、「濃度
番号の配列」に変換することにより行なわれる。この工
程の詳細は後述の実施例の説明において詳述する。Referring to FIG. 4, a "density number table" is created from the density order table created as described above. The density number table is created by converting each pixel density in the density order table into an “array of density numbers” according to a predetermined density number assignment method. The details of this step will be described later in the description of the embodiments.
【0035】このように作成された濃度番号テーブル
の、各「テーブル要素」は、「濃度番号」である。この
濃度番号は、一方において、テンプレート濃度順テーブ
ル(予めテンプレートとともに用意される)と比較され
るとともに、他方においては、「比較パターンのアドレ
ス位置の指定」に用いられる。即ち、個々の濃度番号
は、濃度順画像アドレステーブルにおいて、その濃度番
号のアドレスに対応したアドレスにある濃度順画像アド
レスを選択して、比較パターンのアドレスとする。Each "table element" of the density number table thus created is a "density number". This concentration numbers, on the one hand, while being compared with the template concentration Junte over Bed <br/> Le (are prepared with pre-template), on the other hand, used in "the specified address position of the comparison pattern". That is, each density number is stored in the density order image address table at the address corresponding to the address of the density number in the density order image address table.
Address is selected as the address of the comparison pattern.
【0036】一方、上記濃度番号は、テンプレート濃度
順テーブルにおいて、「この濃度番号のアドレスと同じ
アドレス」にあるテンプレート濃度順テーブルの濃度順
番を指定し、この指定により指定されたテンプレート要
素の濃度(テンプレートの要素を、濃度順に配列した配
列順番で、上記指定された濃度順番を配列順位とする、
テンプレート要素の濃度)を選択する。On the other hand, the density number, the template concentration sequence table, to specify the concentration order of template concentration Junte Buru in "the same address as the address of this concentration Number", the concentration of template elements designated by the designation (In the arrangement order in which the elements of the template are arranged in the order of density, the density order specified above is used as the array order.
Template element density).
【0037】換言すれば、作成された濃度番号テーブル
の各テーブル要素は、「テンプレート濃度順テーブルの
要素の順番を示すインデックス」として用いられ、この
インデックスに対応する要素の濃度がテンプレート濃度
順テーブルから読み出され、上記テーブル要素により指
定されるアドレスへ書き込まれるのである。 In other words, the created density number table
Each table element of "Template density order table
This is used as an index indicating the order of elements.
The density of the element corresponding to the index is the template density
Is read from the sequential table, and the
It is written to the specified address.
【0038】上記のようにして決定されたアドレスに、
上記選択された濃度を書き込むことを、「濃度番号テー
ブルの全てのテーブル要素に就いて」行うと、比較パタ
ーンが得られる。この比較パターンをテーブルにしたも
のが、図4の比較テーブルである。 At the address determined as described above,
When writing the selected density is performed “for all table elements of the density number table”, a comparison pattern is obtained. I made this comparison pattern into a table
This is the comparison table of FIG.
【0039】この「比較パターン」は、識別パターンの
濃度配列を、テンプレート要素の濃度を用いて表したも
のであり、識別パターンの濃度配列が変換されたもので
あるから、上のプロセスを濃度変換工程と呼ぶのであ
る。This "comparison pattern" represents the density array of the identification pattern using the density of the template element. Since the density array of the identification pattern is converted, the above process is performed by the density conversion. It is called a process.
【0040】濃度順テーブルの作成から、比較パターン
の作成に到るプロセスを、図5にフロー図として示す。
図中「濃度番号によるテンプレートの濃度値読み出し」
とあるのは、上に説明した「濃度番号により指定された
濃度順番(上記インデックス)を順位とするテンプレー
ト要素の濃度を選択する」ことを意味し、「画像アドレ
ステーブルの示す位置へ値の書き込み」とあるのは、
「濃度番号に応じて定まるアドレスへ上記選択された濃
度を書き込む」ことを意味する。また「テーブル終了
?]の判定は、比較パターンの書き込みが終了したか否
かの判定である。FIG. 5 is a flowchart showing a process from the creation of the density order table to the creation of the comparison pattern.
"Density value reading of template by density number" in the figure
Means that “the density of the template element having the order of the density specified by the density number (the above index) is selected” described above , and “writing the value to the position indicated by the image address table”. "
This means "writing the selected density to an address determined according to the density number". The determination of “table end?” Is for determining whether or not the writing of the comparison pattern has been completed.
【0041】図2に戻ると、上記濃度番号テーブル作成
工程から比較パターンの作成に到るプロセスは濃度変換
部26において行われる。即ち、濃度変換部26は、濃
度番号テーブル作成手段と濃度変換手段とを構成する。
そして、比較パターンを作成するために、テンプレート
濃度順データ(テンプレート濃度順番テーブルと、その
各濃度順位に対応する濃度のデータ)29−Aを入力さ
せる。Returning to FIG. 2, the process from the above-described density number table creation step to the creation of the comparison pattern is performed in the density conversion unit 26. That is, the density converter 26 constitutes a density number table creating means and a density converting means.
Then, in order to create a comparison pattern, template concentration Junde chromatography data (and the template concentration order table, the data of the density corresponding to the respective density ranks) to input a 29-A.
【0042】次いで、上記のように作成された比較パタ
ーンと、テンプレートとの、類似度もしくは非類似度を
演算するマッチング工程が行われる。このマッチング工
程は、演算手段を構成する演算部27で行われる。ここ
で行われる「類似度もしくは非類似度の演算」として
は、前述のように従来から知られている、各種の演算方
式を適宜利用できる。Next, a matching step for calculating the similarity or dissimilarity between the comparison pattern created as described above and the template is performed. This matching process is performed by the calculation unit 27 constituting the calculation means. As the “calculation of similarity or dissimilarity” performed here, various calculation methods conventionally known as described above can be appropriately used.
【0043】図6は、比較パターンとテンプレートとを
模式的に表している。テンプレートの情報内容をt
(u,v)、比較パターンの情報内容をf(u,v)
(u,vは各情報のアドレス)とすると、例えば、演算
式:Σ|f−t|やΣ(f−t)2(和は、アドレス
u,vの全域にわたって取る)を「非類似度」として利
用できる。これらの演算式の演算結果が大きい程、比較
パターンとテンプレートとの非類似度が高いからであ
る。また、演算式:Σ(f・t)(和は、アドレスu,
vの全域にわたって取る)は「類似度」として利用でき
る。 FIG. 6 schematically shows a comparison pattern and a template. T the information content of the template
(U, v), the information content of the comparison pattern is f (u, v)
(U, v the address of each information) When, for example, arithmetic expression: Σ | f-t | (the sum, taken over the entire address u, v) and Σ (f-t) 2 the "dissimilarity It can be used as a ". The greater the calculation results of these arithmetic expressions, a high degree of dissimilarity between the comparison patterns and the template Karadea
You. In addition, an arithmetic expression: Σ (f · t) (the sum is the address u,
v) can be used as "similarity"
You.
【0044】ここでまた図2に戻ると、演算部27に
は、濃度変換工程で作成された比較パターンの情報と、
予め用意されたテンプレートデータ29−Bが取り込ま
れ、上記の演算により非類似度が算出される。Returning again to FIG. 2, the arithmetic section 27 stores information on the comparison pattern created in the density conversion step,
The template data 29-B prepared in advance is taken in, and the dissimilarity is calculated by the above calculation.
【0045】以上のプロセスは、切り出す識別パターン
を順次変えて、必要なだけ繰り返される。図1において
「領域終了?」との判定ステップは、切り出し領域全域
にわたって、切り出すべき識別パターンを全て切り出し
て、上記の濃度変換とマッチング工程とを行ったか否か
の判定を行うステップである。The above process is repeated as necessary by sequentially changing the identification patterns to be cut out. In FIG. 1, the determination step of “region end?” Is a step of determining whether or not the above-described density conversion and the matching process have been performed by extracting all the identification patterns to be extracted over the entire extraction region.
【0046】続いて「判定工程」が行われる。この工程
は、図2の例では、制御識別手段を構成する制御識別部
28で実行される。判定は、上記マッチング工程で、各
識別パターンごとに演算した非類似度が、所定の閾値を
超えるか否かを調べ、上記閾値を超えるときは、切り出
し領域中にはテンプレートと類似するパターンは無いと
判断し、逆の場合には類似パターンが存在すると判断す
ることにより行う。Subsequently, a "determining step" is performed. This step is executed by the control identification unit 28 constituting the control identification means in the example of FIG. The determination is made by checking whether or not the degree of dissimilarity calculated for each identification pattern in the matching step exceeds a predetermined threshold, and if it exceeds the threshold, there is no pattern similar to the template in the cutout area. And in the opposite case, it is determined that a similar pattern exists.
【0047】[0047]
【実施例】以下具体的な実施例として、切り出された識
別パターンとテンプレートとが類似である場合と、非類
似である場合とを説明する。DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, as specific examples, a case where a cut-out identification pattern and a template are similar and a case where they are not similar will be described.
【0048】図7に示す実施例は、切り出された識別パ
ターンとテンプレートとが類似している場合の例であ
る。即ち、図7において(E)はテンプレートを示して
いる。テンプレートは4×4の16画素の多値のデジタ
ルデータで構成される。このテンプレートのデータを
「濃度の順に配列し直した」のが、図7(F−1)で、
テンプレート濃度順番テーブルである。The embodiment shown in FIG. 7 is an example in which the cut-out identification pattern and the template are similar. That is, FIG. 7E shows a template. The template is composed of 4 × 4 16-pixel multivalued digital data. This template data
The “rearranged in the order of density” is shown in FIG.
It is a template density order table.
【0049】このテンプレート濃度順番テーブルの各要
素に対応して、順番に0から15まで番号を配列させた
ものが同図(F−2)に示す「テンプレート濃度順テー
ブル」であり、前述のテンプレート濃度順データ(図2
の29−A)は、図7(F−1)(F−2)により構成
される。[0049] corresponding to each element of the template concentration order table, shown in those are arranged numbered from 0 in order until 15 FIG (F-2) "template concentration order tape
Is a bull ", the above-mentioned template concentration Junde chromatography data (Fig. 2
29-A) is constituted by FIGS. 7 (F-1) and 7 (F-2).
【0050】さて、図7において(A−1),(A−
2)はそれぞれ、切り出された識別パターン(テンプレ
ートと同じく4×4の16画素で構成されている)と、
そのアドレスとを示している。この識別パターンとアド
レスとを、濃度の薄い順に配列し直したのが、図7(B
−1)の濃度順テーブルと(B−2)の濃度順アドレス
テーブルである。この濃度順テーブルにおける各濃度値
を、所定の濃度番号付与方式に従って濃度番号に置き換
えたのが図7(C)の濃度番号テーブルである。Now, in FIG. 7, (A-1) and (A-
2) is a cut-out identification pattern (consisting of 4 × 4 16 pixels like the template),
The address is shown. FIG. 7 (B) shows that the identification patterns and the addresses are rearranged in the order of decreasing density.
1B is a density order table and FIG. 2B is a density order address table. FIG. 7C shows a density number table in which each density value in the density order table is replaced with a density number according to a predetermined density number assignment method.
【0051】濃度番号は、テンプレートの構成画素数:
16に従い、最大濃度を0として0から15までが用意
されている。今、濃度順アドレステーブルにおける、第
n番目(n=1〜16)のアドレスにある濃度に対し
て、濃度番号:i(i=0〜15)が与えられていると
し、第n番目の濃度順アドレステーブルから連続してm
アドレス分だけ、同じ濃度が続いているときは、これら
アドレス:n,n+1,n+2,..,n+m−1にあ
る同一濃度には、濃度番号:iを与え、アドレス:n+
mの濃度に対しては、濃度番号:i+mを与えるのであ
る。この事情は、スポーツのレースで1着が2人いると
きに、1位が2人で2位が欠番になり、次着は3位にな
るのと同様である。The density number is the number of pixels constituting the template:
According to No. 16, 0 to 15 are prepared with the maximum density being 0. Now, assuming that a density number: i (i = 0 to 15) is given to the density at the n-th (n = 1 to 16) address in the density order address table, the n-th density M consecutively from the sequential address table
When the same density continues for the addresses, these addresses: n, n + 1, n + 2,. . , N + m−1, the density number: i is given, and the address: n +
For the density of m, the density number: i + m is given. This situation is the same as when there are two first places in a sports race, the first place is two and the second place is missing, and the next place is the third place.
【0052】勿論、濃度番号の付与方式はこの例に限ら
ず、別の方式によっても良い。Of course, the method of assigning the density number is not limited to this example, and another method may be used.
【0053】このようにして作成された濃度番号テーブ
ル(C)の各要素は、比較パターン(図7(D))のア
ドレス指定と、この指定されたアドレスに書き込まれる
濃度情報の選択に用いられる。以下、この濃度番号テー
ブルに基づく比較テーブルの作成を具体的に説明する。Each element of the density number table (C) created in this manner is used for specifying an address of a comparison pattern (FIG. 7D) and selecting density information to be written at the specified address. . Hereinafter, creation of the comparison table based on the density number table will be specifically described.
【0054】図7(C)に示す濃度番号テーブルの左上
隅の要素に着目する。この要素は、濃度番号「0」を持
っている。この要素と同じアドレス(テーブルの左上
隅)を、濃度順アドレステーブル(B−2)にあてはめ
ると、濃度順アドレステーブルの上の同要素は、アドレ
ス:2をその内容としている。このアドレス:2が、
「比較パターンにおけるアドレス」を決定する。即ち、
濃度番号テーブルの左上隅の要素は、比較パターンにお
いて、アドレス:2即ち、図7(D)のテーブルの最上
段の左から2番目の升を指定する。Attention is paid to the element at the upper left corner of the density number table shown in FIG. This element has a density number “0”. When the same address as this element (upper left corner of the table) is applied to the density order address table (B-2), the same element on the density order address table has address: 2 as its content. This address: 2
"Address in comparison pattern" is determined. That is,
The element at the upper left corner of the density number table specifies the address: 2 in the comparison pattern, that is, the second cell from the left at the top of the table in FIG. 7D.
【0055】次に、濃度番号テーブルの左上隅の要素の
濃度番号「0」をインデックスとして、テンプレート濃
度順テーブル上で探すと、上記濃度番号「0」と同値の
濃度順番{0}には、テンプレートの濃度値:16が対
応していることが分かる(テンプレート濃度順番テーブ
ル(F−1)参照)。Next, when the density number “0” of the element at the upper left corner of the density number table is used as an index and searched in the template density order table, a density order {0} having the same value as the density number “0” is obtained. It can be seen that the template density value: 16 corresponds (see template density order table (F-1)).
【0056】そこで、図7(D)に示された比較パター
ンの、アドレス:2には、上記濃度値:16が書き込ま
れることになる。濃度番号テーブルの各要素に就いて、
上記のプロセスを繰り返して、比較パターンの書き込み
を行なうと、図7(D)に示すような比較パターンが作
成されることになる。Therefore, the above-mentioned density value: 16 is written at address: 2 in the comparison pattern shown in FIG. 7D. For each element of the concentration number table,
When a comparison pattern is written by repeating the above process, a comparison pattern as shown in FIG. 7D is created.
【0057】従来のテンプレート・マッチングでは、切
り出された識別パターン(A−1)とテンプレート
(E)とが対比させられて、類似度もしくは非類似度が
演算されるが、この発明においては、比較パターン
(D)とテンプレート(E)の類似・非類似が問題とさ
れる。ここで注目すべきは、この実施例の場合、識別パ
ターン(A−1)とテンプレート(E)とは、類似して
はいるが、全く同一のパターンではない。しかし、識別
パターンが、濃度変換により比較パターンに変換される
と、図7に示すように、比較パターンとテンプレートと
は「同じパターン」になっている。In the conventional template matching, the cut-out identification pattern (A-1) and the template (E) are compared to calculate a similarity or a dissimilarity. The similarity / dissimilarity between the pattern (D) and the template (E) is a problem. It should be noted here that in this embodiment, the identification pattern (A-1) and the template (E) are similar but not identical. However, when the identification pattern is converted into the comparison pattern by the density conversion, the comparison pattern and the template are “the same pattern” as shown in FIG.
【0058】識別パターンとテンプレートとが非類似で
ある場合の実施例を、図7にならって図8に示す。この
場合、濃度変換により得られる、比較パターン(8図
(D))とテンプレート(E)とは全く別個のパターン
である。An embodiment in which the identification pattern and the template are dissimilar is shown in FIG. 8 following FIG. In this case, the comparison pattern (FIG. 8 (D)) and the template (E) obtained by the density conversion are completely different patterns.
【0059】このことから次のことが言える。即ち、こ
の例での濃度番号付与方式では、識別パターンがテンプ
レートパターンに類似している場合に、濃度変換により
テンプレートパターンにより類似した比較パターンが作
成される性質がある。これによりマッチングの効率・精
度が向上する。From this, the following can be said. That is, in the density numbering method in this example, when the identification pattern is similar to the template pattern, there is a property that a comparison pattern more similar to the template pattern is created by density conversion. This improves the efficiency and accuracy of matching.
【0060】[0060]
【発明の効果】以上のように、この発明によれば、テン
プレート・マッチング方式における新規なパターン識別
方法及び装置を提供できる。この発明は上記のように、
切り出された識別パターンを、直接にテンプレートと比
較せず、識別パターンをテンプレートの濃度を用いて変
換した比較パターンを、テンプレートと比較するので、
識別対象画像の照明条件が変化しても、また識別対象画
像自体の絶対的なコントラストが変化しても、識別対象
画像の相対的なコントラストさえ正しく信号化できれ
ば、適正なパターン識別が可能である。As described above, according to the present invention, it is possible to provide a novel pattern identification method and apparatus in the template matching method. The present invention, as described above,
Since the cut-out identification pattern is not directly compared with the template, the comparison pattern obtained by converting the identification pattern using the density of the template is compared with the template,
Even if the illumination condition of the identification target image changes, or the absolute contrast of the identification target image itself changes, proper pattern identification is possible as long as the relative contrast of the identification target image can be correctly signaled. .
【0061】なお、この発明で用いている「濃度変換」
自体は、マッチングのみならず、ニューラルネットワー
ク演算等への応用も可能である。The "density conversion" used in the present invention
As such, it can be applied not only to matching but also to neural network operations and the like.
【図1】この発明の工程を説明するための図である。FIG. 1 is a diagram for explaining a process of the present invention.
【図2】請求項3の装置の1例を示す機能ブロック図で
ある。FIG. 2 is a functional block diagram showing an example of the device according to claim 3;
【図3】識別パターンの切り出しを説明するための図で
ぁる。FIG. 3 is a diagram for explaining extraction of an identification pattern.
【図4】濃度変換を説明するための図である。FIG. 4 is a diagram for explaining density conversion.
【図5】濃度変換を説明するためのフロー図である。FIG. 5 is a flowchart for explaining density conversion.
【図6】テンプレートと比較パターンの非類似度演算を
説明するための図である。FIG. 6 is a diagram for explaining a non-similarity calculation between a template and a comparison pattern.
【図7】1実施例を説明するための図である。FIG. 7 is a diagram for explaining one embodiment.
【図8】別実施例を説明するための図である。FIG. 8 is a diagram for explaining another embodiment.
Claims (5)
識別方式であって、 テンプレートと同サイズに切り出された識別パターンの
各画素の濃度を、その濃度順位に応じて、テンプレート
要素の濃度で置き換えて比較パターンを作成し、この比
較パターンとテンプレートとの類似度もしくは非類似度
を演算することを特徴とする、パターン識別方法。1. A pattern identification method of a template matching method, wherein the density of each pixel of an identification pattern cut out to the same size as a template is replaced with the density of a template element in accordance with the density order. And calculating the similarity or dissimilarity between the comparison pattern and the template.
デジタル信号として記憶する画像入力工程と、 記憶された画像情報に対して、パターン識別を行なう領
域としての切り出し領域と切り出し開始位置とを設定す
る切り出し領域設定工程と、 上記切り出し領域から、テンプレートと同サイズの識別
パターンを切り出す切り出し工程と、 切り出された識別パターンの、各画素の濃度を、濃度順
に再配置して、濃度順テーブルを作成する濃度順テーブ
ル作成工程と、 作製された濃度順テーブルと、予め用意されたテンプレ
ート濃度順テーブルにより、識別パターンの各画素の濃
度を順次、対応する順位のテンプレート濃度順テーブル
の値に置き換えて、 比較パターンを作成する濃度変換工
程と、 比較パターンと、テンプレートとの類似度もしくは非類
似度を演算するマッチング工程と、 マッチング工程による演算結果に基づき、上記切り出し
領域内にテンプレートと同一もしくは類似のパターンが
存在するか否かを判定する判定工程とを含むことを特徴
とする、請求項1のパターン識別方法。2. An image input step of reading an image to be identified and storing the density of each pixel as a digital signal, and, based on the stored image information, a cutout area as a pattern identification area and a cutout start position. A cutout area setting step to be set; a cutout step of cutting out an identification pattern having the same size as the template from the cutout area; and a density of each pixel of the cutout identification pattern,
Density table to create a density order table
Template creation process , created density order table, and prepared template
The density of each pixel of the identification pattern is
Template density order table of the order corresponding to the degree
A density conversion step of creating a comparison pattern by replacing the value of the comparison pattern; a matching step of calculating the similarity or dissimilarity between the comparison pattern and the template; and a template in the cutout area based on the calculation result of the matching step. A determination step of determining whether or not a pattern identical or similar to the pattern exists.
て、 濃度順テーブル作成工程において、切り出された識別パ
ターンの、各画素の濃 度とアドレスとを濃度順に再配置
して、濃度順テーブルと濃度順画像アドレステーブルと
を作成し、 濃度変換工程が、 作成された濃度順テーブルの各画素濃度を、所定の濃度
番号付与方式に従って濃度番号の配列に変換する濃度番
号テーブル作成工程と、 作成された濃度番号テーブルの各テーブル要素を、予め
用意されたテンプレート濃度順テーブルの要素の順番を
示すインデックスとして、要素の濃度を読み出し、その
濃度を、上記テーブル要素により指定されるアドレスへ
書き込んで、比較パターンを作成する比較パターン作成
工程とを有することを特徴とする、パターン識別方法。 3. A pattern identification method according to claim 2, wherein
In the density order table creation process, the identification
Relocation turn, the concentration and the address of each pixel in the concentration order
And a density order table, a density order image address table,
Is created, and the density conversion step converts each pixel density of the created density order table into a predetermined density.
Density number to be converted to density number array according to numbering method
No. table creation step and each table element of the created concentration number table
Change the order of the elements in the prepared template density order table.
Read the density of the element as an index to indicate
Density to address specified by the above table element
Write a comparison pattern to create a comparison pattern
And a process for identifying a pattern.
信号として記憶する記憶手段と、 この記憶手段に記憶された画像情報に対して、パターン
識別を行なう領域としての切り出し領域と切り出し開始
位置とを設定し、設定された切り出し領域から、テンプ
レートと同サイズの識別パターンを切り出す切り出し手
段と、 切り出された識別パターンの、各画素の濃度を濃度順に
再配置して、濃度順テーブルを作成する濃度順テーブル
作成手段と、 作成された濃度順テーブルと、予め用意されたテンプレ
ート濃度順テーブルとにより、識別パターンの各画素の
濃度を順次、対応する順位のテンプレート濃度順テーブ
ルの値に置き換えて、比較パターンを作成する濃度変換
手段と、 比較パターンとテンプレートとの類似度もしくは非類似
度を演算するマッチング工程を行なう演算手段と、 この演算手段のマッチング工程による演算結果に基づ
き、上記切り出し領域内にテンプレートと同一もしくは
類似のパターンが存在するか否かを判定する制御識別手
段とを有するパターン識別装置。4. An apparatus for carrying out the method of claim 2, wherein: reading means for reading the image to be identified; storage means for storing the density of each pixel of the read image to be identified as a digital signal; For the image information stored in the storage means, a cutout area as a region for performing pattern identification and a cutout start position are set, and a cutout means for cutting out an identification pattern having the same size as the template from the set cutout area, A density order table creating means for creating a density order table by rearranging the density of each pixel of the cut out identification pattern in the order of density, a created density order table, and a template density order table prepared in advance. , The density of each pixel of the identification pattern is sequentially replaced with the value of the template density order table of the corresponding order, and the comparison pattern Density converting means to be created; calculating means for performing a matching step for calculating the similarity or dissimilarity between the comparison pattern and the template; Alternatively, a pattern identification device having control identification means for determining whether or not a similar pattern exists.
て、 濃度順テーブル作成手段が、切り出された識別パターン
の、各画素の濃度とアドレスとを濃度順に再配置して、
濃度順テーブルと濃度順画像アドレステーブルとを作成
し、 濃度変換手段が、 作成された濃度順テーブルの各画素濃度を、所定の濃度
番号付与方式に従って濃度番号の配列に変換する濃度番
号テーブル作成手段と、 作成された濃度番号テーブルの各テーブル要素を、予め
用意されたテンプレート濃度順テーブルの要素の順番を
示すインデックスとして、要素の濃度を読み出し、その
濃度を、上記テーブル要素により指定されるアドレスへ
書き込んで、比較パターンを作成する比較パターン作成
手段とを有し、請求項3記載のパターン識別方法を実施
するパターン識別装置。5. The pattern identification device according to claim 4, wherein the density order table creating means rearranges the density and address of each pixel of the cut-out identification pattern in the order of density,
A density order table and a density order image address table; and a density conversion means for converting each pixel density of the created density order table into an array of density numbers according to a predetermined density number assignment method. Using each table element of the created density number table as an index indicating the order of the elements in the prepared template density order table, read the density of the element, and read the density to the address specified by the table element. 4. A pattern identification device for performing a pattern identification method according to claim 3, further comprising comparison pattern creation means for writing and creating a comparison pattern.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP17398191A JP2573438B2 (en) | 1991-07-15 | 1991-07-15 | Pattern identification method and apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP17398191A JP2573438B2 (en) | 1991-07-15 | 1991-07-15 | Pattern identification method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH0520460A JPH0520460A (en) | 1993-01-29 |
JP2573438B2 true JP2573438B2 (en) | 1997-01-22 |
Family
ID=15970591
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP17398191A Expired - Fee Related JP2573438B2 (en) | 1991-07-15 | 1991-07-15 | Pattern identification method and apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2573438B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07316337A (en) * | 1994-05-27 | 1995-12-05 | Kanebo Ltd | Water-absorbing sheet and production thereof |
US6366362B1 (en) * | 1998-12-23 | 2002-04-02 | Xerox Corporation | Method and apparatus for adjusting input binary image halftone dots using template matching controlled by print engine xerographic density information to maintain constant tone reproduction on printed output over time |
-
1991
- 1991-07-15 JP JP17398191A patent/JP2573438B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH0520460A (en) | 1993-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5165103A (en) | Image data processing method for selective partial image storage | |
US5898430A (en) | Scenario editor for multimedia data and scenario reproducing apparatus | |
US5740445A (en) | Information processing apparatus for generating directory information to manage a file using directories | |
US5047868A (en) | Image data processing method for selective partial image display | |
US4992954A (en) | Method of storing character patterns and character pattern utilization system | |
JPH0778817B2 (en) | A method for decoding a bitmap image space representation of a self-clocking symbol shape code | |
JPH0778818B2 (en) | Binary image processing method for decoding self-clocking symbol shape code | |
JPH0778819B2 (en) | An adaptive scale method for decoding spatially periodic self-clocking symbol shape codes | |
KR0147355B1 (en) | Graphics images data compression method | |
JP4333350B2 (en) | Image management apparatus, image management method, and program | |
CN1116804A (en) | Method and apparatus for providing slow motion video at normal motion play speed | |
JP2573438B2 (en) | Pattern identification method and apparatus | |
JPH0361226B2 (en) | ||
JP2001319232A (en) | Device and method for retrieving similar image | |
US7278121B2 (en) | Method and apparatus for reducing redundant data in a layout data structure | |
JP2971472B2 (en) | Electronic file device | |
JPS60156172A (en) | Retrieval system of picture file | |
JP2584793B2 (en) | Sign assignment method | |
CN102947805A (en) | Data management device and data management method | |
JP2006004050A (en) | Image processing device, image reading device, and program | |
JPS58123159A (en) | Registering method of picture information | |
JPS63301358A (en) | Input/output system for electronic filing system | |
CN118733544A (en) | TILED IMAGE image file compression method | |
JP4289541B2 (en) | Template selection method and apparatus | |
JPH06223120A (en) | Image forming device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 11 Free format text: PAYMENT UNTIL: 20071024 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081024 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081024 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 13 Free format text: PAYMENT UNTIL: 20091024 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 13 Free format text: PAYMENT UNTIL: 20091024 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101024 Year of fee payment: 14 |
|
LAPS | Cancellation because of no payment of annual fees |