JP4634586B2 - 紙葉類の画像入力装置 - Google Patents

紙葉類の画像入力装置 Download PDF

Info

Publication number
JP4634586B2
JP4634586B2 JP2000255460A JP2000255460A JP4634586B2 JP 4634586 B2 JP4634586 B2 JP 4634586B2 JP 2000255460 A JP2000255460 A JP 2000255460A JP 2000255460 A JP2000255460 A JP 2000255460A JP 4634586 B2 JP4634586 B2 JP 4634586B2
Authority
JP
Japan
Prior art keywords
light
paper sheet
image
light source
wavelength
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000255460A
Other languages
English (en)
Other versions
JP2002074449A5 (ja
JP2002074449A (ja
Inventor
秀雄 大澤
淳二 三浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2000255460A priority Critical patent/JP4634586B2/ja
Publication of JP2002074449A publication Critical patent/JP2002074449A/ja
Publication of JP2002074449A5 publication Critical patent/JP2002074449A5/ja
Application granted granted Critical
Publication of JP4634586B2 publication Critical patent/JP4634586B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、たとえば、搬送される有価証券などの紙葉類の種類判別や真偽判別等を行なうために、紙葉類の透かし画像や印刷画像を光学的に入力する紙葉類の画像入力装置に関する。
【0002】
【従来の技術】
従来、この種の技術として、たとえば、特開平8−152359号公報あるいは特開平6−203244号公報に開示されていてるものがある。
【0003】
特開平8−152359号公報の技術は、機械識別用の有価証券の分光反射量の波形を所定の基準レベルで2値化し、あらかじめ把握されている2値化した波形と同じであるかを判定することにより、機械識別用の有価証券の真偽判別や種類判別を瞬時に行なうものである。
【0004】
特開平6−203244号公報の技術は、紙幣の透かしパターンをそれぞれ透過光および反射光を利用した2つの光学的読取手段にて読取り、双方の読取データ同志を比較することにより、紙幣の真偽を判別することで、紙幣の透かしについての判別能力を向上するとともに、汚れなどのノイズによる影響を軽減するものである。
【0005】
【発明が解決しようとする課題】
ところが、搬送中の紙葉類の真偽判別や種類判別を行なう目的で、複数の反射波長特性を検出する場合、従来(特開平8−152359号公報)のように、センサを紙葉類の搬送方向に対して検出する波長の数だけ配設する必要があり、そのため装置全体が大形化するという問題がある。
【0006】
また、搬送中の紙葉類の透かし画像の検出を行なう目的で、透かし画像が存在する範囲の片面の反射光による画像(以下、反射画像という)と透過光による画像(以下、透過画像という)を得るために、従来(特開平6−203244号公報)のように、白色光または単色光を用いて紙葉類を照明すると、同一地点で検出する場合は透過光と反射光とが混在してしまい、反射画像と透過画像をそれぞれ単独で得ることができないという基本的な問題があった。
【0007】
そのため、反射画像と透過画像を別の搬送位置で検出せざるをえないが、異なる地点で別々に検出される2つの画像を正確に重ね合わせるのは極めて困難である。また、搬送速度や搬送姿勢が一定していない場合には、2つの画像の重ね合わせはほとんど不可能に近い。
【0008】
さらに、片面の反射画像で透かし画像の検出を行なうと、検出対象とならないもう片面に反射画像で認識できる疑似透かし画像を有する偽造物を分別できないという問題がある。
【0009】
また、前記例と同様に、同一場所で検出できないため、別々のユニットを搬送路上に配置するため、装置全体が大形化するという問題がある。
【0010】
そこで、本発明は、反射画像と透過画像との重ね合わせが極めて容易となり、紙葉類の種類判別や真偽判別等を高性能に行なうことが可能となる紙葉類の画像入力装置を提供することを目的とする。
【0011】
【課題を解決するための手段】
本発明の紙葉類の画像入力装置は、紙葉類の撮像対象領域の一方の面に第1の波長を有する光を照射する第1の光源と、前記紙葉類の撮像対象領域の他方の面に第2の波長を有する光を照射する第2の光源と、前記紙葉類の撮像対象領域の一方の面側に設けられ、前記第1の光源の光照射により前記紙葉類の撮像対象領域で反射した第1の波長を有する光、および、前記第2の光源の光照射により前記紙葉類の撮像対象領域を透過した第2の波長を有する光をそれぞれ受光することにより、前記紙葉類の撮像対象領域内の画像を第1の波長と第2の波長とで分離撮像する第1の撮像手段と、前記紙葉類の撮像対象領域の他方の面側に設けられ、前記第2の光源の光照射により前記紙葉類の撮像対象領域で反射した第2の波長を有する光を受光することにより、前記紙葉類の撮像対象領域内の画像を撮像する第2の撮像手段とを具備している。
【0014】
また、本発明の紙葉類の画像入力装置は、前記第1の光源の第1の波長を有する光に可視光を使用するとともに、前記第2の光源の第2の波長を有する光に赤外光を使用し、かつ、前記第1、第2の撮像手段として赤外光および可視光に感度を持つカラーイメージセンサを使用することを特徴とする。
【0018】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
【0019】
まず、第1の実施の形態について説明する。
【0020】
図1は、第1の実施の形態に係る紙葉類の画像入力装置を模式的に示している。なお、以下の説明においては、図面に対して垂直方向はカラーイメージセンサにより、また、水平方向(紙葉類の搬送方向)は紙葉類を搬送させることによって、紙葉類に対し2次元の走査を行なう場合について説明する。
【0021】
図1において、透かし画像や印刷画像を有する有価証券などの紙葉類1は、一対の搬送ローラ2により立位状態で挟持されて図示矢印方向に搬送される。搬送される紙葉類1の一方の面(裏面)側には、紙葉類1の撮像対象領域(たとえば、透かし画像が存在する範囲)に対し第1の波長を有する光として赤外光を照射する棒状の光源3が紙葉類1の搬送方向と直交する方向に平行に設けられているとともに、他方の面(表面)側には、光源3と同一範囲(紙葉類1の撮像対象領域)に対し第2の波長を有する光として可視光を照射する棒状の光源4が紙葉類1の搬送方向と直交する方向に平行に設けられている。
【0022】
光源3と相対向する紙葉類1の他方の面側には、光源3の光照射により紙葉類1の撮像対象領域を透過した光(赤外光)、および、光源4の光照射により紙葉類1の撮像対象領域で反射した光(可視光)をそれぞれ受光する撮像手段としてのカメラ5が設けられている。
【0023】
カメラ5は、赤外光と赤色や緑色波長域の可視光に感度を持つライン状のカラーイメージセンサ(カラーラインセンサ)を用いていて、このカラーイメージセンサは紙葉類1の搬送方向と直交する方向に平行配設されている。
【0024】
このように構成することにより、カメラ5の赤外光出力からは紙葉類1の裏面から表面への透過画像が得られ、可視光出力からは紙葉類1の表面の反射画像が得られる。得られた透過画像により、紙葉類1の外形寸法や孔などの部分的損傷の有無を検出する。得られた反射画像では、紙葉類1の表面の図柄をあらかじめ与えられた辞書情報と照合をとることで、種類や搬送方向を認識する。同様に、紙葉類1の表面の汚損程度を検出する。
【0025】
また、赤外光による透過画像は、紙葉類1の紙や印刷の赤外吸収特性が得られる。このデータをあらかじめ与えられた辞書データとパターンマッチングや積分処理などにより、紙葉類1の真偽を判別する。
【0026】
本実施の形態では、紙葉類1の同一場所の透過光と反射光の情報が得られるため、透過画像から紙葉類1の形状的な損傷を認識して、他の処理系にフィードバックすることで、紙葉類1の種類、搬送方向、汚損、真偽の判別における誤認識を防止することが可能となり、少ないスペースでより信頼性の高いシステムを構築できる。
【0027】
なお、カメラ5のカラーイメージセンサとして、その受光波長域が赤色と青色、赤色と緑色、あるいは、緑色と青色の2色受光するカラーイメージセンサを使用することで、より高性能な検出が可能となる。
【0028】
また、光源3に発光ダイオード(LED)などの点光源を使用する場合には、図1に示すように、光源3と紙葉類1との間に光拡散板6を配設することで、フラットな照射光が得られる。
【0029】
このように、第1の実施の形態によれば、紙葉類1の撮像対象領域を同時に照明する、赤外光を出力する光源3と、可視光を出力する光源4と、当該撮像対象領域を撮像するカラーイメージセンサを用いたカメラ5とを組合わせることにより、1つの光学系で同じ撮像対象域領域の純粋な透過画像と反射画像を得ることができる。
【0030】
したがって、紙葉類上の同じ位置の透過画像と表裏の反射画像を同時に得ることにより、透過画像と反射画像との重ね合わせは極めて容易となり、紙葉類の種類や搬送方向および汚損程度、真偽を高性能に判別することが可能となる。同様の理由から、形状の損傷情報をずれなく反射画像処理に反映できることから、物理的損傷を原因とする誤判別をなくすことが可能となる。
【0031】
次に、第2の実施の形態について説明する。
【0032】
図2は、第2の実施の形態に係る紙葉類の画像入力装置を模式的に示している。なお、図1と同一部分には同一符号を付して説明する。
【0033】
図2において、紙葉類1は、搬送ローラ2により立位状態で挟持されて図示矢印方向に搬送される。搬送される紙葉類1の一方の面(表面)側には、紙葉類1の撮像対象領域に対し第1の波長を有する光として青色光を照射する棒状の光源7が紙葉類1の搬送方向と直交する方向に平行に設けられているとともに、他方の面(裏面)側には、光源7と同一範囲(紙葉類1の撮像対象領域)に対し第2の波長を有する光として緑色光を照射する棒状の光源8が紙葉類1の搬送方向と直交する方向に平行に設けられている。
【0034】
搬送される紙葉類1の一方の面(表面)側には、光源7の光照射により紙葉類1の撮像対象領域で反射した光(青色光)、および、光源8の光照射により紙葉類1の撮像対象領域を透過した光(緑色光)をそれぞれ受光する第1の撮像手段としてのカメラ9が設けられている。
【0035】
カメラ9と相対向する紙葉類1の他方の面(裏面)側には、光源8の光照射により紙葉類1の撮像対象領域で反射した光(緑色光)、および、光源7の光照射により紙葉類1の撮像対象領域を透過した光(青色光)をそれぞれ受光する第2の撮像手段としてのカメラ10が設けられている。
【0036】
カメラ9,10は、可視光に感度を持つライン状のカラーイメージセンサ(カラーラインセンサ)を用いていて、このカラーイメージセンサは紙葉類1の搬送方向と直交する方向に平行配設されている。
【0037】
このように構成することにより、カメラ9の青色光出力からは紙葉類1の表面側の反射画像が得られ、緑色光出力からは紙葉類1の裏面から表面への透過画像が得られる。同様に、カメラ10の緑色出力からは紙葉類1の裏面側の反射画像が得られ、青色光出力からは紙葉類1の表面から裏面への透過画像が得られる。
【0038】
紙葉類1の透かし画像の検出のためには、このようにして同時に得られた同じ部分を撮像した4つの画像のうち、透過画像のどちらか一方の画像と両方の反射画像を用いる。その場合、たとえば、1つの透過画像中に透かし画像を形成する線分が検出され、また、2つの反射画像の同じ位置に線分が検出されなかった場合に、透かし画像があったとみなす。
【0039】
なお、光源7,8として青色と赤色、緑色と赤色、あるいは、赤外光と可視光の組合わせによっても同じ機能を実現できる。
【0040】
このように、第2の実施の形態によれば、紙葉類1の撮像対象領域を同時に照明する、青色光を出力する光源7と、緑色光を出力する光源8と、当該撮像対象領域の片面は青色光と緑色光で分離撮像するカメラ9と、残る片面の緑色光の波長特性を持つ光源8と適合するカメラ10を持つことにより、紙葉類1上の同じ位置の透過画像と表裏の反射画像が得られる。この情報を基に透かし画像を検出することにより、表裏どちらかに印刷、手書き等の手段でつけられた模様と、紙そのものにつけられた透かし模様(画像)の識別が可能となる。
【0041】
また、光源に3原色光を使用し、撮像手段にカラーカメラを用いることで、混合されている透過光と反射光を基に透過画像と反射画像とを完全分離することができる。
【0042】
次に、第3の実施の形態について説明する。
【0043】
図3は、第3の実施の形態に係る紙葉類の画像入力装置を模式的に示している。なお、図1、図2と同一部分には同一符号を付して説明する。
【0044】
図3において、紙葉類1は、搬送ローラ2により立位状態で挟持されて図示矢印方向に搬送される。搬送される紙葉類1の一方の面(表面)側には、紙葉類1の撮像対象領域に対し可視光を照射する棒状の光源11が紙葉類1の搬送方向と直交する方向に平行に設けられている。
【0045】
搬送される紙葉類1の一方の面(表面)側には、光源11の光照射により紙葉類1の撮像対象領域で反射した光(可視光)を受光する第1の撮像手段としてのカメラ12が設けられている。
【0046】
光源11と相対向する紙葉類1の他方の面(裏面)側には、光源11の光照射により紙葉類1の撮像対象領域を透過した光(赤外光)を受光する第2の撮像手段としてのカメラ13が設けられている。
【0047】
カメラ12は、可視光に感度を持つライン状のカラーイメージセンサ(カラーラインセンサ)を用いていて、このカラーイメージセンサは紙葉類1の搬送方向と直交する方向に平行配設されている。
【0048】
カメラ13は、赤外光に感度を持つライン状のカラーイメージセンサ(カラーラインセンサ)を用いていて、このカラーイメージセンサは紙葉類1の搬送方向と直交する方向に平行配設されている。
【0049】
このように構成することにより、カメラ12の可視光出力からは紙葉類1の表面側の反射画像が得られ、カメラ13の赤外光出力からは紙葉類1の表面から裏面への透過画像が得られる。得られた反射画像および透過画像により、前述した第1の実施の形態と同様な処理が可能となる。
【0050】
このように、第3の実施の形態によれば、光源11により照明された紙葉類1の撮像対象領域の同一箇所を撮像する反射光用のカメラ12と、透過光用のカメラ13とを有し、これら反射光用のカメラ12と透過光用のカメラ13で異なる波長(赤外光、可視光)に感度を持つことより、第1の実施の形態と同様な作用効果が期待できる。
【0051】
次に、第4の実施の形態について説明する。
【0052】
図4は、第4の実施の形態に係る紙葉類の画像入力装置を模式的に示している。第4の実施の形態は、図1に示した第1の実施の形態に対して、さらに、紙葉類1の裏面側の反射画像を得るための光源14およびカメラ15を追加したものであり、その他は第1の実施の形態と同様である。
【0053】
すなわち、光源3,4およびカメラ5よりも紙葉類1の搬送方向下流側(あるいは、上流側でもよい)で、搬送される紙葉類1の一方の面(裏面)側には、紙葉類1の撮像対象領域に対し第2の波長を有する光として可視光を照射する棒状の光源14が紙葉類1の搬送方向と直交する方向に平行に設けられているとともに、この光源14の光照射により紙葉類1の撮像対象領域で反射した光(可視光)を受光する撮像手段としてのカメラ15が設けられている。
【0054】
カメラ15は、可視光に感度を持つライン状のカラーイメージセンサ(カラーラインセンサ)を用いていて、このカラーイメージセンサは紙葉類1の搬送方向と直交する方向に平行配設されている。
【0055】
このように構成することにより、第1の実施の形態と同様、カメラ5の赤外光出力からは紙葉類1の裏面から表面への透過画像が得られ、可視光出力からは紙葉類1の表面の反射画像が得られるとともに、さらに、カメラ15の可視光出力からは紙葉類1の裏面の反射画像が得られる。すなわち、紙葉類1の透過画像と表裏反射画像をそれぞれ得ることができる。このような2つの光学系で紙葉類1の形状的な損傷、真偽と、さらに両面を対象とした種類、方向、汚損検出が可能となる。
【0056】
このように、第4の実施の形態によれば、第1の実施の形態に対して、さらに、紙葉類の裏面側の反射画像を得るための光源およびカメラを追加することにより、2つの光学系で紙葉類の形状的な損傷、真偽と同時に両面を対象とした種類、方向、汚損検出が実現可能となる。
【0057】
【発明の効果】
以上詳述したように本発明によれば、反射画像と透過画像との重ね合わせが極めて容易となり、紙葉類の種類判別や真偽判別等を高性能に行なうことが可能となる紙葉類の画像入力装置を提供できる。
【図面の簡単な説明】
【図1】本発明の第1の実施の形態に係る紙葉類の画像入力装置を模式的に示す概略構成図。
【図2】本発明の第2の実施の形態に係る紙葉類の画像入力装置を模式的に示す概略構成図。
【図3】本発明の第3の実施の形態に係る紙葉類の画像入力装置を模式的に示す概略構成図。
【図4】本発明の第4の実施の形態に係る紙葉類の画像入力装置を模式的に示す概略構成図。
【符号の説明】
1……紙葉類
2……搬送ローラ
3,4……光源
5……カメラ(撮像手段)
6……光拡散板
6……カメラ
7,8……光源
9,10……カメラ(撮像手段)
11……光源
12,13……カメラ(撮像手段)
14……光源
15……カメラ(撮像手段)

Claims (2)

  1. 紙葉類の撮像対象領域の一方の面に第1の波長を有する光を照射する第1の光源と、
    前記紙葉類の撮像対象領域の他方の面に第2の波長を有する光を照射する第2の光源と、
    前記紙葉類の撮像対象領域の一方の面側に設けられ、前記第1の光源の光照射により前記紙葉類の撮像対象領域で反射した第1の波長を有する光、および、前記第2の光源の光照射により前記紙葉類の撮像対象領域を透過した第2の波長を有する光をそれぞれ受光することにより、前記紙葉類の撮像対象領域内の画像を第1の波長と第2の波長とで分離撮像する第1の撮像手段と、
    前記紙葉類の撮像対象領域の他方の面側に設けられ、前記第2の光源の光照射により前記紙葉類の撮像対象領域で反射した第2の波長を有する光を受光することにより、前記紙葉類の撮像対象領域内の画像を撮像する第2の撮像手段と、
    を具備したことを特徴とする紙葉類の画像入力装置。
  2. 前記第1の光源の第1の波長を有する光に可視光を使用するとともに、前記第2の光源の第2の波長を有する光に赤外光を使用し、かつ、前記第1、第2の撮像手段として赤外光および可視光に感度を持つカラーイメージセンサを使用することを特徴とする請求項記載の紙葉類の画像入力装置。
JP2000255460A 2000-08-25 2000-08-25 紙葉類の画像入力装置 Expired - Fee Related JP4634586B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000255460A JP4634586B2 (ja) 2000-08-25 2000-08-25 紙葉類の画像入力装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000255460A JP4634586B2 (ja) 2000-08-25 2000-08-25 紙葉類の画像入力装置

Publications (3)

Publication Number Publication Date
JP2002074449A JP2002074449A (ja) 2002-03-15
JP2002074449A5 JP2002074449A5 (ja) 2007-10-11
JP4634586B2 true JP4634586B2 (ja) 2011-02-16

Family

ID=18744241

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000255460A Expired - Fee Related JP4634586B2 (ja) 2000-08-25 2000-08-25 紙葉類の画像入力装置

Country Status (1)

Country Link
JP (1) JP4634586B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6313570B2 (ja) * 2013-11-08 2018-04-18 三菱重工機械システム株式会社 受取証書発行機、料金自動収受機及び料金自動収受システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62164192A (ja) * 1986-01-16 1987-07-20 日本電気株式会社 光学式紙幣鑑別装置
JPH06203244A (ja) * 1992-12-25 1994-07-22 Toyo Commun Equip Co Ltd 紙幣等の真贋識別装置
JPH1063913A (ja) * 1996-08-13 1998-03-06 Toshiba Corp 良否判別装置
JP2000186924A (ja) * 1998-12-21 2000-07-04 Toshiba Corp 検知光学系およびこれを用いた形状検知装置ならびに形状検知方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62164192A (ja) * 1986-01-16 1987-07-20 日本電気株式会社 光学式紙幣鑑別装置
JPH06203244A (ja) * 1992-12-25 1994-07-22 Toyo Commun Equip Co Ltd 紙幣等の真贋識別装置
JPH1063913A (ja) * 1996-08-13 1998-03-06 Toshiba Corp 良否判別装置
JP2000186924A (ja) * 1998-12-21 2000-07-04 Toshiba Corp 検知光学系およびこれを用いた形状検知装置ならびに形状検知方法

Also Published As

Publication number Publication date
JP2002074449A (ja) 2002-03-15

Similar Documents

Publication Publication Date Title
US7256874B2 (en) Multi-wavelength currency authentication system and method
EP1250682B1 (en) Document monitoring method
JP6242570B2 (ja) 画像読取装置、及び紙葉類処理装置
US20110064279A1 (en) Document handling apparatus
JP5989475B2 (ja) 画像読取装置、及び紙葉類処理装置
US8089045B2 (en) Method and apparatus for raised material detection
US20100322503A1 (en) Paper sheet identifying device and paper sheet identifying method
US20100329507A1 (en) Paper sheet identifying device and paper sheet identifying method
EP3598401B1 (en) Paper sheet detection device, paper sheet processing apparatus, and paper sheet detection method
JP2009157504A (ja) 紙葉類判別装置
JP2012198188A (ja) 光検出装置、及び光検出装置を備える紙葉類処理装置
US20110019872A1 (en) Paper identifying apparatus and paper identifying method
JP2019040315A (ja) 不可視特性検知装置、シート識別装置、シート処理装置、印刷検査装置、及び不可視特性検知方法
WO2004077366A1 (ja) 紙葉類識別装置および方法
JP5752549B2 (ja) 光学読取装置および紙葉類処理装置
JP2003077025A (ja) 紙葉類判別装置及び紙葉類判別方法
JP4634586B2 (ja) 紙葉類の画像入力装置
JP4074917B1 (ja) 紙葉類識別装置
ITMI20122131A1 (it) Lettore ottico per documenti con zone stampate e/o forate
US20090294244A1 (en) Currency Validator with Rejected Bill Image Storage
EP1337977B1 (en) Optical method and apparatus for inspecting documents
WO2017145779A1 (ja) 有価書類識別装置、有価書類処理機、画像センサユニット及び光学可変素子領域の検出方法
JPH1139534A (ja) 被検査体の識別方法
JPH09245216A (ja) 紙葉類識別装置
JP3651177B2 (ja) 紙葉類鑑別装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070823

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070823

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100604

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100629

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101026

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101119

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131126

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees