JP2000115543A - 画像処理装置 - Google Patents

画像処理装置

Info

Publication number
JP2000115543A
JP2000115543A JP10281106A JP28110698A JP2000115543A JP 2000115543 A JP2000115543 A JP 2000115543A JP 10281106 A JP10281106 A JP 10281106A JP 28110698 A JP28110698 A JP 28110698A JP 2000115543 A JP2000115543 A JP 2000115543A
Authority
JP
Japan
Prior art keywords
pixel
edge
density
interest
density level
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10281106A
Other languages
English (en)
Other versions
JP4281126B2 (ja
Inventor
Keisuke Hashimoto
圭介 橋本
Yoshihiko Hirota
好彦 廣田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Minolta Co Ltd
Original Assignee
Minolta Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Minolta Co Ltd filed Critical Minolta Co Ltd
Priority to JP28110698A priority Critical patent/JP4281126B2/ja
Priority to US09/408,366 priority patent/US6978045B1/en
Publication of JP2000115543A publication Critical patent/JP2000115543A/ja
Application granted granted Critical
Publication of JP4281126B2 publication Critical patent/JP4281126B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Color, Gradation (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

(57)【要約】 【課題】 画像処理装置において文字エッジ部をより滑
らかに再現する。 【解決手段】 画像処理装置において、多値画像データ
に基づいて、注目画素とその周辺画素の濃度レベルの差
から注目画素のエッジ方向を識別する。さらに、注目画
素のエッジ方向と、その周辺画素のエッジ方向から、注
目画素のエッジ方向の識別が不適切な場合には、適切な
エッジ方向にエッジ方向を修正する。多値画像データに
基づいて、エッジ部では、画素を主走査方向に複数のサ
ブ領域に分割しサブ領域の単位で画像を形成する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、デジタル画像デー
タの処理、特に文字画像のエッジ処理に関する。
【0002】
【従来の技術】画像処理装置は、原稿を読み取って得ら
れたデジタル画像データを処理し、印字用のデジタル印
字データを出力する。画像は、デジタル印字データに基
づいて再現される。画像処理装置は、原稿の画像をより
よく再現するため、原稿の画像を読み取ったデジタル画
像データについて、種々の処理をおこなう。文字原稿に
ついては、文字画像の再現のため、文字のエッジを強調
することが望ましい。このため、種々のエッジ判定手法
や、エッジ判定結果に基づくデータ強調手法が提案され
ている。
【0003】
【発明が解決しようとする課題】文字画像に特に斜め方
向にあるエッジを含む場合、そのようなエッジを強調す
ると、得られた画像はぎざぎざになる。このため、原画
像に比べて、再現画像の品位が悪くなる。これは、画像
が画素単位で読み取られ再現されるためである。しか
し、文字のエッジ部は滑らかに再現されることが望まし
い。
【0004】本発明の目的は、文字エッジ部をより滑ら
かに再現できる画像処理装置を提供することである。
【0005】
【課題を解決するための手段】本発明に係る画像処理装
置は、多値画像データに基づいて、画素を主走査方向に
複数のサブ領域に分割しサブ領域の単位で画像を形成す
るためのデジタル画像データを出力する画像処理装置で
ある。この画像処理装置は、多値画像データに基づい
て、注目画素とその周辺画素の濃度レベルの差から注目
画素のエッジ方向を識別するエッジ判定手段と、上記エ
ッジ判定手段によって判定された注目画素のエッジ方向
にしたがって、注目画素内の複数のサブ領域に濃度レベ
ルを設定して各注目画素内の濃度分布を変化させる濃度
制御手段とを備える。注目画素の濃度分布の重心を変化
させるため、1画素を主走査方向に複数のサブ画素に分
割して、注目画素の濃度分布をサブ画素単位で制御す
る。エッジ判定手段により識別されたエッジ方向を基
に、濃度制御手段は、注目画素に与える濃度を変化さ
せ、注目画素に与えられる濃度分布(濃度重心を含む)
を変化できる。これによって注目画素の解像度を向上さ
せ、文字エッジ部を滑らかに再現する。また、前記の濃
度制御手段は、上記エッジ判定手段によって判定された
注目画素のエッジ方向にしたがって、注目画素内のサブ
領域ごとに濃度レベル設定用パラメータを設定する濃度
レベル制御手段と、濃度レベル制御手段により設定され
た濃度レベル設定用パラメータを用いて、注目画素の濃
度レベルを基に、注目画素内の複数のサブ領域それぞれ
に濃度レベルを設定する濃度レベル設定手段とからな
る。濃度レベル設定用パラメータは、注目画素内の濃度
分布を変化させるように設定される。
【0006】
【発明の実施の形態】以下、添付の図面を参照して本発
明の実施形態の画像処理装置について説明する。なお、
図面において同一の参照記号は、同一または同等のもの
をさす。図1は、本発明の画像処理装置の1実施形態を
示す。画像処理装置は、原稿読取装置、コンピュータな
どから入力されるデジタル画像データに基づいて、感光
体を露光することにより感光体上に画像を形成するため
のデジタル画像データを生成し、プリンタに出力する。
ここで、注目画素とその周辺の画素との階調差を求め、
その階調差の組合わせによって主走査方向でのエッジ方
向を識別する。そして、識別されたエッジ方向にしたが
って注目画素内の濃度分布の重心を変化して、エッジを
滑らかに再現する。ここで、注目画素の濃度分布の重心
を変化させるため、画像読取の単位である1画素を、画
像形成における主走査方向に複数のサブ画素に分割し
て、注目画素に与える濃度をサブ画素の単位で変化させ
て注目画素の濃度分布を制御する。
【0007】具体的に説明すると、画像データ出力装置
10は、ここでは図示されていない原稿読取装置、コン
ピュータなどから入力されるデジタル画像データを出力
する。ここでは、画像データを、1画素あたり8ビット
の階調データとして出力する。エッジ判定部12は、画
像データ出力装置10から出力される階調データを用い
て、注目画素とその周辺の画素との階調差を求め、その
階調差の組合わせによって主走査方向でのエッジ方向を
識別する。さらに、エッジ判定補正部14は、エッジ判
定部12によるエッジ方向が不適切な場合は、適切なエ
ッジ方向に補正する。エッジ判定補正部14の出力結果
を基に、濃度レベル制御部16は、画素内の濃度重心を
制御するためのパラメータ信号を、注目画素を主走査方
向に分割したサブ画素の単位で生成する。一方、ガンマ
補正部18は、階調データの非線形変換をし、プリント
部24の階調性の非線形ひずみを補正する。次に、濃度
レベル設定部20は、ガンマ補正部18により補正され
たデータについて、濃度レベル制御部16により生成さ
れた濃度制御パラメータ信号を用いて濃度レベルを制御
して、画素内の濃度重心を変化させる。D/A変換器2
2は、濃度レベル設定部20により得られたデジタル階
調データをアナログ信号に変換し、プリント部24のレ
ーザー駆動回路に出力する。プリント部24は、入力デ
ータに基づいてレーザービームの強度をサブ画素の単位
で変調し、中間調画像をラスター走査で記録媒体上に形
成する。
【0008】エッジ判定部12は、注目画素の主走査方
向でのエッジ方向を次の4つの場合に区分して判定す
る。この判定結果に基づいてエッジをどの方向に寄せる
かが判断される。ここでは、主走査方向を左右方向とす
る。「右エッジ」とは、文字の右側にあるエッジ、すな
わち、注目画素の左側に文字部がある場合のエッジをい
う。「左エッジ」とは、文字の左側にあるエッジ、すな
わち、注目画素の右側に文字部がある場合のエッジをい
う。また、「細線エッジ」とは、注目画素の中央に文字
部がある場合、すなわち、1つの注目画素内に右エッジ
と左エッジがある場合のエッジをいう。なお、以上のい
ずれにも該当しない場合は、「非エッジ部」である。
【0009】図2は、エッジ判定部12のブロック図で
ある。エッジは、たとえば3×3の画素マトリクスを用
いて判定される。まず、注目画素とその周辺の8画素と
の階調差を計算し、注目画素より濃度の高い画素と濃度
の低い画素に分ける。図3に示すように、3×3の画素
マトリクスにおいて、V33は注目画素の階調データを
表し、V22,V23,V24,V32,V34,V4
2,V43,V44は注目画素に隣接する8個の画素の
階調データを表す。図2に示すエッジ判定部12におい
て、8個の階調差信号発生回路120は、注目画素の階
調データV33とその周辺の8画素の階調データV2
2,V23,V24,V32,V34,V42,V4
3,V44を入力し、周辺画素と注目画素との階調デー
タの差(階調差信号)を求める。組合せ判定回路122
は、注目画素と周辺画素との階調差を入力し、その階調
差の組合わせによってエッジ方向を判別する。すなわ
ち、注目画素とその周辺の8画素との階調差を計算し、
注目画素より濃度の高い画素と濃度の低い画素に分け
る。そして、注目画素と周囲画素との濃度値の関係から
エッジ方向を識別する。具体的には、組合せ判定回路1
22は、これらの8つの階調差信号の組合わせによって
主走査方向でのエッジ方向(右エッジ、左エッジなど)
を判別し、右寄せ信号MARKRと左寄せ信号MARK
Lを生成する。右寄せ信号MARKRは、右エッジが存
在することを示し、左寄せ信号MARKLは左エッジが
存在することを示す。そして、NANDゲート、2個の
ANDゲートおよび3個のセレクタ(S=LでAを選択
する)からなる論理回路124は、これらの右寄せ信号
MARKRと左寄せ信号MARKLからエッジ方向を判
断し、エッジ方向信号EDGを出力する。すなわち、M
ARKRとMARKLがともに出力されていれば、ED
G="01"(細線エッジ)が出力され、MARKRまた
はMARKLが出力されていれば、EDG="03"(右
エッジ)またはEDG="02"(左エッジ)が出力さ
れ、MARKRとMARKLがいずれも出力されていな
ければ、EDG="00"(非エッジ部)が出力される。
【0010】図4は、エッジ判定補正部14のブロック
図である。エッジ判定補正部14では、まず、2個のシ
フトレジスタ130と132は、エッジ判定部12で出
力された主走査方向における右寄せ信号MARKRと左
寄せ信号MARKLを、それぞれ順次入力する。AND
ゲート134は、注目画素で右寄せ信号MARKLが出
力されるが、その後の画素で右寄せ信号MARKLが出
力されない場合に、新たな右寄せ信号MARKL2を発
生する。同様に、ANDゲート136は、注目画素で左
寄せ信号MARKRが出力されるが、その前の画素で左
寄せ信号MARKRが出力されない場合に、新たな左寄
せ信号MARKR2を発生する。これにより、右寄せ信
号と左寄せ信号それぞれを独立で連続して発生すること
を防止する。さらに、必ず外側のエッジをとるようにす
る。この結果得られた新たな右寄せ信号MARKR2と
左寄せ信号MARKL2から、論理ゲート124と同じ
論理回路134により、同様にエッジ判定信号EDGを
生成し出力する。
【0011】図5は、濃度レベル制御部14のブロック
図である。エッジ判定部12の出力であるエッジ方向信
号EDGをアドレス信号として入力し、8個のパラメー
タRAM140に記憶されたテーブルより8個の濃度制
御パラメータ信号A1,A2,A3,A4,B1,B
2,B3,B4を得る。得られた濃度制御パラメータ
は、濃度レベル設定部18に送られる。
【0012】図6は、濃度レベル設定部18のブロック
図である。4個の濃度レベル演算部180では、ガンマ
補正部12で非線形変換された階調データVGに対し、
濃度制御パラメータ信号の4種の組合せA1とB1、A
2とB2、A3とB3、A4とB4を用いて、それぞ
れ、ブロック内に示されるような1次演算(VH=A*
(VG−B))を行う。この結果、VGから4つの階調
信号VH1,VH2,VH3,VH4が得られる。次
に、セレクタ182は、画素クロックCLKと画素クロ
ックの倍の周波数を持つ倍速クロックXCLKとを用い
て、濃度レベル演算部180において1次演算で得られ
た4つの階調信号VH1,VH2,VH3,VH4を1
画素内でサブ画素ごとに切り換えて、濃度レベル信号V
Dを生成する。これにより、1画素を4サブ画素に分割
し、サブ画素ごとに濃度レベル信号VDを出力する。
【0013】図7から図10は、エッジ判定部12で判
定されたエッジ種類のそれぞれについて、1画素内の濃
度がどのように変化するかを示したものである。ガンマ
補正部16で非線形変換された階調データの階調が増加
するにつれ、1画素内の4つのサブ画素に与えられるデ
ジタル階調データがそれぞれそのように変化していくか
を示す。図において、各サブ画素における黒部分の高さ
は、濃度レベルを表す。図7は、右エッジの場合の変化
を示す。ここで濃度制御パラメータ信号は、次のとおり
である。A1=A2=A3=A4=4。B1=0。B2
=64。B3=128。B4=192。図には、階調レ
ベルが0、32、64、96、128、160、19
2、224、255の場合を示す。図において明らかな
ように、右エッジであるので、濃度は左側のサブ画素か
ら順に増加される。こうして、画素の濃度の重心は左か
ら順次中央に移動していく。
【0014】図8は、左エッジの場合の変化を示す。こ
れは、図7の右エッジの場合と左右対称である。ここで
濃度制御パラメータ信号は、次の通りである。A1=A
2=A3=A4=4。B1=192。B2=128。B
3=64。B4=0。図は、階調レベルが0、32、6
4、96、128、160、192、224、255の
場合を示す。図において明らかなように、左エッジであ
るので、濃度は右側のサブ画素から順に増加される。こ
うして、画素の濃度の重心は右から順次中央に移動して
いく。
【0015】図9は、非エッジの場合の変化を示す。こ
こで濃度制御パラメータ信号は、次の通りである。A1
=A2=A3=A4=1。B1=B2=B3=B4=
0。図は、階調レベルが0、32、64、96、12
8、160、192、224、255の場合を示す。図
において明らかなように、エッジが存在しないので、4
個のサブ画素はいずれも同じ濃度とし、したがって、画
素の濃度の重心は常に中央にある。濃度は、階調レベル
に対応して増加する。
【0016】図10は、細線エッジの場合の変化を示
す。ここで濃度制御パラメータ信号は、次の通りであ
る。A1=A2=A3=A4=2。B1=128、B2
=B3=0。B4=128。図は、階調レベルが0、3
2、64、96、128、160、192、224、2
55の場合を示す。右エッジと左エッジが同時に存在す
る細線エッジであるので、図において明らかなように、
まず中央の2個のサブ画素の濃度が、階調レベルに対応
して増加する。画素の濃度の重心は常に中央にある。次
に、両側の2個のサブ画素の濃度が階調レベルに対応し
て増加する。画素の濃度の重心は常に中央にあるが、濃
度分布は、階調レベル128を越えると、しだいに左右
に広がっていく。図7〜図10では、主に濃度の重心の
変化について説明したが、図10に示すように、注目画
素内において濃度は端から増加させていくとは限らな
い。また、変化させるのは重心だけではなく、濃度分布
である。
【0017】図11は、比較のため、エッジ判定補正部
14がない場合に実際の再現画像の1例を図式的に示
す。左側の原画像を処理すると、右側の再現画像におい
て、エッジ部が2重化する。これは、エッジ部でサブ画
素単位で濃度レベルを設定して、濃度重心を右に寄せた
ためである。図12は、エッジ判定補正部14を用いた
場合に実際の画像の1例を図式的に示す。図11と同じ
原画像を処理すると、右側の画像に示すように、図11
で白抜けを生じていた画素においては、非エッジ部とし
て取り扱い、サブ画素単位での濃度制御は行わない。こ
れにより、白抜けによるエッジ部の2重化が防止され
る。
【0018】
【発明の効果】画像処理装置において、注目画素内で濃
度分布を変化させることにより文字エッジ部をより滑ら
かに再現できる。
【図面の簡単な説明】
【図1】 画像処理装置の1実施形態のブロック図。
【図2】 エッジ判定部のブロック図。
【図3】 エッジ判定用の9個の画素の信号の分布を示
す図。
【図4】 エッジ判定補正部のブロック図。
【図5】 濃度レベル制御部のブロック図。
【図6】 濃度レベル設定部のブロック図。
【図7】 右エッジの場合の階調レベルに対する濃度の
変化を示す図。
【図8】 左エッジの場合の階調レベルに対する濃度の
変化を示す図。
【図9】 非エッジ部の場合の階調レベルに対する濃度
の変化を示す図。
【図10】 細線エッジの場合の階調レベルに対する濃
度の変化を示す図。
【図11】 エッジ判定補正部がない場合の処理後の実
際の画像データを示す図。
【図12】 エッジ判定補正部を設けた場合の処理後の
実際の画像データを示す図。
【符号の説明】 10 画像データ出力装置、 12 ガンマ補正部、
14 エッジ判定部、 16 エッジ判定補正部、
18 濃度レベル制御部、 20 濃度レベル設定
部。
フロントページの続き Fターム(参考) 2C262 AA24 AA26 AA27 AB13 AC11 BB12 BB20 DA03 DA09 5B057 AA11 CA08 CA12 CB08 CB12 CC03 CE03 CE05 CE11 DB09 DC16 5C077 LL05 LL19 MP01 PP02 PP15 PP41 PP47

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 多値画像データに基づいて、画素を主走
    査方向に複数のサブ領域に分割しサブ領域の単位で画像
    を形成するためのデジタル画像データを出力する画像処
    理装置であり、 多値画像データに基づいて、注目画素とその周辺画素の
    濃度レベルの差から注目画素のエッジ方向を識別するエ
    ッジ判定手段と、 エッジ判定手段によって判定された注目画素のエッジ方
    向と、その周辺画素のエッジ方向から、注目画素のエッ
    ジ方向が不適切な場合には適切なエッジ方向にエッジ方
    向を修正するエッジ判定補正手段と、 上記エッジ判定手段によって判定された注目画素のエッ
    ジ方向にしたがって、注目画素内の複数のサブ領域に濃
    度レベルを設定して各注目画素内の濃度分布を変化させ
    る濃度制御手段とを備えることを特徴とした画像処理装
    置。
  2. 【請求項2】 前記の濃度制御手段は、 上記エッジ判定手段によって判定された注目画素のエッ
    ジ方向にしたがって、注目画素内のサブ領域ごとに濃度
    レベル設定用パラメータを設定する濃度レベル制御手段
    と濃度レベル制御手段により設定された濃度レベル設定
    用パラメータを用いて、注目画素の濃度レベルを基に、
    注目画素内の複数のサブ領域それぞれに濃度レベルを設
    定する濃度レベル設定手段とからなることを特徴とした
    請求項1に記載された画像処理装置。
JP28110698A 1998-10-02 1998-10-02 画像処理装置 Expired - Fee Related JP4281126B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP28110698A JP4281126B2 (ja) 1998-10-02 1998-10-02 画像処理装置
US09/408,366 US6978045B1 (en) 1998-10-02 1999-09-29 Image-processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28110698A JP4281126B2 (ja) 1998-10-02 1998-10-02 画像処理装置

Publications (2)

Publication Number Publication Date
JP2000115543A true JP2000115543A (ja) 2000-04-21
JP4281126B2 JP4281126B2 (ja) 2009-06-17

Family

ID=17634443

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28110698A Expired - Fee Related JP4281126B2 (ja) 1998-10-02 1998-10-02 画像処理装置

Country Status (1)

Country Link
JP (1) JP4281126B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012004813A (ja) * 2010-06-16 2012-01-05 Canon Inc 画像処理装置、及び記録装置
JP2012134908A (ja) * 2010-12-24 2012-07-12 Konica Minolta Business Technologies Inc 画像処理装置及び画像処理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012004813A (ja) * 2010-06-16 2012-01-05 Canon Inc 画像処理装置、及び記録装置
JP2012134908A (ja) * 2010-12-24 2012-07-12 Konica Minolta Business Technologies Inc 画像処理装置及び画像処理方法

Also Published As

Publication number Publication date
JP4281126B2 (ja) 2009-06-17

Similar Documents

Publication Publication Date Title
EP1679880B1 (en) Threshold matrix generation method, threshold matrix generation apparatus, and recording medium
JP4262112B2 (ja) 高品質な印刷用画像データを生成するレーザ印刷装置
US6181438B1 (en) Method and apparatus for digital image darkness control using quantized fractional pixels
JPH04213964A (ja) 調節可能な粗さを可能とするスクリーン画像に対してデジタルハーフトーン化を行う写真画像再生装置
EP1734737B1 (en) Image processing method and a recording medium storing image processing program
JPH1070659A (ja) 誤差拡散方法及びシステム
JPS5945765A (ja) 画像処理装置
US5805304A (en) Image processing apparatus
US6978045B1 (en) Image-processing apparatus
JPH1070660A (ja) 誤差拡散方法及び誤差拡散システム
US6654142B1 (en) Image data processor
JP3823562B2 (ja) 画像処理装置
JP4058823B2 (ja) 画像処理装置
JP2000115543A (ja) 画像処理装置
JP3757644B2 (ja) 画像処理装置
JPH08125860A (ja) 画像記録装置
JP2003230009A (ja) 画像形成装置
JPH09331439A (ja) 画像形成装置
KR100490244B1 (ko) 화상처리 시스템의 임계값에 의한 오차 확산방법
JP3950871B2 (ja) 画像処理方法及びその装置
JPH1127531A (ja) 画像処理装置および方法並びに記憶媒体
JP2000341524A (ja) 電子写真装置および電子写真の画像処理方法、並びに記録媒体
JPH05130402A (ja) 画像処理装置
KR20000050344A (ko) 화상데이터 처리장치
JPH06276385A (ja) 画像処理装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20050614

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20051214

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20051214

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070702

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071005

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080401

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090224

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090309

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120327

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120327

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130327

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140327

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees