JP4330164B2 - 画像補間装置 - Google Patents

画像補間装置 Download PDF

Info

Publication number
JP4330164B2
JP4330164B2 JP2005331972A JP2005331972A JP4330164B2 JP 4330164 B2 JP4330164 B2 JP 4330164B2 JP 2005331972 A JP2005331972 A JP 2005331972A JP 2005331972 A JP2005331972 A JP 2005331972A JP 4330164 B2 JP4330164 B2 JP 4330164B2
Authority
JP
Japan
Prior art keywords
target pixel
interpolation
interpolation target
image
reference block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005331972A
Other languages
English (en)
Other versions
JP2007142667A (ja
Inventor
和也 中川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Mita Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Mita Corp filed Critical Kyocera Mita Corp
Priority to JP2005331972A priority Critical patent/JP4330164B2/ja
Publication of JP2007142667A publication Critical patent/JP2007142667A/ja
Application granted granted Critical
Publication of JP4330164B2 publication Critical patent/JP4330164B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Input (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

この発明は、複数のコンタクトイメージセンサ(CIS)が連結されることにより画像読取センサが構成されている画像読取装置に用いられ、画像読取センサによって読み取られた画像データに基づいて、コンタクトイメージセンサの連結部分に対応する位置の画素データを補間する画像補間装置に関する。
コンタクトイメージセンサ(CIS)は、それが搭載されるスキャナ等の機器を小型化、薄型化しやすいことから広く利用されている。コンタクトイメージセンサは等倍センサであるため、原稿画像を読み取るためには、原稿の幅以上の長さが必要となる。そこで、通常は、複数のコンタクトイメージセンサを連結することにより、画像読取センサを構成している。
このように複数のコンタクトイメージセンサを連結した場合、解像度が高くなると、コンタクトイメージセンサの画像読取素子の間隔が狭くなるので、コンタクトイメージセンサの連結部分では、画素データが読み取れなくなる。そこで、従来は、コンタクトイメージセンサの連結部分に対応する位置のデータを、近隣画素を用いて線形補間することにより、補間している(特開平10−108033号公報、特開2000−196835号公報、特開2004−356666号公報等参照)。しかしながら、線形補間による補間方法では、濃度変化の少ない部分の補間には適するが、網点領域のように濃度変化の激しい部分の補間には適さない。
この発明は、コンタクトイメージセンサの連結部分に対応する位置の画素データを、その位置が網点領域であるか非網点領域であるかにかかわらず、正確に補間することができる画像補間装置を提供することを目的とする。
請求項1に記載の発明は、複数のコンタクトイメージセンサが連結されることにより画像読取センサが構成されている画像読取装置に用いられる画像補間装置であって、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する位置の画素データを補間する画像補間装置において、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する補間対象画素位置が網点領域内であるか非網点領域内であるかを判別する判別手段、前記補間対象画素位置が非網点領域である場合には、線形補間によって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第1の補間手段、および前記補間対象画素位置が網点領域である場合には、パターンマッチングによって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第2の補間手段、を備えており、前記第2の補間手段は、前記補間対象画素位置付近の画像領域内に、前記補間対象画素を含む1つの基準ブロックと、前記基準ブロックと同じ大きさでかつ前記補間対象画素を含まない複数の参照ブロックとを設定する手段、前記基準ブロック内の画素データと前記各参照ブロック内の画素データとに基づいて、前記基準ブロックと前記各参照ブロックとの間の相関値をそれぞれ算出する手段、および前記基準ブロックと最も相関が高い参照ブロック内の画素データのうち、前記基準ブロック内の前記補間対象画素と対応する画素の画素データを前記補間対象画素の画素データとして決定する手段、を備えていることを特徴とする。
請求項2に記載の発明は、複数のコンタクトイメージセンサが連結されることにより画像読取センサが構成されている画像読取装置に用いられる画像補間装置であって、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する位置の画素データを補間する画像補間装置において、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する補間対象画素位置が網点領域内であるか非網点領域内であるかを判別する判別手段、前記補間対象画素位置が非網点領域である場合には、線形補間によって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第1の補間手段、および前記補間対象画素位置が網点領域である場合には、パターンマッチングによって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第2の補間手段、を備えており、前記第2の補間手段は、前記補間対象画素位置付近の画像領域内に、前記補間対象画素を含む1つの基準ブロックと、前記基準ブロックと同じ大きさでかつ前記補間対象画素を含まない複数の参照ブロックとを設定する手段、前記基準ブロック内の画素データと前記各参照ブロック内の画素データとに基づいて、前記基準ブロックと前記各参照ブロックとの間の相関値をそれぞれ算出する手段、および前記基準ブロックとの相関が高いものから順に所定数の参照ブロックを選択し、選択した各参照ブロックそれぞれから、前記基準ブロック内の前記補間対象画素と対応する画素の画素データを抽出し、抽出した画素データの平均値を前記補間対象画素の画素データとして決定する手段、を備えていることを特徴とする。
この発明によれば、コンタクトイメージセンサの連結部分に対応する位置の画素データを、その位置が網点領域であるか非網点領域であるかにかかわらず、正確に補間することができるようになる。
以下、図面を参照して、この発明の実施例について説明する。
図1は、画像読取装置に設けられた画像読取センサを示している。
画像読取センサ1は、第1のコンタクトイメージセンサ(CIS)10と第2のコンタクトイメージセンサ(CIS)20とが連結されることにより、構成されている。各コンタクトイメージセンサ10、20には、等間隔をおいて画像読取素子11、21が設けられている。
コンタクトイメージセンサ10内の各画像読取素子11に対応する画素をA〜Gで表し、その画素データをa〜gで表すことにする。コンタクトイメージセンサ20内の各画像読取素子21に対応する画素をH〜Nで表し、その画素データをh〜nで表すことにする。コンタクトイメージセンサ10とコンタクトイメージセンサ20との連結部に対応する画素が補間対象画素であり、Zで表す。
図2は、画像読取センサによって読み取られた画像データに基づいて、補間対象画素の補間処理を行なうための画像処理装置を示している。
画像読取センサ1内のコンタクトイメージセンサ10、20から読み取られた画像は、画像処理装置2を介してメモリ3に格納される。画像処理装置2は、メモリ3に格納された画像データに基づいて、補間対象画素の補間処理を行なう。画像処理装置2は、例えば、マイクロコンピュータによって構成される。
図3は、画像処理装置2によって行なわれる補間対象画素の補間処理手順を示している。この処理は、各補間対象画素毎に行なわれる。
まず、補間対象画素位置を特定する(ステップS1)。次に、特定された補間対象画素位置が網点領域内であるか否かを判別する(ステップS2)。
読み込まれた画像データに基づいて、画像領域を網点領域と非網点領域とに分別する方法は、特開平8−149291号公報、特開平11−266364号公報、特開昭63−109656号公報等に開示されているように、従来からよく知られている。
特開平8−149291号公報では、例えば1ライン分の画像データに基づいて、注目画素がピーク画素であるか否かが判別され、注目画素がピーク画素であると判別されると、当該注目画素のライン上の位置が登録される。ピーク画素判定がライン上の所定画素数に対応する判定領域にわたって行なわれると、ピーク画素に周期性があるか否かを判定するために、各ピーク画素間距離が算出され、各距離の出現頻度を表すヒストグラムが作成される。そして、距離の出現頻度の最大値が全出現頻度の所定%以上(例えば75%)であると判別されると、上記判定領域が網点領域であると判定される。
本実施例では、従来方法、例えば、特開平8−149291号公報に記載の方法で、画像領域が網点領域と非網点領域とに分別される。上記ステップS2では、網点領域と非網点領域との分別結果を利用して、補間対象画素位置が網点領域内であるか否かを判別する。
上記ステップS2において補間対象画素位置が網点領域内ではないと判別された場合には、線形補間によって補間対象画素の画素データ(補間値)を算出して、補間対象画素位置に挿入する(ステップS3)。
図1を参照すると、ステップS3では、補間対象画素Zの補間データzは、例えば、その両隣の画素G、Hの画素データg、hに基づいて次式(1)により、算出される。
z=(g+h)/2 …(1)
上記ステップS2において補間対象画素位置が網点領域内であると判別された場合には、パターンマッチングにより、補間対象画素の画素データ(補間値)を算出して、補間対象画素位置に挿入する(ステップS4)。
図4を参照して、パターンマッチングによる補間処理について説明する。
(1)まず、図4に示すように、補間対象画素Zを含む基準ブロックQ0を設定するとともに、基準ブロックQ0を中心とするライン方向の所定範囲内において、補間対象画素Zを含まない同じ大きさの複数の参照ブロックQ1〜Q6を設定する。
基準ブロックQ0の大きさは、任意に決定できるが、この実施例では、補間対象画素Zを中心に含む5画素から基準ブロックQ0が構成されている。また、この例では、参照ブロックQ1はABCDEの画素からなり、参照ブロックQ2はBCDEFの画素からなり、参照ブロックQ3はCDEFGの画素からなり、参照ブロックQ4は画素HIJKLの画素からなり、参照ブロックQ5はIJKLMの画素からなり、参照ブロックQ6はJKLMNの画素からなる。
(2)次に、基準ブロックQ0と各参照ブロックQ1〜Q6との間の相関値をそれぞれ算出する。
基準ブロックQ0と各参照ブロックQ1〜Q6との相関値を算出する際には、基準ブロックQ0内の補間対象画素Zの画素値として、比較する参照ブロックQ1〜Q6内の対応する画素の画素値を挿入する。例えば、基準ブロックQ0と参照ブロックQ1との相関値を算出する際には、図5に示すように、基準ブロックQ0内の補間対象画素Zの画素値として、参照ブロックQ1内の対応する画素の画素値cを挿入する。
そして、補間対象画素Zの画素値として比較する参照ブロック内の対応する画素値を挿入した後の基準ブロックQ0内の各画素の画素値をx1、x2、x3、x4、x5とし、比較される参照ブロック内の各画素の画素値をy1、y2、y3、y4、y5とすると、これら2つのブロック間の相関値ρxyは、2つのブロックの共分散cov(x,y)を、各ブロックの標準偏差の積σx ・σy で割った値となる。つまり、これらの2つのブロック間の相関値ρxyを、次式(2)により求める。なお、次式(2)において、nは、各ブロック内の画素数を表しており、この例では5である。
Figure 0004330164
相関値ρxyは、−1〜+1の値をとり、+1に近いほど、両ブロック間の相関が高いことを表している。
(3)最後に、基準ブロックQ0と最も相関が高い参照ブロック内の画素のうち、基準ブロックQ0内の補間対象画素に対応する画素の画素値を、補間対象画素の補間値と決定する。例えば、基準ブロックQ0と最も相関が高い参照ブロックが参照ブロックQ1である場合には、参照ブロックQ1内の画素値cが補間対象画素の補間値となる。
なお、基準ブロックQ0との相関が高いものから順に所定数の参照ブロックを選択し、選択した各参照ブロックそれぞれから、基準ブロックQ0内の補間対象画素と対応する画素の画素データを抽出し、抽出した画素データの平均値を補間対象画素の補間値と決定してもよい。
画像読取装置に設けられた画像読取センサを示す模式図である。 画像読取センサによって読み取られた画像データに基づいて、補間対象画素の補間処理を行なうための画像処理装置を示すブロック図である。 画像処理装置2によって行なわれる補間対象画素の補間処理手順を示すフローチャートである。 パターンマッチングによる補間処理を説明するための模式図である。 図4の基準ブロックQ0と参照ブロックQ1との相関値の算出方法を説明するための模式図である。
符号の説明
1 画像読取センサ
2 画像処理装置
3 メモリ
10、20 コンタクトイメージセンサ
11、21 画像読取素子

Claims (2)

  1. 複数のコンタクトイメージセンサが連結されることにより画像読取センサが構成されている画像読取装置に用いられる画像補間装置であって、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する位置の画素データを補間する画像補間装置において、
    前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する補間対象画素位置が網点領域内であるか非網点領域内であるかを判別する判別手段、
    前記補間対象画素位置が非網点領域である場合には、線形補間によって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第1の補間手段、および
    前記補間対象画素位置が網点領域である場合には、パターンマッチングによって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第2の補間手段、を備えており、
    前記第2の補間手段は、前記補間対象画素位置付近の画像領域内に、前記補間対象画素を含む1つの基準ブロックと、前記基準ブロックと同じ大きさでかつ前記補間対象画素を含まない複数の参照ブロックとを設定する手段、
    前記基準ブロック内の画素データと前記各参照ブロック内の画素データとに基づいて、前記基準ブロックと前記各参照ブロックとの間の相関値をそれぞれ算出する手段、および
    前記基準ブロックと最も相関が高い参照ブロック内の画素データのうち、前記基準ブロック内の前記補間対象画素と対応する画素の画素データを前記補間対象画素の画素データとして決定する手段、を備えていることを特徴とする画像補間装置。
  2. 複数のコンタクトイメージセンサが連結されることにより画像読取センサが構成されている画像読取装置に用いられる画像補間装置であって、前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する位置の画素データを補間する画像補間装置において、
    前記画像読取センサによって読み取られた画像データに基づいて、前記コンタクトイメージセンサの連結部分に対応する補間対象画素位置が網点領域内であるか非網点領域内であるかを判別する判別手段、
    前記補間対象画素位置が非網点領域である場合には、線形補間によって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第1の補間手段、および
    前記補間対象画素位置が網点領域である場合には、パターンマッチングによって前記補間対象画素の画素データを生成して、前記補間対象画素位置に挿入する第2の補間手段、を備えており、
    前記第2の補間手段は、前記補間対象画素位置付近の画像領域内に、前記補間対象画素を含む1つの基準ブロックと、前記基準ブロックと同じ大きさでかつ前記補間対象画素を含まない複数の参照ブロックとを設定する手段、
    前記基準ブロック内の画素データと前記各参照ブロック内の画素データとに基づいて、前記基準ブロックと前記各参照ブロックとの間の相関値をそれぞれ算出する手段、および
    前記基準ブロックとの相関が高いものから順に所定数の参照ブロックを選択し、選択した各参照ブロックそれぞれから、前記基準ブロック内の前記補間対象画素と対応する画素の画素データを抽出し、抽出した画素データの平均値を前記補間対象画素の画素データとして決定する手段、を備えていることを特徴とする画像補間装置。
JP2005331972A 2005-11-16 2005-11-16 画像補間装置 Expired - Fee Related JP4330164B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005331972A JP4330164B2 (ja) 2005-11-16 2005-11-16 画像補間装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005331972A JP4330164B2 (ja) 2005-11-16 2005-11-16 画像補間装置

Publications (2)

Publication Number Publication Date
JP2007142667A JP2007142667A (ja) 2007-06-07
JP4330164B2 true JP4330164B2 (ja) 2009-09-16

Family

ID=38205028

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005331972A Expired - Fee Related JP4330164B2 (ja) 2005-11-16 2005-11-16 画像補間装置

Country Status (1)

Country Link
JP (1) JP4330164B2 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2429170A2 (en) 2010-09-08 2012-03-14 Ricoh Company, Ltd. Image forming apparatus and image forming method
EP2479974A2 (en) 2011-01-21 2012-07-25 Ricoh Company, Ltd. Image processing apparatus and pixel interpolation method
WO2012099137A1 (en) * 2011-01-19 2012-07-26 Ricoh Company, Ltd. Image processing device and pixel interpolation method
EP2482539A1 (en) 2011-01-26 2012-08-01 Ricoh Company, Ltd. Image processing apparatus and pixel interpolation method
WO2012102402A1 (en) * 2011-01-28 2012-08-02 Ricoh Company, Ltd. Image processing apparatus and method of supplementing pixel value
JP2012155386A (ja) * 2011-01-24 2012-08-16 Ricoh Co Ltd 画像処理装置、画素補間方法およびプログラム
US10298808B2 (en) 2017-03-10 2019-05-21 Ricoh Company, Ltd. Image processing apparatus, image processing method, and recording medium

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010061565A (ja) * 2008-09-05 2010-03-18 Konica Minolta Business Technologies Inc 画素補間装置、画素補間方法および画像読取装置
JP4958056B2 (ja) * 2009-05-12 2012-06-20 東芝ディーエムエス株式会社 画像補間装置および画像補間プログラム
JP5786547B2 (ja) * 2011-08-15 2015-09-30 株式会社リコー 画像補正システム、画像補正方法およびプログラム
JP2013093674A (ja) * 2011-10-24 2013-05-16 Murata Mach Ltd 画像処理装置、画像処理方法及び画像処理プログラム
JP6048084B2 (ja) * 2012-11-19 2016-12-21 株式会社リコー 画像処理装置、画像処理方法、プログラムおよび記録媒体

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002232654A (ja) * 2001-02-01 2002-08-16 Ricoh Co Ltd 画像処理装置、画像処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP4262421B2 (ja) * 2001-06-27 2009-05-13 株式会社リコー 画像処理装置
JP2003101724A (ja) * 2001-09-25 2003-04-04 Konica Corp 画像読取装置及び画像形成装置
JP3710452B2 (ja) * 2003-03-11 2005-10-26 キヤノン株式会社 画像読み取り装置、データ補間方法及び制御プログラム
JP4408771B2 (ja) * 2004-08-24 2010-02-03 株式会社リコー 画像読取装置
JP2006229728A (ja) * 2005-02-18 2006-08-31 Ricoh Co Ltd 画像読取装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2429170A2 (en) 2010-09-08 2012-03-14 Ricoh Company, Ltd. Image forming apparatus and image forming method
JP2012056162A (ja) * 2010-09-08 2012-03-22 Ricoh Co Ltd 画像形成装置
US8659801B2 (en) 2010-09-08 2014-02-25 Ricoh Company, Ltd. Image forming apparatus and image forming method determining correct pixel value of target pixel subject to interpolation
WO2012099137A1 (en) * 2011-01-19 2012-07-26 Ricoh Company, Ltd. Image processing device and pixel interpolation method
JP2012151646A (ja) * 2011-01-19 2012-08-09 Ricoh Co Ltd 画像処理装置、画素補間方法およびプログラム
KR101460929B1 (ko) * 2011-01-19 2014-11-13 가부시키가이샤 리코 화상 처리 장치 및 화소 보간 방법
US9042658B2 (en) 2011-01-19 2015-05-26 Ricoh Company, Ltd. Image processing device and pixel interpolation method
EP2479974A2 (en) 2011-01-21 2012-07-25 Ricoh Company, Ltd. Image processing apparatus and pixel interpolation method
US9129410B2 (en) 2011-01-21 2015-09-08 Ricoh Company, Ltd. Image processing apparatus and pixel interpolation method
JP2012155386A (ja) * 2011-01-24 2012-08-16 Ricoh Co Ltd 画像処理装置、画素補間方法およびプログラム
EP2482539A1 (en) 2011-01-26 2012-08-01 Ricoh Company, Ltd. Image processing apparatus and pixel interpolation method
US9124839B2 (en) 2011-01-26 2015-09-01 Ricoh Company, Limited Image processing apparatus and pixel interpolation method
WO2012102402A1 (en) * 2011-01-28 2012-08-02 Ricoh Company, Ltd. Image processing apparatus and method of supplementing pixel value
JP2012156924A (ja) * 2011-01-28 2012-08-16 Ricoh Co Ltd 画像処理装置、画素補間方法およびプログラム
US10298808B2 (en) 2017-03-10 2019-05-21 Ricoh Company, Ltd. Image processing apparatus, image processing method, and recording medium

Also Published As

Publication number Publication date
JP2007142667A (ja) 2007-06-07

Similar Documents

Publication Publication Date Title
JP4330164B2 (ja) 画像補間装置
JP2007213359A (ja) 二次元コード検出システムおよび二次元コード検出プログラム
JP4540705B2 (ja) 画像処理方法、画像処理システム、撮像装置、画像処理装置及びコンピュータプログラム
JP4958056B2 (ja) 画像補間装置および画像補間プログラム
JP2002135592A (ja) 画像処理装置及び記録媒体
EP1578119A3 (en) Pixel interpolating apparatus, pixel interpolating method, and program and recording medium
JP2005159957A (ja) 色補間方法
JP2009530975A (ja) 以前に圧縮された画像における合成の検出
JP2009205280A (ja) 画素補間装置及び画素補間方法
JP2019179342A (ja) 画像処理装置および画像処理方法
JP5264457B2 (ja) 物体検出装置
JP4397414B2 (ja) 画像処理方法、画像処理システム、画像処理装置及びコンピュータプログラム
CN107958202B (zh) 人体检测设备、人体检测设备的控制方法和存储介质
JP4868249B2 (ja) 映像信号処理装置
JP2009076964A (ja) 画像センサの欠陥補正回路
JP2008109361A (ja) 画像処理装置および画像処理方法
JP6221283B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
EP1229743A3 (en) Signal processing apparatus, signal processing method of the apparatus, operation process program of the method, and storage medium storing the program
JPH10294862A (ja) 画像処理装置
JP4500707B2 (ja) 画像データ処理装置
US7451931B2 (en) Detecting barcodes on two-dimensional images using frequency domain data
JPH07184043A (ja) 解像度変換装置
JP4414195B2 (ja) 画像補間方法および装置並びにプログラム
JP4629123B2 (ja) エッジ検出方法および装置並びにプログラム
JP4732153B2 (ja) 画素補間方法及び装置、画像読取装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090311

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090319

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090611

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090615

R150 Certificate of patent or registration of utility model

Ref document number: 4330164

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120626

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130626

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140626

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees