JP4345655B2 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
JP4345655B2
JP4345655B2 JP2004354003A JP2004354003A JP4345655B2 JP 4345655 B2 JP4345655 B2 JP 4345655B2 JP 2004354003 A JP2004354003 A JP 2004354003A JP 2004354003 A JP2004354003 A JP 2004354003A JP 4345655 B2 JP4345655 B2 JP 4345655B2
Authority
JP
Japan
Prior art keywords
image
area
text
copy check
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004354003A
Other languages
English (en)
Other versions
JP2006165977A (ja
Inventor
浩司 亀田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2004354003A priority Critical patent/JP4345655B2/ja
Publication of JP2006165977A publication Critical patent/JP2006165977A/ja
Application granted granted Critical
Publication of JP4345655B2 publication Critical patent/JP4345655B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Description

本発明は、複写牽制模様の合成処理を行う画像処理装置に関する。
近年の情報処理機器の普及に伴い、電子的に生成されたドキュメントの印刷が容易にできるようになってきている。こうしたなか、比較的機密性の高いドキュメントに対し、複写を牽制するための模様として、複写時に現出する模様を合成して印刷する複写牽制模様の合成印刷に関する技術が開発されている(例えば、特許文献1)。
特開2001−197297号公報
しかしながら、上記従来の複写牽制模様の合成印刷では、ドキュメントの全面に複写牽制模様を合成してしまう。このため例えば線画や写真画像等、微細な表現を要する部分など、ドキュメントの一部に複写牽制模様を合成したくないといった要望があった。
一方で、複写牽制模様を合成しない領域を設定することとすれば、当該領域が切取られて複写されたり、張替えられるなどの部分的複写や部分改ざんがされるおそれが生じる。
本発明は上記実情に鑑みて為されたもので、複写牽制模様を合成しない領域の設定を可能とするとともに、部分的複写や改ざんを防止できる画像処理装置を提供することを、その目的の一つとする。
上記従来例の問題点を解決するための本発明は、処理対象となったドキュメントに、複写牽制画像を合成する画像処理装置であって、前記ドキュメント上の少なくとも一つの領域の指定を受け入れる手段と、前記指定された領域内部に複写牽制模様が合成されないよう制御する手段と、前記指定された領域の画像部分に対して、埋込み対象となった符号画像を埋込み合成する手段と、を含むことを特徴としている。
また、上記従来例の問題点を解決するための本発明は、処理対象となったドキュメントに、複写牽制画像を合成する画像処理装置であって、前記ドキュメントに含まれる画像要素のうちから、テキスト画像以外の部分の領域を、非テキスト領域として特定する手段と、前記特定された非テキスト領域に複写牽制画像が合成されないよう制御する手段と、前記特定された非テキスト領域の画像部分に対して、埋込み対象となった符号画像を埋込み合成する手段と、を含むことを特徴としている。
また、本発明の一態様は、処理対象となったドキュメントに、複写牽制画像を合成する画像処理方法であって、前記ドキュメント上の少なくとも一つの領域を特定し、当該特定した領域内部に複写牽制模様が合成されないよう制御するとともに、当該特定された領域の画像部分に対して、埋込み対象となった符号画像を埋込み合成することを特徴としている。
さらに本発明の別の態様は、コンピュータに、処理対象となったドキュメントに対する複写牽制画像の合成処理を実行させる画像処理プログラムであって、前記ドキュメント上の少なくとも一つの領域を特定する手順と、当該特定した領域内部に複写牽制模様が合成されないよう制御する手順と、前記特定された領域の画像部分に対して、埋込み対象となった符号画像を埋込み合成する手順と、をコンピュータに実行させることを特徴としている。
本発明の第1の実施の形態について図面を参照しながら説明する。本実施の形態に係る画像処理装置1は、図1に示すように、制御部11と、記憶部12と、操作部13と、表示部14と、通信部15とを含み、画像形成装置としてのプリンタ2に接続されている。
制御部11は、CPU等を用いて構成できる。制御部11は、記憶部12に格納されているプログラムに従って動作している。本実施の形態では、ドキュメント上の少なくとも一つの領域の指定を受け入れる処理と、指定された領域内部に複写牽制模様が合成されないよう制御する処理と、当該複写牽制模様の合成が抑止された領域の画像部分に対して、埋込み対象となった符号画像を埋込み合成する処理と、を実行している。この制御部11の具体的な処理の内容については、後に詳しく述べる。
記憶部12は、RAM(Random Access Memory)やROM(Read Only Memory)、さらにはハードディスクなどを含んで構成される。この記憶部12には、制御部11によって実行されるプログラムが格納されている。また、この記憶部12は、制御部11によって行われる処理において必要となる種々のデータを保持するワークメモリとしても動作する。
操作部13は、マウスやキーボードなどであり、利用者の指示操作を受け入れて、その内容を制御部11に出力する。表示部14は、例えばディスプレイなどであり、制御部11から入力される指示に従って、情報を提示する。
通信部15は、例えばネットワークカードであり、制御部11から入力される指示に従って、指定される宛先に対してデータを送信する。また、この通信部15は、ネットワークを介して外部(例えばプリンタ2)から到来するデータを受信して、制御部11に出力する。
プリンタ2は、画像処理装置1に対してネットワークを介して接続されており、画像処理装置1から受信した画像データに基づいて、記録媒体としての用紙上に画像を形成する。
ここで制御部11による処理の具体的な内容について説明する。制御部11は、ドキュメントの画像形成指示を受けたときに、複写牽制模様を合成するか否か判断する。この判断は、例えばドキュメントに予め複写牽制模様を合成するべき旨の指示が含まれているか否かなどで判断する。そして、複写牽制模様を合成する場合は、当該ドキュメントの各ページの画像を提示して、各ページごとに、複写牽制模様を合成しない領域の指定を受け入れる。具体的にはページの画像を表示部14に表示する。そして表示されているページの画像上で、マウスなどのポインティングデバイスを用いて、例えば矩形の領域を指定する。
また、例えばドキュメントに付加的な画像データ(例えばPDF(Portable Document Format)における注釈情報など)を関連付けて表示する場合、この画像データの部分を、指定領域としてもよい。
制御部11は、指定された領域を特定する情報(座標情報)を記憶部12に格納する。この座標情報は、例えば矩形領域であれば、その左上の座標値と、右下の座標値との組として表現される。制御部11は図2に示すように、ドキュメントを特定する情報(A)と、ドキュメントのページを特定する情報(B)とに関連付けて、この座標情報(C)を記憶部12に格納する。
そして、制御部11は、ドキュメントのページの印刷可能領域のサイズで、複写牽制模様の画像データ(基本画像データ)を生成する。この複写牽制模様の画像データの生成処理は、特許文献1に開示されたものと同様であるので、ここでの詳細な説明を省略する。
次に、形成処理の対象となったドキュメントの1ページ目から順に、各ページを特定する情報に関連づけられている座標情報を記憶部12から読み出す。そして、当該ページを特定する情報に関連づけられている座標情報があれば、基本画像データのうち、当該座標情報によって示される領域の複写牽制模様を除去する。これにより、各ページごとに合成するべき複写牽制模様の画像が生成される。
そして、ドキュメントの各ページのデータに、各ページに合成するべき複写牽制模様の画像を合成する指示を追記する。そして、この追記後のドキュメントのデータをプリンタ2に対して出力する。そうすると、指定された領域内部に複写牽制模様が合成されないようになる。
本実施の形態において特徴的なことの一つは、当該指定された領域内部の画像部分に対して、埋込みの対象となった符号画像を埋込み合成することである。すなわち制御部11は、形成処理の対象となったドキュメントの1ページ目から順に、各ページを特定する情報に関連づけられている座標情報を記憶部12から読み出す。そして、当該ページを特定する情報に関連づけられている座標情報があれば、基本画像データのうち、当該座標情報によって示される領域の画像部分を抽出する。
そして、当該抽出した画像部分に対して埋込みの対象となった符号画像を埋込み合成する。ここで符号画像は、例えば、当該画像部分の画像データに基づいて生成されたデータを表す2次元バーコード画像であってもよい。具体的に、この符号画像によって表されるデータは、当該画像部分に係るデータに基づいて生成されるデータであって、当該データの生成方法が秘匿されているものとする。具体的には、当該画像部分の画像データを予め定められた暗号化鍵(秘密鍵であるとする)を用いて暗号化したものなどで構わない。また符号画像の埋込み合成方式は、いわゆるステガノグラフィ(電子すかし技術)を用いることができる。
すなわち本実施の形態では、図3(a)に示した1ページ分の画像データ上で、領域(P1,P2(以下、双方を含めて領域Pとする))が指定された場合に、制御部11が図3(b)に示すように、図3(a)のページに対応して、当該領域(P)に対応する部分を除いた複写牽制模様を生成する。そして、図3(a)のページに、この図3(b)の複写牽制模様の画像を合成する指示をプリンタ2に出力する。これにより、図3(c)に示すように、指定された領域(P)内部には複写牽制模様が合成されず、指定された領域(P)外の部分に複写牽制模様が合成されている画像が形成されることになる。
また、領域P1、P2のそれぞれの内部の画像部分に対して、当該画像部分の画像データから生成したハッシュ値を表す符号画像を生成する。この符号画像は、例えば2次元バーコード等である。そして各領域P1,P2のそれぞれについて生成した符号画像を、対応する領域内の画像部分に埋込み合成する。
こうして埋込み合成によって得られた合成画像は、対応する領域内の画像部分に置き換えられる。これにより、図3(a)に示した1ページ分の画像データ上で、指定された2つの領域(P1,P2)以外の部分には、複写牽制模様が合成されることとなり、当該指定された2つの領域(P1,P2)の画像部分には、当該画像部分の画像データに基づいて生成されるデータを表す符号画像が埋込み合成された状態となる。
このため、当該複写牽制模様が付されなかった画像部分が改変されていたとしても、当該画像部分に埋込み合成されているべき符号画像が合成されているか否かによって、当該画像部分が改変されたことを検知できる。このように本実施の形態によると、複写牽制模様を合成しない領域の設定を可能とするとともに、部分的複写や改ざんを防止できる。
また、ここでは、各ページごとに合成するべき複写牽制模様の画像データを生成したが、これに代えて、各ページごとに、ページを特定する情報に関連づけられている座標情報によって画定される領域と、そうでない領域とで互いに異なる値に設定されているマスク情報を生成してもよい。この場合、ドキュメントデータの各ページに、対応するマスク情報を利用して基本画像データを合成するべき指示を含める。
この例では、図3(a)に示したページの領域(P)に関するマスク画像(図3(d))が生成される。そして、このマスク画像を用いて、図3(a)のページ上の一部(図3の例ではマスク画像の「黒」画素となっている部分に対応する領域に)、基本画像データを合成する。これによっても、図3(c)に示した画像が形成されることとなる。
また、この例では、マスク画像を反転させた反転マスク画像を生成する。ここで反転とは、「黒」画素となっている部分を「白」画素とし、「白」画素となっている部分を「黒」画素とする処理をいう。そしてこの例では、当該反転マスク画像を用いて図3(a)のページ上の部分画像(図3(d)のマスク画像の「白」画素となっている部分に対応する領域)に対して、埋込み対象の符号画像を埋込み合成することとすればよい。
さらに本実施の形態の制御部11の処理において、例えば領域が指定されたときに、当該指定された領域外の部分(複写牽制模様が合成される領域)の面積に関する量を演算し、この量に基づいて、複写牽制模様が合成される面積が所定値未満となる場合に、警告情報を表示部14に表示して報知して、画像形成に係る処理を停止してもよい。
すなわち、本実施の形態によると、複写牽制模様を合成しない領域を大きくすることにより、複写牽制模様が実質的に合成されないようにすることができ、不正の目的に利用される恐れがあるので、複写牽制模様が合成される面積が所定値未満となる場合は、それを警告する。
ここで複写牽制模様が合成される領域の面積に関する量は、次のように演算される。すなわち、ドキュメントの1ページ分の面積を、用紙サイズや、印刷可能領域の面積から得ておき、各ページごとに、ページ内で指定された各領域の面積の和を演算する。そして各ページごとに、1ページ分の面積から当該面積の和を差し引く。これにより、複写牽制模様を合成する領域の面積そのものを、複写牽制模様が合成される領域の面積に関する量として演算することができる。
また、ここでは利用者の指示操作により、複写牽制模様を合成しない領域を特定したが、画像処理装置が複写牽制模様を合成しない領域を特定してもよい。すなわち本発明の第2の実施の形態に係る画像処理装置1は、図1に示した第1の実施の形態に係るものと同様の構成をとるものであるが、制御部11における処理が少々異なる。
本実施の形態では、制御部11は、形成処理の対象となったドキュメントに含まれる画像要素のうちから、テキスト画像以外の部分の領域を、非テキスト領域として特定し、この特定された非テキスト領域に複写牽制画像が合成されないよう制御する。
具体的に本実施の形態では、制御部11は、ドキュメントの画像形成指示を受けたときに、複写牽制模様を合成するか否かを判断し、複写牽制模様を合成すると判断すると、まずドキュメントのページの印刷可能領域のサイズで、複写牽制模様の画像データ(基本画像データ)を生成する。
そして制御部11は、当該ドキュメントの各ページの画像から、まずテキスト画像以外の部分(非テキスト領域)を特定する。具体的に制御部11は、各ページの画像にレイアウトを分析する処理を行い、文字画像が配列されている領域(すなわちテキスト領域)を特定する。このレイアウト分析の処理は、OCR(光学的文字認識)のための処理として広く知られている処理であるので、ここでの詳細な説明を省略する。
次に制御部11は、ページの画像のうち、特定したテキスト領域外の部分を非テキスト領域として特定し、当該非テキスト領域の形状に複写牽制模様を合成しないよう指示するためのマスク画像を生成する。この処理を各ページについて行い、ドキュメントデータの各ページに、対応するマスク情報を利用して基本画像データを合成するべき指示を含める。
さらに本実施の形態では、制御部11は、生成したマスク画像を反転させた反転マスク画像を生成する。ここで反転とは、「黒」画素となっている部分を「白」画素とし、「白」画素となっている部分を「黒」画素とする処理をいう。制御部11は、ページの画像のうち、反転マスク画像によって特定される領域(反転マスク画像のうち、「黒」画素となっている部分に対応する領域)に含まれる画像部分を抽出し、当該抽出した画像部分に対して埋込みの対象となった符号画像を埋込み合成する。ここで符号画像は、第1の実施の形態におけるものと同様に、当該画像部分の画像データに基づいて生成されたデータを表す2次元バーコード画像で構わない。また、この符号画像によって表されるデータは、具体的には、当該画像部分の画像データを予め定められた暗号化鍵(秘密鍵であるとする)を用いて暗号化したものなどで構わない。さらに符号画像の埋込み合成方式は、いわゆるステガノグラフィ(電子すかし技術)を用いることができる。
制御部11は、この埋込み合成後の画像部分を、元のページの画像に上書きして合成する。これにより、反転マスク画像によって特定される領域については、上記符号画像が埋込み合成された状態となり、反転マスク画像によって特定されない領域については、元のページの画像そのままであって、基本画像データの合成指示によって複写牽制模様の合成がされることとなる。制御部11は、当該合成後のページの画像をプリンタ2に出力する。これにより特定した領域内部に複写牽制模様が合成されないようになる。
なお、本実施の形態においても、テキスト領域の部分(複写牽制模様が合成される領域)の面積に関する量を演算し、この量に基づいて、複写牽制模様が合成される面積が所定値未満となる場合に、警告情報を表示部14に表示して報知して、画像形成に係る処理を停止してもよい。
具体的には、ドキュメントの1ページ分の面積を、用紙サイズや、印刷可能領域の面積から得ておき、各ページごとに、ページ内の非テキスト領域の面積の和を演算する。そして各ページごとに、1ページ分の面積から当該面積の和を差し引く。これにより、複写牽制模様を合成する領域の面積そのものを、複写牽制模様が合成される領域の面積に関する量として演算することができる。
さらに、本実施の形態では、例えば各ページについて、ページの画像と、非テキスト領域のバウンダリ情報に基づく領域を強調する枠線(R)と、各領域に対応付けられたチェックボックス(Q)等のボタンインタフェースとを表示し(図4)、非テキスト領域であっても、複写牽制模様を合成してよい部分があれば、当該部分を、上記ボタンインタフェースにより選択するように利用者に指示してもよい。
この場合は、利用者から指定された非テキスト領域があれば、当該指定された非テキスト領域には複写牽制模様が合成されるように制御する。すなわち、各ページごとの複写牽制模様の画像データを生成する場合は、当該指定された非テキスト領域内部にも複写牽制模様を含んだ画像データを生成する。また、マスク画像を生成する場合も同様に、当該指定された非テキスト領域内部にも複写牽制模様が合成されるよう指示するマスク画像を生成する。
そして、特定されたテキスト領域及び、上記指定された非テキスト領域(つまり、複写牽制模様の合成がされる領域)以外の領域について、符号画像を埋込み合成する。
本発明の第1の実施の形態に係る画像処理装置の構成、及び接続例を表すブロック図である。 座標情報の保持例を表す説明図である。 本発明の第1の実施の形態に係る画像処理装置の処理の過程を表す説明図である。 本発明の第2の実施の形態に係る画像処理装置が提示するインタフェース画面の例を表す説明図である。
符号の説明
1 画像処理装置、2 プリンタ、11 制御部、12 記憶部、13 操作部、14 表示部、15 通信部。

Claims (2)

  1. 処理対象となったドキュメントに含まれる画像要素のうちから、テキスト画像以外の部分の領域を、非テキスト領域として特定する手段と、
    前記特定された非テキスト領域のうち、利用者の指定の有無により選択された非テキスト領域と、テキスト画像の部分とに、複写牽制画像を合成する手段と、
    前記選択された非テキスト領域以外の非テキスト領域に複写牽制画像が合成されないよう制御する手段と、
    前記選択された非テキスト領域以外の非テキスト領域の画像部分に対して、当該画像部分の画像データに基づいて生成されるデータを表す符号画像を埋め込み合成する手段と、
    を含むことを特徴とする画像処理装置。
  2. コンピュータを
    処理対象となったドキュメントに含まれる画像要素のうちから、テキスト画像以外の部分の領域を、非テキスト領域として特定する手段と、
    前記特定された非テキスト領域のうち、利用者の指定の有無により選択された非テキスト領域と、テキスト画像の部分とに、複写牽制画像を合成する手段と、
    前記選択された非テキスト領域以外の非テキスト領域に複写牽制画像が合成されないよう制御する手段と、
    前記選択された非テキスト領域以外の非テキスト領域の画像部分に対して、当該画像部分の画像データに基づいて生成されるデータを表す符号画像を埋め込み合成する手段と、
    として機能させることを特徴とするプログラム。
JP2004354003A 2004-12-07 2004-12-07 画像処理装置 Expired - Fee Related JP4345655B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004354003A JP4345655B2 (ja) 2004-12-07 2004-12-07 画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004354003A JP4345655B2 (ja) 2004-12-07 2004-12-07 画像処理装置

Publications (2)

Publication Number Publication Date
JP2006165977A JP2006165977A (ja) 2006-06-22
JP4345655B2 true JP4345655B2 (ja) 2009-10-14

Family

ID=36667489

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004354003A Expired - Fee Related JP4345655B2 (ja) 2004-12-07 2004-12-07 画像処理装置

Country Status (1)

Country Link
JP (1) JP4345655B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4189518B2 (ja) 2007-03-15 2008-12-03 コニカミノルタビジネステクノロジーズ株式会社 画像形成装置及び画像形成システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001358926A (ja) * 2000-06-09 2001-12-26 Sony Corp 画像処理装置および方法、並びにプログラム格納媒体
JP2004202766A (ja) * 2002-12-24 2004-07-22 Toppan Printing Co Ltd 印刷物製造装置、印刷物認証装置、印刷物、印刷物製造方法、印刷物認証方法
JP4042564B2 (ja) * 2002-12-27 2008-02-06 カシオ計算機株式会社 情報処理装置
JP4127099B2 (ja) * 2003-03-31 2008-07-30 富士ゼロックス株式会社 画像形成装置

Also Published As

Publication number Publication date
JP2006165977A (ja) 2006-06-22

Similar Documents

Publication Publication Date Title
JP4158829B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP4273096B2 (ja) システム、コンピュータ、及びそれらの制御方法
US20060126095A1 (en) Image processing apparatus and image processing method
JP5013694B2 (ja) 画像処理方法、画像処理装置、プログラムコード及び記憶媒体
JP2003283790A (ja) 画像生成方法、画像生成装置、プログラム、不正複製防止システム
JP2004228897A (ja) 画像処理方法
JP2007060634A (ja) 画像処理装置、画像処理装置の制御方法及びコンピュータ可読記憶媒体
JP2007325128A (ja) 画像処理装置および画像処理システム、および画像処理方法。
JP2008118210A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP2008028449A (ja) 秘密文書処理装置
JP2008154106A (ja) 秘匿処理方法,画像処理装置および画像形成装置
US8264738B2 (en) Image forming apparatus, image forming method, and computer-readable storage medium for image forming program
US7692811B2 (en) Image forming apparatus and method
JP2008028675A (ja) 画像形成処理装置及び画像形成処理プログラム
JP3993845B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP4049169B2 (ja) 画像処理装置、画像処理方法、および画像処理プログラム
JP4345655B2 (ja) 画像処理装置
JP4305343B2 (ja) 画像処理装置
JP2007166052A (ja) 画像処理装置、画像処理方法、画像処理プログラム及び画像処理プログラムを記録した記録媒体、並びに地紋印刷物
JP4640138B2 (ja) 印刷データ生成プログラム、印刷データ生成方法および印刷データ生成装置
JP4336977B2 (ja) 画像形成装置
JP2006033754A (ja) 画像処理装置
JP2006254382A (ja) 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体
JP4360418B2 (ja) 画像処理装置、ビューワ、画像処理プログラム及び画像処理システム
JP2007104062A (ja) 画像処理装置、画像処理方法、画像処理プログラム、並びに、画像処理システム

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20071112

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20071115

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090120

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090407

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090527

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090623

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090706

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120724

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120724

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130724

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees