JP2008219152A - 画像処理装置およびその方法 - Google Patents
画像処理装置およびその方法 Download PDFInfo
- Publication number
- JP2008219152A JP2008219152A JP2007050197A JP2007050197A JP2008219152A JP 2008219152 A JP2008219152 A JP 2008219152A JP 2007050197 A JP2007050197 A JP 2007050197A JP 2007050197 A JP2007050197 A JP 2007050197A JP 2008219152 A JP2008219152 A JP 2008219152A
- Authority
- JP
- Japan
- Prior art keywords
- additional information
- information
- image
- block
- embedded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0021—Image watermarking
- G06T1/005—Robust watermarking, e.g. average attack or collusion attack resistant
- G06T1/0064—Geometric transfor invariant watermarking, e.g. affine transform invariant
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
- H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
- H04N1/32203—Spatial or amplitude domain methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
- H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
- H04N1/32267—Methods relating to embedding, encoding, decoding, detection or retrieval operations combined with processing of the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
- H04N1/32352—Controlling detectability or arrangements to facilitate detection or retrieval of the embedded information, e.g. using markers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2201/00—General purpose image data processing
- G06T2201/005—Image watermarking
- G06T2201/0051—Embedding of the watermark in the spatial domain
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2201/00—General purpose image data processing
- G06T2201/005—Image watermarking
- G06T2201/0061—Embedding of the watermark in each block of the image, e.g. segmented watermarking
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
- Accessory Devices And Overall Control Thereof (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
【解決手段】 画像情報に付加情報を埋め込む際に、付加情報多重化部14は、画像情報を疑似中間調処理する量子化閾値を付加情報に応じて制御して、量子化された複数画素で構成される複数の符号パターンを形成することで、疑似中間調処理された画像情報に付加情報を埋め込む。付加情報は、画像情報上の、付加情報の位置を検出するための位置検出情報を含む。
【選択図】 図8
Description
図7は後述する画像処理装置の各処理部の機能を実現するコンピュータ装置のような情報処理装置の構成例を示すブロック図である。
次に、画像に付加情報を埋め込む画像処理装置(以下、付加装置)を説明する。図8は付加装置の機能構成例を示すブロック図である。
画像形成部13は、印刷媒体に画像を印刷するために、画像情報D1を記録紙サイズやレイアウト情報などに従い、印刷サイズに合わせる解像度変換を行う。解像度変換手段としては、公知の最近隣補間、線形補間など、何れの方法を用いてもよい。
付加情報多重化部14は、印刷画像16において、埋め込まれた付加情報Xが人の目に目立たないように、画像情報D2に付加情報Xを埋め込む。つまり、ブロックのテクスチャの周波数成分を解析することで付加情報Xの復元が可能になるように、画像情報D2のある領域をN×N画素の複数のブロックに分割し、各ブロックの誤差拡散法の量子化閾値を所定情報量の付加情報Xに応じて変化させる。この処理は、ブロックごとに通常の誤差拡散法では発生し得ないテクスチャを生じさせることができるので、人の目には目立たないように、付加情報Xを画像情報D2に埋め込むことが可能になる。
図13は画像情報D2と付加情報Xの埋込領域の関係例を示す図である。
図15は付加装置の付加情報の埋込手順を示すフローチャートである。
次に、印刷画像16から付加情報Xを抽出する画像処理装置(以下、抽出装置)を説明する。図16は抽出装置の構成例を示すブロック図である。
ブロック位置検出部62が検出したブロックの数が、付加装置が付加情報Xを埋め込んだブロックの数と異なれば、画像情報D5から付加情報Yを分離したとしても、復元した付加情報Yは、付加装置が埋め込んだ付加情報Xと異なる。
イメージスキャナ21によって、印刷画像16を任意の方向から読み取って付加情報を抽出する場合、印刷画像16の読取方向を判定する方向判定処理が必要になる。
図21は抽出装置の付加情報の抽出手順を示すフローチャートである。
図22はブロック位置検出部62の詳細な構成例を示すブロック図である。
図25はイメージスキャナ21から出力された画像情報D4の領域内に検出領域121〜126が配置された様子を示す図である。なお、検出領域の大きさ、位置、数に関して、特に限定はない。また、検出領域は予め設定されていてもよいし、画像情報D4に従って設定してもよい。また、一旦、一つのブロックのブロック位置情報B1を生成した後、次の検出領域を設定してもよい。また、画像情報D4の領域を四分割して、それら四領域を検出領域にすることもできる。あるいは、検出領域情報A1として検出領域の間隔(幅と高さ)を設定して、当該間隔に従い順次、検出領域を設定しても構わない。
検出ブロック保存処理(S103)では、ブロック位置検出処理S102で出力されるブロック位置情報B1を順次メモリに格納する。例えば、図25に示す六つの検出領域121〜126が設定された場合、各検出領域のブロック位置情報B1をメモリに格納する。
ブロック位置検出処理の終了判定(S104)では、検出領域情報A1によって設定される複数の検出領域におけるブロック位置検出処理(S102)が終了したか否かを判定する。例えば、図12に示すように、検出領域情報A1によって六つの検出領域121〜126が設定されている場合は、検出領域121〜126におけるブロック位置検出処理が行われたか否かを判定する。そして、ブロック位置検出処理を継続する場合、言い換えれば、ブロック位置検出処理が未了の検出領域がある場合は、処理をブロック位置検出処理(S102)に戻す。また、ブロック位置検出処理を継続しない場合は、メモリに格納されたブロック情報B1をブロック情報B2として出力する。なお、入力される画像情報D4から検出領域を設定し、ブロック位置検出部162の処理が終了しているか否かを判定して、ブロック位置検出処理の継続を判断してもよい。また、ブロック位置情報B1からブロック位置検出処理の継続を判断してもよい。
検出領域121 … (0, 0)(500, 500)、
検出領域122 … (500, 0)(1000, 500)、
検出領域123 … (0, 500)(500, 1000)、
検出領域124 … (500, 500)(1000, 1000)
ブロック位置情報の出力処理(S105)において、ブロック位置情報B2から、画像情報D4全体に対するブロック位置情報B3を算出する。そして、算出したブロック位置情報B3と画像情報D4を含む画像情報D5を出力する。
実施例1の付加情報多重化部14は、入力される画像情報D1のある領域をN×N画素の複数のブロックに分割し、ブロックごとに誤差拡散法の量子化閾値を付加情報のビットに応じて変化させる。そして、ブロックの符号パターンをサブブロックの組み合わせで構成し、各サブブロックのパターンを回転対称とし、上下反転した符号パターンが、上下反転前の符号パターンの何れかになるようなパターンの組み合わせにする。しかし、ブロックの符号パターンをサブブロックの組み合わせで構成しただけでは、付加情報が埋め込まれた正しいブロック位置を検出することができないことがある。
以下では、上記の問題を解決して、付加情報が埋め込まれたブロック位置を正しく検出するための、符号パターンを設定する際のサブブロックのパターンの組み合わせ方法について説明する。
なお、本発明は、複数の機器(例えばコンピュータ、インタフェイス機器、リーダ、プリンタなど)から構成されるシステムに適用しても、一つの機器からなる装置(例えば、複写機、ファクシミリ装置、制御装置など)に適用してもよい。
Claims (13)
- 画像情報に付加情報を埋め込む画像処理装置であって、
前記画像情報を疑似中間調処理する中間調処理手段と、
前記付加情報に応じて前記中間調処理手段の量子化閾値を制御して、量子化された複数画素で構成される複数の符号パターンを形成することで、前記疑似中間調処理された画像情報に前記付加情報を埋め込む埋込手段とを有し、
前記付加情報は、前記画像情報上の、前記付加情報の位置を検出するための位置検出情報を含むことを特徴とする画像処理装置。 - 前記付加情報は、前記画像情報に前記付加情報を埋め込んだ向きを検出するための方向判定情報を含むことを特徴とする請求項1に記載された画像処理装置。
- 画像情報に付加情報を埋め込む画像処理装置であって、
前記画像情報を疑似中間調処理する中間調処理手段と、
前記付加情報に応じて前記中間調処理手段の量子化閾値を制御して、量子化された複数画素で構成される複数の符号パターンを形成することで、前記疑似中間調処理された画像情報に前記付加情報を埋め込む埋込手段とを有し、
前記埋込手段が形成する符号パターンは、印刷物から前記画像情報に埋め込まれた付加情報を抽出する際に、前記印刷物の複数の向きにおいて抽出可能であることを特徴とする画像処理装置。 - 前記符号パターンは、前記符号パターンを構成する複数画素を複数のブロックに分割したサブブロックのパターンの組み合わせによって構成されることを特徴とする請求項3に記載された画像処理装置。
- 前記サブブロックのパターンの組み合わせは、前記サブブロックのパターンを隣接させた場合に、隣接するサブブロックのパターンの一部同士が前記符号パターンを構成しないことを特徴とする請求項4に記載された画像処理装置。
- 前記符号パターンを回転した場合、回転後の符号パターンは、回転前の前記複数の符号パターンの何れかに一致することを特徴とする請求項3から請求項5の何れか一項に記載された画像処理装置。
- 印刷物の画像情報に埋め込まれた付加情報を抽出する画像処理装置であって、
前記印刷物の画像情報を読み取る読取手段と、
前記読み取った画像情報から、前記付加情報の内容を判定するための判定量を算出する算出手段と、
前記判定量から前記付加情報が埋め込まれた、前記画像情報上の位置を検出する検出手段と、
前記検出の結果と前記判定量に基づき、前記画像情報から前記付加情報を分離する分離手段とを有することを特徴とする画像処理装置。 - さらに、前記分離した付加情報から、前記画像情報に前記付加情報が埋め込まれた向きを判定し、前記向きと前記分離した付加情報から、前記画像情報に埋め込まれた付加情報を抽出する抽出手段を有することを特徴とする請求項7に記載された画像処理装置。
- 画像情報に付加情報を埋め込む画像処理方法であって、
前記画像情報を疑似中間調処理する中間調処理ステップと、
前記付加情報に応じて前記中間調処理ステップの量子化閾値を制御して、量子化された複数画素で構成される複数の符号パターンを形成することで、前記疑似中間調処理された画像情報に前記付加情報を埋め込む埋込ステップとを有し、
前記付加情報は、前記画像情報上の、前記付加情報の位置を検出するための位置検出情報を含むことを特徴とする画像処理方法。 - 画像情報に付加情報を埋め込む画像処理方法であって、
前記画像情報を疑似中間調処理する中間調処理ステップと、
前記付加情報に応じて前記中間調処理ステップの量子化閾値を制御して、量子化された複数画素で構成される複数の符号パターンを形成することで、前記疑似中間調処理された画像情報に前記付加情報を埋め込む埋込ステップとを有し、
前記埋込ステップで形成される符号パターンは、印刷物から前記画像情報に埋め込まれた付加情報を抽出する際に、前記印刷物の複数の向きにおいて抽出可能であることを特徴とする画像処理方法。 - 印刷物の画像情報に埋め込まれた付加情報を抽出する画像処理方法であって、
前記印刷物の画像情報を読み取り、
前記読み取った画像情報から、前記付加情報の内容を判定するための判定量を算出し、
前記判定量から前記付加情報が埋め込まれた、前記画像情報が表す画像上の位置を検出し、
前記検出の結果と前記判定量に基づき、前記画像情報から前記付加情報を分離することを特徴とする画像処理方法。 - コンピュータ装置を制御して、請求項1から請求項8の何れか一項に記載された画像処理装置の各手段として機能させることを特徴とするコンピュータプログラム。
- 請求項12に記載されたコンピュータプログラムが記録されたことを特徴とするコンピュータが読み取り可能な記憶媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007050197A JP4859237B2 (ja) | 2007-02-28 | 2007-02-28 | 画像処理装置およびその方法 |
US12/026,380 US8160295B2 (en) | 2007-02-28 | 2008-02-05 | Image-processing device and image-processing method for embedding code patterns in image information |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007050197A JP4859237B2 (ja) | 2007-02-28 | 2007-02-28 | 画像処理装置およびその方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008219152A true JP2008219152A (ja) | 2008-09-18 |
JP2008219152A5 JP2008219152A5 (ja) | 2010-04-15 |
JP4859237B2 JP4859237B2 (ja) | 2012-01-25 |
Family
ID=39715954
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007050197A Expired - Fee Related JP4859237B2 (ja) | 2007-02-28 | 2007-02-28 | 画像処理装置およびその方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8160295B2 (ja) |
JP (1) | JP4859237B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019009746A (ja) * | 2017-06-28 | 2019-01-17 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法、およびプログラム |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4991604B2 (ja) * | 2008-03-17 | 2012-08-01 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
US8194918B2 (en) * | 2010-02-05 | 2012-06-05 | Seiko Epson Corporation | Embedded message extraction for visible watermarking |
JP5333866B2 (ja) * | 2010-08-31 | 2013-11-06 | ブラザー工業株式会社 | 画像読取装置、画像形成装置、及び、画像読取方法 |
HK1165184A2 (en) * | 2011-08-10 | 2012-09-28 | Easy Printing Network Ltd | A method for retrieving associated information using an image |
US10424038B2 (en) * | 2015-03-20 | 2019-09-24 | Digimarc Corporation | Signal encoding outside of guard band region surrounding text characters, including varying encoding strength |
US9552542B2 (en) | 2014-11-20 | 2017-01-24 | International Business Machines Corporation | Encoding information in multiple patterned layers |
WO2016153936A1 (en) | 2015-03-20 | 2016-09-29 | Digimarc Corporation | Digital watermarking and data hiding with narrow-band absorption materials |
US10417184B1 (en) | 2017-06-02 | 2019-09-17 | Keith George Long | Widely accessible composite computer file operative in a plurality of forms by renaming the filename extension |
JP7180327B2 (ja) * | 2018-11-30 | 2022-11-30 | 株式会社リコー | システム、画像形成装置、方法およびプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001148778A (ja) * | 1999-11-19 | 2001-05-29 | Canon Inc | 画像処理装置、画像処理方法及び記憶媒体 |
JP2004147253A (ja) * | 2002-10-28 | 2004-05-20 | Fuji Xerox Co Ltd | 画像処理装置及び画像処理方法 |
JP2006253839A (ja) * | 2005-03-08 | 2006-09-21 | Oki Electric Ind Co Ltd | 透かし情報検出装置および透かし情報埋め込み装置および透かし情報検出方法および透かし情報埋め込み方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69417661T2 (de) | 1993-09-03 | 1999-11-11 | Toshiba Kawasaki Kk | Gerät zur steganografischen Einfügung von Information in Farbbilder |
GB2340859A (en) | 1998-08-24 | 2000-03-01 | Weatherford Lamb | Method and apparatus for facilitating the connection of tubulars using a top drive |
US5946414A (en) * | 1998-08-28 | 1999-08-31 | Xerox Corporation | Encoding data in color images using patterned color modulated image regions |
US7187476B2 (en) | 2001-10-01 | 2007-03-06 | Canon Kabushiki Kaisha | Image processing apparatus and method, computer program, and recording medium |
JP2004094551A (ja) * | 2002-08-30 | 2004-03-25 | Fujitsu Ltd | 画像コード化装置、方法及びプログラム |
JP3784781B2 (ja) * | 2003-05-20 | 2006-06-14 | 富士通株式会社 | 画像データ処理装置、画像データ処理方法、画像データ処理プログラムおよび画像データ処理システム |
JP2005182164A (ja) | 2003-12-16 | 2005-07-07 | Sanyo Electric Co Ltd | 画像領域判定方法、ならびにその方法を利用可能な画像領域判定装置、画像補正装置および電子透かし抽出装置 |
JP4651986B2 (ja) * | 2004-06-04 | 2011-03-16 | 株式会社リコー | 情報埋め込み装置、およびプログラム |
JP2007267197A (ja) * | 2006-03-29 | 2007-10-11 | Fujitsu Ltd | 画像処理方法、画像処理装置、および印刷物 |
-
2007
- 2007-02-28 JP JP2007050197A patent/JP4859237B2/ja not_active Expired - Fee Related
-
2008
- 2008-02-05 US US12/026,380 patent/US8160295B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001148778A (ja) * | 1999-11-19 | 2001-05-29 | Canon Inc | 画像処理装置、画像処理方法及び記憶媒体 |
JP2004147253A (ja) * | 2002-10-28 | 2004-05-20 | Fuji Xerox Co Ltd | 画像処理装置及び画像処理方法 |
JP2006253839A (ja) * | 2005-03-08 | 2006-09-21 | Oki Electric Ind Co Ltd | 透かし情報検出装置および透かし情報埋め込み装置および透かし情報検出方法および透かし情報埋め込み方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019009746A (ja) * | 2017-06-28 | 2019-01-17 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法、およびプログラム |
US10715697B2 (en) | 2017-06-28 | 2020-07-14 | Canon Kabushiki Kaisha | Image processing method that determines a number of blocks for embedding information based on a size of an image to be printed, image processing apparatus, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
US8160295B2 (en) | 2012-04-17 |
US20080205697A1 (en) | 2008-08-28 |
JP4859237B2 (ja) | 2012-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4859237B2 (ja) | 画像処理装置およびその方法 | |
US7106884B2 (en) | Digital watermark embedding apparatus for document, digital watermark extraction apparatus for document, and their control method | |
US7773266B2 (en) | Image processing apparatus, method, and computer product for adding reference frame information used to detect position of image embedded information | |
JP4819723B2 (ja) | 情報抽出装置、情報抽出方法、情報抽出プログラム及び記録媒体 | |
JP3679671B2 (ja) | 画像処理装置、画像処理方法、及び、そのプログラム、記憶媒体 | |
US8427708B2 (en) | Apparatus and method for controlling printing of information embedded in a document | |
US10992837B2 (en) | Information processing apparatus, control method thereof, and storage medium | |
JP2008154106A (ja) | 秘匿処理方法,画像処理装置および画像形成装置 | |
US7692811B2 (en) | Image forming apparatus and method | |
JP4143655B2 (ja) | 画像処理装置、画像処理方法、プログラム、記憶媒体、システム | |
JP4881141B2 (ja) | 画像処理装置および画像処理装置の制御方法 | |
JP4232689B2 (ja) | 情報埋め込み方法および情報抽出方法 | |
JP4757205B2 (ja) | 画像処理装置、画像処理システム、および画像処理プログラム | |
JP4927058B2 (ja) | 情報埋込画像生成装置、情報読取装置、情報埋込画像生成方法、情報読取方法、情報埋込画像生成プログラムおよび情報読取プログラム | |
JP2017072958A (ja) | 画像処理装置および画像に多重化された情報の復号方法およびプログラム | |
JP2007312049A (ja) | 情報埋込処理システム、付加情報埋込装置、付加情報復元装置 | |
JP3796425B2 (ja) | 画像処理装置及び方法並びにコンピュータプログラム及び記録媒体 | |
JP4626565B2 (ja) | 画像処理装置、画像形成装置およびプログラム | |
JP2007006134A (ja) | 画像形成方法、情報埋め込み方法、情報埋め込み装置、情報復号方法及び、情報復号装置 | |
JP3720748B2 (ja) | 画像処理装置及びその制御方法並びにコンピュータプログラム及び記録媒体 | |
JP4679084B2 (ja) | 電子透かしの付加 | |
JP2001218008A (ja) | 画像処理装置、画像処理方法および記憶媒体 | |
JP2006108994A (ja) | 画像処理方法および装置 | |
JP4881935B2 (ja) | 情報埋込画像生成装置、情報読取装置、情報埋込画像生成方法、情報読取方法、情報埋込画像生成プログラムおよび情報読取プログラム | |
JP2011086090A (ja) | 画像変換方法、画像変換装置、画像変換システム及び画像変換プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100226 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110620 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110624 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110823 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111028 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111031 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141111 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |