JP4750552B2 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
JP4750552B2
JP4750552B2 JP2005375296A JP2005375296A JP4750552B2 JP 4750552 B2 JP4750552 B2 JP 4750552B2 JP 2005375296 A JP2005375296 A JP 2005375296A JP 2005375296 A JP2005375296 A JP 2005375296A JP 4750552 B2 JP4750552 B2 JP 4750552B2
Authority
JP
Japan
Prior art keywords
image
speech
rotation
processing apparatus
speech bubble
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005375296A
Other languages
English (en)
Other versions
JP2007179187A (ja
JP2007179187A5 (ja
Inventor
等 渡邊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2005375296A priority Critical patent/JP4750552B2/ja
Publication of JP2007179187A publication Critical patent/JP2007179187A/ja
Publication of JP2007179187A5 publication Critical patent/JP2007179187A5/ja
Application granted granted Critical
Publication of JP4750552B2 publication Critical patent/JP4750552B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Editing Of Facsimile Originals (AREA)

Description

本発明は、例えば、ふきだしのような部品画像を、画像に合成するため設定を行う画像処理装置に関するものである。
従来、画像にふきだしを合成してプリントするためには、合成するためのふきだしをもれなく保持し、保持したふきだしデータから選択したものを画像に合成していた。
また、ふきだしを回転や反転させることも可能であったが、使用者は、回転・反転それぞれの操作内容を個別に指示し、その指示に沿って変形されたふきだしを画像に合成していた(特許文献1)。
特開2004−260650号公報
しかしながら上記従来例では、合成するためのふきだしをもれなく保持するため、ふきだしデータを保持するための記憶領域が多く必要となり、コストの増大の原因となるなどの課題があった。
また、ふきだしに対して使用者が回転や反転の操作をそれぞれ加える場合、使用者にとって自由度は高まるが、ふきだし合成のための複雑な演算や処理が必要となってしまう。また、使用者は、所望のふきだしデータを得るために使用者が思考実験しながら試行を繰り返す必要が生じる場合があり、利便性を欠いてしまう場合があった。
このような課題を解決するために、本発明の画像処理装置は次のような構成を備える。すなわち、
画像にふきだし画像を合成するため設定を行う画像処理装置であって、画像を表示画面に表示させる表示制御手段と、基本となるふきだし画像を記憶保持する記憶手段とふきだし画像を回転または反転させる変換手段と、ふきだし画像を回転させるための操作手段とを有し、操作手段への回転指示に応じて、変換手段は、あらかじめ設定された回転と反転の組み合わせでふきだし画像を変換し、表示制御手段は、変換手段で変換されたふきだし画像を表示画面に表示させ、操作手段は、ふきだし画像を回転させる方向を指定することが可能であり、変換手段は、ふきだし画像を回転させる方向に応じた回転と反転の組み合わせで、順次ふきだし画像を変換することを特徴とする。
本発明によれば、基本となるふきだし画像を保持しており、回転と反転を組み合わせることにより基本のふきだし画像から複数種類のふきだし画像を生成し、表示することができる。そのため、全てのふきだしを記憶する必要はないので、記憶装置を節約することができ、コストダウンが可能となる。
また、一つのふきだしから複数種類のふきだしを生成する際に、あらかじめ設定された回転と反転の組み合わせにより回転・反転の処理を行うので、簡単な演算や処理にすることが可能となる。
(実施例1)
以下に図面を用いて本発明の実施例を説明する。
図1は本発明における画像処理装置の構成を表すブロック図である。
この画像処理装置は、図示しないCPUが、図示しないメモリからプログラムを読み込み、読み込んだプログラムに基づいて各ブロックの制御を行う。各ブロックはバス101によって互いに結合されている。
画像データは記憶媒体102に保持されておりI/O制御部103を通して読み出される。
読み出された画像データは表示制御部107によって表示可能なデータに変換され、表示部108に送られて表示部108に表示される。
記憶媒体102に複数の画像が保持されている場合には、操作部116の画像送りボタンで別の画像を表示することができる。操作部の各ボタンの操作内容は操作制御部115を通して各ブロックへ伝えられる。
ふきだし画像の合成を行うには、まず、合成対象となる画像を選択する。表示部108を参照しながら操作部116を操作して任意の画像を選択し、操作部116の決定ボタンを押すと画像選択部106によって画像が決定され、選択された画像データはデータ保持部109に保持される。
ふきだしデータはデータ保持部109に保持されている。データ保持部109には、複数種類のふきだしデータが保持されているが、それぞれ基本となるふきだしデデータのみしか保持されていない。複数のふきだしは、表示部108に一覧表示され、操作者は一覧表示の中から所望のふきだしを一つ選択する。選択されたふきだしはふきだし選択部114にて決定され、サイズ判定部104にてふきだしと画像のサイズを比較してふきだし合成可能か判定する。合成可能であれば画像合成部105にて画像とふきだしを合成し、合成した画像データが表示制御部107に送られ、表示部108に表示される。
操作者はふきだしを時計回りまたは反時計回りに回転することができる。操作部116にて回転を指示するとあらかじめ決められた手順によってふきだし反転部112とふきだし回転部113によって反転または回転が行われる。回転されたふきだしは画像合成部105にて画像と合成され、表示部108に表示される。
表示部108に表示された合成画像はそのままプリントすることができる。画像合成部105にて合成された画像データは印刷データ生成部110にてプリント可能な形式のデータに変換され、印刷部111にてプリントされる。
図2および図3は基本パターンと回転パターン、その生成手順とデータ構成図である。
図2の201〜208、211〜218、221〜228はふきだしの基本パターンと回転パターンである。
基本パターンは201、211、221である。ふきだしの突起部に注目しパターン1〜パターン8の変化ではふきだしの突起部が時計回りに回転するようになっている。パターン8の次はパターン1に戻る。
回転操作として1つの操作ボタンを割り当てている場合には回転ボタンを押すごとに、順次、パターン1、パターン2と進み、パターン8まで進んだらその次はパターン1まで戻る。
回転操作として、右ボタンと左ボタンのように2つの方向性を持ったボタンを割り当てることが可能な場合には、右ボタンを押すごとにパターン1、パターン2と進み、パターン8まで進んだらその次はパターン1まで戻る。しかし、左ボタンを押すと右ボタンをとは逆にパターンを進行し、突起部が反時計回りに回転するようになる。
図3の301〜308はそれぞれ図2の201〜208のふきだしパターンに対応し、201〜208のそれぞれのパターンのふきだしを作り出すための処理を記したデータ群である。
各データは1バイト(8ビット)からなり、第0ビットが1であれば左右反転処理を行う。第1ビットが1であれば上下反転の処理する。第2ビットが1であれば右に90度回転する。第3ビットが1であれば左に90度回転する。以上の処理をそれぞれ基本パターンに対して行うことを示す。第4ビットから第7ビットは使用していない。
8つのふきだしパターンに対応するために上記のデータを用意し、配列形式で保持しておく。
すべてのふきだしのパターンの画像そのものを記憶保持しておかないで、図3のようなデータを保持しておくだけで、一つの基本形のふきだし画像から複数種類のふきだし画像を生成することができるので、記憶領域を節約することができる。また、図3のデータは、201の基本パターンだけでなく、211、221にも対応させることで、212〜218、222〜228のパターンを生成することができる。
図3の、回転と反転の組み合せのデータは、実施の形態の一例であり、他の組み合わせにより実現してもよい。例えば、上下反転、右90度回転、左90度回転、180度回転を組み合わせて図2の各パターンを生成するようにしてもよい。
パターン4を例として動作の詳細を説明する。
最初にふきだしを画像に重ねて表示する時はパターン1の基本形(201)である。その状態から右回転ボタンを3回押すとパターン4(204)が画像に重ねて表示されることになる。基本形の状態から右回転ボタンを3回押すと、図3のデータ群を参照し、配列データの先頭から3バイト分、データの参照ポインタを進め、304のデータを読み込む。304は第0ビットは0、第1ビットは1、第2ビットは1、第3ビットは0であるので、基本形に対して上下反転と右90度回転を行えばよい。そして、基本形201を上下反転しさらに右に90度回転して、パターン4(204)を生成し、パターン4のふきだしは、画像に重ねて表示されることになる。
このように、反転と回転の処理を組み合わせることで、一つの基本パターンから複数種類のパターンのふきだしを生成することができる。
また、左右反転、上下反転、右90度回転、左90度回転を組み合わせているだけなので、簡単な処理および演算で一つの基本パターンから複数種類のパターンのふきだしを生成することができる。
図4は、ふきだし合成の処理の流れを示すフローチャートである。
これらの処理は画像処理装置の制御のもとに行われ、画像処理装置のCPUが、プログラムメモリから制御プログラムを読み込み、読み込んだ制御プログラムに基づいて以下の処理を行う。
S401において、記憶媒体に記憶されている画像の中からふきだしを合成する画像を選択する。記憶媒体に画像が複数保持されている場合には操作部116の画像送りボタンで表示画像を送り、所望の画像を表示する。所望の画像が表示されたら操作部116の決定ボタンを押し、画像を選択する。操作部116の決定ボタンを押すと、画像選択部106によって画像が決定され、選択された画像データはデータ保持部109に保持される。
画像が決定されたらS402において、データ保持部に109記憶されている基本形のふきだしふきだし一覧を表示する。操作者は、その中から画像に合成するふきだしを選択し、決定ボタンを押す。決定ボタンが押されると、選択されたふきだしがふきだし選択部114にて決定される。
画像とふきだしが決定したら、S403に進み、ふきだし画像のサイズとふきだしのサイズを比較して、合成を許可するか否かの判定をサイズ判定部104において、行う。ふきだしの画像サイズが画像より大きく、合成時にふきだしが画像をはみ出すような場合には、警告表示を行う。または、ふきだし合成を行わずに終了する。
S403においてふきだし合成可能と判定された場合には、S404において、画像にふきだしを重ねて合成し、合成した画像を表示する。S401で画像選択部により選択されデータ保持部に記憶保持されている画像と、S402でふきだし選択部が決定したふきだしとを画像合成部105において合成し、表示部108の表示画面に表示させる。
S405において操作者からの指示入力を待つ。操作者が操作部116の決定ボタンを押すと合成設定終了となり、ふきだし合成はその時に表示部に表示されている表示状態で決定される(S406)。合成処理終了後には、合成部で合成された画像を記憶媒体に保存したり、印刷部により合成画像の印刷などが行われる。
S405において、操作部116の十字キーが押され、ふきだし移動指示がなされた場合には、S405での指示に応じてふきだしの位置を移動させる(S408)。そして再びS404に進み、S401で画像選択部により選択されデータ保持部に記憶保持されている画像と移S408で移動させたふきだしとを画像合成部で105合成し、表示画面に表示させる。
S405において、右回転ボタンが押されたとS409にて判定されればS410においてふきだしを次のパターンに変換する。変換前がパターン1(201)であればパターン2(202)に変換する。その変換は前述のとおり、図3のデータ群から反転と回転の指定を読み取り、必要に応じて反転と回転を行うことにより達成される。
S405において、右回転ボタンではなく左回転ボタンが押されたとS409にて判定されればS411においてふきだしを前のパターンに変換する。変換前がパターン2(202)であればパターン1(201)に変換する。その変換は前述のとおり、図3のデータ群から反転と回転の指定を読み取り、必要に応じて反転と回転を行うことにより達成される。
S410またはS411においてふきだしの変換が行われたら、変換後のふきだしが画像からはみ出さないかS412においてサイズ判定部104がチェックする。ふきだしの基本形から90度回転している場合があるために変換後のふきだしの画像サイズで縦と横のサイズ判定を再度行う。S412でふきだしが画像からはみ出すと判定されたらS409に戻って再度同じ向きの回転を試みる。
先ほどの変換が右回転指示によるものであったのならば再度S410において次のパターンに変換する。たとえばS412で合成不可能と判定されたものがパターン2(202)であったのならはさらにパターン3(203)に変換する。
一方先ほどの変換が左回転指示によるものであったのならば再度S410において前のパターンに変換する。たとえばS412で合成不可能と判定されたものがパターン2(202)であったのならはさらにパターン1(201)に変換する。
このような判定を行うことにより、回転パターンとして本実施例では8つ用意しているが合成可能なパターンのみ表示することができるようになる。この場合ふきだしの基本形の形状によるが操作者が使用できるパターンとして8つよりも少なくなることになる。
S403においてふきだしの基本形に対して合成の可否をチェックしているのでS407〜S412の処理が無限に繰り返されることはない。
S412において変換後のふきだしが合成可能であると判定されたらS404にもどり、画像合成部105において変換後のふきだしを画像に合成して、表示部108に表示する。以後、操作者によって設定終了がなされるまで上述の処理を繰り返す。
以上の処理により、反転と回転の処理を組み合わせることで、一つの基本パターンから複数種類のパターンのふきだしを生成することができる。少ない記憶容量でふきだしデータを保持し、簡易な操作で視覚的にわかりやすい形でふきだしのバリエーションを操作者に提示し、ふきだしと画像を合成することが可能になる。
また、これらの回転や反転を組み合わせて生成した複数種類のふきだしを回転ボタンの押下により切り換えることで、使用者は簡単に複数のふきだしを切り換えることができる。
さらに、上記の実施例のように、右回転ボタン・左回転ボタンの方向性を持った2つの操作部材を持ち、操作部材の方向性に応じてふきだしの回転や反転の組み合わせを変えることで、所望のふきだしのパターンを簡単に選択することができる。
しかし、操作部材が少なく、左右の回転ボタンを持たないような画像処理装置では、1つの操作部材でふきだしのパターンを切り換えるようにしてもよい。
(その他の実施例)
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
上述の実施形態では図2のようなふきだし画像を合成する場合にについて説明してきだが、ふきだし画像の形は図2以外にもさまざまな形式が考えられる。また、ふきだし画像に限らなくても、回転と反転を組み合わせて用いることで、基本となる部品画像から複数種類の部品画像を生成できる部品画像であれば、本発明を適応することができる。
また、上述の実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線/無線通信を用いてプログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのプログラムを実行する場合も本発明に含む。
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等、プログラムの形態を問わない。
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、磁気テープ等の磁気記録媒体、MO、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−R、DVD−RW等が考えられる。また、光/光磁気記憶媒体、不揮発性の半導体メモリでもよい。
有線/無線通信を用いたプログラムの供給方法としては、次のような方法が考えられる。すなわち、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムそのもの、もしくはプログラムデータファイルを記憶し、接続のあったクライアントコンピュータにプログラムデータファイルをダウンロードするような方法である。
ここで、プログラムデータファイルは、本発明を形成するコンピュータプログラムを圧縮され自動インストール機能を含むファイル等も含む。
この場合、プログラムデータファイルを複数のセグメントファイルに分割し、セグメントファイルを異なるサーバに配置することも可能である。
つまり、本発明の機能処理をコンピュータで実現するためのプログラムデータファイルを複数のユーザに対してダウンロードさせるサーバ装置も本発明に含む。
また、上述の実施形態の機能を実現するプログラムを暗号化し記憶媒体に格納してユーザに配布し、所定の条件を満たしたユーザに対して暗号化を解く鍵情報を、ネットワークを介してダウンロードさせることによって供給するような方法も考えられる。その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて本発明を実現することも可能である。
コンピュータが供給されたプログラムコードを実行することにより、上述の実施形態の機能が実現される。また、そのプログラムコードがコンピュータにおいて稼働しているOS(オペレーティングシステム)あるいは他のアプリケーションソフト等の共同して上述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれる。
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納される場合にも本発明に含まれる。また、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合にも本発明に含まれることは言うまでもない。
本発明による一実施例のプリントシステムの構成を示すブロック図である。 ふきだしの基本形とそのパターンを示す図である。 ふきだしの基本形を各パターンに変換するための手順を格納したデータ構成図である。 本実施例の処理の流れを示すフローチャートである。
符号の説明
101 各ブロックを接続するバス
102 記憶媒体
103 IO制御部
104 サイズ判定部
105 画像合成部
106 画像選択部
107 表示制御部
108 表示部
109 データ保持部
110 印刷データ生成部
111 印刷部
112 ふきだし反転部
113 ふきだし回転部
114 ふきだし選択部
115 操作制御部
116 操作部

Claims (7)

  1. 画像にふきだし画像を合成するため設定を行う画像処理装置であって、
    画像を表示画面に表示させる表示制御手段と、
    基本となるふきだし画像を記憶保持する記憶手段と
    前記ふきだし画像を回転または反転させる変換手段と、
    ふきだし画像を回転させるための操作手段とを有し、
    前記操作手段への回転指示に応じて、前記変換手段は、あらかじめ設定された回転と反転の組み合わせで前記ふきだし画像を変換し、前記表示制御手段は、前記変換手段で変換されたふきだし画像を表示画面に表示させ
    前記操作手段は、前記ふきだし画像を回転させる方向を指定することが可能であり、前記変換手段は、前記ふきだし画像を回転させる方向に応じた回転と反転の組み合わせで、順次前記ふきだし画像を変換することを特徴とする画像処理装置。
  2. さらに、画像に前記変換手段で変換されたふきだし画像を重ねて合成する合成手段とを有し、
    前記表示制御手段は、前記合成手段で合成した画像を表示画面に表示させることを特徴とする請求項に記載の画像処理装置。
  3. さらに、前記合成手段で合成した画像を印刷する印刷手段を有することを特徴とする請求項に記載の画像処理装置。
  4. 画像にふきだし画像を合成するため設定を行う画像処理装置の制御方法であって、
    基本となるふきだし画像を表示手段に表示させる第1の表示工程と、
    ふきだし画像の回転指示に応じて、あらかじめ設定された回転と反転の組み合わせで、順次前記ふきだし画像を回転または反転させる変換工程と、
    前記変換工程で回転または反転させたふきだし画像を前記表示手段に表示させる第2の表示工程とを有し、
    前記回転指示は、前記ふきだし画像を回転させる方向が指示可能であり、前記変換工程では、前記ふきだし画像を回転させる方向に応じた回転と反転の組み合わせで、順次前記ふきだし画像を変換することを特徴とする画像処理装置の制御方法。
  5. さらに、画像に前記変換工程で変換されたふきだし画像を重ねて合成する合成工程とを有し、
    第2の表示工程は、前記合成手段において合成した画像を表示画面に表示させることを特徴とする請求項に記載の画像処理装置の制御方法。
  6. 請求項に記載の画像処理装置の制御方法をコンピュータに実行させるためのプログラムを記録したことを特徴とするコンピュータが読み取り可能な記憶媒体。
  7. 請求項に記載の画像処理装置の制御方法をコンピュータに実行させることを特徴とするプログラム。
JP2005375296A 2005-12-27 2005-12-27 画像処理装置 Expired - Fee Related JP4750552B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005375296A JP4750552B2 (ja) 2005-12-27 2005-12-27 画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005375296A JP4750552B2 (ja) 2005-12-27 2005-12-27 画像処理装置

Publications (3)

Publication Number Publication Date
JP2007179187A JP2007179187A (ja) 2007-07-12
JP2007179187A5 JP2007179187A5 (ja) 2009-02-12
JP4750552B2 true JP4750552B2 (ja) 2011-08-17

Family

ID=38304327

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005375296A Expired - Fee Related JP4750552B2 (ja) 2005-12-27 2005-12-27 画像処理装置

Country Status (1)

Country Link
JP (1) JP4750552B2 (ja)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06236428A (ja) * 1993-02-08 1994-08-23 Ricoh Co Ltd 画像処理装置
JP3707096B2 (ja) * 1995-05-10 2005-10-19 カシオ計算機株式会社 画像制御装置および画像制御方法

Also Published As

Publication number Publication date
JP2007179187A (ja) 2007-07-12

Similar Documents

Publication Publication Date Title
US20030174346A1 (en) Image processing method and apparatus, and printer driver
EP2026324A2 (en) Image processing circuit, display device, and printing device
US5010324A (en) Sequential page unit image display device having display control memory
JP2009171055A (ja) 画像処理装置及び画像処理装置の制御方法
JP4750552B2 (ja) 画像処理装置
JPH03196188A (ja) 情報処理装置の表示方式
JP2000066856A (ja) マルチ・プリンタ制御装置および方法
JP3732776B2 (ja) 電子測定装置
JP2021005131A (ja) 表示方法、表示装置、及び印刷装置
JP4115879B2 (ja) 画像表示装置
JP4404117B2 (ja) 画像処理回路、表示装置及び印刷装置
JP4408846B2 (ja) 矩形データ転送装置
JP3546527B2 (ja) 画像データ回転処理装置
JP2004258264A (ja) 画面作成方法、画面作成装置、表示器
JP3271592B2 (ja) ファクシミリ装置
JP2007252162A (ja) 電動機駆動装置
JP4250537B2 (ja) 画像作成方法、画像作成装置、およびプログラム
JP2006209512A (ja) 情報処理装置
JPH0827615B2 (ja) 文字パタ−ン発生方式
JPH0950535A (ja) イメージデータ出力装置
JP2007081805A (ja) 画像処理装置、画像処理方法及びプログラム
JP2004240775A (ja) データ交換装置、データ交換方法及びデータ交換プログラム
JP2003271372A (ja) 印刷制御装置、表示方法及び記憶媒体
JP2005044126A (ja) シェーディング画像表示装置および画像表示システム
JP2003330691A (ja) メモリ制御装置および表示制御装置および画像処理システムおよびデータ処理方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081218

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081218

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100201

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20100630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110420

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110517

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110519

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140527

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees