JP2001197304A - 画像処理装置、画像処理方法、及び記憶媒体 - Google Patents
画像処理装置、画像処理方法、及び記憶媒体Info
- Publication number
- JP2001197304A JP2001197304A JP2000373019A JP2000373019A JP2001197304A JP 2001197304 A JP2001197304 A JP 2001197304A JP 2000373019 A JP2000373019 A JP 2000373019A JP 2000373019 A JP2000373019 A JP 2000373019A JP 2001197304 A JP2001197304 A JP 2001197304A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- image
- processing
- resolution
- pixel data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/414—Extracting the geometrical structure, e.g. layout tree; Block segmentation, e.g. bounding boxes for graphics or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6072—Colour correction or control adapting to different types of images, e.g. characters, graphs, black and white image portions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10008—Still image; Photographic image from scanner, fax or copier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30176—Document
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Artificial Intelligence (AREA)
- Signal Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
Abstract
(57)【要約】
【課題】画像処理において処理時間上の隘路となる処理
を解消して処理速度を向上させる。 【解決手段】本発明は像域分離処理を用いる画像処理シ
ステムに関する。本システムによれば、画像の画素デー
タは入力され、像域分離処理が入力された画素データ上
で遂行されて画像内の画素のタイプが判定される。そし
て、像域分離処理に基づいて、画素が画像のオブジェク
ト領域内にあるか否かが判定され、画素が画像のオブジ
ェクト領域内にあると判定されれば、その画素は処理さ
れる。この処理は、画素のエッジへの近接度の検出や、
画素の色度の検出、画素が含まれる文字の幅の検出を含
んでいる。
を解消して処理速度を向上させる。 【解決手段】本発明は像域分離処理を用いる画像処理シ
ステムに関する。本システムによれば、画像の画素デー
タは入力され、像域分離処理が入力された画素データ上
で遂行されて画像内の画素のタイプが判定される。そし
て、像域分離処理に基づいて、画素が画像のオブジェク
ト領域内にあるか否かが判定され、画素が画像のオブジ
ェクト領域内にあると判定されれば、その画素は処理さ
れる。この処理は、画素のエッジへの近接度の検出や、
画素の色度の検出、画素が含まれる文字の幅の検出を含
んでいる。
Description
【０００１】
【発明の属する技術分野】本発明は、画像処理装置、画
像処理方法、及び記憶媒体に関する。
像処理方法、及び記憶媒体に関する。
【０００２】
【従来の技術】カラー複写機のような従来の画像処理シ
ステムは、原稿の走査により画素データを獲得し、その
データに様々な画像処理を施してレーザビーム式再生エ
ンジンやインクジェット式再生エンジン等への引き渡し
に適した出力データを生成する。従来の画像処理システ
ムは、まず最初に、走査された画像を表す赤（Ｒ）、緑
（Ｇ）、青（Ｂ）の信号を電荷結合素子（ＣＣＤ）から
受信する。受信された信号が画像処理の対象となる。
ステムは、原稿の走査により画素データを獲得し、その
データに様々な画像処理を施してレーザビーム式再生エ
ンジンやインクジェット式再生エンジン等への引き渡し
に適した出力データを生成する。従来の画像処理システ
ムは、まず最初に、走査された画像を表す赤（Ｒ）、緑
（Ｇ）、青（Ｂ）の信号を電荷結合素子（ＣＣＤ）から
受信する。受信された信号が画像処理の対象となる。
【０００３】図１は前述の従来の画像処理システムにお
ける画像処理を示す図である。図１に示されるように、
ＣＣＤから出力される画像信号はアナログ信号処理ユニ
ット１０１に入力され、その信号は、利得及びオフセッ
ト調整の処理が施される。次に、Ｒ，Ｇ，Ｂ各信号は、
Ａ／Ｄコンバータ１０２によって８ビットのデジタル画
像信号Ｒ１，Ｂ１，Ｇ１にそれぞれ変換される。これら
の信号は、各信号に対してシェーディング補正を適用す
るためにシェーディング補正ユニット１０３に入力され
る。ライン遅延回路１０４及び１０５は、Ｒ１，Ｂ１，
Ｇ１各信号間のタイミングを整合させ、その結果ライン
遅延回路１０５の後には、信号Ｒ，Ｇ，Ｂの値が、時間
上の同一点において同一の画素を表すようにすべく、Ｃ
ＣＤ内のセンサの間隔を補償するために使用される。
ける画像処理を示す図である。図１に示されるように、
ＣＣＤから出力される画像信号はアナログ信号処理ユニ
ット１０１に入力され、その信号は、利得及びオフセッ
ト調整の処理が施される。次に、Ｒ，Ｇ，Ｂ各信号は、
Ａ／Ｄコンバータ１０２によって８ビットのデジタル画
像信号Ｒ１，Ｂ１，Ｇ１にそれぞれ変換される。これら
の信号は、各信号に対してシェーディング補正を適用す
るためにシェーディング補正ユニット１０３に入力され
る。ライン遅延回路１０４及び１０５は、Ｒ１，Ｂ１，
Ｇ１各信号間のタイミングを整合させ、その結果ライン
遅延回路１０５の後には、信号Ｒ，Ｇ，Ｂの値が、時間
上の同一点において同一の画素を表すようにすべく、Ｃ
ＣＤ内のセンサの間隔を補償するために使用される。
【０００４】入力マスキングユニット１０６は、ＣＣＤ
の色分解特性により決定される読み取り色空間を標準色
空間に変換し、ＬＯＧコンバータ１０７は、輝度信号Ｒ
４，Ｇ４，Ｂ４を濃度信号Ｃ０，Ｍ０，Ｙ０に変換す
る。濃度信号は、ライン遅延メモリ１０８により、判定
信号ＵＣＲ（下色除去），ＦＩＬＴＥＲ，ＳＥＮが後述
するように生成され得るまで遅延される。
の色分解特性により決定される読み取り色空間を標準色
空間に変換し、ＬＯＧコンバータ１０７は、輝度信号Ｒ
４，Ｇ４，Ｂ４を濃度信号Ｃ０，Ｍ０，Ｙ０に変換す
る。濃度信号は、ライン遅延メモリ１０８により、判定
信号ＵＣＲ（下色除去），ＦＩＬＴＥＲ，ＳＥＮが後述
するように生成され得るまで遅延される。
【０００５】ライン遅延メモリ１０８による信号の遅延
の後、マスキングＵＣＲ回路１０９はＵＣＲ信号を用い
て濃度信号から黒信号を抽出し、可変変倍回路１１０は
画像信号及び黒文字判定信号を主走査方向について拡張
及び圧縮する。空間フィルタ処理ユニット１１１はＦＩ
ＬＴＥＲ信号を用いてフィルタ処理を行い、その結果得
られたフレーム順次画像信号Ｍ４，Ｃ４，Ｙ４，Ｂｋ４
は、画像の出力における解像度を決定するＳＥＮ信号と
ともに再生エンジン１１２に送られる。
の後、マスキングＵＣＲ回路１０９はＵＣＲ信号を用い
て濃度信号から黒信号を抽出し、可変変倍回路１１０は
画像信号及び黒文字判定信号を主走査方向について拡張
及び圧縮する。空間フィルタ処理ユニット１１１はＦＩ
ＬＴＥＲ信号を用いてフィルタ処理を行い、その結果得
られたフレーム順次画像信号Ｍ４，Ｃ４，Ｙ４，Ｂｋ４
は、画像の出力における解像度を決定するＳＥＮ信号と
ともに再生エンジン１１２に送られる。
【０００６】前述の信号ＵＣＲ，ＦＩＬＴＥＲ，ＳＥＮ
は黒文字判定ユニット１１３から出力される。特に、黒
文字判定ユニット１１３で生成されるＵＣＲ信号は０か
ら７の値を有し、その０から７の値は、より濃い黒から
薄い黒へと、信号Ｂｋ２を生成するためにマスキングＵ
ＣＲ回路１０９により信号Ｙ１，Ｍ１，Ｃ１から除去さ
れるべき黒成分の量を示している。黒文字判定ユニット
１１３により生成される信号ＦＩＬＴＥＲは２ビット値
であり、その値０，１，２，３は、平滑処理，強エッジ
強調，中エッジ強調，弱エッジ強調をそれぞれ示す。そ
れに応じて、信号ＦＩＬＴＥＲは空間フィルタ処理ユニ
ット１１１へ入力され、信号Ｍ３，Ｃ３，Ｙ３，Ｂｋ３
に適用されるフィルタ処理の量及びタイプを制御する。
は黒文字判定ユニット１１３から出力される。特に、黒
文字判定ユニット１１３で生成されるＵＣＲ信号は０か
ら７の値を有し、その０から７の値は、より濃い黒から
薄い黒へと、信号Ｂｋ２を生成するためにマスキングＵ
ＣＲ回路１０９により信号Ｙ１，Ｍ１，Ｃ１から除去さ
れるべき黒成分の量を示している。黒文字判定ユニット
１１３により生成される信号ＦＩＬＴＥＲは２ビット値
であり、その値０，１，２，３は、平滑処理，強エッジ
強調，中エッジ強調，弱エッジ強調をそれぞれ示す。そ
れに応じて、信号ＦＩＬＴＥＲは空間フィルタ処理ユニ
ット１１１へ入力され、信号Ｍ３，Ｃ３，Ｙ３，Ｂｋ３
に適用されるフィルタ処理の量及びタイプを制御する。
【０００７】信号ＳＥＮは、黒文字判定ユニット１１３
から再生エンジン１１２に出力される１ビット信号であ
り、値０はエンジン１１２に対して印刷を２００線／イ
ンチの解像度で印刷を進行することを示し、値１は４０
０線／インチの解像度を要求することを示す。
から再生エンジン１１２に出力される１ビット信号であ
り、値０はエンジン１１２に対して印刷を２００線／イ
ンチの解像度で印刷を進行することを示し、値１は４０
０線／インチの解像度を要求することを示す。
【０００８】信号ＵＣＲ，ＦＩＬＴＥＲ，ＳＥＮの値は
ルックアップテーブル（ＬＵＴ）１１７の出力であり、
ＬＵＴ１１７は、対象画素を含む文字の幅と、文字のエ
ッジに対する対象画素の近接度と、対象画素の色度とを
示す信号を受け取る。そのため、ＵＣＲ，ＦＩＬＴＥ
Ｒ，ＳＥＮの出力値は、各対象画素について計算され、
そして、ＬＵＴによって指定される関係に応じた画素に
対応する、検出された文字幅およびエッジ近接度および
色度に基づいて決定される。
ルックアップテーブル（ＬＵＴ）１１７の出力であり、
ＬＵＴ１１７は、対象画素を含む文字の幅と、文字のエ
ッジに対する対象画素の近接度と、対象画素の色度とを
示す信号を受け取る。そのため、ＵＣＲ，ＦＩＬＴＥ
Ｒ，ＳＥＮの出力値は、各対象画素について計算され、
そして、ＬＵＴによって指定される関係に応じた画素に
対応する、検出された文字幅およびエッジ近接度および
色度に基づいて決定される。
【０００９】例えば、信号ＦＩＬＴＥＲの値１は、エッ
ジ近くに位置し、色度が低く、相対的に細い文字に含ま
れる対象画素について用いられる。というのは、そのよ
うなファクタはその画素が小さくかつ黒い文字内にある
ことを示唆しているためである。他の例においては、対
象画素がエッジ近くになく、非常に太い領域に含まれて
いる場合には、信号ＳＥＮには値として０（２００線／
インチの解像度に相当）が割り当てられる。それという
のは、トナーのドットが大きいほど小さなドットよりも
単位領域についてのトナー量が多くなり、よりよい中間
調画像が生成されるためである。
ジ近くに位置し、色度が低く、相対的に細い文字に含ま
れる対象画素について用いられる。というのは、そのよ
うなファクタはその画素が小さくかつ黒い文字内にある
ことを示唆しているためである。他の例においては、対
象画素がエッジ近くになく、非常に太い領域に含まれて
いる場合には、信号ＳＥＮには値として０（２００線／
インチの解像度に相当）が割り当てられる。それという
のは、トナーのドットが大きいほど小さなドットよりも
単位領域についてのトナー量が多くなり、よりよい中間
調画像が生成されるためである。
【００１０】
【発明が解決しようとする課題】上述したように、ライ
ン遅延メモリ１０８は、信号ＵＣＲ，ＦＩＬＴＥＲ，Ｓ
ＥＮがユニット１１３により生成されるまで信号を遅延
させる。さらに、走査された文書の各画素はユニット１
１３により処理される必要がある。従って、上述した構
成ブロック１１４から１１６の機能は画像処理の速度に
ついての隘路になることがわかる。
ン遅延メモリ１０８は、信号ＵＣＲ，ＦＩＬＴＥＲ，Ｓ
ＥＮがユニット１１３により生成されるまで信号を遅延
させる。さらに、走査された文書の各画素はユニット１
１３により処理される必要がある。従って、上述した構
成ブロック１１４から１１６の機能は画像処理の速度に
ついての隘路になることがわかる。
【００１１】それゆえ、ソフトウエアを利用したユニッ
ト１１３の画像処理機能の遂行がもくろまれてはいたも
のの、これら機能の従来のソフトウエアによる実施は、
ハードウエアによる構成と比較して非常に長い処理時間
を要している。
ト１１３の画像処理機能の遂行がもくろまれてはいたも
のの、これら機能の従来のソフトウエアによる実施は、
ハードウエアによる構成と比較して非常に長い処理時間
を要している。
【００１２】前述したことを考慮すれば、ユニット１１
３のようなハードウエア要素によって引き起こされる遅
延を短縮することで処理時間を短縮することが要請され
ている。
３のようなハードウエア要素によって引き起こされる遅
延を短縮することで処理時間を短縮することが要請され
ている。
【００１３】
【課題を解決するための手段】本発明は、像域分離処理
の結果を用いて画素データに適用されるソフトウエア処
理を決定することで、前述の問題点の解決を図るもので
ある。像域分離処理の結果を利用することで、ある画素
が相当量の処理を受けるべきか、それとも最小限の処理
でよいのか、それとも全く処理する必要がないのかを決
定することができる。その結果、画像処理は、ハードウ
エアを基にした処理に比べて柔軟となり、かつ速度の点
で実行可能なものとなる。
の結果を用いて画素データに適用されるソフトウエア処
理を決定することで、前述の問題点の解決を図るもので
ある。像域分離処理の結果を利用することで、ある画素
が相当量の処理を受けるべきか、それとも最小限の処理
でよいのか、それとも全く処理する必要がないのかを決
定することができる。その結果、画像処理は、ハードウ
エアを基にした処理に比べて柔軟となり、かつ速度の点
で実行可能なものとなる。
【００１４】特に、本発明は画像の画素データが入力さ
れ、像域分離処理が画素データ上で行われて画素データ
内の画素のタイプが判定される画像処理装置、画像処理
方法、及び記憶媒体に関する。次に、像域分離処理に基
づいて、ある画素が画像のオブジェクト領域内にあるか
否かが判定され、画素がオブジェクト領域内にあると判
定された場合には、エッジに対するその画素の近接度が
検出される。これら機能により、画像のオブジェクト領
域内にあると判定された画素についてのみエッジの近接
度が検出されることで、全体の処理が高速に行われる。
れ、像域分離処理が画素データ上で行われて画素データ
内の画素のタイプが判定される画像処理装置、画像処理
方法、及び記憶媒体に関する。次に、像域分離処理に基
づいて、ある画素が画像のオブジェクト領域内にあるか
否かが判定され、画素がオブジェクト領域内にあると判
定された場合には、エッジに対するその画素の近接度が
検出される。これら機能により、画像のオブジェクト領
域内にあると判定された画素についてのみエッジの近接
度が検出されることで、全体の処理が高速に行われる。
【００１５】関連する側面においては、本発明はまた、
画素が画像のオブジェクト領域内に含まれると判定され
た場合には、その画素を含む文字の幅と画素の色度との
検出を意図している。
画素が画像のオブジェクト領域内に含まれると判定され
た場合には、その画素を含む文字の幅と画素の色度との
検出を意図している。
【００１６】この要約は、本発明の本質が直ちに理解で
きるように記載されたものである。以下の発明の実施の
形態を添付図面とともに参照することで、本発明をより
完全に理解できる。
きるように記載されたものである。以下の発明の実施の
形態を添付図面とともに参照することで、本発明をより
完全に理解できる。
【００１７】
【発明の実施の形態】図２は本発明の実施形態による画
像処理装置の断面図である。図２の装置において、画像
スキャナ２０１は原稿を読み、読み込んだ原稿の画素デ
ータをデジタル信号へとデジタル的に加工する。プリン
タ２０００は、画像スキャナ２０１により読み込まれた
原稿に対応する画像をフルカラーで印刷シート上に印刷
する。
像処理装置の断面図である。図２の装置において、画像
スキャナ２０１は原稿を読み、読み込んだ原稿の画素デ
ータをデジタル信号へとデジタル的に加工する。プリン
タ２０００は、画像スキャナ２０１により読み込まれた
原稿に対応する画像をフルカラーで印刷シート上に印刷
する。
【００１８】画像スキャナ２０１において、原稿２０４
は文書カバー２０２で覆われたプラテンガラス上にセッ
トされ、ハロゲンランプ２０５によって露光される。原
稿２０４からの反射光は反射鏡２０６，２０７でさらに
反射され、レンズ２０８を通過した後、Ｒ，Ｇ，Ｂ信号
を識別するためのＣＣＤ２１０上の焦点に集められる。
注意すべきは、レンズ２０８は赤外線フィルタ２３１に
より覆われていることである。
は文書カバー２０２で覆われたプラテンガラス上にセッ
トされ、ハロゲンランプ２０５によって露光される。原
稿２０４からの反射光は反射鏡２０６，２０７でさらに
反射され、レンズ２０８を通過した後、Ｒ，Ｇ，Ｂ信号
を識別するためのＣＣＤ２１０上の焦点に集められる。
注意すべきは、レンズ２０８は赤外線フィルタ２３１に
より覆われていることである。
【００１９】本好適な実施形態においては、それぞれの
色要素を読み取るためのＣＣＤ２１０におけるセンサの
各列は５０００画素からなり、そのためＣＣＤ２１０
は、４００ｄｐｉでＡ３サイズ原稿の短辺、すなわち２
７９ｍｍにわたって読み取ることができる。ＣＣＤ２１
０は原稿２０４の色情報をＲＧＢ色要素からなるフルカ
ラー色情報へと分離し、フルカラー情報を色信号へと変
換する。
色要素を読み取るためのＣＣＤ２１０におけるセンサの
各列は５０００画素からなり、そのためＣＣＤ２１０
は、４００ｄｐｉでＡ３サイズ原稿の短辺、すなわち２
７９ｍｍにわたって読み取ることができる。ＣＣＤ２１
０は原稿２０４の色情報をＲＧＢ色要素からなるフルカ
ラー色情報へと分離し、フルカラー情報を色信号へと変
換する。
【００２０】さらに、標準白板２１１は、ＣＣＤ２１０
のＲ，Ｇ，Ｂフォトセンサ２１０−１から２１０−３に
より読み取ったデータを補正するための補正データを生
成する。標準白板２１１は可視光の範囲において一様な
反射特性を有しており、白色を呈する。データを補正し
た後、ＣＣＤ２１０は信号を信号処理ユニット２０９に
送る。
のＲ，Ｇ，Ｂフォトセンサ２１０−１から２１０−３に
より読み取ったデータを補正するための補正データを生
成する。標準白板２１１は可視光の範囲において一様な
反射特性を有しており、白色を呈する。データを補正し
た後、ＣＣＤ２１０は信号を信号処理ユニット２０９に
送る。
【００２１】注意すべきは、ＣＣＤ２１０の電気的走査
方向（主走査方向）について直交する方向に対して、ハ
ロゲンランプ２０５及び反射鏡２０６は速度ｖで移動
し、反射鏡２０７は速度（１／２）ｖで移動することで
ある。原稿２０４全体はこの方法によって走査される。
また、信号処理ユニット２０９において、スキャナによ
り生成された読み取り信号は電気的に処理されてマゼン
タ（Ｍ）、シアン（Ｃ）、黄（Ｙ）、黒（Ｂｋ）の色要
素に分解され、プリンタ２００に送られる前に格納され
る。
方向（主走査方向）について直交する方向に対して、ハ
ロゲンランプ２０５及び反射鏡２０６は速度ｖで移動
し、反射鏡２０７は速度（１／２）ｖで移動することで
ある。原稿２０４全体はこの方法によって走査される。
また、信号処理ユニット２０９において、スキャナによ
り生成された読み取り信号は電気的に処理されてマゼン
タ（Ｍ）、シアン（Ｃ）、黄（Ｙ）、黒（Ｂｋ）の色要
素に分解され、プリンタ２００に送られる前に格納され
る。
【００２２】プリンタ２００においては、画像スキャナ
２０１からの各画像信号Ｍ，Ｃ，Ｙ，ＢＫはレーザドラ
イバ２１２に送られる。レーザドライバ２１２は、画像
信号に基づいて変調された信号によって半導体レーザ２
１３を駆動する。レーザビームは、ポリゴンミラー２１
４、ｆ−θレンズ２１５、反射鏡２１６を介して静電ド
ラム２１７を走査する。
２０１からの各画像信号Ｍ，Ｃ，Ｙ，ＢＫはレーザドラ
イバ２１２に送られる。レーザドライバ２１２は、画像
信号に基づいて変調された信号によって半導体レーザ２
１３を駆動する。レーザビームは、ポリゴンミラー２１
４、ｆ−θレンズ２１５、反射鏡２１６を介して静電ド
ラム２１７を走査する。
【００２３】現像ユニットは、マゼンタ現像器２１９，
シアン現像器２２０，黄色現像器２２１，黒色現像器２
２２からなる。これら４つのドラムは静電ドラム２１７
に接して共に回転するように構成され、静電ドラム２１
７上に形成されたＭ，Ｃ，Ｙ，Ｂｋの潜像を対応する色
のトナーで現像する。また、転写ドラム２２３は、用紙
カセット２２４または２２５から供給された１枚の用紙
シートを引きつけ、静電ドラム２１７上に現像されたト
ナー像は用紙シートに転写される。用紙シートは定着ユ
ニット２２６を通過してから排出される。
シアン現像器２２０，黄色現像器２２１，黒色現像器２
２２からなる。これら４つのドラムは静電ドラム２１７
に接して共に回転するように構成され、静電ドラム２１
７上に形成されたＭ，Ｃ，Ｙ，Ｂｋの潜像を対応する色
のトナーで現像する。また、転写ドラム２２３は、用紙
カセット２２４または２２５から供給された１枚の用紙
シートを引きつけ、静電ドラム２１７上に現像されたト
ナー像は用紙シートに転写される。用紙シートは定着ユ
ニット２２６を通過してから排出される。
【００２４】図３は、本発明による処理のための画像デ
ータを含む文書を示す。図３には、タイトルデータ３０
１やテキストデータ３０２、画像データ３０４、線描画
データ３０５、表データ３０６を含んだ多くのタイプの
画素データを包含する文書３００を示す。もちろん、こ
れらの、あるいは他のタイプの画素データを含む他の文
書であっても本発明によって処理し得る。この点につい
て、図４により、本発明によって文書の画素データを処
理するための処理ステップの流れ図を示す。
ータを含む文書を示す。図３には、タイトルデータ３０
１やテキストデータ３０２、画像データ３０４、線描画
データ３０５、表データ３０６を含んだ多くのタイプの
画素データを包含する文書３００を示す。もちろん、こ
れらの、あるいは他のタイプの画素データを含む他の文
書であっても本発明によって処理し得る。この点につい
て、図４により、本発明によって文書の画素データを処
理するための処理ステップの流れ図を示す。
【００２５】概略では、図４の処理ステップは、文書の
画素データの入力や、画像データ内の画素のタイプを判
定するために画素データ上の像域分離処理、像域分離処
理に基づいた文書のオブジェクト領域内に画素があるか
否かの判定、オブジェクト領域に応じた画素データの処
理の遂行を含んでいる。この処理は、画素のエッジに対
する近接度の検出や、画素を含む文字の太さの検出、画
素の域度の検出等を含んでいても良い。
画素データの入力や、画像データ内の画素のタイプを判
定するために画素データ上の像域分離処理、像域分離処
理に基づいた文書のオブジェクト領域内に画素があるか
否かの判定、オブジェクト領域に応じた画素データの処
理の遂行を含んでいる。この処理は、画素のエッジに対
する近接度の検出や、画素を含む文字の太さの検出、画
素の域度の検出等を含んでいても良い。
【００２６】処理の流れはステップＳ４０１から開始さ
れ、そこでは文書が低解像度で走査される。図２につい
て説明したように、本好適な実施形態においては、この
走査は画像スキャナ２０１によって行われる。もちろ
ん、ステップＳ４０１において文書を走査するための他
のシステムを利用することも可能である。ステップＳ４
０１においては、処理時間短縮のために文書は低解像度
で走査される。それというのは、低解像度の走査は、従
来、高解像度の走査よりも迅速に行われるためである。
また、出願人は、引き続き行う像域分離処理を目的とす
る場合には、低解像度の画素データで満足すべき結果が
得られることを見いだした。
れ、そこでは文書が低解像度で走査される。図２につい
て説明したように、本好適な実施形態においては、この
走査は画像スキャナ２０１によって行われる。もちろ
ん、ステップＳ４０１において文書を走査するための他
のシステムを利用することも可能である。ステップＳ４
０１においては、処理時間短縮のために文書は低解像度
で走査される。それというのは、低解像度の走査は、従
来、高解像度の走査よりも迅速に行われるためである。
また、出願人は、引き続き行う像域分離処理を目的とす
る場合には、低解像度の画素データで満足すべき結果が
得られることを見いだした。
【００２７】従ってステップＳ４０２では、像域分離処
理が画素データ上で行われ、走査された文書を「ブロッ
ク化」した表現が生成される。この表現は図５に表現５
００として示されている。どのような従来の像域分離
（あるいはページ分割）技術でも、ステップＳ４０２に
利用することができる。
理が画素データ上で行われ、走査された文書を「ブロッ
ク化」した表現が生成される。この表現は図５に表現５
００として示されている。どのような従来の像域分離
（あるいはページ分割）技術でも、ステップＳ４０２に
利用することができる。
【００２８】通常、像域分離技術は、画像内の領域を識
別し、識別された領域に、写真やテキスト、タイトル、
表、線描画等の属性を割り当てる。上述したリストの出
願及び特許に記載されているように、他の多くの属性の
タイプを識別された領域に割り当てることが可能であ
る。
別し、識別された領域に、写真やテキスト、タイトル、
表、線描画等の属性を割り当てる。上述したリストの出
願及び特許に記載されているように、他の多くの属性の
タイプを識別された領域に割り当てることが可能であ
る。
【００２９】次に、ステップＳ４０４において、文書は
高解像度で走査される。高解像度のデータは出力画像の
生成のために利用されることから、高解像度データの方
が低解像度データよりも望ましい。本発明の他の実施形
態においては、文書はステップＳ４０１におい高解像度
で走査されて、引き続きステップＳ４０２における低解
像度画像上での像域分離処理遂行のために低解像度に変
換される。したがって、この、他の実施形態において
は、ステップＳ４０４は行われない。
高解像度で走査される。高解像度のデータは出力画像の
生成のために利用されることから、高解像度データの方
が低解像度データよりも望ましい。本発明の他の実施形
態においては、文書はステップＳ４０１におい高解像度
で走査されて、引き続きステップＳ４０２における低解
像度画像上での像域分離処理遂行のために低解像度に変
換される。したがって、この、他の実施形態において
は、ステップＳ４０４は行われない。
【００３０】本実施形態のステップＳ４０４で高解像度
画像が走査された後、先頭の高解像度画素データがステ
ップＳ４０５で検索される。ステップＳ４０６において
は、検索された画素が文書のオブジェクト領域内にある
か判定される。好適な実施形態においては、テキスト領
域のみがオブジェクト領域とみなされる。もちろん利用
者の好みに応じて、線や線描画、タイトル、表領域をオ
ブジェクト領域とみなしてもよい。また、本好適な実施
形態においては、ステップＳ４０６における判定は、画
素の座標を判定し、その座標を表現５００に示されてい
るようなブロック化画像領域と比較することで行われ
る。画素の座標がブロック化領域の座標内であれば、ス
テップＳ４０６における判定はＹＥＳとなる。したがっ
て、処理の流れはステップＳ４０７へと進み、画素が内
部に存在するオブジェクト領域に応じて画素データを処
理する。図４に示すように、ステップＳ４０６において
検索された画素が文書のオブジェクト領域内に無いと判
定されれば、処理はステップＳ４０９に直接続く。
画像が走査された後、先頭の高解像度画素データがステ
ップＳ４０５で検索される。ステップＳ４０６において
は、検索された画素が文書のオブジェクト領域内にある
か判定される。好適な実施形態においては、テキスト領
域のみがオブジェクト領域とみなされる。もちろん利用
者の好みに応じて、線や線描画、タイトル、表領域をオ
ブジェクト領域とみなしてもよい。また、本好適な実施
形態においては、ステップＳ４０６における判定は、画
素の座標を判定し、その座標を表現５００に示されてい
るようなブロック化画像領域と比較することで行われ
る。画素の座標がブロック化領域の座標内であれば、ス
テップＳ４０６における判定はＹＥＳとなる。したがっ
て、処理の流れはステップＳ４０７へと進み、画素が内
部に存在するオブジェクト領域に応じて画素データを処
理する。図４に示すように、ステップＳ４０６において
検索された画素が文書のオブジェクト領域内に無いと判
定されれば、処理はステップＳ４０９に直接続く。
【００３１】画素の処理は多くの方法で進めることがで
きる。好適な実施形態では、図４の工程は、ユニット１
１３と同じ機能を提供するモジュールにおいて具体化さ
れる。したがって、ソフトウエア方法を「オブジェクト
領域」の画素に適用し、文字太さ判定回路１１４やエッ
ジ検出部１１５、色度判定回路１１６により提供される
のと同じ機能を提供することも可能である。選択された
画素のみが処理されるために、黒文字判定に起因する遅
延は従来のシステムに比べて短縮できる。もちろん、ス
テップＳ４０７においては、他のどのような処理が画素
上で行われてもよい。
きる。好適な実施形態では、図４の工程は、ユニット１
１３と同じ機能を提供するモジュールにおいて具体化さ
れる。したがって、ソフトウエア方法を「オブジェクト
領域」の画素に適用し、文字太さ判定回路１１４やエッ
ジ検出部１１５、色度判定回路１１６により提供される
のと同じ機能を提供することも可能である。選択された
画素のみが処理されるために、黒文字判定に起因する遅
延は従来のシステムに比べて短縮できる。もちろん、ス
テップＳ４０７においては、他のどのような処理が画素
上で行われてもよい。
【００３２】ステップＳ４０９においては、検索された
画素が画像上における最後の画素であるか判定される。
そうでなければ、処理はステップＳ４１０へと進む。次
の高解像度画素がステップＳ４１０により検索され、処
理はそこから上述したステップＳ４０６へと進む。
画素が画像上における最後の画素であるか判定される。
そうでなければ、処理はステップＳ４１０へと進む。次
の高解像度画素がステップＳ４１０により検索され、処
理はそこから上述したステップＳ４０６へと進む。
【００３３】最後に、ステップＳ４０９において最新の
検索された画素が獲得された画素データにおける最後の
画素であると判定されたなら、図４の処理ステップは終
了する。
検索された画素が獲得された画素データにおける最後の
画素であると判定されたなら、図４の処理ステップは終
了する。
【００３４】以上、本発明を、現時点で好適と思われる
実施形態について説明した。そしてその一方、本発明は
上述した実施形態に限定されないことも理解されるはず
である。反対に、本発明は、特許請求の範囲の趣旨及び
範囲内で、様々な変更及び均等な構成を含んでいる。
実施形態について説明した。そしてその一方、本発明は
上述した実施形態に限定されないことも理解されるはず
である。反対に、本発明は、特許請求の範囲の趣旨及び
範囲内で、様々な変更及び均等な構成を含んでいる。
【００３５】
【発明の効果】以上のように、本発明によれば、像域分
離処理の結果を用いて画素データに適用される処理を決
定することで、処理の遅延を解消する。その際、像域分
離処理の結果を利用することで、ある画素が相当量の処
理を受けるべきか、それとも最小限の処理でよいのか、
それとも全く処理する必要がないのかを決定する。その
結果、画像処理を柔軟かつ高速に実行可能となる。
離処理の結果を用いて画素データに適用される処理を決
定することで、処理の遅延を解消する。その際、像域分
離処理の結果を利用することで、ある画素が相当量の処
理を受けるべきか、それとも最小限の処理でよいのか、
それとも全く処理する必要がないのかを決定する。その
結果、画像処理を柔軟かつ高速に実行可能となる。
【図１】従来の画像処理ユニットにおける画像信号の流
れを示すブロック図である。
れを示すブロック図である。
【図２】本発明の実施の形態によるカラー複写機の断面
図である。
図である。
【図３】本発明によって処理される画素データを含む文
書の図である。
書の図である。
【図４】本発明による画素データの処理のためのプロセ
ッサにより実行可能な処理ステップの流れ図である。
ッサにより実行可能な処理ステップの流れ図である。
【図５】像域分離処理により識別されるオブジェクト領
域を表す図である。
域を表す図である。
Claims (12)
- 【請求項１】 画像の画素データを入力する入力ステッ
プと、 前記画素データ上で像域分離処理を行い、前記画像に含
まれる画素のタイプを決定する像域分離処理ステップ
と、 前記像域分離処理に基づいて、前記画像のオブジェクト
領域内に画素があるか否か判定する判定ステップと、 前記画像のオブジェクト領域内に画素があると判定され
た場合、該画素に対するエッジの近接度を検出する検出
ステップとを備えることを特徴とする画像処理方法。 - 【請求項２】 前記入力ステップは、 第１の解像度の画素データを入力する予備走査ステップ
と、 前記第１の解像度よりも高い第２の解像度の画素データ
を入力する走査ステップとを有し、 前記像域分離処理は前記第１の解像度の画素データ上で
行われ、前記検出は第２の解像度の画素データ上で行わ
れることを特徴とする請求項１に記載の画像処理方法。 - 【請求項３】 前記検出ステップは、さらに、前記画像
のオブジェクト領域内に画素があると判定された場合、
該画素を含む文字の太さを検出するステップを含むこと
を特徴とする請求項２に記載の画像処理方法。 - 【請求項４】 前記検出ステップは、さらに、前記画像
のオブジェクト領域内に画素があると判定された場合、
該画素の色度を検出するステップを含むことを特徴とす
る請求項２に記載の画像処理方法。 - 【請求項５】 プロセッサにより読み出し可能な媒体に
格納された、プロセッサにより実行可能な処理ステップ
であって、 画像の画素データを入力する入力ステップと、 前記画素データ上で像域分離処理を行い、前記画像に含
まれる画素のタイプを決定する像域分離処理ステップ
と、 前記像域分離処理に基づいて、前記画像のオブジェクト
領域内に画素があるか否か判定する判定ステップと、 前記画像のオブジェクト領域内に画素があると判定され
た場合、該画素に対するエッジの近接度を検出する検出
ステップとを備えることを特徴とするプロセッサ可読媒
体。 - 【請求項６】 前記入力ステップは、 第１の解像度の画素データを入力する予備走査ステップ
と、 前記第１の解像度よりも高い第２の解像度の画素データ
を入力する走査ステップとを含み、 前記像域分離処理は前記第１の解像度の画素データ上で
行われ、前記検出は第２の解像度の画素データ上で行わ
れることを特徴とする請求項５に記載のプロセッサ可読
媒体。 - 【請求項７】 前記検出ステップは、さらに、前記画像
のオブジェクト領域内に画素があると判定された場合、
該画素を含む文字の太さを検出するステップを含むこと
を特徴とする請求項６に記載のプロセッサ可読媒体。 - 【請求項８】 前記検出ステップは、さらに、前記画像
のオブジェクト領域内に画素があると判定された場合、
該画素の色度を検出するステップを含むことを特徴とす
る請求項６に記載のプロセッサ可読媒体。 - 【請求項９】 画像の画素データを入力する入力手段
と、 前記画素データ上で像域分離処理を行い、前記画像に含
まれる画素のタイプを決定する像域分離処理手段と、 前記像域分離処理に基づいて、前記画像のオブジェクト
領域内に画素があるか否か判定する判定手段と、 前記画像のオブジェクト領域内に画素があると判定され
た場合、該画素に対するエッジの近接度を検出する検出
手段とを備えることを特徴とする画像処理装置。 - 【請求項１０】 前記入力手段は、 第１の解像度の画素データを入力する予備走査手段と、 前記第１の解像度よりも高い第２の解像度の画素データ
を入力する走査手段とを有し、 前記像域分離処理は前記第１の解像度の画素データ上で
行われ、前記検出は第２の解像度の画素データ上で行わ
れることを特徴とする請求項９に記載の画像処理装置。 - 【請求項１１】 前記検出手段は、さらに、前記画像の
オブジェクト領域内に画素があると判定された場合、該
画素を含む文字の太さを検出する手段を含むことを特徴
とする請求項１０に記載の画像処理装置。 - 【請求項１２】 前記検出手段は、さらに、前記画像の
オブジェクト領域内に画素があると判定された場合、該
画素の色度を検出する手段を含むことを特徴とする請求
項１０に記載の画像処理装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US45893899A | 1999-12-10 | 1999-12-10 | |
| US09/458938 | 1999-12-10 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001197304A true JP2001197304A (ja) | 2001-07-19 |
| JP4401560B2 JP4401560B2 (ja) | 2010-01-20 |
Family
ID=23822707
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000373019A Expired - Fee Related JP4401560B2 (ja) | 1999-12-10 | 2000-12-07 | 画像処理装置、画像処理方法、及び記憶媒体 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6947595B2 (ja) |
| JP (1) | JP4401560B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008036925A (ja) * | 2006-08-04 | 2008-02-21 | Brother Ind Ltd | 記録装置および記録プログラム |
| JP2011123900A (ja) * | 2003-02-28 | 2011-06-23 | Aperio Technologies Inc | 画像処理及び画像解析用フレームワーク |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4105367B2 (ja) * | 2000-05-11 | 2008-06-25 | 富士フイルム株式会社 | 色変換装置および色変換プログラム記憶媒体 |
| CN1797429A (zh) * | 2004-12-29 | 2006-07-05 | 鸿富锦精密工业（深圳）有限公司 | 二维图像分析处理系统及方法 |
| US8532374B2 (en) * | 2007-12-05 | 2013-09-10 | Canon Kabushiki Kaisha | Colour document layout analysis with multi-level decomposition |
| US9152617B2 (en) * | 2010-03-11 | 2015-10-06 | A2iA S.A. | System and method for processing objects |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2872285B2 (ja) | 1989-08-02 | 1999-03-17 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
| JPH0722330B2 (ja) | 1990-01-10 | 1995-03-08 | 富士ゼロックス株式会社 | 画像処理装置の画像領域識別方式 |
| ATE137377T1 (de) | 1990-02-06 | 1996-05-15 | Canon Kk | Bildverarbeitungsgerät |
| US5452374A (en) * | 1992-04-06 | 1995-09-19 | Ricoh Corporation | Skew detection and correction of a document image representation |
| US5680479A (en) | 1992-04-24 | 1997-10-21 | Canon Kabushiki Kaisha | Method and apparatus for character recognition |
| US5727196A (en) * | 1992-05-21 | 1998-03-10 | Borland International, Inc. | Optimized query interface for database management systems |
| JPH0750752A (ja) | 1993-08-06 | 1995-02-21 | Fuji Xerox Co Ltd | 画像密度変換方法及び装置 |
| JP3599367B2 (ja) | 1993-12-29 | 2004-12-08 | キヤノン株式会社 | 画像処理装置およびその方法 |
| US5729360A (en) | 1994-01-14 | 1998-03-17 | Fuji Xerox Co., Ltd. | Color image processing method and system |
| US5715377A (en) | 1994-07-21 | 1998-02-03 | Matsushita Electric Industrial Co. Ltd. | Gray level correction apparatus |
| US6055335A (en) * | 1994-09-14 | 2000-04-25 | Kabushiki Kaisha Toshiba | Method and apparatus for image representation and/or reorientation |
| US5787196A (en) | 1994-11-08 | 1998-07-28 | International Business Machines Corporation | Method and apparatus for splitting connected characters into component characters |
| TW367447B (en) | 1994-12-21 | 1999-08-21 | Canon Kk | Block selection review and editing system |
| JP3343457B2 (ja) * | 1994-12-22 | 2002-11-11 | 京セラミタ株式会社 | 画像処理装置 |
| JPH08331398A (ja) | 1995-05-31 | 1996-12-13 | Canon Inc | 画像処理システム及びコントローラ |
| US5774579A (en) | 1995-08-11 | 1998-06-30 | Canon Kabushiki Kaisha | Block selection system in which overlapping blocks are decomposed |
| US5848186A (en) | 1995-08-11 | 1998-12-08 | Canon Kabushiki Kaisha | Feature extraction system for identifying text within a table image |
| US6307962B1 (en) * | 1995-09-01 | 2001-10-23 | The University Of Rochester | Document data compression system which automatically segments documents and generates compressed smart documents therefrom |
| US5778092A (en) * | 1996-12-20 | 1998-07-07 | Xerox Corporation | Method and apparatus for compressing color or gray scale documents |
| US5767978A (en) | 1997-01-21 | 1998-06-16 | Xerox Corporation | Image segmentation system |
| JPH11143986A (ja) * | 1997-10-17 | 1999-05-28 | Internatl Business Mach Corp <Ibm> | ビットマップイメージの処理方法及び処理装置、ビットマップイメージの処理を行うイメージ処理プログラムを格納した記憶媒体 |
| US6275625B1 (en) | 1999-03-17 | 2001-08-14 | Agere Systems Optoelectronics Guardian Corp. | Optical mirror switch using a michelson interferometer |
-
2000
- 2000-12-07 JP JP2000373019A patent/JP4401560B2/ja not_active Expired - Fee Related
-
2003
- 2003-12-03 US US10/725,528 patent/US6947595B2/en not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011123900A (ja) * | 2003-02-28 | 2011-06-23 | Aperio Technologies Inc | 画像処理及び画像解析用フレームワーク |
| JP2008036925A (ja) * | 2006-08-04 | 2008-02-21 | Brother Ind Ltd | 記録装置および記録プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| US6947595B2 (en) | 2005-09-20 |
| JP4401560B2 (ja) | 2010-01-20 |
| US20040109605A1 (en) | 2004-06-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5477335A (en) | Method and apparatus of copying of black text on documents using a color scanner | |
| US6909803B2 (en) | Text color detection for copier image processing | |
| US5189523A (en) | Image processing apparatus | |
| JP2002232708A (ja) | 画像処理装置及びそれを備えた画像形成装置並びに画像処理方法 | |
| US6718059B1 (en) | Block selection-based image processing | |
| US5844688A (en) | Image processing system for converting a color processing command into a control signal using an external controller | |
| US6795576B2 (en) | Image processing method and apparatus | |
| JP4079046B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP3333894B2 (ja) | 画像処理装置 | |
| JP2001036752A (ja) | 画像処理装置及び方法 | |
| JP4401560B2 (ja) | 画像処理装置、画像処理方法、及び記憶媒体 | |
| JP2006270148A (ja) | 画像処理方法および画像処理装置並びに画像形成装置 | |
| JPH11266366A (ja) | 画像複写装置 | |
| JP3297452B2 (ja) | 画像処理装置及び画像処理方法 | |
| JPH06152945A (ja) | 画像処理装置 | |
| JPH10210314A (ja) | ディジタル画像処理装置 | |
| JP2002290758A (ja) | 画像形成装置 | |
| JP3281391B2 (ja) | フルカラー画像再生装置及びフルカラー画像再生方法 | |
| JP3522880B2 (ja) | 画像加工処理装置および画像形成装置 | |
| JPH1155524A (ja) | 画像処理装置 | |
| JP3619120B2 (ja) | 画像処理装置およびその方法 | |
| JP3185926B2 (ja) | 画像処理装置および画像処理方法 | |
| JPH08251406A (ja) | 画像形成装置 | |
| JPH07123251A (ja) | 画像処理装置 | |
| JPH1127550A (ja) | カラー画像処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071207 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20071207 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080828 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090210 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090306 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090507 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091026 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091028 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121106 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131106 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |