JP3479161B2 - Image processing device - Google Patents

Image processing device

Info

Publication number
JP3479161B2
JP3479161B2 JP15228195A JP15228195A JP3479161B2 JP 3479161 B2 JP3479161 B2 JP 3479161B2 JP 15228195 A JP15228195 A JP 15228195A JP 15228195 A JP15228195 A JP 15228195A JP 3479161 B2 JP3479161 B2 JP 3479161B2
Authority
JP
Japan
Prior art keywords
pixel
density
image
edge
density conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP15228195A
Other languages
Japanese (ja)
Other versions
JPH0851538A (en
Inventor
邦雄 田中
浩一 橋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Riso Kagaku Corp
Original Assignee
Riso Kagaku Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Riso Kagaku Corp filed Critical Riso Kagaku Corp
Priority to JP15228195A priority Critical patent/JP3479161B2/en
Publication of JPH0851538A publication Critical patent/JPH0851538A/en
Application granted granted Critical
Publication of JP3479161B2 publication Critical patent/JP3479161B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Description

【発明の詳細な説明】 【0001】 【産業上の利用分野】本発明は原稿の画像を読み取り、
読み取られたディジタル画像データを画像処理して、感
熱孔版原紙に穿孔を施す製版装置(ディジタル印刷
機)、電子写真技術により感光体に濳像を形成し用紙に
転写する装置(ディジタル複写機)、あるいは、感熱紙
等に複写する装置に関係する。特に、読み取られた画像
を二値化し、二値データとして出力する画像処理装置に
関係する。 【0002】 【従来の技術】文字や線画等の二値画像と写真等の階調
画像とが混在する原稿を上記のような画像処理装置を用
いて出力する場合に最良な結果を得るためには、二値画
像領域は単一閾値により最大濃度か最小濃度のどちらか
に二値化し、階調画像領域には入出力デヴァイスの特性
を考慮し、入出力の濃度を保存する濃度変換を施す必要
がある。そのためには画像の各部が二値画像領域である
か階調画像領域であるかを判別し、両領域を分離する必
要がある。 【0003】従来、二値画像領域か階調画像領域かの判
別を行うために、画像をn×n画素のブロックに分割
し、各ブロック毎に特徴抽出を行い特徴抽出結果を利用
してブロックの判別を行う方法(特開平3―15316
7)、注目画素とその周辺画素を利用して特徴抽出を行
い、その特徴抽出結果を利用して各画素毎に判別を行う
方法(特開平1―227573)等がある。 【0004】 【発明が解決しようとする課題】しかし、前者の方法で
は各ブロック毎に判別を行うため、誤判別された部分
や、二値画像領域と階調画像領域との境界の部分にブロ
ックの形が現れてしまうという問題がある。後者の方法
を用いた場合には誤判別の影響が前者による方法より目
立たないが、誤判別された部分と正しく判別された部分
との間に濃度の段差が生じ、違和感がある。 【0005】また、二値画像領域にある太い線画や黒ベ
タと階調画像領域にある写真の高濃度部とは区別が困難
である。太い線画や黒ベタを二値画像と判別できるよう
に判別用パラメータを調整すると写真画像中につぶれる
部分ができる。写真の高濃度部を階調画像と判別できる
ように判別用パラメータを調整すると太い線画や黒ベタ
の濃度が薄くなる。 【0006】本発明は、上記問題点を解決するため、二
値画像領域と階調画像領域が混在する原稿中に対して、
二値画像領域ではコントラストが強く、階調画像領域で
は階調性が保存され、更に、濃度の段差による違和感が
生じない画像濃度信号を出力する画像処理装置を提供す
ることを目的とする。 【0007】 【課題を解決するための手段】上記課題を解決するため
に本発明は、原稿読み取り手段により入力された原稿画
像を二値画像と階調画像に識別して、対応する濃度変換
曲線により変換された画像信号を出力する画像処理装置
において、(1)近隣画素の濃度に応じて注目画素が細
線画素であるか否かを検出する細線画素検出手段、前記
近隣画素の濃度に応じて前記注目画素がエッヂ画素であ
るか否かを検出するエッヂ画素検出手段および前記注目
画素と該注目画素に最も近い前記エッヂ画素検出手段に
て検出されたエッヂ画素との距離を計数する距離計数手
段を有し、前記細線画素であるか否か、前記エッヂ画素
であるか否かおよび前記距離に応じた情報に基づいて注
目画素の状態を二値画像から階調画像の間で多段階に原
稿注目画素の状態を判断する手段、(2)前記注目画素
の状態の判断にしたがって、入力濃度を最大か最小のど
ちらかに二値化する不連続点を有する二値画像用濃度変
換曲線、入力濃度の階調性を出力濃度に保存する階調画
像用濃度変換曲線及び前記二値画像用濃度変換曲線と前
記階調画像用濃度変換曲線を補間する1本以上の不連続
点を有する濃度変換曲線のなかから適当な濃度変換曲線
を選択して濃度変換する濃度変換曲線選択手段を備えた
画像処理装置とする。 【0008】本発明の装置において用いられる注目画像
の状態を識別する手段としては、様々な方式がある。
(1)近隣画素の濃度に応じて注目画素のエッヂの鋭さ
を検出して、注目画素の状態を判断する。(2)近隣画
素の濃度に応じて注目画素がエッヂ画素であるか否かを
検出し、注目画素と該注目画素に最も近いエッヂ画素と
の距離を計数して、注目画素の状態を判断する。(3)
注目画素が細線であるか否か、注目画素がエッヂ画素で
あるか否か、注目画素のエッヂの鋭さの度合い、注目画
素のエッヂ画素からの距離、注目画素を挟む線分の長さ
により得られる画素毎の特徴に応じて判断する。 【0009】 【作用】本発明は主走査方向または副走査方向で濃度の
立ち上がりと立ち下がりエッヂで注目画素を鋏む線分が
あればその長さを計数する。前記線分の長さが短ければ
文字を構成する線である可能性が高い。また、本発明は
注目画素と注目画素に最も近いエッヂ画素との距離を計
数する。ここで、エッヂからの距離が短い程文字画像ら
しさを示し、長いほど「階調画像らしさ」を示す。 【0010】本発明は、二値画像に適する不連続点を有
する二値画像用濃度変換曲線と、階調画像に適する、階
調性を保存する階調画像用濃度変換曲線の他に、両曲線
を補間する適当な本数の不連続点を有する濃度変換曲線
を備えている。 【0011】画素毎に推定される数個の上記特徴量によ
り、特徴量が強い二値画像らしさを示す場合には不連続
点を有する二値画像用濃度変換曲線を選択し、特徴量が
強い階調画像らしさを示す場合には階調画像用濃度変換
曲線を選択する。そして、そのどちらでもない場合に
は、特徴量の「二値画像らしさ」ないしは「階調画像ら
しさ」の度合いに応じて、前記二値画像用および階調画
像用の両曲線を補間する数本の不連続点を有する濃度変
換曲線のうち適切なものを選択し、濃度変換する。これ
により、特徴量が強い「二値画像らしさ」あるいは「階
調画像らしさ」を示さない場合や、特徴量が狭い領域の
画像しか見ていないために起こる、領域の誤判別による
出力画像の濃度の急激な変化の違和感を軽減することが
できる。 【0012】また、エッヂに近い程、不連続点を有する
二値画像用濃度変換寄りの不連続点を有する濃度変換曲
線を選択し、エッヂから離れる程、階調画像用濃度変換
寄りの不連続点を有する濃度変換曲線を選択することに
より、太い文字やべた部を黒々と見せることができ、階
調画像の濃度の濃い部分の階調性を保存することができ
る。 【0013】 【実施例】以下、本発明の装置の実施例について説明す
る。 (実施例1) 図1は本発明の実施例の画像処理装置のブロック図であ
る。原稿に光を照射し、原稿からの反射光をCCD等の
ラインセンサで電気信号(画像濃度信号)に変換して出
力する。図示されていない読み取り手段により読み取り
取られた画像濃度信号di.jは、ライン・メモリ2へ
入力される。 【0014】読み取り手段から出力された画像濃度信号
は、直接、ライン・メモリ2に入力するか、より原稿画
像に近い画像濃度信号に補正するために点線で示された
MTF補正回路1を介してライン・メモリ2に入力す
る。 【0015】MTF補正回路を介する場合は、図2に例
として示すようなMTF補正係数マトリクスにより、マ
トリクスの各係数に各係数の位置に対応する画素の濃度
値を乗算するとともにそれぞれの結果を加算するコンヴ
ォリューションの演算が施され、補正画像信号d′
i.jがライン・メモリ2へ入力される。 【0016】図3はライン・メモリ2に格納された画像
濃度信号に対応する画素の原稿上の位置を示す。読み取
り装置から出力された画像濃度信号に対応する最新画素
をpi.jと表す。ここで、jは主走査上、iは副走査
上の画素番号であり、pi.jは副走査上第i番目、主
走査上第j番目の画素である。画素pi,jの濃度をd
i,jと表す。ライン・メモリ2にはハッチの掛かった
部分の2主走査と2画素分の画像濃度信号が記憶され
る。 【0017】ライン・メモリ2から出力される画像濃度
信号(di,j、di,j―1、di,j―2、d
i―1,j、di―1,j―1、di―1,j―2、d
i―2,j、di―2,j―1、di―2,j―2)は
画素pi―1,j―1を中心とする3×3のマトリクス
を構成している。 【0018】図1に示すように、ライン・メモリ2から
出力される画像濃度信号di―1,j―5は、濃度変換
回路3へ入力される。ライン・メモリ2から出力される
画像濃度信号(di,j、di,j―1
i,j―2、di―1,j、di―1,j―1、d
i―1,j―2、di―2,j、di―2,j―1、d
i―2,j―2)はエッヂ検出回路27へ入力される。
エッヂ検出回路27は注目画素が該注目画素に隣接する
画素との濃度の変換点であるか否かを検出する回路であ
る。 【0019】図4はエッヂ検出回路27を示す図であ
る。演算回路13で、図5の(a),(b),(c),
(d)に示す横方向、縦方向、左斜め方向、右斜め方向
のエッヂ検出係数マトリクスによりコンヴォリューショ
ンの演算が行われ、求められた4つの値の絶対値のうち
最も大きい値がエッヂ信号ei―1,j―1として出力
され、比較器14、比較器15、比較器25に入力され
る。 【0020】比較器15では入力されたエッヂ信号e
i―1,j―1が第1エッヂ閾値T2以上ならば有効
(エッヂ画素である旨の信号),T2未満ならば無効
(エッヂ画素でない旨の信号)として第1エッヂ検出信
号e1i―1,j―1が出力される。第1エッヂ閾値T
2は、階調画像にはほとんど現れない鋭い(濃度差の大
きい)エッヂのみ検出できる値に設定されている。 【0021】比較器14では、エッヂ信号e
i―1.j―1が第2エッヂ閾値T3以上ならば有効、
T3未満ならば無効として第2エッヂ検出信号e2
i―1.j―1が出力される。第2エッヂ閾値T3は第
1エッヂ閾値T2より小さく、やや鋭い(やや濃度差の
大きい)エッヂが検出できる値に設定されている 【0022】比較器25では、入力されたエッヂ信号e
i―1.j―1が第3エッヂ閾値T8以上ならば有効、
T8未満ならば無効な第3エッヂ検出信号e3
i―1.j―1が出力される。第3エッヂ閾値T8は第
2エッヂ閾値T3より小さく鈍い(ほとんど濃度差のな
い)エッヂが検出できる値に設定されている。 【0023】図1に示すように、処理すべき画素の画像
濃度信号di―1.j―5に対する濃度変換のタイミン
グを合わせるために、エッヂ検出信号はドット・ディレ
イ回路8,9,26に入力される。 【0024】ドット・ディレイ回路8,9,26から出
力された第1エッヂ検出信号e1i―1.j―5、第2
エッヂ検出信号e2i―1.j―5および第3エッヂ検
出信号e3i―1.j―5は特徴判定回路28へ入力さ
れる。特徴判定回路28では入力された第1エッヂ検出
信号e1i―1,j―5、第2エッヂ検出信号e2
i―1,j―5、第3エッヂ検出信号e3
i―1,j―5により、図6に示す規則で濃度変換選択
信号gi―1,j―5が決定され出力される。 【0025】この濃度変換選択信号g
i―1.j―5は、 1.エッヂ画素は主として二値画像領域に存在する 2.エッヂの鋭さ(濃度差)の度合いが強い(大きい)
ほど二値画像らしさを示し、エッヂの鋭さの度合いが弱
い(小さい)ほど階調画像らしさを示す 等の画像の特徴を考慮して濃度変換曲線が選択されるよ
うに構成されている。 【0026】図6において二値信号については○が有
効、×が無効、―が無視を表す。三値以上の値を持つ信
号については数字が信号の値を表す。ここで、濃度変換
選択信号gi―1,j―5の値は、 gi―1,j―5=0 ならば、二値画像 gi―1,j―5=3 ならば、階調画像 gi―1,j―5=1 ならば、二値画像らしい gi―1,j―5=2 ならば、階調画像らしい なる意味を持つ。 【0027】濃度変換回路3は図7に示すように、入力
濃度を最大か最小のどちらかに二値化する不連続点を有
する二値画像用濃度変換曲線A(実線で示されている)
と、入力濃度の階調性を出力濃度に保存する階調画像用
濃度変換曲線B(1点鎖線で示されている)と、上記2
曲線を補間する不連続点を有する二値画像用濃度変換曲
線よりの不連続点を有する濃度変換曲線C(点線で示さ
れている)と階調画像用濃度変換曲線よりの不連続点を
有する濃度変換曲線D(2点鎖線で示されている)から
なる2本の不連続点を有する濃度変換曲線の合計4本の
濃度変換曲線を持っている。 【0028】特徴判定回路28から入力される濃度変換
選択信号gi―1,j―5に応じて、 gi―1,j―5=0 ならば、不連続点を有する二値
画像用濃度変換曲線A、 gi―1,j―5=3 ならば、階調濃度変換曲線B、 gi―1,j―5=1 ならば、2曲線を補間する不連
続点を有する濃度変換曲線C、 gi―1,j―5=2 ならば、2曲線を補間する不連
続点を有する濃度変換曲線D、 なる規則により濃度変換曲線を選択し、画像濃度信号d
i―1,j―5の濃度変換を行い、変換濃度信号cd
i―1,j―5を出力する。 【0029】濃度変換回路3においては、上記4本の濃
度変換曲線はそれぞれの濃度変換曲線に対応した4つの
データ変換テーブルを有しており、特徴判定回路28か
ら出力される濃度変換選択信号gi―1,j―5に応じ
て選択されたデータ変換テーブルを参照しながら画像濃
度信号di―1,j―5の濃度変換を行い変換濃度信号
cdi―1,j―5を出力する。 【0030】濃度変換回路3にて変換された変換濃度信
号cdi―1,j―5は、二値化回路4へ入力される。
二値化回路4では入力された変換濃度信号cd
i―1,j―5を誤差拡散法により二値化し、二値信号
として出力する。 【0031】この実施例では、エッヂ検出係数マトリク
スを3×3としている。マトリクスの大きさをn×m
(n>0,m>0:n,mは整数)と変化させたり、係
数を変化させたり、マトリクスの数を増やす事により、
エッヂ検出回路によるエッヂ検出の精度を上げることが
できる。 【0032】この実施例では、不連続点を有する二値画
像用濃度変換曲線と階調画像用濃度変換曲線を補間する
不連続点を有する濃度変換曲線を2本にしているが、1
本であっても良く、また、エッヂ検出回路27のそれぞ
れ異なる閾値が設定された比較器を増やすことによりエ
ッヂの鋭さの度合いの分類を増やすことにより、両曲線
を補間する不連続点を有する濃度変換曲線を3本以上に
拡張する事もできる。 【0033】(実施例2) 以下、本発明の装置の他の実施例について説明する。図
8は本発明の実施例の画像処理装置のブロック図であ
る。 【0034】ライン・メモリ2から出力される画像濃度
信号(di,j、di,j―1、di,j―2、d
i―1,j、di―1,j―1、di―1,j―2、d
i―2,j、di―2,j―1、di―2,j―2)は
実施例1の場合と同様に画素pi―1,j―1を中心と
する3×3のマトリクスを構成している。 【0035】図8に示すように、ライン・メモリ2から
出力される画像濃度信号di―1,j―5は、濃度変換
回路3へ入力される。ライン・メモリ2から出力される
画像濃度信号(di,j、di,j―1
i,j―2、di―1,j、di―1,j―1、d
i―1,j―2、di―2,j、di―2,j―1、d
i―2,j―2)はエッヂ検出回路29へ入力される。 【0036】図9はエッヂ検出回路を示す図である。演
算回路13では実施例1の場合と同様に、図5(a),
(b),(c),(d)に示す横方向,縦方向,左斜め
方向,右斜め方向のエッヂ検出係数マトリクスによりコ
ンヴォリューションの演算が行われ、求められた4つの
値の絶対値のうち最も大きい値がエッヂ信号e
i―1,j―1として出力され比較器15に入力され
る。 【0037】比較器15では入力されたエッヂ信号e
i―1,j―1が、第1エッヂ閾値T2以上ならば有効
(エッヂ画素である旨の信号)、T2未満ならば無効
(エッヂ画素でない旨の信号)である第1エッヂ検出信
号e1i―1,j―1が出力される。第1エッヂ閾値T
2は、階調画像にはほとんど現れない鋭い(濃度差の大
きい)エッヂのみ検出できる値に設定されている。 【0038】図8に示すように、ドット・ディレイ回路
9から出力された第1エッヂ検出信号e1
i―1.j―5は特徴判定回路30へ入力される。距離
分類回路11は注目画素からエッヂ画素までの距離を計
数して分類する。図10は距離分類回路11の詳細を示
す。ライン・メモリ23には1ライン分の各画素のエッ
ヂ画素からの距離データが格納されている。 【0039】ライン・メモリ23に格納された各画素の
エッヂ画素までの距離データに対応した画素の原稿上の
位置を図16に示す。第1エッヂ検出信号el
i―1.j―5は距離計数回路22に入力され、画素p
i―1.j―5のエッヂからの距離dei―1.j―5
は左の画素pi―1,j―6、上の画素p
i―2,j―5、右上の画素pi―2,j―4のエッヂ
からの距離、それぞれ、dei―1,j―6、de
i―2,j―5、dei―2,j―4を使って以下の要
領で計数される。 【0040】e1i―1.j―5=1ならば、de
i―1.j―5=0 e1i―1.j―5=0ならば、dei―1.j―5
min(dei―1,j―6,dei―2,j―5,d
i―2,j―4)+1 【0041】上記のdei―1,j―6、de
i―2,j―5、dei―2,j―4はライン・メモリ
23から取り出され、dei―1,j―5は新たにライ
ン・メモリ23に記憶される。エッヂからの距離de
i―1,j―5は、比較器24に入力され、de
i―1,j―5<T6 ならば、fi―1,j―5=0 T6≦dei―1,j―5<T7 ならば、f
i―1,j―5=1 T7≦dei―1,j―5<T8 ならば、f
i―1,j―5=2 T8≦dei―1,j―5ならば、fi―1,j―5
3 なる規則により分類される。距離分類信号f
i―1,j―5は、特徴判定回路30へ入力される。 【0042】特徴判定回路30では、入力される第1エ
ッヂ検出信号e1i―1,j―5、距離分類信号f
i―1,j―5により、図11に示すような規則で濃度
変換選択信号gi―1,j―5が決定される。この濃度
変換選択信号gi―1,j―5は、 1.エッヂ画素は主として二値画像領域に存在する 2.注目画素と該注目画素に最も近いエッヂ画素との距
離が短い程文字画像らしさを示し、長い程階調画像らし
さを示す。 等の画像の特徴を考慮して濃度変換曲線が選択されるよ
うに構成されている。 【0043】図11において二値信号については○が有
効、×が無効、―が無視を表す。三値以上の値を持つ信
号については数字が信号の値を表す。ここで、濃度変換
選択信号gi―1,j―5の値は、 gi―1,j―5=0 ならば、二値画像 gi―1,j―5=3 ならば、階調画像 gi―1,j―5=1 ならば、二値画像らしい gi―1,j―5=2 ならば、階調画像らしい なる意味を持つ。 【0044】濃度変換回路3は実施例1の場合と同様
に、4本の濃度変換曲線を持っており、特徴判定回路3
0から入力される濃度変換選択信号gi―1,j―5
応じ 【0045】gi―1,j―5=0 ならば、不連続点
を有する二値画像用濃度変換曲線A gi―1,j―5=3 ならば、階調濃度変換曲線B gi―1,j―5=1 ならば、2曲線を補間する不連
続点を有する濃度変換曲線C(二値画像用濃度変換曲線
より) gi―1,j―5=2ならば、2曲線を補間する不連続
点を有する濃度変換曲線D(階調画像用濃度変換曲線よ
り) なる規則により濃度変換曲線を選択し画像濃度信号d
i―1,j―5の濃度変換を行い変換濃度信号cd
i―1,j―5を出力する。 【0046】濃度変換回路3においては、上記4本の濃
度変換曲線はそれぞれの濃度変換曲線に対応した4つの
データ変換テーブルを有しており、特徴判定回路30か
ら出力される濃度変換選択信号gi―1,j―5に応じ
て選択されたデータ変換テーブルを参照しながら画像濃
度信号di―1,j―5の濃度変換を行い変換濃度信号
cdi―1,j―5を出力する。 【0047】濃度変換回路3にて変換され出力された変
換濃度信号cdi―1,j―5は二値化回路4へ入力さ
れる。二値化回路4では入力された変換濃度信号cd
i―1,j―5を誤差拡散法により二値化し二値信号と
して出力する。この実施例では、実施例1と同様に、エ
ッヂ検出の精度を上げることができる。また、実施例1
同様、不連続点を有する二値画像用濃度変換曲線と階調
画像用濃度変換曲線を補間する不連続点を有する濃度変
換曲線は一本でも良く、また距離分類回路11の分類数
を増やすことにより、両曲線を補間する不連続点を有す
濃度変換曲線を三本以上に拡張する事もできる。 【0048】(実施例3) 以下、本発明の装置の他の実施例について説明する。図
12は本発明の実施例の画像処理装置のブロック図であ
る。 【0049】ライン・メモリ2から出力される画像濃度
信号(di,j、di,j―1、di,j―2、d
i―1,j、di―1,j―1、di―1,j―2、d
i―2,j、di―2,j―1、di―2,j―2)は
実施例1の場合と同様に画素pi―1,j―1を中心と
する3×3のマトリクスを構成している。 【0050】図12に示すように、ライン・メモリ2か
ら出力される画像濃度信号di―1,j―5は高濃度線
検出回路10、濃度変換回路3、へ入力される。ライン
・メモリ2から出力される画像濃度信号(di,j、d
i,j―1、di,j―2、di―1,j、d
i―1,j―1、di―1,j―2、di―2,j、d
i―2,j―1、di―2,j―2)は細線検出回路
5、エッヂ検出回路7、へ入力される。細線検出回路5
は、注目画素が細線か否かを検出する回路であり、この
細線検出回路5では図18の(a)、(b)に示す横方
向(主走査方向)及び縦方向(副走査方向)の細線検出
係数マトリクスによりコンヴォリューションの演算が行
われ、求められた2つの値の絶対値のうち大きいほうが
閾値T1と比較され、T1以上ならば有効(細線である
旨の信号)、T1未満ならば無効(細線でない旨の信
号)な細線検出信号hi―1,j―1として、処理すべ
き画素の画像濃度信号di―1,j―5に対する濃度変
換のタイミングを合わせるためにドット・ディレイ回路
6に入力される。ドット・ディレイ回路6からは細線検
出信号hi―1,j―5が出力され、特徴判定回路12
へ入力される。 【0051】図13はこの実施例の装置におけるエッヂ
検出回路を示す図である。演算回路13で実施例1と同
様に、図5(a),(b),(c),(d)に示す横方
向,縦方向,左斜め方向,右斜め方向のエッヂ検出係数
マトリクスによりコンヴォリューションの演算が行わ
れ、求められた4つの値の絶対値のうち最も大きい値が
エッヂ信号ei―1,j―1として出力され、比較器1
4、15に入力される。 【0052】比較器15では、入力されたエッヂ信号e
i―1,j―1が第1エッヂ閾値T2以上ならば有効
(エッヂ画素である旨の信号)、T2未満ならば無効
(エッヂ画素でない旨の信号)である第1エッヂ検出信
号e1i―1,j―1が出力される。第1エッヂ閾値T
2は、階調用画像にはほとんど現れない鋭い(濃度差の
大きい)エッヂのみ検出できる値に設定されている。 【0053】比較器14では、エッヂ信号e
i―1,j―1が第2エッヂ閾値T3以上ならば有効、
T3未満ならば無効である第2エッヂ検出信号e2
i―1,j―1が出力される。第2エッヂ閾値T3は第
1エッヂ閾値T2より小さく、やや鋭い(やや濃度差の
大きい)エッヂが検出できる値に設定されている。 【0054】図14に高濃度線検出回路を示す。高濃度
線検出回路は、予め設定された太さと濃度の線を認識す
るために使用される回路であり、注目画素が立ち上がり
のエッヂ画素と立ち下がりのエッヂ画素に挟まれ、かつ
濃度が高いか否かを検出する回路である。 【0055】第1エッヂ検出信号e1
i―1,j―1は、4個からなるドット・ディレイ回路
16と論理和回路17へ入力される。同時に、ドット・
ディレイ回路16の出力e1i―1.j―2、e1
i―1.j―3、e1i―1.j―4、e1
i―1.j―5は論理和回路17に入力され、先画素エ
ッヂ信号mi―1.j―5として出力される。 【0056】比較器19では、入力された画像濃度信号
i―1.j―5が閾値T4以上ならば有効、T4未満
ならば無効な高濃度検出信号c4i―1.j―5が出力
される。論理和回路21にはドット・ディレイ回路16
の出力e1i―1.j―5、高濃度線検出信号m′
i―1.j―5が入力される。論理和回路21からエッ
ヂまたは高濃度線信号bmi―1.j―5が出力されド
ット・ディレイ回路20へ入力され前画素のエッヂまた
は高濃度線検出信号bmi―1.j―6が出力される。 【0057】先画素エッヂ信号mi―1.j―5、高濃
度検出信号c4i―1.j―5、前画素のエッヂ又は高
濃度線検出信号bmi―1,j―6は論理積回路18へ
入力される。論理積回路18から高濃度線検出信号m′
i―1.j―5が出力され論理和回路21と特徴判定回
路12へ入力される。 【0058】注目画素からエッヂ画素までの距離を計数
して分類する距離分類回路11の詳細を図15に示す。
ライン・メモリ23には1ライン分の各画素のエッヂ画
素からの距離データが格納されている。 【0059】図16にライン・メモリ23に格納された
各画素のエッヂ画素までの距離データに対応した画素の
原稿上の位置を示す。第1エッヂ検出信号el
i―1.j―5は距離計数回路22に入力され、画素p
i―1.j―5のエッヂからの距離dei―1.j―5
は左の画素pi―1,j―6、上の画素p
i―2,j―5、右上の画素pi―2,j―4のエッヂ
からの距離、それぞれ、dei―1,j―6、de
i―2,j―5、dei―2,j―4を使って以下の要
領で計数される。 【0060】e1i―1.j―5=1ならば、de
i―1.j―5=0 e1i―1.j―5=0ならば、dei―1.j―5
min(dei―1,j―6,dei―2,j―5,d
i―2,j―4)+1 【0061】上記のdei―1,j―6、de
i―2,j―5、dei―2,j―4はライン・メモリ
23から取り出され、dei―1.j―5は新たにライ
ン・メモリ23に記憶される。エッヂからの距離de
i―1.j―5は、比較器24に入力され、 di―1.j―5<T6 ならば、fi―1.j―5
0 T6≦dei―1.j―5<T7 ならば、f
i―1.j―5=1 T7≦dei―1.j―5<T8 ならば、f
i―1.j―5=2 T8≦dei―1.j―5ならば、fi―1.j―5
3 なる規則により分類される。距離分類信号f
i―1.j―5は、特徴判定回路12へ入力される。 【0062】特徴判定回路12では入力される細線検出
信号hi―1.j―5、第1エッヂ検出信号e1
i―1.j―5、第2エッヂ検出信号e2
i―1.j―5、高濃度線検出信号
m′i―1.j―5、距離分類信号fi―1.j―5
より図17に示す規則で濃度変換選択信号g
i―1.j―5が決定され出力される。 【0063】この濃度変換選択信号g
i―1.j―5は、 1.細線画素とエッヂ画素は主として二値画像領域に存
在する 2.エッヂの鋭さ(濃度差)の度合いが強い(大きい)
程二値画像らしさを示し、エッヂの鋭さの度合いが弱い
(小さい)程階調画像らしさを示す。 3.主走査方向または副走査方向での濃度の立ち上がり
エッヂ画素と立ち下がりエッヂ画素で注目画素を挟む線
分がある場合、その線の濃度が高く細ければ文字を構成
する線(二値画像の一部)である可能性が強い。 4.注目画素と該注目画素に最も近いエッヂ画素との距
離が短い程二値画像らしさを示し、長い程階調画像らし
さを示す。 等の画像の特徴を考慮して濃度変換曲線が選択されるよ
うに構成されている。 【0064】図17において二値信号については○が有
効、×が無効、―が無視を表す。三値以上の値を持つ信
号については数字が信号の値を表す。ここで、濃度変換
選択信号gi―1.j―5の値は、 gi―1.j―5=0 ならば、二値画像 gi―1.j―5=3 ならば、階調画像 gi―1.j―5=1 ならば、二値画像らしい gi―1.j―5=2 ならば、階調画像らしい なる意味を持つ。 【0065】濃度変換回路3は図7に示すように、入力
濃度を最大か最小のどちらかに二値化する不連続点を有
する二値画像用濃度変換曲線A(実線で示されている)
と、入力濃度の階調性を出力濃度に保存する階調画像用
濃度変換曲線B(1点鎖線で示されている)と、上記2
曲線を補間する二値画像用濃度変換曲線よりの不連続点
を有する濃度変換曲線C(点線で示されている)と階調
画像用濃度変換曲線よりの不連続点を有する濃度変換曲
線D(2点鎖線で示されている)からなる2本の濃度変
換曲線の合計4本の濃度変換曲線を持っている。 【0066】特徴判定回路12から入力される濃度変換
選択信号gi―1.j―5に応じ、 gi―1.j―5=0 ならば、不連続点を有する二値
画像用濃度変換曲線A gi―1.j―5=3 ならば、階調濃度変換曲線B gi―1.j―5=1 ならば、2曲線を補間する不連
続点を有する濃度変換曲線C(二値画像用濃度変換曲線
より) gi―1.j―5=2 ならば、2曲線を補間する不連
続点を有する濃度変換曲線D(階調画像用濃度変換曲線
より) なる規則により濃度変換曲線を選択し画像濃度信号d
i―1.j―5の濃度変換を行い変換濃度信号cd
i―1.j―5を出力する。 【0067】濃度変換回路3は実施例1の場合と同様で
ある。本実施例では、細線検出係数マトリクス、エッヂ
検出係数マトリクスを3×3としている、マトリクスの
大きさをn×m(n>0,m>0:n,mは整数)と変
化させたり、係数を変化させたり、マトリクスの数を増
やす事により、エッヂ検出回路7によるエッヂ検出の精
度を上げることができる。また、高濃度線検出回路のド
ット・ディレイ回路のディレイ段の数を増やす事により
検出すべき線の太さを太くすることができる。 【0068】更に、不連続点を有する二値画像用濃度変
換曲線と階調画像用濃度変換曲線を補間する不連続点を
有する濃度変換曲線を2本にしているが、1本であって
も良く、また、エッヂ検出回路7のそれぞれ異なる閾値
が設定された比較器を増やすことによりエッヂの鋭さの
度合いの分類を増やしたり、また距離分類回路11の分
類数を増やすことにより、両曲線を補間する濃度変換曲
線を3本以上に拡張する事もできる。 【0069】 【発明の効果】本発明の装置によれば、領域の誤判別に
よる出力画像の濃度の急激な変化の違和感が軽減され
る。文字,細線等の文字画像及び写真等の階調画像が混
在した原稿でも、その原稿に忠実な画像濃度信号を出力
することができる。 【0070】また、不連続点を有する二値画像用濃度変
換曲線と階調画像用濃度変換曲線の両曲線を補間する異
なる複数本の不連続点を有する濃度変換曲線に応じた濃
度変換情報を備えることにより、太い文字やべた部であ
ってもエッヂ部は濃度を濃くでき、見かけ上、黒々とす
ることができる。更に、エッヂ部から離れるに従って、
階調を帯びた濃度に変換できるので、階調画像の濃度の
濃い部分の階調性を保存することができるなどの効果が
ある。
DETAILED DESCRIPTION OF THE INVENTION [0001] BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention reads an image of an original,
Image processing of the read digital image data
Plate making equipment (digital printing) that perforates hot stencil paper
Machine), forms a latent image on the photoreceptor by electrophotographic technology and forms it on paper
Transfer device (digital copier) or thermal paper
Etc. related to the copying machine. In particular, the read image
To an image processing device that binarizes and outputs as binary data
Involved. [0002] 2. Description of the Related Art Binary images such as characters and line drawings and gradations of photographs and the like
Use an image processing device such as the one described above
For best results when printing with
Image area is either maximum density or minimum density according to a single threshold
And input / output device characteristics in the gradation image area
It is necessary to perform density conversion to save the input / output density in consideration of
There is. To do this, each part of the image is a binary image area
Or a grayscale image area, and it is necessary to separate the two areas.
It is necessary. [0003] Conventionally, whether a binary image area or a gradation image area is determined.
Divide the image into blocks of nxn pixels to do different things
Feature extraction for each block and use the feature extraction result
(Japanese Patent Laid-Open No. 3-15316)
7) Perform feature extraction using the pixel of interest and its surrounding pixels
And makes a decision for each pixel using the feature extraction result.
Method (JP-A-1-227573). [0004] However, in the former method,
Is used for each block.
Or the border between the binary image area and the gradation image area
There is a problem that the shape of the lock appears. The latter method
In the case of using
Incorrect, but incorrectly identified and correctly identified
And a step in the density occurs, giving a sense of discomfort. [0005] In addition, a thick line drawing or black border in a binary image area is used.
It is difficult to distinguish the data from the high-density part of the photograph in the gradation image area
It is. Thick line drawings and black solids can be distinguished from binary images
Adjusting the discriminating parameter in the image causes the image to collapse
Part can be. High density part of photograph can be distinguished from gradation image
Adjusting the parameters for discrimination as
Concentration decreases. The present invention has been made in order to solve the above problems.
For documents in which value image areas and gradation image areas are mixed,
In the binary image area, the contrast is strong, and in the gradation image area,
Preserves the gradation, and furthermore, the
Provided is an image processing device that outputs an image density signal that does not occur.
The porpose is to do. [0007] [Means for Solving the Problems]To solve the above problems
According to the present invention, an original image input by the original reading means is provided.
Identify the image as a binary image and a gradation image, and perform the corresponding density conversion
Image processing device that outputs an image signal converted by a curve
In (1), the pixel of interest is fine according to the density of the neighboring pixels.
Fine line pixel detecting means for detecting whether or not the pixel is a line pixel,
The target pixel is an edge pixel according to the density of the neighboring pixel.
Edge pixel detecting means for detecting whether or not
Pixel and the edge pixel detection means closest to the pixel of interest.
Counting device that counts the distance to edge pixels detected by
Having a step, whether or not the thin line pixel, the edge pixel
Is based on the information according to whether or not
The state of the eye pixel is changed in multiple steps between the binary image and the gradation image.
Means for judging the state of the target pixel, (2) the target pixel
The input density to the maximum or minimum
Density change for binary images with discontinuous points that tend to binarize
Conversion curve, gradation of input density is stored in output density
Density conversion curve for image and density conversion curve for binary image
One or more discontinuities that interpolate the density conversion curve for the gradation image
Appropriate density conversion curve from density conversion curves with points
And a density conversion curve selecting means for performing density conversion by selecting
An image processing device is assumed. [0008] Attention image used in the apparatus of the present invention
There are various methods as means for identifying the state of the device.
(1) The sharpness of the edge of the pixel of interest according to the density of the neighboring pixels
Is detected, and the state of the pixel of interest is determined. (2) Neighboring painting
Whether the pixel of interest is an edge pixel or not according to the density of the element
Detects the target pixel and the edge pixel closest to the target pixel.
Is counted, and the state of the pixel of interest is determined. (3)
Whether the pixel of interest is a thin line, whether the pixel of interest is an edge pixel
Whether or not there is, the sharpness of the edge of the pixel of interest,
Distance from element edge pixel, length of line segment sandwiching target pixel
Is determined according to the characteristic of each pixel obtained by the above. [0009] According to the present invention, the density can be reduced in the main scanning direction or the sub-scanning direction.
A line segment that scissors the pixel of interest at the rising and falling edges
If there is, count its length. If the length of the line segment is short
It is likely that this is a line that constitutes a character. Also, the present invention
Measure the distance between the target pixel and the edge pixel closest to the target pixel.
To count. Here, the shorter the distance from the edge, the more the character image
The longer the length, the more “tone image likeness”. The present invention is suitable for binary images.Has discontinuities
DoA density conversion curve for a binary image and a floor
In addition to the density conversion curve for gradation images that preserves tonality, both curves
Of the appropriate number to interpolateHave discontinuitiesConcentration conversion curve
It has. [0011] Based on several feature values estimated for each pixel,
When the feature value indicates a strong binary imageDiscontinuous
Have a pointSelect the density conversion curve for the binary image, and
Density conversion for gradation image when showing strong gradation image likeness
Select a curve. And if neither is
Indicates the “feature of a binary image” or “gradation image
The binary image and the gradation image according to the degree of
Several lines interpolating both curves for the imageHave discontinuitiesDensity change
An appropriate curve is selected from the conversion curves and the density is converted. this
The “feature of binary image” or “floor
Tone image-likeness ”,
Due to erroneous area discrimination caused by viewing only the image
It can reduce the discomfort of sudden changes in the density of the output image.
it can. Also, the closer to the edge,Have discontinuities
Density conversion for binary imageHave discontinuitiesDensity conversion song
Select a line and move away from the edge, the density conversion for gradation image
LeaningHave discontinuitiesTo select a density conversion curve
Thicker letters and solid parts can be shown more darkly,
The tone characteristics of the dark part of the toned image can be saved.
You. [0013] Embodiments of the present invention will be described below.
You. (Example 1) FIG. 1 is a block diagram of an image processing apparatus according to an embodiment of the present invention.
You. The original is irradiated with light, and the reflected light from the original is
It is converted to an electric signal (image density signal) by a line sensor and output.
Power. Read by reading means not shown
Image density signal d takeni. jGoes to line memory 2
Is entered. An image density signal output from the reading means
Is input directly to the line memory 2 or
Dotted line to correct for image density signal close to image
Input to the line memory 2 via the MTF correction circuit 1
You. FIG. 2 shows an example in the case of passing through an MTF correction circuit.
The MTF correction coefficient matrix shown as
Pixel density corresponding to each coefficient position for each coefficient of Trix
A comb that multiplies the value and adds each result
The operation of the resolution is performed, and the corrected image signal d 'is obtained.
i. jIs input to the line memory 2. FIG. 3 shows an image stored in the line memory 2.
The position of the pixel corresponding to the density signal on the document is shown. Reading
Pixel corresponding to the image density signal output from the device
To pi. jIt expresses. Here, j is on main scanning, i is sub-scanning
Pixel number above, pi. jIs the i-th in the sub-scan,
This is the j-th pixel on scanning. Pixel pi, jThe concentration of d
i, jIt expresses. Line memory 2 is hatched
Two main scans of the portion and image density signals for two pixels are stored.
You. Image density output from line memory 2
Signal (di, j, Di, j-1, Di, j-2, D
i-1, j, Di-1, j-1, Di-1, j-2, D
i-2, j, Di-2, j-1, Di-2, j-2) Is
Pixel pi-1, j-13x3 matrix centered on
Is composed. As shown in FIG. 1, from the line memory 2
Output image density signal di-1, j-5Is the density conversion
Input to the circuit 3. Output from line memory 2
Image density signal (di, j, Di, j-1,
di, j-2, Di-1, j, Di-1, j-1, D
i-1, j-2, Di-2, j, Di-2, j-1, D
i-2, j-2) Is input to the edge detection circuit 27.
The edge detection circuit 27 determines that the target pixel is adjacent to the target pixel.
This circuit detects whether or not it is the conversion point of the density with the pixel.
You. FIG. 4 is a diagram showing the edge detection circuit 27.
You. In the arithmetic circuit 13, (a), (b), (c),
Horizontal, vertical, diagonal left, diagonal right directions shown in (d)
Convolution by the edge detection coefficient matrix of
Of the absolute values of the four values obtained
The largest value is the edge signal ei-1, j-1Output as
And input to the comparator 14, the comparator 15, and the comparator 25.
You. In the comparator 15, the input edge signal e
i-1, j-1Is valid if is greater than or equal to the first edge threshold T2
(Signal indicating edge pixel), invalid if less than T2
(Signal indicating that the pixel is not an edge pixel)
No. e1i-1, j-1Is output. First edge threshold T
2 is a sharp (large density difference) that hardly appears in the gradation image
The value is set so that only the edge can be detected. In the comparator 14, the edge signal e
i-1. j-1Is effective if is greater than or equal to the second edge threshold T3,
If it is less than T3, it is invalid and the second edge detection signal e2
i-1. j-1Is output. The second edge threshold T3 is
It is smaller than one edge threshold value T2 and slightly sharp (slightly
(Large) Edge is set to a value that can be detected In the comparator 25, the input edge signal e
i-1. j-1Is valid if is greater than or equal to the third edge threshold T8,
If less than T8, invalid third edge detection signal e3
i-1. j-1Is output. The third edge threshold T8 is
It is smaller than 2 edge threshold value T3 and is dull.
I) The edge is set to a value that can be detected. As shown in FIG. 1, an image of a pixel to be processed
Density signal di-1. j-5Conversion of concentration to time
To match the edge, the edge detection signal is
A circuits 8, 9, and 26. Output from the dot delay circuits 8, 9, 26
The applied first edge detection signal e1i-1. j-5, Second
Edge detection signal e2i-1. j-5And third edge inspection
Outgoing signal e3i-1. j-5Is input to the feature determination circuit 28.
It is. The feature determination circuit 28 detects the first edge inputted
Signal e1i-1, j-5, The second edge detection signal e2
i-1, j-5, The third edge detection signal e3
i-1, j-5Selects density conversion according to the rule shown in FIG.
Signal gi-1, j-5Is determined and output. This density conversion selection signal g
i-1. j-5Is 1. Edge pixels mainly exist in the binary image area 2. Edge sharpness (density difference) is strong (large)
The more the image looks like a binary image, the less sharp the edge
The smaller (smaller) the more like a gradation image Density conversion curve is selected in consideration of image characteristics such as
It is configured as follows. In FIG. 6, the binary signal has a circle.
Effective, × means invalid,-means ignored. Signals with three or more values
For symbols, the numbers represent signal values. Where the density conversion
Selection signal gi-1, j-5The value of gi-1, j-5= 0, binary image gi-1, j-5= 3, gradation image gi-1, j-5= 1, it looks like a binary image gi-1, j-5= 2, it looks like a gradation image It has a meaning. As shown in FIG. 7, the density conversion circuit 3
Binarize concentration to either maximum or minimumHas discontinuities
DoDensity conversion curve A for binary image (shown by solid line)
And for gradation images that store the gradation of the input density in the output density
The density conversion curve B (shown by a dashed line)
Interpolate curvesHave discontinuitiesDensity conversion music for binary image
From the lineHave discontinuitiesDensity conversion curve C (shown by dotted line)
) And density conversion curve for gradation image.Discontinuities
HaveFrom the density conversion curve D (shown by the two-dot chain line)
TwoHave discontinuitiesA total of four density conversion curves
Has a density conversion curve. Density conversion input from the characteristic determination circuit 28
Selection signal gi-1, j-5In response to the, gi-1, j-5= 0,Have discontinuitiesBinary
Image density conversion curve A, gi-1, j-5= 3, the gradation density conversion curve B, gi-1, j-5If = 1, interpolate 2 curvesDiscontinued
Have a continuation pointDensity conversion curve C, gi-1, j-5= 2, interpolate two curvesDiscontinued
Have a continuation pointDensity conversion curve D, The density conversion curve is selected according to the following rule, and the image density signal d
i-1, j-5Is performed, and the converted density signal cd
i-1, j-5Is output. In the density conversion circuit 3, the above four density
The degree conversion curves correspond to four density conversion curves.
A data conversion table is provided, and the feature determination circuit 28
Density conversion selection signal g output fromi-1, j-5According to
Image density while referring to the selected data conversion table.
Degree signal di-1, j-5Conversion density signal
cdi-1, j-5Is output. The converted density signal converted by the density conversion circuit 3
Number cdi-1, j-5Is input to the binarization circuit 4.
In the binarization circuit 4, the input converted density signal cd
i-1, j-5Is binarized by an error diffusion method, and a binary signal
Output as In this embodiment, the edge detection coefficient matrix
3 × 3. The size of the matrix is nxm
(N> 0, m> 0: n and m are integers)
By changing the number or increasing the number of matrices,
It is possible to improve the edge detection accuracy by the edge detection circuit.
it can. In this embodiment,Have discontinuitiesBinary painting
Interpolate density conversion curve for image and density conversion curve for gradation image
Have discontinuitiesAlthough two density conversion curves are used,
The edge detection circuit 27 may be a book.
By increasing the number of comparators with different thresholds,
By increasing the classification of the sharpness of the edge, both curves
InterpolateHave discontinuities3 or more density conversion curves
It can be extended. (Embodiment 2) Hereinafter, another embodiment of the apparatus of the present invention will be described. Figure
FIG. 8 is a block diagram of an image processing apparatus according to an embodiment of the present invention.
You. Image density output from line memory 2
Signal (di, j, Di, j-1, Di, j-2, D
i-1, j, Di-1, j-1, Di-1, j-2, D
i-2, j, Di-2, j-1, Di-2, j-2) Is
As in the case of the first embodiment, the pixel pi-1, j-1Centered around
To form a 3 × 3 matrix. As shown in FIG. 8, from the line memory 2
Output image density signal di-1, j-5Is the density conversion
Input to the circuit 3. Output from line memory 2
Image density signal (di, j, Di, j-1,
di, j-2, Di-1, j, Di-1, j-1, D
i-1, j-2, Di-2, j, Di-2, j-1, D
i-2, j-2) Is input to the edge detection circuit 29. FIG. 9 is a diagram showing an edge detection circuit. Performance
In the arithmetic circuit 13, as in the case of the first embodiment, FIG.
(B), (c), (d) horizontal, vertical, diagonally left
Direction and right diagonal direction
The calculation of the evolution is performed and the four
The largest value among the absolute values of the values is the edge signal e.
i-1, j-1And output to the comparator 15
You. In the comparator 15, the input edge signal e
i-1, j-1Is effective if is greater than or equal to the first edge threshold T2
(Signal indicating edge pixel), invalid if less than T2
(A signal indicating that the pixel is not an edge pixel)
No. e1i-1, j-1Is output. First edge threshold T
2 is a sharp (large density difference) that hardly appears in the gradation image
The value is set so that only the edge can be detected. As shown in FIG. 8, a dot delay circuit
9 is the first edge detection signal e1
i-1. j-5Is input to the feature determination circuit 30. distance
The classification circuit 11 measures the distance from the pixel of interest to the edge pixel.
Count and classify. FIG. 10 shows details of the distance classification circuit 11.
You. The line memory 23 stores the edge of each pixel for one line.
距離 Distance data from the pixel is stored. Each pixel stored in the line memory 23
The pixel on the original corresponding to the distance data to the edge pixel
The position is shown in FIG. First edge detection signal el
i-1. j-5Is input to the distance counting circuit 22, and the pixel p
i-1. j-5Distance from edge dei-1. j-5
Is the left pixel pi-1, j-6, The pixel p on
i-2, j-5, Upper right pixel pi-2, j-4Edge of
Distance from each, dei-1, j-6, De
i-2, j-5, Dei-2, j-4Use the following
Counted by territory. E1i-1. j-5If = 1, de
i-1. j-5= 0 e1i-1. j-5If = 0, dei-1. j-5=
min (dei-1, j-6, Dei-2, j-5, D
ei-2, j-4) +1 The above dei-1, j-6, De
i-2, j-5, Dei-2, j-4Is line memory
Taken out of 23 and dei-1, j-5Is newly
Is stored in the memory 23. Distance from edge de
i-1, j-5Is input to the comparator 24 and de
i-1, j-5<T6, then fi-1, j-5= 0 T6 ≦ dei-1, j-5<T7, then f
i-1, j-5= 1 T7 ≦ dei-1, j-5If <T8, f
i-1, j-5= 2 T8 ≦ dei-1, j-5Then fi-1, j-5=
3 It is classified according to the following rules. Distance classification signal f
i-1, j-5Is input to the feature determination circuit 30. In the feature determination circuit 30, the first input
Edge detection signal e1i-1, j-5, Distance classification signal f
i-1, j-5, The density according to the rule shown in FIG.
Conversion selection signal gi-1, j-5Is determined. This concentration
Conversion selection signal gi-1, j-5Is 1. Edge pixels mainly exist in the binary image area 2. The distance between the pixel of interest and the edge pixel closest to the pixel of interest
The shorter the separation, the more like a character image, and the longer the separation, the more like a gradation image.
Show Density conversion curve is selected in consideration of image characteristics such as
It is configured as follows. In FIG. 11, there is a circle for binary signals.
Effective, × means invalid,-means ignored. Signals with three or more values
For symbols, the numbers represent signal values. Where the density conversion
Selection signal gi-1, j-5The value of gi-1, j-5= 0, binary image gi-1, j-5= 3, gradation image gi-1, j-5= 1, it looks like a binary image gi-1, j-5= 2, it looks like a gradation image It has a meaning. The density conversion circuit 3 is the same as in the first embodiment.
Has four density conversion curves, and the characteristic determination circuit 3
Density conversion selection signal g input from 0i-1, j-5To
Depending Gi-1, j-5= 0,Discontinuity
HavingDensity conversion curve A for binary image gi-1, j-5= 3, gradation density conversion curve B gi-1, j-5If = 1, interpolate 2 curvesDiscontinued
Have a continuation pointDensity conversion curve C (density conversion curve for binary image)
Than) gi-1, j-5If = 2, interpolate two curvesDiscontinuous
Have a pointDensity conversion curve D (from the density conversion curve for gradation image)
R) The density conversion curve is selected according to the following rule, and the image density signal d
i-1, j-5Conversion density signal cd
i-1, j-5Is output. In the density conversion circuit 3, the above four density
The degree conversion curves correspond to four density conversion curves.
A data conversion table is provided, and the feature determination circuit 30
Density conversion selection signal g output fromi-1, j-5According to
Image density while referring to the selected data conversion table.
Degree signal di-1, j-5Conversion density signal
cdi-1, j-5Is output. The density converted and output by the density conversion circuit 3 is
Exchange density signal cdi-1, j-5Is input to the binarization circuit 4.
It is. In the binarization circuit 4, the input converted density signal cd
i-1, j-5Is binarized by an error diffusion method and
And output. In this embodiment, similar to the first embodiment,
The accuracy of edge detection can be improved. Example 1
Similarly,Have discontinuitiesDensity conversion curve and gradation for binary image
Interpolate density conversion curve for imageHave discontinuitiesDensity change
The number of commutation curves may be one, and
Interpolate both curves by increasingHave discontinuities
ToThe density conversion curve can be extended to three or more. (Embodiment 3) Hereinafter, another embodiment of the apparatus of the present invention will be described. Figure
FIG. 12 is a block diagram of an image processing apparatus according to an embodiment of the present invention.
You. Image density output from line memory 2
Signal (di, j, Di, j-1, Di, j-2, D
i-1, j, Di-1, j-1, Di-1, j-2, D
i-2, j, Di-2, j-1, Di-2, j-2) Is
As in the case of the first embodiment, the pixel pi-1, j-1Centered around
To form a 3 × 3 matrix. As shown in FIG. 12, the line memory 2
Output image density signal di-1, j-5Is the high concentration line
It is input to the detection circuit 10 and the density conversion circuit 3. line
The image density signal (d output from the memory 2)i, j, D
i, j-1, Di, j-2, Di-1, j, D
i-1, j-1, Di-1, j-2, Di-2, j, D
i-2, j-1, Di-2, j-2) Is a fine line detection circuit
5, the edge detection circuit 7. Fine line detection circuit 5
Is a circuit for detecting whether or not the pixel of interest is a fine line.
In the fine line detection circuit 5, the horizontal direction shown in FIGS.
Line detection in the horizontal direction (main scanning direction) and vertical direction (sub scanning direction)
Convolution operation is performed by the coefficient matrix.
The larger of the absolute values of the two calculated values is
It is compared with the threshold value T1.
Signal if it is less than T1, invalid (signal that it is not a thin line)
No.) Fine line detection signal hi-1, j-1As a process
Pixel image density signal di-1, j-5Concentration change
Dot delay circuit to match the replacement timing
6 is input. The fine line detection from the dot delay circuit 6
Outgoing signal hi-1, j-5Is output and the feature determination circuit 12
Is input to FIG. 13 shows an edge in the apparatus of this embodiment.
FIG. 3 is a diagram illustrating a detection circuit. Operation circuit 13 is the same as in the first embodiment.
5 (a), 5 (b), 5 (c) and 5 (d)
Edge detection coefficient in vertical, vertical, diagonal left, and diagonal right directions
Matrix performs convolution operation
And the largest value among the absolute values of the four values obtained is
Edge signal ei-1, j-1Is output as comparator 1
4 and 15 are input. In the comparator 15, the input edge signal e
i-1, j-1Is valid if is greater than or equal to the first edge threshold T2
(Signal indicating edge pixel), invalid if less than T2
(A signal indicating that the pixel is not an edge pixel)
No. e1i-1, j-1Is output. First edge threshold T
2 is a sharp (density difference) that hardly appears in the gradation image.
(Large) The value is set so that only the edge can be detected. In the comparator 14, the edge signal e
i-1, j-1Is effective if is greater than or equal to the second edge threshold T3,
The second edge detection signal e2 which is invalid if less than T3
i-1, j-1Is output. The second edge threshold T3 is
It is smaller than one edge threshold value T2 and slightly sharp (slightly
(Large) Edge is set to a value that can be detected. FIG. 14 shows a high density line detection circuit. High concentration
The line detection circuit recognizes a line having a preset thickness and density.
This is the circuit used for
Between the edge pixel and the falling edge pixel, and
This circuit detects whether the density is high. The first edge detection signal e1
i-1, j-1Is a four dot delay circuit
16 and input to the OR circuit 17. At the same time,
Output e1 of delay circuit 16i-1. j-2, E1
i-1. j-3, E1i-1. j-4, E1
i-1. j-5Is input to the OR circuit 17 and the pixel
Edge signal mi-1. j-5Is output as The comparator 19 receives the input image density signal.
di-1. j-5Is valid if is greater than or equal to threshold T4, less than T4
Then, the invalid high concentration detection signal c4i-1. j-5Is output
Is done. The OR circuit 21 has a dot delay circuit 16
Output e1i-1. j-5, High concentration line detection signal m '
i-1. j-5Is entered. The edge from the OR circuit 21
ヂ or high density line signal bmi-1. j-5Is output
The edge of the previous pixel which is input to the
Is the high density line detection signal bmi-1. j-6Is output. First pixel edge signal mi-1. j-5, Takano
Degree detection signal c4i-1. j-5, The edge or height of the previous pixel
Density line detection signal bmi-1, j-6To AND circuit 18
Is entered. The high density line detection signal m 'is output from the AND circuit 18.
i-1. j-5Is output and the OR circuit 21 and the feature determination
Input to the road 12. Count distance from target pixel to edge pixel
FIG. 15 shows details of the distance classification circuit 11 for performing classification.
The edge memory of each pixel for one line is stored in the line memory 23.
The distance data from the element is stored. FIG. 16 shows the data stored in the line memory 23.
The pixel of the pixel corresponding to the distance data to the edge pixel of each pixel
Indicates the position on the document. First edge detection signal el
i-1. j-5Is input to the distance counting circuit 22, and the pixel p
i-1. j-5Distance from edge dei-1. j-5
Is the left pixel pi-1, j-6, The pixel p on
i-2, j-5, Upper right pixel pi-2, j-4Edge of
Distance from each, dei-1, j-6, De
i-2, j-5, Dei-2, j-4Use the following
Counted by territory. E1i-1. j-5If = 1, de
i-1. j-5= 0 e1i-1. j-5If = 0, dei-1. j-5=
min (dei-1, j-6, Dei-2, j-5, D
ei-2, j-4) +1 The above dei-1, j-6, De
i-2, j-5, Dei-2, j-4Is line memory
Taken out of 23 and dei-1. j-5Is newly
Is stored in the memory 23. Distance from edge de
i-1. j-5Is input to the comparator 24, di-1. j-5<T6, then fi-1. j-5=
0 T6 ≦ dei-1. j-5<T7, then f
i-1. j-5= 1 T7 ≦ dei-1. j-5If <T8, f
i-1. j-5= 2 T8 ≦ dei-1. j-5Then fi-1. j-5=
3 It is classified according to the following rules. Distance classification signal f
i-1. j-5Is input to the feature determination circuit 12. In the characteristic determination circuit 12, the input fine line is detected.
Signal hi-1. j-5, The first edge detection signal e1
i-1. j-5, The second edge detection signal e2
i-1. j-5, High concentration line detection signal
m 'i-1. j-5, Distance classification signal fi-1. j-5To
The density conversion selection signal g according to the rule shown in FIG.
i-1. j-5Is determined and output. This density conversion selection signal g
i-1. j-5Is 1. Fine line pixels and edge pixels mainly exist in the binary image area.
Exist 2. Edge sharpness (density difference) is strong (large)
Shows a more binary image quality, with a lower edge sharpness
(Smaller) indicates the likeness of a gradation image. 3. Density rise in main scanning direction or sub scanning direction
Line sandwiching the pixel of interest between the edge pixel and the falling edge pixel
If there is a minute, characters are composed if the density of the line is high and thin
Line (part of the binary image). 4. The distance between the pixel of interest and the edge pixel closest to the pixel of interest
The shorter the separation, the more like a binary image. The longer the separation, the more like a gradation image.
Show Density conversion curve is selected in consideration of image characteristics such as
It is configured as follows. In FIG. 17, the binary signal has a circle.
Effective, × means invalid,-means ignored. Signals with three or more values
For symbols, the numbers represent signal values. Where the density conversion
Selection signal gi-1. j-5The value of gi-1. j-5= 0, binary image gi-1. j-5= 3, gradation image gi-1. j-5= 1, it looks like a binary image gi-1. j-5= 2, it looks like a gradation image It has a meaning. As shown in FIG. 7, the density conversion circuit 3
Binarize concentration to either maximum or minimumHas discontinuities
DoDensity conversion curve A for binary image (shown by solid line)
And for gradation images that store the gradation of the input density in the output density
The density conversion curve B (shown by a dashed line)
From the density conversion curve for binary imageDiscontinuity
HavingDensity conversion curve C (indicated by dotted line) and gradation
From the density conversion curve for imageHave discontinuitiesDensity conversion song
Two density changes consisting of line D (indicated by the two-dot chain line)
And a total of four density conversion curves. Density conversion input from the characteristic determination circuit 12
Selection signal gi-1. j-5Depending on gi-1. j-5= 0,Have discontinuitiesBinary
Image density conversion curve A gi-1. j-5= 3, gradation density conversion curve B gi-1. j-5If = 1, interpolate 2 curvesDiscontinued
Have a continuation pointDensity conversion curve C (density conversion curve for binary image)
Than) gi-1. j-5= 2, interpolate two curvesDiscontinued
Have a continuation pointDensity conversion curve D (density conversion curve for gradation image)
Than) The density conversion curve is selected according to the following rule, and the image density signal d
i-1. j-5Conversion density signal cd
i-1. j-5Is output. The density conversion circuit 3 is the same as in the first embodiment.
is there. In the present embodiment, the fine line detection coefficient matrix, the edge
The detection coefficient matrix is 3 × 3.
Change the size to n × m (n> 0, m> 0: n and m are integers)
, Change the coefficient, and increase the number of matrices.
This makes the edge detection circuit 7 more accurate in edge detection.
You can increase the degree. In addition, the high density line detection circuit
By increasing the number of delay stages in the
The thickness of the line to be detected can be increased. Further,Have discontinuitiesDensity change for binary image
Interpolation curve and density conversion curve for gradation imageDiscontinuities
HaveThe density conversion curve is two, but only one
And different threshold values of the edge detection circuit 7
By increasing the number of comparators
It is possible to increase the degree of classification, and
Density conversion music that interpolates both curves by increasing the number of classes
The line can be extended to three or more lines. [0069] According to the apparatus of the present invention, the erroneous determination of the area can be performed.
Discomfort due to sudden changes in the density of the output image due to
You. Character images such as characters and thin lines and gradation images such as photographs are mixed.
Output an image density signal that is faithful to the original
can do. Also,Have discontinuitiesDensity change for binary image
Interpolation curve and the density conversion curve for gradation image.
Become multipleHave discontinuitiesDensity according to the density conversion curve
By providing the degree conversion information, thick characters and solid parts
Even so, the edge part can be thickened, and it looks black
Can be Furthermore, as you move away from the edge,
Since the density can be converted to a gradation, the density of the gradation image
Effects such as the ability to preserve the gradation of dark areas
is there.

【図面の簡単な説明】 【図1】本発明の実施例の画像処理装置のブロック図で
ある。 【図2】本発明の実施例で使われるMTF補正回路の係
数マトリクスを示す図である。 【図3】本発明の実施例における画像濃度信号を格納す
るライン・メモリ内の画素の原稿上の位置を示す図であ
る。 【図4】本発明の実施例におけるエッヂ検出回路を示す
図である。 【図5】本発明の実施例におけるエッヂ検出回路の係数
マトリクスを示す図である。 【図6】本発明の実施例における特徴判定規則を示す図
表である。 【図7】本発明の実施例にける濃度変換回路の濃度変換
曲線の一例を示す図である。 【図8】本発明の実施例の画像処理装置のブロック図で
ある。 【図9】本発明の実施例におけるエッヂ検出回路を示す
図である。 【図10】本発明の実施例における距離分類回路を示す
図である。 【図11】本発明の実施例における特徴判定規則を示す
図表である。 【図12】本発明の実施例の画像処理装置のブロック図
である。 【図13】本発明の実施例におけるエッヂ検出回路を示
す図である。 【図14】本発明の実施例における高濃度線検出回路を
示す図である。 【図15】本発明の実施例における距離分類回路を示す
図である。 【図16】本発明の実施例におけるライン・メモリ23
に格納された各画素のエッヂ画素までの距離データに対
応した画素の原稿上の位置を示す。 【図17】本発明の実施例における特徴判定規則を示す
図表である。 【図18】本発明の実施例で使われる細線検出回路の係
数マトリクスを示す図である。 【符号の説明】 1 MTF補正回路 2 ライン・メモリ 3 濃度変換回路 4 二値化回路 5 細線検出回路 6 ドット・ディレイ回路 7 エッヂ検出回路 8 ドット・ディレイ回路 9 ドット・ディレイ回路 10 高濃度線検出回路 11 距離分類回路 12 特徴判定回路 13 演算回路 14 比較器 15 比較器 16 ドット・ディレイ回路 17 論理和回路 18 論理積回路 19 比較器 20 ドット・ディレイ回路 21 論理和回路 22 距離計数回路 23 ライン・メモリ 24 比較器 25 比較器 26 ドット・ディレイ回路 27 エッヂ検出回路 28 特徴判定回路 29 エッヂ検出回路 30 特徴判定回路
BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a block diagram of an image processing apparatus according to an embodiment of the present invention. FIG. 2 is a diagram illustrating a coefficient matrix of an MTF correction circuit used in an embodiment of the present invention. FIG. 3 is a diagram showing positions on a document of pixels in a line memory for storing an image density signal according to the embodiment of the present invention. FIG. 4 is a diagram illustrating an edge detection circuit according to an embodiment of the present invention. FIG. 5 is a diagram illustrating a coefficient matrix of an edge detection circuit according to the embodiment of the present invention. FIG. 6 is a table showing a feature determination rule according to the embodiment of the present invention. FIG. 7 is a diagram illustrating an example of a density conversion curve of the density conversion circuit according to the embodiment of the present invention. FIG. 8 is a block diagram of an image processing apparatus according to an embodiment of the present invention. FIG. 9 is a diagram illustrating an edge detection circuit according to an embodiment of the present invention. FIG. 10 is a diagram showing a distance classification circuit according to the embodiment of the present invention. FIG. 11 is a table showing a feature determination rule according to the embodiment of the present invention. FIG. 12 is a block diagram of an image processing apparatus according to an embodiment of the present invention. FIG. 13 is a diagram illustrating an edge detection circuit according to an embodiment of the present invention. FIG. 14 is a diagram illustrating a high density line detection circuit according to an embodiment of the present invention. FIG. 15 is a diagram illustrating a distance classification circuit according to an embodiment of the present invention. FIG. 16 shows a line memory 23 according to an embodiment of the present invention.
Indicates the position on the document of the pixel corresponding to the distance data to the edge pixel of each pixel stored in the document. FIG. 17 is a table showing a feature determination rule according to the embodiment of the present invention. FIG. 18 is a diagram showing a coefficient matrix of the fine line detection circuit used in the embodiment of the present invention. [Description of Signs] 1 MTF correction circuit 2 Line memory 3 Density conversion circuit 4 Binarization circuit 5 Thin line detection circuit 6 Dot delay circuit 7 Edge detection circuit 8 Dot delay circuit 9 Dot delay circuit 10 High density line detection Circuit 11 Distance classification circuit 12 Feature determination circuit 13 Operation circuit 14 Comparator 15 Comparator 16 Dot delay circuit 17 Logical OR circuit 18 Logical product circuit 19 Comparator 20 Dot delay circuit 21 Logical OR circuit 22 Distance counting circuit 23 Line Memory 24 comparator 25 comparator 26 dot delay circuit 27 edge detection circuit 28 feature determination circuit 29 edge detection circuit 30 feature determination circuit

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平4−336874(JP,A) 特開 平1−169683(JP,A) 特開 平5−284358(JP,A) 特開 平4−220080(JP,A) 特開 平1−181380(JP,A) 特開 平7−87319(JP,A) 特開 昭61−157169(JP,A) (58)調査した分野(Int.Cl.7,DB名) H04N 1/40 - 1/409 H04N 1/46 H04N 1/60 ──────────────────────────────────────────────────続 き Continuation of front page (56) References JP-A-4-336874 (JP, A) JP-A-1-169683 (JP, A) JP-A-5-284358 (JP, A) JP-A-4- 220080 (JP, A) JP-A-1-181380 (JP, A) JP-A-7-87319 (JP, A) JP-A-61-157169 (JP, A) (58) Fields investigated (Int. Cl. 7 , DB name) H04N 1/40-1/409 H04N 1/46 H04N 1/60

Claims (1)

(57)【特許請求の範囲】 【請求項1】原稿読み取り手段により入力された原稿画
像を二値画像と階調画像に識別して、対応する濃度変換
曲線により変換された画像信号を出力する画像処理装置
において、 (1)近隣画素の濃度に応じて注目画素が細線画素であ
るか否かを検出する細線画素検出手段、前記近隣画素の
濃度に応じて前記注目画素がエッヂ画素であるか否かを
検出するエッヂ画素検出手段および前記注目画素と該注
目画素に最も近い前記エッヂ画素検出手段にて検出され
たエッヂ画素との距離を計数する距離計数手段を有し、
前記細線画素であるか否か、前記エッヂ画素であるか否
かおよび前記距離に応じた情報に基づいて注目画素の状
態を二値画像から階調画像の間で多段階に原稿注目画素
の状態を判断する手段、 (2)前記注目画素の状態の判断にしたがって、入力濃
度を最大か最小のどちらかに二値化する不連続点を有す
二値画像用濃度変換曲線、入力濃度の階調性を出力濃
度に保存する階調画像用濃度変換曲線及び前記二値画像
用濃度変換曲線と前記階調画像用濃度変換曲線を補間す
る1本以上の不連続点を有する濃度変換曲線のなかから
適当な濃度変換曲線を選択して濃度変換する濃度変換曲
線選択手段 を備えたことを特徴とする画像処理装置。
(57) Claims 1. A document image input by a document reading means is identified as a binary image and a gradation image, and an image signal converted by a corresponding density conversion curve is output. In the image processing apparatus, (1) a thin line pixel detecting unit that detects whether a pixel of interest is a thin line pixel according to the density of a neighboring pixel, and whether the pixel of interest is an edge pixel according to the density of the neighboring pixel Edge pixel detecting means for detecting whether or not the target pixel and the edge pixel detected by the edge pixel detecting means closest to the target pixel, distance measuring means for counting the distance,
The state of the target pixel is determined in multiple stages between the binary image and the gradation image based on the information according to whether the pixel is the thin line pixel, whether the pixel is the edge pixel, and the distance. (2) There is a discontinuous point for binarizing the input density to either the maximum or the minimum according to the determination of the state of the target pixel.
A density conversion curve for a binary image, a density conversion curve for a tone image for storing the gradation of an input density as an output density, and a density conversion curve for the binary image and the density conversion curve for the tone image 1 An image processing apparatus comprising a density conversion curve selecting means for selecting an appropriate density conversion curve from density conversion curves having more than two discontinuous points and performing density conversion.
JP15228195A 1994-06-03 1995-05-26 Image processing device Expired - Lifetime JP3479161B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP15228195A JP3479161B2 (en) 1994-06-03 1995-05-26 Image processing device

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP6-145374 1994-06-03
JP14537494 1994-06-03
JP15228195A JP3479161B2 (en) 1994-06-03 1995-05-26 Image processing device

Publications (2)

Publication Number Publication Date
JPH0851538A JPH0851538A (en) 1996-02-20
JP3479161B2 true JP3479161B2 (en) 2003-12-15

Family

ID=26476524

Family Applications (1)

Application Number Title Priority Date Filing Date
JP15228195A Expired - Lifetime JP3479161B2 (en) 1994-06-03 1995-05-26 Image processing device

Country Status (1)

Country Link
JP (1) JP3479161B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3755854B2 (en) * 1997-04-07 2006-03-15 理想科学工業株式会社 Image processing apparatus and two-dimensional line feature amount calculation apparatus
JPH10313407A (en) 1997-05-12 1998-11-24 Riso Kagaku Corp Image processing unit
US6822751B1 (en) 1999-12-10 2004-11-23 Destiny Technology Corporation Method and system for monochrome multi-beam printing with edge enhancement
US6778296B1 (en) 2000-03-27 2004-08-17 Destiny Technology Corporation Color imaging processing method with boundary detection and enhancement
US6750986B1 (en) 2000-03-27 2004-06-15 Destiny Technology Corporation Color image processing method with thin-line detection and enhancement
JP2009278416A (en) 2008-05-15 2009-11-26 Seiko Epson Corp Image printing system, image printing method, and computer-readable medium
JP5365817B2 (en) * 2011-11-24 2013-12-11 富士ゼロックス株式会社 Image processing apparatus and image processing program

Also Published As

Publication number Publication date
JPH0851538A (en) 1996-02-20

Similar Documents

Publication Publication Date Title
JP3392798B2 (en) Image attribute determination method and apparatus
JP3097785B2 (en) Image processing device
JP3581477B2 (en) Digital copier
JP2005094740A (en) Image processing apparatus, image forming apparatus and image processing method
EP0685961B1 (en) Image processing apparatus
JPH1056569A (en) Image processing method and device therefor
JPH10341336A (en) Image processor and two-dimensional line feature amount calculator
JP3479161B2 (en) Image processing device
JPH06133159A (en) Picture processing unit
JPH0666884B2 (en) Halftone photo area identification method
JP3262326B2 (en) Image processing apparatus and image processing method
JPH06290300A (en) Image area identifying device
JPH0654180A (en) Method and device for image area separation
JP3423665B2 (en) Area determining method and device
JP3128871B2 (en) Area identification device
JP2507927B2 (en) Image processing device
JP2000324338A (en) Original kind recognition device
JP3183788B2 (en) Halftone area determination device
JP3216165B2 (en) Image region identification device and image region identification method
JPH09247436A (en) Image area discrimination device and image processor
JPH07240842A (en) Image processor
JPH0385061A (en) Character area separate system
JPS63260267A (en) Picture area discriminating device
JPH07121063B2 (en) Image processing device
JPH0382269A (en) Character region separation system

Legal Events

Date Code Title Description
R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071003

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081003

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091003

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101003

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111003

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111003

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121003

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121003

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131003

Year of fee payment: 10

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term