JP3545464B2 - Composite device - Google Patents

Composite device Download PDF

Info

Publication number
JP3545464B2
JP3545464B2 JP22788094A JP22788094A JP3545464B2 JP 3545464 B2 JP3545464 B2 JP 3545464B2 JP 22788094 A JP22788094 A JP 22788094A JP 22788094 A JP22788094 A JP 22788094A JP 3545464 B2 JP3545464 B2 JP 3545464B2
Authority
JP
Japan
Prior art keywords
correction
image data
printing
gradation
curve
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP22788094A
Other languages
Japanese (ja)
Other versions
JPH0898015A (en
Inventor
敏男 瀬戸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP22788094A priority Critical patent/JP3545464B2/en
Publication of JPH0898015A publication Critical patent/JPH0898015A/en
Application granted granted Critical
Publication of JP3545464B2 publication Critical patent/JP3545464B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【産業上の利用分野】
この発明は、デジタル複写装置とファクシミリ装置のそれぞれの機能を備えた複合装置に関する。
【0002】
【従来の技術】
近年、ラインイメージセンサ等の原稿センサによって読み取った画像データをレーザ光を用いて紙に印刷して記録するデジタル複写装置が実用化され、ファクシミリ装置と組み合わせた複合装置として利用され始めている。
このような複合装置は、1台で複写(コピー)装置とファクシミリ装置の機能を備えているため、複写装置とファクシミリ装置を別々に購入するよりも安くなり、設置スペースを取らないので次第に多用されるようになってきた。
【0003】
従来の複合装置は、デジタル複写装置をベースにしてファクシミリ機能を付加している場合が多かった。図9は従来の複合装置のデジタルコピー処理に係る主要な機能のブロック図、図10はその複合装置のファクシミリ送信処理に係る主要な機能のブロック図である。
【0004】
従来の複合装置におけるデジタルコピー処理は、図9に示すように、CCD等の原稿センサによって原稿の画像を読み取り、その読み取った多値画像データのビデオ信号を、シェーディング補正回路20によってシェーディング補正した後、空間フィルタ処理回路21でMTF補正による解像度の補正を施す。
さらに、γ補正ルックアップテーブル(LUT)22でγ補正による階調の補正を施し、その後に電気変倍処理部23によって変倍処理を施して印刷のための記録処理部へ送出していた。
【0005】
これは、原稿から読み取った多値画像データ(多値画像信号)を記録処理部の多値変調部に直接導く多値記録方式を用いている。このような方式を用いたデジタルコピー処理では、原稿の画像の再現性が重要であり、多値画像データを変倍する前に空間フィルタ処理(MTF補正処理)によって解像度の補正をかけておかないと、画像データを拡大したときにMTF補正が良く効かなくなって解像度が悪くなり、画像ボケを生じる可能性があるためである。
【0006】
また、多値画像データに対してMTF補正処理を施す前にγ補正を施し、そのγ補正で地肌ノイズのカット等の急激な入力特性の変更を行なうと、γ補正におけるγカーブの変化部をさらに強調するようにMTF補正がかかってしまうため、コピー画像上で全白にクランプした付近に等高線のようなスジが入って画質が低下してしまう不具合が起こる可能性があるためである。
【0007】
一方、従来の複合装置におけるファクシミリ送信処理は、図10に示すように、CCD等の原稿センサによって原稿の画像を読み取り、その読み取った多値画像データのビデオ信号を、シェーディング補正回路30によってシェーディング補正する。
【0008】
その後、空間フィルタ・絵文字分離処理部31でMTF補正による解像度の補正を施し、さらに画像データの文字領域と絵柄領域を分離して、文字領域の画像データを文字γ補正ルックアップテーブル(LUT)32へ、絵柄領域の画像データを絵柄γ補正ルックアップテーブル(LUT)35へそれぞれ送る。
【0009】
文字γ補正LUT32では、文字領域の画像データにγ補正による階調の補正を施し、その後に電気変倍処理部33で変倍し、2値化処理部34で2値化データに変換して絵文字合成部38へ送る。
【0010】
また、絵柄γ補正LUT35では、絵柄領域の画像データにγ補正による階調の補正を施し、その後に電気変倍処理部36で変倍し、2値化処理部37で2値化データに変換して絵文字合成部38へ送る。
そして、絵文字合成部38によって文字領域と絵柄領域の各2値化データを合成してファクシミリ送信処理へ移行するようにしていた。
【0011】
このように、多値画像データを2値化してファクシミリ送信する場合、ハーフトーン時はディザ処理や誤差拡散処理によって擬似中間調処理を施すことによって文字部分がかすれたり解像したりし難くなる。
【0012】
したがって、画像データの文字部分と絵柄部分とを分離する絵文字分離処理を空間フィルタと同じ機能部で行ない、絵柄領域のみにディザ処理や誤差拡散処理をかけるようにすれば、まず画像データにMTF処理(フィルタ処理)が入るので、γ補正後や変倍処理後にMTF処理を施すことによる弊害が発生しない。
【0013】
【発明が解決しようとする課題】
しかしながら、従来の複合装置は、コピーする画像の画質とファクシミリ送信する画像の画質とを共に良好にするため、回路構成の規模が大きくなって高コストになるという問題があった。例えば図10のように、ファクシミリ送信処理では、空間フィルタ・絵文字分離処理部31から絵文字合成部38までの間の処理系が2系統になり、処理機能部が多くなる。
【0014】
この発明は上記の点に鑑みてなされたものであり、回路構成の規模を大きくせずに拡大コピー時の画像の画質を向上させること目的とする。
【0015】
【課題を解決するための手段】
この発明の複合装置は、上記の目的を達成するため、原稿の画像を読み取る画像読取手段と、その手段によって読み取った多値画像データの階調を補正する第1の階調補正手段と、その手段によって補正された画像データを変倍する変倍手段と、その手段によって変倍された画像データの解像度をMTF補正して文字領域と絵柄領域とに分離するMTF補正・絵文字分離手段と、その手段によって分離された文字領域と絵柄領域の各多値画像データをそれぞれ2値化データに変換する手段と、その手段によって変換された各2値化データを合成してファクシミリ送信する手段と、上記MTF補正・絵文字分離手段によって解像度が補正された全領域の多値画像データの階調を補正する第2の階調補正手段と、その手段によって補正された多値画像データを印刷する印刷手段を備え、上記画像読取手段によって読み取った多値画像データを印刷する場合は、上記多値画像データの階調を上記第1の階調補正手段のγ補正と上記第2の階調補正手段のγ補正との和による補正をし、且つ拡大印刷時には上記第2の階調補正手段において等倍の多値画像データで使用するγ補正のγ曲線で行う2値化よりもより2値化に近づけるクランク状カーブのγ曲線を用いて補正すると共に、上記画像読取手段によって読み取った多値画像データをファクシミリ送信する場合は、上記印刷する多値画像データにおける上記第1の階調補正手段で行うγ補正と同様な補正を行って、上記ファクシミリ送信する手段で送信するようにしたものである。
【0025】
【実施例】
以下、この発明の実施例を図面に基づいて具体的に説明する。
図1は、この発明の一実施例である複合装置の構成を示すブロック図である。この複合装置は、原稿センサ1,前段AMP・AD変換部2,スキャナ用(γ補正)ルックアップテーブル(LUT)3,電気変倍処理部4,空間フィルタ・絵文字分離処理部5を備えている。
【0026】
さらに、2値化処理部6,絵文字合成部7,データ圧縮処理部8,SAFメモリ部9,データ伸長/圧縮処理部10,モデム11,ネットワークコントロールユニット(NCU)12,多値ラインバッファ13,プロッタ用(γ補正)ルックアップテーブル(LUT)14,多値変調回路15,及びLD発光部16を備えている。
【0027】
原稿センサ1は、CCD等のラインセンサのスキャナであり、原稿の画像を読み取る画像読取手段に相当する。前段AMP・AD変換部2は、原稿センサ1によって読み取った画像をAD変換によって多値画像データに変換し、CCDセンサの素子間の感度のばらつきを補正するシェーディング補正を行なう。
【0028】
スキャナ用(γ補正)LUT3は、多値画像データに対してスキャナでの原稿濃度の補正として、センサ出力の対数変換や入力部での画像調子補正のためのγ補正を施し、多値画像データの階調を補正する。
その際、原稿から読み取った多値画像データの階調を、印刷時とファクシミリ送信時とで異なる補正テーブルを用いて補正し、印刷時には多値画像データの階調をなだらかに補正する。すなわち、上記の第1の階調補正手段に相当する。
【0029】
電気変倍処理部4は、スキャナ用(γ補正)LUT3によって補正された画像データを変倍する。すなわち、上記の変倍手段に相当する。
空間フィルタ・絵文字分離処理部5は、電気変倍処理部4によって変倍された画像データにMTF補正を施し、文字領域部分と写真等の絵柄領域部分とに分離する処理を行ない、変倍された画像データの解像度を補正して文字領域と絵柄領域とに分離するMTF補正・絵文字分離手段に相当する。
【0030】
2値化処理部6は、分離された文字領域と絵柄領域の各多値画像データをそれぞれ2値化データに変換する手段に相当する。
絵文字合成部7は、文字領域と絵柄領域の各2値化データを合成する処理を行なう。データ圧縮処理部8は、絵文字合成部7によって合成された2値化データを圧縮する。SAFメモリ部9は、データ圧縮処理部8によって圧縮された2値化データを格納する。
【0031】
データ伸長/圧縮処理部10は、SAFメモリ部9に格納された2値化データをファクシミリ送信のために圧縮する処理と、受信した画像データを伸長する処理を行なう。モデム11は、データ伸長/圧縮処理部10によって圧縮された画像データをファクシミリ通信のために変調し、受信した画像データを復調してデータ伸長/圧縮処理部10へ送る信号変換処理を行なう。
【0032】
NCU12は、電話通話とファクシミリ通信とを切り換える網制御処理を行なう。すなわち、上記7〜12の機能処理部は、2値化処理部6によって変換された各2値化データを合成してファクシミリ送信する手段に相当する。
多値ラインバッファ13は、空間フィルタ・絵文字分離処理部5によって解像度が補正された画像データを格納するメモリである。
【0033】
プロッタ用(γ補正)LUT14は、多値ラインバッファ13に格納された画像データ、つまり空間フィルタ・絵文字分離処理部5によって解像度が補正された全領域の多値画像データの階調をγ補正処理によって補正する。
その際、印刷時には多値画像データの階調を強調するように補正し、拡大印刷の際には印刷する多値画像データの階調を、等倍又は縮小印刷の場合よりも2値に近付けるように補正する。すなわち、上記の第2の階調補正手段に相当する。
【0034】
多値変調回路15は、プロッタ用(γ補正)LUT14によって補正された画像データを印刷するための信号に変換する多値変調処理を行なう。LD発光部16は、レーザダイオードによるレーザ光によって画像データによる画像を形成する。この形成された画像がトナーによって紙に印刷される。
【0035】
すなわち、上記多値変調回路15とLD発光部16は、プロッタ用(γ補正)LUT14によって補正された多値画像データを印刷する印刷手段に相当する。上記MTF補正とは、光学的な周波数特性の劣化などを2次元の空間フィルタで補正し、画像データの解像度を補正することである。
【0036】
次に、この複合装置におけるファクシミリ送信時の処理について説明する。
この処理は、原稿センサ1及び前段AMP・AD変換部2によって画像を読み取ると、スキャナ用(γ補正)LUT3でファクシミリ送信時に使用する補正テーブルのγ曲線を用いたγ補正処理によって、その読み取った多値画像データの階調を補正し、電気変倍処理部4によって変倍して、空間フィルタ・絵文字分離処理部5へ送る。
【0037】
空間フィルタ・絵文字分離処理部5ではその変倍後の画像データの解像度をMTF補正処理によって補正して文字領域と絵柄領域とに分離し、2値化処理部6によってその文字領域と絵柄領域の各多値画像データをそれぞれ2値化データに変換し、絵文字合成部7によってその各2値化データを合成する。
【0038】
その後、データ圧縮処理部8によってその合成された2値化データを圧縮してSAFメモリ部9に格納し、データ伸長/圧縮処理部10によってSAFメモリ部9に格納されたデータをファクシミリ送信のために圧縮し、モデム11によって変調してNCU12によって送信先へファクシミリ送信する。
【0039】
次に、この複合装置における印刷時の処理について説明する。まず、印刷時の初期設定処理について説明する。図2はその処理を示すフローチャートである。この処理では、ステップ(図中「S」で示す)1で拡大変倍コピー(印刷)か否かを判断して、拡大印刷ならばステップ2へ進んでプロッタ用(γ補正)LUTの拡大印刷用の補正テーブルのγ曲線をセットし、ステップ3へ進む。
【0040】
また、拡大印刷でなければステップ4へ進んでプロッタ用(γ補正)LUTの通常印刷(等倍又は縮小)用の補正テーブルのγ曲線をセットし、ステップ3へ進む。ステップ3ではその他の(印刷時の)モードを設定すると、初期設定を終了してコピー動作を開始する。図7にプロッタ用(γ補正)LUTの通常印刷用の補正テーブルのγ曲線を示し、図8にプロッタ用(γ補正)LUTの拡大印刷用の補正テーブルのγ曲線を示す。
【0041】
次に、印刷処理について説明する。まず、通常(等倍)印刷と縮小印刷時は、原稿センサ1及び前段AMP・AD変換部2によって画像を読み取ると、スキャナ用(γ補正)LUT3で印刷時に使用する補正テーブルのγ曲線を用いたγ補正処理によって、その読み取った多値画像データの階調をなだらかに補正し、電気変倍処理部4によって変倍して、空間フィルタ・絵文字分離処理部5へ送る。
【0042】
空間フィルタ・絵文字分離処理部5では、その変倍後の画像データの解像度をMTF補正処理によって補正して文字領域と絵柄領域とに分離し、多値ラインバッファ13に格納した後、プロッタ用(γ補正)LUT14によってその解像度が補正された全領域の多値画像データの階調を強調するように補正して、多値変調回路15及びLD発光部16によってその補正後の多値画像データを紙に印刷する。
【0043】
また、拡大印刷時は、プロッタ用(γ補正)LUT14によってその解像度が補正された全領域の多値画像データの階調を強調すると共に、等倍又は縮小印刷の場合よりも2値に近付けるように補正して、多値変調回路15及びLD発光部16によってその補正後の多値画像データを紙に印刷する。
【0044】
この複合装置は、空間フィルタ・絵文字分離処理部5がファクシミリ送信時の絵文字分離処理を前提にして電気変倍処理部4の後ろにあり、図10に示したように2系統の電気変倍処理部を持つ必要がないので、装置の回路構成を簡単にしてコストダウンすることができる。
【0045】
また、電気変倍処理部4の後に空間フィルタ・絵文字分離処理部5を設けたことにより、拡大コピー時に、変倍処理後ではMTF補正(フィルタ補正)が有効に働かなくなる弊害が生じる。しかし、プロッタ用(γ補正)LUT14で急峻なカーブのγ補正曲線に基づいて2値に近付ける補正を行なうことにより、変倍前のフィルタ挿入と同じようにMTF補正効果を上げることができ、充分にMTF補正を有効に働かせることができ、拡大コピー時の画質を保つことができる。
【0046】
さらに、空間フィルタ・絵文字分離処理部5の前にスキャナ用(γ補正)LUT3を設けたことにより、印刷時に、スキャナ用(γ補正)LUT3でγ曲線のカーブを急峻なカーブにした場合、空間フィルタ・絵文字分離処理部5のMTF補正によってこれが強調されて不自然な画像となる弊害が生じる。
【0047】
図3はスキャナ用(γ補正)LUT3に設定した急峻なカーブのγ曲線の一例を示す図、図4は図3のγ曲線のカーブがMTF補正によって強調されたときのγ曲線の図、図5はスキャナ用(γ補正)LUT3に設定したなだらかなカーブのγ曲線の一例を示す図、図6は図5のγ曲線のカーブがMTF補正によって強調されたときのγ曲線の図である。
【0048】
例えば、薄い白地肌部を全白にカットするために白に近いところのγ曲線のカーブを急峻なカーブに変化させると(図3の丸印で囲んだ部分)、MTF補正処理によってこの変化のカーブが強調されてしまい(図4の丸印で囲んだ部分)、コピー画像の白地肌に近い部分で等高線のような濃度の不連続点が発生することがある。
【0049】
しかし、スキャナ用(γ補正)LUT3において、図5に示すような傾斜が緩いγ曲線に基づいてγ補正をなだらかに行なって、その後のMTF補正による強調を回避し、プロッタ用(γ補正)LUT14において、図6に示すような傾斜が急なγ曲線に基づいて地肌表現のカットや全黒部クランプのような急峻なカーブのγ曲線によるγ補正を行ない、コピー時の画質を保つことができる。
【0050】
そして、ファクシミリ送信時にはスキャナ用(γ補正)LUT3によってのみγ補正を行ない、印刷時にはスキャナ用(γ補正)LUT3におけるγ補正とプロッタ用(γ補正)LUT14におけるγ補正とのAND(和)がγ補正となるので、印刷時とファクシミリ送信時とでは異なる補正テーブルを用いることにより、それぞれに応じたγ曲線を使用することができる。
【0051】
さらに、電気変倍処理部4における変倍処理は、周囲画素との補間演算によって行なうのでその補間演算方法にもよるが、拡大印刷時には隣接画素との濃度差がなだらかになる方向に作用する。したがって、多値レベルをそのまま変調して記録するコピーモードでは、MTF補正が効き難く白と黒のエッジにおいて画像ボケし易くなる弊害が生じる。
【0052】
しかし、拡大印刷時にはプロッタ用(γ補正)LUT14において、図8に示すようなクランク状カーブのγ曲線をセットすることにより、多値画像データの階調を等倍又は縮小印刷のときよりも少し2値表現に近付けるように補正し、画像ボケを起こさないようにすることができる。なお、通常(等倍又は縮小)印刷時には図7に示すようなγ曲線をセットする。
【0053】
この複合装置は、原稿から読み取った多値画像データの階調を補正し、その補正された画像データを変倍し、その変倍された画像データの解像度をMTF補正して文字領域と絵柄領域とに分離し、その分離された文字領域と絵柄領域の各多値画像データをそれぞれ2値化データに変換し、その変換された各2値化データを合成してファクシミリ送信する。また、解像度が補正された全領域の多値画像データの階調を補正し、その補正された多値画像データを印刷する。そして、上記読み取った多値画像データを印刷する場合は、上記多値画像データの階調を上スキャナ用(γ補正)LUT3のγ補正と上記プロッタ用(γ補正)LUT14のγ補正との和による補正をし、且つ拡大印刷時には上記プロッタ用(γ補正)LUT14において等倍の多値画像データで使用するγ補正のγ曲線で行う2値化よりもより2値化に近づけるクランク状カーブのγ曲線を用いて補正すると共に、上記読み取った多値画像データをファクシミリ送信する場合は、上記印刷する多値画像データにおける上記スキャナ用(γ補正)LUT3で行うγ補正と同様な補正を行ってファクシミリ送信する。
したがって、画像データの変倍後の解像度の補正が効かなくても印刷時の階調補正で2値化に近付けて画像ボケを充分抑えることができ、回路構成の規模を拡大せずに拡大コピー時の画像の画質を向上させることができる。
また、読み取った多値画像データの階調をなだらかに補正することによって、その後の解像度の補正による弊害を抑え、印刷する多値画像データの階調を強調するように補正することによって、地肌表現のカットや全黒部クランプ等の急峻な階調補正を行なうので、回路構成の規模を拡大せずにコピー時の画像の画質を良好にすることができる。
さらに、ファクシミリ送信時の階調補正を印刷時とは異ならすことができ、回路構成の規模を拡大せずにファクシミリ送信時の画像の画質を向上させることができる
の実施例の複合装置は、ファクシミリ送信時の2値化データの絵文字分離処理を最適な状態で行なえ、多値コピー時の画像の画質も維持することができる。
また、コピー画像の画質を低下させるマイナス要因をコストアップせずに除くことができる。さらに、ファクシミリ送信時の画像の画質をより良好にすることができる。さらにまた、拡大印刷時のコピー画像の画質を低下させるマイナス要因をコストアップせずに除くことができる。
【0054】
したがって、コピー時の画像の品質とファクシミリ送信時のハーフトーンの画像の品質とを最良に保ちながら、従来の装置における回路構成よりも簡単にすることができ、装置の信頼性を確保すると共にコストダウンをも達成することができる。
【0055】
【発明の効果】
以上説明してきたように、この発明による複合装置によれば、回路構成の規模を拡大せずにコピー時の画像の画質や、ファクシミリ送信時の画像の画質や、拡大コピー時の画像の画質を向上させることもできる。
したがって、装置のコストダウンと信頼性の向上をはかることができる。
【図面の簡単な説明】
【図1】この発明の一実施例である複合装置の構成を示すブロック図である。
【図2】この実施例の複合装置における印刷時の初期設定処理を示すフローチャートである。
【図3】図1のスキャナ用(γ補正)LUT3に設定した急峻なカーブのγ曲線の一例を示す図である。
【図4】図3に示すγ曲線のカーブがMTF補正によって強調されたときのγ曲線の図である。
【図5】図1のスキャナ用(γ補正)LUT3に設定したなだらかなカーブのγ曲線の一例を示す図である。
【図6】図5に示すγ曲線のカーブがMTF補正によって強調されたときのγ曲線の図である。
【図7】図1のプロッタ用(γ補正)LUT14の通常印刷用の補正テーブルのγ曲線を示す図である。
【図8】図1のプロッタ用(γ補正)LUT14の拡大印刷用の補正テーブルのγ曲線を示す図である。
【図9】従来の複合装置のデジタルコピー処理に係る主要な機能部を示すブロック図である。
【図10】従来の複合装置のファクシミリ送信処理に係る主要な機能部を示すブロック図である。
【符号の説明】
1:原稿センサ 2:前段AMP・AD変換部
3:スキャナ用(γ補正)ルックアップテーブル(LUT)
4:電気変倍処理部 13:多値ラインバッファ
5:空間フィルタ・絵文字分離処理部
6:2値化処理部 7:絵文字合成部
8:データ圧縮処理部 9:SAFメモリ部
10:データ伸長/圧縮処理部 11:モデム
12:ネットワークコントロールユニット(NCU)
14:プロッタ用(γ補正)ルックアップテーブル(LUT)
15:多値変調回路 16:LD発光部
[0001]
[Industrial applications]
The present invention relates to a multifunction peripheral having the functions of a digital copying machine and a facsimile machine.
[0002]
[Prior art]
2. Description of the Related Art In recent years, a digital copying apparatus that prints image data read by a document sensor such as a line image sensor on paper using laser light and records it has been put to practical use, and has begun to be used as a multifunction apparatus combined with a facsimile apparatus.
Such a multifunction device has the functions of a copying device and a facsimile device by itself, so it is cheaper than purchasing a copying device and a facsimile device separately, and because it does not take up installation space, it is increasingly used. It has come to be.
[0003]
Conventional multifunction devices often have a facsimile function added based on a digital copying device. FIG. 9 is a block diagram of main functions related to digital copy processing of a conventional multifunction peripheral, and FIG. 10 is a block diagram of main functions related to facsimile transmission processing of the multifunction peripheral.
[0004]
As shown in FIG. 9, in a digital copying process in a conventional multifunction peripheral, an image of a document is read by a document sensor such as a CCD and a video signal of the read multi-valued image data is subjected to shading correction by a shading correction circuit 20. The spatial filter processing circuit 21 corrects the resolution by MTF correction.
Further, gradation correction by gamma correction is performed by a gamma correction look-up table (LUT) 22, and thereafter, a scaling process is performed by an electric scaling unit 23, and the result is sent to a recording processing unit for printing.
[0005]
This uses a multi-level recording method in which multi-level image data (multi-level image signal) read from a document is directly guided to a multi-level modulation unit of a recording processing unit. In the digital copy processing using such a method, the reproducibility of the image of the original is important, and the resolution is not corrected by the spatial filter processing (MTF correction processing) before scaling the multi-valued image data. This is because when the image data is enlarged, the MTF correction does not work well and the resolution becomes poor, which may cause image blur.
[0006]
In addition, when the γ correction is performed on the multi-valued image data before the MTF correction processing is performed, and the input characteristics such as the cut of the background noise are suddenly changed by the γ correction, the changing portion of the γ curve in the γ correction is reduced. This is because the MTF correction is performed so as to emphasize the image, and there is a possibility that a streak such as a contour line is formed in the vicinity of the all-white clamped portion on the copy image and the image quality is deteriorated.
[0007]
On the other hand, in a facsimile transmission process in a conventional multifunction peripheral, as shown in FIG. 10, a document image is read by a document sensor such as a CCD, and a video signal of the read multi-valued image data is subjected to shading correction by a shading correction circuit 30. I do.
[0008]
Then, the spatial filter / pictogram separation processing unit 31 performs resolution correction by MTF correction, further separates the character area and the picture area of the image data, and converts the image data of the character area into a character γ correction look-up table (LUT) 32. Then, the image data of the picture area is sent to the picture γ correction look-up table (LUT) 35.
[0009]
The character γ correction LUT 32 performs gradation correction by γ correction on the image data of the character area, and then performs scaling by the electric scaling unit 33, and converts the image data into binary data by the binarization unit 34. This is sent to the pictograph combining section 38.
[0010]
Further, the picture γ correction LUT 35 performs gradation correction by γ correction on the image data of the picture area, and thereafter, the electric magnification processing section 36 changes the magnification, and the binarization processing section 37 converts the image data into binary data. And sends it to pictogram combining section 38.
Then, the binarized data of the character area and the pattern area are synthesized by the pictorial character synthesizing section 38, and the process proceeds to the facsimile transmission process.
[0011]
As described above, when multi-valued image data is binarized and facsimile-transmitted, the character portion is less likely to be blurred or resolved by performing pseudo halftone processing by dither processing or error diffusion processing during halftone.
[0012]
Therefore, if the pictorial character separation processing for separating the character part and the picture part of the image data is performed by the same functional unit as the spatial filter and the dither processing or the error diffusion processing is applied only to the picture area, the MTF processing is first performed on the image data. Since (filter processing) is included, there is no adverse effect caused by performing the MTF processing after the γ correction or the scaling processing.
[0013]
[Problems to be solved by the invention]
However, the conventional multifunction peripheral has a problem that the circuit configuration is large and the cost is high in order to improve both the quality of the image to be copied and the quality of the image to be transmitted by facsimile. For example, as shown in FIG. 10, in the facsimile transmission process, there are two processing systems from the spatial filter / pictogram separation processing unit 31 to the pictogram synthesizing unit 38, and the number of processing function units increases.
[0014]
The present invention has been made in view of the above, and an object thereof to improve the image quality of the image when enlarged copying without increasing the scale of the circuit configuration.
[0015]
[Means for Solving the Problems]
In order to achieve the above object, a multifunction device according to the present invention includes: an image reading unit that reads an image of a document; a first gradation correction unit that corrects a gradation of multi-valued image data read by the unit; Scaling means for scaling the image data corrected by the means, MTF correction / pictogram separation means for MTF- correcting the resolution of the image data scaled by the means to separate it into a character area and a picture area, Means for converting each of the multi-valued image data of the character area and picture area separated by the means into binary data, means for combining each of the binary data converted by the means, and facsimile transmission; A second gradation correction means for correcting the gradation of the multi-valued image data of the entire area whose resolution has been corrected by the MTF correction / pictogram separation means, and the multi-value corrected by the means Comprising a printing means for printing the image data, when printing multivalued image data read by the image reading means, gamma correction and the gradation of the first gray level correction means of the multi-value image data a the correction by the sum of the γ correction of the second gradation correction means, and at the time of large-size printing performed with γ curve correction γ to be used in multi-valued image data of Oite magnification to the second gray level correction unit 2 It is corrected using the γ curve of the crank-shaped curve closer to the binarization than valued, if the facsimile transmission multivalued image data read by the image reading means, the above in the multi-level image data to the print The same correction as the γ correction performed by the first gradation correction means is performed, and the data is transmitted by the facsimile transmission means .
[0025]
【Example】
Hereinafter, embodiments of the present invention will be specifically described with reference to the drawings.
FIG. 1 is a block diagram showing a configuration of a multifunction peripheral according to an embodiment of the present invention. This multifunction device includes a document sensor 1, a pre-stage AMP / AD converter 2, a scanner (γ-correction) lookup table (LUT) 3, an electric scaling unit 4, a spatial filter / pictogram separation unit 5, and the like. .
[0026]
Further, a binarization processing section 6, a pictorial character synthesis section 7, a data compression processing section 8, a SAF memory section 9, a data decompression / compression processing section 10, a modem 11, a network control unit (NCU) 12, a multi-level line buffer 13, It includes a plotter (γ correction) lookup table (LUT) 14, a multi-level modulation circuit 15, and an LD light emitting unit 16.
[0027]
The document sensor 1 is a scanner of a line sensor such as a CCD, and corresponds to an image reading unit that reads an image of a document. The pre-stage AMP / AD converter 2 converts an image read by the original sensor 1 into multi-valued image data by AD conversion, and performs shading correction for correcting variations in sensitivity between elements of the CCD sensor.
[0028]
The scanner (γ correction) LUT 3 performs γ correction for logarithmic conversion of a sensor output and image tone correction at an input unit as correction of document density at the scanner with respect to the multivalued image data. Is corrected.
At this time, the gradation of the multi-valued image data read from the document is corrected using different correction tables for printing and facsimile transmission, and the gradation of the multi-valued image data is gently corrected for printing. That is, it corresponds to the above-mentioned first gradation correction means.
[0029]
The electric scaling unit 4 scales the image data corrected by the scanner (γ correction) LUT 3. That is, it corresponds to the above-described zooming means.
The spatial filter / pictogram separation processing section 5 performs MTF correction on the image data scaled by the electrical scaling processing section 4 and separates the image data into a character area portion and a picture area portion such as a photograph, thereby performing scaling. MTF correction and pictographic character separation means for correcting the resolution of the image data to be separated into a character area and a picture area.
[0030]
The binarization processing unit 6 corresponds to a unit that converts each multi-valued image data of the separated character area and picture area into binary data.
The pictorial character synthesizing unit 7 performs a process of synthesizing each binarized data of the character area and the picture area. The data compression processing unit 8 compresses the binarized data synthesized by the pictorial character synthesis unit 7. The SAF memory unit 9 stores the binarized data compressed by the data compression processing unit 8.
[0031]
The data decompression / compression processing unit 10 performs a process of compressing the binarized data stored in the SAF memory unit 9 for facsimile transmission and a process of decompressing the received image data. The modem 11 modulates the image data compressed by the data expansion / compression processing unit 10 for facsimile communication, demodulates the received image data, and sends a signal to the data expansion / compression processing unit 10 for signal conversion.
[0032]
The NCU 12 performs a network control process for switching between telephone communication and facsimile communication. In other words, the function processing units 7 to 12 correspond to a unit that combines the binarized data converted by the binarization processing unit 6 and transmits the data by facsimile.
The multi-level line buffer 13 is a memory that stores the image data whose resolution has been corrected by the spatial filter / pictogram separation processing unit 5.
[0033]
The plotter (γ-correction) LUT 14 performs γ-correction processing on the image data stored in the multi-value line buffer 13, that is, the gradation of the multi-value image data of the entire area whose resolution has been corrected by the spatial filter / pictogram separation processing unit 5. To correct.
At that time, the gradation of the multi-valued image data is corrected so as to be emphasized at the time of printing, and the gradation of the multi-valued image data to be printed at the time of enlargement printing is closer to binary than at the same size or reduced printing. Correction as follows. That is, it corresponds to the above-mentioned second gradation correction means.
[0034]
The multi-level modulation circuit 15 performs a multi-level modulation process of converting the image data corrected by the plotter (γ correction) LUT 14 into a signal for printing. The LD light emitting unit 16 forms an image based on image data using laser light from a laser diode. The formed image is printed on paper with toner.
[0035]
That is, the multi-level modulation circuit 15 and the LD light emitting unit 16 correspond to a printing unit that prints the multi-level image data corrected by the plotter (γ correction) LUT 14. The MTF correction is to correct the deterioration of optical frequency characteristics by a two-dimensional spatial filter and to correct the resolution of image data.
[0036]
Next, a description will be given of processing at the time of facsimile transmission in the multifunction peripheral.
In this process, when an image is read by the original sensor 1 and the pre-stage AMP / AD converter 2, the image is read by a γ correction process using a γ curve of a correction table used for facsimile transmission by the scanner (γ correction) LUT 3. The gradation of the multi-valued image data is corrected, scaled by the electric scaling unit 4 and sent to the spatial filter / pictogram separation unit 5.
[0037]
The spatial filter / pictogram separation processing unit 5 corrects the resolution of the image data after scaling by MTF correction processing to separate it into a character area and a picture area, and a binarization processing unit 6 separates the character area and the picture area. Each multi-valued image data is converted into binary data, and the pictorial character combining unit 7 combines the binary data.
[0038]
After that, the binarized data synthesized by the data compression processing unit 8 is compressed and stored in the SAF memory unit 9, and the data stored in the SAF memory unit 9 by the data decompression / compression processing unit 10 is transmitted for facsimile transmission. The data is modulated by the modem 11 and facsimile-transmitted to the destination by the NCU 12.
[0039]
Next, a description will be given of processing at the time of printing in the multifunction peripheral. First, an initial setting process at the time of printing will be described. FIG. 2 is a flowchart showing the processing. In this process, it is determined in step (indicated by "S" in the figure) 1 whether or not enlargement / resize copying (printing) is to be performed, and if it is enlargement printing, the process proceeds to step 2 where enlargement printing of the plotter (γ correction) LUT is performed. Γ curve of the correction table is set, and the process proceeds to step 3.
[0040]
If the printing is not the enlargement printing, the process proceeds to step 4 to set the γ curve of the correction table for normal printing (actual size or reduction) of the plotter (γ correction) LUT, and then proceeds to step 3. In step 3, if other modes (at the time of printing) are set, the initial setting is finished and the copying operation is started. 7 shows a γ curve of a correction table for normal printing of the plotter (γ correction) LUT, and FIG. 8 shows a γ curve of a correction table for enlarged printing of the plotter (γ correction) LUT.
[0041]
Next, the printing process will be described. First, during normal (1 ×) printing and reduced printing, when an image is read by the original sensor 1 and the pre-stage AMP / AD converter 2, the scanner (γ correction) LUT 3 uses the γ curve of the correction table used for printing. The gradation of the read multi-valued image data is gently corrected by the γ correction processing, and is scaled by the electric scaling unit 4 and sent to the spatial filter / pictogram separation unit 5.
[0042]
The spatial filter / picture character separation processing unit 5 corrects the resolution of the image data after scaling by MTF correction processing to separate the image data into a character area and a picture area, and stores them in the multi-level line buffer 13 for plotter ( Gamma correction) The LUT 14 corrects the multivalued image data of the entire area whose resolution has been corrected so as to emphasize the gradation, and the multivalued modulation circuit 15 and the LD light emitting unit 16 convert the corrected multivalued image data. Print on paper.
[0043]
Also, at the time of enlargement printing, the gradation of the multi-valued image data of the entire area whose resolution has been corrected by the plotter (γ correction) LUT 14 is emphasized, and is closer to binary than in the case of equal-size or reduced-size printing. The multi-level modulation circuit 15 and the LD light emitting unit 16 print the corrected multi-level image data on paper.
[0044]
In this composite apparatus, the spatial filter / pictogram separation processing section 5 is located behind the electric scaling processing section 4 on the premise of the pictogram separation processing at the time of facsimile transmission, and as shown in FIG. Since it is not necessary to have a unit, the circuit configuration of the device can be simplified and the cost can be reduced.
[0045]
Further, since the spatial filter / pictogram separation processing section 5 is provided after the electric scaling processing section 4, there is a problem that the MTF correction (filter correction) does not work effectively after the scaling processing at the time of enlarged copying. However, by performing a correction approaching the binary value based on the steep curve γ correction curve in the plotter (γ correction) LUT 14, the MTF correction effect can be improved in the same manner as when the filter is inserted before scaling. The MTF correction can be made to work effectively, and the image quality at the time of enlarged copy can be maintained.
[0046]
Further, by providing the scanner (γ correction) LUT 3 in front of the spatial filter / pictogram separation processing unit 5, when the curve of the γ curve is sharpened by the scanner (γ correction) LUT 3 during printing, This is emphasized by the MTF correction of the filter / pictogram separation processing unit 5, resulting in an unnatural image.
[0047]
FIG. 3 is a diagram showing an example of a steep curve γ curve set in the scanner (γ correction) LUT 3, and FIG. 4 is a diagram of a γ curve when the γ curve in FIG. 3 is emphasized by MTF correction. 5 is a diagram showing an example of a gentle γ curve set in the scanner (γ correction) LUT 3, and FIG. 6 is a diagram of a γ curve when the γ curve in FIG. 5 is emphasized by MTF correction.
[0048]
For example, if the curve of a γ curve near white is changed to a steep curve in order to cut a thin white background part to all white (portion surrounded by a circle in FIG. 3), this change is performed by MTF correction processing. The curve may be emphasized (a portion surrounded by a circle in FIG. 4), and a discontinuity of density such as a contour line may occur in a portion of the copy image close to a white background.
[0049]
However, in the scanner (γ correction) LUT 3, the γ correction is performed gently based on the γ curve having a gentle slope as shown in FIG. 5 to avoid the subsequent MTF correction, and the plotter (γ correction) LUT 14. In this case, based on the γ curve having a steep slope as shown in FIG. 6, γ correction is performed using the γ curve of a steep curve such as the background expression cut or the all black part clamp, so that the image quality at the time of copying can be maintained.
[0050]
At the time of facsimile transmission, γ correction is performed only by the scanner (γ correction) LUT 3, and at the time of printing, the AND of the γ correction at the scanner (γ correction) LUT 3 and the γ correction at the plotter (γ correction) LUT 14 is γ. Since correction is performed, by using different correction tables for printing and facsimile transmission, it is possible to use γ curves corresponding to the respective correction tables.
[0051]
Further, since the scaling process in the electrical scaling unit 4 is performed by interpolation calculation with surrounding pixels, it depends on the interpolation calculation method. However, during enlargement printing, the density difference between adjacent pixels becomes gentler. Therefore, in the copy mode in which the multi-level level is directly modulated and recorded, the MTF correction is hardly effective and the image is easily blurred at the white and black edges.
[0052]
However, at the time of enlargement printing, by setting the gamma curve of the crank-shaped curve in the plotter (γ correction) LUT 14 as shown in FIG. Correction can be made so as to approach the binary expression, and image blur can be prevented. Note that a γ curve as shown in FIG. 7 is set at the time of normal (1: 1 or reduced) printing.
[0053]
This multifunction device corrects the gradation of multi-valued image data read from a document, scales the corrected image data, and MTF- corrects the resolution of the scaled image data to perform a character area and a picture area. The multivalued image data of the separated character area and picture area are converted into binary data, and the converted binary data are combined and transmitted by facsimile. Further, the gradation of the multi-valued image data of the entire area whose resolution has been corrected is corrected, and the corrected multi-valued image data is printed. When printing the read multi-valued image data, the gradation of the multi-valued image data is calculated by adding the γ correction of the upper scanner (γ correction) LUT 3 and the γ correction of the plotter (γ correction) LUT 14. Of the crank-shaped curve which is closer to the binarization than the binarization performed by the γ curve of the γ correction used in the same-size multi-valued image data in the plotter (γ correction) LUT 14 at the time of enlarged printing. When performing the correction using the γ curve and transmitting the read multi-valued image data by facsimile, the same correction as the γ correction performed by the scanner (γ correction) LUT 3 on the multi-valued image data to be printed is performed. Send by facsimile.
Therefore, even if the resolution of the image data after the magnification change is not effective, it is possible to approach the binarization by gradation correction at the time of printing to sufficiently suppress the image blur, and to enlarge the copy without increasing the scale of the circuit configuration. The image quality of the image at the time can be improved.
In addition, the gradation of the read multi-valued image data is gently corrected, thereby suppressing the adverse effects of the subsequent resolution correction, and correcting the gradation of the multi-valued image data to be printed so as to emphasize the gradation. , And sharp gradation correction such as clamping of all black parts is performed, so that the image quality of an image at the time of copying can be improved without increasing the scale of the circuit configuration.
Furthermore, it is possible to be different from the time of printing a gradation correction during transmission off Akushimiri, it is possible to improve the image quality of the image at the time of facsimile transmission without enlarging the scale of the circuit configuration.
Composite apparatus of this embodiment, performing the character separation process of the binary data of the facsimile sending optimally, it is possible to maintain the image quality of the image at the time of multi-level copy.
Further, it is possible to eliminate a negative factor that lowers the image quality of the copy image without increasing the cost. Further, the image quality of the image at the time of facsimile transmission can be improved. Furthermore, it is possible to eliminate a negative factor that degrades the image quality of a copy image at the time of enlarged printing without increasing costs.
[0054]
Therefore, it is possible to simplify the circuit configuration in the conventional apparatus while maintaining the quality of the image at the time of copying and the quality of the halftone image at the time of facsimile transmission at the best, and to secure the reliability of the apparatus and reduce the cost. Down can also be achieved.
[0055]
【The invention's effect】
As has been described, according to the multifunction apparatus according to the present invention, image quality and the copy when images without enlarging the scale of the circuit configuration, the image quality of image at the time of facsimile transmission, the image at the time of enlargement copy quality Can also be improved.
Therefore, the cost of the apparatus can be reduced and the reliability can be improved.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration of a multifunction peripheral according to an embodiment of the present invention.
FIG. 2 is a flowchart illustrating an initial setting process at the time of printing in the multifunction peripheral according to the embodiment.
FIG. 3 is a diagram showing an example of a steep curve γ curve set in a scanner (γ correction) LUT 3 of FIG. 1;
FIG. 4 is a diagram of a γ curve when the γ curve shown in FIG. 3 is emphasized by MTF correction.
FIG. 5 is a diagram showing an example of a gentle γ curve set in the scanner (γ correction) LUT 3 of FIG. 1;
6 is a diagram of a γ curve when the γ curve shown in FIG. 5 is emphasized by MTF correction.
7 is a diagram showing a γ curve of a correction table for normal printing of the plotter (γ correction) LUT 14 of FIG. 1;
8 is a diagram illustrating a γ curve of a correction table for enlarged printing of the plotter (γ correction) LUT 14 of FIG. 1;
FIG. 9 is a block diagram illustrating main functional units related to digital copy processing of a conventional multifunction peripheral.
FIG. 10 is a block diagram showing main functional units relating to facsimile transmission processing of a conventional multifunction peripheral.
[Explanation of symbols]
1: Document sensor 2: Pre-stage AMP / AD converter 3: Scanner (γ correction) lookup table (LUT)
4: Electric scaling unit 13: Multi-level line buffer 5: Spatial filter / pictogram separation processing unit 6: Binarization processing unit 7: Pictogram synthesis unit 8: Data compression processing unit 9: SAF memory unit 10: Data expansion / Compression processing unit 11: Modem 12: Network control unit (NCU)
14: Lookup table (LUT) for plotter (γ correction)
15: Multi-level modulation circuit 16: LD light emitting unit

Claims (1)

原稿の画像を読み取る画像読取手段と、該手段によって読み取った多値画像データの階調を補正する第1の階調補正手段と、該手段によって補正された画像データを変倍する変倍手段と、該手段によって変倍された画像データの解像度をMTF補正して文字領域と絵柄領域とに分離するMTF補正・絵文字分離手段と、該手段によって分離された文字領域と絵柄領域の各多値画像データをそれぞれ2値化データに変換する手段と、該手段によって変換された各2値化データを合成してファクシミリ送信する手段と、前記MTF補正・絵文字分離手段によって解像度が補正された全領域の多値画像データの階調を補正する第2の階調補正手段と、該手段によって補正された多値画像データを印刷する印刷手段とを備え、前記画像読取手段によって読み取った多値画像データを印刷する場合は、前記多値画像データの階調を前記第1の階調補正手段のγ補正と前記第2の階調補正手段のγ補正との和による補正をし、且つ拡大印刷時には前記第2の階調補正手段において等倍の多値画像データで使用するγ補正のγ曲線で行う2値化よりもより2値化に近づけるクランク状カーブのγ曲線を用いて補正すると共に、前記画像読取手段によって読み取った多値画像データをファクシミリ送信する場合は、前記印刷する多値画像データにおける前記第1の階調補正手段で行うγ補正と同様な補正を行って、前記ファクシミリ送信する手段で送信するようにしたことを特徴とする複合装置。Image reading means for reading an image of a document, first gradation correction means for correcting the gradation of the multi-valued image data read by the means, and scaling means for scaling the image data corrected by the means MTF correction / pictogram separation means for MTF- correcting the resolution of the image data scaled by the means to separate it into a character area and a picture area, and multi-valued images of the character area and the picture area separated by the means Means for converting the data into binary data, means for synthesizing each of the binary data converted by the means for facsimile transmission, and means for converting the entire area whose resolution has been corrected by the MTF correction / pictogram separation means. A second gradation correction unit for correcting the gradation of the multi-valued image data; and a printing unit for printing the multi-valued image data corrected by the unit. When printing a multi-valued image data read is the correct the gradation of the multi-valued image data by the sum of the γ correction γ correction and the second tone correcting means of the first gray level correction means and, and of the time of large-size printing crank shape curve closer to the binarization than binarization performed by the γ curve of the second tone correcting means used in the multi-value image data such as the magnification Oite the γ correction γ is corrected by using a curve, when transmitting facsimile multivalued image data read by the image reading means, similar correction performed γ correction and by the first gray level correction means in the multivalued image data to the printing And transmitting by the facsimile transmission means .
JP22788094A 1994-09-22 1994-09-22 Composite device Expired - Fee Related JP3545464B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP22788094A JP3545464B2 (en) 1994-09-22 1994-09-22 Composite device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP22788094A JP3545464B2 (en) 1994-09-22 1994-09-22 Composite device

Publications (2)

Publication Number Publication Date
JPH0898015A JPH0898015A (en) 1996-04-12
JP3545464B2 true JP3545464B2 (en) 2004-07-21

Family

ID=16867795

Family Applications (1)

Application Number Title Priority Date Filing Date
JP22788094A Expired - Fee Related JP3545464B2 (en) 1994-09-22 1994-09-22 Composite device

Country Status (1)

Country Link
JP (1) JP3545464B2 (en)

Also Published As

Publication number Publication date
JPH0898015A (en) 1996-04-12

Similar Documents

Publication Publication Date Title
US7684085B2 (en) Methods and apparatus for reconstructing digitized images
US8254672B2 (en) Image compressing method, image compressing apparatus and image forming apparatus
US8130410B2 (en) Image processing method, image processing apparatus, image forming system and recording medium readable by a computer
KR100757631B1 (en) Image processing apparatus and its method
US7869093B2 (en) Method and system for improved copy quality in a multifunction reprographic system
US20050213120A1 (en) Image data processing device, image data processing method, program, recording medium, and image reading device
US5305116A (en) Image transmission device
US6947170B2 (en) Image processing device and image processing method
JP5225201B2 (en) Image processing device
JP3545464B2 (en) Composite device
JP5052562B2 (en) Image processing device
JP2004112728A (en) Image processing apparatus
JP2004153817A (en) Method of forming output image by transforming input image
JP2004112140A (en) Image processing apparatus
JP3117331B2 (en) Image data processing device
JP2006011754A (en) Image processing device and image processing method
JP2004128664A (en) Image processor and processing method
JP5072907B2 (en) Image processing device
JP3888119B2 (en) Image processing device
JP2007174243A (en) Image processor, image forming apparatus, image reader, image processing method, program, and recording medium
JP3220217B2 (en) Facsimile machine
JP2976386B2 (en) Binary image scaling device
JPH07274017A (en) Picture processor
JP2001211318A (en) Device and method for image processing, storage medium, and image processing system
JP2004303276A (en) Image processor

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20031224

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040220

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040330

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040408

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080416

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080416

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090416

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees