JP3559746B2 - Image processing apparatus, image processing method, and storage medium - Google Patents

Image processing apparatus, image processing method, and storage medium Download PDF

Info

Publication number
JP3559746B2
JP3559746B2 JP2000047506A JP2000047506A JP3559746B2 JP 3559746 B2 JP3559746 B2 JP 3559746B2 JP 2000047506 A JP2000047506 A JP 2000047506A JP 2000047506 A JP2000047506 A JP 2000047506A JP 3559746 B2 JP3559746 B2 JP 3559746B2
Authority
JP
Japan
Prior art keywords
output
correction table
image data
unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000047506A
Other languages
Japanese (ja)
Other versions
JP2001238081A (en
Inventor
浩 蕪木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2000047506A priority Critical patent/JP3559746B2/en
Publication of JP2001238081A publication Critical patent/JP2001238081A/en
Application granted granted Critical
Publication of JP3559746B2 publication Critical patent/JP3559746B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、入力画像データを様々な出力装置や記憶装置に送信できる画像処理装置、画像処理方法及び画像処理プログラムが格納されたコンピュータ可読記憶媒体に関するものである。
【0002】
【従来の技術】
スキャナ、FAX、プリンタ、複写機の機能を兼ね備えたシステム装置としてMFP(マルチファンクションペリフェラル)がある。MFPは小スペース、高生産性という長所があり、広く利用されてきている。また、近年MFPは他のMFP、プリンタ等の出力装置やPCとネットワーク接続し、利用されることが多くなってきている。この様な環境下では、読み取られた画像データを他の出力装置に送信したり(リモートコピー)、複数の出力装置で出力したり(重連コピー)といった使い方が可能である。また、読み取った画像データは、PCやMFP内の記憶装置(RAMやHDD)に送信し保存、管理することができ、ディスプレイで保存された画像を表示することができる。
【0003】
しかし、ネットワークで接続された出力装置は、プリンタは勿論、MFPにおいても送信側のMFPとは異なる機種である場合が多い。また、同じ機種であっても、使用される環境や頻度か異なっている。この為、これら出力装置はそれぞれ異なる出力濃度特性を持ち、読み取った画像データをそのまま送信すると、適切な出力画像が得られないことがある。
【0004】
この問題に対処するために、画像データを送信する際、送信側の装置で読み取られた画像データを送信先の装置の特性に応じて、送信側の装置内で補正して送信する方法がある。
【0005】
従来の画像データの補正法の具体例を図7、図8を用いて説明する。
【0006】
図7は出力装置における濃度特性を表すものである。縦軸が出力濃度を示しており、”0”が白、”255”辺りがべた黒を表している。横軸がプリンタに送信する入力データ値を示しており、”0”が白、”255”が黒である。このグラフに示した700の破線が理想とするリニアな出力濃度特性である。これは、入力データがリニアな場合、プリントアウトしたときの出力濃度特性もリニアになることを示している。
【0007】
しかし、出力装置は環境や使用頻度の影響で、その濃度特性が701や702や703のように変化する。従って、出力したときの濃度特性をリニアにするには、濃度補正テーブルにより濃度データを補正する必要がある。
【0008】
リニアリティを補正する濃度補正テーブルについて、図8を用いて説明する。図8において横軸、縦軸は、図7と同じである。801に示す特性が特性701の特性を補正する為のものであり、特性701と特性801は破線のリニアな特性を軸に対象な形になっている。同様に802に示す特性は特性702を補正する為のものであり、803に示す特性は特性703を補正する為のものである。濃度補正テーブルはこれら特性801、802、803の値をテーブル化したものである。これら濃度補正テーブルを用いることにより、出力データのリニアリティを補正することができる。
【0009】
次に読み取った一つの画像データを、ネットワークに接続された複数の出力先に送信する場合の補正法を説明する。
【0010】
例えば、図7において、特性700と同じ入力データを別のプリンタに送信した場合、データを送信するMFPが同じ機種であっても、使用頻度や設置された環境で、出力濃度データは特性701のようになったり、特性702のようになる場合がある。さらに、プリンタの機種が異なると、特性703のようになることもある。従って、画像データを特性801の濃度補正テーブルで濃度補正を行なって送信した場合、特性701を持つ出力装置ではリニアな出力特性になるが、特性702や特性703を持つ出力装置に送信すると、出力装置毎にリニアリティの補正量が足りないことや、逆におかしなリニアリティになることがある。
【0011】
つまり、ある特定のMFPから読み取った画像を、様々な出力装置に同一の画像補正テーブルで濃度補正をおこなってデータを送信すると、それぞれの出力装置に適した画像補正が行なわれないため、リニアな濃度特性を持つ出力画像が得られない。
【0012】
そこで、それぞれの出力機器の濃度特性に応じた補正テーブルを設定し、読み取り画像をこの補正テーブルを用いて補正し、送信する方法がある。つまり、まず読み取り画像を特性701をもつ出力装置に出力する場合、濃度補正テーブルを特性801の補正テーブルに設定し濃度補正を行ない、次に特性702をもつ出力装置に出力する場合、特性802の補正テーブルに設定、補正し、次に、同様に特性703の場合、特性803の補正テーブルを用いて補正する。
【0013】
送信先装置の濃度特性に応じて送信側で画像データの濃度補正を行なって送信する従来技術として、特開平9−83800号公報が知られている。
【0014】
特開平9−83800号公報では、送信先装置の濃度再現時特性データを取得し、それを基に輝度濃度変換テーブルを作成し、送信先に応じて輝度濃度変換を行なっている。
【0015】
このように、特開平9−83800号公報に開示の技術によれば、送信相手装置に最適な濃度補正を行なうことが可能となる。
【0016】
【発明が解決しようとする課題】
しかしながら、PCやHDDに画像データを送信することが要求される場合があるが、この場合、送信した画像をディスプレイで表示するのか、紙に出力するかを送信側装置では理解することができない。
【0017】
従って、紙に出力するための濃度補正を行ない、その補正されたデータをディスプレイに表示するとリニアリティが崩れた画像となってしまい、逆にディスプレイに表示するための濃度補正を行ない、その補正されたデータに基づき紙に画像を出力するとその場合もリニアリティが崩れた画像になってしまうといった欠点があった。
【0018】
本発明は上述した従来の課題を解決するものであり、送信先としてPCやHDDが選択された場合においても、送信先である程度リニアリティに優れた高画質な画像を表示もしくは紙出力することができる画像処理装置の提供を目的とする。
【0019】
【課題を解決するための手段】
上記目的を達成するために、本発明の画像処理装置では、画像データを入力する入力手段と、前記入力手段により入力された画像データの入出力特性を補正テーブルに基づいて変換する変換手段と、前記変換手段で変換された画像データを出力部に出力する出力手段と、ネットワークを介して、前記変換手段で変換された画像データを前記出力部とは異なる出力部、或いは記憶部に送信する送信手段と、画像データの出力先、或いは送信先に応じて前記変換手段の補正テーブルを選択する選択手段と、を有する画像処理装置であって、前記変換手段は、前記出力の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを有し、前記選択手段は、画像データを前記出力部に出力する場合前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする。
【0020】
又、本発明の画像処理方法では、画像データを入力する入力工程と、前記入力工程により入力された画像データの入出力特性を補正テーブルに基づいて変換する変換工程と、前記変換工程で変換された画像データを出力部に出力する出力工程と、ネットワークを介して、前記変換工程で変換された画像データを前記出力部とは異なる出力部、或いは記憶部に送信する送信工程と、画像データの出力先、或いは送信先に応じて前記変換工程で用いられる補正テーブルを選択する選択工程と、を有する画像処理方法であって、前記変換工程は、前記出力部の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを有し、前記選択工程は、画像データを前記出力部に出力する場合は前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする。
【0021】
又、本発明のコンピュータ可読記憶媒体では、画像処理方法のプログラムが格納されたコンピュータ可読記憶媒体であって、入力された画像データの入出力特性を補正テーブルを用いて変換する変換コードと、前記変換工程で変換された画像データを画像出力部で出力する出力コードと、ネットワークを介して、前記変換コードで変換された画像データを前記画像出力部とは異なる出力部、或いは記憶部に送信する送信コードと、画像データの出力先、或いは送信先に応じて前記変換コードが用いる補正テーブルを選択する選択コードと、を有し、前記変換コードは、前記出力部の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを用い、前記選択コードは、画像データを前記出力部に出力する場合は前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする。
【0022】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
【0023】
まず、本実施の形態で行なわれるデータ送信の概要を図1、4を用いて説明する。
【0024】
図1は、本発明の実施の形態に係るデータ送信の概略を示す図である。また、図4は、本実施の形態において機器がネットワーク接続された環境を示す図である。
【0025】
図1のように、一つのMFPから他のMFP、プリンタといった様々な出力装置や、PC、MFPの内蔵HDD等の記憶装置に画像データを送信する場合について説明する。
【0026】
ネットワークは図4のようなリング型とし、様々な出力装置や、PCが接続されているものとする。本実施の形態では、リング接続で説明しているが、本発明はこれに限定したものではなく、バス状に接続されたものやスター状に接続されたネットワークでも、図1と同様な構成が可能であることは言うまでもない。
【0027】
図1において、MFP100は、画像データの送信を行なうMFPであり、スキャナとプリンタとネットワーク接続の機能を兼ね備えている。読み取り機能については、画像はモノクロ、カラーどちらも読み取ることができ、プリンタ機能については、モノクロのみの出力が可能であるとする。
【0028】
また、MFP100はスキャンしたデータを自分自身のプリンタに出力することも、ネットワーク接続された他のプリンタ、MFP等の出力装置やPC等の記憶装置にも送信することができる構成となっている。
【0029】
さらに、MFP100は装置内に内蔵HDD103を備えており、読み取った画像を保存し、保存された画像データはネットワーク接続されたPCのディスプレイで表示させることができる。
【0030】
MFP101やMFP102は、MFP100と同種のMFPであり、ネットワーク接続されており、データを送信するMFP100とは離れた場所に設置されている。
【0031】
MFP106はMFP100、101、102とは機種の異なる、ネットワークに接続されたMFPである。
【0032】
プリンタ105も、同じくネットワーク接続されているもとする。
【0033】
PC104は、ネットワーク接続されており、送信された画像データは、PC104内のHDDやRAM等の記憶装置に記憶される。
【0034】
MFP100の内蔵HDD103は、MFP100で読み取った画像データ、或いはネットワークを介して送信されてきた画像データを記憶する記憶装置である。
【0035】
画像データを送信するMFP100において、送信される画像データは2値の場合と多値の場合、また輝度データの場合と濃度データの場合とがある。本実施の形態では、カラー画像の場合多値の輝度データで送信し、モノクロ画像の場合2値の濃度データで送信するものとする。
【0036】
ここで、2値の画像データと多値の画像データの違いについて説明する。2値の画像データは、“0”、“1”の2つの値からなる1bitの画像データであり、多値データに比べて少ないデータ量で送信することができる。本実施の形態において、MFP100は全ての出力装置や記憶装置に対して、2値の濃度データで送信できるものとする。
【0037】
多値の画像データは、3以上の値を持つ画像データであり、本実施の形態では“0”から“255”までの値をもつ8bitの画像データである。本実施の形態では、カラー画像を多値の輝度データで送信するものとする。多値の輝度データは、送信後、様々な出力装置や表示装置の特性に応じて補正が可能である。つまり、多値の輝度データは、補正を行なわず出力装置に送信し、出力装置側で補正を行ない、出力することができる。また、同様にPCに送信する際も、補正しない多値の輝度データをPCに送信する。PCでは多値の輝度データを格納し、後で出力する際はPC内で特性の補正を行なうことができる。
【0038】
また、本実施の形態では、多値の輝度データ(カラー画像)はMFP100内でγ補正を行ない、送信することもできる構成にしている。
【0039】
多値の輝度データをγ補正する際のユーザーによる操作を図9で説明する。図9は、操作部上(図示せず)から、ユーザーモード(図示せず)を選択した後に、901に示す共通使用設定を選択して902に示す“カラー送信のガンマ値”を選択した様子をあらわしている。
【0040】
図9に示した“カラー送信のガンマ値”枠902内の、“γ1.0”、“γ1.4”、“γ1.8”、“γ2.2”を選択することにより、ディスプレイ表示重視のγ特性か、プリントアウト重視のγ特性かを選択できる構成となっている。
【0041】
図9の“γ2.2”を選択した場合が、ディスプレイでの表示を重視したものに相当する。また、“γ1.0”を選択した場合が、プリントアウトしたものを観察することを重視したものに相当する。これらの、中間にあたるものが、“γ1.4”や“γ1.8”となる。“γ1.8”がプリントアウトを考慮したディスプレイ表示重視のものであり、“γ1.4”がディスプレイ表示を考慮したプリントアウト重視のものである。ユーザーは多値の輝度データを送信する際は上述した画面で選択し、送信することができる。
【0042】
しかし、実際のMFPの利用状況を考えると、モノクロ画像、つまり2値の濃度データでの出力が多く、また、装置に負担がかからないという意味でも2値の濃度データの送信が好ましい場合が多い。読み取った画像を2値の画像データに変換した後送信する場合、画像データの補正は、送信先の装置側ではできず、送信元のMFP内で、2値化する前の多値の濃度データに対してしか行うことができない。
【0043】
そこで本実施の形態では、この多値の濃度データに対して、送信先の種類や用途に応じて、3つの濃度補正テーブルで補正を行ない、その後で2値化し送信する構成とした。
【0044】
まず1つめは、送信するMFP100自身のプリンタ機能で出力する場合の補正テーブル1である。スキャナとプリンタとが一体になったMFP100では、読み込んだデータの出力特性を予め把握可能である。この出力特性に基づいた補正テーブル1の値の決め方を図10で説明する。
【0045】
図10において、縦軸、横軸は図7、8と同じである。MFP100のプリンタ部205の出力特性は図10の特性1002であるとする。従って、MFP100では、特性1002について、リニアな特性を示す特性1001に対称な特性1003で補正を行なう。補正テーブル1はこの特性1003をテーブル化したものとする。
【0046】
また、図8で説明したように、プリンタが置かれた環境やドラムの消耗状態などに応じて、濃度補正テーブルを変えてリニアな特性が常に得られるように補正することも可能である。
【0047】
次に2つめは、ネットワークで接続されたその他のMFP101、102、106やプリンタ105等の出力装置に送信する場合の補正テーブル2である。MFP101やMFP102は、MFP100と同種のMFPであるが、MFP100とは離れた場所に設置されている。その為、設置された環境やドラムの消耗状態等により変化したMFPの濃度特性が把握できない状態となっている。
【0048】
同様に、プリンタ105や、機種の異なるMFP106は、その濃度特性を知ることができない。本実施の形態では、これら出力装置に画像を送信する際は、複数の出力装置の濃度特性の平均として得られえた特性曲線をテーブル化したものを、様々な出力装置に対応できる平均的な補正テーブル(図示せず)として予め設定しておく。このテーブルを補正テーブル2とし、この補正テーブルを用いることで、どの出力装置においても、ある程度適切な出力画像を得ることができる。
【0049】
最後3つめは、本実施の形態のポイントとなるPC104やMFP100のHDD103等の記憶装置に送信する場合の補正テーブル3である。PC104やMFP100の内蔵HDD103等の記憶装置に送信する場合、その後、PC104あるいはMFP100上のディスプレイを用いて記憶装置内の画像を表示する使い方と、この画像を出力装置に送信し、プリントアウトさせるという2つの使い方が考えられる。
【0050】
本実施の形態では、PC104やMFP100の内蔵HDD103等の記憶装置に送信する場合に関しては、次の図11の特性により決定した濃度補正テーブルを用いて、データを補正して送信を行なう。
【0051】
図11は補正のための特性曲線を表すものであり、縦軸、横軸は図7、8、12と同じである。特性1102が出力に適する特性曲線であり、本実施の形態で特性1102は、補正テーブル1の特性1003と同一の、MFP100自身のプリンタ部で出力する際に用いる特性曲線である。特性1101が表示に適した、つまり補正を行なわない特性直線である。この時、出力に適した特性1102と表示に適した特性1101との平均値をとって特性1103が決定される。この特性1103をテーブル化したものを補正テーブル3とする。
【0052】
また、濃度補正テーブル3は補正テーブル1と特性がリニアな補正テーブルの平均値をとった補正テーブルと言い換えることができる。
【0053】
補正テーブル3を用いて、画像データの出力にも表示のもどちらにも対応した画像データを生成することができる。
【0054】
これら3つの濃度補正テーブルを送信先装置に応じて切り替えて画像データを補正することにより、ネットワーク接続された様々な出力装置や表示装置のどちらでも、ある程度適切な特性をもつ出力画像を得ることを可能とした。
【0055】
次に画像データを送信するMFP100の構成について説明する。
【0056】
図2は本発明の実施の形態におけるMFP100の構成を示すブロック図である。
【0057】
画像読み取り部209は、原稿200よりの反射光を集光するレンズ201、レンズ201を介して入力された光を入力して電気信号に変換するCCDセンサ202、CCDセンサ202から出力された信号を処理するアナログ信号処理部203等を備えている。
【0058】
これによりレンズ201を介してCCDセンサ202に結像された原稿画像が、CCDセンサ202によりアナログ電気信号に変換される。こうして変換された画像情報は、アナログ信号処理部203に入力され、サンプル&ホールドされ、ダークレベルの補正等が行われた後、アナログ・デジタル変換(A/D変換)されてデジタル画像信号として出力される。このようにして出力されたデジタル画像信号は、画像処理部204に入力される。
【0059】
画像処理部204では、シェーディング補正や本実施の形態のポイントを含むγ補正等の読み取り系で必要な補正処理や、スムージング処理(図示せず)、エッジ強調処理(図示せず)、2値化処理、その他処理、加工等が行われ、その処理された画像データはプリンタ部205、或いはネットワーク214に入力される。
【0060】
プリンタ部205は、例えば、レーザビームプリンタやLEDプリンタ等のプリンタ装置で、例えば、レーザビームプリンタの場合は、半導体レーザを備えた露光制御部(図示せず)、画像形成部(図示せず)、転写紙の搬送制御部等により構成され、入力された画像信号により転写紙上に画像を記録する。
【0061】
ネットワーク214は、図1のプリンタ105、MFP101、102、106等の出力装置や、RAM、HDD等の記憶装置と接続しており、画像処理部204から出力された画像データはネットワーク214を介して、これら出力装置や記憶装置に送信可能な構成となっている。
【0062】
CPU回路部210は、CPU206、CPU206により実行される制御プログラムや各種データ等を記憶するROM207、CPU206の処理時にワークエリアとして使用され、各種データや送信先に対応した補正テーブル値を一時的に保持するRAM208等を備え、前述の画像読み取り部209、画像処理部204、プリンタ部205、操作部213等を制御し、本実施の形態における画像形成装置の制御シーケンスを統括的に制御する。さらに画像処理部204からの出力データを、プリンタ205で出力するのか、ネットワーク214を介してデータを送信するのかを制御する。
【0063】
操作部213は、MFP100のタッチパネル上に文字を表示したり、ユーザーが設定した情報を一時的に保持するRAM211や、記憶しておくROM212を備えている。
【0064】
ユーザーによって操作部213で設定された情報は、CPU回路部210を介して、画像読み取り部209、画像処理部204、プリンタ205などに送られる構成となっている。
【0065】
次に、本実施の形態の主要部である画像処理部204の詳細を、図3を用いて説明する。
【0066】
図2のアナログ信号処理部203より出力されるデジタル画像信号は、シェーディング補正部301に入力される。
【0067】
シェーディング補正回路部301では、原稿を読み取るセンサーのばらつき及び、原稿照明用ランプの配光特性の補正が行われ、補正が行なわれた画像データはγ補正部302に入力される。
【0068】
γ補正部302では、送信する画像データが多値の輝度データの場合、γ補正による輝度データの調整が行われる。送信する画像データが2値の濃度データの場合、γ補正部302はスルーされる。
【0069】
輝度濃度変換部303では、γ補正部302から出力された画像データをLog変換により、輝度信号から濃度信号へと変換を行っている。
Log変換における変換式は、以下の通りである。
D=−255×LOG(in/255)÷Dmax (1)
上式のinがγ補正部302からの出力画像データの輝度信号、Dが輝度濃度変換部303からの出力される変換された濃度信号、Dmaxは最大濃度であり、実際の出力装置等の測定濃度から決定される。入出力は、8bitを想定している為、0,255でクリップしている。ここで濃度への換算式は(1)式に限られるものではなく、他の換算式を用いても構わない。
【0070】
輝度濃度変換された画像データは濃度補正部304に入力される。濃度補正部304では、輝度濃度変換された濃度データの濃度特性の補正処理をおこなう。これは、テーブルとなっており、入力8bit/出力8bitのメモリで構成されている。具体的なテーブルの値は、図11に示した特性1101や特性1102や特性1103のようなデータ値が格納されている。
【0071】
後述する操作により、操作部213の設定に応じてCPU回路210が濃度補正部304へ送信先毎に異なる濃度補正テーブルを設定する。
【0072】
補正処理された画像データは2値化部305で多値の濃度データから、2値の濃度データに2値化された後、画像処理部204から出力され、プリンタ205、或いはネットワーク214に入力され、処理される。
【0073】
尚、ここまで画像データを2値の濃度データを送信する場合として説明してきたが、多値の輝度データを送信する場合は、輝度濃度変換部303、濃度補正部304、2値化部305はスルーされる。
【0074】
次に、前述した画像処理部204に係る操作部213の詳細について、図4、5、6を用いて説明する。
【0075】
500がMFP100上の操作部全体を示したものであり、501に示す枠内に表示されたものが、送信可能なMFPやプリンタやPCなどの一覧である。これは、502に示す送信先と503に示すIPアドレスといった項目で管理されている。
【0076】
504のチェックは読み取った画像データをMFP100に送信することを意味する。
【0077】
506は、画像を読み取る際の拡大率を示しており、507は読み取る画像サイズ、508は読み取り枚数を表している。また、505は、データの送信状態を表すもので、送信に失敗したときなどにメッセージが表示されるものである。
【0078】
501に示す枠内に表示されている機器は、図4に示したようにリング状にネットワーク接続されている出力装置や記憶装置である。
【0079】
図6における送信先のチェック504、600、601、602は、図4における矢印504、600、601、602にそれぞれ対応している。
【0080】
このようにネットワーク上に接続された機器は、データを送る送り手となるMFP100に事前登録されており、同時にそれぞれの機器に必要なデフォルト濃度補正テーブル値である補正テーブル1、2、3も事前登録されている。これらの登録データは、図2のRAM211やROM207やRAM208に保持されている。
【0081】
以下、図6の操作部の表示ように、チェック504、600、601、602と複数送信先が選択された場合の原稿を読み取り、送信するまでの処理の流れを説明する。
【0082】
図12、13はそれぞれ、多値の輝度データと2値の濃度データを送信する際の処理の流れを説明するフローチャートである。まず、多値の輝度データを送信する場合を、図3、6を参照しながら図12で説明する。
【0083】
まず、図6のように枠内501において、チェック504、600、601、602のように出力する機器を設定する(S1201)。
【0084】
多値の輝度データの場合は、図9に示したようにγ値を必要に応じて設定する。次に、まだ出力先があるかを判断し(S1202)、ある場合は、画像読み取り部209で画像を読み取る(S1203)。
【0085】
読み取られた画像をシェーディング補正回路部301でシェーディング補正し、ガンマ補正部302でユーザーの設定に応じたテーブルで補正する(S1204)。その後、輝度濃度変換部303、濃度補正部304、2値化部305はスルーさせ、それぞれの出力装置に送信する(S1205)。
【0086】
次に再びS1202に戻り、同様の手順で処理を行なう。選択された送信先に全て送信されると、処理は終了する。
【0087】
次に本実施の形態のポイントである、2値の濃度データを送信する場合についての処理の流れを、図3、6を参照しながら図13を用いて説明する。
【0088】
まず、多値の輝度データを送信する場合と同じように、図6における枠内501で、504、600、601、602のように出力する機器を設定する(S1301)。
【0089】
2値の濃度データを送信する場合、図9のようなγ値の設定はできないものとする。次に出力先の有無を判断し(S1302)、ある場合は画像を読み取る(S1303)。
【0090】
読み取られた画像を図3におけるシェーディング補正回路部301でシェーディング補正する。
【0091】
ここまでは、多値の輝度データを送信する場合と同じであるが、次のステップより、本実施の形態のポイントとなる処理を行なう。まず、シェーディング補正回路部301の出力データをγ補正部302をスルーさせ、輝度濃度変換部303で多値の輝度データから、多値の濃度データに変換する(S1304)。
【0092】
次に、送信先がMFP100自身のプリンタ部での出力か(504)、PC105やMFP100内蔵のHDD103等の記憶装置であるか(600、602)、プリンタ105やMFP101であるか(601)に応じて、多値の濃度データに対して異なる処理を行なう(S1305)。
【0093】
まず、MFP100自身のプリンタ部205で出力する場合(504)、CPU回路部210が504で選択されたMFP100(IPアドレス150.72.22.2)に対応した濃度補正テーブルをROM207あるいはRAM208から引き出し、濃度補正テーブルを濃度補正部304に設定する(S1306)。ここで、MFP100は送信するMFP自身での出力であるので、前述したように、図11に示す特性1102をテーブル化した補正テーブル1を設定する。多値の濃度データは補正テーブル1により濃度補正される。
【0094】
さらに、濃度補正処理を行なった多値の濃度データを、2値化部305で2値化し(S1309)、2値化した濃度データをプリンタ部205へ送信する(S1310)。
【0095】
次にMFP101やプリンタ105で出力する場合(600、602)の処理であるが、まず、CPU回路部210は、前述した平均的な濃度補正テーブル2を読み出し、補正部304に設定し、多値の濃度データは濃度補正される(S1307)。
【0096】
そして、補正された多値の濃度データはS1309において2値化され、出力装置に送信される(S1310)。
【0097】
送信先がPC104やMFP内蔵のHDD103等の記憶装置である場合、多値の濃度データは、前述した記憶装置への送信に対応した濃度補正テーブル3により補正をおこない(S1308)、2値化し(S1309)、記憶装置に送信される(S1310)。
【0098】
送信先に応じてこれらの処理のいずれかを行ない、再びS1302に戻り、まだ送信先が残っている場合は、S1303に進み画像読み取り、補正、送信等の処理を行ない、送信先が無くなった場合は処理を終了する。
【0099】
本実施の形態では、送信先毎に画像読み取りを行ない、画像読み取りのたびにCPU回路部210が必要な濃度補正テーブルを濃度補正部304に設定する。つまり、本実施の形態では、4つの送信先が選択されているので、4回画像読み取りをおこない画像読み取り毎に濃度補正テーブルを4回設定することになる。
【0100】
以上説明したように、本実施の形態によれば、送信先装置に応じて濃度補正テーブルを変化させ画像データを補正することができ、特にPCやHDD等の記憶装置に送信する際、2値の濃度データをリニアな補正テーブルと出力特性に対応した補正テーブルの中間テーブルで補正し、データを送信することで、その後、ディスプレイでの表示、或いはプリンタ、MFP等の出力装置への出力のどちらが選択された場合においても、送信先である程度リニアリティに優れた高画質な画像を表示もしくは紙出力することができるという効果がある。
【0101】
本発明は、上述した実施形態の装置に限定されず、複数の機器から構成されるシステムに適用しても、1つの機器から成る装置に適用してもよい。前述した実施形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体をシステムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、完成されることは言うまでもない。
【0102】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。プログラムコードを供給するための記憶媒体としては、例えば、フロッピーディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROMを用いることができる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけではなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOSなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0103】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書きもまれた後、次のプログラムコードの指示に基づき、その拡張機能を拡張ボードや拡張ユニットに備わるCPUなどが処理を行って実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0104】
【発明の効果】
以上説明してきたように、本発明によれば、MFPの内部HDDやPCのHDD等の記憶装置に読み取り画像を送信するといったその後の使用法や出力先が分からない場合にも、リニアな補正テーブルと出力特性に対応した補正テーブルの中間の補正テーブルで画像を補正し送信することにより、ディスプレイ上で違和感のない表示ができ、かつある程度紙への出力にも適する画像データを得ることができるという効果がある。
【図面の簡単な説明】
【図1】本発明の実施の形態におけるデータ送信の概略を示す図である。
【図2】本発明の実施の形態におけるMFPの構成を示すブロック図である。
【図3】本発明の実施の形態におけるMFPの画像処理部の構成を示すブロック図である。
【図4】本発明の実施の形態において機器がネットワーク接続された環境を示す図である。
【図5】本発明の実施の形態におけるMFPの操作部を示す図である。
【図6】本発明の実施の形態におけるMFPの操作部で複数の送信先を選択した場合を示す図である。
【図7】様々な出力装置の濃度特性を示すグラフである。
【図8】図7の濃度特性を補正する特性曲線を示すグラフである。
【図9】本発明の実施の形態においてγ補正を行なう際の操作部を示す図である。
【図10】補正テーブル1の決め方を説明するグラフである。
【図11】補正テーブル3の決め方を説明するグラフである。
【図12】本実施の形態における多値の輝度データを送信する際の処理の流れを示すフローチャートである。
【図13】本実施の形態における2値の濃度データを送信する際の処理の流れを示すフローチャートである。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing apparatus capable of transmitting input image data to various output devices and storage devices.Readable storage medium storing image processing method and image processing programIt is about.
[0002]
[Prior art]
There is an MFP (multifunction peripheral) as a system device having the functions of a scanner, a facsimile, a printer, and a copier. MFPs have the advantages of small space and high productivity, and have been widely used. In recent years, MFPs have been increasingly used by being network-connected to other MFPs, output devices such as printers, and PCs. Under such an environment, it is possible to use the read image data such as transmitting it to another output device (remote copy) or outputting it with a plurality of output devices (multiple copy). Further, the read image data can be transmitted to a storage device (RAM or HDD) in a PC or MFP, and can be stored and managed, and the stored image can be displayed on a display.
[0003]
However, in many cases, the output device connected to the network is of a model different from that of the MFP on the transmission side in the MFP as well as the printer. Moreover, even in the case of the same model, the use environment and the frequency are different. For this reason, these output devices have different output density characteristics, and if the read image data is transmitted as it is, an appropriate output image may not be obtained.
[0004]
In order to cope with this problem, there is a method in which, when transmitting image data, the image data read by the transmission-side device is corrected in the transmission-side device in accordance with the characteristics of the destination-side device and transmitted. .
[0005]
A specific example of a conventional image data correction method will be described with reference to FIGS.
[0006]
FIG. 7 shows the density characteristics of the output device. The vertical axis indicates the output density, where “0” indicates white and “255” indicates solid black. The horizontal axis indicates the input data value to be transmitted to the printer, where "0" is white and "255" is black. The broken line 700 shown in this graph is an ideal linear output density characteristic. This indicates that when the input data is linear, the output density characteristics when printed out are also linear.
[0007]
However, the density characteristics of the output device change like 701, 702, and 703 due to the influence of the environment and the frequency of use. Therefore, in order to make the density characteristics linear when output, it is necessary to correct the density data using a density correction table.
[0008]
A density correction table for correcting linearity will be described with reference to FIG. 8, the horizontal axis and the vertical axis are the same as in FIG. The characteristic 801 is for correcting the characteristic of the characteristic 701, and the characteristic 701 and the characteristic 801 are symmetrical with the linear characteristic indicated by the broken line as an axis. Similarly, a characteristic 802 is for correcting the characteristic 702, and a characteristic 803 is for correcting the characteristic 703. The density correction table is a table in which the values of these characteristics 801, 802, 803 are tabulated. By using these density correction tables, the linearity of output data can be corrected.
[0009]
Next, a description will be given of a correction method for transmitting one read image data to a plurality of output destinations connected to a network.
[0010]
For example, in FIG. 7, when the same input data as the characteristic 700 is transmitted to another printer, even if the MFP that transmits the data is the same model, the output density data does not correspond to the characteristic 701 depending on the frequency of use or the installed environment. Or the characteristic 702 in some cases. Further, if the printer model is different, the characteristic 703 may be obtained. Therefore, when image data is transmitted after being subjected to density correction using the density correction table of the characteristic 801, the output device having the characteristic 701 has a linear output characteristic. In some cases, the correction amount of the linearity is insufficient for each device, or the linearity may be strange.
[0011]
That is, if an image read from a specific MFP is subjected to density correction using the same image correction table to various output devices and then transmitted, the image correction suitable for each output device is not performed. An output image having density characteristics cannot be obtained.
[0012]
Therefore, there is a method of setting a correction table according to the density characteristics of each output device, correcting the read image using the correction table, and transmitting the corrected image. That is, first, when the read image is output to the output device having the characteristic 701, the density correction table is set in the correction table of the characteristic 801 to perform the density correction. The correction table is set and corrected, and then in the case of the characteristic 703, correction is performed using the correction table of the characteristic 803.
[0013]
Japanese Patent Application Laid-Open No. 9-83800 is known as a prior art for transmitting image data after correcting the density of image data on the transmission side according to the density characteristics of the transmission destination device.
[0014]
In Japanese Patent Application Laid-Open No. 9-83800, characteristic data at the time of density reproduction of a destination device is acquired, a luminance / density conversion table is created based on the data, and luminance / density conversion is performed according to the destination.
[0015]
As described above, according to the technique disclosed in Japanese Patent Application Laid-Open No. 9-83800, it is possible to perform optimal density correction for the transmission partner device.
[0016]
[Problems to be solved by the invention]
However, in some cases, it is required to transmit image data to a PC or HDD, but in this case, the transmitting side device cannot understand whether the transmitted image is to be displayed on a display or output to paper.
[0017]
Therefore, when the density correction for outputting to paper is performed, and the corrected data is displayed on a display, an image with reduced linearity is obtained. Conversely, the density correction for displaying on the display is performed, and the corrected data is output. When an image is output on paper based on data, there is a drawback that the linearity is lost even in that case.
[0018]
The present invention is to solve the above-described conventional problem, and can display or output a high-quality image with a certain degree of linearity at a destination even when a PC or HDD is selected as a destination. It is intended to provide an image processing device.
[0019]
[Means for Solving the Problems]
In order to achieve the above object, in an image processing apparatus according to the present invention, input means for inputting image data and input / output characteristics of the image data input by the input means are provided.Based on the correction tableConversion means for converting;In the conversion meansConvert the converted image dataIn the output sectionOutput means for outputting,An output unit different from the output unit through the network, the image data converted by the conversion unit, orTransmitting means for transmitting to the storage unit, selecting means for selecting a correction table of the converting means according to an output destination of image data or a destination,An image processing apparatus havingThe conversion means outputs the outputDepartmentA first correction table determined according to the output characteristics ofA second correction table determined in accordance with an output characteristic of an output unit different from the output unit, a third correction table in which the first correction table and the input / output characteristics are determined from a linear correction table,Wherein the selecting unit outputs image data to the output unit.IsSelect the first correction table and save the image dataSelect the second correction table when transmitting to an output unit different from the output unit via a network, and select the third correction table when transmitting image data to the storage unit via a network. DoIt is characterized by the following.
[0020]
Further, in the image processing method of the present invention, an inputting step of inputting image data;ByinputWas doneI / O characteristics of image dataBased on the correction tableA conversion step of converting;In the conversion stepConvert the converted image dataIn the output sectionAn output process for outputting,An output unit different from the output unit for the image data converted in the conversion step via a network, orA transmitting step of transmitting to the storage unit;An image data output method, or a selection step of selecting a correction table used in the conversion step according to a transmission destination, wherein the conversion step is performed in accordance with an output characteristic of the output unit. A first correction table to be determined, a second correction table to be determined according to output characteristics of an output unit different from the output unit, and a correction table in which the first correction table and the input / output characteristics are linear. A third correction table to be determined, wherein the selecting step selects the first correction table when outputting image data to the output unit, and outputs the image data to the output unit via a network. When the image data is transmitted to a different output unit, the second correction table is selected. When the image data is transmitted to the storage unit via a network, the third correction table is selected. And butterflies.
[0021]
In addition, the present inventionComputer readableThe storage medium is a computer-readable storage medium storing a program for an image processing method,Was doneI / O characteristics of image dataUsing the correction tableA conversion code to be converted,In the conversion stepConverted image dataIn the image output sectionOutput code to output,Via a network, the image data converted by the conversion code, an output unit different from the image output unit, orA transmission code to be transmitted to the storage unit,And a selection code for selecting a correction table used by the conversion code according to an output destination or a transmission destination of the image data, wherein the conversion code is determined according to an output characteristic of the output unit. A correction table, a second correction table determined in accordance with an output characteristic of an output unit different from the output unit, and a third correction table in which the first correction table and the input / output characteristics are determined from a linear correction table. Using a correction table, the selection code selects the first correction table when outputting image data to the output unit, and transmits the image data to an output unit different from the output unit via a network. In this case, the second correction table is selected, and when the image data is transmitted to the storage unit via a network, the third correction table is selected.
[0022]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0023]
First, an outline of data transmission performed in the present embodiment will be described with reference to FIGS.
[0024]
FIG. 1 is a diagram schematically showing data transmission according to the embodiment of the present invention. FIG. 4 is a diagram showing an environment in which devices are connected to a network in the present embodiment.
[0025]
As shown in FIG. 1, a case where image data is transmitted from one MFP to various output devices such as another MFP and a printer, and a storage device such as a PC and a built-in HDD of the MFP will be described.
[0026]
It is assumed that the network is a ring type as shown in FIG. 4 and various output devices and PCs are connected. Although the present embodiment has been described with reference to the ring connection, the present invention is not limited to this, and the same configuration as that of FIG. 1 can be applied to a network connected in a bus or a network connected in a star. It goes without saying that it is possible.
[0027]
In FIG. 1, an MFP 100 is an MFP that transmits image data, and has a function of connecting a scanner, a printer, and a network. For the reading function, it is assumed that an image can be read in both monochrome and color, and for the printer function, only monochrome output can be performed.
[0028]
Further, the MFP 100 is configured to be able to output the scanned data to its own printer, and to transmit the data to another printer connected to the network, an output device such as an MFP, and a storage device such as a PC.
[0029]
Further, the MFP 100 includes a built-in HDD 103 in the apparatus, stores the read image, and can display the stored image data on a display of a PC connected to a network.
[0030]
The MFP 101 and the MFP 102 are the same type of MFP as the MFP 100, are connected to a network, and are installed at a location away from the MFP 100 that transmits data.
[0031]
The MFP 106 is an MFP different from the MFPs 100, 101, and 102 and connected to a network.
[0032]
It is also assumed that the printer 105 is also connected to the network.
[0033]
The PC 104 is connected to a network, and the transmitted image data is stored in a storage device such as an HDD or a RAM in the PC 104.
[0034]
The built-in HDD 103 of the MFP 100 is a storage device that stores image data read by the MFP 100 or image data transmitted via a network.
[0035]
In MFP 100 that transmits image data, the transmitted image data may be binary or multi-valued, and may be luminance data or density data. In this embodiment, it is assumed that a color image is transmitted as multi-valued luminance data, and a monochrome image is transmitted as binary density data.
[0036]
Here, the difference between binary image data and multi-valued image data will be described. The binary image data is 1-bit image data including two values “0” and “1”, and can be transmitted with a smaller data amount than multi-valued data. In the present embodiment, it is assumed that MFP 100 can transmit binary density data to all output devices and storage devices.
[0037]
The multi-valued image data is image data having a value of 3 or more, and in the present embodiment, is 8-bit image data having a value from “0” to “255”. In the present embodiment, it is assumed that a color image is transmitted as multi-valued luminance data. After transmission, the multi-valued luminance data can be corrected according to the characteristics of various output devices and display devices. That is, the multi-valued luminance data can be transmitted to the output device without performing the correction, corrected on the output device side, and output. Similarly, when transmitting to the PC, the multi-value luminance data that is not corrected is transmitted to the PC. The PC stores multi-valued luminance data, and when outputting the multi-valued luminance data, the characteristics can be corrected in the PC.
[0038]
Further, in the present embodiment, multi-valued luminance data (color image) is subjected to γ correction in MFP 100 and can be transmitted.
[0039]
An operation performed by the user when performing gamma correction on multi-valued luminance data will be described with reference to FIG. FIG. 9 shows a state in which a user mode (not shown) is selected from the operation unit (not shown), then a common use setting shown in 901 is selected, and a “gamma value for color transmission” shown in 902 is selected. It represents.
[0040]
By selecting “γ1.0”, “γ1.4”, “γ1.8”, and “γ2.2” in the “gamma value of color transmission” frame 902 shown in FIG. The configuration is such that a γ characteristic or a γ characteristic that emphasizes printout can be selected.
[0041]
The case where “γ2.2” in FIG. 9 is selected corresponds to the case where the display on the display is emphasized. Further, the case where “γ1.0” is selected corresponds to the case where emphasis is placed on observing the printout. The middle one of these is “γ1.4” or “γ1.8”. “Γ1.8” is for display display in consideration of printout, and “γ1.4” is for printout in consideration of display display. When transmitting multi-valued luminance data, the user can select and transmit on the screen described above.
[0042]
However, in consideration of the actual situation of use of the MFP, it is often preferable to transmit binary density data in the sense that the output is a monochrome image, that is, binary density data, and that no load is imposed on the apparatus. When transmitting a read image after converting it into binary image data, the image data cannot be corrected on the destination device side, and the multi-valued density data before binarization is stored in the source MFP. Can only be done for
[0043]
Therefore, in the present embodiment, the multi-valued density data is corrected using three density correction tables in accordance with the type and use of the transmission destination, and then binarized and transmitted.
[0044]
First, there is a correction table 1 in a case where the output is performed by the printer function of the MFP 100 itself to be transmitted. In the MFP 100 in which the scanner and the printer are integrated, the output characteristics of the read data can be grasped in advance. How to determine the values of the correction table 1 based on the output characteristics will be described with reference to FIG.
[0045]
In FIG. 10, the vertical and horizontal axes are the same as in FIGS. It is assumed that the output characteristic of the printer unit 205 of the MFP 100 is the characteristic 1002 in FIG. Therefore, the MFP 100 corrects the characteristic 1002 with a characteristic 1003 symmetric to the characteristic 1001 indicating a linear characteristic. The correction table 1 is a table of the characteristic 1003.
[0046]
As described with reference to FIG. 8, the density correction table can be changed according to the environment in which the printer is placed, the state of consumption of the drum, and the like, so that linear characteristics can always be obtained.
[0047]
The second is a correction table 2 for transmitting to other output devices such as the MFPs 101, 102, and 106 and the printer 105 connected via the network. The MFP 101 and the MFP 102 are the same type of MFP as the MFP 100, but are installed at a location away from the MFP 100. For this reason, the density characteristics of the MFP changed due to the installed environment, the consumption state of the drum, and the like cannot be grasped.
[0048]
Similarly, the printer 105 and the MFP 106 of a different model cannot know the density characteristics. In the present embodiment, when transmitting an image to these output devices, a table of a characteristic curve obtained as an average of the density characteristics of a plurality of output devices is converted into an average correction curve that can correspond to various output devices. It is set in advance as a table (not shown). By using this table as the correction table 2 and using this correction table, an appropriate output image can be obtained to some extent in any output device.
[0049]
The third is a correction table 3 for transmitting to a storage device such as the PC 104 or the HDD 103 of the MFP 100, which is the point of the present embodiment. When transmitting to the storage device such as the PC 104 or the built-in HDD 103 of the MFP 100, the method of displaying the image in the storage device using the display of the PC 104 or the MFP 100 and transmitting the image to the output device for printing out are described. There are two possible uses.
[0050]
In the present embodiment, when transmitting data to a storage device such as the PC 104 or the built-in HDD 103 of the MFP 100, the data is corrected and transmitted using the density correction table determined based on the characteristics shown in FIG.
[0051]
FIG. 11 shows a characteristic curve for correction, and the vertical and horizontal axes are the same as those in FIGS. The characteristic 1102 is a characteristic curve suitable for output, and in the present embodiment, the characteristic 1102 is the same as the characteristic 1003 of the correction table 1 and is used when outputting by the printer unit of the MFP 100 itself. A characteristic line 1101 is a characteristic line suitable for display, that is, a characteristic line without correction. At this time, the characteristic 1103 is determined by taking the average value of the characteristic 1102 suitable for output and the characteristic 1101 suitable for display. A table obtained from the characteristics 1103 is referred to as a correction table 3.
[0052]
The density correction table 3 can be rephrased as a correction table in which the average value of the correction table 1 and the correction table having a linear characteristic is obtained.
[0053]
Using the correction table 3, image data corresponding to both output and display of image data can be generated.
[0054]
By switching these three density correction tables according to the transmission destination device and correcting the image data, it is possible to obtain an output image having somewhat appropriate characteristics from any of various network-connected output devices and display devices. Made it possible.
[0055]
Next, the configuration of MFP 100 that transmits image data will be described.
[0056]
FIG. 2 is a block diagram showing a configuration of MFP 100 according to the embodiment of the present invention.
[0057]
The image reading unit 209 includes a lens 201 that collects reflected light from the document 200, a CCD sensor 202 that inputs light input through the lens 201 and converts the light into an electric signal, and a signal output from the CCD sensor 202. An analog signal processing unit 203 for processing is provided.
[0058]
As a result, the document image formed on the CCD sensor 202 via the lens 201 is converted by the CCD sensor 202 into an analog electric signal. The image information thus converted is input to the analog signal processing unit 203, sampled and held, subjected to dark level correction and the like, and then subjected to analog / digital conversion (A / D conversion) and output as a digital image signal. Is done. The digital image signal thus output is input to the image processing unit 204.
[0059]
In the image processing unit 204, correction processing necessary for a reading system such as shading correction and gamma correction including points of the present embodiment, smoothing processing (not shown), edge enhancement processing (not shown), binarization Processing, other processing, processing, and the like are performed, and the processed image data is input to the printer unit 205 or the network 214.
[0060]
The printer unit 205 is, for example, a printer device such as a laser beam printer or an LED printer. For example, in the case of a laser beam printer, an exposure control unit (not shown) including a semiconductor laser and an image forming unit (not shown) And a transfer control unit for the transfer paper, and records an image on the transfer paper based on the input image signal.
[0061]
The network 214 is connected to output devices such as the printer 105 and the MFPs 101, 102, and 106 in FIG. 1 and storage devices such as a RAM and an HDD, and image data output from the image processing unit 204 is transmitted via the network 214. , And can be transmitted to these output devices and storage devices.
[0062]
The CPU circuit section 210 is a CPU 206, a ROM 207 for storing a control program executed by the CPU 206, various data, and the like, and is used as a work area during processing by the CPU 206, and temporarily holds various data and correction table values corresponding to transmission destinations. A RAM 208 for controlling the image reading unit 209, the image processing unit 204, the printer unit 205, the operation unit 213, and the like, and totally controls the control sequence of the image forming apparatus according to the present embodiment. Further, it controls whether output data from the image processing unit 204 is output by the printer 205 or transmitted through the network 214.
[0063]
The operation unit 213 includes a RAM 211 that displays characters on the touch panel of the MFP 100 and temporarily stores information set by the user, and a ROM 212 that stores information.
[0064]
Information set by the user on the operation unit 213 is transmitted to the image reading unit 209, the image processing unit 204, the printer 205, and the like via the CPU circuit unit 210.
[0065]
Next, details of the image processing unit 204, which is a main part of the present embodiment, will be described with reference to FIG.
[0066]
The digital image signal output from the analog signal processing unit 203 in FIG. 2 is input to the shading correction unit 301.
[0067]
The shading correction circuit unit 301 corrects the variation of the sensor that reads the original and the light distribution characteristics of the original illumination lamp, and inputs the corrected image data to the γ correction unit 302.
[0068]
When the image data to be transmitted is multi-valued luminance data, the γ correction unit 302 adjusts the luminance data by γ correction. If the image data to be transmitted is binary density data, the gamma correction unit 302 is skipped.
[0069]
The luminance / density conversion unit 303 converts the image data output from the γ correction unit 302 from a luminance signal to a density signal by Log conversion.
The conversion formula in the Log conversion is as follows.
D = −255 × LOG (in / 255) ÷ Dmax (1)
In the above equation, in is the luminance signal of the output image data from the γ correction unit 302, D is the converted density signal output from the luminance / density conversion unit 303, and Dmax is the maximum density. Determined from concentration. Since input and output are assumed to be 8 bits, they are clipped at 0,255. Here, the conversion formula for the concentration is not limited to the formula (1), and another conversion formula may be used.
[0070]
The image data subjected to the brightness / density conversion is input to the density correction unit 304. The density correction unit 304 performs a correction process of the density characteristics of the density data whose luminance and density have been converted. This is a table and is composed of a memory of 8 bits for input and 8 bits for output. As specific table values, data values such as the characteristics 1101, 1102, and 1103 shown in FIG. 11 are stored.
[0071]
By an operation described later, the CPU circuit 210 sets a different density correction table for the transmission destination in the density correction unit 304 according to the setting of the operation unit 213.
[0072]
The corrected image data is binarized from multi-valued density data into binary density data by the binarization unit 305, and then output from the image processing unit 204 and input to the printer 205 or the network 214. ,It is processed.
[0073]
Although the image data has been described as a case where binary density data is transmitted, when transmitting multi-valued luminance data, the luminance / density conversion unit 303, the density correction unit 304, and the binarization unit 305 Through.
[0074]
Next, details of the operation unit 213 related to the image processing unit 204 will be described with reference to FIGS.
[0075]
Reference numeral 500 denotes the entire operation unit on the MFP 100, and what is displayed in a frame 501 is a list of MFPs, printers, PCs, and the like that can transmit. This is managed by items such as a transmission destination indicated by 502 and an IP address indicated by 503.
[0076]
The check of 504 means that the read image data is transmitted to the MFP 100.
[0077]
Reference numeral 506 denotes an enlargement ratio when reading an image, 507 denotes an image size to be read, and 508 denotes the number of read images. Reference numeral 505 denotes a data transmission state, and a message is displayed when transmission fails.
[0078]
The devices displayed in the frame indicated by 501 are output devices and storage devices connected to the network in a ring as shown in FIG.
[0079]
Checks 504, 600, 601, and 602 of the transmission destination in FIG. 6 correspond to the arrows 504, 600, 601, and 602 in FIG. 4, respectively.
[0080]
The devices connected to the network in this way are registered in advance in the MFP 100 that is the sender of the data, and at the same time, the correction tables 1, 2, and 3, which are the default density correction table values required for each device, are also registered in advance. It is registered. These registration data are held in the RAM 211, the ROM 207, and the RAM 208 in FIG.
[0081]
In the following, the flow of processing from reading a document when a plurality of destinations are selected and transmitting the check, as shown on the operation unit in FIG. 6, will be described.
[0082]
FIGS. 12 and 13 are flowcharts illustrating the flow of processing when transmitting multi-valued luminance data and binary density data, respectively. First, the case of transmitting multi-valued luminance data will be described with reference to FIGS.
[0083]
First, as shown in FIG. 6, a device to be output is set as a check 504, 600, 601 or 602 in a frame 501 (S1201).
[0084]
In the case of multi-valued luminance data, the γ value is set as necessary as shown in FIG. Next, it is determined whether there is still an output destination (S1202). If there is, an image is read by the image reading unit 209 (S1203).
[0085]
The read image is subjected to shading correction by the shading correction circuit unit 301, and correction is performed by the gamma correction unit 302 using a table according to the setting of the user (S1204). After that, the luminance / density conversion unit 303, the density correction unit 304, and the binarization unit 305 pass the data through to each output device (S1205).
[0086]
Next, the process returns to S1202, and the processing is performed in the same procedure. When all data has been transmitted to the selected transmission destination, the process ends.
[0087]
Next, a flow of processing in transmitting binary density data, which is a point of the present embodiment, will be described with reference to FIGS.
[0088]
First, in the same manner as in the case of transmitting multi-valued luminance data, a device to be output is set as 504, 600, 601 and 602 in a frame 501 in FIG. 6 (S1301).
[0089]
When transmitting the binary density data, it is assumed that the setting of the γ value as shown in FIG. 9 cannot be performed. Next, the presence or absence of an output destination is determined (S1302), and if there is, an image is read (S1303).
[0090]
The read image is subjected to shading correction by the shading correction circuit unit 301 in FIG.
[0091]
Up to this point, the process is the same as the case of transmitting multi-valued luminance data, but from the next step, the processing that is the point of the present embodiment is performed. First, the output data of the shading correction circuit unit 301 is passed through the γ correction unit 302, and the luminance / density conversion unit 303 converts the multivalued luminance data into multivalued density data (S1304).
[0092]
Next, whether the transmission destination is the output from the printer unit of the MFP 100 itself (504), the storage device such as the PC 105 or the HDD 103 built into the MFP 100 (600, 602), or the printer 105 or the MFP 101 (601). Then, different processing is performed on the multi-valued density data (S1305).
[0093]
First, when the output is performed by the printer unit 205 of the MFP 100 itself (504), the CPU circuit unit 210 retrieves the density correction table corresponding to the MFP 100 (IP address 150.72.22.2) selected in 504 from the ROM 207 or the RAM 208. Then, the density correction table is set in the density correction unit 304 (S1306). Here, since the MFP 100 outputs the output by the MFP itself, as described above, the correction table 1 in which the characteristic 1102 shown in FIG. 11 is tabulated is set. The multi-value density data is density-corrected by the correction table 1.
[0094]
Further, the multivalued density data subjected to the density correction processing is binarized by the binarization unit 305 (S1309), and the binarized density data is transmitted to the printer unit 205 (S1310).
[0095]
Next, in the case of output by the MFP 101 or the printer 105 (600, 602), first, the CPU circuit section 210 reads out the above-described average density correction table 2, sets it in the correction section 304, The density data is corrected for density (S1307).
[0096]
Then, the corrected multi-value density data is binarized in S1309 and transmitted to the output device (S1310).
[0097]
If the transmission destination is a storage device such as the PC 104 or the HDD 103 with a built-in MFP, the multi-valued density data is corrected by the density correction table 3 corresponding to the above-described transmission to the storage device (S1308), and is binarized (S1308). S1309), and transmitted to the storage device (S1310).
[0098]
If any of these processes is performed according to the transmission destination, the process returns to S1302 again, and if there is still a transmission destination, the process proceeds to S1303 to perform processing such as image reading, correction, transmission, and the like. Ends the processing.
[0099]
In the present embodiment, an image is read for each transmission destination, and each time the image is read, the CPU circuit unit 210 sets a necessary density correction table in the density correction unit 304. That is, in the present embodiment, since four destinations are selected, image reading is performed four times, and the density correction table is set four times for each image reading.
[0100]
As described above, according to the present embodiment, the image data can be corrected by changing the density correction table according to the transmission destination device. In particular, when transmitting to a storage device such as a PC or HDD, The density data is corrected by an intermediate table between the linear correction table and the correction table corresponding to the output characteristic, and the data is transmitted. Then, the data can be displayed on a display or output to an output device such as a printer or an MFP. Even in the case of selection, there is an effect that a high-quality image with a certain degree of linearity at the transmission destination can be displayed or output on paper.
[0101]
The present invention is not limited to the device of the above-described embodiment, and may be applied to a system including a plurality of devices or an apparatus including one device. A storage medium storing software program codes for realizing the functions of the above-described embodiments is supplied to a system or apparatus, and a computer (or CPU or MPU) of the system or apparatus reads and executes the program code stored in the storage medium. It goes without saying that it will be completed by doing so.
[0102]
In this case, the program code itself read from the storage medium realizes the function of the above-described embodiment, and the storage medium storing the program code constitutes the present invention. As a storage medium for supplying the program code, for example, a floppy disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, and a ROM can be used. When the computer executes the readout program code, not only the functions of the above-described embodiment are realized, but also the OS or the like running on the computer performs the actual processing based on the instruction of the program code. It goes without saying that a case where some or all of the processes are performed and the functions of the above-described embodiments are realized by the processing is also included.
[0103]
Furthermore, after the program code read from the storage medium is written in the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, based on the instruction of the next program code, It goes without saying that the CPU of the expansion board or the expansion unit performs the expansion function and performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.
[0104]
【The invention's effect】
As described above, according to the present invention, a linear correction table can be obtained even when the subsequent usage or output destination such as transmitting a read image to a storage device such as an internal HDD of an MFP or an HDD of a PC is unknown. By correcting and transmitting the image with a correction table in the middle of the correction table corresponding to the output characteristics, it is possible to obtain a display without discomfort on the display and obtain image data suitable for output to paper to some extent. effective.
[Brief description of the drawings]
FIG. 1 is a diagram showing an outline of data transmission in an embodiment of the present invention.
FIG. 2 is a block diagram illustrating a configuration of an MFP according to the embodiment of the present invention.
FIG. 3 is a block diagram illustrating a configuration of an image processing unit of the MFP according to the embodiment of the present invention.
FIG. 4 is a diagram illustrating an environment in which devices are connected to a network in the embodiment of the present invention.
FIG. 5 is a diagram illustrating an operation unit of the MFP according to the embodiment of the present invention.
FIG. 6 is a diagram illustrating a case where a plurality of transmission destinations are selected on the operation unit of the MFP according to the embodiment of the present invention.
FIG. 7 is a graph showing density characteristics of various output devices.
8 is a graph showing a characteristic curve for correcting the density characteristic of FIG.
FIG. 9 is a diagram illustrating an operation unit when performing gamma correction in the embodiment of the present invention.
FIG. 10 is a graph for explaining how to determine the correction table 1;
FIG. 11 is a graph for explaining how to determine the correction table 3;
FIG. 12 is a flowchart showing a flow of processing when transmitting multi-valued luminance data in the present embodiment.
FIG. 13 is a flowchart showing the flow of processing when transmitting binary density data in the present embodiment.

Claims (12)

画像データを入力する入力手段と、
前記入力手段により入力された画像データの入出力特性を補正テーブルに基づいて変換する変換手段と、
前記変換手段で変換された画像データを出力部に出力する出力手段と、
ネットワークを介して、前記変換手段で変換された画像データを前記出力部とは異なる出力部、或いは記憶部に送信する送信手段と、
画像データの出力先、或いは送信先に応じて前記変換手段の補正テーブルを選択する選択手段と、
を有する画像処理装置であって、
前記変換手段は、前記出力の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを有し、
前記選択手段は、画像データを前記出力部に出力する場合前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする画像処理装置。
Input means for inputting image data;
Conversion means for converting the input / output characteristics of the image data input by the input means based on a correction table ,
Output means for outputting the image data converted by the conversion means to an output unit,
Via a network, transmitting means for transmitting the image data converted by the converting means to an output unit different from the output unit, or a storage unit,
A selection unit that selects a correction table of the conversion unit according to an output destination of image data or a transmission destination;
An image processing apparatus having
It said conversion means includes a first correction table is determined according to the output characteristics of the output section, and a second correction table is determined according to the output characteristics of the different output portion and said output portion, the first A first correction table and a third correction table whose input / output characteristics are determined from a linear correction table ,
Said selecting means, when outputting the image data to the output unit selects the first correction table, when transmitting image data to an output unit that is different from the output unit via the network the second An image processing apparatus comprising: selecting a correction table; and selecting the third correction table when transmitting image data to the storage unit via a network .
前記入力手段は、
画像を読み取り輝度データを発生する読み取り手段と、
輝度データを濃度データに変換する輝度濃度変換手段を備え、
前記変換手段は濃度データの入出力特性を変換することを特徴とする請求項1記載の画像処理装置。
The input means,
Reading means for reading an image and generating luminance data;
A brightness / density conversion unit for converting the brightness data into density data;
2. The image processing apparatus according to claim 1, wherein said conversion means converts input / output characteristics of density data.
前記記憶部は、ネットワークを介して接続される情報処理装置が有する記憶部を含むことを特徴とする請求項記載の画像処理装置。Wherein the storage unit, the image processing apparatus according to claim 1, characterized in that it comprises a storage unit of the information processing device connected via a network has. 前記第2の補正テーブルの値は、前記出力部とは異なる、複数の出力部の出力特性の平均値であることを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。4. The image processing apparatus according to claim 1, wherein the value of the second correction table is an average value of output characteristics of a plurality of output units different from the output unit. 5. . 前記第の補正テーブルの値は、前記第1の補正テーブルと前記入出力特性がリニアな補正テーブルとの平均値であることを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。The value of the third correction table, according to any one of claims 1 to 3 wherein the input-output characteristics as the first correction table is characterized in that the average value of the linear correction table Image processing device. 画像データを入力する入力工程と、An input step of inputting image data;
前記入力工程により入力された画像データの入出力特性を補正テーブルに基づいて変換する変換工程と、A conversion step of converting the input / output characteristics of the image data input in the input step based on a correction table;
前記変換工程で変換された画像データを出力部に出力する出力工程と、An output step of outputting the image data converted in the conversion step to an output unit,
ネットワークを介して、前記変換工程で変換された画像データを前記出力部とは異なる出力部、或いは記憶部に送信する送信工程と、Via a network, a transmission step of transmitting the image data converted in the conversion step to an output unit different from the output unit, or a storage unit,
画像データの出力先、或いは送信先に応じて前記変換工程で用いられる補正テーブルを選択する選択工程と、A selection step of selecting a correction table used in the conversion step according to an image data output destination or a transmission destination;
を有する画像処理方法であって、An image processing method having
前記変換工程は、前記出力部の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを有し、The conversion step includes: a first correction table determined according to an output characteristic of the output unit; a second correction table determined according to an output characteristic of an output unit different from the output unit; And a third correction table whose input / output characteristics are determined from a linear correction table.
前記選択工程は、画像データを前記出力部に出力する場合は前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする画像処理方法。The selecting step selects the first correction table when outputting image data to the output unit, and selects the second correction table when transmitting image data to an output unit different from the output unit via a network. An image processing method comprising: selecting a correction table; and selecting the third correction table when transmitting image data to the storage unit via a network.
前記入力工程は、The input step includes:
画像を読み取り輝度データを発生する読み取り工程と、A reading step of reading an image and generating luminance data;
輝度データを濃度データに変換する輝度濃度変換工程を備え、A brightness / density conversion step of converting the brightness data into density data;
前記変換工程は濃度データの入出力特性を変換することを特徴とする請求項6記載の画像処理方法。7. The image processing method according to claim 6, wherein the conversion step converts an input / output characteristic of density data.
前記第2の補正テーブルの値は、前記出力部とは異なる、複数の出力部の出力特性の平均値であることを特徴とする請求項6または7に記載の画像処理方法。8. The image processing method according to claim 6, wherein the value of the second correction table is an average value of output characteristics of a plurality of output units different from the output unit. 前記第の補正テーブルの値は、前記第1の補正テーブルと前記入出力特性がリニアな補正テーブルとの平均値であることを特徴とする請求項6乃至8のいずれか1項に記載の画像処理方法。9. The apparatus according to claim 6 , wherein a value of the third correction table is an average value of the first correction table and a correction table having a linear input / output characteristic. 10. Image processing method. 画像処理方法のプログラムが格納されたコンピュータ可読記憶媒体であって、
入力された画像データの入出力特性を補正テーブルを用いて変換する変換コードと、
前記変換工程で変換された画像データを画像出力部で出力する出力コードと、ネットワークを介して、前記変換コードで変換された画像データを前記画像出力部とは異なる出力部、或いは記憶部に送信する送信コードと、
画像データの出力先、或いは送信先に応じて前記変換コードが用いる補正テーブルを選択する選択コードと、
を有し、
前記変換コードは、前記出力部の出力特性に応じて決定される第1の補正テーブルと、前記出力部とは異なる出力部の出力特性に応じて決定される第2の補正テーブルと、前記第1の補正テーブルと入出力特性がリニアな補正テーブルから決定される第3の補正テーブルとを用い、
前記選択コードは、画像データを前記出力部に出力する場合は前記第1の補正テーブルを選択し、画像データをネットワークを介して前記出力部とは異なる出力部に送信する場合は前記第2の補正テーブルを選択し、画像データをネットワークを介して前記記憶部に送信する場合は前記第3の補正テーブルを選択することを特徴とする画像処理方法のプログラムが格納されたコンピュータ可読記憶媒体。
A computer-readable storage medium storing a program for an image processing method,
A conversion code for converting input / output characteristics of input image data using a correction table,
An output code for outputting the image data converted in the conversion step at an image output unit, and transmitting the image data converted by the conversion code to an output unit different from the image output unit or a storage unit via a network. Transmission code
A selection code for selecting a correction table used by the conversion code according to an output destination of image data or a transmission destination;
Has,
A first correction table determined in accordance with an output characteristic of the output unit; a second correction table determined in accordance with an output characteristic of an output unit different from the output unit; Using a first correction table and a third correction table whose input / output characteristics are determined from a linear correction table,
The selection code selects the first correction table when outputting image data to the output unit, and selects the second correction table when transmitting image data to an output unit different from the output unit via a network. A computer-readable storage medium storing a program for an image processing method, wherein a correction table is selected and the third correction table is selected when image data is transmitted to the storage unit via a network.
前記第2の補正テーブルの値は、前記出力部とは異なる、複数の出力部の出力特性の平均値であることを特徴とする請求項10に記載の画像処理方法のプログラムが格納されたコンピュータ可読記憶媒体。11. The computer according to claim 10, wherein the value of the second correction table is an average value of output characteristics of a plurality of output units different from the output unit. A readable storage medium. 前記第3の補正テーブルの値は、前記第1の補正テーブルと前記入出力特性がリニアな補正テーブルとの平均値であることを特徴とする請求項10または11に記載の画像処理方法のプログラムが格納されたコンピュー12. The image processing method according to claim 10, wherein the value of the third correction table is an average value of the first correction table and the correction table having a linear input / output characteristic. Is stored in the computer タ可読記憶媒体。Readable storage medium.
JP2000047506A 2000-02-24 2000-02-24 Image processing apparatus, image processing method, and storage medium Expired - Fee Related JP3559746B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000047506A JP3559746B2 (en) 2000-02-24 2000-02-24 Image processing apparatus, image processing method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000047506A JP3559746B2 (en) 2000-02-24 2000-02-24 Image processing apparatus, image processing method, and storage medium

Publications (2)

Publication Number Publication Date
JP2001238081A JP2001238081A (en) 2001-08-31
JP3559746B2 true JP3559746B2 (en) 2004-09-02

Family

ID=18569749

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000047506A Expired - Fee Related JP3559746B2 (en) 2000-02-24 2000-02-24 Image processing apparatus, image processing method, and storage medium

Country Status (1)

Country Link
JP (1) JP3559746B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5332586B2 (en) * 2008-12-17 2013-11-06 富士ゼロックス株式会社 Image processing apparatus, image processing system, image processing method, image forming apparatus, and program

Also Published As

Publication number Publication date
JP2001238081A (en) 2001-08-31

Similar Documents

Publication Publication Date Title
JP4708460B2 (en) Display control apparatus, image forming apparatus, display device control method, control program, and recording medium
JP4763027B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and computer-readable recording medium
JP2008153725A (en) Image processor, image processing method, image display/printing controller, image display/printing control method, program, and recording medium
JP2007043698A (en) Image processing method, image output method, image processing system, and image output apparatus
JP4755569B2 (en) Image processing apparatus and image processing method
JP4763026B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and computer-readable recording medium
JP2010245896A (en) Image processing apparatus, image forming apparatus, control method for the image processing apparatus, program, and recording medium
JP2010258799A (en) Image processing apparatus and image forming apparatus equipped with the same, image processing method, control program, and recording medium
JP4903851B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and recording medium
JP2007251835A (en) Image processor, and image processing method
JP3559746B2 (en) Image processing apparatus, image processing method, and storage medium
JP4795406B2 (en) Image processing apparatus, image forming apparatus, image processing apparatus control method, control program, and recording medium
JP5231318B2 (en) Image processing apparatus, image reading processing apparatus, image forming apparatus, image processing program, and recording medium
US8115963B2 (en) Image processing apparatus, image processing method, and computer program product
JP5186994B2 (en) Image processing device
JP2004112140A (en) Image processing apparatus
JP2006011754A (en) Image processing device and image processing method
JP4990340B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and recording medium
JP4887880B2 (en) Compound machine
JP2011229074A (en) Image processing device, image processing method, and image processing system
JP2008277955A (en) Image processing device and image processing system
JP2005027037A (en) Format conversion method and image processing apparatus
JP2006261881A (en) Image-forming apparatus and image-forming method
JP3825940B2 (en) Image processing apparatus and control method thereof
JP2006157806A (en) Image processor

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040524

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090528

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100528

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100528

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110528

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees