JP2004056574A - Image processor, image processing method and storage medium - Google Patents

Image processor, image processing method and storage medium Download PDF

Info

Publication number
JP2004056574A
JP2004056574A JP2002212615A JP2002212615A JP2004056574A JP 2004056574 A JP2004056574 A JP 2004056574A JP 2002212615 A JP2002212615 A JP 2002212615A JP 2002212615 A JP2002212615 A JP 2002212615A JP 2004056574 A JP2004056574 A JP 2004056574A
Authority
JP
Japan
Prior art keywords
color
image processing
accuracy
image
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002212615A
Other languages
Japanese (ja)
Other versions
JP4125062B2 (en
JP2004056574A5 (en
Inventor
Osamu Yamada
山田 修
Takuya Shimada
島田 卓也
Yuji Akiyama
秋山 勇治
Makoto Torigoe
鳥越 真
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2002212615A priority Critical patent/JP4125062B2/en
Priority to DE60229338T priority patent/DE60229338D1/en
Priority to EP02256094A priority patent/EP1291822B1/en
Priority to US10/235,813 priority patent/US7420705B2/en
Publication of JP2004056574A publication Critical patent/JP2004056574A/en
Publication of JP2004056574A5 publication Critical patent/JP2004056574A5/ja
Application granted granted Critical
Publication of JP4125062B2 publication Critical patent/JP4125062B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)
  • Color, Gradation (AREA)
  • Image Processing (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processor capable of performing color matching with high accuracy by calculating color matching accuracy by objective judgement standards based on a human visual characteristic, also verifying the color matching by the objective judgement standards based on the human visual characteristic in each of different color conversion contents and appropriately updating a profile and to provide its method and its medium. <P>SOLUTION: In this present invention, a printer profile corresponding to a color conversion method is used to prepare image data of color patches, and an image output device 3 uses the image data of the color patches and prints the color patches on a recording medium and outputs the recording medium with the color patches printed thereon. A colorimeter 20 measures the color of each of the color patches recorded on the recording medium, and matching accuracy calculating part 8 uses the measurement data of measurement results to calculate the accuracy (CRI) of color matching. A matching accuracy determining part 9 compares the CRI with a preset threshold TH, determines whether the accuracy of the color matching is good or bad and notifies determination results. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、画像処理装置、画像処理方法、記憶媒体に関するものである。
【0002】
【従来の技術】
従来、パーソナルコンピュータの普及に伴い、デジタルカメラ、カラースキャナなどの画像入力機器によって画像を電子データとして入力し、その画像をCRT、LCDなどの画像表示装置を用いて画像を表示、確認、さらには編集、加工、修正などを用途に応じて施し、カラープリンタなどの画像出力機器によって画像を出力していた。また最近では、デジタルカメラで撮影した画像を、カラーモニタで表示することなしに、直接カラープリンタで出力するといった利用も多くなってきている。さらに、コンピュータ上で作成したCG画像をカラープリンタで出力するという、画像入力装置を必要としない利用方法もある。
【0003】
上記のように、デジタルカメラ、カラースキャナ、カラーモニタ、カラープリンタなど異なる画像入出力機器間で画像を扱う場合、それぞれの機器の色再現特性や色再現範囲が異なっていた。そこで、異なる画像処理装置間で色再現を一致させるカラーマネージメントシステム(以下CMS)という手法が出現した。CMSは、各画像処理装置の色再現特性を記述するデバイスプロファイルと、色変換を行うカラーマッチングメソッドなどで構成されている。各画像処理装置間で一致した色再現を実現するためには上記デバイスプロファイルやカラーマッチングメソッドの精度を高める必要があるので、デバイスプロファイルの更新は適宜行っていた。
【0004】
ここで色変換方法としては、画像の内容や色変換の目的などに応じ複数の方法があった。例えば、モニタ表示とプリンタ出力とを一致させる方法や、プリント出力を好ましくなるよう変換する方法や、プリント出力を出来るだけ鮮やかでかつ、プリンタの色域を出来るだけ広く使用するよう変換する方法などがあった。さらに、上記各色変換方法には、入力色信号に対応する出力色信号における対応色を用いる色変換方法もあった。
【0005】
【発明が解決しようとする課題】
しかしながら、上記従来例においてデバイスプロファイルの更新は必ずしも適切な場合に行われておらず、定期的、もしくは、例えばモニタとプリンタとのマッチングにおいては、ユーザがカラーモニタでの表示色とカラープリンタからの出力結果とを見比べ、必要と判断した場合に行うといったもので、プロファイルを更新すべきか否かの判断が明確ではなかった。さらには、人の見た目で判断するという主観的であいまいなもので判断基準が定量化されていなかった。特開平11−232073号公報に、カラー画像処理装置間のマッチング精度向上のためのデバイスプロファイルの更新について開示されているが、ここでもユーザの目視によりデバイスプロファイルを更新する旨が開示されており、更新の判断基準が明確でなく定量化されていなかった。
【0006】
一方、場合によっては更新すべきか否かの判断が客観的に行われる場合もある。しかしながら、上記のようなモニタマッチングの場合、単純にカラーモニタ表示色の測色値とカラープリンタ出力色の測色値との色差のみに注目していた。したがって、カラーモニタなどで表示される光源色とカラープリンタなどで出力される物体色とのマッチングを行う色変換方法において、それぞれの色の見え方が異なり測色値を一致させても同じ色として見えないという、人間の色の見えに対応した判断基準を用いていないために色変換の精度判別を正確に行えないという問題があった。また、プリント物を好ましく変換する方法の場合、好ましさという主観的な内容を定量化することが難しく、色変換の精度判別を正確に行えないという問題があった。
【0007】
本発明は以上の問題に鑑みてなされたものであり、人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度を求める画像処理装置、画像処理方法、記憶媒体を提供することを目的とする。
【0008】
本発明は上述した問題を解決するためになされたものであり、色変換内容別に色変換精度を的確に検証し、デバイスプロファイルを適宜更新し、色変換を精度良く行うことが可能となる画像処理装置及びその方法及びその媒体を提供することを目的とする。
【0009】
【課題を解決するための手段】
本発明の目的を達成するために、例えば本発明の画像処理装置は以下の構成を備える。
【0010】
すなわち、少なくとも1色以上の色を含む第1の色群のデータと、当該第1の色群の各色を画像出力装置により出力させることで得られる各色であって、当該各色が当該第1の色群の各色と所定の関係となる各色により構成される第2の色群のデータとを対応づけて記憶保持する記憶保持手段と、
入力された入力色群を前記画像出力装置により出力させることで得られる色群を示すデータを外部から入力し、当該データと、前記記憶保持手段に記憶保持された前記入力色群に対応する対応色群のデータとを用いて、明度の誤差、彩度の誤差、色相の誤差を求め、更に、これらの誤差を用いてカラーマッチングの色再現指数を求める計算手段と
を備えることを特徴とする。
【0011】
また好ましくは更に、
前記画像出力装置、画像表示装置を含む各デバイスのプロファイルを記憶保持するプロファイル記憶保持手段と、
前記平均値に基づいて、前記プロファイル記憶保持手段に記憶保持された各デバイスのうち、いずれかのデバイスのプロファイルの更新を行うか否かを判断し、判断結果を報知する報知手段を備えることを特徴とする。
【0012】
また好ましくは更に、前記各デバイスのプロファイルのうち、いずれかのプロファイルを更新する更新手段を備えることを特徴とする。
【0013】
また好ましくは更に、前記更新手段により更新されたプロファイルを外部の装置に対して送信する送信手段を備えることを特徴とする。
【0014】
本発明の目的を達成するために、例えば本発明の画像処理方法は以下の構成を備える。
【0015】
すなわち、少なくとも1色以上の色を含む第1の色群のデータと、当該第1の色群の各色を画像出力装置により出力させることで得られる各色であって、当該各色が当該第1の色群の各色と所定の関係となる各色により構成される第2の色群のデータとを対応づけてメモリに記憶保持させておき、
入力された入力色群を前記画像出力装置により出力させることで得られる色群を示すデータを外部から入力し、当該データと、前記メモリに記憶保持された前記入力色群に対応する対応色群のデータとを用いて、明度の誤差、彩度の誤差、色相の誤差を求め、更に、これらの誤差を用いてカラーマッチングの色再現指数を求めることを特徴とする。
【0016】
また好ましくは更に、
前記画像出力装置、画像表示装置を含む各デバイスのプロファイルをメモリに記憶保持させておき、
前記平均値に基づいて、前記メモリに記憶保持された各デバイスのうち、いずれかのデバイスのプロファイルの更新を行うか否かを判断し、判断結果を報知する報知工程を備えることを特徴とする。
【0017】
また好ましくは更に、前記各デバイスのプロファイルのうち、いずれかのプロファイルを更新する更新工程を備えることを特徴とする。
【0018】
また好ましくは更に、前記更新工程で更新されたプロファイルを外部の装置に対して送信する送信工程を備えることを特徴とする。
【0019】
【発明の実施の形態】
以下添付図面を参照して、本発明を好適な実施形態に従って詳細に説明する。
【0020】
[第1の実施形態]
<画像処理装置の基本構成>
図1は本実施形態における画像処理装置の機能構成を示すと共に、その周辺機器を示すブロック図である。1は画像処理装置本体、2は画像表示装置で、CRTやLCD等により構成されており、画像を表示する。3は画像出力装置で、紙やOHPなどの画像記録媒体に画像をプリントする装置である。本実施形態では画像出力装置3をプリンタとして扱うが、上記画像記録媒体上に画像をプリントする機能を有する装置であればプリンタに限定されるものではない。
【0021】
4は画像表示装置2を画像処理装置1に接続するためのインターフェース(I/F)部、5は画像入力装置17から入力された色と画像表示装置2に表示される色と画像出力装置3にて出力される色とのカラーマッチングを行うカラーマッチング処理部、6は画像出力装置3に出力する画像に対して階調変換処理等の各種画像処理を行う画像処理部である。
【0022】
7は色変換毎の対応色とその許容値(色変換毎の対応色とその許容値についての詳細は後述する)が記憶されている色変換別対応色・許容値記憶部、8は後述の方法でカラーマッチングの精度を求めるカラーマッチング精度算出部、9はカラーマッチング精度算出部8にて算出された精度の結果を用いカラーマッチング精度の判定を行うカラーマッチング精度判別部、10はカラーマッチングに用いるデバイスプロファイル(後述のプリンタプロファイル、モニタプロファイル、スキャナ・デジカメプロファイル等のプロファイル)の作成および更新を行うプロファイル作成・更新部、11はユーザが画像処理装置1に対して各種の指示を入力するための操作部である。
【0023】
12は画像出力装置3で用いる出力用紙の種類を設定する用紙設定部、13は画像出力装置3を画像処理装置1に接続するためのI/F部、14はデータ処理を行うために一時的にデータを保存するデータバッファ、15は画像表示装置2などのモニタプロファイルを色変換方法毎に記憶してあるモニタプロファイル格納部、16は画像出力装置3などのプリンタプロファイルを色変換方法毎に記憶してあるプリンタプロファイル格納部、17はスキャナやデジタルカメラなど、画像を電子データとして画像処理装置1に入力することができる画像入力装置、18は画像入力装置17を画像処理装置1に接続するためのI/F部、19はスキャナやデジタルカメラなどの画像入力装置17のプロファイルを色変換方法毎に記憶してあるスキャナ・デジカメプロファイル格納部である。
【0024】
20は測色器で、画像出力装置3から出力された記録媒体にプリントされた各色のカラーパッチの色を測定する。21は測色器20を画像処理装置1に接続するためのI/F部である。
【0025】
<全体処理>
以下では、指定された色変換に応じたプリンタプロファイルに従ったカラーパッチを画像出力装置3に出力させ、出力された色を測色器20によって測定された結果を読み込み、取り込んだ色と、指定された色変換に応じた対応色との差分(差分についての詳細は後述する。またこの差分を、カラーマッチングの精度と呼称する)を求め、その精度に応じてプリンタプロファイルを更新するべきか否かの情報を提示する画像処理方法について説明する。また、以下では更新するプロファイルとしてプリンタプロファイルを用いるが、これに限定されるものではなく、他にも例えばモニタプロファイルであっても良い。
【0026】
図2は、この画像処理のメインの処理のフローチャートである。また、図8は画像表示装置2に表示され、後述の各処理の実行を入力するためのGUIの構成例を示す。以下、図2、図8を用いて、カラーマッチングの精度を求め、求めた精度に応じてプリンタプロファイルの作成、更新を行う処理について説明する。
【0027】
まずユーザは操作部11を用いて色変換方法をチェックボタン814a,814b、814cのいずれかを指定して選択する(黒丸に対応する色変換方法が選択された色変換方法である)。これにより以下、選択した色変換方法におけるカラーマッチングの精度を求める。なお、色変換方法の選択はこの3つに限定されるものではない。よってステップS200では、選択された色変換方法を以下の処理で用いるべきものとして設定する。
【0028】
次にステップS201では、ユーザによる操作部11を用いたパッチ出力ボタン804の押下を検出し、プリンタプロファイル格納部16からステップS200で設定した色変換方法に応じたプリンタプロファイルを用いてカラーパッチの画像データを作成し、データバッファ4に出力する。画像出力装置3はこのカラーパッチの画像データを用いて紙やOHP等の記録媒体上にカラーパッチをプリントし、出力する。本実施形態ではカラーパッチとしてR,G,B,C,M,Yの6色のパッチを用いるが、この数に限定されるものではない。
【0029】
次にステップS202では、測色器20により上記記録媒体上に記録された各カラーパッチの色を測定する。次にステップS203では、ユーザによる操作部11を用いた測定データ読み込みボタン805の押下を検出し、上記測定結果である測定データDn(nは各色(パッチ)を示すインデックスであって、本実施形態では1≦n≦6)をデータバッファ14に入力する。この測定結果は、本実施形態ではCIE(国際照明委員会)によるCIELAB値とする。
【0030】
次にステップS204では、ユーザからの操作部11を用いた精度算出ボタン806の押下を検出し、マッチング精度算出部8は上記測定データDを用いてカラーマッチングの精度を算出する。ステップS204における処理の詳細については後述するが、本ステップではカラーマッチングの精度として、カラーマッチングの色再現指数CRIを求める。
【0031】
次にステップS205では、マッチング精度判別部9がこの色再現指数CRIと予め設定された閾値THとを比較し、カラーマッチングの精度の良し悪しを判別する。その判別結果は領域807に表示される。領域807内には、カラーマッチングの精度を示す数値と、その精度が合格であるか否かを示す文字情報とが表示される。なお、本ステップにおける判別処理の詳細については後述する。次にステップS206では、マッチング精度判別部9が判決結果が合格であるか否か(色再現指数CRIと閾値THとの比較を行うことで判別される)を判断する。
【0032】
合格でない場合にはプリンタプロファイルを更新するべきであるので、ステップS207ではデバイスプロファイルの更新を指示するためのボタン813の押下を受け付けており、更新を行うことができる。ユーザからの操作部11を用いたプロファイル更新ボタン813の押下を検出した場合、処理をステップS208に進め、プロファイル作成・更新部10は最新のプリンタプロファイルを作成し、ステップS209で、プリンタプロファイル格納部16に格納されているプリンタプロファイルを、作成した最新のプリンタプロファイルに更新する。なお、最新のプリンタプロファイルの作成処理についての詳細は後述する。
【0033】
ステップS209では、再度、上記カラーマッチングの精度を更新されたプリンタプロファイルを用いて行うために、ユーザからの操作部11を用いた再検証ボタン815の押下がなされたか否かを判断し、押下された場合には処理をステップS200に進め、押下されない場合には本処理を終了する。
【0034】
<カラーマッチング精度算出>
図3は、上記ステップS204においてカラーマッチング精度算出部8がカラーマッチングの精度を求める処理の詳細を示すフローチャートである。同フローチャートを用いて、カラーマッチングの精度を求める処理の詳細について以下、説明する。
【0035】
まずステップS301で、カラーマッチング精度算出のための色数nを1に初期化する。次にステップS302では、対応色・許容値記憶部7からステップS200で選択、設定された色変換方法に応じたテーブルに登録されたn番目の対応色データPnと許容値データTn(1≦n≦6)とを読み出す。
【0036】
図5に色変換方法毎のテーブルの構成例を示す。各テーブルは色変換方法毎に設けられたものであり、夫々異なる色再現性を実現するために用いられる。例えばテーブル1は画像表示装置2に対して視覚的に忠実な色再現を行う第1の色再現に用いられる。
【0037】
また個々のテーブルには、6色のパッチに対応する対応色データPnと許容値データTnが登録されている。同テーブルにおいてそのほかの項目については図4を用いて説明する。図4は、CIELAB色空間におけるa*b*平面を示すものであり、紙面手前方向をLの正の方向、紙面奥方向をLの負の方向とする。
【0038】
オリジナル色ORn(○印)は、例えば画像表示装置2に表示されている色を示し、対応色Pn(△印)は、例えばオリジナル色ORnに最もカラーマッチングする、画像出力装置3にて出力されるべき色Pnを示す。すなわち、オリジナル色を画像出力装置3により画像記録媒体上に記録した場合に、記録される色がオリジナル色と主観評価により同じ色と判断される場合に、この記録される色がオリジナル色に対応する対応色となる。
【0039】
そして、TnLp,TnLmは、彩度に関してオリジナル色ORnと対応色Pnとがマッチングしていると許容できる許容域(TnLpはプラス側の許容値、TnLmはマイナス側の許容値)を示す。TnCp,TnCmは、彩度に関してオリジナル色ORnと対応色Pnとがマッチングしていると許容できる許容域(TnCpはプラス側の許容値、TnCmはマイナス側の許容値)を示し、TnHp,TnHmは、色相に関してオリジナル色ORnと対応色Pnとがマッチングしていると許容できる許容域(TnHpはプラス側の許容値、TnHmはマイナス側の許容値)を示している。
【0040】
これらオリジナル色ORnに対する対応色Pnおよび許容値TnLp,TnLm,TnCp,TnCm,TnHp,TnHmは、あらかじめモニタ表示色とプリント色との主観評価実験などにより対応関係を求めておき、図5に示すようなテーブルデータとして各色再現別に対応色・許容値記憶部7に保存しておくものとする。
【0041】
もちろん、この対応色、許容値を画像出力装置毎、または出力用紙毎に設定しておき、適宜使い分けるよう構成してよいことは言うまでもない。ここで、図5におけるPnL,PnC,PnHは、それぞれPnの極座標系での表色値LCHであり、CIELAB値からは、以下の式(1)〜(3)を用いて変換する。
【0042】
L*   = L*                   (1)
Cab* = √((a*)×(a*)+(b*)×(b*))  (2)
Hab  = arctan(b*/a*)            (3)
図3に戻って、ステップS303では、ステップS203でデータバッファ14に書き込まれた測定データDのうち、n番目の測定データDnをデータバッファ14から読み出し、上記式(1)〜式(3)を用いて極座標系表色値DnL,DnC,DnHを算出する。ステップS304では、n番目のカラーパッチの明るさDnLとn番目の対応点の明るさPnLとを比較し、DnL≧PnLの場合、処理をステップS305に進め、明るさの精度Leを
Le=(DnL−PnL)/TnLp
を計算することで求める。すなわち、n番目のカラーパッチの明るさDnLとn番目の対応点の明るさPnLとの差分を明るさのプラス側の許容値TnLpで正規化した値を計算する。よってこの計算による値Leが0≦Le≦1の場合にのみ、n番目のカラーパッチの明るさDnLとn番目の対応点の明るさPnLとがマッチングしていると許容できる。
【0043】
一方、ステップS304における比較の結果、DnL<PnLの場合、処理をステップS306に進め、明るさの精度Leを
Le=(PnL−DnL)/TnLm
を計算することで求める。すなわち、この計算による値Leが0≦Le≦1の場合にのみ、n番目のカラーパッチの明るさDnLとn番目の対応点の明るさPnLとがマッチングしていると許容できる。
【0044】
ステップS307では、n番目のカラーパッチの彩度DnCとn番目の対応点の彩度PnCとを比較し、DnC≧PnCの場合、処理をステップS308に進め、彩度の精度Ceを
Ce=(DnC−PnC)/TnCp
を計算することで求める。すなわち、n番目のカラーパッチの彩度DnCとn番目の対応点の彩度PnCとの差分を彩度のプラス側の許容値TnCpで正規化した値を計算する。よってこの計算による値Ceが0≦Ce≦1の場合にのみ、n番目のカラーパッチの彩度DnCとn番目の対応点の彩度PnCとがマッチングしていると許容できる。
【0045】
一方、ステップS307における比較の結果、DnC<PnCの場合、処理をステップS309に進め、彩度の精度Ceを
Ce=(PnC−DnC)/TnCm
を計算することで求める。すなわち、この計算による値Ceが0≦Ce≦1の場合にのみ、n番目のカラーパッチの彩度DnCとn番目の対応点の彩度PnCとがマッチングしていると許容できる。
【0046】
ステップS310では、n番目のカラーパッチの色相DnHとn番目の対応点の色相PnHとを比較し、DnH≧PnHの場合、処理をステップS311に進め、色相の精度Heを
He=(DnH−PnH)/TnHp
を計算することで求める。すなわち、n番目のカラーパッチの色相DnHとn番目の対応点の色相PnHとの差分を色相のプラス側の許容値TnHpで正規化した値を計算する。よってこの計算による値Heが0≦He≦1の場合にのみ、n番目のカラーパッチの色相DnHとn番目の対応点の色相PnHとがマッチングしていると許容できる。
【0047】
一方、ステップS310における比較の結果、DnH<PnHの場合、処理をステップS312に進め、色相の精度Heを
He=(PnH−DnH)/TnHm
を計算することで求める。すなわち、この計算による値Heが0≦He≦1の場合にのみ、n番目のカラーパッチの色相DnHとn番目の対応点の色相PnHとがマッチングしていると許容できる。
【0048】
上記処理により求めたLe、Ce、Heは上述の通り、人間が見てマッチングしていると許容できる最大値を1としたときの誤差となるため、明度方向、彩度方向、色相方向それぞれについて人間の目の特性に均等な値として扱うことが出来る。
【0049】
次にステップS313では、明度方向の誤差Le、彩度方向の誤差Ce、色相方向の誤差Heを用いて、人間が見たときのカラーマッチング度合いを表す評価量である色再現指数CRInを以下の式に基づいて計算する。
【0050】
CRIn=√(Le×Le+Ce×Ce+He×He)
このCRInはn番目のカラーパッチの色とn番目の対応色とのカラーマッチングの精度を示すものである。次にステップS314で、求めたCRInをデータバッファ14へ書き込む。ステップS315では上記全ての処理を、全てのカラーパッチに対して行い、全てのカラーパッチに対するCRInを求めたか否かを判断し(n=6か否かを判断し)、全てのカラーパッチに対するCRInを求めていれば図3に示した処理を終了し、処理をステップS205に進める。一方、n<6の場合、処理をステップS316に進め、nに1を足して更新し、ステップS302以降の処理を行う。
<カラーマッチング精度判別>
図6は、上記ステップS205においてカラーマッチング精度判別部9が上記CRInを用いて、カラーマッチングの精度の善し悪しを判別する処理のフローチャートである。
【0051】
まずステップS601において、以下用いる変数CRIs、nを夫々0,1に初期化する。そしてステップS602ではデータバッファ14からCRInを読み出し、ステップS603において変数CRIsに加算する。そしてステップS604では、全てのnについてのCRInをCRIsに加算したか否かを判断し(n=6であるか否かを判断し)、n<6の場合は処理をステップS609に進め、nに1を足して更新し、ステップS602,ステップS603の処理を繰り返す。
【0052】
一方、n=6の場合は処理をステップS605に進め、CRIsをn(=6)で割った値を変数CRIに代入する。すなわち変数CRIは、全てのCRInの平均値を示すものであって、本実施形態ではこのCRIを色再現指数として用いる。そしてステップS606でCRIと予め設定された閾値THとを比較し、CRI<THの場合、すなわち、全てのカラーパッチに対する明度方向の誤差、彩度方向の誤差、色相方向の誤差の平均値が所定値よりも小さい場合は、各パッチの色とそれらに対応する対応色との誤差が小さい(人間が見たときのカラーマッチング度合いが高い)ので、処理をステップS607に進め、精度の判別結果を「合格」とする。すなわち、領域807内の判定結果を表示する領域に「合格」と表示し、合格を報知する。
【0053】
一方、CRI≧THの場合、すなわち、全てのカラーパッチに対する明度方向の誤差、彩度方向の誤差、色相方向の誤差の平均値が所定値以上である場合は、各パッチの色とそれらに対応する対応色との誤差が大きい(人間が見たときのカラーマッチング度合いが低い)ので、処理をステップS608に進め、精度の判別結果を「不合格」とする。すなわち、領域807内の判定結果を表示する領域に「不合格」と表示し、不合格を報知する。なお、ステップS607,ステップS608のいずれの場合にも、求めた色再現指数CRIを領域807内の精度を表示する領域に表示する。
【0054】
なお、本実施形態では精度の判別結果の報知方法を「合格」、「不合格」のように文字として表示したが、これに限定されるものではなく、他にも例えば、「合格」、「不合格」を表す画像、もしくはサウンドとして表現しても良い。
【0055】
また上記フローチャートには示していないが、ユーザが操作部11を用いて詳細ボタン808を押下することで、図9に例示するGUIが画像表示装置2上に表示される。同図のGUIは各パッチの色毎にマッチング精度、すなわちCRInが表示されている。
【0056】
<最新プロファイル作成>
図7は、上記ステップS208においてプロファイル作成・更新部10がプリンタプロファイルを最新のものに更新する処理の詳細を示すフローチャートである。同フローチャートを用いて、プリンタプロファイルを最新のものに更新する処理の詳細について以下、説明する。
【0057】
ステップS701では、ユーザからの操作部11を用いたパッチ出力ボタン809の押下を検出し、ステップS200で選択、設定した色選択方法に対応したプロファイル作成用カラーパッチのデータを作成し、画像出力装置3に出力する。また画像出力装置3はこのデータに基づいて記録媒体上にカラーパッチをプリントし、出力する。ここで出力するカラーパッチの色数は特に限定しないが、例えばRGB各色9ステップの組み合わせの729色のカラーパッチを出力する。
【0058】
ステップS702では、測色器20により上記記録媒体上に記録された各カラーパッチの色を測定し、ステップS703で測定データ読み込み810の押下を検出すると、その測定結果である測定データをデータバッファ14に入力する。この測定結果は、本実施形態ではCIE(国際照明委員会)によるCIELAB値とする。次にステップS203では、ユーザによる操作部11を用いた測定データ読み込みボタン805の押下を検出し、上記測定データDをデータバッファ14に書き込む。
【0059】
ステップS704では、ユーザからの操作部11を用いたプロファイル作成ボタン811の押下を検出し、所定のフォーマットに則り、ステップS200で選択、設定した色変換方法に対応したプリンタプロファイルを作成する。またユーザは操作部11を用いて、ファイル名ウィンドウ812に所望のプロファイル名を入力する事も出来る。
【0060】
以上説明したように、オリジナル色ORに対応する対応色Pnとその許容域Tnとを用いてカラーマッチングの精度を検証することで、人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度の検証を行い、適宜プロファイルを更新する事が出来る。
【0061】
[第2の実施形態]
図10に本実施形態における画像処理装置の機能構成を示すと共に、その周辺機器との構成を示す。1001は本実施形態における画像処理装置の本体で、色測定を行うセンサ(センサ部1004)を接続することができる。また本実施形態における画像処理装置はPDAやノート型パソコンなど、携帯可能な(持ち運びが可能な)画像処理装置とする。
【0062】
1002は画像処理装置1001に接続された外部の画像処理装置で、一般にPCやワークステーションなどのデスクトップのコンピュータであると共に、画像処理装置1001と同様、各種のデバイスプロファイルを保持している。本実施形態の画像処理装置1001は第1の実施形態と同様の処理を行って作成した新しいプロファイルを、外部の画像処理装置1002に対して送信する。画像処理装置1002は送信されたプロファイルを受信し、受信したプロファイルに更新する。以下、画像処理装置1001と画像処理装置1001が行う処理について説明する。なお以下では更新するプロファイルをプリンタプロファイルとして説明するが、これに限定されるものではなく、他にも例えばモニタプロファイルであっても良い。
【0063】
1003は画像出力装置で、紙やOHPなどの画像記録媒体に画像をプリントする装置である。本実施形態では画像出力装置1003をプリンタとして扱うが、上記画像記録媒体上に画像をプリントする機能を有する装置であればプリンタに限定されるものではない。1004は上記センサ部、1005は画像処理装置1001と画像処理装置1002とでデータ通信を行うための通信インターフェース部である。
【0064】
1006はセンサ部1004による測定データ保持する測定データ保持部1006、1007は色変換毎の対応色とその許容値(色変換毎の対応色とその許容値についての詳細は後述する)が記憶されている色変換別対応色・許容値記憶部、1008はカラーマッチングの精度を求めるカラーマッチング精度算出部、1009はカラーマッチング精度算出部1008にて算出された精度の結果を用いカラーマッチング精度の判定を行うカラーマッチング精度判別部、1010はカラーマッチングに用いるデバイスプロファイル(後述のプリンタプロファイル、モニタプロファイル、スキャナ・デジカメプロファイル等のプロファイル)の作成および更新を行うプロファイル作成・更新部である。
【0065】
1011は画像や文字情報などを表示すると共に、タッチパネル形式で各種の指示を入力する事ができる操作・表示部、1012はセンサ部1004を制御するセンサ制御部1012、1013はデータ処理を行うために一時的にデータを保存するデータバッファ、1014はモニタプロファイルを色変換方法毎に記憶してあるモニタプロファイル格納部、1015は画像出力装置1003などのプリンタプロファイルを色変換方法毎に記憶してあるプリンタプロファイル格納部である。
【0066】
<全体処理>
図11は、上記構成を備える本実施形態における画像処理装置が行う画像処理のメインの処理のフローチャートである。なお、図11に示したフローチャートにおいて、ステップS1101からステップS1109までの各処理は、ステップS200からステップS209までの各処理とほぼ同じであって、ステップS1102で本実施形態では測色器20からではなく、センサ部1004を用いて記録媒体上のカラーパッチの色を測定する点が異なる。よって、ステップS1100からステップS1109までの各処理の説明は省略する。また本実施形態では、操作・表示部1011に表示される画面は図8に示したGUIが表示されるものとする。
【0067】
ステップS1110では、ステップS1108で新たに作成されたプリンタプロファイルを通信インターフェース部1005を介して画像処理装置1002に送信する。画像処理装置1002は保持するプリンタプロファイルを送信されたプリンタプロファイルに更新する。
【0068】
以上説明したように、色測定のためのセンサー部を付属したハンディタイプ画像処理装置を用いる事で、例えば画像処理装置1002を用いて人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度の検証を行い、適宜プロファイルを更新する事が簡便に行うことができ、画像処理装置1001をサービスマン等が保持しており、外部から画像処理装置1002に対して人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度の検証を行い、適宜プロファイルを更新した結果を送信し、画像処理装置1002の保持するプロファイルを更新させることができる。
【0069】
[第3の実施形態]
図12にサーバ側の画像処理装置とクライアント側の画像処理装置(以下、画像処理サーバ)との機能構成を示す。本実施形態における画像処理装置は測定データを画像処理サーバに送信し、画像処理サーバが測定データを用いて作成した最新のプロファイルを受信し、受信したプロファイルに更新する。一方、画像処理サーバは受信した測定データを用いてカラーマッチング精度を求め、その精度が合格でない場合には新たなプロファイルを作成し、画像処理装置に送信する。以下、画像処理装置と画像処理サーバ、及びそれらが行う処理について説明する。なお以下では更新するプロファイルをプリンタプロファイルとして説明するが、これに限定されるものではなく、他にも例えばモニタプロファイルであっても良い。
【0070】
1201は画像処理サーバで、以下の構成を備える。1204は画像処理サーバ1201と画像処理装置1202間でデータ通信を行うために用いられる通信インターフェース部、1205は画像処理装置1202から送信される測定データを格納する測定データ格納部、1207は色変換毎の対応色とその許容値(色変換毎の対応色とその許容値についての詳細は後述する)が記憶されている色変換別対応色・許容値記憶部、1208はカラーマッチングの精度を求めるカラーマッチング精度算出部、1209はカラーマッチング精度算出部1208にて算出された精度の結果を用いカラーマッチング精度の判定を行うカラーマッチング精度判別部、1206はカラーマッチングに用いるデバイスプロファイル(後述のプリンタプロファイル、モニタプロファイル、スキャナ・デジカメプロファイル等のプロファイル)の作成を行うプロファイル作成部である。
【0071】
1210は画像や文字情報などを表示すると共に、タッチパネル形式で各種の指示を入力する事ができる操作・表示部、1212はデータ処理を行うために一時的にデータを保存するデータバッファ、1213はモニタプロファイルを色変換方法毎に記憶してあるモニタプロファイル格納部、1214は画像出力装置1203などのプリンタプロファイルを色変換方法毎に記憶してあるプリンタプロファイル格納部である。
【0072】
1202はインターネットやLANなどのネットワークを介して画像処理サーバ1201に接続されている画像処理装置である。1203はI/F部1215を介して画像処理装置1202に接続されている画像出力装置で、紙やOHPなどの画像記録媒体に画像をプリントする装置である。1216は画像表示装置1226に表示される色と画像出力装置1203により出力される色とのカラーマッチング処理を行うカラーマッチング処理部、1217は画像出力装置1203に出力する画像に対して階調変換処理等の各種画像処理を行う画像処理部である。
【0073】
1218は画像出力装置1203で用いる出力用紙の種類を設定する用紙設定部、1219はカラーマッチングに用いるデバイスプロファイル(後述のプリンタプロファイル、モニタプロファイル、スキャナ・デジカメプロファイル等のプロファイル)の更新を行うプロファイル更新部である。1220は画像や文字情報などを表示すると共に、タッチパネル形式で各種の指示を入力する事ができる操作・表示部、1221は画像処理サーバ1201とのデータ通信を行うための通信インターフェース部、1222は画像表示装置1226のモニタプロファイルを色変換方法毎に記憶してあるモニタプロファイル格納部、1223は画像出力装置1203などのプリンタプロファイルを色変換方法毎に記憶してあるプリンタプロファイル格納部である。
【0074】
1224は、画像出力装置1203に出力する画像データを一時的に記憶しておく画像バッファである。1225は画像表示装置1226と接続するためのI/F部で、1226は画像表示装置で、CRTやLCD等により構成されており、画像を表示する。1228は測色器で、画像出力装置1203から出力された記録媒体にプリントされた各色のカラーパッチの色を測定する。1227は測色器1228を画像処理装置1202に接続するためのI/F部である。
【0075】
<全体処理>
図13は、上記構成を備える画像処理装置と画像処理サーバとが行うメインの処理のフローチャートである。なお画像処理装置1202が行う処理である、ステップS1301からステップS1303までの各処理は、ステップS200からステップS202までの各処理と同じであるために、その説明を省略する。また本実施形態では、操作・表示部1220、1210に表示される画面は図8に示したGUIが表示されるものとする。
【0076】
ステップS1304では、測色器1228による測定データを通信インターフェース部1202を介して画像処理サーバ1201に送信する。ステップS1351で画像処理サーバ1201が測定データを受信すると、ステップS1352で測定データ格納部1205に登録し、ステップS1353で測定データをデータバッファ1212に書き込む。
【0077】
ステップS1354からステップS1358までの各処理はステップS204からステップS208までの各処理とほぼ同じであって、最新のプリンタプロファイルの作成はプロファイル作成部1206が行う点が異なる。よって、ステップS1354からステップS1358までの各処理の説明は省略する。次に、ステップS1359では、プリンタプロファイル格納部1214においてステップS1301で選択、設定した色変換方法に応じたプリンタプロファイルを作成した最新のプリンタプロファイルとして登録する。そしてステップS1360では、通信インターフェース部1204を介して作成した最新のプリンタプロファイルを画像処理装置1202に送信する。
【0078】
ステップS1305で画像処理装置1202は測定データを受信すると、ステップS1306ではプロファイル更新部1219がプリンタプロファイル格納部1223内のステップS1301で選択、設定した色変換方法に応じたプリンタプロファイルを受信したプリンタプロファイルに更新する。
【0079】
また、画像処理サーバ1201はステップS1361において、カラーマッチングの結果を示すデータ(合格か不合格かを示すデータ、求めた精度を示すデータ)を通信インターフェース部1204を介して送信し、画像処理装置1202はステップS1307においてこれらのデータを受信する。
【0080】
以上説明したように、画像出力装置とカラーマッチングの精度を求める装置(画像処理サーバ)とが異なる位置(特に遠隔の位置)に存在していても人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度を求め。適宜プロファイルを更新する事が簡便に行うことができる。
【0081】
[第4の実施形態]
上記実施形態では、プロファイルの更新を画像出力装置のプロファイル(プリンタプロファイル)を更新するとしたが、画像入力装置のプロファイルまたは画像表示装置のプロファイル(モニタプロファイル)を更新するよう構成しても良い。つまりは、カラーマッチングの精度を高めるために、画像出力装置または画像入力装置または画像表示装置のプロファイルを適宜更新する様、構成すればよい。また、プロファイルの更新ではなく、カラーマッチング方法を変更する構成にしても良い。もちろん、プロファイルの更新、カラーマッチング方法の変更を組み合わせても良いことは言うまでもない。
【0082】
またその場合は、プリンタプロファイル以外にもモニタプロファイルなどを更新するボタンを設ける。
【0083】
また上記実施形態では、色再現指数CRIは明度の誤差、彩度の誤差、色相の誤差を用いて夫々カラーパッチの色再現指数CRInを求め、更に全てのCRInの平均値を計算することで色再現指数CRIを求めていたが、これに限定されるものではない。他にも例えば、全てのカラーパッチに対して明度の誤差の平均値、彩度の誤差の平均値、色相の誤差の平均値を求め、更に夫々の平均値に対して閾値を設けて閾値処理を行い、合格、不合格の判定を行っても良い。
【0084】
[第5の実施形態]
上記実施形態では、画像表示装置に表示される色に対応する対応色と、画像表示装置に表示されている色を画像出力装置に出力させることで得られる色とのカラーマッチングの精度を求めていたが、他にも例えば画像処理装置と画像出力装置とを接続し、画像出力装置が出力した色がユーザの好みに合わなかった場合、ユーザの所望の色味を画像処理装置に入力し、入力された色の対応色と、上記画像出力装置により出力された色を色測器で測定することで得られる色とのカラーマッチングを求めても良い。そしてそのカラーマッチングの精度によって、精度の合否結果を第1の実施形態で説明したようにGUI上に表示し、プリンタのプロファイルを行っても良い。
【0085】
このように、画像出力装置や画像表示装置等により表示、出力された色がユーザの所望の色でなかった場合に、この所望の色を入力させ、入力された所望の色の対応色と上記表示、出力された色とのカラーマッチングの精度を求め、その結果に応じてプロファイルの更新を行っても良い。
【0086】
なお、所望の色に対応する対応色の選択方法としては、例えば複数の対応色のうち、所望の色に最もカラーマッチングする色を検索し、この色に対する対応色としても良い。
【0087】
[その他の実施形態]
なお、本発明は、複数の機器(例えばホストコンピュータ、インタフェイス機器、リーダ、プリンタなど)から構成されるシステムに適用しても、一つの機器からなる装置(例えば、複写機、ファクシミリ装置など)に適用しても良い。
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUまたはMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても達成されることは言うまでもない。
【0088】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【0089】
プログラムコードを供給するための記憶媒体としては、例えば、フロッピー(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROMなどを用いることが出来る。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)などが実際の処理の一部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0090】
【発明の効果】
以上説明したように、本発明によって、人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度を求めることができる。また、人間の視覚特性に基づいた客観的な判断基準によるカラーマッチング精度の検証を色変換内容別に行い、適宜プロファイルを更新する事が出来るため、カラーマッチングを精度良く行うことが可能となる画像処理装置及びその方法及びその媒体を提供することができる。
【図面の簡単な説明】
【図1】本発明の第1の実施形態における画像処理装置の機能構成を示すと共に、その周辺機器を示すブロック図である。
【図2】本発明の第1の実施形態における画像処理装置が行う画像処理のメインの処理のフローチャートである。
【図3】ステップS204においてカラーマッチング精度算出部8がカラーマッチングの精度を求める処理の詳細を示すフローチャートである。
【図4】CIELAB色空間におけるa*b*平面を示す図である。
【図5】色変換方法毎のテーブルの構成例を示す図である。
【図6】ステップS205においてカラーマッチング精度判別部9が上記CRInを用いて、カラーマッチングの精度の善し悪しを判別する処理のフローチャートである。
【図7】ステップS208においてプロファイル作成・更新部10がプリンタプロファイルを最新のものに更新する処理の詳細を示すフローチャートである。
【図8】画像表示装置2に表示されるGUIの構成例を示す図である。
【図9】画像表示装置2に表示される、各パッチの色毎にマッチング精度、すなわちCRInを表示するGUIの表示例を示す図である。
【図10】本発明の第2の実施形態における画像処理装置の機能構成を示すと共に、その周辺機器との構成を示すブロック図である。
【図11】本発明の第2の実施形態における画像処理装置が行う画像処理のメインの処理のフローチャートである。
【図12】本発明の第3の実施形態におけるサーバ側の画像処理装置とクライアント側の画像処理装置(以下、画像処理サーバ)との機能構成を示すブロック図である。
【図13】本発明の第3の実施形態における画像処理装置と画像処理サーバとが行うメインの処理のフローチャートである。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing device, an image processing method, and a storage medium.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, with the spread of personal computers, an image is input as electronic data using an image input device such as a digital camera or a color scanner, and the image is displayed and confirmed using an image display device such as a CRT or an LCD. Editing, processing, correction, and the like are performed according to the application, and an image is output by an image output device such as a color printer. Recently, the use of directly outputting an image captured by a digital camera to a color printer without displaying it on a color monitor has been increasing. Further, there is a usage method that does not require an image input device, in which a CG image created on a computer is output by a color printer.
[0003]
As described above, when an image is handled between different image input / output devices such as a digital camera, a color scanner, a color monitor, and a color printer, the color reproduction characteristics and the color reproduction range of each device are different. Thus, a technique called a color management system (hereinafter, CMS) for matching color reproduction between different image processing apparatuses has appeared. The CMS includes a device profile describing the color reproduction characteristics of each image processing apparatus, a color matching method for performing color conversion, and the like. In order to realize consistent color reproduction between the image processing apparatuses, it is necessary to improve the accuracy of the device profile and the color matching method, and accordingly, the device profile is appropriately updated.
[0004]
Here, as the color conversion method, there are a plurality of methods according to the content of the image, the purpose of the color conversion, and the like. For example, a method of matching the monitor display with the printer output, a method of converting the print output to be desirable, and a method of converting the print output as vivid as possible and using the printer's color gamut as widely as possible. there were. Further, among the above color conversion methods, there is a color conversion method using a corresponding color in an output color signal corresponding to an input color signal.
[0005]
[Problems to be solved by the invention]
However, in the above-described conventional example, the updating of the device profile is not always performed in an appropriate case.For example, in the case of matching the monitor with the printer, for example, in the case of matching between the display color on the color monitor and the color printer, Compared with the output result, it is performed when it is determined that it is necessary, and it is not clear whether the profile should be updated or not. Furthermore, the judgment criteria were not quantified because they were subjective and ambiguous in that judgments were made based on human appearance. Japanese Patent Laying-Open No. 11-232073 discloses updating of a device profile for improving matching accuracy between color image processing apparatuses, but also discloses updating of a device profile visually by a user. The criteria for updating were not clear and not quantified.
[0006]
On the other hand, in some cases, the determination as to whether or not to update may be made objectively. However, in the case of the monitor matching as described above, attention has simply been paid to the color difference between the colorimetric value of the color monitor display color and the colorimetric value of the color output color of the color printer. Therefore, in a color conversion method for matching a light source color displayed on a color monitor or the like with an object color output on a color printer or the like, the appearance of each color is different, and even if the colorimetric values are matched, the same color is obtained. There is a problem that the accuracy of color conversion cannot be accurately determined because a criterion corresponding to human color appearance is not used. Further, in the case of a method of converting a printed matter preferably, there is a problem that it is difficult to quantify the subjective content of preference, and it is not possible to accurately determine the accuracy of color conversion.
[0007]
The present invention has been made in view of the above problems, and has as its object to provide an image processing apparatus, an image processing method, and a storage medium that require color matching accuracy based on objective judgment criteria based on human visual characteristics. I do.
[0008]
SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problem, and it is possible to accurately verify color conversion accuracy for each color conversion content, appropriately update a device profile, and perform image processing that can perform color conversion with high accuracy. An object is to provide an apparatus, a method thereof, and a medium therefor.
[0009]
[Means for Solving the Problems]
In order to achieve an object of the present invention, for example, an image processing apparatus of the present invention has the following configuration.
[0010]
That is, data of a first color group including at least one or more colors and each color obtained by outputting each color of the first color group by the image output device, wherein each color is the first color. Storage holding means for storing and holding each color of the color group and data of a second color group constituted by each color having a predetermined relationship in association with each other;
Data indicating a color group obtained by outputting the input color group by the image output device is input from the outside, and the data and the correspondence corresponding to the input color group stored and held in the storage unit are stored. Calculation means for calculating a lightness error, a saturation error, and a hue error using the data of the color group and calculating a color reproduction index of color matching using these errors;
It is characterized by having.
[0011]
Also preferably,
The image output device, a profile storage holding unit that stores and holds a profile of each device including an image display device,
Based on the average value, a notification unit that determines whether to update the profile of any one of the devices stored and held in the profile storage unit and notifies the determination result is provided. Features.
[0012]
Preferably, the apparatus further comprises updating means for updating any one of the profiles of the devices.
[0013]
Preferably, the apparatus further comprises a transmission unit for transmitting the profile updated by the updating unit to an external device.
[0014]
In order to achieve the object of the present invention, for example, an image processing method of the present invention has the following configuration.
[0015]
That is, data of a first color group including at least one or more colors and each color obtained by outputting each color of the first color group by the image output device, wherein each color is the first color. Each color of the color group and data of a second color group composed of each color having a predetermined relationship are stored in a memory in association with each other,
Data indicating a color group obtained by outputting the input input color group by the image output device is externally input, and the data and a corresponding color group corresponding to the input color group stored and held in the memory , An error of lightness, an error of saturation, and an error of hue are obtained, and further, a color reproduction index of color matching is obtained by using these errors.
[0016]
Also preferably,
The image output device, a profile of each device including an image display device is stored and held in a memory,
A notification step of determining whether to update the profile of any of the devices stored in the memory based on the average value, and reporting a determination result. .
[0017]
Preferably, the apparatus further comprises an updating step of updating any one of the profiles of the devices.
[0018]
Preferably, the method further comprises a transmitting step of transmitting the profile updated in the updating step to an external device.
[0019]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, the present invention will be described in detail according to preferred embodiments with reference to the accompanying drawings.
[0020]
[First Embodiment]
<Basic configuration of image processing device>
FIG. 1 is a block diagram illustrating a functional configuration of the image processing apparatus according to the present embodiment and peripheral devices thereof. Reference numeral 1 denotes an image processing apparatus main body, 2 denotes an image display device, which is constituted by a CRT, an LCD, or the like, and displays an image. An image output device 3 prints an image on an image recording medium such as paper or OHP. In the present embodiment, the image output device 3 is treated as a printer. However, the device is not limited to a printer as long as it has a function of printing an image on the image recording medium.
[0021]
Reference numeral 4 denotes an interface (I / F) unit for connecting the image display device 2 to the image processing device 1, and 5 denotes a color input from the image input device 17, a color displayed on the image display device 2, and an image output device 3. A color matching processing unit 6 for performing color matching with the color output by the image processing unit 6; and an image processing unit 6 for performing various image processing such as gradation conversion processing on the image output to the image output device 3.
[0022]
Reference numeral 7 denotes a corresponding color / permissible value storage unit for each color conversion in which a corresponding color for each color conversion and its permissible value (the details of the corresponding color for each color conversion and its permissible value will be described later) are stored. A color matching accuracy calculating unit 9 for obtaining the accuracy of color matching by the method; a color matching accuracy determining unit 9 for determining the color matching accuracy using the result of the accuracy calculated by the color matching accuracy calculating unit 8; A profile creating / updating unit 11 for creating and updating device profiles to be used (profiles such as a printer profile, a monitor profile, and a scanner / digital camera profile to be described later). A user inputs various instructions to the image processing apparatus 1 by the user. Operation unit.
[0023]
12, a paper setting unit for setting the type of output paper used in the image output device 3, 13 an I / F unit for connecting the image output device 3 to the image processing device 1, and 14 a temporary unit for performing data processing. A data buffer 15 for storing data, a monitor profile storage unit 15 for storing a monitor profile of the image display device 2 or the like for each color conversion method, and 16 a printer profile for the image output device 3 or the like for each color conversion method. A printer profile storage unit 17, an image input device such as a scanner or a digital camera capable of inputting an image as electronic data to the image processing device 1, and 18 an image input device 17 for connecting the image input device 17 to the image processing device 1 An I / F unit 19 is a scanner that stores a profile of the image input device 17 such as a scanner or a digital camera for each color conversion method. - a digital camera profile storage unit.
[0024]
Reference numeral 20 denotes a colorimeter for measuring the color of each color patch printed on the recording medium output from the image output device 3. Reference numeral 21 denotes an I / F unit for connecting the colorimeter 20 to the image processing apparatus 1.
[0025]
<Overall processing>
In the following, a color patch according to the printer profile according to the specified color conversion is output to the image output device 3, the output color is read by the result measured by the colorimeter 20, and the captured color is designated as the designated color. A difference (corresponding to the difference will be described later, and this difference is referred to as color matching accuracy) from the corresponding color corresponding to the color conversion is determined, and whether the printer profile should be updated according to the accuracy is determined. An image processing method for presenting such information will be described. In the following, a printer profile is used as a profile to be updated. However, the present invention is not limited to this. For example, a monitor profile may be used.
[0026]
FIG. 2 is a flowchart of the main processing of the image processing. FIG. 8 shows a configuration example of a GUI displayed on the image display device 2 for inputting execution of each process described later. Hereinafter, a process of obtaining the accuracy of color matching and creating and updating a printer profile according to the obtained accuracy will be described with reference to FIGS.
[0027]
First, the user designates and selects one of the check buttons 814a, 814b, and 814c using the operation unit 11 (the color conversion method corresponding to the black circle is the selected color conversion method). Thereby, the accuracy of the color matching in the selected color conversion method is obtained below. The selection of the color conversion method is not limited to these three. Therefore, in step S200, the selected color conversion method is set as one to be used in the following processing.
[0028]
Next, in step S201, pressing of the patch output button 804 by the user using the operation unit 11 is detected, and the image of the color patch is obtained from the printer profile storage unit 16 using the printer profile corresponding to the color conversion method set in step S200. Data is created and output to the data buffer 4. The image output device 3 prints a color patch on a recording medium such as paper or OHP using the image data of the color patch, and outputs it. In the present embodiment, six color patches of R, G, B, C, M, and Y are used as color patches, but the number is not limited to this.
[0029]
Next, in step S202, the color of each color patch recorded on the recording medium by the colorimeter 20 is measured. Next, in step S203, pressing of the measurement data read button 805 by the user using the operation unit 11 is detected, and the measurement data Dn (where n is an index indicating each color (patch), Then, 1 ≦ n ≦ 6) is input to the data buffer 14. In this embodiment, the measurement result is a CIELAB value determined by CIE (International Commission on Illumination).
[0030]
Next, in step S204, pressing of the accuracy calculation button 806 by the user using the operation unit 11 is detected, and the matching accuracy calculation unit 8 calculates the accuracy of color matching using the measurement data D. Although details of the process in step S204 will be described later, in this step, a color reproduction index CRI of color matching is obtained as the accuracy of color matching.
[0031]
Next, in step S205, the matching accuracy determination section 9 compares the color reproduction index CRI with a preset threshold TH to determine whether the color matching accuracy is good or not. The result of the determination is displayed in an area 807. In the area 807, a numerical value indicating the accuracy of the color matching and character information indicating whether or not the accuracy is acceptable are displayed. The details of the determination processing in this step will be described later. Next, in step S206, the matching accuracy determination section 9 determines whether or not the judgment result is acceptable (determined by comparing the color reproduction index CRI with the threshold value TH).
[0032]
If not, the printer profile should be updated. Therefore, in step S207, the press of the button 813 for instructing the update of the device profile is accepted, and the update can be performed. If it is detected that the user has pressed the profile update button 813 using the operation unit 11, the process proceeds to step S208, where the profile creation / update unit 10 creates the latest printer profile. 16 is updated to the created latest printer profile. The details of the latest printer profile creation process will be described later.
[0033]
In step S209, it is determined again whether or not the user has pressed the re-verification button 815 using the operation unit 11 to perform the color matching accuracy using the updated printer profile. If so, the process proceeds to step S200; otherwise, the process ends.
[0034]
<Calculation of color matching accuracy>
FIG. 3 is a flowchart showing details of the process in which the color matching accuracy calculation section 8 calculates the accuracy of color matching in step S204. The details of the process for obtaining the accuracy of color matching will be described below with reference to the flowchart.
[0035]
First, in step S301, the number of colors n for calculating color matching accuracy is initialized to one. Next, in step S302, the nth corresponding color data Pn and the permissible value data Tn (1 ≦ n) registered in the table corresponding to the color conversion method selected and set in step S200 from the corresponding color / permissible value storage unit 7 ≦ 6).
[0036]
FIG. 5 shows a configuration example of a table for each color conversion method. Each table is provided for each color conversion method, and is used to realize different color reproducibility. For example, the table 1 is used for a first color reproduction that performs visually faithful color reproduction on the image display device 2.
[0037]
In each table, corresponding color data Pn and allowable value data Tn corresponding to patches of six colors are registered. Other items in the table will be described with reference to FIG. FIG. 4 shows an a * b * plane in the CIELAB color space. The front side of the drawing is defined as a positive L direction, and the back direction of the drawing is defined as a negative L direction.
[0038]
The original color ORn (○) indicates, for example, the color displayed on the image display device 2, and the corresponding color Pn (例 え ば) is output from the image output device 3 that performs the best color matching with the original color ORn, for example. Indicates the color Pn to be used. That is, when the original color is recorded on the image recording medium by the image output device 3 and the recorded color is judged to be the same as the original color by subjective evaluation, the recorded color corresponds to the original color. Corresponding color.
[0039]
TnLp and TnLm indicate allowable ranges (TnLp is a plus-side allowable value and TnLm is a minus-side allowable value) when the original color ORn and the corresponding color Pn are matched with respect to saturation. TnCp and TnCm indicate allowable ranges (TnCp is a positive side allowable value, TnCm is a negative side allowable value) when the original color ORn and the corresponding color Pn are matched with respect to saturation, and TnHp and TnHm are the same. , The allowable range where the original color ORn and the corresponding color Pn match with respect to the hue (TnHp is a plus side allowable value, and TnHm is a minus side allowable value).
[0040]
The corresponding color Pn and the permissible values TnLp, TnLm, TnCp, TnCm, TnHp, TnHm corresponding to the original color ORn are determined in advance by a subjective evaluation experiment between the monitor display color and the print color, as shown in FIG. It is assumed that the corresponding table data is stored in the corresponding color / permissible value storage unit 7 for each color reproduction.
[0041]
Of course, it is needless to say that the corresponding color and the allowable value may be set for each image output device or each output sheet, and may be appropriately used. Here, PnL, PnC, and PnH in FIG. 5 are colorimetric values LCH of Pn in the polar coordinate system, and are converted from CIELAB values using the following equations (1) to (3).
[0042]
L * = L * (1)
Cab * = √ ((a *) × (a *) + (b *) × (b *)) (2)
Hab = arctan (b * / a *) (3)
Returning to FIG. 3, in step S303, of the measurement data D written in the data buffer 14 in step S203, the n-th measurement data Dn is read from the data buffer 14, and the above equations (1) to (3) are calculated. Is used to calculate the polar coordinate system color values DnL, DnC, and DnH. In step S304, the brightness DnL of the n-th color patch is compared with the brightness PnL of the n-th corresponding point. If DnL ≧ PnL, the process proceeds to step S305, and the brightness accuracy Le is calculated.
Le = (DnL-PnL) / TnLp
Is calculated. That is, a value obtained by normalizing the difference between the brightness DnL of the nth color patch and the brightness PnL of the nth corresponding point with the allowable value TnLp on the plus side of the brightness is calculated. Therefore, only when the value Le obtained by this calculation is 0 ≦ Le ≦ 1, it is permissible that the brightness DnL of the nth color patch matches the brightness PnL of the nth corresponding point.
[0043]
On the other hand, if DnL <PnL as a result of the comparison in step S304, the process proceeds to step S306, and the brightness accuracy Le is adjusted.
Le = (PnL-DnL) / TnLm
Is calculated. That is, only when the value Le calculated by this calculation is 0 ≦ Le ≦ 1, it is acceptable that the brightness DnL of the n-th color patch matches the brightness PnL of the n-th corresponding point.
[0044]
In step S307, the saturation DnC of the n-th color patch is compared with the saturation PnC of the n-th corresponding point. If DnC ≧ PnC, the process proceeds to step S308, and the saturation accuracy Ce is calculated.
Ce = (DnC-PnC) / TnCp
Is calculated. That is, a value obtained by normalizing the difference between the saturation DnC of the nth color patch and the saturation PnC of the nth corresponding point by the allowable value TnCp on the plus side of the saturation is calculated. Therefore, only when the value Ce by this calculation is 0 ≦ Ce ≦ 1, it is acceptable that the saturation DnC of the nth color patch matches the saturation PnC of the nth corresponding point.
[0045]
On the other hand, if DnC <PnC as a result of the comparison in step S307, the process proceeds to step S309, in which the saturation accuracy Ce is reduced.
Ce = (PnC-DnC) / TnCm
Is calculated. That is, only when the value Ce by this calculation is 0 ≦ Ce ≦ 1, it is acceptable that the saturation DnC of the n-th color patch matches the saturation PnC of the n-th corresponding point.
[0046]
In step S310, the hue DnH of the n-th color patch is compared with the hue PnH of the n-th corresponding point, and if DnH ≧ PnH, the process proceeds to step S311 to set the hue accuracy He to
He = (DnH-PnH) / TnHp
Is calculated. That is, a value obtained by normalizing the difference between the hue DnH of the n-th color patch and the hue PnH of the n-th corresponding point by the allowable value TnHp on the plus side of the hue is calculated. Therefore, only when the value He by this calculation is 0 ≦ He ≦ 1, it is acceptable that the hue DnH of the n-th color patch matches the hue PnH of the n-th corresponding point.
[0047]
On the other hand, if DnH <PnH as a result of the comparison in step S310, the process proceeds to step S312, and the hue accuracy He is reduced.
He = (PnH-DnH) / TnHm
Is calculated. That is, only when the value He by this calculation is 0 ≦ He ≦ 1, it is acceptable that the hue DnH of the n-th color patch matches the hue PnH of the n-th corresponding point.
[0048]
As described above, Le, Ce, and He obtained by the above processing are errors when the maximum allowable value is set to 1 when matching is seen by a human, and therefore, for each of the lightness direction, the saturation direction, and the hue direction. It can be treated as a value equivalent to the characteristics of the human eye.
[0049]
Next, in step S313, using the error Le in the lightness direction, the error Ce in the saturation direction, and the error He in the hue direction, a color reproduction index CRIn, which is an evaluation amount representing the degree of color matching when viewed by a human, is calculated as follows. Calculate based on the formula.
[0050]
CRIn = √ (Le × Le + Ce × Ce + He × He)
This CRIn indicates the accuracy of color matching between the color of the nth color patch and the nth corresponding color. Next, in step S314, the obtained CRIn is written to the data buffer 14. In step S315, all the above processes are performed on all the color patches, it is determined whether or not CRIn has been obtained for all of the color patches (whether or not n = 6). If is obtained, the process shown in FIG. 3 is terminated, and the process proceeds to step S205. On the other hand, if n <6, the process proceeds to step S316, n is updated by adding 1, and the process from step S302 is performed.
<Color matching accuracy determination>
FIG. 6 is a flowchart of a process in which the color matching accuracy determination unit 9 determines whether the color matching accuracy is good or not using the CRIn in the above step S205.
[0051]
First, in step S601, variables CRIs and n used below are initialized to 0 and 1, respectively. Then, in step S602, CRIn is read from the data buffer 14, and added to the variable CRIs in step S603. In step S604, it is determined whether or not CRIn for all n has been added to CRIs (whether or not n = 6). If n <6, the process proceeds to step S609; Is updated by adding 1, to Steps S602 and S603.
[0052]
On the other hand, if n = 6, the process proceeds to step S605, and the value obtained by dividing CRIs by n (= 6) is substituted for the variable CRI. That is, the variable CRI indicates an average value of all CRIns, and this embodiment uses the CRI as a color reproduction index. In step S606, the CRI is compared with a predetermined threshold value TH, and if CRI <TH, that is, the average value of the error in the lightness direction, the error in the saturation direction, and the error in the hue direction for all the color patches is determined to be a predetermined value. If it is smaller than the value, the error between the color of each patch and its corresponding color is small (the degree of color matching when viewed by a human is high), so the process proceeds to step S607, and the result of the accuracy determination is determined. "Passed". That is, “pass” is displayed in the area for displaying the determination result in the area 807, and the pass is notified.
[0053]
On the other hand, when CRI ≧ TH, that is, when the average value of the error in the lightness direction, the error in the saturation direction, and the error in the hue direction for all the color patches is equal to or more than a predetermined value, the color of each patch and its corresponding Since the error with the corresponding color is large (the degree of color matching when viewed by a human is low), the process proceeds to step S608, and the result of the accuracy determination is “fail”. That is, “fail” is displayed in the area for displaying the determination result in the area 807 to notify the failure. In both cases of step S607 and step S608, the obtained color reproduction index CRI is displayed in the area for displaying the accuracy in the area 807.
[0054]
In the present embodiment, the notification method of the accuracy determination result is displayed as characters such as “pass” and “fail”. However, the present invention is not limited to this. For example, “pass”, “ It may be expressed as an image representing “fail” or a sound.
[0055]
Although not shown in the flowchart, when the user presses the detail button 808 using the operation unit 11, the GUI illustrated in FIG. 9 is displayed on the image display device 2. The GUI in FIG. 7 displays matching accuracy, that is, CRIn, for each color of each patch.
[0056]
<Latest profile creation>
FIG. 7 is a flowchart showing the details of the process in which the profile creation / update unit 10 updates the printer profile to the latest one in step S208. The process of updating the printer profile to the latest one will be described below in detail with reference to the flowchart.
[0057]
In step S701, it is detected that the user has pressed the patch output button 809 using the operation unit 11, and in step S200, data of a color patch for profile creation corresponding to the color selection method selected and set in step S200 is created. Output to 3. The image output device 3 prints and outputs a color patch on a recording medium based on the data. Although the number of colors of the color patches to be output is not particularly limited, for example, 729 color patches of a combination of 9 steps for each color of RGB are output.
[0058]
In step S702, the color of each color patch recorded on the recording medium is measured by the colorimeter 20. When it is detected in step S703 that the reading of the measurement data read 810 is detected, the measurement data, which is the measurement result, is stored in the data buffer 14. To enter. In this embodiment, the measurement result is a CIELAB value determined by CIE (International Commission on Illumination). Next, in step S203, the press of the measurement data read button 805 by the user using the operation unit 11 is detected, and the measurement data D is written to the data buffer 14.
[0059]
In step S704, pressing of the profile creation button 811 by the user using the operation unit 11 is detected, and a printer profile corresponding to the color conversion method selected and set in step S200 is created according to a predetermined format. The user can also input a desired profile name in the file name window 812 using the operation unit 11.
[0060]
As described above, by verifying the accuracy of the color matching using the corresponding color Pn corresponding to the original color OR and the allowable range Tn, the color matching accuracy based on an objective criterion based on human visual characteristics. Can be verified and the profile can be updated appropriately.
[0061]
[Second embodiment]
FIG. 10 shows the functional configuration of the image processing apparatus according to the present embodiment, and also shows the configuration with peripheral devices. Reference numeral 1001 denotes a main body of the image processing apparatus according to the present embodiment, to which a sensor (sensor unit 1004) for performing color measurement can be connected. The image processing apparatus according to the present embodiment is a portable (portable) image processing apparatus such as a PDA or a notebook computer.
[0062]
An external image processing apparatus 1002 connected to the image processing apparatus 1001 is generally a desktop computer such as a PC or a workstation, and holds various device profiles similarly to the image processing apparatus 1001. The image processing apparatus 1001 of the present embodiment transmits a new profile created by performing the same processing as in the first embodiment to the external image processing apparatus 1002. The image processing apparatus 1002 receives the transmitted profile and updates the received profile. Hereinafter, the image processing apparatus 1001 and the processing performed by the image processing apparatus 1001 will be described. In the following, a profile to be updated will be described as a printer profile, but the present invention is not limited to this. For example, a monitor profile may be used.
[0063]
An image output apparatus 1003 prints an image on an image recording medium such as paper or OHP. In this embodiment, the image output device 1003 is treated as a printer, but is not limited to a printer as long as it has a function of printing an image on the image recording medium. Reference numeral 1004 denotes the sensor unit, and reference numeral 1005 denotes a communication interface unit for performing data communication between the image processing apparatus 1001 and the image processing apparatus 1002.
[0064]
Reference numeral 1006 denotes a measurement data holding unit 1006 and 1007 for holding measurement data by the sensor unit 1004. Corresponding colors for each color conversion and their permissible values (the details of the corresponding colors for each color conversion and their permissible values will be described later) are stored. A color / permissible value storage unit corresponding to each color conversion, 1008 is a color matching accuracy calculation unit for obtaining color matching accuracy, and 1009 is a color matching accuracy determination using the accuracy result calculated by the color matching accuracy calculation unit 1008. A color matching accuracy discriminating unit 1010 is a profile creating / updating unit that creates and updates a device profile (a profile such as a printer profile, a monitor profile, and a scanner / digital camera profile) used for color matching.
[0065]
Reference numeral 1011 denotes an operation / display unit that displays images and character information and can input various instructions in a touch panel format. Reference numeral 1012 denotes a sensor control unit 1012 that controls the sensor unit 1004. A data buffer 1014 for temporarily storing data, a monitor profile storage unit 1014 storing a monitor profile for each color conversion method, and a printer 1015 storing a printer profile for the image output device 1003 or the like for each color conversion method. This is a profile storage unit.
[0066]
<Overall processing>
FIG. 11 is a flowchart of main processing of image processing performed by the image processing apparatus according to the present embodiment having the above configuration. In the flowchart shown in FIG. 11, each process from step S1101 to step S1109 is almost the same as each process from step S200 to step S209, and in step S1102, in the present embodiment, The difference is that the color of the color patch on the recording medium is measured using the sensor unit 1004. Therefore, description of each process from step S1100 to step S1109 will be omitted. In the present embodiment, it is assumed that the screen displayed on the operation / display unit 1011 displays the GUI shown in FIG.
[0067]
In step S1110, the printer profile newly created in step S1108 is transmitted to the image processing apparatus 1002 via the communication interface unit 1005. The image processing apparatus 1002 updates the held printer profile to the transmitted printer profile.
[0068]
As described above, by using the handy-type image processing device with the sensor unit for color measurement, it is possible to use the image processing device 1002 to perform color matching accuracy based on objective judgment criteria based on human visual characteristics. It is possible to easily perform the verification of the image processing and appropriately update the profile. The image processing apparatus 1001 is held by a service person or the like, and the image processing apparatus 1002 can be externally provided to the image processing apparatus 1002 based on the human visual characteristics. It is possible to verify the color matching accuracy based on a basic criterion, transmit the result of updating the profile as appropriate, and update the profile held by the image processing apparatus 1002.
[0069]
[Third Embodiment]
FIG. 12 shows a functional configuration of a server-side image processing apparatus and a client-side image processing apparatus (hereinafter, an image processing server). The image processing apparatus according to the present embodiment transmits the measurement data to the image processing server, receives the latest profile created by the image processing server using the measurement data, and updates the received profile. On the other hand, the image processing server obtains the color matching accuracy using the received measurement data, and if the accuracy is not acceptable, creates a new profile and transmits it to the image processing device. Hereinafter, the image processing apparatus and the image processing server and the processing performed by them will be described. In the following, a profile to be updated will be described as a printer profile, but the present invention is not limited to this. For example, a monitor profile may be used.
[0070]
Reference numeral 1201 denotes an image processing server having the following configuration. Reference numeral 1204 denotes a communication interface unit used for performing data communication between the image processing server 1201 and the image processing device 1202; 1205, a measurement data storage unit for storing measurement data transmitted from the image processing device 1202; The corresponding color / permissible value storage unit for each color conversion, in which the corresponding color and its permissible value (details of the corresponding color for each color conversion and its permissible value will be described later) are stored. A matching accuracy calculating unit 1209 performs a color matching accuracy determination using the result of the accuracy calculated by the color matching accuracy calculating unit 1208. A color matching accuracy determining unit 1206 includes a device profile (printer profile, described later) used for color matching. Monitor profile, scanner / digital camera profile A profile generator of making profile) such as yl.
[0071]
Reference numeral 1210 denotes an operation / display unit capable of displaying images and character information and inputting various instructions in a touch panel format, 1212 a data buffer for temporarily storing data for data processing, and 1213 a monitor. A monitor profile storage unit 1210 stores a profile for each color conversion method. A printer profile storage unit 1214 stores a printer profile of the image output device 1203 or the like for each color conversion method.
[0072]
An image processing apparatus 1202 is connected to the image processing server 1201 via a network such as the Internet or a LAN. An image output device 1203 is connected to the image processing device 1202 via the I / F unit 1215, and prints an image on an image recording medium such as paper or OHP. Reference numeral 1216 denotes a color matching processing unit which performs a color matching process between a color displayed on the image display device 1226 and a color output from the image output device 1203. Reference numeral 1217 denotes a gradation conversion process for an image output to the image output device 1203. An image processing unit that performs various image processing such as.
[0073]
Reference numeral 1218 denotes a paper setting unit for setting the type of output paper used in the image output apparatus 1203. Reference numeral 1219 denotes a profile update for updating a device profile (a profile such as a printer profile, a monitor profile, and a scanner / digital camera profile described later) used for color matching. Department. Reference numeral 1220 denotes an operation / display unit capable of displaying images and character information and inputting various instructions in a touch panel format, 1221 a communication interface unit for performing data communication with the image processing server 1201, 1222 an image A monitor profile storage unit that stores a monitor profile of the display device 1226 for each color conversion method, and a printer profile storage unit 1223 that stores printer profiles of the image output device 1203 and the like for each color conversion method.
[0074]
Reference numeral 1224 denotes an image buffer for temporarily storing image data to be output to the image output device 1203. Reference numeral 1225 denotes an I / F unit for connecting to the image display device 1226. Reference numeral 1226 denotes an image display device, which is configured by a CRT, an LCD, or the like, and displays an image. Reference numeral 1228 denotes a colorimeter which measures the color of each color patch printed on the recording medium output from the image output device 1203. Reference numeral 1227 denotes an I / F unit for connecting the colorimeter 1228 to the image processing device 1202.
[0075]
<Overall processing>
FIG. 13 is a flowchart of main processing performed by the image processing apparatus and the image processing server having the above configuration. The processes performed by the image processing apparatus 1202 from step S1301 to step S1303 are the same as the processes from step S200 to step S202, and thus description thereof is omitted. In the present embodiment, it is assumed that the screen displayed on the operation / display units 1220 and 1210 displays the GUI shown in FIG.
[0076]
In step S1304, the data measured by the colorimeter 1228 is transmitted to the image processing server 1201 via the communication interface unit 1202. When the image processing server 1201 receives the measurement data in step S1351, it registers it in the measurement data storage unit 1205 in step S1352, and writes the measurement data to the data buffer 1212 in step S1353.
[0077]
Each process from step S1354 to step S1358 is almost the same as each process from step S204 to step S208, except that the latest printer profile is created by the profile creation unit 1206. Therefore, description of each process from step S1354 to step S1358 will be omitted. Next, in step S1359, a printer profile corresponding to the color conversion method selected and set in step S1301 is registered as the latest printer profile in the printer profile storage unit 1214. In step S1360, the latest printer profile created via the communication interface unit 1204 is transmitted to the image processing apparatus 1202.
[0078]
In step S1305, the image processing apparatus 1202 receives the measurement data. In step S1306, the profile updating unit 1219 converts the printer profile according to the color conversion method selected and set in step S1301 in the printer profile storage unit 1223 into the received printer profile. Update.
[0079]
In step S1361, the image processing server 1201 transmits data indicating the result of the color matching (data indicating whether the color matching has passed or failed, and data indicating the obtained accuracy) via the communication interface unit 1204, and the image processing apparatus 1202 Receives these data in step S1307.
[0080]
As described above, even when the image output device and the device (image processing server) for obtaining the accuracy of color matching are present at different positions (particularly at remote positions), an objective judgment criterion based on human visual characteristics. Color matching accuracy. It is easy to update the profile appropriately.
[0081]
[Fourth embodiment]
In the above embodiment, the profile is updated by updating the profile (printer profile) of the image output device. However, the profile may be updated by updating the profile of the image input device or the profile (monitor profile) of the image display device. That is, in order to enhance the accuracy of color matching, the profile of the image output device, the image input device, or the image display device may be appropriately updated. Further, instead of updating the profile, the color matching method may be changed. Of course, it goes without saying that the update of the profile and the change of the color matching method may be combined.
[0082]
In this case, a button for updating a monitor profile and the like other than the printer profile is provided.
[0083]
In the above embodiment, the color reproduction index CRI is obtained by calculating the color reproduction index CRIn of each color patch using the lightness error, the saturation error, and the hue error, and further calculating the average value of all CRIn. Although the reproduction index CRI was determined, the present invention is not limited to this. In addition, for example, for each color patch, the average value of the lightness error, the average value of the saturation error, and the average value of the hue error are obtained, and a threshold value is set for each of the average values. May be performed, and a pass / fail judgment may be made.
[0084]
[Fifth Embodiment]
In the above embodiment, the accuracy of color matching between the corresponding color corresponding to the color displayed on the image display device and the color obtained by outputting the color displayed on the image display device to the image output device is required. However, in addition, for example, connecting the image processing device and the image output device, if the color output by the image output device does not match the user's preference, input the desired color of the user to the image processing device, Color matching between a color corresponding to the input color and a color obtained by measuring the color output by the image output device with a colorimeter may be obtained. Then, depending on the accuracy of the color matching, the result of the pass / fail of the accuracy may be displayed on the GUI as described in the first embodiment, and the profile of the printer may be performed.
[0085]
As described above, when the color displayed and output by the image output device or the image display device is not the color desired by the user, the user is allowed to input the desired color, and The accuracy of color matching with the displayed and output colors may be determined, and the profile may be updated according to the result.
[0086]
As a method of selecting a corresponding color corresponding to a desired color, for example, a color that matches the desired color the most may be searched for from a plurality of corresponding colors, and a color corresponding to this color may be used.
[0087]
[Other embodiments]
The present invention can be applied to a system including a plurality of devices (for example, a host computer, an interface device, a reader, a printer, etc.), but may be a device including one device (for example, a copying machine, a facsimile machine, etc.). May be applied.
Further, an object of the present invention is to provide a storage medium storing a program code of software for realizing the functions of the above-described embodiments to a system or an apparatus, and a computer (or CPU or MPU) of the system or apparatus to store the storage medium. Needless to say, this can also be achieved by reading out and executing the program code stored in the.
[0088]
In this case, the program code itself read from the storage medium realizes the function of the above-described embodiment, and the storage medium storing the program code constitutes the present invention.
[0089]
As a storage medium for supplying the program code, for example, a floppy (registered trademark) disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, magnetic tape, nonvolatile memory card, ROM, or the like is used. I can do it. When the computer executes the readout program code, not only the functions of the above-described embodiments are realized, but also an OS (Operating System) running on the computer based on the instruction of the program code. It goes without saying that a case where a part of the actual processing is performed and the function of the above-described embodiment is realized by the processing is also included.
Further, after the program code read from the storage medium is written into a memory provided on a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that a CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.
[0090]
【The invention's effect】
As described above, according to the present invention, it is possible to obtain color matching accuracy based on an objective criterion based on human visual characteristics. In addition, since color matching accuracy can be verified for each color conversion content based on objective judgment criteria based on human visual characteristics and the profile can be updated as appropriate, image processing that enables accurate color matching can be performed. An apparatus, a method thereof, and a medium thereof can be provided.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a functional configuration of an image processing apparatus according to a first embodiment of the present invention and showing peripheral devices thereof.
FIG. 2 is a flowchart of main processing of image processing performed by the image processing apparatus according to the first embodiment of the present invention.
FIG. 3 is a flowchart illustrating details of a process in which a color matching accuracy calculation unit 8 obtains color matching accuracy in step S204.
FIG. 4 is a diagram showing an a * b * plane in a CIELAB color space.
FIG. 5 is a diagram illustrating a configuration example of a table for each color conversion method.
FIG. 6 is a flowchart of a process in which the color matching accuracy determination unit 9 determines whether color matching accuracy is good or bad using the CRIn in step S205.
FIG. 7 is a flowchart illustrating the details of a process in which the profile creation / update unit updates the printer profile to the latest one in step S208.
FIG. 8 is a diagram showing a configuration example of a GUI displayed on the image display device 2.
FIG. 9 is a diagram illustrating a display example of a GUI for displaying matching accuracy, that is, CRIn, for each color of each patch displayed on the image display device 2.
FIG. 10 is a block diagram showing a functional configuration of an image processing apparatus according to a second embodiment of the present invention, and showing a configuration with peripheral devices thereof.
FIG. 11 is a flowchart of main processing of image processing performed by the image processing apparatus according to the second embodiment of the present invention.
FIG. 12 is a block diagram illustrating a functional configuration of a server-side image processing apparatus and a client-side image processing apparatus (hereinafter, an image processing server) according to a third embodiment of the present invention.
FIG. 13 is a flowchart of main processing performed by an image processing apparatus and an image processing server according to a third embodiment of the present invention.

Claims (22)

少なくとも1色以上の色を含む第1の色群のデータと、当該第1の色群の各色を画像出力装置により出力させることで得られる各色であって、当該各色が当該第1の色群の各色と所定の関係となる各色により構成される第2の色群のデータとを対応づけて記憶保持する記憶保持手段と、
入力された入力色群を前記画像出力装置により出力させることで得られる色群を示すデータを外部から入力し、当該データと、前記記憶保持手段に記憶保持された前記入力色群に対応する対応色群のデータとを用いて、明度の誤差、彩度の誤差、色相の誤差を求め、更に、これらの誤差を用いてカラーマッチングの色再現指数を求める計算手段と
を備えることを特徴とする画像処理装置。
Data of a first color group including at least one or more colors and each color obtained by outputting each color of the first color group by an image output device, wherein each color is the first color group Storage holding means for storing and holding in association with each color of the second color group data constituted by each color having a predetermined relationship,
Data indicating a color group obtained by outputting the input color group by the image output device is input from the outside, and the data and the correspondence corresponding to the input color group stored and held in the storage unit are stored. Calculating a lightness error, a saturation error, and a hue error using the data of the color group; and calculating means for obtaining a color reproduction index of color matching using these errors. Image processing device.
前記記憶保持手段は、前記第1の色群のデータと前記第2の色群のデータを色変換方法毎に記憶保持することを特徴とする請求項1に記載の画像処理装置。The image processing apparatus according to claim 1, wherein the storage unit stores and holds the data of the first color group and the data of the second color group for each color conversion method. 前記計算手段は、前記入力色群を前記画像出力装置により出力させることで得られる色群を示すデータと、前記入力色群に対応する対応色群のデータとを用いて、明度の差分に基づく値、彩度の差分に基づく値、色相の差分に基づく値を求め、夫々の値の自乗和の平方根の値を夫々の色毎に求め、更に夫々の色毎に求めた前記平方根の値の平均値を前記カラーマッチングの再現指数として求めることを特徴とする請求項1または2に記載の画像処理装置。The calculation means is based on a difference in brightness using data indicating a color group obtained by outputting the input color group by the image output device and data of a corresponding color group corresponding to the input color group. Value, a value based on the difference in saturation, a value based on the difference in hue, a value of the square root of the sum of squares of each value is obtained for each color, and the value of the square root obtained for each color is further obtained. The image processing apparatus according to claim 1, wherein an average value is obtained as a reproduction index of the color matching. 更に、
前記画像出力装置、画像表示装置を含む各デバイスのプロファイルを記憶保持するプロファイル記憶保持手段と、
前記平均値に基づいて、前記プロファイル記憶保持手段に記憶保持された各デバイスのうち、いずれかのデバイスのプロファイルの更新を行うか否かを判断し、判断結果を報知する報知手段を備えることを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。
Furthermore,
The image output device, a profile storage holding unit that stores and holds a profile of each device including an image display device,
Based on the average value, a notification unit that determines whether to update the profile of any one of the devices stored and held in the profile storage unit and notifies the determination result is provided. The image processing apparatus according to claim 1, wherein:
前記報知手段は、前記平均値が前記所定の閾値よりも大きい場合、前記各デバイスのうち、いずれかのデバイスのプロファイルを更新する旨を報知することを特徴とする請求項4に記載の画像処理装置。5. The image processing apparatus according to claim 4, wherein when the average value is larger than the predetermined threshold value, the notification unit notifies that a profile of one of the devices is updated. 6. apparatus. 前記報知手段は更に、前記平方根の値を各色毎に報知することを特徴とする請求項4または5に記載の画像処理装置。The image processing apparatus according to claim 4, wherein the notifying unit further notifies the value of the square root for each color. 更に、前記各デバイスのプロファイルのうち、いずれかのプロファイルを更新する更新手段を備えることを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。The image processing apparatus according to claim 1, further comprising an updating unit configured to update any one of the profiles of each of the devices. 更に、前記更新手段により更新されたプロファイルを外部の装置に対して送信する送信手段を備えることを特徴とする請求項7に記載の画像処理装置。The image processing apparatus according to claim 7, further comprising a transmission unit configured to transmit the profile updated by the updating unit to an external device. 少なくとも1色以上の色を含む第1の色群のデータと、当該第1の色群の各色を画像出力装置により出力させることで得られる各色であって、当該各色が当該第1の色群の各色と所定の関係となる各色により構成される第2の色群のデータとを対応づけてメモリに記憶保持させておき、
入力された入力色群を前記画像出力装置により出力させることで得られる色群を示すデータを外部から入力し、当該データと、前記メモリに記憶保持された前記入力色群に対応する対応色群のデータとを用いて、明度の誤差、彩度の誤差、色相の誤差を求め、更に、これらの誤差を用いてカラーマッチングの色再現指数を求めることを特徴とする画像処理方法。
Data of a first color group including at least one or more colors and each color obtained by outputting each color of the first color group by an image output device, wherein each color is the first color group Is stored in a memory in association with each color of the second color group data constituted by each color having a predetermined relationship.
Data indicating a color group obtained by outputting the input input color group by the image output device is externally input, and the data and a corresponding color group corresponding to the input color group stored and held in the memory An image processing method comprising: determining a lightness error, a saturation error, and a hue error using the data of (1) and (2), and further calculating a color reproduction index of color matching by using these errors.
入力画像信号を出力画像信号へ変換する画像処理手段を有する画像処理装置において、
前記画像処理手段は複数の色変換手段と、該色変換の精度を算出する精度算出手段と、
該精度算出手段により算出された精度結果とあらかじめ設定されている閾値との大小を判別する精度判別手段とを具備することを特徴とする画像処理装置。
An image processing apparatus having image processing means for converting an input image signal into an output image signal,
The image processing unit includes a plurality of color conversion units, an accuracy calculation unit that calculates the accuracy of the color conversion,
An image processing apparatus comprising: an accuracy determination unit configured to determine a magnitude of a precision result calculated by the precision calculation unit and a preset threshold value.
前記精度判別手段の判別結果に基づき、色調整の設定を行う色調整設定手段とを具備することを特徴とする請求項10項記載の画像処理装置。The image processing apparatus according to claim 10, further comprising: a color adjustment setting unit configured to set a color adjustment based on a determination result of the accuracy determination unit. 前記色調整設定手段は、画像機器の機器特性情報を更新する機器特性情報更新手段を含むことを特徴とする請求項11記載の画像処理装置。The image processing apparatus according to claim 11, wherein the color adjustment setting unit includes a device characteristic information updating unit that updates device characteristic information of the image device. 前記機器特性情報更新手段は、変更後の機器特性情報を用い、前記色変換の精度を算出する精度算出手段と、該精度算出手段により算出された精度結果とあらかじめ設定されている閾値との大小を判別する精度判別手段とを含むことを特徴とする、請求項12記載の画像処理装置。The device characteristic information updating unit uses the changed device characteristic information to calculate an accuracy of the color conversion, and a magnitude of the accuracy result calculated by the accuracy calculating unit and a preset threshold value. The image processing apparatus according to claim 12, further comprising: an accuracy determining unit configured to determine the image quality. 前記精度算出手段は、前記複数の色変換毎に行う手段であることを特徴とする、請求項10記載の画像処理装置。The image processing apparatus according to claim 10, wherein the accuracy calculation unit is a unit that performs each of the plurality of color conversions. 前記精度算出手段は、あらかじめ設定してある前記入力画像信号に対応する前記出力画像信号における対応色とその許容値と、前記色変換された出力画像信号とを用いて算出する手段であることを特徴とする請求項10記載の画像処理装置。The accuracy calculating means may be a means for calculating using a corresponding color in the output image signal corresponding to the input image signal set in advance, a permissible value thereof, and the color-converted output image signal. The image processing apparatus according to claim 10, wherein: 前記精度算出手段は、あらかじめ設定してある前記入力画像信号に対応する前記出力画像信号における対応色と、前記色変換された出力画像信号との視覚特性に基づいた差を算出する手段であることを特徴とする請求項15記載の画像処理装置。The accuracy calculation unit is a unit that calculates a difference based on a visual characteristic between a corresponding color in the output image signal corresponding to the preset input image signal and the color-converted output image signal. The image processing apparatus according to claim 15, wherein: 前記精度算出手段で用いる許容値は、前記出力画像信号における対応色毎に値が設定されていることを特徴とする請求項15記載の画像処理装置。16. The image processing device according to claim 15, wherein a value is set for each corresponding color in the output image signal as the allowable value used by the accuracy calculation unit. 前記精度算出手段で用いる許容値は、あらかじめ色相、彩度、明度毎に値が設定され、視覚特性を反映した値であることを特徴とする請求項15記載の画像処理装置。16. The image processing apparatus according to claim 15, wherein the allowable value used in the accuracy calculation unit is a value that is set in advance for each hue, saturation, and lightness and reflects a visual characteristic. 前記精度算出手段で用いる対応色または許容値は、前記複数の色変換毎に値が設定されていることを特徴とする、請求項15記載の画像処理装置。16. The image processing apparatus according to claim 15, wherein the corresponding color or the allowable value used in the accuracy calculation unit is set for each of the plurality of color conversions. 前記複数の色変換手段は、前記入力画像信号をモニタに表示された画像を視覚的に忠実に再現するよう対応する前記出力画像信号へ変換する手段、該色変換手段と比較して視覚的により好ましい色に対応する前記出力画像信号へ変換する手段、該入力画像信号を出来るだけ鮮やかな色で出力機器の色域を出来るだけ広く使用するよう前記出力画像信号へ変換する手段の少なくともひとつを含むことを特徴とする、請求項10記載の画像処理装置。The plurality of color conversion means is means for converting the input image signal into the corresponding output image signal so as to visually faithfully reproduce an image displayed on a monitor, and is more visually compared with the color conversion means. Means for converting the output image signal corresponding to a preferred color into at least one of the means for converting the input image signal into the output image signal so as to use the color gamut of the output device as vivid as possible The image processing apparatus according to claim 10, wherein: 入力画像信号を出力画像信号へ変換する画像処理工程を有する画像処理方法において、
前記画像処理工程は複数の色変換工程と、該色変換の精度を算出する精度算出工程と、
該精度算出工程により算出された精度結果とあらかじめ設定されている閾値との大小を判別する精度判別工程とを有することを特徴とする、画像処理方法。
An image processing method having an image processing step of converting an input image signal into an output image signal,
The image processing step includes a plurality of color conversion steps, an accuracy calculation step of calculating the accuracy of the color conversion,
An image processing method, comprising: an accuracy determination step of determining the magnitude of an accuracy result calculated in the accuracy calculation step and a preset threshold value.
画像処理プログラムを記録する記録媒体であって、入力画像信号を出力画像信号へ変換する画像処理機能を有する画像処理において、
前記画像処理機能は複数の色変換機能と、該色変換の精度を算出する精度算出機能と、該精度算出機能により算出された精度結果とあらかじめ設定されている閾値との大小を判別する精度判別機能とを実現するプログラムを記録することを特徴とする記録媒体。
In image processing, which is a recording medium for recording an image processing program and has an image processing function of converting an input image signal into an output image signal,
The image processing function includes a plurality of color conversion functions, an accuracy calculation function for calculating the accuracy of the color conversion, and an accuracy determination for determining the magnitude of an accuracy result calculated by the accuracy calculation function and a preset threshold value. A recording medium for recording a program for realizing a function.
JP2002212615A 2001-09-07 2002-07-22 Image processing apparatus, image processing method, and storage medium Expired - Fee Related JP4125062B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2002212615A JP4125062B2 (en) 2002-07-22 2002-07-22 Image processing apparatus, image processing method, and storage medium
DE60229338T DE60229338D1 (en) 2001-09-07 2002-09-03 Image processing method and apparatus
EP02256094A EP1291822B1 (en) 2001-09-07 2002-09-03 Method and apparatus for image processing
US10/235,813 US7420705B2 (en) 2001-09-07 2002-09-06 Image processing apparatus, image processing method, program and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002212615A JP4125062B2 (en) 2002-07-22 2002-07-22 Image processing apparatus, image processing method, and storage medium

Publications (3)

Publication Number Publication Date
JP2004056574A true JP2004056574A (en) 2004-02-19
JP2004056574A5 JP2004056574A5 (en) 2007-03-01
JP4125062B2 JP4125062B2 (en) 2008-07-23

Family

ID=31935501

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002212615A Expired - Fee Related JP4125062B2 (en) 2001-09-07 2002-07-22 Image processing apparatus, image processing method, and storage medium

Country Status (1)

Country Link
JP (1) JP4125062B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006319751A (en) * 2005-05-13 2006-11-24 Dainippon Printing Co Ltd Device, method, or system for determining printing performance
JP2009044513A (en) * 2007-08-09 2009-02-26 Fuji Xerox Co Ltd Printing device
JP2013123092A (en) * 2011-12-09 2013-06-20 Brother Ind Ltd Display controller and computer program
US9036215B2 (en) 2012-10-16 2015-05-19 Fuji Xerox Co., Ltd. Image forming apparatus and image forming method
JP2016181861A (en) * 2015-03-25 2016-10-13 シャープ株式会社 Image forming device having color correction function, system having the same and method for the same
US10496349B2 (en) 2017-08-23 2019-12-03 Seiko Epson Corporation Profile adjustment system, profile adjustment device, and profile adjustment method

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006319751A (en) * 2005-05-13 2006-11-24 Dainippon Printing Co Ltd Device, method, or system for determining printing performance
JP2009044513A (en) * 2007-08-09 2009-02-26 Fuji Xerox Co Ltd Printing device
JP2013123092A (en) * 2011-12-09 2013-06-20 Brother Ind Ltd Display controller and computer program
US9787857B2 (en) 2011-12-09 2017-10-10 Brother Kogyo Kabushiki Kaisha Display control apparatus and computer program
EP2602987B1 (en) * 2011-12-09 2019-02-20 Brother Kogyo Kabushiki Kaisha Display control apparatus and computer program
US9036215B2 (en) 2012-10-16 2015-05-19 Fuji Xerox Co., Ltd. Image forming apparatus and image forming method
JP2016181861A (en) * 2015-03-25 2016-10-13 シャープ株式会社 Image forming device having color correction function, system having the same and method for the same
US10496349B2 (en) 2017-08-23 2019-12-03 Seiko Epson Corporation Profile adjustment system, profile adjustment device, and profile adjustment method

Also Published As

Publication number Publication date
JP4125062B2 (en) 2008-07-23

Similar Documents

Publication Publication Date Title
US7420705B2 (en) Image processing apparatus, image processing method, program and storage medium
EP1227660B1 (en) Method for transmitting an information on an image and information generating unit
US7061505B2 (en) Image processing device, image processing system, output device, computer readable recording medium and image processing method
US9420146B2 (en) Method and apparatus for controlling the color accuracy of digital printing devices and adaptation to a previously defined state
US7626723B2 (en) Color-conversion-table creating method
CN103139443B (en) Color processing apparatus, color processing method and configuration file generation method
JP2003087591A (en) Picture processing method and picture processor
JP5344518B2 (en) Image processing method and image processing apparatus
CA2544743A1 (en) System and method for display device characterization, calibration, and verification
WO1998048569A1 (en) Configurable, extensible, integrated profile generation and maintenance environment for facilitating image transfer between transform spaces
JP2006217181A (en) Color processing device and method
US7333136B2 (en) Image processing apparatus for carrying out tone conversion processing and color correction processing using a three-dimensional look-up table
US20050052668A1 (en) Color adjusting method, program and program-recorded medium
JP4125062B2 (en) Image processing apparatus, image processing method, and storage medium
JP5068281B2 (en) Color conversion table adjustment device and color conversion table adjustment program
JP6780442B2 (en) Color processing equipment, color processing methods, color processing systems and programs
JP2007081581A (en) Color processing method and device
JP2006203622A (en) Color processing method, isochromatic characteristic acquisition device, color processing device, and program
JP2004064543A (en) Image processing apparatus and method
JPH07274019A (en) Picture evaluation method and color picture input device
JP3412904B2 (en) Image processing apparatus and method
JP2002247396A (en) Method and device for correcting color of printer
JP2004064546A (en) Image processing apparatus and color reproduction method
JP2003087581A (en) Image processing method, device and program
US20120075644A1 (en) Preferred hue selection method for optimizing color image reproduction

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050613

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050613

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070427

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070827

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080118

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080318

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080411

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080507

R150 Certificate of patent or registration of utility model

Ref document number: 4125062

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110516

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120516

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120516

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130516

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140516

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees