JP4603665B2 - 色処理装置およびその方法 - Google Patents

色処理装置およびその方法 Download PDF

Info

Publication number
JP4603665B2
JP4603665B2 JP2000277168A JP2000277168A JP4603665B2 JP 4603665 B2 JP4603665 B2 JP 4603665B2 JP 2000277168 A JP2000277168 A JP 2000277168A JP 2000277168 A JP2000277168 A JP 2000277168A JP 4603665 B2 JP4603665 B2 JP 4603665B2
Authority
JP
Japan
Prior art keywords
color
lab
colorimetric
conversion
cmyk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000277168A
Other languages
English (en)
Other versions
JP2002094818A5 (ja
JP2002094818A (ja
Inventor
健一 太田
健 波潟
賢一 内藤
勇人 久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2000277168A priority Critical patent/JP4603665B2/ja
Publication of JP2002094818A publication Critical patent/JP2002094818A/ja
Publication of JP2002094818A5 publication Critical patent/JP2002094818A5/ja
Application granted granted Critical
Publication of JP4603665B2 publication Critical patent/JP4603665B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)
  • Color, Gradation (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、プリンタの色再現処理に関する。
【0002】
【従来の技術】
プリンタや印刷機の色再現処理において、色再現効果を向上するための色修正を行う手法として、入力色空間のデータに行列演算を施して出力色空間のデータを得るカラーマスキング法によって入力色空間のデータを出力色空間のデータに変換する方法が多用されている。
【0003】
しかし、カラープリンタや印刷機の出力特性は強い非線型性を示す。従って、カラーマスキング法のような大域的な方法、つまり行列の要素を変更すると出力色空間全体に影響するような色修正方法では、すべての色域でカラープリンタや印刷機の特性を充分に近似することはできない。
【0004】
【発明が解決しようとする課題】
本発明は、カラープリンタや印刷機がもつ強い非線型出力特性を精度よく近似し、高精度な色再現を可能にするプロファイルを提供するとともに、プロファイルを作成するための測色を容易にすることを目的とする。
【0006】
【課題を解決するための手段】
本発明は、前記の目的を達成する一手段として、以下の構成を備える。
【0007】
本発明にかかる色処理は、出力デバイスから出力されたカラーパッチを測色して得られる測色値を入力し、前記測色値に応じて、デバイスに独立な色信号をデバイスに従属する色信号に変換するための第一のルックアップテーブルを作成し、デバイスに従属する色信号をデバイスに独立な色信号に変換する第二のルックアップテーブルを作成する色処理方法であって、前記第一および第二のルックアップテーブルそれぞれに対して独立に、ルックアップテーブルのグリッドの出力値に対する平滑化処理を行うか否かを設定し、前記測色値に対する平滑化処理を行うか否かを設定し前記設定に基づき、前記第一および第二のルックアップテーブル、並びに、前記測色値に対してそれぞれ独立に行う平滑化処理を制御することを特徴とする。
【0013】
【発明の実施の形態】
以下、本発明にかかる一実施形態の画像処理装置を図面を参照して詳細に説明する。
【0014】
【第1実施形態】
[構成]
図1は実施形態の画像処理装置の構成例を示すブロック図である。
【0015】
図1に示す画像処理装置に入力される信号は、何らかのデバイスに依存する色空間の画像信号で、例えば、あるスキャナにより原稿から読み取られた画像を示すRGB信号であったり、あるプリンタに出力すべきCMYK信号であってもよい。本実施形態を複写機に適用する場合は、入力信号はスキャナで読み取られた画像を示すRGB信号である。また、プルーフ(試し刷り、校正刷り)を目的とする場合は、ターゲットである印刷機へ出力されるCMYK信号である。
【0016】
このような入力信号は、入力色→Lab変換部101に入力されて、デバイスに独立な色空間であるLab色空間の信号に変換される。この変換は、入力色→Lab変換LUT102を用いるLUT変換により実現される。
【0017】
入力色→Lab変換LUT102のテーブルには、入力信号の色空間に対応するテーブルをセットする必要がある。例えば、スキャナAのRGB色空間に依存する画像信号が入力される場合は、スキャナAのRGB色空間に従属するRGB値とLab値との対応を表す三次元入力-三次元出力のRGB→Lab変換テーブルを入力色→Lab変換LUT102のテーブルとしてセットする。同様に、プリンタBのCMYK色空間に従属する画像信号が入力される場合は、プリンタBの色空間に従属するCMYK値とLab値との対応を表す四次元入力-三次元出力のCMYK→Lab変換テーブルを入力色→Lab変換LUT102のテーブルとしてセットする。
【0018】
図2はRGB→Lab変換テーブルの一例を示す図で、それぞれ8ビットのRGB値とLab値との対応を示している。実際のテーブルには代表的なRGB値をアドレスとするLab値が格納されているので、入力色→Lab変換部101は、入力されるRGB値の近傍のLab値をテーブルから取り出し、取り出したLab値を補間演算することで、入力されるRGB値に対応するLab値を取得する。
【0019】
入力色→Lab変換部101から出力されるLab信号は、Lab→デバイスRGB変換部104により、デバイスRGB→Lab変換LUT105に基づき、デバイスRGB色空間の信号に変換される。この変換処理の詳細は後述する。
【0020】
ここで、入力信号の色空間がRGB色空間である場合、その色域はプリンタの色再現域よりも広い場合が多い。このため、入力色→Lab変換部101から出力されるLab信号を、色空間圧縮変換部103においてプリンタ107の色再現範囲へマッピング(ガマットマッピング)した後、Lab→デバイスRGB変換部104に入力するものとする。ガマットマッピングの具体的な方法は、特開平8-130655号公報に開示されている均等色空間内において色空間圧縮処理を行う方法などを用いればよい。
【0021】
Lab→デバイスRGB変換部104から出力されるデバイスRGB色空間の信号は、デバイスRGB→CMYK変換部106により、プリンタ107に従属なCMYK色空間の信号に変換された後、プリンタ107に送られる。RGB→CMYK変換についても様々な方法があり、どのような方法を用いても構わないが、例えば、次の変換式を用いる。
C = (1.0 - R) - K
M = (1.0 - G) - K
Y = (1.0 - B) - K
K = min{(1.0 - R), (1.0 - G), (1.0 - B)}
【0022】
[Lab→デバイスRGB変換]
次に、Lab→デバイスRGB変換部104の詳細について説明する。
【0023】
Lab→デバイスRGB変換部104は、予め得られているデバイスRGB値とLab測色値との対応関係に基づき信号を変換する。図3はデバイスRGB値⇔Lab測色値の対応関係を得て、Lab→デバイスRGB変換を行う手順を示すフローチャートである。勿論、既に、RGB値⇔Lab測色値の対応関係が得られている場合は、ステップS1およびS2は省略される。
【0024】
●ステップS1
カラーパッチ生成部108により、図4に示すような複数のカラーパッチからなるサンプル画像を生成する。そして、生成されたサンプル画像のRGB信号をデバイスRGB→CMYK変換部106を通してプリンタ107に出力し、サンプル画像109を得る。
【0025】
カラーパッチ生成部108で生成されるサンプル画像は、デバイスRGB色空間を均等分割するように作成される。図4の例では、RGBそれぞれ8ビットのRGB色空間を9×9×9に均等分割して729個のパッチを得る。本来、プリンタ107に従属な色空間はCMYK色空間であるが、RGB色空間からの変換ルールによりCMYK色空間に変換可能であるという意味で、RGB色空間をプリンタ107に従属な色空間であると考える。
【0026】
●ステップS2
得られたサンプル画像109の各カラーパッチをカラーパッチ測色部110により測色し、各カラーパッチのLab測色値を得る。得られたLab測色値は、図5に示されるようにLab色空間上に分布する。この操作により、カラーパッチ生成部108で生成されたRGB値、および、カラーパッチ測色部110で測色されたLab測色値が得られ、デバイスRGB→Lab変換LUT105のテーブルを得ることができる。このデバイスRGB→Lab変換LUT105を用いてLab→デバイスRGB変換を行う。
【0027】
ところで、LUTを利用する場合、公知の手法である立方体補間や四面体補間などの補間演算が利用される。これらの補間演算はLUTの入力側に相当するグリッドが等間隔である必要がある。デバイスRGB→Lab変換LUT105のテーブルにおけるデバイスRGB値は均等に並んでいるが、Lab測色値は均等に並んではいない。このため、Lab値を入力とする場合、デバイスRGB→Lab変換LUT105のテーブルは等間隔のグリッドをもつLUTを構成しない。従って、単純に、Lab値を入力する補間演算を行うことはできない。そこで、以下の手順により、Lab→デバイスRGB変換を行う。
【0028】
●ステップS3
デバイスRGB→Lab変換LUT105のテーブルに含まれるLab値と、入力Lab値との距離d(Lab色差式による色差と等価)を計算してメモリに格納する。
【0029】
●ステップS4
図6に示すように、入力Lab値(◎)に対して、距離dが小さい順にN個のエントリ(●)を選択する。このとき、距離dが小さい順に下記のように表記する。
Figure 0004603665
【0030】
●ステップS5
入力Lab値に対する変換値(RGB値)を次式により計算する。
RGB = (1/N)×Σi=1 NRGBi×f(di)
ここで、f(x) = 1/(1+x4)
【0031】
関数f(x)は図7に示すような特性をもつから、上式による計算は、Lab色空間上で、より近傍にあるLab測色値に対応するRGB値に、より大きい重みを付けて補間演算を行っていることになる。
【0032】
補間演算に用いるサンプル点の数Nは、Lab色空間全域において、定数(例えば8)にすることもできる。しかし、デバイスRGB→CMYK変換部106における変換手法によっては、図5に示すように明度L*が低い領域に測色値が集中するために、Nを定数にすると不都合が生じることがある。つまり、測色値が集中する領域においては距離dが極めて小さくなり、Nが小さいと、少数のサンプル点に大きい重みを付けて補間演算が行われ、その結果、デバイスRGB色空間における階調ジャンプ、低明度領域でのホワイトバランスの崩れ、などの問題を生じ易い。
【0033】
そこで、図8に示すように、入力Lab値のL*値に応じてサンプル点の数を変化させて補間演算を行えば、上記の問題を効果的に解決することができる。勿論、明度が高い領域においても、補間演算に使うサンプル数が制限されることになり、色の濁りなどが生じ難くなる。なお、図8に示す関数N(L*)の一例は、L*=0で128、L*=100で4になる1/4乗関数を示している。
【0034】
上記ステップS3からS5の処理を入力Lab値すべてに繰り返し施せば、Lab信号をデバイスRGB信号に変換することができる。
【0035】
【第2実施形態】
以下、本発明にかかる第2実施形態の画像処理装置を説明する。なお、本実施形態において、第1実施形態と略同様の構成については、同一符号を付して、その詳細説明を省略する。
【0036】
図9は第2実施形態の画像処理装置の構成例を示すブロック図である。第2実施形態の画像処理装置は、デバイスに独立な色空間の信号からプリンタ107の色空間の信号への変換を、入力信号をデバイスに独立な色空間の信号へ変換する際と同様に、LUTで行う点で第1実施形態の画像処理装置と異なる。
【0037】
Lab→CMYK変換部803は、Lab→CMYK変換LUT804を用いて、Lab信号をプリンタ107に従属なCMYK色空間の信号に変換する。Lab→CMYK変換部803から出力されるCMYK信号はプリンタ107に送られる。Lab→CMYK変換LUT804は、次のようにして作成される。
【0038】
カラーパッチ生成部808で生成されたサンプル画像のCMYK信号はプリンタ107に出力され、サンプル画像109が得られる。
【0039】
得られたサンプル画像109の各カラーパッチをカラーパッチ測色部110により測色し、各カラーパッチのLab測色値を得る。得られたLab測色値およびカラーパッチ生成部808で生成されたCMYK値に基づきCMYK→Lab変換LUTを作成する。そして、作成されたCMYK→Lab変換LUTに基づき、第1実施形態と同様の方法を用いてLab→CMYK変換LUT804を作成する。
【0040】
例えば、Lab値を8ビット信号とすると、L*値は0から255まで、a*およびb*値は-128〜127までである。Labの各範囲を16ステップで刻んでLabのグリッドを構成すれば、173=4913回の計算によりLab→CMYK変換LUT804のテーブルができあがる。
【0041】
第1実施形態においては、LUTによりLab色空間からデバイスRGB色空間へ変換した後、演算処理によりデバイスRGB色空間からCMYK色空間へ変換したが、これら変換処理を、第2実施形態では一つのLUTで行うことができ、変換処理を効率化することができる。
【0042】
【第3実施形態】
以下、本発明にかかる第3実施形態の画像処理装置を説明する。なお、本実施形態において、第1実施形態と略同様の構成については、同一符号を付して、その詳細説明を省略する。
【0043】
図10は第3実施形態の画像処理装置の構成例を示すブロック図で、近年、インターネットで標準的な色空間になりつつあるsRGB色空間の入力信号を入力する構成を有する。sRGB色空間は、XYZ色空間との対応が定義付けられていて、デバイスに独立な色空間と考えることが可能である。そこで、sRGB値をXYZ値やLab値に変換し、さらに、上述したようなLab色空間からプリンタ色空間への変換を行えば、プリンタ107により、sRGB色空間の信号によって表される画像を再現することが可能になる。
【0044】
図10において、sRGB→CMYK変換部901は、sRGB→CMYK変換LUT902を用いて、sRGB色空間の入力信号をプリンタ107に従属なCMYK色空間の信号に変換する。sRGB→CMYK変換部901から出力されるCMYK信号はプリンタ107に送られる。sRGB→CMYK変換LUT902は、次のようにして作成される。
【0045】
カラーパッチ生成部108で生成されたサンプル画像のRGB信号は、デバイスRGB→CMYK変換部106によりプリンタ107に従属なCMYK信号に変換された後、プリンタ107に出力され、サンプル画像109が得られる。
【0046】
得られたサンプル画像109の各カラーパッチをカラーパッチ測色部110により測色し、各カラーパッチのLab測色値を得る。得られたLab測色値およびカラーパッチ生成部108で生成されたRGB値に基づき、sRGB→CMYK変換LUT作成部908は、sRGB→CMYK変換LUT902のテーブルを作成する。
【0047】
sRGB→CMYK変換LUT作成部908の処理は、第1実施形態で説明したデバイスRGB→CMYK変換処理をカラーパッチ生成部108で生成されたRGB値に施して得たCMYK値と、Lab測色値に定義式に従うLab→XYZおよびXYZ→sRGB変換を施して得たsRGB値とからsRGB→CMYK変換LUT902のテーブルを作成する。例えば、sRGB信号を8ビット信号とすると、sRGBの各範囲を16ステップで刻んで17×17×17のsRGBのグリッドを構成すれば、173=4913回の計算によりsRGB→CMYK変換LUT902のテーブルができあがる。
【0048】
以上説明した各実施形態によれば、カラープリンタや印刷機がもつ強い非線型出力特性を精度よく近似し、高精度な色再現を可能にする色変換方法を提供することができる。従って、デバイスに独立な色空間において、プリンタや印刷機の特性を良好に反映する色空間変換を行うため、どのような入力色空間に対しても、高精度な色再現がプリンタや印刷機で可能になる。
【0049】
なお、上記の実施形態においては、デバイスに独立な色空間をLab色空間として説明したが、他の均等色空間、例えばLuv色空間を用いてもまったく同様の効果を得ることができる。
【0050】
【第4実施形態】
上記の実施形態では、出力デバイスのプロファイルの作成方法を説明した。上記の実施形態で説明したデバイス値(例えばCMYK)→Lab変換LUTは、図12に示す、出力デバイスのデスティネーションプロファイル(BtoA0)1101Dに相当し、Lab→デバイス値(例えばCMYK)変換LUTは、図12に示す、出力デバイスのソースプロファイル(AtoB0)1101Sに相当する。
【0051】
プルーフ(試し刷り、校正刷り)を目的として、ターゲットである印刷機の出力特性に合わせて色変換された画像を、複写機やプリンタでプリントする場合がある。このようなプルーフを行うには、上述した各実施形態で説明した方法によって、プルーフに用いられる出力デバイスにサンプル画像データを供給し印刷させ、得られたサンプル画像の各カラーパッチの測色値からプロファイルを作成する必要がある。そして、作成したプロファイルを使用して色変換を施した画像を出力デバイスでプリントすることになる。
【0052】
以下では、プルーフに用いる出力デバイスのプロファイルを作成し、作成されたプロファイルによる処理結果を確認することができる実施形態を第4実施形態として説明する。なお、第4実施形態で説明するプロファイルの作成は、プルーフ用に限られず、通常の出力(印刷)にも使用できることは言うまでもない。
【0053】
[色変換モジュールの構成]
まず、プロファイルを用いて色変換を行う構成の概要を説明する。図11は色変換モジュールの構成例を示すブロック図である。
【0054】
測色計(分光光度計)1001および測色モジュール1002によって、出力デバイスにより印刷されたサンプル画像(例えば標準的なIT8や4320CMYK画像)の各カラーパッチを測色する。測色結果は、オンラインまたはオフラインでプロファイル生成モジュール1003に供給され、上記の実施形態で説明した方法により、ICC(International Color Consortium)の定義に従う、出力デバイスプロファイルであるプロファイル1101D(Lab→CMYK変換LUT: BtoA0)およびプロファイル1101S(デバイス値→Lab変換LUT: AtoB0)が作成される。
【0055】
プレビューモジュール1005は、プルーフ対象の画像1006、ターゲットデバイスに対応するプロファイル(ターゲットデバイス値→Lab変換LUT)1102、出力デバイスのプロファイル1101Dおよび1101S、並びに、モニタプロファイル1103をカラーマネージメントモジュール(CMM)1007に供給(または指示)して、画像1006に色変換を施させる。
【0056】
第4実施形態におけるプロファイルの作成は、上記の実施形態と同様の方法を用いる。以下では、ユーザの使い勝手を向上させるための、第4実施形態における機能を詳細に説明する。
【0057】
[測色処理]
図11に示す色変換モジュールは、例えばパーソナルコンピュータなどにソフトウェアとして供給され実現される。そして、モニタ1004に表示されるユーザインタフェイスにより、測色処理の実行を指示することができる。
【0058】
図14は測色手順を示すフローチャートで、図11に示すプロファイル生成モジュール1003により実行される。この測色処理は、図9に示すカラーパッチ測色部110の処理に相当する。
【0059】
オペレータが測色の開始を指示すると、ステップS21で、図15に一例を示すウィンドウが表示され、オペレータは測色機、測色パラメータ(測色光源、測色視野および色空間)およびサンプル画像(カラーチャート)の種類をポップアップメニューから選ぶ。
【0060】
図15に示すウィンドウの[OK]ボタンが押されると、ステップS22で、図16に一例を示すウィンドウが表示され、オペレータは指示に従い、出力デバイスが出力したサンプル画像を測色台にセットする。
【0061】
図16に示すウィンドウの[OK]ボタンが押されると、ステップS23で、図17に一例を示すウィンドウが表示され、オペレータは指示に従い、サンプル画像の測色範囲の左上をセットする。続いて、図18および図19に一例を示すウィンドウが表示され、オペレータは指示に従い、サンプル画像の測色範囲の右上および右下をセットする。
【0062】
以上の操作が終わると、ステップS24で、測色計1001および測色モジュール1002によりサンプル画像の各カラーパッチが測色される。測色が終了すると、ステップS25で、すべてのサンプル画像の測色が終了したか否かが判定され、未了であればステップS22へ戻り、ステップS22からS24の処理が繰り返される。なお、サンプル画像をA4サイズとする場合、IT8画像(928パッチ)で二枚、4320CMYK画像(4320パッチ)で10枚の測色が必要になる。
【0063】
サンプル画像の測色が終了すると、ステップS26で、測色結果がカラー表示される。図20は測色結果が表示されたウィンドウの一例を示す図である。図20の測色結果の小枠それぞれは各カラーパッチを表し、測色された色で表示される。小枠の中の●マークは測色結果に対する警告(詳細は後述する)を表している。
【0064】
オペレータは、図20に表示された測色結果を参照して、ステップS27で再測色するか否かを判断する。再測色が指示された場合、ステップS28で、警告マーク(●)が付いたカラーパッチだけが再測色された後、ステップS26へ戻り、再び測色結果が表示される。
【0065】
このようにして、サンプル画像から測色されたLab測色値に基づき、上記の実施形態と同様に、プロファイル生成モジュール1003は出力デバイスのプロファイルを作成する。第4実施形態によれば、オペレータは、上記のユーザインタフェイスにより複雑なパラメータを容易に設定することができ、サンプル画像の測色を正確に行うことができる。
【0066】
なお、上記では、サンプル画像の読み取りが終了した後、測色結果が表示されるように記載したが、各カラーパッチの読み取りが終了するごとに、測色結果を表示することもできる。
【0067】
[警告処理]
以下、ステップS26で行なわれる警告に関する処理について詳細に説明する。
【0068】
図21はカラーパッチ生成部108で用いられる標準的な測色値が格納されるテーブル例を示す図である。サンプル画像(カラーパッチ109)を出力する場合、テーブルに格納されているCMYK値が出力デバイスに出力され、出力デバイスはサンプル画像を出力する。
【0069】
図21には、各カラーパッチのCMYK値に対する、標準的なLab測色値、および、許容差ΔEが定義されている。このテーブルは図14に示すユーザインタフェイスにおいて選択可能なサンプル画像(カラーチャート)の種類に応じて予め用意されている。ただし、このテーブルは空白やカンマをデリミタとするテキスト形式であるから、そのLab測色値および許容差ΔEを任意に設定することも可能である。
【0070】
プロファイル生成モジュール1003は、各カラーパッチの測色値Labと、テーブルに格納された対応する標準値Labiとを比較して、その差が許容差ΔEを超える場合に、測色結果に警告マークを付ける。
if (|Lab - Labi| > ΔE) 警告マークi = true;
【0071】
従って、カラーパッチの測色結果が標準的な測色値から許容差以上にずれた場合、そのカラーパッチの測色結果に警告マークが表示される。そして、オペレータが再測色を指示すると、測色結果に警告マークが付されたカラーパッチだけが再測色され、再び測色結果が表示される。
【0072】
このように、第4実施形態は、警告マークが表示されたカラーパッチのみを再測色する機能を有する。この機能により、再測色する際に、全てのカラーパッチを測色する必要がなくなる。また、ユーザがマニュアルで再測色するカラーパッチを指示することも必要ない。従って、必要最小限の再測色を容易に行うことができる。
【0073】
このように、警告マークを表示することにより、出力デバイスの状態を把握することができる。例えば、多数の警告マークが表示される場合や、ある色のカラーパッチに警告マークが集中して表示される場合、その出力デバイスの色再現特性が標準からかなりずれていることになるので、たとえプロファイルを最適化しても高精度なプルーフの実現は難しいと判断できる。
【0074】
さらに、第4実施形態では、許容差ΔEを設定することができるので、例えば、ユーザの用途に応じて許容差ΔEを制御することにより、警告マークをユーザの用途に適した判断材料にすることができる。また、各カラーパッチについて許容差ΔEを設定することができるので、ユーザにとって重要な色(例えば肌色など)の許容差ΔEを他の色より厳しくすることにより、警告マークをユーザの用途に適した判断材料にすることができる。
【0075】
図21に示されるテーブルを複数用意して、出力デバイスにカラーパッチを出力させる際に、ユーザの用途や出力デバイスの種類に応じてユーザにテーブルを選択させるようにする。こうすれば、ユーザの用途や出力デバイスの種類に応じた、上記の警告表示を行うことができる。複数のテーブルからの選択は、図14に示すステップS21において、図15に示すユーザインタフェイスのポップアップメニュー「カラーチャートの種類」を使用して選択できるようにすればよい。ポップアップメニューに表示されるテーブルの名称は、各テーブルにユーザがタイトルやコメントを任意に付加できるようにして、そのタイトルやコメントを表示すればよい。
【0076】
また、ほとんどのカラーパッチに警告マークが付いた場合は、測色の不備が原因として考えられる。従って、測色条件を再設定し測色し直すことが必要になる。
【0077】
[プロファイルの作成]
次に、出力デバイスのプロファイルの作成について詳細に説明する。
【0078】
図22はターゲットのプロファイルの作成手順を説明する図で、第2実施形態で説明した処理をさらに簡単に説明するための図である。
【0079】
メモリ1012からユーザによって選択されたサンプル画像のデバイスCMYKデータを出力デバイス1010へ供給し、サンプル画像1011を印刷させる。サンプル画像には、例えば標準的なIT8や4320CMYK画像などが利用される。
【0080】
出力デバイス1010によって印刷されたサンプル画像1011の各カラーパッチは、測色計1001および測色モジュール1002により測色され、そのLab測色値はメモリ1012に格納される。プロファイル生成モジュール1003は、ICCプロファイルのAtoB0タグに相当するデバイスCMYK→Lab変換テーブル1013を生成してメモリ1012に格納する。
【0081】
後述するプレビュー機能を考慮すると、AtoB0タグのほかにBtoA0タグが必要になるので、プロファイル生成モジュール1003は、デバイスCMYK→Lab変換テーブル1013からLab→デバイスCMYK変換テーブル1014を作成する。なお、これらの変換テーブルは、最終的に、出力デバイス1010のICCプロファイルとしてメモリ1012に格納される。
【0082】
ところで、デバイスCMYK→Lab変換テーブル1013におけるデバイスCMYK値は均等に並んでいるが、Lab測色値は均等に並んではいない。Lab値を入力とするLab→デバイスCMYK変換テーブル1014を作成する場合、Lab値を均等に並べる必要がある。そこで、第1実施形態で説明した方法を用いて、デバイスCMYK→Lab変換テーブル1013から、Lab値が均等に並んだLab→デバイスCMYK変換テーブル1014を作成し、メモリ1012に格納する。
【0083】
[測色値のスムージング]
測色器1001は、その使用前に校正が行われるので、測色の精度は確保されている。しかし、ある程度の測色誤差があるのはやむを得ない。また、出力デバイス1010の状態により、良好に形成できなかったサンプル画像1011のカラーパッチもあり得る。そこで、必要に応じて、測定誤差や良好に形成できなかったカラーパッチの影響を抑制するために、Lab測色値にスムージングを施す。
【0084】
図23は測色値のスムージング手順を示すフローチャートである。
【0085】
ステップS11において、図22に示す出力デバイス1010により出力されたサンプル画像1011のLab測色値で構成される、Lab色空間上のCMYRGBWK六面体の各辺上に位置するLab測色値を平滑化する。平滑化の方法としては、注目測色値およびその近傍の同一辺上のLab測色値を所定数サンプリングして、それらの平均または加重平均を注目測色値のLab測色値にする。
【0086】
次に、ステップS12で、六面体の各面上のLab測色値を、ステップS11で平滑されたLab測色値および各面に位置するLab測色値を用いて平滑化する。続いて、ステップS13で、ステップS11およびS12で平滑化された六面体の各辺上および各面上に位置するLab測色値を用いて六面体の内部のLab測色値を平滑化する。
【0087】
そして、平滑化処理されたLab測色値を用いて、上記の方法によりデバイスCMYK→Lab変換テーブルおよびLab→デバイスCMYK変換テーブルを作成する。
【0088】
カラーパッチを出力するために用いるデバイスRGB値(図1の108)も、RGB色空間上で立体を形成する。上記Lab色空間上の六面体の辺および面は、それぞれ上記RGB色空間上の立体の辺および面に対応する。よって、Lab測色値のどの値が辺や面に位置するかは、サンプル画像1011を出力するために用いるカラーパッチのデバイスRGB値から簡単に選択することができる。
【0089】
なお、測色Lab値をLab色空間上でプロットし、その結果を解析して辺および面に位置するLab測色値を選択しても構わない。
【0090】
測色値の平滑化は、以下のような長所および短所を有する。長所としては、測色誤差および良好に形成できなかったカラーパッチの影響を抑制することができる。一方、短所としては、測色およびカラーパッチの形成が良好に行われている場合は、測定結果の精度を落とすことになる。
【0091】
[変換テーブルのスムージング]
プリンタや印刷機は強い非線形出力特性をもつ。従って、測色結果に基づき作成されたプロファイルを利用すると、出力画像に擬似輪郭などが発生し易い。そこで、必要に応じて、階調の連続性を維持するために変換テーブルにスムージングを施す。
【0092】
デバイスCMYK→Lab変換テーブル1013の場合、注目格子点(CMYK入力値)に対応するLab値および近傍の格子点のLab値を所定数サンプリングして、それらの加重平均を注目格子点に対応するLab値(出力値)にする。
【0093】
Lab→デバイスCMYK変換テーブル1014のスムージングも同様に、注目格子点(Lab入力値)に対応するCMYK値および近傍の格子点のCMYK値を所定数サンプリングして、それらの加重平均を注目格子点に対応するCMYK値(出力値)にする。
【0094】
重み付けの方法としては、注目格子点(入力値)に対応する出力値の重みを、近傍の格子点の出力値の総加重より小さくする。例えば、サンプリング数を7として、注目格子点に対応する重みを0.4、近傍の六つの格子点に対応する重みを0.6/6にする。なお、重み付けの方法は、図25に示すユーザインタフェイスの「最適化」ポップアップメニューにより設定される作成する変換テーブルの格子点数に基づき変更される。例えば、格子点数が少なく、格子点間隔が広い場合は近傍の格子点に対応する重みを小さくする。
【0095】
変換テーブルのスムージングは、以下のような長所および短所を有する。長所としては、階調の連続性を高めることができ、出力画像の擬似輪郭を抑制することができる。一方、短所としては、プリンタの色再現特性に対する忠実度合いを低下させてしまう。
【0096】
[インタフェイス]
図11に示す色変換モジュールは、例えばパーソナルコンピュータなどにソフトウェアとして供給され実現される。そして、モニタ1004に表示されるユーザインタフェイスにより、上記のスムージングを行うか否かを設定することができる。
【0097】
図24および図25は出力デバイス1010のプロファイルを作成する際に表示されるパラメータ設定画面の一例を示す図である。
【0098】
図24の画面の「測色値を滑らかにする」チェックボックスをチェックすると、上記の測色値のスムージングが実行される。
【0099】
また、図25の画面のソース側の「滑らかにする」チェックボックスをチェックするとデバイスCMYK→Lab変換テーブル1013がスムージングされ、デスティネーション側の「滑らかにする」チェックボックスをチェックするとLab→デバイスCMYK変換テーブル1014がスムージングされる。
【0100】
このように、本実施形態では、変換テーブルに対するスムージングは、デバイス値→Lab変換テーブル1013およびLab→デバイス値変換テーブル1014に対して独立に設定することができる。これに対して測色値のスムージングは独立に設定することができない。これは、各スムージングの目的の相違に基づくもので、つまり、測色値のスムージングは測色精度に対応した処理であり、変換テーブルのスムージングは各変換テーブルの変換処理結果に対応した処理だからである。
【0101】
また、図25に示すソース側およびデスティネーション側の「最適化」ポップアップメニューにより、デバイスCMYK→Lab変換テーブル1013およびLab→デバイスCMYK変換テーブル1014の格子数を設定することができる。つまり、ポップアップメニューにより最適化として「精度優先」または「速度優先」を選択することができる。
【0102】
「精度優先」が選択された場合、デバイスCMYK→Lab変換テーブル1013は17×17×17×17格子になり、Lab→デバイスCMYK変換テーブル1014は33×33×33格子になる。また、「速度優先」が選択された場合、デバイスCMYK→Lab変換テーブル1013は9×9×9×9格子になり、Lab→デバイスCMYK変換テーブル1014は17×17×17格子になる。
【0103】
このように、各変換テーブルに対して独立に格子点数を設定できることも、各変換テーブルに対して独立にスムージングを設定できる理由の一つである。
【0104】
また、測色値をスムージングするか否かの判断の材料として、上述した測色値の警告処理を用いることができる。例えば、多数のカラーパッチに警告マークが表示された場合は、測色値をスムージングした方がよい場合がある。
【0105】
[履歴管理]
上記の手順により測色結果から作成されるターゲットのプロファイルはメモリ1012に保存されるが、その際、プロファイルの作成履歴などを保存して、どのように作成されたプロファイルかを管理することができる。
【0106】
図26はプロファイル、測色値および履歴管理情報を保存する手順の一例を示すフローチャートで、プロファイル生成モジュール1003によって実行されるものである。
【0107】
プロファイル生成モジュール1003によるプロファイルの生成が終了すると、ステップS31で、図27に一例を示すウィンドウがモニタ1004に表示され、オペレータはファイルの保存に関するパラメータ(保存場所およびプロファイル名)および測色値を保存するか否か、履歴管理情報を保存するか否かなどを設定する。なお、プロファイル名の拡張子にはデフォルトで「icc」が付く。また、測色値のファイル名および履歴管理情報のファイル名は、プロファイル名の拡張子だけを「it8」や「pbh」などに変えたものになる。
【0108】
次に、ステップS32で、履歴管理情報の保存するか否かが判定され、保存しない場合はステップS36へジャンプする。
【0109】
履歴管理情報の保存する保存する場合は、ステップS33で、図28に一例を示すウィンドウが表示され、オペレータはサンプル画像出力時の状況(出力日、出力者、プリンタ名および設置場所、並びに、使用した紙およびインク)、サンプル画像保管時の状況(保管場所)などを設定する。
【0110】
続いて、ステップS34で、図29に一例を示すウィンドウが表示され、オペレータは測色時の状況(測色日、測色者、測色機、測色光源および測色視野)などを設定する。
【0111】
続いて、ステップS35で、図30に一例を示すウィンドウが表示され、オペレータはプロファイル作成時の状況(オペレータおよび備考)などを設定する。なお、プロファイル作成時には「測色値の白色点補正の有無」「測色値のスムージングの有無」、ルックアップテーブルに関する「最適化(精度優先または速度優先)」「スムージングの有無]「テーブル精度(8ビットまたは16ビット)」ビット精度などのパラメータが設定されるが、それらのパラメータは自動的に履歴管理情報に保存される。
【0112】
次に、ステップS36で、設定したパラメータリストがモニタ1004に表示される。オペレータがパラメータの訂正・修正を希望する場合、処理はステップS31へ戻る。訂正・修正の必要がなければ、処理はステップS37へ進み、指定された保存場所、例えばメモリ1012の指定ディレクトリやフォルダ内に、例えばファイル名ddcp.iccのプロファイルが保存される。
【0113】
次に、ステップS38で測色値を保存するか否かが判定され、保存する場合はステップS39で、プロファイルと同じ保存場所に、例えばファイル名ddcp.it8のテキストファイル形式の測色値のリスト(図31参照)が保存される。
【0114】
次に、ステップS40で履歴管理情報を保存するか否かが判定され、保存する場合はステップS41で、プロファイルと同じ保存場所に、例えばファイル名ddcp.pbhのテキストファイル形式の履歴管理情報(図32参照)が保存される。
【0115】
このように、作成されたターゲットのプロファイルだけでなく、プロファイルの作成に使用された測色結果、測色時およびプロファイル作成時の履歴情報を保存して管理することができる。従って、作成されたプロファイルに異常がある場合など、履歴情報を参照してその原因を探ったり、保存された測色結果からプロファイルを作成し直すなど、問題が発生した場合の対処が容易になる。
【0116】
[プレビュー]
作成されたターゲットのプロファイルが適正か否かを確認するためのモニタ表示を行うプレビュー機能を説明する。プレビュー機能は、上記の処理によりプロファイルが作成された後に起動する。
【0117】
図12は、図11に示すCMM1007によって実行される色変換手順を示す図である。
【0118】
画像1006のCMYKデータは、ターゲットデバイスプロファイル1102のAtoB0タグによってLabデータに変換され、出力デバイスプロファイル1101のBtoA0タグ(デスティネーションプロファイル1101D)によって出力デバイス1010に従属するCMYK色空間のCMYKデータに変換される。プルーフを行う場合は、このCMYKデータがプルーフ用の出力デバイスに送られる。
【0119】
ターゲットに従属するCMYK色空間のCMYKデータは、出力デバイスプロファイル1101のAtoB0タグ(ソースプロファイル1101S)によって、再びLabデータに変換される。そして、モニタプロファイル1103により、Labデータがモニタ1004に従属する色空間のRGBデータに変換され、モニタ1004に表示される。つまり、ターゲットによって印刷されるだろう画像、つまりプレビュー画像Bをモニタ1004に表示することができ、その色再現性を観察することができる。
【0120】
さらに、ターゲットデバイスプロファイル1102によって変換されたLabデータを、モニタプロファイル1103により直接、RGBデータに変換して、モニタ1004にオリジナル画像Aとして表示すれば、出力デバイスプロファイル1101による色変換を受けたプレビュー画像B、および、受けていないオリジナル画像A(ターゲットデバイスが出力するであろう画像)をモニタ1004上で観察し比較することができる。従って、作成された出力デバイスプロファイル1101が適正か否かを、両画像を観察し比較して、確認することができる。
【0121】
図13はモニタ1004に表示されるプレビュー画面の一例を示す図で、例えば左側にオリジナル画像Aが、右側にプレビュー画像Bが表示されている。なお、図13には両画像のウィンドウサイズが同じ例を示すが、マウスなどにより両ウィンドウのセンタを移動することにより、任意のウィンドウサイズになる。
【0122】
プレビュー画面の左上の倍率の設定を変更すると、両画像ともに倍率が変化する。また、一方の画像をスクロールすると、もう一方の画像も連動してスクロールする、つまり、画面左上の位置は常に画像上の同位置にある。さらに、一方の画像上にマウスカーソルを置いて、例えばマウスボタンを押している間、もう一方の画像上の対応する位置にマウスカーソルが表示される。このようなプレビュー画面のユーザインタフェイスにより、両画像の細部を詳細に観察し比較することが容易になる。
【0123】
第4実施形態によれば、出力デバイスプロファイル1101の作成結果を容易に確認することができる。しかも、プルーフの用途に適したターゲットデバイスのプレビュー画像(表示画像A)と、作成された出力デバイスプロファイル1101を用いて処理された画像(表示画像B)とが並んで表示されるので、出力デバイスプロファイル1101の作成結果の確認は極めて容易である。
【0124】
【他の実施形態】
なお、本発明は、複数の機器(例えばホストコンピュータ、インタフェイス機器、リーダ、プリンタなど)から構成されるシステムに適用しても、一つの機器からなる装置(例えば、複写機、ファクシミリ装置など)に適用してもよい。
【0125】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体(または記録媒体)を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム(OS)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0126】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0127】
本発明を前記記憶媒体に適用する場合、その記憶媒体には、先に説明したフローチャートに対応または関連するコンピュータプログラムが格納される。
【0128】
【発明の効果】
以上説明したように、本発明によれば、カラープリンタや印刷機がもつ強い非線型出力特性を精度よく近似し、高精度な色再現を可能にするプロファイルを提供するとともに、プロファイルを作成するための測色を容易にすることができる。
【図面の簡単な説明】
【図1】第1実施形態の画像処理装置の構成例を示すブロック図、
【図2】 RGB→Lab変換テーブルの一例を示す図、
【図3】デバイスRGB値⇔Lab測色値の対応関係を得て、デバイスRGB→Lab変換を行う手順を示すフローチャート、
【図4】サンプル画像の一例を示す図、
【図5】カラーパッチ測色部による測色結果の一例を示す図、
【図6】サンプル点の選択を説明する図、
【図7】距離dに応じた重み付け関数を説明する図、
【図8】サンプル点の数を変化させる関数を説明する図、
【図9】第2実施形態の画像処理装置の構成例を示すブロック図、
【図10】第3実施形態の画像処理装置の構成例を示すブロック図、
【図11】第4実施形態の色変換モジュールの構成例を示すブロック図、
【図12】図11に示すCMMによって実行される色変換の手順を示す図、
【図13】図12に示すモニタに表示されるプレビュー画面の一例を示す図、
【図14】測色手順を示すフローチャート、
【図15】測色処理におけるユーザインタフェイスの一例を示す図、
【図16】測色処理におけるユーザインタフェイスの一例を示す図、
【図17】測色処理におけるユーザインタフェイスの一例を示す図、
【図18】測色処理におけるユーザインタフェイスの一例を示す図、
【図19】測色処理におけるユーザインタフェイスの一例を示す図、
【図20】測色結果を表示するユーザインタフェイスの一例を示す図、
【図21】標準的な測色値が格納されるテーブル例を示す図である。
【図22】ターゲットのプロファイルの作成手順を説明する図、
【図23】測色値のスムージング手順を示すフローチャート、
【図24】ターゲットのプロファイルを作成する際に表示されるパラメータ設定画面の一例を示す図、
【図25】ターゲットのプロファイルを作成する際に表示されるパラメータ設定画面の一例を示す図である。

Claims (4)

  1. 出力デバイスから出力されたカラーパッチを測色して得られる測色値を入力し、前記測色値に応じて、デバイスに独立な色信号をデバイスに従属する色信号に変換するための第一のルックアップテーブルを作成し、デバイスに従属する色信号をデバイスに独立な色信号に変換する第二のルックアップテーブルを作成する色処理方法であって、
    前記第一および第二のルックアップテーブルそれぞれに対して独立に、ルックアップテーブルのグリッドの出力値に対する平滑化処理を行うか否かを設定し、
    前記測色値に対する平滑化処理を行うか否かを設定し
    前記設定に基づき、前記第一および第二のルックアップテーブル、並びに、前記測色値に対してそれぞれ独立に行う平滑化処理を制御することを特徴とする色処理方法。
  2. さらに、前記第一および第二のルックアップテーブルそれぞれに対して独立に、ルックアップテーブルのグリッドの数を設定し、
    前記設定されたグリッドの数に応じて前記グリッドの出力値に対する平滑化処理の条件を制御することを特徴とする請求項1に記載された色処理方法。
  3. 出力デバイスから出力されたカラーパッチを測色して得られる測色値を入力する入力手段と、
    前記測色値に応じて、デバイスに独立な色信号をデバイスに従属する色信号に変換するための第一のルックアップテーブル、および、デバイスに従属する色信号をデバイスに独立な色信号に変換する第二のルックアップテーブルを作成する作成手段と、
    前記第一および第二のルックアップテーブルそれぞれに対して独立に、ルックアップテーブルのグリッドの出力値に対する平滑化処理を行うか否かを設定する第一の設定手段と、
    前記測色値に対する平滑化処理を行うか否かを設定する第二の設定手段と
    前記設定に基づき、前記第一および第二のルックアップテーブル、並びに、前記測色値に対してそれぞれ独立に行う平滑化処理を制御する制御手段とを有することを特徴とする色処理装置。
  4. コンピュータ装置を制御して、請求項1または請求項2に記載された色処理を実行するプログラムが記録されたことを特徴とするコンピュータが読み取り可能な記録媒体。
JP2000277168A 2000-09-12 2000-09-12 色処理装置およびその方法 Expired - Fee Related JP4603665B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000277168A JP4603665B2 (ja) 2000-09-12 2000-09-12 色処理装置およびその方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000277168A JP4603665B2 (ja) 2000-09-12 2000-09-12 色処理装置およびその方法

Publications (3)

Publication Number Publication Date
JP2002094818A JP2002094818A (ja) 2002-03-29
JP2002094818A5 JP2002094818A5 (ja) 2007-11-01
JP4603665B2 true JP4603665B2 (ja) 2010-12-22

Family

ID=18762535

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000277168A Expired - Fee Related JP4603665B2 (ja) 2000-09-12 2000-09-12 色処理装置およびその方法

Country Status (1)

Country Link
JP (1) JP4603665B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11350016B2 (en) 2020-03-16 2022-05-31 Fujifilm Business Innovation Corp. Information processing apparatus, image forming apparatus, and non-transitory computer readable medium

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5649337B2 (ja) * 2010-06-02 2015-01-07 キヤノン株式会社 プロファイル処理装置、プロファイル処理方法並びにプログラム
JP5651663B2 (ja) * 2012-09-14 2015-01-14 Eizo株式会社 3dlut生成方法、3dlut生成装置及びコンピュータプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11350016B2 (en) 2020-03-16 2022-05-31 Fujifilm Business Innovation Corp. Information processing apparatus, image forming apparatus, and non-transitory computer readable medium

Also Published As

Publication number Publication date
JP2002094818A (ja) 2002-03-29

Similar Documents

Publication Publication Date Title
JP3890211B2 (ja) 画像処理方法、画像処理装置、プログラム、記憶媒体
US10735627B2 (en) Color conversion table creation apparatus and method, color conversion apparatus, and program
US7557957B2 (en) Image processing method and apparatus, and profile management method
US7206100B2 (en) Image processing method and apparatus
JP3403157B2 (ja) 画像処理装置およびその方法
JP4646681B2 (ja) 色処理装置及びその方法
JP3990859B2 (ja) 色処理方法およびその装置
US20060001892A1 (en) Image processing method and image processing device
JP2016146600A (ja) 色変換方法、プログラム、及び画像処理装置
JP5539035B2 (ja) プロファイル調整装置、プロファイル調整方法およびプログラム
US20170339284A1 (en) Method for color matching printers
JP4979819B2 (ja) 色処理装置およびその方法
JP4603665B2 (ja) 色処理装置およびその方法
JP2008177783A (ja) 色変換装置及びプログラム
JP4046967B2 (ja) 画像処理装置およびその方法
Fleming et al. Color management and ICC profiles; can’t live without it so learn to live with it!
JP2007151055A6 (ja) 画像処理装置、画像処理方法、および画像処理プログラム
JP4532797B2 (ja) 画像処理方法及び画像処理装置
JP4545995B2 (ja) 画像処理方法及び画像処理装置
JP2002094819A (ja) 画像処理装置およびその方法
JP2001245172A (ja) 階調補正曲線評価結果表示方法、階調補正曲線評価結果表示装置、および階調補正曲線評価結果表示プログラム記憶媒体
JP4721419B2 (ja) 画像処理装置およびその制御方法およびコンピュータプログラム
JP5978811B2 (ja) LUT(LookUpTable)作成装置、画像データ変換装置、LUT作成方法及びLUT作成プログラム
JP2009253957A (ja) プロファイル作成装置
JP2002094817A (ja) 画像処理装置およびその方法

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070906

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070906

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20070906

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080821

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081211

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081222

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090507

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090706

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090914

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101004

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131008

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees