JP2007028426A - Color processing method and apparatus thereof - Google Patents

Color processing method and apparatus thereof Download PDF

Info

Publication number
JP2007028426A
JP2007028426A JP2005210304A JP2005210304A JP2007028426A JP 2007028426 A JP2007028426 A JP 2007028426A JP 2005210304 A JP2005210304 A JP 2005210304A JP 2005210304 A JP2005210304 A JP 2005210304A JP 2007028426 A JP2007028426 A JP 2007028426A
Authority
JP
Japan
Prior art keywords
color
lut
value
points
grid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005210304A
Other languages
Japanese (ja)
Other versions
JP4459127B2 (en
Inventor
Hisanori Washimi
尚紀 鷲見
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2005210304A priority Critical patent/JP4459127B2/en
Publication of JP2007028426A publication Critical patent/JP2007028426A/en
Application granted granted Critical
Publication of JP4459127B2 publication Critical patent/JP4459127B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To accurately calculate a non-linear color conversion table with respect to color processing for creating the color conversion table for converting color data of a predetermined color space into color data of a color space of a target device. <P>SOLUTION: A color correction LUT 501 corresponding to certain lattice points is created from the correspondence relation between a colorimetric value 101 corresponding to certain lattice points of a reference LUT 503 indicating reference conversion characteristic of a color correction LUT to be created, and a colorimetric value 106 indicating color reproduction of the target device. Then, output values corresponding to an insufficient lattice points of the color correction LUT 501 are calculated by interpolation (LUT expansion 502) referring to the reference LUT 503, and the color correction LUT 105 is finished. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、所定色空間の色データをターゲットデバイスの色空間の色データに変換する色変換テーブルを作成する色処理に関する。   The present invention relates to color processing for creating a color conversion table for converting color data of a predetermined color space into color data of a color space of a target device.

インクジェットプリンタなどの画像出力機器は、画像入力機器のデバイス色空間(以下「入力色空間」と呼ぶ、例えばRGB)から画像出力機器のデバイス色空間(以下「出力色空間」と呼ぶ、例えばCMYK)へ色変換してカラー画像を出力する。従来、この色変換はマトリクス変換などにより実現されていたが、近年、より精度の高い変換をするために、三次元ルックアップテーブル(3DLUT)を用いる色変換が実現されている。   An image output device such as an ink jet printer uses a device color space of an image input device (hereinafter referred to as “input color space”, for example, RGB) to a device color space of an image output device (hereinafter referred to as “output color space”, for example, CMYK). Convert color to output color image. Conventionally, this color conversion has been realized by matrix conversion or the like, but in recent years, color conversion using a three-dimensional lookup table (3DLUT) has been realized in order to perform conversion with higher accuracy.

色変換を良好に行うために、例えばsRGB信号をデバイスに依存するR'G'B'信号へ色変換する色補正処理と、例えばデバイスに依存するR'G'B'信号をCMYK信号に色変換する色分解処理の二つに分けることもある。   In order to perform color conversion well, for example, color correction processing that converts sRGB signals to device-dependent R'G'B 'signals, for example, device-dependent R'G'B' signals are converted to CMYK signals. It may be divided into two color separation processes for conversion.

入力色空間からデバイスに依存しない色空間への色変換、および、デバイスに依存しない色空間から出力色空間への色変換のLUTの作成方法は次のとおりである。   The color conversion from the input color space to the device-independent color space and the method of creating the LUT for color conversion from the device-independent color space to the output color space are as follows.

カラーテーブルを構成する格子点に対応する目標色(CIELab値など)を決定する。そして、目標色に最も近似する画像出力機器のデバイス色(例えば、CYMK値もしくはデバイスに依存するR'G'B'値)を探して、その格子点の対応色とする。この際、デバイス色は均等色色空間(CIELabやCIELuv)で探すのが一般的である。   A target color (CIELab value, etc.) corresponding to the grid points constituting the color table is determined. Then, the device color (for example, the CYMK value or the R′G′B ′ value depending on the device) of the image output device that most closely approximates the target color is searched for and used as the corresponding color of the lattice point. At this time, the device color is generally searched in a uniform color space (CIELab or CIELuv).

次に、デバイスに依存するR'G'B'値に基づき、それらの色のカラーパッチを所定数出力し、そのカラーパッチを測色して、カラーパッチの均等色色空間の色信号を得る。これにより、デバイスに依存するR'G'B'値(またはCMYK値)と、均等色色空間の色値の関係が定まる。   Next, based on the R′G′B ′ value that depends on the device, a predetermined number of color patches of these colors are output, and the color patches are measured to obtain a color signal in the uniform color space of the color patches. As a result, the relationship between the R′G′B ′ value (or CMYK value) depending on the device and the color value of the uniform color space is determined.

このようなカラーマッピングの手法を用いて入力画像を色変換して出力する場合、色変換用のLUTの情報量が多いほど、より詳しい色度の指定や階調表現が可能になり、擬似輪郭などの問題も軽減する。   When an input image is color-converted and output using this color mapping method, the more information in the LUT for color conversion, the more detailed chromaticity specification and gradation expression can be made, and the pseudo contour And alleviate such problems.

上記のような色変換LUTを設計する場合、例えば、ある写真画質プリンタのある印刷モードを設計目標に定める。言い換えれば、ある写真画質プリンタのある印刷モードを基準(以下「基準プリンタ」「基準モード」と呼ぶ)として色変換LUTを設計する。そして、例えば画質を少々犠牲にしても、基準モードよりも印刷が速いモード、写真用ではない記録紙に印刷するモード、他機種のプリンタにおいても、できるだけ基準プリンタの基準モードにおける色再現に近い状態に設計することが要求される。   When designing the color conversion LUT as described above, for example, a certain printing mode of a certain photo quality printer is set as a design target. In other words, the color conversion LUT is designed with a print mode of a certain photo quality printer as a reference (hereinafter referred to as “reference printer” or “reference mode”). For example, even if the image quality is slightly sacrificed, a mode that prints faster than the standard mode, a mode that prints on recording paper that is not for photographs, and other printer models that are as close to color reproduction as possible in the standard mode of the standard printer It is required to design.

その際、基準プリンタの基準モードのLUT(以下「基準LUT」と呼ぶ)の全格子点と、新規にLUTを作成するプリンタ(またはプリンタモード)の色再現範囲の色をパッチとして出力して測色すれば、膨大な数の印刷と測定を強いられるため現実的ではない。   At that time, all the grid points of the standard printer LUT (hereinafter referred to as “reference LUT”) and the color reproduction range of the printer (or printer mode) for creating a new LUT are output as patches and measured. If it is colored, it is not realistic because it requires a large number of printing and measurement.

また、サーマルヘッドプリンタなどは、熱が蓄積するなどの原因で、まったく同じデータを入力して印刷しても、精密に同じ結果の測色値を得ることは難しい。そのため、パッチを複数のチャートに分けて印刷し測定した結果をつないだデータは信頼性に乏しいという問題がある。従って、目標測定用のパッチ(基準LUTの格子点に対応する)、および、新規にLUTを作成するプリンタ(またはプリンタモード)の色再現範囲の測定用パッチは一枚のチャートに納めることが望ましい。   Also, it is difficult for a thermal head printer or the like to accurately obtain the same colorimetric value even if the same data is input and printed due to heat accumulation or the like. Therefore, there is a problem that the data obtained by dividing the patch into a plurality of charts and printing and connecting the results is not reliable. Therefore, it is desirable that the target measurement patch (corresponding to the grid point of the reference LUT) and the measurement patch for the color reproduction range of a printer (or printer mode) for creating a new LUT are contained in one chart. .

一方、前述したように、色変換LUTの情報量が多いほど、より詳しい色度の指定や階調表現が可能になる。しかし、一枚のチャートに納まるパッチの数には限界がある。そのため、なるべく精度の高いLUTを作成するには、入力信号(例えばsRGB)において距離が等間隔のカラーパッチを測色する。そして、カラーパッチ間の色の測色値は、測色結果から四面体補間などの補間演算によって推測する(例えば、特公昭58-16180号公報)。   On the other hand, as described above, as the information amount of the color conversion LUT increases, more detailed chromaticity designation and gradation expression are possible. However, there is a limit to the number of patches that can fit on a single chart. Therefore, in order to create an LUT with as high accuracy as possible, color patches having an equal distance in the input signal (for example, sRGB) are measured. Then, the colorimetric value of the color between the color patches is estimated from the colorimetric result by interpolation calculation such as tetrahedral interpolation (for example, Japanese Patent Publication No. 58-16180).

ところで、出力色空間について、上記の補間演算を用いて色を予測する場合、良好な結果を得られる可能性が高い。何故なら、色分解を行う処理は、なるべく滑らかな階調を得るように定義されているからである。従って、四面体補間、立方体補間、線形補間などの演算を用いて色を予測した場合も、予測が現実と近いことが多い。   By the way, when the color is predicted using the above-described interpolation calculation for the output color space, there is a high possibility that a good result can be obtained. This is because the color separation processing is defined to obtain as smooth a gradation as possible. Therefore, even when colors are predicted using operations such as tetrahedral interpolation, cube interpolation, and linear interpolation, the prediction is often close to reality.

一方色補正は、人間が好ましく感じる色を表現するために、色を少し濃くしたり、明るくしたり、色相を曲げたりなど、所謂画作りと言われる補正が入る。すなわち素直な色のつながりである入力色空間の色相を曲げたり、階調を潰したり、逆に伸張したりする。そのため、ある点の色は、それを囲む格子点の値を用いる単純な計算では求められないことが多い。   On the other hand, color correction includes so-called image creation such as making the color a little darker, brighter, or bending the hue in order to express a color that humans feel desirable. In other words, the hue of the input color space, which is a straight color connection, is bent, the gradation is crushed, and conversely it is expanded. For this reason, the color of a certain point is often not obtained by a simple calculation using the values of lattice points surrounding it.

色変換における階調性の問題を解決するために、特開平5-046750号公報は、カラー画像信号の色変換値を補間演算する三次元補間方法を視覚特性に合わせ、色の明度方向の補間階調特性を改善する方法を提案する。   In order to solve the problem of gradation in color conversion, Japanese Patent Application Laid-Open No. 5-046750 describes a three-dimensional interpolation method that interpolates a color conversion value of a color image signal according to visual characteristics, and interpolates in the lightness direction of the color. A method for improving the gradation characteristics is proposed.

また、特開平9-245159号公報は、各次元の入力座標値に対応する各次元の出力座標値の、周囲の複数個の座標値からなる第一の値を取得する。そして、第一の値から、n次元の色空間上の各次元の入力座標値の下位桁を用いる線形補間により、第二の値を取得して、n次元の距離空間上の色差に比例した値を対応する出力色信号に変換する方法を開示する。この方法によれば、補間誤差を減少させることができるとする。   Japanese Patent Laid-Open No. 9-245159 obtains a first value composed of a plurality of surrounding coordinate values of output coordinate values of each dimension corresponding to input coordinate values of each dimension. Then, from the first value, the second value is obtained by linear interpolation using the lower digit of the input coordinate value of each dimension on the n-dimensional color space, and is proportional to the color difference on the n-dimensional distance space. A method for converting a value into a corresponding output color signal is disclosed. According to this method, it is assumed that the interpolation error can be reduced.

しかし、以上の技術は何れも線形補間を用いる演算を行う。そのため、画作りをするが故に非線形であることが多い色補正のLUTを作成する際は補間誤差を生じ易い。   However, all of the above techniques perform calculations using linear interpolation. Therefore, an interpolation error is likely to occur when creating a color correction LUT that is often non-linear due to image creation.

図1は基準LUTの一例を示す図である。   FIG. 1 is a diagram illustrating an example of a reference LUT.

図1に示す基準LUTは、例えばsRGB値とデバイスに依存するR'G'B'値の組み合わせを、均等な格子点間隔(16刻み)で4913組有する。例えばsRGBとして(R, G, B) = (0, 0, 32)を基準LUTに入力すると、基準LUTは(R', G', B') = (0, 3, 32)を出力する。また、(R, G, B) = (0, 0, 48)を入力すると(R', G', B') = (0, 6, 49)を出力する。   The reference LUT shown in FIG. 1 has, for example, 4913 combinations of sRGB values and device-dependent R′G′B ′ values at equal lattice point intervals (16 steps). For example, when (R, G, B) = (0, 0, 32) is input to the reference LUT as sRGB, the reference LUT outputs (R ′, G ′, B ′) = (0, 3, 32). When (R, G, B) = (0, 0, 48) is input, (R ′, G ′, B ′) = (0, 6, 49) is output.

このようにして、基準LUTを使用して、入力RGB値からデバイスに依存するR'G'B'値を得ることができる。   In this way, the device-dependent R′G′B ′ value can be obtained from the input RGB value using the reference LUT.

また、(R, G, B) = (0, 0, 40)のように格子点のデータではない場合、入力点の周囲の格子点の値を用いて四面体補間、立法体補間、線形補間などにより出力値を計算する。線形補間の例を挙げると、入力点(R, G, B) = (0, 0, 40)は、格子点(0, 0, 32)と(0, 0, 48)の中点に位置する。従って、それらの出力値である(R', G', B') = (0, 3, 32)と(0, 6, 49)を、それらの距離の比(この場合は1:1)で重み付けして補間演算すると、出力値(R', G', B') = (0, 4.5, 40.5)が得られる。   If the data is not grid point data such as (R, G, B) = (0, 0, 40), tetrahedral interpolation, cubic interpolation, and linear interpolation are performed using the grid point values around the input point. The output value is calculated by As an example of linear interpolation, the input point (R, G, B) = (0, 0, 40) is located at the midpoint of the grid points (0, 0, 32) and (0, 0, 48) . Therefore, their output values (R ', G', B ') = (0, 3, 32) and (0, 6, 49) are expressed as the ratio of their distances (in this case 1: 1). When interpolation is performed with weighting, an output value (R ′, G ′, B ′) = (0, 4.5, 40.5) is obtained.

このように基準LUTから出力されるR'G'B'データは、色分解処理へ渡され、R'G'B'データからCMYKデータに色分解されて、プリンタへ出力可能なデータになる。   In this way, the R′G′B ′ data output from the reference LUT is passed to the color separation process, and the R′G′B ′ data is color-separated from the C′K data into data that can be output to the printer.

基準LUTは、格子点の間隔を細かくするほど、より詳しい表現が可能である。そのため、図1に示すように、基準LUTに4913点の格子点がある場合、同等の表現をするには、新規に作成する色補正LUTにも4913点以上の格子点が必要になる。   The reference LUT can be expressed in more detail as the interval between the grid points is made finer. Therefore, as shown in FIG. 1, when there are 4913 grid points in the reference LUT, a newly created color correction LUT requires 4913 or more grid points in order to make an equivalent expression.

しかし、前述したように、基準LUTの全格子点と、新規にLUTを作成するプリンタ(またはプリンタモード)の色再現範囲の色をパッチとして出力して測色すれば、膨大な数の印刷と測定を強いられるため現実的ではない。   However, as described above, if all the grid points of the reference LUT and the colors in the color reproduction range of the printer (or printer mode) that newly creates the LUT are output as patches and measured, a large number of prints can be obtained. Because it is forced to measure, it is not realistic.

すなわち、基準プリンタの基準モードを定めて、それに近い色再現になるようにターゲットプリンタ(またはターゲットモード)の色補正LUTを設計する際、基準プリンタの基準モードでパッチを印刷して目標の測色値を得る。その際、一枚の記録紙に印刷可能なパッチの数が制限される、または、複数の記録紙に分けてパッチを印刷し測色する手間を省くために、補間演算によって測色値を増やすことがある。しかし、画作り故に非線形であることが多い色補正LUTに関する測色値に、立方体補間や四面体補間などの線形補間を適用すると、誤差が発生する。   In other words, when setting the reference printer's reference mode and designing the color correction LUT of the target printer (or target mode) so that the color reproduction is close to that, print the patch in the reference printer's reference mode and target colorimetry Get the value. At that time, the number of patches that can be printed on one sheet of recording paper is limited, or the colorimetric values are increased by interpolation to save the trouble of printing and measuring colors on multiple recording sheets. Sometimes. However, if linear interpolation such as cubic interpolation or tetrahedral interpolation is applied to the colorimetric values related to the color correction LUT, which is often nonlinear because of image creation, an error occurs.

特公昭58-16180号公報Japanese Patent Publication No.58-16180 特開平5-046750号公報Japanese Patent Laid-Open No. 5-046750 特開平9-245159号公報JP-A-9-245159

本発明は、非線形な色変換テーブルを正確に計算することを目的とする。   An object of the present invention is to accurately calculate a non-linear color conversion table.

本発明は、前記の目的を達成する一手段として、以下の構成を備える。   The present invention has the following configuration as one means for achieving the above object.

本発明にかかる色処理は、所定色空間の色データをターゲットデバイスの色空間の色データに変換する色変換テーブルを作成する際に、作成するテーブルの基準変換特性を示す基準テーブルの一部の格子点に対応する測色値と、前記ターゲットデバイスの色再現を示す測色値の対応関係から、前記一部の格子点に対応する色変換テーブルを作成し、前記基準テーブルを参照し、前記色変換テーブルの、前記基準テーブルの他の格子点に対応する出力値を計算することを特徴とする。   In the color processing according to the present invention, when creating a color conversion table for converting color data of a predetermined color space into color data of a target device color space, a part of the reference table indicating the reference conversion characteristics of the table to be created is created. From the correspondence between the colorimetric values corresponding to the grid points and the colorimetric values indicating the color reproduction of the target device, create a color conversion table corresponding to the part of the grid points, refer to the reference table, An output value corresponding to another grid point of the reference table of the color conversion table is calculated.

本発明によれば、非線形な色変換テーブルを正確に計算することができる。   According to the present invention, a non-linear color conversion table can be accurately calculated.

以下、本発明にかかる実施例の色処理を図面を参照して詳細に説明する。   Hereinafter, color processing according to an embodiment of the present invention will be described in detail with reference to the drawings.

[色補正LUTの作成]
以下では、基準プリンタと基準モードにできるだけ近い色再現になるように、ターゲットプリンタ(またはターゲットモード)の色補正LUTを作成する方法を説明する。
[Create color correction LUT]
In the following, a method of creating a color correction LUT for the target printer (or target mode) so that the color reproduction is as close as possible to the reference printer and the reference mode will be described.

図2は色補正LUT 105の作成手順の一例を示す図である。   FIG. 2 is a diagram showing an example of a procedure for creating the color correction LUT 105.

目標の測色値(Lab値、729点)101は、図3に示すようなsRGBデータを32刻みの均等な格子点間隔で並べたパッチデータを作成し、それらパッチデータを基準プリンタによって印刷し、得られたパッチを測色したものである。   The target colorimetric value (Lab value, 729 points) 101 creates patch data in which sRGB data as shown in Fig. 3 is arranged at equal grid point intervals of 32, and the patch data is printed by the reference printer. The obtained patch is colorimetrically measured.

目標の測色値101を入力として、前記のような線形補間102により、新たに作成する色補正LUTの目標のLab値(4913点)103を作成する。   Using the target colorimetric value 101 as an input, a target Lab value (4913 points) 103 of a color correction LUT to be newly created is created by linear interpolation 102 as described above.

また、色再現範囲テーブル106は、図4に示すように、ターゲットプリンタ(またはターゲットモード)の入力R'G'B'値に対する印刷物の測色値(Lab値)を格納する、R'G'B'値とLab値の相関(例えば729組)を示すテーブルである。   Further, as shown in FIG. 4, the color reproduction range table 106 stores the colorimetric value (Lab value) of the printed matter with respect to the input R′G′B ′ value of the target printer (or target mode). It is a table which shows the correlation (for example, 729 sets) of B 'value and Lab value.

色再現範囲テーブル106に格納されたR'G'B'値とLab値の相関を用いて、ターゲットプリンタの色再現範囲内で、目標のLab値103の一つに近似する(色差が最小の)R'G'B'値を一点求める(色差最小点の探索104)。そして、目標のLab値103のすべてに対応するR'G'B'値を決定すれば、sRGB値を入力して、デバイスに依存するR'G'B'値を出力する色補正LUT 105が完成する。   Using the correlation between the R'G'B 'value and the Lab value stored in the color reproduction range table 106, it approximates one of the target Lab values 103 within the color reproduction range of the target printer (with the smallest color difference). ) Find one R′G′B ′ value (search for minimum color difference 104). Once the R'G'B 'values corresponding to all of the target Lab values 103 are determined, the color correction LUT 105 that inputs the sRGB values and outputs the R'G'B' values depending on the device Complete.

ここで問題になるのは、線形補間102によって誤差が生じることである。これは、基準LUTが4913点というように細部に渡って定義されているのに対して、パッチを一枚の記録紙に収めたい、測色の手間を省くなどの理由から、目標の測色値101が729点と少ないためである。   The problem here is that errors are caused by the linear interpolation 102. This is because the reference LUT is defined in detail as 4913 points, but the target colorimetry is necessary because the patch is placed on a single sheet of paper or the labor of colorimetry is saved. This is because the value 101 is as small as 729 points.

色差最小点の探索104によって、4913組のLab値とR'G'B'値の組み合わせを決定するには、4913点の目標のLab値103が必要である。そのために、目標の測色値101の729点を線形補間102によって4913点に増加すると、格子点の中間の点は、それら格子点の値の中間の値になる。こうして求めた値は、大まかに色は合うが微妙な色の差が合わない、階調が崩れる、などの発生が少なくない。   In order to determine the combination of 4913 sets of Lab values and R′G′B ′ values by the search 104 of minimum color difference points, 4913 target Lab values 103 are required. Therefore, when 729 points of the target colorimetric value 101 are increased to 4913 points by the linear interpolation 102, the intermediate point of the lattice points becomes an intermediate value of the values of the lattice points. The values obtained in this way are not uncommon for occurrences such as rough color matching but subtle color differences and gradation collapse.

図5は実施例の色補正LUT 105の作成手順例を示す図である。   FIG. 5 is a diagram illustrating an example of a procedure for creating the color correction LUT 105 according to the embodiment.

図2に示す作成手順では、目標のLab値(4913点)103に対して色差最小のR'G'B'値を探索したが、図5に示す作成手順では、目標の測色値(729点)101に対して色差最小のR'G'B'値を探索する。言い換えれば、線形補間104によって目標値を増やさずに、測色値の数分のR'G'B'値を探索する。その結果、入力sRGB値とR'G'B'値の相関(729組)を格納した色補正LUT 501が得られる。   In the creation procedure shown in FIG. 2, the R′G′B ′ value having the smallest color difference is searched for the target Lab value (4913 points) 103. However, in the creation procedure shown in FIG. Point) Search for the smallest color difference R'G'B 'value for 101). In other words, R′G′B ′ values corresponding to the number of colorimetric values are searched without increasing the target value by the linear interpolation 104. As a result, a color correction LUT 501 storing the correlation (729 sets) between the input sRGB value and the R′G′B ′ value is obtained.

本実施例は、図1に示したように、sRGB値とR'G'B'値の相関(4913組)を格納する基準LUT 503を用いて、色補正LUT 501を拡張する(LUT拡張502)。つまり、729組のsRGBとR'G'B'の相関を4913組に拡張した色補正LUT105を作成する。   In this embodiment, as shown in FIG. 1, the color correction LUT 501 is extended (LUT extension 502) using a reference LUT 503 that stores a correlation (4913 sets) between sRGB values and R′G′B ′ values. ). That is, the color correction LUT 105 is created by expanding the correlation between 729 sets of sRGB and R′G′B ′ to 4913 sets.

[LUT拡張処理]
LUT拡張処理は様々な方法が考えられる。一例として、線形補間で729点を4913点に拡張する例を説明する。
[LUT extension processing]
Various methods can be considered for the LUT extension processing. As an example, an example of extending 729 points to 4913 points by linear interpolation will be described.

図6はR'G'B'色空間のG'-B'平面を表す図である。   FIG. 6 is a diagram illustrating the G′-B ′ plane of the R′G′B ′ color space.

点601は、729点の中の一格子点で、入力sRGB = (0, 0, 64)に対してR'G'B' = (0, 12, 68)を出力する。また、点602も、729点の中の一格子点で、入力sRGB = (0, 0, 32)に対してR'G'B' = (0, 4, 32)を出力する。一方、点603は、4913点の中の一格子点で、入力sRGB = (0, 0, 48)に対応する。線形補間によれば、格子点601、602の二つの出力値を用いて格子点603の出力値R'G'B'を計算する。   A point 601 is one grid point among 729 points, and R′G′B ′ = (0, 12, 68) is output for the input sRGB = (0, 0, 64). The point 602 is also a grid point out of 729 points, and R′G′B ′ = (0, 4, 32) is output for the input sRGB = (0, 0, 32). On the other hand, the point 603 is one grid point among 4913 points, and corresponds to the input sRGB = (0, 0, 48). According to the linear interpolation, the output value R′G′B ′ of the lattice point 603 is calculated using the two output values of the lattice points 601 and 602.

格子点603は、格子点601と602の中間に位置し、二つの格子点601、602から同じ距離だけ離れている(距離の比率1:1)。従って、格子点603の出力値は、二つの格子点601、602の出力値の中間であり、R'G'B' = (0, 8, 50)と補間される。   The lattice point 603 is located between the lattice points 601 and 602, and is separated from the two lattice points 601 and 602 by the same distance (distance ratio 1: 1). Accordingly, the output value of the grid point 603 is intermediate between the output values of the two grid points 601 and 602, and is interpolated as R'G'B '= (0, 8, 50).

次に、図5に示す、基準LUT 503を利用する補間方法を説明する。   Next, an interpolation method using the reference LUT 503 shown in FIG. 5 will be described.

前記の729点を4913点に拡張した線形補間と同様に、二つの格子点601、602の出力値から格子点603の出力値を補間する。ここで、前記の線形補間と異なる点は、基準LUT 503を参照して、色補正LUT 501の二つの格子点間の格子点の出力値を計算する点である。   Similar to the linear interpolation in which the 729 points are expanded to 4913 points, the output values of the grid points 603 are interpolated from the output values of the two grid points 601 and 602. Here, the difference from the linear interpolation is that an output value of a lattice point between two lattice points of the color correction LUT 501 is calculated with reference to the reference LUT 503.

図2に示す基準LUT 503の格子点603 (0, 0, 48)に対する出力値はR'G'B' = (0, 6, 49)である。また、格子点602 (0, 0, 32)に対する出力値はR'G'B' = (0, 3, 32)である。格子点603の出力値と格子点602の出力値の距離Δを計算すると下のようになる。
ΔR'1 = | 0 - 0| = 0
ΔG'1 = | 6 - 3| = 3
ΔB'1 = |49 - 32| = 17
The output value for the lattice point 603 (0, 0, 48) of the reference LUT 503 shown in FIG. 2 is R′G′B ′ = (0, 6, 49). The output value for the lattice point 602 (0, 0, 32) is R′G′B ′ = (0, 3, 32). The distance Δ between the output value of the grid point 603 and the output value of the grid point 602 is calculated as follows.
ΔR'1 = | 0-0 | = 0
ΔG'1 = | 6-3 | = 3
ΔB'1 = | 49-32 | = 17

格子点601 (0, 0, 64)の出力値はR'G'B' = (0, 11, 65)であり、同様に距離Δを計算すると下のようになる。
ΔR'2 = | 0 - 0| = 0
ΔG'2 = | 6 - 11| = 5
ΔB'2 = |49 - 65| = 16
The output value of the grid point 601 (0, 0, 64) is R′G′B ′ = (0, 11, 65), and the distance Δ is similarly calculated as follows.
ΔR'2 = | 0-0 | = 0
ΔG'2 = | 6-11 | = 5
ΔB'2 = | 49-65 | = 16

上記の距離Δは、基準LUT 503の出力値の距離を示している。次に、この距離Δを使用して、色補正LUT 105の格子点 (0, 0, 48)の出力値を補間する。   The distance Δ indicates the distance of the output value of the reference LUT 503. Next, the output value of the grid point (0, 0, 48) of the color correction LUT 105 is interpolated using this distance Δ.

図7はR'G'B'色空間のG'-B'平面を表す図で、点701は色補正LUT 105の格子点 (0, 0, 48)を表している。   FIG. 7 is a diagram illustrating the G′-B ′ plane of the R′G′B ′ color space, and the point 701 represents the grid point (0, 0, 48) of the color correction LUT 105.

まず、格子点701のR'に関しては格子点601、602ともに0であるから補間後の値も0である。   First, with respect to R ′ of the grid point 701, the grid points 601 and 602 are both 0, so the value after interpolation is also 0.

次に、格子点701のG'に関しては、図7に示す格子点601からの距離と、格子点602からの距離の比ΔG'2:ΔG'1 = 5:3を重み付けして、その値を計算する。
G' = (12×3 + 4×5)/(3 + 5) = 7
Next, with respect to G ′ of the grid point 701, the ratio ΔG′2: ΔG′1 = 5: 3 of the distance from the grid point 601 and the distance from the grid point 602 shown in FIG. Calculate
G '= (12 × 3 + 4 × 5) / (3 + 5) = 7

同様に、格子点701のB'を計算する。ただし、重みはΔB'2:ΔB'1 =16:17である。
B' = (68×17 + 32×16)/(17 + 16) ≒ 51
Similarly, B ′ of the lattice point 701 is calculated. However, the weight is ΔB′2: ΔB′1 = 16: 17.
B '= (68 × 17 + 32 × 16) / (17 + 16) ≒ 51

このように補間すると、色補間LUT 105の格子点701 (0, 0, 48)の出力値はR'G'B' = (0, 7, 51)になる。このようにして、他の格子点の出力値も計算して色補正LUT 105の4913点の出力値を決定する。基準LUT 503を参照する補間を行えば、目標のLab値を線形補間するよりも、単純に色補間LUT 105の中で線形補間するよりも、基準プリンタの基準モードに近い階調表現と色相の再現が可能になり、擬似輪郭が発生するなどの問題も解消することができる。   When interpolating in this way, the output value of the grid point 701 (0, 0, 48) of the color interpolation LUT 105 is R′G′B ′ = (0, 7, 51). In this way, the output values of other grid points are also calculated, and the output values of 4913 points of the color correction LUT 105 are determined. Interpolation with reference to the reference LUT 503 makes it possible to express the gradation and hue closer to the reference mode of the reference printer than simply linear interpolation in the color interpolation LUT 105, rather than linear interpolation of the target Lab value. Reproduction is possible, and problems such as the occurrence of pseudo contours can be solved.

これは、例えばCMYK系のプリンタ同士では、基準モードと新規に色補正LUTを作成する印刷モードの色再現特性が類似している。従って、同じような色補正特性を与えることで同じような色相特性、階調特性の出力を得ることができるためである。   This is because, for example, between CMYK printers, the color reproduction characteristics of the reference mode and the printing mode for newly creating a color correction LUT are similar. Therefore, it is possible to obtain outputs of similar hue characteristics and gradation characteristics by giving similar color correction characteristics.

また、図2を参照して説明したように、目標のLab値を線形補間で増やすと、ある色とある色の中間、といった大雑把な目標値になるため、基準LUT 503の細かな情報が保たれない。それに対して、図5に示す色補正LUTの作成方法は、色差最小点の探索104によって決定した色補正LUT 501の729点の値は全く変わることなく近似値を保る。さらに、基準LUT 503の情報を余すことなく使用して、細部の色再現まで近似させることが可能になる。   In addition, as described with reference to FIG. 2, when the target Lab value is increased by linear interpolation, a rough target value such as a certain color and the middle of a certain color is obtained, so that detailed information of the reference LUT 503 is maintained. I can't beat it. On the other hand, in the method of creating the color correction LUT shown in FIG. 5, the value of the 729 points of the color correction LUT 501 determined by the search 104 for the color difference minimum point maintains the approximate value without any change. Furthermore, it is possible to approximate the color reproduction of details by using the information of the reference LUT 503 without fail.

[装置の構成]
図8は色補正LUT 105を作成する画像処理装置の構成例を示すブロック図である。
[Device configuration]
FIG. 8 is a block diagram illustrating a configuration example of an image processing apparatus that creates the color correction LUT 105.

CPU 203は、RAM 204をワークメモリとして、ROM 206やHDD 202に格納されたプログラムを実行し、システムバス208を介して他の構成を制御することで、上記の色補正LUT 105の作成を含む様々な処理を実行する。勿論、線形補間102、色差最小点の探索104、LUTの拡張502はCPU 203が実行する処理である。   The CPU 203 includes the creation of the color correction LUT 105 described above by executing programs stored in the ROM 206 and the HDD 202 using the RAM 204 as a work memory and controlling other configurations via the system bus 208. Perform various processes. Of course, the linear interpolation 102, the minimum color difference point search 104, and the LUT extension 502 are processes executed by the CPU 203.

具体的には、HDD 202に格納された基準LUT 503のデータから、目標の測色値(Lab値、729点)101を取得するためのパッチデータを作成し、パッチデータを画像処理部207に供給して基準プリンタ100によって印刷する。そして、得られたパッチを測色機300によって測色し、測色結果(目標の測色値101)をHDD 202に格納する。その際、画像処理部207には基準プリンタ用の色分解処理を設定する。   Specifically, patch data for acquiring a target colorimetric value (Lab value, 729 points) 101 is created from the data of the reference LUT 503 stored in the HDD 202, and the patch data is sent to the image processing unit 207. Supply and print by the reference printer 100. Then, the obtained patch is measured by the colorimeter 300, and the color measurement result (target color measurement value 101) is stored in the HDD 202. At this time, color separation processing for the reference printer is set in the image processing unit 207.

また、ターゲットプリンタ用のR'G'B'値のパッチデータを作成し、パッチデータを画像処理部207に供給してターゲットプリンタ100によって印刷する。そして、得られたパッチを測色機300によって測色することで、色再現範囲テーブル106を取得する。測色結果(色再現範囲テーブル106)はHDD 202に格納する。その際、画像処理部207にはターゲットプリンタ用の色分解処理を設定する。   In addition, patch data of R′G′B ′ value for the target printer is created, the patch data is supplied to the image processing unit 207, and is printed by the target printer 100. Then, the color reproduction range table 106 is obtained by measuring the obtained patch with the colorimeter 300. The color measurement result (color reproduction range table 106) is stored in the HDD 202. At that time, color separation processing for the target printer is set in the image processing unit 207.

また、CPU 203は、完成した色補正LUT 105をHDD 202またはネットワークインタフェイス(I/F) 201を介してネットワーク209に接続されたサーバに格納する。また、基準LUT 503、並びに、目標の測色値101や色再現範囲テーブル106を取得するためのパッチデータ、または、目標の測色値101や色再現テーブル106そのものをネットワーク209上のサーバから取得してもよい。   Further, the CPU 203 stores the completed color correction LUT 105 in a server connected to the network 209 via the HDD 202 or the network interface (I / F) 201. Also, the reference LUT 503 and patch data for acquiring the target colorimetric value 101 and the color reproduction range table 106, or the target colorimetric value 101 and the color reproduction table 106 itself are acquired from a server on the network 209. May be.

[変形例]
上記のLUT拡張502は、基準LUT 503を使用して色補正LUT 501の格子点を729点から4913点に拡張する。その際、補間対象の格子点を挟む二つの格子点の距離の比を重みに利用した。これに代り、基準LUT 503内で、補間対象の格子点を含む格子点が形成する四面体を探し、その四面体の四頂点と補間対象の格子点間の距離の比を重みとして利用して、四頂点の出力値から補間対象の格子点の出力値を決定してもよい。こうすれば、二つの格子点を利用する場合よりも、色補正LUT 105の色再現を基準LUT 503に近付けることができる。勿論、補間立体は四面体に限らず、六頂点の立方体を用いてもよい。
[Modification]
The LUT extension 502 described above uses the reference LUT 503 to extend the grid points of the color correction LUT 501 from 729 points to 4913 points. At that time, the ratio of the distance between two grid points sandwiching the grid point to be interpolated was used as a weight. Instead, in the reference LUT 503, find the tetrahedron formed by the grid point including the grid point to be interpolated, and use the ratio of the distance between the four vertices of the tetrahedron and the grid point to be interpolated as a weight. The output value of the grid point to be interpolated may be determined from the output values of the four vertices. In this way, the color reproduction of the color correction LUT 105 can be brought closer to the reference LUT 503 than when two grid points are used. Of course, the interpolation solid is not limited to a tetrahedron, and a six-vertex cube may be used.

このように、基準プリンタの基準モードと新規に作成するプリンタ(または印刷モード)の色再現性が類似する場合、測色値を線形補間して得た色変換LUTよりも、基準プリンタの基準モードの階調表現と色相再現に近い色変換LUTを作成することができる。従って、擬似輪郭の発生などの問題も解消することができる。   In this way, when the color reproducibility of the newly created printer (or print mode) is similar to the standard mode of the standard printer, the standard mode of the standard printer is used rather than the color conversion LUT obtained by linear interpolation of the colorimetric values. A color conversion LUT close to the tone representation and hue reproduction can be created. Therefore, problems such as generation of pseudo contours can be solved.

また、色差最小点の探索によって決定した色変換LUTの格子点の出力値は変化することなく近似値を保ち、さらに、基準LUTの情報を余すことなく使用して、細部の色再現まで近似させることが可能である。   In addition, the output value of the grid point of the color conversion LUT determined by searching for the minimum point of color difference keeps the approximate value without any change, and further uses the information of the reference LUT to approximate the detail color reproduction. It is possible.

なお、上記では減法混色であるプリンタの例を説明したが、上記の色変換LUTの作成手順は、ディスプレイなどの加法混色のデバイスの色変換LUTにも適用可能である。さらに、画像入力デバイスであるスキャナ、ディジタルカメラの色補正用のLUTにも適用することができる。   Although an example of a printer that uses subtractive color mixing has been described above, the above-described procedure for creating a color conversion LUT can also be applied to a color conversion LUT of an additive color mixing device such as a display. Furthermore, the present invention can also be applied to color correction LUTs for scanners and digital cameras that are image input devices.

[他の実施例]
なお、本発明は、複数の機器(例えばホストコンピュータ、インタフェイス機器、リーダ、プリンタなど)から構成されるシステムに適用しても、一つの機器からなる装置(例えば、複写機、ファクシミリ装置など)に適用してもよい。
[Other embodiments]
Note that the present invention can be applied to a system including a plurality of devices (for example, a host computer, an interface device, a reader, and a printer), and a device (for example, a copying machine and a facsimile device) including a single device. You may apply to.

また、本発明の目的は、上記実施例の機能を実現するソフトウェアを記録した記憶媒体(記録媒体)をシステムまたは装置に供給し、そのシステムまたは装置のコンピュータ(CPUやMPU)が前記ソフトウェアを実行することでも達成される。この場合、記憶媒体から読み出されたソフトウェア自体が上記実施例の機能を実現することになり、そのソフトウェアを記憶した記憶媒体は本発明を構成する。   Another object of the present invention is to supply a storage medium (recording medium) that records software for realizing the functions of the above-described embodiments to a system or apparatus, and a computer (CPU or MPU) of the system or apparatus executes the software. Is also achieved. In this case, the software itself read from the storage medium realizes the functions of the above-described embodiments, and the storage medium storing the software constitutes the present invention.

また、前記ソフトウェアの実行により上記機能が実現されるだけでなく、そのソフトウェアの指示により、コンピュータ上で稼働するオペレーティングシステム(OS)などが実際の処理の一部または全部を行い、それによっt上記機能が実現される場合も含む。   Moreover, not only the above functions are realized by the execution of the software, but also an operating system (OS) or the like running on the computer performs part or all of the actual processing according to the instructions of the software, thereby This includes cases where functions are realized.

また、前記ソフトウェアがコンピュータに接続された機能拡張カードやユニットのメモリに書き込まれ、そのソフトウェアの指示により、前記カードやユニットのCPUなどが実際の処理の一部または全部を行い、それによって上記機能が実現される場合も含む。   In addition, the software is written in a function expansion card or unit memory connected to the computer, and the CPU of the card or unit performs part or all of the actual processing according to instructions of the software, thereby This includes the case where is realized.

本発明を前記記憶媒体に適用する場合、その記憶媒体には、先に説明したフローチャートに対応するソフトウェアが格納される。   When the present invention is applied to the storage medium, the storage medium stores software corresponding to the flowchart described above.

基準LUTの一例を示す図、A diagram showing an example of a reference LUT, 色補正LUTの作成手順の一例を示す図、A diagram showing an example of a procedure for creating a color correction LUT, 目標の測色値を取得するためのパッチデータの一例を示す図、The figure which shows an example of the patch data for acquiring the target colorimetric value, 色再現範囲テーブルの一例を示す図、The figure which shows an example of a color reproduction range table, 実施例の色補正LUT 105の作成手順例を示す図、The figure which shows the example of a creation procedure of color correction LUT 105 of an example, 単純な線形補間によるLUT拡張処理を説明する図、Diagram explaining LUT expansion processing by simple linear interpolation, 実施例のLUT拡張処理を説明する図、The figure explaining the LUT expansion processing of the embodiment, 色補正LUTを作成する画像処理装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the image processing apparatus which produces a color correction LUT.

Claims (7)

所定色空間の色データをターゲットデバイスの色空間の色データに変換する色変換テーブルを作成する色処理方法であって、
作成するテーブルの基準変換特性を示す基準テーブルの一部の格子点に対応する測色値と、前記ターゲットデバイスの色再現を示す測色値の対応関係から、前記一部の格子点に対応する色変換テーブルを作成し、
前記基準テーブルを参照し、前記色変換テーブルの、前記基準テーブルの他の格子点に対応する出力値を計算することを特徴とする色処理方法。
A color processing method for creating a color conversion table for converting color data of a predetermined color space into color data of a target device color space,
Corresponding to the some grid points from the correspondence relationship between the colorimetric values corresponding to some grid points of the reference table indicating the reference conversion characteristics of the table to be created and the colorimetric values showing the color reproduction of the target device. Create a color conversion table,
A color processing method, wherein an output value corresponding to another grid point of the reference table of the color conversion table is calculated with reference to the reference table.
前記所定色空間は画像入力機器の色空間であり、前記ターゲットデバイスは画像出力機器であることを特徴とする請求項1に記載された色処理方法。   2. The color processing method according to claim 1, wherein the predetermined color space is a color space of an image input device, and the target device is an image output device. 前記基準テーブルの前記他の格子点の出力値と、当該格子点の周囲の格子点の出力値の差分を重みとして、前記計算前の色変換テーブルの前記他の格子点の出力値を、当該格子点の周囲の格子点の出力値から補間することを特徴とする請求項1または請求項2に記載された色処理方法。   Using the difference between the output value of the other grid point of the reference table and the output value of the grid points around the grid point as a weight, the output value of the other grid point of the color conversion table before the calculation is 3. The color processing method according to claim 1, wherein interpolation is performed from output values of lattice points around the lattice points. 前記補間により、前記基準テーブルの格子点と同数の格子点を有する前記色変換テーブルを作成することを特徴とする請求項3に記載された色処理方法。   4. The color processing method according to claim 3, wherein the color conversion table having the same number of grid points as the grid points of the reference table is created by the interpolation. 所定色空間の色データをターゲットデバイスの色空間の色データに変換する色変換テーブルを作成する色処理装置であって、
作成するテーブルの基準変換特性を示す基準テーブルの一部の格子点に対応する第一の測色値を取得する第一の取得手段と、
前記ターゲットデバイスの色再現を示す第二の測色値を取得する第二の取得手段と、
前記第一および第二の測色値の対応関係から、前記一部の格子点に対応する色変換テーブルを作成する作成手段と、
前記基準テーブルを参照し、前記色変換テーブルの、前記基準テーブルの他の格子点に対応する出力値を計算する計算手段とを有することを特徴とする色処理装置。
A color processing device for creating a color conversion table for converting color data of a predetermined color space into color data of a target device color space,
First acquisition means for acquiring first colorimetric values corresponding to some grid points of the reference table indicating the reference conversion characteristics of the table to be created;
Second acquisition means for acquiring a second colorimetric value indicating color reproduction of the target device;
From a correspondence relationship between the first and second colorimetric values, a creation unit that creates a color conversion table corresponding to the part of the grid points;
A color processing apparatus comprising: calculation means for calculating an output value corresponding to another grid point of the reference table of the color conversion table with reference to the reference table.
画像処理装置を制御して、請求項1から請求項4の何れかに記載された色処理を実現することを特徴とするプログラム。   5. A program that controls an image processing device to realize the color processing according to claim 1. 請求項6に記載されたプログラムが記録されたことを特徴とする記録媒体。   7. A recording medium on which the program according to claim 6 is recorded.
JP2005210304A 2005-07-20 2005-07-20 Color processing method and apparatus Expired - Fee Related JP4459127B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005210304A JP4459127B2 (en) 2005-07-20 2005-07-20 Color processing method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005210304A JP4459127B2 (en) 2005-07-20 2005-07-20 Color processing method and apparatus

Publications (2)

Publication Number Publication Date
JP2007028426A true JP2007028426A (en) 2007-02-01
JP4459127B2 JP4459127B2 (en) 2010-04-28

Family

ID=37788557

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005210304A Expired - Fee Related JP4459127B2 (en) 2005-07-20 2005-07-20 Color processing method and apparatus

Country Status (1)

Country Link
JP (1) JP4459127B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6947060B2 (en) 2018-01-31 2021-10-13 株式会社リコー Image processing equipment, image processing methods and programs

Also Published As

Publication number Publication date
JP4459127B2 (en) 2010-04-28

Similar Documents

Publication Publication Date Title
JP4623137B2 (en) Color processing apparatus, method and program
US6870636B2 (en) Determining color mappings for a color printer
JP6156401B2 (en) Color conversion method, program, and image processing apparatus
JP2006197457A (en) Color chart creating method, device, and program, and color conversion definition correcting method
US20170339284A1 (en) Method for color matching printers
JP4459128B2 (en) Color processing method and apparatus
JP4189188B2 (en) Color conversion definition correction method, color conversion definition correction apparatus, and color conversion definition correction program
US20060164502A1 (en) System and method for characterizing a printing device
JP2001045313A (en) Method and device for converting color, color conversion program storage medium and method for correcting color
US7372596B2 (en) Color conversion definition creating method, color conversion definition creating apparatus, and color conversion definition creating program storage medium
JP4459127B2 (en) Color processing method and apparatus
JP2000050090A (en) Estimating method for measured color value on color batch, generating method for device profile using the same and picture processor
JP4228207B2 (en) Color image processing method, color image processing apparatus, color image processing program, and storage medium
JP2004064543A (en) Image processing apparatus and method
CN111800557A (en) Color conversion information generation method and color conversion information generation device
JP4010952B2 (en) Color conversion definition creation method, color conversion definition creation device, and color conversion definition creation program
JP3910323B2 (en) Profile creation method and profile creation apparatus
JP4921339B2 (en) Color processing apparatus and method
JP2007324861A (en) Apparatus and program of creating color conversion definition
JP2004242072A (en) Device and program for modifying color conversion definition
JP2005119189A (en) Image processor and method of processing image
JP2007288495A (en) Color separating method, color separation table creating method and image processing apparatus
JP4432750B2 (en) Color conversion coefficient creation device and program
JP2001203907A (en) Profile generating method
EP1495631B1 (en) System and method for characterizing a printing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091120

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100208

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100209

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130219

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140219

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees