JP2008530952A - Color correction techniques for color profiles - Google Patents
Color correction techniques for color profiles Download PDFInfo
- Publication number
- JP2008530952A JP2008530952A JP2007556177A JP2007556177A JP2008530952A JP 2008530952 A JP2008530952 A JP 2008530952A JP 2007556177 A JP2007556177 A JP 2007556177A JP 2007556177 A JP2007556177 A JP 2007556177A JP 2008530952 A JP2008530952 A JP 2008530952A
- Authority
- JP
- Japan
- Prior art keywords
- piecewise linear
- color
- correction
- correction function
- rgb
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
Abstract
選択的3刺激値補正がデバイス非依存座標に対し、区分的線形補正関数を使用して適用される。区分的線形補正関数は、対応するデバイス依存色空間の境界条件において当該区分的線形補正関数の最大値が生じ、かつ異なる境界条件または中立軸のいずれかにその対応するデバイス依存色空間内の値が近づくに従って当該区分的線形補正関数がゼロまたは概略ゼロまで線形減少するように定義される。区分的線形補正関数をゼロまたは概略ゼロまで線形減少させることにより、1つの色領域に対する補正が滑らかに減少してほかの色領域と混ざり、補正に起因するアーティファクトまたはイメージの改悪の導入が実質的に防止される。 Selective tristimulus correction is applied to the device independent coordinates using a piecewise linear correction function. A piecewise linear correction function produces the maximum value of the piecewise linear correction function in the corresponding device-dependent color space boundary condition and the value in its corresponding device-dependent color space on either a different boundary condition or neutral axis. Is defined such that the piecewise linear correction function linearly decreases to zero or approximately zero as. By linearly reducing the piecewise linear correction function to zero or approximately zero, the correction for one color area is smoothly reduced and mixed with the other color areas, effectively introducing artifacts or image corruption due to the correction. To be prevented.
Description
本発明は、1つまたは複数の色領域の選択的な調整を、その後に続いて生成されるイメージへのアーティファクト(artifacts)または望まない改悪が行われるリスクを実質的に伴うことなく可能にする態様で、色管理プロファイル内におけるデバイス非依存色データを補正することに関する。本発明は、とりわけ、デジタルカメラまたはスキャナ等のデジタルイメージ入力デバイスの色プロファイルを改善する上で有用である。 The present invention allows selective adjustment of one or more color regions without substantial risk of subsequent artifacts or unwanted alterations to the subsequently generated image. In an aspect, it relates to correcting device independent color data in a color management profile. The present invention is particularly useful in improving the color profile of digital image input devices such as digital cameras or scanners.
デジタルカメラまたはスキャナ等のデジタルイメージ入力デバイスは、対象物から反射された光を、その対象物のイメージを表すデジタルデータに変換する。通常、デジタルデータはユニットに分割され、各ユニットは、そのイメージの部分またはピクセルの色を記述する。したがってイメージは、ピクセル(x,y)の2次元配列として記述することができる。さらにデジタルデータの各ユニットは、通常、ピクセル内に存在する、レッド、グリーン、およびブルーの各原色の量、または強度を記述することによってそのピクセルの色を記述する。たとえばデジタルデータは、x=0,y=0におけるピクセルが、レッド強度200、グリーン強度134、および100のブルー強度100を備えると表すことができ、ここで、各原色の強度は8ビットによって表現される。(8ビットは256通りの組み合わせを可能にすることから、各原色が0〜255の値を有することができ、この例では、255が最も高い強度レベルを示し、ゼロが強度なし、またはブラックを示す。) A digital image input device such as a digital camera or a scanner converts light reflected from an object into digital data representing an image of the object. Typically, digital data is divided into units, each unit describing the portion of the image or the color of a pixel. Thus, an image can be described as a two-dimensional array of pixels (x, y). In addition, each unit of digital data typically describes the color of the pixel by describing the amount, or intensity, of the primary colors of red, green, and blue that are present in the pixel. For example, the digital data may represent that the pixel at x = 0, y = 0 has a red intensity of 200, a green intensity of 134, and a blue intensity of 100 of 100, where the intensity of each primary color is represented by 8 bits. Is done. (8 bits allow for 256 combinations so each primary color can have a value between 0 and 255, in this example 255 indicates the highest intensity level, zero is no intensity, or black. Show.)
通常、同一条件の下に得られる同一イメージについて、異なるデジタルイメージ入力デバイスは、作成するデジタルデータが異なることから、デジタルイメージ入力デバイスによって作られるデジタルデータを、ここでは「デバイス依存データ」と呼ぶ。たとえば第1のデジタルカメラがイメージの第1のピクセルは200のレッド成分を有していると示す一方、同一条件の下に撮られた等価のイメージの同一ピクセルは第2のデジタルカメラで202のレッド成分を有していると示すことがある。別の例においてはその第1のデジタルカメラが林檎の中のレッドを200として記録し、第2のデジタルカメラが同じ林檎の同じ部分(同一条件の下で撮像)の中のレッドを202として記録することがある。デジタルイメージ入力デバイスによって生成されるデバイス依存データは、通常、各ピクセルに関連付けられたレッド、グリーン、およびブルーの色成分で特定されることから、しばしば、このデータは「RGB」データと呼ばれる。 In general, since different digital image input devices generate different digital data for the same image obtained under the same conditions, the digital data generated by the digital image input device is referred to herein as “device-dependent data”. For example, the first digital camera shows that the first pixel of the image has 200 red components, while the same pixel of the equivalent image taken under the same conditions is 202 in the second digital camera. May have red component. In another example, the first digital camera records red in the apple as 200, and the second digital camera records red in the same part of the same apple (captured under the same conditions) as 202. There are things to do. Since the device dependent data generated by a digital image input device is typically specified by the red, green, and blue color components associated with each pixel, this data is often referred to as “RGB” data.
2つの異なるデバイスからのデバイス依存データの間における相違は、各デバイスの撮像コンポーネント内の微細な相違から生じる。これらの相違は、それらのイメージが、カラーインクジェットプリンタ、CRTモニタ、またはLCDモニタ等のデジタルイメージ出力デバイスによって出力されるときに問題を引き起こす。たとえば上記の第1のデジタルカメラによって撮影された林檎のイメージと、第2のデジタルカメラによって撮影されたその林檎のイメージは、同一のカラーインクジェットプリンタに出力されたときに異なって現れることになる。 Differences between device dependent data from two different devices result from minor differences in the imaging component of each device. These differences cause problems when those images are output by a digital image output device such as a color inkjet printer, CRT monitor, or LCD monitor. For example, an apple image captured by the first digital camera and an apple image captured by the second digital camera appear differently when output to the same color inkjet printer.
さらに問題を複雑にすることに、デジタルイメージ出力デバイスもまた、デジタルイメージ入力デバイス同士の相違と同じタイプの不一致を互いの間に有する。たとえばユーザが、1つのCRTモニタ上でレッドの正方形のイメージを見ることを希望し、その間、カスタマが、同一のイメージを別のCRTモニタ上で見ることがある。ここで、記録されたレッドの正方形の撮像に使用されたデジタルイメージ入力デバイスが、そのレッドの正方形のすべてのピクセルを、レッド=200、グリーン=0、およびブルー=0として記録したと仮定する。一般に、それら2つのモニタが同一のイメージを表示するとき、各モニタは、上記入力デバイスから同一のデジタルデータを受信した場合であっても、わずかに異なるレッド色を表示する。 To further complicate matters, digital image output devices also have the same type of discrepancy between each other as differences between digital image input devices. For example, a user may want to see a red square image on one CRT monitor, while a customer may see the same image on another CRT monitor. Now assume that the digital image input device used to image the recorded red square has recorded all pixels of that red square as red = 200, green = 0, and blue = 0. In general, when the two monitors display the same image, each monitor displays a slightly different red color even when it receives the same digital data from the input device.
2つの異なるプリンタに同一イメージをプリントするときにも、それと同じ相違が一般に存在する。しかしながらここで注意する必要があるが、プリンタによって処理されるデジタルイメージデータは、通常、イメージ内の各ピクセルを、そのピクセル内に存在する二次色(secondary color)のシアン、マゼンタ、およびイエローのそれぞれをはじめ、ブラックの量、または強度に従って記述する。したがってプリンタによって処理されるデバイス依存デジタルイメージデータは、(デジタルイメージ入力デバイスに関連付けられたRGBデバイス依存データに対して)「CMYK」データと呼ばれる(これに対してモニタは、データをRGB形式で表示する)。 The same difference generally exists when printing the same image on two different printers. It should be noted here, however, that digital image data processed by a printer typically represents each pixel in the image for the secondary colors cyan, magenta, and yellow present in that pixel. Each is described according to the amount or intensity of black. Thus, device-dependent digital image data processed by the printer is referred to as “CMYK” data (as opposed to RGB device-dependent data associated with the digital image input device) (as opposed to the monitor displaying the data in RGB format). To do).
色プロファイルは、上記のデバイス間における色の不一致に対する解決策を提供する。各デジタルイメージ入力デバイスは、通常、それ独自の色プロファイルを有しており、それがデバイス依存データをデバイス非依存データにマッピングする。相応じて各デジタルイメージ出力デバイスは、通常独自の色プロファイルを有しており、デバイス非依存データが表現する色をプリントするために、該デバイス非依存データを上記出力デバイスが使用可能なデバイス依存データに変換する。デバイス非依存データは、普遍的な態様で、すなわちデバイス非依存色空間においてイメージ内のピクセルの色を記述する。デバイス非依存色空間は、各色に一意的な値(unique value)を割り当てるが、この各色のための一意的な値は、較正済みの計測器および照度条件を使用して決定される。デバイス非依存色空間の例は、CIEXYZ、CIELAB、CIE Yxy、およびCIE LCHであり、この分野で知られている。デバイス非依存データは、ここで、しばしば「デバイス非依存座標」と呼ばれる。ここではCIEXYZ色空間内のデバイス非依存データを「XYZデータ」または単に「XYZ」と呼ぶ。また、CIELAB色空間内のデバイス非依存を「LABデータ」、「CIELAB」、または単に「LAB」と呼ぶ。 The color profile provides a solution to the color mismatch between the devices described above. Each digital image input device typically has its own color profile, which maps device dependent data to device independent data. Correspondingly, each digital image output device usually has its own color profile, and the device-independent data can be used by the output device to print the color represented by the device-independent data. Convert to data. The device independent data describes the color of the pixels in the image in a universal manner, i.e. in a device independent color space. The device independent color space assigns a unique value to each color, but the unique value for each color is determined using calibrated instrumentation and illumination conditions. Examples of device independent color spaces are CIEXYZ, CIELAB, CIE Yxy, and CIE LCH, which are known in the art. Device-independent data is often referred to herein as “device-independent coordinates”. Here, the device-independent data in the CIEXYZ color space is referred to as “XYZ data” or simply “XYZ”. Also, device independence in the CIELAB color space is referred to as “LAB data”, “CIELAB”, or simply “LAB”.
理論的に言えば、色プロファイルは、ユーザが任意のデジタルイメージ入力デバイスを使用して対象物のイメージを得ることを可能とし、かつ、デジタルイメージ出力デバイスからその対象物のイメージの正確な表現を出力することを可能にする。たとえば図1を参照すると、対象物101のイメージが、デジタルイメージ入力デバイス102を使用して獲得される。このイメージは、図1において、RGB103で表されている。次にイメージRGB103は、デジタルイメージ入力デバイスの色プロファイル104を使用してデバイス非依存データ(たとえばXYZ105)に変換される。デバイス非依存データXYZ105は、続いて、出力デバイスの色プロファイル106を使用して、出力デバイス108に固有のデバイス依存データ(たとえばCMYK107)に変換される。出力デバイス108は、このデバイス依存データCMYK107を使用して、対象物101の正確な表現109を生成する。
In theory, a color profile allows a user to obtain an image of an object using any digital image input device and provides an accurate representation of the object image from a digital image output device. Enable to output. For example, referring to FIG. 1, an image of an
色プロファイルの有用性は、それらがいかに正確にデバイス依存データをデバイス非依存データに、またはその逆に変換するかによって限定される。現在のところ、デバイス依存データをデバイス非依存データに、またはその逆に完全に翻訳する色プロファイルを生成する方法は存在しない。色プロファイル内の誤差は、CRTまたはLCDモニタ上に表示されたイメージ等の表示されたイメージと、このイメージのハードコピープリントアウトを比較したときに明白になる。 The usefulness of color profiles is limited by how accurately they convert device-dependent data to device-independent data and vice versa. Currently, there is no way to generate a color profile that fully translates device-dependent data into device-independent data, or vice versa. Errors in the color profile become apparent when comparing a displayed image, such as an image displayed on a CRT or LCD monitor, with a hardcopy printout of this image.
従来方法として、デバイス依存データに関連付けられたデバイス非依存データを補正することによって色プロファイルを改善する方法が存在している。しかしながらこれらの方法は、色プロファイルを改善する一方、小さいが有意の2〜3デルタE台の色誤差を色空間の特定の領域内に残す。(1デルタEの単位は、この分野で公知であり、CIELAB色空間内のユークリッド距離の1単位を言う。)言い換えると、従来方法によって実行される翻訳または補正は、いまだ補正後の色ガモット(color gamut)内に不規則性を導入し、大きな補正については特に、色空間の全エリアにおいて真に線形でない。 As a conventional method, there is a method for improving a color profile by correcting device-independent data associated with device-dependent data. However, these methods improve the color profile while leaving a small but significant 2-3 Delta E color error in a particular region of the color space. (The unit of 1 Delta E is known in the art and refers to one unit of Euclidean distance in the CIELAB color space.) In other words, the translation or correction performed by the conventional method is still the corrected color gamut Color gamut) introduces irregularities and is not truly linear in all areas of the color space, especially for large corrections.
したがってこの分野においては、誤差が低減された色プロファイルまたはデバイス非依存色空間を補正するための方法が必要とされている。 Therefore, there is a need in the art for a method for correcting a color profile or device independent color space with reduced errors.
この分野における上述した問題は、1つまたは複数の色領域の選択的な調整を、その後に続いて生成されるイメージに対してアーティファクトまたは望ましくない改悪が導入されるリスクを実質的に伴うことなく可能にする色プロファイルまたはデバイス非依存色空間を補正するためのシステムおよび方法によって取り扱われ、技術的な解決策が達成される。本発明の実施態様によれば、デバイス非依存座標に対する選択的3刺激値補正は、区分的線形補正関数を使用して行われる。区分的線形補正関数は、対応するデバイス依存色空間の境界条件にて当該区分的線形補正関数の最大値を生じ、かつ異なる境界条件または中立軸のいずれかにその対応するデバイス依存色空間内の値が近づくに従って当該区分的線形補正関数がゼロまたは概略ゼロまで線形減少するように定義される。区分的線形補正関数をゼロまたは概略ゼロまで線形減少させることによって、1つの色領域に対する補正が滑らかに減少してほかの色領域と混ざり、それによって補正に起因するアーティファクトまたはイメージの改悪の導入が実質的に防止される。 The above-mentioned problems in this field involve the selective adjustment of one or more color gamuts with substantially no risk of introducing artifacts or undesired alterations to subsequently generated images. Handled by a system and method for correcting an enabling color profile or device-independent color space, a technical solution is achieved. According to an embodiment of the present invention, selective tristimulus correction for device independent coordinates is performed using a piecewise linear correction function. A piecewise linear correction function yields the maximum value of the piecewise linear correction function at the corresponding device-dependent color space boundary condition, and within its corresponding device-dependent color space either at a different boundary condition or neutral axis. The piecewise linear correction function is defined to linearly decrease to zero or approximately zero as the value approaches. By linearly reducing the piecewise linear correction function to zero or approximately zero, the correction for one color region is smoothly reduced and mixed with the other color regions, thereby introducing artifacts or image corruption due to the correction. Is substantially prevented.
本発明は、添付図面にと共に以下に示す好適な実施の形態の詳細説明から理解される。なお、添付図面は本発明のコンセプトを示すことを目的としており、必ずしも縮尺通りではない。 The present invention will be understood from the following detailed description of the preferred embodiments, taken in conjunction with the accompanying drawings. The accompanying drawings are intended to illustrate the concept of the invention and are not necessarily to scale.
本発明は、デバイス非依存色空間内の1つまたは複数の選択された色領域を、当該色空間内の色が、補正されている選択された領域から離れるにつれて補正の大きさ(magnitude)が縮小するように補正する。したがって、デバイス非依存色空間内の色領域に対する調整を、その後に続いて生成されるイメージへのアーティファクトまたは望ましくない改悪が導入されるリスクをこの調整が実質的に提起することのないように行うことができる。本発明は、小さい色の不一致、すなわち2〜3デルタE台、または大きい色の不一致、すなわち20〜30デルタE台の両方の補正に有用であることがわかっている。 The present invention allows one or more selected color regions in a device-independent color space to have a correction magnitude that increases as the color in the color space moves away from the selected region being corrected. Correct to reduce. Therefore, adjustments to color regions in the device-independent color space are made so that the adjustments do not pose a substantial risk of introducing artifacts or undesirable alterations to subsequently generated images. be able to. The present invention has been found useful for correcting both small color mismatches, i.e. 2-3 Delta E levels, or large color mismatch, i.e. 20-30 Delta E levels.
図2は、本発明の実施態様に係るデジタルイメージ入力デバイスのための色プロファイルを生成するためのシステム200を示す。システム200は、コンピュータシステム204と通信可能に接続されたデジタルイメージ入力デバイス202を含むことができ、該コンピュータシステム204はデータストレージシステム206と通信可能に接続されている。コンピュータシステム204は、通信接続された1つまたは複数のコンピュータを含むことができ、オペレータ208の補助を必要とすることもあれば、必要としないこともある。デジタルイメージ入力デバイス202は、カラーチャートのテストイメージ、およびオプションとして当該カラーチャートの外側のシーンを獲得する。デジタルイメージ入力デバイス202の例は、デジタルカメラまたはスキャナを含む。デジタルイメージ入力デバイス202は、テストイメージをコンピュータシステム204に送信し、システム204が、詳しくは図3および4を参照して後述するとおり、テストイメージおよびカラーチャートの推定照度(estimated illumination)に基づいて、デジタルイメージ入力デバイス202のための色プロファイルを生成する。この色プロファイルは、データストレージシステム206内にストアされ、ほかの任意のデバイス210に出力され、またはコンピュータシステム204から他の出力が行われることがある。ここで注意が必要であるが、コンピュータシステム204が必要とするテストイメージおよびカラーチャートに関係する情報等の情報は、任意の手段によってコンピュータシステム204に提供でき、必ずしもデジタルイメージ入力デバイス202によらない。
FIG. 2 illustrates a
データストレージシステム206は、1つまたは複数のコンピュータアクセス可能メモリを含むことができる。データストレージシステム206は、複数のコンピュータ、デバイス、またはその両方を介して通信接続される複数のコンピュータアクセス可能メモリを含む分散データストレージシステムでもよい。一方、データストレージシステム206は分散データストレージシステムとする必要はなく、その結果、単一のコンピュータまたはデバイス内に設けられる1つまたは複数のコンピュータアクセス可能メモリを含んでいてもよい。
「コンピュータ」なる語は、任意のデータ処理デバイス、たとえばデスクトップコンピュータ、ラップトップコンピュータ、メインフレームコンピュータ、携帯情報端末(personal digital assistant)、ブラックベリー(Blackberry)、および/またはデータ処理用、および/またはデータ管理用、および/またはデータ取り扱い用、そのほかのデバイスを含み、電気的、および/または磁気的、および/または光学的、および/または生物学的コンポーネント、および/またはそのほかであるか否かによらない。 The term “computer” refers to any data processing device such as a desktop computer, laptop computer, mainframe computer, personal digital assistant, Blackberry, and / or data processing, and / or Whether for data management and / or data handling, other devices, whether electrical, and / or magnetic, and / or optical, and / or biological components, and / or other It does n’t matter.
「コンピュータアクセス可能メモリ(computer-accessible memory)」なる語は、コンピュータがアクセスできる任意のデータストレージデバイスを含み、揮発性または不揮発性、電子的、および/または磁気的、および/または光学的、および/またはそのほかであるか否かによらず、また限定されるものではないが、フロッピー(登録商標)ディスク、ハードディスク、コンパクトディスク、DVD、フラッシュメモリ、ROM、およびRAMを含む。 The term “computer-accessible memory” includes any data storage device accessible by a computer, including volatile or non-volatile, electronic, and / or magnetic, and / or optical, and Whether or not, and including but not limited to, floppy disk, hard disk, compact disk, DVD, flash memory, ROM, and RAM.
「通信接続される(communicatively connected)」なる語は、有線、無線、またはその両方であるかによらず、データの通信が行われることがあるデバイス、および/またはコンピュータ、および/またはプログラムの間における任意タイプの接続を含むことが意図されている。さらにこの「通信接続される」なる語には、単一コンピュータ内のデバイスおよび/またはプログラムの間の接続、異なるコンピュータ内に設けられているデバイスおよび/またはプログラムの間の接続、およびコンピュータ内に全く設けられていないデバイス間における接続を含む。これに関して言えば、データストレージシステム206がコンピュータシステム204から分離されて示されているが、当業者であれば、データストレージシステム206を完全にまたは部分的にコンピュータシステム204内に収容できることを認識することになろう。
The term “communicatively connected” refers to between devices and / or computers and / or programs that may communicate data, whether wired, wireless, or both It is intended to include any type of connection in Furthermore, the term “communicatively connected” includes connections between devices and / or programs within a single computer, connections between devices and / or programs provided in different computers, and within computers. Includes connections between devices that are not provided at all. In this regard, although the
図3は、本発明の実施態様に係るデジタルイメージ入力デバイス202用色プロファイルの作成方法300を例示している。方法300は、本発明の実施態様において、ハードウエア、ソフトウエア、および/またはファームウエアとしてコンピュータシステム204によって実行される。
FIG. 3 illustrates a
ステップ302において、コンピュータシステム204がデジタルイメージ入力デバイス202から、または何らかのそのほかのソースからデバイス依存データを受信する。ステップ302において受けたデバイス依存データは、本発明の実施態様において、RGBデータとなる。このデバイス依存データは、少なくともカラーチャートのテストイメージを表現している。ここで、この出願はカラーチャートの使用に関して記述しているが、任意の対象物であって、その色に関連付けされた既知のデバイス非依存値を有する対象物を使用しても良い。また、これにも注意が必要であるが、ステップ302において受信するデバイス依存データが、テストイメージ内にカラーチャート外側のシーンに属するデータを含む必要はない。
In
デジタルイメージ入力デバイス202の操作を行うこともできるオペレータ208は、テストイメージ内におけるカラーチャートの位置および向きを指定できる。それに代えて、カラーチャートの向きを、コンピュータシステム204によって自動的に決定してもよい。各カラーパッチ用の単一のデバイス依存RGB値がステップ302から出力されるように、ステップ302で受信されたデバイス依存RGB値の平均をカラーチャート内のカラーパッチごとに決定することができる。それぞれがカラーパッチに関連付けされたデバイス依存RGB値を集合的に、RGB303で表すデバイス依存RGB値の配列と呼ぶ。
An
ステップ304においては、RGB値の配列、すなわちRGB303が、そのテストイメージに用いられたカラーチャートに対しあらかじめ測定したデバイス非依存データXYZ301と関連付けされる。デバイス依存データRGB303と、対応するデバイス非依存データXYZ301との関連付けは、図3に「RGB−XYZ」305として表す2次元配列としてストアすることができる。この配列は、2つの列を含むことができ、1つはデバイス依存データ用で、もう一つはデバイス非依存データ用であって、各行は、カラーチャート内の単一カラーパッチのための関連データを含む。たとえば、次のソフトウエアコードを使用してその種の配列を定義することができる。
RGB rgbChartValue[i]
Lab labMeasuredValue[i]
ここで、0<i<numPatchesである。
rgbChartValueは図3におけるRGB303を表す。labMeasuredValueは、このカラーチャートに関連付けされたデバイス非依存データXYZ301であり、あらかじめ測定され、変換されてLabデータとしてストアされている。numPatchesは、このカラーチャート内のパッチの数を表す。当業者は認識することになろうが、デバイス依存データRGB303とデバイス非依存データXYZ301の関連を表現する任意の態様を使用することができる。
In
RGB rgbChartValue [i]
Lab labMeasuredValue [i]
Here, 0 <i <numPatches.
rgbChartValue represents RGB303 in FIG. The labMeasuredValue is device-independent data XYZ301 associated with the color chart, measured in advance, converted, and stored as Lab data. numPatches represents the number of patches in this color chart. As those skilled in the art will recognize, any manner of expressing the relationship between device-
デバイス非依存データXYZ301はCIEXYZデバイス非依存色空間内であるとして例示されているが、任意のデバイス非依存色空間を使用することができる。さらに、図3、4、および5は、デバイス非依存データをXYZデータとして例示しているが、図3、4、および5内の個々のステップは、ほかの色空間内のデバイス非依存データに対して作用することもできる。したがって、ほかの色空間へのXYZデータの変換はこれらのステップにおいて含意されており、当業者にはその種の変換が公知であることから図示されていない。
Device-
ステップ306においては、デバイス非依存データXYZ301内のグレイパッチが識別される。グレイパッチは、配列RGB−XYZ(array RGB-XYZ)305内にストアされているデバイス非依存データXYZを使用して識別できる。ステップ306において識別されたグレイパッチ出力は、GrayPatches307として表現される。RGB‐XYZ305は、変更されることなくステップ306を経てステップ308に渡すことができる。必須ではないが、XYZ色空間に対立するものとして、LAB色空間内においてグレイパッチを識別すると有利なことがある。特に、LAB色空間内においてはグレイ色がほぼゼロに等しい座標「a」および「b」に関連付けされ、それによって単純な計算が提供される。したがって配列RGB‐XYZ305内のデバイス非依存データXYZを、ステップ306の実行に先行してLABに変換できる。次に示すソフトウエアコードは、GrayPatches307を識別する方法をはじめ、LAB色空間内での操作の利点を例示している。
LabGrayValue.lab[]は、出力時にCIELABデバイス非依存色空間内におけるグレイパッチ307の配列を含む。
rgbGrayValues[]は、カラーチャートのRGBイメージから抽出されるデバイス依存グレイ値を表す。
numGrayPatchesは、識別されたグレイパッチの総数である。
In
LabGrayValue. lab [] includes an array of
rgbGrayValues [] represents a device-dependent gray value extracted from the RGB image of the color chart.
numGrayPatches is the total number of identified gray patches.
本発明の実施態様によれば、GrayPatches307が、デバイス非依存の測定済みデータ配列(上記のソフトウエアコード内のLabGrayValue[])をはじめ、チャートのRGBイメージから抽出された対応するデバイス依存グレイ値(上記のソフトウエアコード内のrgbGrayValues[])の両方を含む。すでにその態様でチャートデータがソートされていることが先行してわかっている場合を除き、LabGrayValue[i]およびrgbGrayValues[i]の配列をソートすると好都合な場合があり、そこでは、インデックスi=0,...,numGrayPatchesが最明−>最暗にマッピングする。
In accordance with an embodiment of the present invention,
ステップ308においては、GrayPatches307内のもっとも明るい範囲内グレイパッチが識別され、BrightestPatch309として出力される。本発明の実施態様によれば、もっとも明るい範囲内グレイパッチは、R<255、G<255、およびB<255の関連するデバイス依存データを有する(デバイス非依存座標における)グレイパッチである。言い換えると、関連する露出過多でないデバイス依存データを有するもっとも明るいグレイパッチが識別される。ステップ308を実行するために必要なデバイス非依存データおよびデバイス依存データは、配列RGB−XYZ305から獲得できる。GrayPatches307およびRGB−XYZ305は、変更されることなくステップ308を経てステップ310に渡すことができる。次のソフトウエアコードは、ステップ308を遂行する態様を、入力されるGrayPatches307をはじめ配列RGB−XYZ305が、強度(LAB内の座標「L」)の順序(最明から最暗へ)でソートされていることを前提として例示している。
ステップ310および312においては、カラーチャートの照度過多または照度不足の効果を補償するために、カラーチャートのデバイス非依存データ(RGB‐XYZ305内にストアされている)が、照度補正係数αILLCORRによってスケーリングされる。αILLCORRは、本発明の実施態様によれば、デバイス非依存座標内のBrightestPatch309の照度と、関連するデバイス依存座標によって示される同一のパッチの照度を比較することによって生成される。言い換えると、BrightestPatch309の測定された照度が、デジタルイメージ入力デバイスによってRGBデータ303内に記録されているとおりの同一パッチの照度に対して比較される。本発明の実施態様によれば、αILLCORRが次のとおりに生成される。
αILLCORR=(Yestimated)/(Ymeasured)
Yestimatedは、もっとも明るい範囲内グレイパッチについてのRGB303の評価済み照度である。Yestimatedは、次のとおりに表すことができる。
Yestimated=fY(Ri0,Gi0,Bio)
ここで、インデックス「i0」は、maxGrayPatchIndexを参照する。Ymeasuredは、BrightestPatch309によって識別されるとおりのXYZ301の照度である。
In
α ILLCORR = (Y estimated ) / (Y measured )
Y estimated is the evaluated illuminance of
Y estimated = f Y (Ri 0 ,
Here, the index “i 0 ” refers to maxGrayPatchIndex. Y measured is the illuminance of
ステップ312では、本発明の実施態様において、照度補正済みデバイス非依存データが、αILLCORRによるデバイス非依存データXYZ301の線形スケーリングによって生成される。そのような照度補正済みデバイス非依存データが、図3ではXYZILLCORRとして表されている。XYZILLCORRとRGBデータ303の間における1対1のカラーパッチの関係が、RGB‐XYZILLCORR313として表されている。本発明の実施態様では、XYZILLCORRが、以下に例示されるとおり、XYZデータ301のすべての値にαILLCORRを乗ずることによって生成される。
ステップ314においては、デジタルイメージ入力デバイスのプロファイルの最終デバイス非依存座標を生成するために使用される最適化されたパラメータのリスト315が計算される。次に述べる図4は、本発明の実施態様に係るそのようなパラメータを生成するための発明的な方法を例示している。しかしながら、これらのパラメータを計算するためのこの分野で公知の任意の方法を使用することができる。このパラメータのリスト315をはじめ、RGB303およびXYZ301がステップ316において使用され、デジタルイメージ入力デバイス202のためのプロファイル317が生成される。
In
図4は、本発明の実施態様に従い、ステップ314において実行できるサブステップの展開図を例示している。ステップ402に対する入力は、関連するデバイス依存データRGBおよび照度補正済みデバイス非依存データXYZILLCORRのRGB‐XYZILLCORR配列313である。ステップ402においては、デバイス依存データRGB(RGB‐XYZILLCORR内)の1次元階調曲線R、G、およびBを記述する最適パラメータαTC403が生成される。RGB‐XYZILLCORR313は、変更されることなくステップ402を経てステップ404に渡される。
FIG. 4 illustrates an expanded view of the substeps that can be performed in
最適化されたαTC403の処理は、本発明の実施態様によれば、αTCのための初期パラメータを選択し、αTCのための最初に選択されたパラメータをデバイス依存データRGBに適用して予測されるデバイス非依存座標値を生成することによって実行できる。その後、生成された予測されるデバイス非依存座標値と、測定されたデバイス非依存座標値(XYZILLCORR)の間における誤差が計算される。このプロセスが、計算される誤差が最小になるまでαTCのための新しく選択されたパラメータを用いて反復される。最小の誤差が得られたαTC403のためのパラメータが、ステップ402において最適パラメータαTC403として出力される。ステップ402のプロセスは、本発明の実施態様に従って、次のように表現できる。
本発明の実施態様によれば、レッド階調チャンネルのためのFLAB(Ri,αTC)として次の式を使用することができる。
fc(x,βc)=x+βc(0.5+0.5(2(x−0.5))3−x)
ここで注意を要するが、βc=0についてコントラスト関数fc(x)=xである。RMaxは線形スケーリング係数であり、デジタルイメージ入力デバイスによって記録される最大のレッド色を示す。Rbiasはブラックバイアスオフセットであり、デジタルイメージ入力デバイス202によって記録されるもっとも暗いレッド色を示す。γRは、この分野で公知の、レッド色に関連付けされるこのデジタルイメージ入力デバイスのガンマである。それに代えてγRをγGおよびγBと等しくし、すべてをデバイス202の全体的なガンマと等しくすることもできる。βcは、コントラストを調整するためのパラメータ、すなわち値0.0<x<0.5について関数fc()の出力を減少し、0.5<x<1.0について関数fc()の出力を増加するための手段である。このような調整を実行できる多くの数学的関数が存在し、たとえば3次の多項式、スプライン等がある。そのような調整を実行するコンセプトは、この分野で公知であるが(アドビフォトショップ(Adobe(登録商標)PhotoShop(登録商標))等の「自動コントラスト」機能参照)、しばしばそれは、色データに関連してデバイスの特性記述を試みるというよりはイメージに対する審美的改善に関係する。
According to an embodiment of the present invention, the following equation can be used as F LAB (R i , α TC ) for the red tone channel.
f c (x, β c ) = x + β c (0.5 + 0.5 (2 (x−0.5)) 3 −x)
Note that the contrast function f c (x) = x for β c = 0. R Max is a linear scaling factor and indicates the maximum red color recorded by the digital image input device. R bias is the black bias offset and indicates the darkest red color recorded by the digital
次に示すソフトウエアコードは、本発明の実施態様に従ってステップ402がどのように実行され得るかについて例示している。このソフトウエアコードにおいては、RGB−XYZILLCORR313内に表現されているすべてのGrayPatchesが最明から最暗に向かう順序でソートされていることが前提となっている。
αTC403の値は、計算された二乗誤差の合計(たとえば、sumSq)を最小化するべく調整される必要がある。RGB(RGB−XYZILLCORR内)に関連付けられたデバイス非依存座標の予測に使用される数学モデル(たとえば、evaluateModel())は、この分野で公知の任意のモデルとすることができる。しかしながら選択されたモデルが、滑らかさ(すなわち、二次導関数の値が低いか、かつ/またはイメージの特性記述にこのプロファイルが使用されたときの望ましくない視覚的バンディングまたはアーティファクトがない)を提供し、パラメータが可能な限り少なく、しかも正確な予測を達成することが重要である。次に示すソフトウエアコードは、本発明の実施態様において、デバイス依存データRGBについてデバイス非依存座標を予測する数学モデル(前述したFLAB(RGBi,αTC)として使用されるevalGammaModel())を例示している。
上記の階調曲線の計算が、RGB入力値に対して適用されるコントラスト調整を伴って開始することに注意を要する。このコントラスト調整は、値RGB=0、0.50、または1.0(RGBが1.0に正規化されていることを前提とする)に対して補正が適用されないという制約を伴う3次の多項式である。この補正はfilmContrastCorrによって乗じられるが、デフォルト=0.0であり、それを正または負として(それぞれコントラストを減少し、または増加する)RGB値に加えることができる。修正後の値が、ブラックバイアスオフセット(blackBias[]によって定義される)、各R、G、Bチャンネルのための線形スケーリング係数(RGBMax[])、および各RGBチャンネルのためのガンマの値(gamma[])とともに標準ガンマ関数の計算に使用される。この例においては、調整可能なパラメータαTC403の総数が10であり、すなわち、RGBMaxと、R、G、およびBのためのgammaと、R、G、およびBのためのblackBiasと、3つすべてのチャンネルのための単一の値filmContrastCorrとである。ここで注意が必要であるが、カラーチャートのためのデータ値の数が6グレイパッチであれば、計算するデータポイントが18(6×3(L*、a*、b*について)=18)となる。最初の2つのパッチが露出過多である場合には、データポイントの数は4×3=12まで減少する。オプションとしてRGBの3つのチャンネルのそれぞれについてガンマがまったく同じであると仮定してパラメータαTC403の数を8に減らすことも可能である。このアプローチは、カラーチャートから抽出されノイズの多いRGBデータを有する品質のより低いイメージに対して有用である。 Note that the above tone curve calculation starts with the contrast adjustment applied to the RGB input values. This contrast adjustment is a third order with the constraint that no correction is applied to the values RGB = 0, 0.50, or 1.0 (assuming that RGB is normalized to 1.0). It is a polynomial. This correction is multiplied by filmContrastCorr, but default = 0.0, which can be added to RGB values as positive or negative (decrease or increase contrast respectively). The corrected values are the black bias offset (defined by blackBias []), the linear scaling factor (RGBMax []) for each R, G, B channel, and the gamma value (gamma) for each RGB channel. []) Together with the standard gamma function. In this example, the total number of adjustable parameters α TC 403 is 10, ie, RGBMax, gamma for R, G, and B, blackBias for R, G, and B, 3 With a single value filmContrastCorr for all channels. Note that if the number of data values for the color chart is a 6 gray patch, the data points to be calculated are 18 (6 × 3 (for L *, a *, b *) = 18). It becomes. If the first two patches are overexposed, the number of data points is reduced to 4 × 3 = 12. Optionally, the number of parameters α TC 403 can be reduced to 8 assuming that the gamma is exactly the same for each of the three RGB channels. This approach is useful for lower quality images with noisy RGB data extracted from a color chart.
ステップ402において最適パラメータαTC403が決定されると、ステップ404が、デバイスプロファイルのRGB色度を記述する最適パラメータαC405を生成する。αTC403およびRGB‐XYZILLCORR313は、変更されることなくステップ404を経てステップ406に渡される。ステップ404においては、以下の説明に示されているとおり、標準の行列/TRC形式を使用して、ステップ402において計算された階調応答を使用するすべてのカラーチャート値についてR、G、およびBのためのXYZの値を計算することができる。誤差関数は、ステップ402に関連して前述したものに類似である。しかしながらすべてのデータポイントは使用でき、かつ、R、G、またはBの値が0または255に等しく、イメージデータがクリップされることと実際のR、G、またはBの値が正確にはわからないことを含む場合には、合計に加算されるすべての二乗誤差をあらかじめ定義済みの重み付け係数によって縮小することができる。
Once the
ステップ404においては、調整されたパラメータのリストαC405がR、G、およびBのための色度の値(xy、この分野で公知)となる。本発明の実施態様によれば、RGBのXYZ関数の行列部分の数学的記述は次のとおりとなる。ここで注意が必要であるが、デバイス依存データRGB(RGB−XYZILLCORR313内)は、ステップ402に関連して上に定義されたRGB階調曲線関数によってすでに処理済みである。言い換えるとRGBの新しい値は線形RGB空間内にある。したがって、単純な行列を使用してそれらをXYZに容易に変換することが可能である。
ステップ406はオプションであるが、そこで最適パラメータαSA407は、結果として得られるデバイスプロファイルのデバイス非依存色空間値XYZに対する選択的調整を記述する。パラメータαSA407は、ステップ402および/または404に関連して前述した誤差最小化ルーチンを使用して最適化することができる。本発明の実施態様によれば、パラメータαSA407によって実行される選択的な調整がステップ406において1つまたは複数の色に対して行われ、その結果、このアプローチを用いて修正されたプロファイルによって変換またはレンダリングされるイメージへのアーティファクトまたは望ましくない改悪が導入されるリスクが実質的に存在しない。ステップ406においては任意の方法を使用できるが、ステップ406の部分としてデバイス非依存色空間に対する選択的調整を実行する発明的プロセスを、次に図5に関連して説明する。図5を用いて例示されている実施態様は、R、G、B、C、M、Yに対応するi=0,...,5に関する補正ΔXYZiのリストを包含するパラメータαSA407の生成に使用できる。このようなパラメータは、合計の二乗誤差を最小化する調整後のデバイス非依存色空間XYZadj505が生成されるように前述した誤差最小化プロセスを使用して最適化することができる。
Step 406 is optional, where
ステップ408もまたオプションのステップであるが、ここで、αTC403、αC405、およびαSA407内のパラメータのいくつかまたは全部の最終的な最適化を行うことができる。これらのパラメータはステップ402および/または404および/または406を反復することによって、および/またはパウエル等の前述した誤差最小化技術を使用し、グループとしてそれらのパラメータのほとんどを最適化することによって個別に最適化することができる。露出過多でないイメージについて、データポイントの総数は24×3=72である。階調曲線のための調整可能なパラメータ(αTC403)の総数は10、色度(αC405)については6、選択的なXYZ調整(αSA407)については18である。色度の値と選択的なXYZ調整の強い相関が存在することから、色度を固定したまま、階調曲線および選択的な色度のグローバルな最適化を同時に実行すると有利なことがある。ステップ408の出力は、調整済みαCパラメータαC’409、調整済みαTCパラメータαTC’410、および調整済みαSAパラメータαSA’411を含むことができる。αC’409、αTC’410、およびαSA’411は、408から出力され、ParameterList315内に含められる。RGB−XYZILLCORR313がステップ408から出力される必要はなく、それに代えてαILLCORR311がステップ408から出力され、ステップ316においてプロファイル317の生成に使用されるParameterList315に加えることができる。これに関して言えば、ステップ312をステップ316の一部として実行できることに注意を要する。このシナリオにおいては、ステップ310からの出力αILLCORR311およびRGB−XYZ305が、RGB‐XYZILLCORR313の代わりに、入力として直接ステップ314に渡されることになる。ステップ314において照度補正済みデバイス非依存データの操作が必要とされるときには、αILLCORR311をXYZ301(RGB−XYZ305内にストアされている)に適用してXYZILLCORRを生成できる。
Step 408 is also an optional step, where final optimization of some or all of the parameters in
図3および4の上記方法では、露出過多またはシーンの残りの部分より照明が良好でない、この分野で公知のカラーチェッカを用いたイメージに対し、良好な結果を提供することを明らかにしている。すべての場合において、極端な色および全体的なホワイトバランスが改善されている。要望がある場合には、「ルックプロファイル」の等価物を得るように、すなわちイメージがより飽和されるか、そのほかの修正が行われることが可能となるように測定されるチャート値XYZ301を修正することができる。
The above method of FIGS. 3 and 4 reveals that it provides good results for images using color checkers known in the art that are overexposed or less illuminated than the rest of the scene. In all cases, extreme color and overall white balance are improved. If desired, modify the measured chart values
ここで図5を参照すると、本発明の実施態様に従った、デバイス非依存色空間に対する選択的調整を実行するための方法500が例示されている。方法500は、見るために表示されるイメージとハードコピー形式でプリントアウトされる同一のイメージとの間における優れた視覚的整合を保証する。方法500は、入力デバイスから到来するイメージデータの特性記述、ディスプレイデバイスに対するイメージのレンダリング、および出力デバイスへのイメージの変換のために有用である。また方法500は、デジタルカメラまたはスキャナ等のデジタルイメージ入力デバイスについての色プロファイルの精度を改善するためにも有用である。したがって、方法500は、図4のステップ406の部分として使用されることがある。しかしながら当業者は認識することになろうが、この方法500が図3および4に例示されている方法300と完全に独立して使用されることもある。
With reference now to FIG. 5, a
方法500は、アーティファクトが導入される可能性を実質的にまったく伴うことなく、デバイス依存データから引き出されたデバイス非依存データの全部または選択されたエリア内において線形態様で補正を適用する。選択的な調整は、デバイス非依存データに対して行われ、レッド(「R」)、グリーン(「G」)、ブルー(「B」)、シアン(「C」)、マゼンタ(「M」)、またはイエロー(「Y」)の近傍等の選択された色領域内の色を、修正されない色エリア内の色を劣化させることなく改善する。
方法500によって使用される入力は、デバイス依存データ「RGB」501、デバイス非依存データ「XYZ」502、そのほかのパラメータ503、およびデバイス非依存座標による選択された色領域に対する変更「ΔXYZi」504を含み、それにおいて「i」は局所的な色領域を表す。方法500が図4のステップ406の部分として使用されるときには、ΔXYZi504がαSA407を表す。デバイス依存データRGB501およびデバイス非依存データXYZ502は対応しており、その結果、RGB501内のデバイス依存データの各要素(piece)がXYZ502内のデバイス非依存データの要素と対応する。たとえば方法500が図4内のステップ406として使用される場合には、RGB‐XYZILLCORR313内のRGBデータをRGBデータ501として入力し、RGB‐XYZILLCORR313内の関連するデバイス非依存データXYZILLCORRをXYZデータ502として入力することができる。
The input used by the
RGBデータ501等のRGBデバイス依存データのためのプロファイルの改善を試みる際、RGBデータに関連付けられたデバイスの特徴を記述する数式の出力に類似のデバイス非依存色空間内において補正を実行すると望ましい。デジタルカメラおよびスキャナ等のRGBデータ生成デバイスを特徴記述する一般的な数式は、たとえば図4のステップ402に関連して前述した行列/TRC形式の修正バージョンである。この行列/TRC形式は、本来的にRGBをXYZに変換する。そのため、ほとんどのデバイスについて、XYZの3刺激値空間が、補正を実行する好ましい空間となる。したがってデバイス非依存データ502がXYZとして示され、方法500の出力は、XYZadj505として例示されている調整済みXYZ座標である。しかしながら、方法500を参照して説明されている補正に類似の線形補正を、この分野で公知のCIELAB等の視覚的に一様な色空間、およびCIECAM98等の種々のCIECAMモデルについて、ある程度の成功を伴って実行することができる。
When attempting to improve a profile for RGB device-dependent data, such as
ΔXYZi504は、デバイス非依存色空間内における選択された色領域「i」に対する変更(たとえば、彩度、色相、および輝度)を表す。本発明の実施態様によれば0≦i≦5であり、値ゼロから5がレッド、グリーン、ブルー、シアン、マゼンタ、およびイエローのそれぞれに関連付けされる(それぞれ、R0、G0、B0、C0、M0、およびY0と呼ぶ)。しかしながら当業者は認識することになろうが、異なる色領域に対する変更を使用することもできる。値R0は、R=Rmax、G=0、B=0、C=0、M=0、およびY=0として定義される。G0、B0、C0、M0、およびY0の値は、それと同様の形に従う。ΔXYZi504は、マニュアルでまたは自動的に生成できる。ΔXYZi504のマニュアル生成の例は、デバイス非依存データXYZデータ502から生成されたイメージの(たとえばCRT上に)表示されたイメージまたはハードコピープリントアウトをオペレータに観察させ、続いて表示またはプリントされたイメージの色を選択する変更を行わせる。たとえば、表示されたイメージ内のレッドが明るすぎるように見えた場合に、オペレータは、ΔXYZ0504のための負の輝度値を指定し、イメージ内のレッドの輝度を下げることができる。それに代えて、ステップ402および/または404に関連して前述したように、誤差最小化ルーチンの使用を通じてΔXYZiデータ504を自動的に生成することもできる。たとえば方法500が図4のステップ406の部分として使用される場合には、ΔXYZiデータ504のための初期値を自動的に生成することができる。その後は、結果として得られるデバイス非依存色空間XYZadj505と予測されたデバイス非依存色空間の間における合計の二乗誤差を最小化する試みの中でΔXYZiデータ504の異なる値が使用されるように方法500を反復して実行できる。最小合計二乗誤差に帰するΔXYZiデータ504の値を、ステップ406においてαSA407として出力できる。
方法500のステップ506は、入力としてRGB501およびそのほかのパラメータ503を取り、線形RGB値(RGB)’507を生成する。それに代えてステップ506が、そのほかのパラメータ503およびステップ506を必要とすることなく、入力として線形値(RGB)’を直接取ることができる。(RGB)’507を生成するために任意の手順が使用できるが、(RGB)’507は、通常、上記の最適化プロセスの中で述べたとおり、適切なRGB−>XYZ行列によって乗じられたときにXYZ502の最適化された予測を達成するRGB501の補正済みの値となるように計算される。CRTの場合であれば、(RGB)’を、CRTに関連付けされたガンマ曲線の形式、たとえばRγによって計算することができる。この場合においては、そのほかのパラメータ503がそのガンマ曲線を記述するパラメータになる。単なるガンマ曲線の使用を超えたより複雑な関数が、より高い精度のため、またはLCDシステムのために必要とされることがある。方法500が図4のステップ406として使用される場合には、そのほかのパラメータ503が、αTC403内のパラメータのうちの1つまたは複数を含むことができる。たとえばデジタルカメラプロファイルのデバイス非依存座標が調整されるときは、そのカメラの階調チャンネル表現fR、fG、fB(および、ステップ402に関連して説明したとおり関連するαTC403パラメータ)をステップ506において使用し、(RGB)’507を生成できる。
Step 506 of
ステップ508においては、ΔXYZiデータ504に対応する各色iのための補正係数β509が生成される。本発明の実施態様では、補正係数β509が、区分的線形補正関数を使用して、対応するデバイス依存色空間(RGB501)の境界条件において当該区分的線形補正関数のそれぞれの最大値が生じ、かつ異なる境界条件または中立軸のいずれかにその対応するデバイス依存色空間内の値が到達するに従って当該区分的線形補正関数のそれぞれがゼロまたは概略ゼロまで線形減少するように計算される。言い換えると、補正係数β509は、本発明の実施態様に従って、(a)補正係数(β)および色iのための区分的線形補正関数が、現在の評価中のデバイス依存色がiに関連付けできるほかのすべての色および中立軸から最大距離にあるとき極大となり、かつ(b)補正係数(β)および色iのための区分的線形補正関数が、評価中のデバイス依存色がiに関連付けできる別の色および中立軸に近づくに従ってゼロまで線形縮小するように計算される。「関連付け」によって意味されることを例示するため、境界条件における色RbGbBbを考える。たとえばここで、RbGbBbのすべての値が0または1.0のいずれかになるとして境界条件を定義する。「隣接する」または「関連する」色は、現在の色からそれらの色のうちの1つだけが0から1へ、または1から0へ変化したものとなる。したがってRbGbBb=(1,0,0)に隣接する色は(1,1,0)および(1,0,1)になる。RbGbBb=(1,1,0)に隣接する色は(1,0,0)および(0,1,0)である。
In
本発明の実施態様によれば、ΔXYZiデータ504のためのi=0〜i=5についての(すなわち、R0、G0、B0、C0、M0、およびY0についての)βi509が次のとおりに計算される。この実施態様によれば、R、G、およびBが1.0に正規化されていることが仮定され、したがってβがゼロと1の間となり、最大の補正はβ=1において生じる。
ステップ510においては、個別のデバイス非依存の変更ΔXYZi504のそれぞれが、対応する補正係数βi509によって補正される。デバイス非依存データXYZ502に対して行われる合計の調整は、ΔXYZtotal511として計算される。ΔXYZtotal511は、個別に補正されたデバイス非依存の変更ΔXYZi504のそれぞれを合計することによって計算される。本発明の実施態様によれば、ΔXYZtotal511が次のとおりに計算される。
ステップ512においては、デバイス非依存データXYZ502がΔXYZtotal511によって調整され、XYZadj505が生成される。本発明の実施態様によれば、XYZadj505が次のとおりに計算される。
XYZadj=XYZ+ΔXYZtotal
In
XYZ adj = XYZ + ΔXYZ total
次のソフトウエアコードは、本発明の実施態様に係る方法500の実装を例示している。
方法500は、ディスプレイ上におけるソフトプルーフのプロセスの改善に使用することができる。そのような改善されたソフトプルーフを達成する所望の補正を決定するために、補正の大きさおよび方向を、所望の改善の方向においてディスプレイプロファイルA−>ディスプレイプロファイルA’の補正を行い、その後、補正後のディスプレイプロファイルA’−>ディスプレイプロファイルAの色の変換を行うことによって評価することができる。たとえばオペレータが、表示されたイメージ内のイエローの色相をレッドに向けてシフトすることを希望している場合には、飽和イエローについてレッドに向かう3デルタEの色相シフトに等しいΔ(XYZ)5(イエロー)の値を使用することができる。所望の結果が生じたことをオペレータが確認した場合に、今度はディスプレイのRGBプロファイルを逆の態様で補正し、スクリーンにレンダリングされるイメージがイエロー内の所望のレッドシフトを有していることを確保できる。これは、上記の補正のネガ(negative)である、Δ(XYZ)5(イエロー)の値を用いたディスプレイプロファイルAの調整によって妥当な精度で達成できる。
The
同様に方法500は、デバイス非依存色空間の補正の実行に使用することができる。たとえば、オリジナルのRGBプロファイル(プロファイルA1)を、方法500に従って修正して新しいプロファイル(プロファイルA2)を生成できる。XYZの補正は、標準の色管理パス、XYZ−>RGB(プロファイルA1)−>RGB(プロファイルA2)−>(XYZ)’を追随することによって実行できる。複数の変換を単一の変換に組み合わせることは、この分野で公知であり、プロファイルの連結と呼ばれている。XYZ−>(XYZ)’の結果は、アブストラクトプロファイルとして知られている。
Similarly, the
方法500についての他の応用は、図3および4に関連して上に述べたとおり、デジタルイメージ入力デバイス(スキャナまたはデジタルカメラ等)のプロファイリングである。方法500は、グレイバランスおよび良好な全体的イメージの完全性を保存し、しかも強い色を有するイメージ内の特定のオブジェクトについてRGB−>XYZまたはL*a*b*の予測的変換を改善するために、適切な補正がデジタルカメラまたはスキャナ用の包括的なRGBプロファイルに適用されることを可能にする。RGBCMYについての角度、彩度、および照度に対する補正の値は、誤差最小化ルーチンによって自動的に計算できる。
Another application for
ほかのテクニックとは異なり、方法500は、小さな、すなわち2〜3デルタE台の色の不一致、または大きな、すなわち20〜30デルタE台の色の不一致の両方に使用することができる部分的に線形の関数を使用する。
Unlike other techniques, the
101 対象物(object)、102 入力デバイス、103 デバイス依存データRGB、104 色プロファイル、105 デバイス非依存データXYZ、106 出力デバイス色プロファイル、107 デバイス非依存データCMYK、108 出力デバイス、109 対象物101の表現、200 システム、202 入力デバイス、204 コンピュータシステム、206 データストレージシステム、208 オペレータ、210 オプションのデバイス/コンピュータ、300 方法、301 XYZデータ、302 ステップ、303 RGBデータ、304 ステップ、305 RGB−XYZ、306 ステップ、307 GrayPatches(グレイパッチ)、308 ステップ、309 BrightestPatch、310 ステップ、311 αILLCORR、312 ステップ、313 RGB−XYZILLCORR、314 ステップ、315 パラメータ、316 ステップ、317 プロファイル、402 ステップ、403 パラメータαTC、404 ステップ、405 パラメータαC、406 ステップ、407 パラメータαSA、408 ステップ、409 調整済みαCパラメータαC’、410 調整済みαTCパラメータαTC’、411 調整済みαSAパラメータαSA’、500 方法、501 デバイス依存データ「RGB」、502 デバイス非依存データ「XYZ」、503 そのほかのパラメータ、504 選択された色領域に対する変更(変化)「ΔXYZi」、505 調整済みデバイス非依存データXYZadj、506 ステップ、507 調整済みデバイス依存データ(RGB)’、508 ステップ、509 補正係数β、510 ステップ、511 デバイス非依存データに対する総合的な変更ΔXYZtotal、512 ステップ。 101 object, 102 input device, 103 device dependent data RGB, 104 color profile, 105 device independent data XYZ, 106 output device color profile, 107 device independent data CMYK, 108 output device, 109 Representation, 200 systems, 202 input devices, 204 computer systems, 206 data storage systems, 208 operators, 210 optional devices / computers, 300 methods, 301 XYZ data, 302 steps, 303 RGB data, 304 steps, 305 RGB-XYZ, 306 steps, 307 Gray Patches (gray patch), 308 steps, 309 Brighttest Patch, 310 steps, 311 α ILLC ORR , 312 step, 313 RGB-XYZ ILLCORR , 314 step, 315 parameter, 316 step, 317 profile, 402 step, 403 parameter α TC , 404 step, 405 parameter α C , 406 step, 407 parameter α SA , 408 step, 409 Adjusted α C parameter α C ′, 410 Adjusted α TC parameter α TC ′, 411 Adjusted α SA parameter α SA ′, 500 method, 501 Device dependent data “RGB”, 502 Device independent data “XYZ”, 503 other parameters, changes to the 504 selected color region (change) "DerutaXYZ i", 505 adjusted device-independent data XYZ adj, 506 steps, 507 adjusted device dependent data (RGB) ', 508 steps, 509 Positive factor beta, 510 steps, 511 overall changes ΔXYZ total, 512 steps to the device-independent data.
Claims (23)
前記方法が、
区分的線形補正関数を使用するデバイス非依存座標に対する選択的3刺激値補正の適用を含み、
前記区分的線形補正関数が、対応するデバイス依存色空間の境界条件において前記区分的線形補正関数の最大値を生じ、かつ、異なる境界条件または中立軸のいずれかに前記対応するデバイス依存色空間内の値が近づくに従って前記区分的線形補正関数がゼロまたは概略ゼロまで線形減少するように定義される方法。 A method executed at least in part by a computer,
The method comprises
Applying selective tristimulus correction to device independent coordinates using a piecewise linear correction function,
The piecewise linear correction function produces a maximum value of the piecewise linear correction function at a boundary condition of the corresponding device dependent color space, and within the corresponding device dependent color space at either a different boundary condition or neutral axis The piecewise linear correction function is defined to linearly decrease to zero or approximately zero as the value of.
前記区分的線形補正関数は、RGBプロファイルに関連付けられた線形のデバイス依存座標に依存する方法。 The method of claim 1, wherein
The piecewise linear correction function depends on linear device dependent coordinates associated with an RGB profile.
さらに、それぞれの補正関数がRGBプロファイルに関連付けられたデバイス依存座標空間内での異なる色領域に対応する区分的線形補正関数の組み合わせの適用を含み、
前記区分的線形補正関数のそれぞれが、前記デバイス依存色空間に対応するそれぞれの境界条件において前記区分的線形補正関数のそれぞれの最大値を生じ、かつ、異なるそれぞれの境界条件または前記中立軸のいずれかに前記対応するデバイス依存色空間内の値が近づくに従って前記区分的線形補正関数がそれぞれゼロまたは概略ゼロまで線形減少するように定義される方法。 The method of claim 1, wherein
Furthermore, the application of a combination of piecewise linear correction functions corresponding to different color regions in the device dependent coordinate space, each correction function associated with the RGB profile,
Each of the piecewise linear correction functions yields a respective maximum value of the piecewise linear correction function at each boundary condition corresponding to the device-dependent color space, and either a different respective boundary condition or the neutral axis A method in which the piecewise linear correction function is defined to linearly decrease to zero or approximately zero, respectively, as the value in the corresponding device dependent color space approaches.
さらに、前記区分的線形補正関数の使用と、アブストラクトプロファイルを作成するためにオリジナルと修正後のプロファイルの連結とを行うRGBプロファイルの前記デバイス非依存座標に対して前記選択的3刺激値補正を適用することにより、色空間を調整することを含む方法。 The method of claim 1, wherein
Further, the selective tristimulus correction is applied to the device-independent coordinates of the RGB profile that uses the piecewise linear correction function and connects the original and modified profiles to create an abstract profile. Adjusting the color space by:
さらに、前記区分的線形補正関数を用いた前記デバイス非依存座標に対して、前記選択的3刺激値補正を適用することによって、RGBプロファイルを修正することを含む方法。 The method of claim 1, wherein
The method further includes modifying an RGB profile by applying the selective tristimulus correction to the device independent coordinates using the piecewise linear correction function.
前記RGBプロファイルは、デジタルカメラまたはスキャナのプロファイルを含む方法。 The method of claim 5, wherein
The RGB profile includes a digital camera or scanner profile.
さらに、前記区分的線形補正関数を使用する前記デバイス非依存座標に対し、前記選択的3刺激値補正を適用することで、イメージの外見を調整することを含む方法。 The method of claim 1, wherein
The method further includes adjusting the appearance of the image by applying the selective tristimulus correction to the device independent coordinates using the piecewise linear correction function.
前記方法は、
線形のデバイス依存座標に少なくとも基づいてデバイス依存座標空間内の複数の色領域のそれぞれに対応するデバイス非依存座標に対する3刺激値補正を決定し、
対応する前記色領域内のデバイス非依存座標に対して3刺激値補正を適用して補正されたデバイス非依存座標を得ることを含み、
前記3刺激値補正は、
前記3刺激値補正の最大値が対応するデバイス依存色空間の境界条件で生じ、
かつ、前記対応するデバイス依存色空間内の値が異なる境界条件または中立軸のいずれかに近づくに従って、該3刺激値補正がゼロまたは概略ゼロまで線形減少するように定義される方法。 A method executed at least in part by a computer,
The method
Determining tristimulus corrections for device-independent coordinates corresponding to each of the plurality of color regions in the device-dependent coordinate space based at least on the linear device-dependent coordinates;
Applying tristimulus corrections to device-independent coordinates in the corresponding color region to obtain corrected device-independent coordinates;
The tristimulus value correction is
The maximum value of the tristimulus correction occurs in the boundary condition of the corresponding device-dependent color space;
And a method in which the tristimulus correction is defined to linearly decrease to zero or approximately zero as the corresponding value in the device dependent color space approaches either a different boundary condition or neutral axis.
表示デバイスに関連付けされたデバイス依存色空間の有彩色について、彩度、色相、および輝度における所望の変更に少なくとも基づいて補正レベルを決定し、
前記表示デバイスに関連付けされた線形補正関数に少なくとも基づいて、補正係数を計算し、
前記補正係数および前記補正レベルを、プリンティングデバイスの有彩色を定義するデバイス非依存座標に適用して色彩的に補正されたデバイス非依存座標を作成することを含み、
前記補正係数が、前記デバイス依存色空間の境界条件において前記補正係数の最大値を生じ、かつ異なる境界条件または中立軸のいずれかにデバイス依存色空間内の値が近づくに従って前記補正係数がゼロまたは概略ゼロまで線形減少するように、定義される方法。 A method,
Determining a correction level for a chromatic color in a device-dependent color space associated with a display device based at least on a desired change in saturation, hue, and brightness;
Calculating a correction factor based at least on a linear correction function associated with the display device;
Applying the correction factor and the correction level to device-independent coordinates defining a chromatic color of the printing device to create chromatically corrected device-independent coordinates;
The correction factor produces a maximum value of the correction factor in a boundary condition of the device dependent color space, and the correction coefficient is zero or as the value in the device dependent color space approaches either a different boundary condition or a neutral axis A method defined to linearly decrease to approximately zero.
さらに、
それぞれの区分的線形補正関数が異なる色領域に対応する複数の区分的線形補正関数のグループを計算し、
前記グループ内の各区分的線形補正関数を前記対応する色領域内のデバイス非依存座標に対して適用すること、
を含む方法。 15. The method of claim 14, wherein
further,
Calculate a group of multiple piecewise linear correction functions, each corresponding to a different color region,
Applying each piecewise linear correction function in the group to device-independent coordinates in the corresponding color region;
Including methods.
プロセッサに、区分的線形補正関数を使用するデバイス非依存座標に対する選択的3刺激値補正を適用させるためのインストラクションを含み、
前記区分的線形補正関数が、
前記区分的線形補正関数の最大値が対応するデバイス依存色空間の境界条件において生じ、かつ、異なる境界条件または中立軸のいずれかに前記対応するデバイス依存色空間内の値が近づくに従って前記区分的線形補正関数がゼロまたは概略ゼロまで線形減少するように定義されるコンピュータアクセス可能メモリ。 Computer accessible memory,
Instructions for causing the processor to apply selective tristimulus correction to device independent coordinates using a piecewise linear correction function;
The piecewise linear correction function is
As the maximum value of the piecewise linear correction function occurs at a corresponding device dependent color space boundary condition and the value in the corresponding device dependent color space approaches either a different boundary condition or a neutral axis, the piecewise linear correction function A computer-accessible memory defined such that the linear correction function linearly decreases to zero or approximately zero.
さらに、前記プロセッサに対し、
各グループが出力デバイスに関連付けされたデバイス依存座標空間内の異なる色領域に対応する区分的線形補正関数のグループを生成させ、かつ、
前記対応する色領域内のデバイス非依存座標に対して区分的線形補正関数の各グループを適用して前記デバイス非依存座標に対する3刺激値補正を実行させるインストラクションを含み、
前記区分的線形補正関数のそれぞれが、
前記区分的線形補正関数のそれぞれの最大値が対応する前記デバイス依存色空間のそれぞれの境界条件において生じ、かつ異なるそれぞれの境界条件または前記中立軸のいずれかに前記対応するデバイス依存色空間内の値が近づくに従って、前記区分的線形補正関数がそれぞれゼロまたは概略ゼロまで線形減少するように定義されるコンピュータ読み出し可能メディア。 The computer-readable medium of claim 17.
Furthermore, for the processor,
Generating a group of piecewise linear correction functions, each group corresponding to a different color region in a device dependent coordinate space associated with the output device; and
Instructions for applying each group of piecewise linear correction functions to device-independent coordinates in the corresponding color region to perform tristimulus corrections on the device-independent coordinates;
Each of the piecewise linear correction functions is
Each maximum value of the piecewise linear correction function occurs at a respective boundary condition of the corresponding device-dependent color space, and within the corresponding device-dependent color space either at a different respective boundary condition or the neutral axis. A computer readable medium defined such that as the value approaches, the piecewise linear correction function decreases linearly to zero or approximately zero, respectively.
さらに、前記区分的線形補正関数を使用する前記デバイス非依存座標に対し前記選択的3刺激値補正を適用することで、色空間の調整を前記プロセッサに行わせるインストラクションを含むコンピュータ読み出し可能メディア。 The computer readable medium of claim 17.
A computer readable medium further comprising instructions that cause the processor to adjust color space by applying the selective tristimulus correction to the device independent coordinates using the piecewise linear correction function.
さらに、前記区分的線形補正関数を使用する前記デバイス非依存座標に対し前記選択的3刺激値補正を適用することで、RGBプロファイルの修正を前記プロセッサに行わせるインストラクションを含むコンピュータ読み出し可能メディア。 The computer readable medium of claim 17.
A computer readable medium further comprising instructions that cause the processor to modify the RGB profile by applying the selective tristimulus correction to the device independent coordinates using the piecewise linear correction function.
さらに、前記区分的線形補正関数を使用する前記デバイス非依存座標に対して前記選択的3刺激値補正を適用することによって、イメージの外見を前記プロセッサに調整させるコンピュータ読み出し可能メディア。 The computer readable medium of claim 17.
Further, a computer readable medium that causes the processor to adjust the appearance of an image by applying the selective tristimulus correction to the device independent coordinates using the piecewise linear correction function.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US65301105P | 2005-02-15 | 2005-02-15 | |
US11/311,581 US7710432B2 (en) | 2005-02-15 | 2005-12-14 | Color correction techniques for correcting color profiles or a device-independent color space |
PCT/US2006/004123 WO2006088683A1 (en) | 2005-02-15 | 2006-02-01 | Color correction techniques for correcting color profiles |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008530952A true JP2008530952A (en) | 2008-08-07 |
JP2008530952A5 JP2008530952A5 (en) | 2009-03-19 |
JP4633806B2 JP4633806B2 (en) | 2011-02-16 |
Family
ID=36463380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007556177A Expired - Fee Related JP4633806B2 (en) | 2005-02-15 | 2006-02-01 | Color correction techniques for color profiles |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP1856905A1 (en) |
JP (1) | JP4633806B2 (en) |
WO (1) | WO2006088683A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10229624B2 (en) | 2017-02-22 | 2019-03-12 | Mistubishi Electric Corporation | Method of adjusting white balance, white balance adjustment apparatus, and display device |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010083493A1 (en) * | 2009-01-19 | 2010-07-22 | Dolby Laboratories Licensing Corporation | Image processing and displaying methods for devices that implement color appearance models |
EP3002748A1 (en) * | 2014-10-01 | 2016-04-06 | Thomson Licensing | A method for calibrating colors of at least one display device, and corresponding display device, computer program product and computer-readable medium |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1307042A2 (en) * | 2001-10-29 | 2003-05-02 | Hewlett-Packard Company | Method and system for management of color through conversion between color spaces |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5363318A (en) * | 1992-03-23 | 1994-11-08 | Eastman Kodak Company | Method and apparatus for adaptive color characterization and calibration |
US5483360A (en) * | 1994-06-06 | 1996-01-09 | Xerox Corporation | Color printer calibration with blended look up tables |
US5594557A (en) * | 1994-10-03 | 1997-01-14 | Xerox Corporation | Color printer calibration correcting for local printer non-linearities |
US5754448A (en) * | 1995-07-12 | 1998-05-19 | Minnesota Mining And Manufacturing Company | System and method for color characterization and transformation |
US6075888A (en) * | 1996-01-11 | 2000-06-13 | Eastman Kodak Company | System for creating a device specific color profile |
US6766263B1 (en) * | 2000-04-26 | 2004-07-20 | Microsoft Corporation | Method of color capture calibration for digital capture devices |
-
2006
- 2006-02-01 JP JP2007556177A patent/JP4633806B2/en not_active Expired - Fee Related
- 2006-02-01 EP EP06720355A patent/EP1856905A1/en not_active Withdrawn
- 2006-02-01 WO PCT/US2006/004123 patent/WO2006088683A1/en active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1307042A2 (en) * | 2001-10-29 | 2003-05-02 | Hewlett-Packard Company | Method and system for management of color through conversion between color spaces |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10229624B2 (en) | 2017-02-22 | 2019-03-12 | Mistubishi Electric Corporation | Method of adjusting white balance, white balance adjustment apparatus, and display device |
Also Published As
Publication number | Publication date |
---|---|
WO2006088683A1 (en) | 2006-08-24 |
EP1856905A1 (en) | 2007-11-21 |
JP4633806B2 (en) | 2011-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7710432B2 (en) | Color correction techniques for correcting color profiles or a device-independent color space | |
US7554705B2 (en) | Color gamut mapping with black point compensation | |
US6340975B2 (en) | Gamut correction with color separation and methods and apparatuses for performing same | |
JP6005857B2 (en) | Method for converting data, display device, arithmetic device, and program incorporated therein, and method for optimizing coefficients, optimization device, and program incorporated therein | |
US20080117227A1 (en) | Method for mapping colors between imaging systems and method therefor | |
US7333136B2 (en) | Image processing apparatus for carrying out tone conversion processing and color correction processing using a three-dimensional look-up table | |
JP2008011293A (en) | Image processing apparatus and method, program, and recording medium | |
EP2421241B1 (en) | Print controlling terminal and color correction method | |
US8411944B2 (en) | Color processing apparatus and method thereof | |
KR20050098949A (en) | Image processing device, method, and program | |
EP2011326A2 (en) | Maintenance of accurate color performance of displays | |
US7733353B2 (en) | System and method for profiling digital-image input devices | |
JP4946908B2 (en) | Print control apparatus, print system, and print control program | |
JP4633806B2 (en) | Color correction techniques for color profiles | |
JP5025323B2 (en) | Color processing apparatus and method | |
US20080037041A1 (en) | Device, method, and program storage medium for color conversion, and for generating color conversion coefficients | |
JP4853296B2 (en) | Color conversion apparatus, color conversion method, color conversion program, color conversion coefficient creation apparatus, color conversion coefficient creation method, and color conversion coefficient creation program | |
US20100238300A1 (en) | Color control apparatus, method for creating color control system, and method for creating color reproduction apparatus | |
JP4300780B2 (en) | Color conversion coefficient creation method, color conversion coefficient creation apparatus, program, and storage medium | |
JP4881325B2 (en) | Profiling digital image input devices | |
JPWO2007083717A1 (en) | Color conversion matrix creation method and color conversion method | |
JP6665559B2 (en) | Calculation device and computer program | |
JP2010166202A (en) | Printing device, method for generating color conversion table for printing device, and method for manufacturing printing device | |
JP2005153282A (en) | Image processing device and method, storage medium and program | |
JP2007116288A (en) | Image processor, image processing method, and image processing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090128 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100601 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100827 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101102 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101117 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131126 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |