JP4315027B2 - Image background removal technology - Google Patents

Image background removal technology Download PDF

Info

Publication number
JP4315027B2
JP4315027B2 JP2004073985A JP2004073985A JP4315027B2 JP 4315027 B2 JP4315027 B2 JP 4315027B2 JP 2004073985 A JP2004073985 A JP 2004073985A JP 2004073985 A JP2004073985 A JP 2004073985A JP 4315027 B2 JP4315027 B2 JP 4315027B2
Authority
JP
Japan
Prior art keywords
color
value
color conversion
lookup table
conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004073985A
Other languages
Japanese (ja)
Other versions
JP2005268857A (en
Inventor
和美 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2004073985A priority Critical patent/JP4315027B2/en
Priority to US11/075,315 priority patent/US20050206927A1/en
Publication of JP2005268857A publication Critical patent/JP2005268857A/en
Application granted granted Critical
Publication of JP4315027B2 publication Critical patent/JP4315027B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

この発明は、画像に含まれる背景雑音を除去する技術に関する。   The present invention relates to a technique for removing background noise contained in an image.

スキャナ・プリンタ・コピー複合機やスキャナとプリンタと有する画像処理システム等でコピーを行う場合、スキャナで画像原稿を読み取ることにより取得した画像データをプリンタで出力する処理が行われる。   When copying with a scanner / printer / copy multifunction machine or an image processing system including a scanner and a printer, image data acquired by reading an image original with the scanner is output by the printer.

画像原稿は、通常、印刷媒体である紙の上に原画像を出力することにより作成される。紙の明度が十分に高くない場合、画像原稿をスキャナで読み取った画像データには、原画像を表す領域の背景に薄いグレーの色(以下、「背景雑音画像」と呼ぶ)がつく場合がある。そのため、スキャナで読み取った画像データをプリンタで出力すると、背景雑音画像のために、本来白色である紙の領域が白色とならない場合がある。このような背景雑音画像は、例えば、画像データ全体のコントラストやレベルを調整し背景雑音画像の色を白色にする画像処理により抑制することができる。なお、一般に、背景雑音画像を除去する画像処理は、「背景除去」と呼ばれる。   An image original is usually created by outputting an original image on paper as a printing medium. When the brightness of the paper is not sufficiently high, the image data obtained by reading the image original with the scanner may have a light gray color (hereinafter referred to as “background noise image”) in the background of the area representing the original image. . Therefore, when image data read by a scanner is output by a printer, a paper area that is originally white may not become white due to a background noise image. Such a background noise image can be suppressed by, for example, image processing that adjusts the contrast and level of the entire image data to make the color of the background noise image white. In general, the image processing for removing the background noise image is called “background removal”.

特開2000−253250号公報JP 2000-253250 A

しかしながら、画像データ全体のコントラストやレベルの調整により背景除去を行うと、背景雑音でない領域の色が画像処理により変化するため、背景雑音でない領域の画像が不自然な色で出力される可能性がある。   However, if the background is removed by adjusting the contrast or level of the entire image data, the color of the area that is not background noise changes due to image processing, so the image of the area that is not background noise may be output in an unnatural color. is there.

本発明は、上述した従来の課題を解決するためになされたものであり、背景雑音でない領域の色に対する影響を抑制しつつ背景除去を行う技術を提供することを目的とする。   The present invention has been made to solve the above-described conventional problems, and an object of the present invention is to provide a technique for performing background removal while suppressing the influence on the color of an area that is not background noise.

上記目的の少なくとも一部を達成するために、本発明の色変換装置は、入力画像データによって表される第1の表色系の色を、印刷に使用する複数のインクの量を表す第2の表色系の色に変換する色変換装置であって、前記第1の表色系の色成分値から前記第2の表色系の色成分値を生成する色変換ルックアップテーブルと、前記色変換ルックアップテーブルを参照することによって、前記第1の表色系の色成分値である入力値から前記第2の表色系の色成分値である出力値を生成する色変換部と、を備え、前記色変換部は、前記入力値によって表される色が無彩色を含む所定の範囲の色である場合に、前記出力値によって表される色の明度を高める高明度モードを有することを特徴とする。   In order to achieve at least a part of the above object, the color conversion apparatus of the present invention is a second device that represents the amount of a plurality of inks used for printing the first color system color represented by the input image data. A color conversion device that converts a color component value of the first color system from a color component value of the first color system, and a color conversion lookup table that generates a color component value of the second color system, A color conversion unit that generates an output value that is a color component value of the second color system from an input value that is a color component value of the first color system by referring to a color conversion lookup table; The color conversion unit has a high brightness mode for increasing the brightness of the color represented by the output value when the color represented by the input value is a color in a predetermined range including an achromatic color. It is characterized by.

この構成によれば、無彩色を含む所定の範囲の色をより明度が高い色として出力できるので、背景雑音の領域が明度が高い色として出力される。一方、無彩色を含む所定の範囲でない色の変化が抑制されるので、背景雑音でない領域の画像が不自然な色で出力されることを抑制することができる。そのため、背景雑音でない領域の色に対する影響を抑制しつつ背景除去を行うことができる。   According to this configuration, a predetermined range of colors including an achromatic color can be output as a color with higher brightness, so that the background noise region is output as a color with higher brightness. On the other hand, since a change in a color that is not within a predetermined range including an achromatic color is suppressed, it is possible to suppress an image in an area that is not background noise from being output in an unnatural color. Therefore, the background can be removed while suppressing the influence on the color of the region that is not background noise.

前記色変換部は、さらに、前記高明度モードにおける出力値によって表される色よりも明度が低い色を表す出力値を生成する基準モードを有するものとしてもよい。   The color conversion unit may further include a reference mode for generating an output value representing a color whose brightness is lower than a color represented by the output value in the high brightness mode.

この構成によれば、画像全体の色の変化を抑制できる。   According to this configuration, a change in the color of the entire image can be suppressed.

前記色変換部は、前記高明度モードにおいて、前記入力値によって表される色よりも明度が高い色を表す高明度入力値を生成し、前記高明度入力値を用いて前記色変換ルックアップテーブルを参照することによって前記明度が高い色を表す出力値を取得するものとしてもよい。   The color conversion unit generates a high lightness input value representing a color whose lightness is higher than a color represented by the input value in the high lightness mode, and uses the high lightness input value to generate the color conversion lookup table. It is also possible to obtain an output value representing a color with high brightness by referring to.

この構成によれば、異なるモードで同一の色変換ルックアップテーブルを使用できるので、色変換ルックアップテーブルの保持に必要な記憶容量が低減できる。   According to this configuration, since the same color conversion lookup table can be used in different modes, the storage capacity required to hold the color conversion lookup table can be reduced.

前記所定の範囲の色は、前記入力値によって表される色の明度が第1の閾値以上の色であるものとしてもよい。   The color in the predetermined range may be a color whose brightness represented by the input value is not less than a first threshold value.

この構成によれば、明度の低い領域の色の変化を抑制できる。   According to this configuration, it is possible to suppress the color change in the low brightness area.

前記色変換部は、前記高明度モードにおいて、さらに、前記入力値によって表される色の明度が、前記第1の閾値以下の値を有する第2の閾値以下である場合には、前記入力値によって表される色よりも明度が低い色を表す低明度入力値を生成し、前記低明度入力値を用いて前記色変換ルックアップテーブルを参照することによって明度が低い色を表す出力値を取得するものとしてもよい。   In the high brightness mode, the color conversion unit further includes the input value when the brightness of the color represented by the input value is equal to or less than a second threshold having a value equal to or less than the first threshold. A low lightness input value representing a color having a lower lightness than the color represented by is generated, and an output value representing a low lightness color is obtained by referring to the color conversion lookup table using the low lightness input value It is good also as what to do.

この構成によれば、明度の低い黒色の文字などの領域の色がより明度の低い色として出力されるので、出力画像の品質を高めることができる。   According to this configuration, the color of a region such as a black character with low brightness is output as a color with lower brightness, so that the quality of the output image can be improved.

前記色変換部は、前記高明度モードにおいて、前記入力値から前記色変換ルックアップテーブルを参照することによって取得される出力値を調整することにより前記明度が高い色を表す出力値を生成するものとしてもよい。   The color conversion unit generates an output value representing a color having a high lightness by adjusting an output value obtained by referring to the color conversion lookup table from the input value in the high lightness mode. It is good.

この構成によっても、背景雑音でない領域の色に対する影響を抑制しつつ背景除去を行うことができる。   Also with this configuration, it is possible to remove the background while suppressing the influence on the color of the region that is not background noise.

前記色変換装置は、さらに、前記第1の表色系の色成分値から前記第2の表色系の色成分値を生成する色変換原ルックアップテーブルと、前記所定の範囲の色を表す入力値に対する出力値の明度を高めるように前記色変換原ルックアップテーブルの出力値を修正することによって、前記色変換ルックアップテーブルを生成するルックアップテーブル生成部と、を備えるものとしてもよい。   The color conversion device further represents a color conversion source lookup table for generating the color component value of the second color system from the color component value of the first color system, and the color in the predetermined range. A lookup table generation unit that generates the color conversion lookup table by modifying the output value of the color conversion original lookup table so as to increase the brightness of the output value relative to the input value.

この構成によれば、生成された色変換ルックアップテーブルを使用できるので、画像の処理時間が短縮できる。   According to this configuration, since the generated color conversion lookup table can be used, the image processing time can be shortened.

前記所定の範囲の色は、前記入力値によって表される色の明度が第1の閾値以上の色であるものとしてもよい。   The color in the predetermined range may be a color whose brightness represented by the input value is not less than a first threshold value.

この構成によっても、明度の低い領域の色の変化を抑制できる。   Also with this configuration, it is possible to suppress the color change in the low brightness area.

前記ルックアップテーブル生成部は、前記高明度モードにおいて、さらに、前記入力値によって表される色の明度が、前記第1の閾値以下の値を有する第2の閾値以下の場合には、前記所定の範囲の色を表す入力値に対する出力値の明度を低くするように前記色変換原ルックアップテーブルの出力値を修正するものとしてもよい。   In the high brightness mode, the look-up table generation unit further includes the predetermined value when the brightness of the color represented by the input value is not more than a second threshold having a value not more than the first threshold. The output value of the color conversion source lookup table may be modified so that the brightness of the output value with respect to the input value representing the color in the range is reduced.

この構成によっても、画像のコントラストを高めることができる。   Also with this configuration, the contrast of the image can be increased.

なお、本発明は、種々の態様で実現することが可能であり、例えば、画像処理方法および画像処理装置、印刷方法および印刷装置、それらの方法または装置の機能を実現するためのコンピュータプログラム、そのコンピュータプログラムを記録した記録媒体、等の態様で実現することができる。   The present invention can be realized in various modes. For example, an image processing method and an image processing apparatus, a printing method and a printing apparatus, a computer program for realizing the functions of these methods or apparatuses, and the like The present invention can be realized in the form of a recording medium on which a computer program is recorded.

次に、本発明を実施するための最良の形態を実施例に基づいて以下の順序で説明する。
A.第1実施例:
B.第2実施例:
C.トーンカーブの変形例:
D.変形例:
Next, the best mode for carrying out the present invention will be described in the following order based on examples.
A. First embodiment:
B. Second embodiment:
C. Tone curve variations:
D. Variations:

A.第1実施例:
図1は、本発明の一実施例としてのスキャナプリンタコピー複合機100(以下、「SPC100」と呼ぶ)の構成を示す説明図である。SPC100は、スキャナユニット110と、プリンタユニット130と、スキャナユニット110とプリンタユニット130とを制御する制御ユニット120とを備えている。
A. First embodiment:
FIG. 1 is an explanatory diagram showing a configuration of a scanner printer copier 100 (hereinafter referred to as “SPC 100”) as an embodiment of the present invention. The SPC 100 includes a scanner unit 110, a printer unit 130, and a control unit 120 that controls the scanner unit 110 and the printer unit 130.

スキャナユニット110は、画像原稿に光を照射するための光源と、画像原稿からの反射光の強度を電気信号に変換するCCDとを備えている。CCDの出力信号は、A/D変換器によりデジタル信号に変換され、これによって原画像データが生成される。   The scanner unit 110 includes a light source for irradiating the image original with light and a CCD for converting the intensity of reflected light from the image original into an electric signal. The output signal of the CCD is converted into a digital signal by an A / D converter, thereby generating original image data.

プリンタユニット130は、複数色のインクを紙などの印刷媒体に吐出して画像を形成するインクジェットプリンタである。プリンタユニット130は、制御ユニット120から供給される印刷データに従ってインクを印刷媒体上に吐出する。印刷媒体上には、吐出されるインクの量に応じた色の点(インクドット)が形成されることによりカラー画像が形成される。   The printer unit 130 is an ink jet printer that forms an image by discharging a plurality of colors of ink onto a printing medium such as paper. The printer unit 130 ejects ink onto the print medium according to the print data supplied from the control unit 120. On the print medium, a color image is formed by forming dots (ink dots) of a color corresponding to the amount of ejected ink.

制御ユニット120は、制御実行部200と、操作パネル300と、外部のコンピュータとのインターフェースであるI/F部310とを備えている。制御実行部200は、CPU,ROM,RAMなどを備えるマイクロコンピュータとして構成されている。制御実行部200は、画像データ取得部210と、印刷データ生成部220とを備えている。これらの各部210,220の機能は、ROMに記録されたコンピュータプログラムがCPUにより実行されることにより実現される。   The control unit 120 includes a control execution unit 200, an operation panel 300, and an I / F unit 310 that is an interface with an external computer. The control execution unit 200 is configured as a microcomputer including a CPU, ROM, RAM, and the like. The control execution unit 200 includes an image data acquisition unit 210 and a print data generation unit 220. The functions of these units 210 and 220 are realized by a computer program recorded in the ROM being executed by the CPU.

画像データ取得部210は、スキャナユニット110から供給される原画像データの画像処理を行うことにより、RGB表色系で表される画像データ(RGB画像データ)を生成する。生成されたRGB画像データは、SPC100の動作モードに応じて、印刷データ生成部220もしくはI/F部310に供給される。   The image data acquisition unit 210 performs image processing on the original image data supplied from the scanner unit 110, thereby generating image data (RGB image data) represented in the RGB color system. The generated RGB image data is supplied to the print data generation unit 220 or the I / F unit 310 according to the operation mode of the SPC 100.

印刷データ生成部220には、SPC100の動作モードに応じて、画像データ取得部210もしくはI/F部310からRGB画像データが供給される。印刷データ生成部220は、供給されるRGB画像データに従って、プリンタユニット130での印刷に用いられる複数色のインク毎のインク量を表す印刷データを生成する。この印刷データは、インク量に対応する表色系で表される画像データということができる。   The print data generation unit 220 is supplied with RGB image data from the image data acquisition unit 210 or the I / F unit 310 according to the operation mode of the SPC 100. The print data generation unit 220 generates print data representing ink amounts for each of a plurality of colors used for printing in the printer unit 130 in accordance with the supplied RGB image data. This print data can be said to be image data expressed in a color system corresponding to the ink amount.

操作パネル300は、ユーザからの入力を取得する操作ボタンと、SPC100の動作モードや設定値等を表示するための表示装置とを備えている。ユーザは、表示装置に表示される設定内容を見ながら操作ボタンを押すことによりSPC100の動作モードや設定値を変更することができる。   The operation panel 300 includes an operation button for acquiring an input from a user, and a display device for displaying an operation mode, a set value, and the like of the SPC 100. The user can change the operation mode and setting value of the SPC 100 by pressing the operation button while viewing the setting content displayed on the display device.

図2は、操作パネル300の操作によるSPC100の設定の様子を示す説明図である。操作パネル300は、コピーボタンCBやスタートボタンSBなどの操作ボタンと、表示装置DPとを備えている。   FIG. 2 is an explanatory diagram showing how the SPC 100 is set by operating the operation panel 300. The operation panel 300 includes operation buttons such as a copy button CB and a start button SB, and a display device DP.

図2(a)は、ユーザによってコピーボタンCBが押され、SPC100の動作モードとしてコピーモードが選択されている様子を示している。表示装置DPには、コピーモードにおける各種設定の変更が可能であることを示す「コピー設定」の文字と、「コピー」,「枚数」,「倍率」等の設定項目と、各設定項目の設定値とが表示される。   FIG. 2A shows that the copy button CB is pressed by the user and the copy mode is selected as the operation mode of the SPC 100. In the display device DP, characters of “copy setting” indicating that various settings in the copy mode can be changed, setting items such as “copy”, “number of sheets”, “magnification”, and setting of each setting item The value is displayed.

図2(b)は、ユーザによってメニューボタンMBが押され、コピーモードの設定変更が行われる様子を示している。メニューボタンMBが押されることにより、変更される設定値の左右にその設定値が変更可能であることを示す三角形が表示される。変更する設定項目は、選択ボタンXBの上下を押すことにより選択される。選択された設定項目の設定値は、ユーザが選択ボタンXBの左右を押すことにより変更される。   FIG. 2B shows a state where the menu button MB is pressed by the user and the copy mode setting is changed. When the menu button MB is pressed, a triangle indicating that the setting value can be changed is displayed on the left and right of the setting value to be changed. The setting item to be changed is selected by pressing the selection button XB up or down. The setting value of the selected setting item is changed by the user pressing the left or right of the selection button XB.

図2(c)は、コピーモードの設定項目のうちコピーの種類である「コピー」の設定が変更される様子を示している。図2(c)の例では、「コピー」モードの設定値が「写真」モードから「背景すっきり」モードに変更されている。このように各設定項目の設定値が変更された後、ユーザによってOKボタンOBが押されると、変更された設定値は制御実行部200(図1)に供給される。制御実行部200は、供給された設定値をRAM等の一時記憶装置に格納する。   FIG. 2C shows how the setting of “copy”, which is the type of copy, is changed among the setting items of the copy mode. In the example of FIG. 2C, the setting value of the “copy” mode is changed from the “photo” mode to the “clear background” mode. After the setting value of each setting item is changed in this way, when the user presses the OK button OB, the changed setting value is supplied to the control execution unit 200 (FIG. 1). The control execution unit 200 stores the supplied setting value in a temporary storage device such as a RAM.

コピーの実行は、ユーザによるスタートボタンSBの押下によって開始される。スタートボタンSBが押されると、画像データ取得部210(図1)はスキャナユニット110(図1)の原稿台に置かれた画像原稿の画像を表すRGB画像データを取得する。取得されたRGB画像データは、印刷データ生成部220によって印刷データに変換され、プリンタユニット130に供給される。   Execution of copying is started by the user pressing the start button SB. When the start button SB is pressed, the image data acquisition unit 210 (FIG. 1) acquires RGB image data representing the image of the image document placed on the document table of the scanner unit 110 (FIG. 1). The acquired RGB image data is converted into print data by the print data generation unit 220 and supplied to the printer unit 130.

図3は、第1実施例における印刷データ生成部220の構成を示すブロック図である。印刷データ生成部220は、解像度変換部222と、色変換部224と、ハーフトーン処理部226と、データ配列部228と、ルックアップテーブル選択部230と、複数の色変換ルックアップテーブル232とを備えている。   FIG. 3 is a block diagram illustrating a configuration of the print data generation unit 220 in the first embodiment. The print data generation unit 220 includes a resolution conversion unit 222, a color conversion unit 224, a halftone processing unit 226, a data arrangement unit 228, a lookup table selection unit 230, and a plurality of color conversion lookup tables 232. I have.

解像度変換部222は、入力されたRGB画像データR,G,Bの解像度を印刷解像度に変換する。解像度変換部222から出力される印刷解像度の画像データR’,G’,B’は、各画素の色がRGB値で表される画像データである。すなわち、印刷解像度画像データR’,G’,B’は、RGB表色系で表される画像データである。   The resolution conversion unit 222 converts the resolution of the input RGB image data R, G, and B into a printing resolution. The print resolution image data R ′, G ′, and B ′ output from the resolution converter 222 is image data in which the color of each pixel is represented by an RGB value. That is, the print resolution image data R ′, G ′, and B ′ are image data represented by the RGB color system.

色変換部224は、色調整部240を備えている。色調整部240には、制御実行部200(図1)に格納された各種パラメータに従って決定される色調整設定値が供給される。色調整部240は、図2(c)の例のように「コピー」モードが「背景すっきり」モードに設定されている場合、供給された色調整設定値に基づいて印刷解像度画像データR’G’B’から内部画像データrgbを生成する。なお、色調整による印刷解像度画像データR’G’B’から内部画像データrgbへの変換については、後述する。一方、「コピー」モードが画像原稿の色をより正確に再現するための「写真」モードに設定されている場合、色調整部240による色調整は行われない。   The color conversion unit 224 includes a color adjustment unit 240. The color adjustment unit 240 is supplied with color adjustment setting values determined according to various parameters stored in the control execution unit 200 (FIG. 1). When the “copy” mode is set to the “clear background” mode as in the example of FIG. 2C, the color adjustment unit 240 prints the print resolution image data R′G based on the supplied color adjustment setting value. Internal image data rgb is generated from 'B'. The conversion from the print resolution image data R′G′B ′ to the internal image data rgb by color adjustment will be described later. On the other hand, when the “copy” mode is set to the “photo” mode for reproducing the color of the image original more accurately, the color adjustment by the color adjusting unit 240 is not performed.

色変換部224は、1つの色変換ルックアップテーブル232を用いて内部画像データrgbをインク量データCMYKに変換する。この色変換部224によって行われる一連の処理は、RGB表色系で表される印刷解像度画像データR’G’B’またはrgbをCMYK表色系で表される画像データCMYKに変換する処理に相当する。   The color conversion unit 224 converts the internal image data rgb into ink amount data CMYK using one color conversion lookup table 232. A series of processes performed by the color conversion unit 224 is a process of converting the print resolution image data R′G′B ′ or rgb represented by the RGB color system into image data CMYK represented by the CMYK color system. Equivalent to.

複数の印刷モードのそれぞれに適した複数の色変換ルックアップテーブル232は、制御実行部200(図1)が備えるROMに格納されている。ルックアップテーブル選択部230は、これらの複数の色変換ルックアップテーブル232の中から、実際の印刷時に使用される印刷モードに適した1つのテーブルを選択する。色変換部224は、この選択されたテーブルを使用して色変換を実行する。なお、本実施例では、色変換ルックアップテーブル232は、印刷媒体と、印刷解像度と、の2つのパラメータに応じて選択される。   A plurality of color conversion lookup tables 232 suitable for each of a plurality of printing modes are stored in a ROM provided in the control execution unit 200 (FIG. 1). The look-up table selection unit 230 selects one table suitable for the print mode used at the time of actual printing from among the plurality of color conversion look-up tables 232. The color conversion unit 224 performs color conversion using the selected table. In the present embodiment, the color conversion lookup table 232 is selected according to two parameters of the print medium and the print resolution.

色変換ルックアップテーブル232は、色変換部224に入力されるRGB値の特定の値である入力点に対応したインク量CMYKを出力する。色変換部224は、入力されるRGB値に対して、必要に応じて補間演算を行うことによりRGB値からインク量CMYKを出力する。なお、色変換ルックアップテーブル232の入力点は、RGBの各成分値の範囲に一定間隔で設定されることが多く、このような入力点は格子点とも呼ばれる。   The color conversion lookup table 232 outputs ink amounts CMYK corresponding to input points that are specific values of RGB values input to the color conversion unit 224. The color conversion unit 224 outputs an ink amount CMYK from the RGB values by performing an interpolation operation on the input RGB values as necessary. The input points of the color conversion lookup table 232 are often set at regular intervals in the range of the RGB component values, and such input points are also called grid points.

ハーフトーン処理部226は、各インク毎にハーフトーン処理を実行することによって、印刷画素毎にドットの形成状態を示すドット形成データDc,Dm,Dy,Dkを生成する。データ配列部228は、これらのドット形成データDc,Dm,Dy,Dkを配列し、印刷データPDとして出力する。   The halftone processing unit 226 generates dot formation data Dc, Dm, Dy, and Dk indicating the dot formation state for each print pixel by executing halftone processing for each ink. The data arrangement unit 228 arranges these dot formation data Dc, Dm, Dy, Dk and outputs them as print data PD.

図4は、色調整部240による内部画像データrgbの生成手順を示すフローチャートである。また、図5は、色調整処理の結果を示す説明図である。図4のルーチンでは、印刷解像度画像データR’G’B’の各画素を順次解析し(以下、このときの解析対象の画素を「注目画素」と呼ぶ)、注目画素の色を調整することにより内部画像データrgbを生成する。   FIG. 4 is a flowchart showing a procedure for generating the internal image data rgb by the color adjustment unit 240. FIG. 5 is an explanatory diagram showing the result of the color adjustment process. In the routine of FIG. 4, each pixel of the print resolution image data R′G′B ′ is sequentially analyzed (hereinafter, the pixel to be analyzed at this time is referred to as “target pixel”), and the color of the target pixel is adjusted. To generate internal image data rgb.

図5(a)は、色調整部240に供給される印刷解像度画像データGD1を示している。この画像データGD1は、スキャナユニット110によって黒色の文字(画像データGD1の黒色文字LTRに相当する)と写真(画像データGD1の写真PHTに相当する)とを含む画像原稿を読み取ることにより生成された印刷解像度画像データである。画像データGD1には、画像原稿に含まれる画像である黒色文字LTRと写真PHTとの他に、紙の色(地色)を表す背景雑音画像PCLが含まれている。   FIG. 5A shows print resolution image data GD1 supplied to the color adjustment unit 240. The image data GD1 is generated by reading an image original including black characters (corresponding to the black characters LTR of the image data GD1) and photographs (corresponding to the photographs PHT of the image data GD1) by the scanner unit 110. Print resolution image data. The image data GD1 includes a background noise image PCL representing the color of the paper (ground color) in addition to the black characters LTR and the photograph PHT which are images included in the image original.

ステップS100において、色調整部240は、注目画素の色情報であるRGB値を取得する。ステップS102において、色調整部240は、取得されたRGB値から彩度値Sを算出する。なお、彩度値Sは、例えば、以下の式(1)ないし(3)を用いて求められる。   In step S100, the color adjustment unit 240 acquires an RGB value that is color information of the target pixel. In step S102, the color adjustment unit 240 calculates a saturation value S from the acquired RGB values. The saturation value S is obtained using, for example, the following formulas (1) to (3).

1=0.7×R−0.59×G−0.11×B …(1)
2=−0.3×R−0.59×G+0.89×B …(2)
S=(C1 2+C2 21/2 …(3)
C 1 = 0.7 × R−0.59 × G−0.11 × B (1)
C 2 = −0.3 × R−0.59 × G + 0.89 × B (2)
S = (C 1 2 + C 2 2 ) 1/2 (3)

なお、本実施例では、彩度値Sは、式(1)ないし(3)に従った演算によって求められているが、これに代えて、RGB値に対応する彩度値Sとを有するテーブルを用いて求めるものとしてもよい。   In this embodiment, the saturation value S is obtained by calculation according to the equations (1) to (3). Instead, a table having saturation values S corresponding to RGB values. It is good also as what is calculated | required using.

ステップS104において、色調整部240は、注目画素の彩度値Sが所定の彩度閾値St以下であるかを判断する。注目画素の彩度値Sが彩度閾値St以下、すなわち注目画素の色が無彩色を含む所定の範囲の色である場合、制御はステップS106に移される。一方、注目画素の彩度値Sが彩度閾値Stよりも大きい場合、制御はステップS108に移されるので、注目画素の色は変更されない。図5の例では、画像データGD1のうち写真の領域であるPHTは、彩度値Sが彩度閾値Stより大きいので色変更されない。   In step S104, the color adjustment unit 240 determines whether the saturation value S of the target pixel is equal to or less than a predetermined saturation threshold St. If the saturation value S of the target pixel is equal to or less than the saturation threshold St, that is, if the color of the target pixel is in a predetermined range including an achromatic color, control is transferred to step S106. On the other hand, when the saturation value S of the target pixel is larger than the saturation threshold value St, control is transferred to step S108, and the color of the target pixel is not changed. In the example of FIG. 5, the color of the PHT, which is a photograph area in the image data GD1, is not changed because the saturation value S is greater than the saturation threshold St.

なお、この彩度閾値Stは、例えば、色見本のように異なる色の領域を有するテストチャートを画像原稿として読み取った場合に画像データ取得部210が出力するRGB画像データ(色見本画像データ)に基づいて決定することができる。具体的には、色見本画像データを階調変換(後述する)した場合に、色相の変化が許容できる色の領域を決定し、その領域の色を表すRGB値から算出される彩度値Sを彩度閾値Stとすることができる。   The saturation threshold value St is, for example, the RGB image data (color sample image data) output from the image data acquisition unit 210 when a test chart having a different color area such as a color sample is read as an image original. Can be determined based on. Specifically, when tone conversion is performed on the color sample image data (described later), a color region in which a hue change is allowed is determined, and a saturation value S calculated from RGB values representing the color of the region. Can be set as the saturation threshold St.

彩度閾値Stは、例えば、上述のように求められた値を制御実行部200が備えるROMもしくは不揮発性のRAMに格納しておき、必要に応じて読み出すことにより取得することができる。また、テストチャートを用いて、ユーザが必要に応じて設定するものとしてもよい。   The saturation threshold value St can be obtained, for example, by storing the value obtained as described above in a ROM or a non-volatile RAM included in the control execution unit 200 and reading it out as necessary. Moreover, it is good also as what a user sets as needed using a test chart.

ステップS106において、色調整部240は、注目画素のRGBの3つの色成分値をそれぞれ書き換えることにより注目画素の色の調整を行う。注目画素の色調整は、色調整部240がRGB各色成分値を階調変換特性(トーンカーブ)に従って補正する階調変換により行われる。   In step S106, the color adjusting unit 240 adjusts the color of the target pixel by rewriting the three color component values of RGB of the target pixel. The color adjustment of the pixel of interest is performed by gradation conversion in which the color adjustment unit 240 corrects each RGB color component value according to gradation conversion characteristics (tone curve).

図6は、第1実施例において注目画素の色調整に使用されるトーンカーブTCである。図6の横軸は色成分の入力値(入力色成分値IX)を示しており、図6の縦軸は入力色成分値IXに階調変換を行ったときの色成分の出力値(出力色成分値OX)を示している。このトーンカーブTCは、中間基準値IMとハイライト基準値IHとを用いて、以下の式(4)ないし(6)によって表される。なお、図6の破線SCは、色調整を行わない(OX=IX)場合の基準トーンカーブを示している。 FIG. 6 is a tone curve TC used for color adjustment of the target pixel in the first embodiment. The horizontal axis of FIG. 6 indicates the input value of the color component (input color component value I X ), and the vertical axis of FIG. 6 indicates the output value of the color component when gradation conversion is performed on the input color component value I X. (Output color component value O x ). The tone curve TC is expressed by the following equations (4) to (6) using the intermediate reference value I M and the highlight reference value I H. A broken line SC in FIG. 6 indicates a reference tone curve when color adjustment is not performed (O X = I X ).

X=IX 0≦IX<IM …(4)
X=Δ(IX−IM)+IMM≦IX<IH …(5)
但し、 Δ=(255−IM)/(IH−IM
X=255 IH≦IX≦255 …(6)
O X = I X 0 ≦ I X <I M (4)
O X = Δ (I X −I M ) + I M I M ≦ I X <I H (5)
However, Δ = (255−I M ) / (I H −I M )
O X = 255 I H ≦ I X ≦ 255 (6)

このように、トーンカーブTCでは、入力色成分値IXが中間基準値IMより小さい場合、出力色成分値OXとしては、入力色成分値IXと同じ値(OX=IX)が出力される。一方、入力色成分値IXが中間基準値IMとハイライト基準値IHとの間の範囲である場合、トーンカーブの傾きΔが1より大きいので、出力色成分値OXとしては入力色成分値IXよりも大きい値が出力される。そして、入力色成分値IXがハイライト基準値IH以上の場合、出力色成分値OXとしては、出力色成分値OXの最大値(255)が出力される。 Thus, in the tone curve TC, when the input color component value I X is smaller than the intermediate reference value I M , the output color component value O X is the same value as the input color component value I X (O X = I X ). Is output. On the other hand, when the input color component value I X is in the range between the intermediate reference value I M and the highlight reference value I H , the tone curve slope Δ is larger than 1, so that the output color component value O X is input. A value larger than the color component value I X is output. When the input color component value I X is equal to or higher than the highlight reference value I H , the maximum value (255) of the output color component value O X is output as the output color component value O X.

図6のトーンカーブTCは、中間基準値IMが127であり、ハイライト基準値IHが230であるものとして描かれているが、これらの中間基準値IMとハイライト基準値IHとは、背景雑音画像PCLの色が白色に変換されるような適当な値に設定できる。このような中間基準値IMとハイライト基準値IHは、例えば、白紙を読み取った場合に画像データ取得部210が出力するRGB画像データ(白紙画像データ)に基づいて決定することができる。具体的には、白紙画像データのRGB値の最小値より若干小さめの値をハイライト基準値IHに設定し、トーンカーブの傾きΔが所定の値(例えば、1.5)を超えないように中間基準値IMが設定される。 The tone curve TC of FIG. 6 is depicted as having an intermediate reference value I M of 127 and a highlight reference value I H of 230. These intermediate reference value I M and highlight reference value I H Can be set to an appropriate value such that the color of the background noise image PCL is converted to white. Such intermediate reference value I M and highlight reference value I H can be determined based on, for example, RGB image data (blank image data) output by the image data acquisition unit 210 when a blank sheet is read. Specifically, a value slightly smaller than the minimum RGB value of the blank image data is set as the highlight reference value I H so that the slope Δ of the tone curve does not exceed a predetermined value (for example, 1.5). Is set to the intermediate reference value I M.

これらの基準値IM,IHは、彩度閾値Stと同様に、所定の値を制御実行部200が備えるROMもしくは不揮発性のRAMに格納しておき、必要に応じて読み出すことにより取得することができる。また、ユーザが必要に応じてこれらの基準値IM,IHの設定を変更できるようにしてもよい。 These reference values I M and I H are acquired by storing predetermined values in the ROM or non-volatile RAM included in the control execution unit 200 and reading them out as necessary, as with the saturation threshold value St. be able to. The user may be able to change the settings of these reference values I M and I H as necessary.

注目画素のRGB各成分値が中間基準値IMより大きい(明度が高い)場合、トーンカーブTCを用いて階調変換を行うことにより、注目画素の色は明度がより高い色に変更される。特に、注目画素のRGBの各色成分値がそれぞれハイライト基準値IHよりも大きい場合には、注目画素の色は白色(R=G=B=255)に変更される。一方、注目画素の明度が低い場合、注目画素の色成分値は変化しないので、注目画素の色は変更されない。このように、注目画素の色の明度が所定の閾値(R=G=B=IM)より高い場合、トーンカーブTCによる階調変換により注目画素の色の明度は高くなる。 If RGB component values of the pixel of interest is greater than the intermediate reference value I M (high brightness), by performing tone conversion using the tone curve TC, the color of the target pixel is changed to a higher color brightness . In particular, when the RGB color component values of the target pixel are larger than the highlight reference value I H , the color of the target pixel is changed to white (R = G = B = 255). On the other hand, when the brightness of the pixel of interest is low, the color component value of the pixel of interest does not change, so the color of the pixel of interest is not changed. Thus, when the lightness of the color of the target pixel is higher than a predetermined threshold (R = G = B = I M ), the lightness of the color of the target pixel is increased by tone conversion using the tone curve TC.

図5の例では、彩度値Sが彩度閾値St以下の画像データGD1の画像PCL,LTRのうち、背景雑音画像PCLは明度の高い画像となる。そのため、背景雑音画像PCLは明度がより高くなるように色調整される。背景雑音画像PCLは、ハイライト基準値IHが上述のように設定されているので、図5(b)に示されるように白色の画像PCLaに変換される。これに対し、黒色文字LTRは明度が低いので色変更は行われず、色調整の前後で同一の画像LTRとなる。 In the example of FIG. 5, among the images PCL and LTR of the image data GD1 whose saturation value S is equal to or less than the saturation threshold St, the background noise image PCL is an image with high brightness. Therefore, the background noise image PCL is color-adjusted so that the brightness is higher. The background noise image PCL is converted into a white image PCLa as shown in FIG. 5B because the highlight reference value I H is set as described above. On the other hand, since the black character LTR has low brightness, the color is not changed, and the same image LTR is obtained before and after the color adjustment.

ステップS108において、色調整部240は、印刷解像度画像データR’G’B’の全ての画素の色調整処理が完了したか否かを判断する。全ての画素の色調整が完了したと判断された場合、この色調整ルーチンは終了する。一方、色調整処理が行われていない画素がある場合、注目画素は未処理の画素に設定され、制御はステップS100に戻される。そして、色調整部240は、全ての画素の色調整が完了するまで、ステップS100からS108を繰り返し実行する。   In step S <b> 108, the color adjustment unit 240 determines whether or not the color adjustment processing for all pixels of the print resolution image data R′G′B ′ has been completed. When it is determined that the color adjustment for all the pixels has been completed, this color adjustment routine ends. On the other hand, if there is a pixel that has not been subjected to color adjustment processing, the target pixel is set as an unprocessed pixel, and control returns to step S100. Then, the color adjustment unit 240 repeatedly executes steps S100 to S108 until the color adjustment of all pixels is completed.

このように、色調整部240は、印刷解像度画像データR’G’B’のうち、写真のように彩度の高い領域と文字のように明度の低い領域との画素の色を変更しない。そのため、内部画像データrgbでのこれらの領域は、印刷解像度画像データR’G’B’と同一の画像となる。一方、彩度が低く明度が高い地色の領域は色調整により白色となるので、地色の領域の画像は内部画像データrgbに現れない。   In this way, the color adjustment unit 240 does not change the color of the pixels of the high-saturation region like a photograph and the low-lightness region like a character in the print resolution image data R′G′B ′. Therefore, these areas in the internal image data rgb are the same image as the print resolution image data R′G′B ′. On the other hand, since the ground color region with low saturation and high lightness becomes white by color adjustment, the image of the ground color region does not appear in the internal image data rgb.

第1実施例の色変換部224は、色調整部240により生成された内部画像データrgbの色変換を行うので、印刷解像度画像データR’G’B’の地色の領域に対して白色(C=M=Y=K=0)を表すインク量データCMYKを出力する。一方、写真や文字などの領域の色は色調整部240によって変更されないので、これらの領域に対して印刷に適したインク量データCMYKを出力する。そのため、写真や文字の色の変化を抑制しつつ紙の色をインク量が0の白色として出力することができるので、画像原稿を読み取ることにより生成された入力画像を出力する際の出力画像の品質が改善される。   Since the color conversion unit 224 of the first embodiment performs color conversion of the internal image data rgb generated by the color adjustment unit 240, the color conversion unit 224 is white (with respect to the ground color region of the print resolution image data R′G′B ′). Ink amount data CMYK representing C = M = Y = K = 0) is output. On the other hand, since the colors of areas such as photographs and characters are not changed by the color adjustment unit 240, ink amount data CMYK suitable for printing is output to these areas. As a result, the color of the paper can be output as white with an ink amount of 0 while suppressing changes in the color of photographs and characters, so that the output image when the input image generated by reading the image original is output. Quality is improved.

また、第1実施例の色変換部224では、色調整部240による色調整を行うことにより、色調整を行わないモード(「写真」モード)で使用される色変換ルックアップテーブル232と同一の色変換ルックアップテーブル232を色調整を行うモード(「背景すっきり」モード)で使用することができる。そのため、複数の色変換ルックアップテーブル232をモード毎に用意する必要がなくなるので、SPC100に搭載する記憶装置の容量を低減することができる。   In the color conversion unit 224 of the first embodiment, the color adjustment by the color adjustment unit 240 is the same as the color conversion lookup table 232 used in the mode in which color adjustment is not performed (“photo” mode). The color conversion lookup table 232 can be used in a color adjustment mode (“background refresh” mode). Therefore, it is not necessary to prepare a plurality of color conversion lookup tables 232 for each mode, so that the capacity of the storage device mounted on the SPC 100 can be reduced.

B.第2実施例:
図7は、第2実施例における印刷データ生成部220aの構成を示すブロック図である。第2実施例の印刷データ生成部220aは、ルックアップテーブル選択部230(図3)と色調整部240(図3)とに換えてルックアップテーブル生成部242を備えている点で第1実施例と異なっている。ルックアップテーブル生成部242は、複数の色変換原ルックアップテーブル232aの中から、実際の印刷時に使用される印刷モードに適した1つのテーブルを選択する。ルックアップテーブル生成部242は、選択された色変換原ルックアップテーブル232aから色変換部224aに供給される色変換ルックアップテーブルLUTを生成する。なお、色変換ルックアップテーブルLUTの生成については、後述する。色変換部224aは、ルックアップテーブル生成部242によって生成された色変換ルックアップテーブルLUTを用いて印刷解像度画像データR’G’B’をインク量データCMYKに変換する。他の構成については第1実施例とほぼ同一である。
B. Second embodiment:
FIG. 7 is a block diagram showing the configuration of the print data generation unit 220a in the second embodiment. The print data generation unit 220a according to the second embodiment is provided with a lookup table generation unit 242 in place of the lookup table selection unit 230 (FIG. 3) and the color adjustment unit 240 (FIG. 3). It is different from the example. The lookup table generation unit 242 selects one table suitable for the print mode used at the time of actual printing from the plurality of color conversion source lookup tables 232a. The lookup table generation unit 242 generates a color conversion lookup table LUT supplied from the selected color conversion source lookup table 232a to the color conversion unit 224a. The generation of the color conversion lookup table LUT will be described later. The color conversion unit 224a converts the print resolution image data R′G′B ′ into ink amount data CMYK using the color conversion lookup table LUT generated by the lookup table generation unit 242. Other configurations are almost the same as those of the first embodiment.

ルックアップテーブル生成部242による色変換ルックアップテーブルLUTの生成は、図2(c)の例のように「コピー」モードの設定値が「背景すっきり」モードに変更された場合に実行される。一方、「コピー」モードの設定値が変更されず「写真」モードのままとなっている場合、色変換部224aは、複数の色変換原ルックアップテーブル232aの中から選択された1つのテーブルを用いて印刷解像度画像データR’G’B’をインク量データCMYKに変換する。   The color conversion lookup table LUT is generated by the lookup table generation unit 242 when the set value of the “copy” mode is changed to the “clear background” mode as in the example of FIG. On the other hand, when the setting value of the “copy” mode is not changed and remains in the “photo” mode, the color conversion unit 224a selects one table selected from the plurality of color conversion original lookup tables 232a. The print resolution image data R′G′B ′ is converted into ink amount data CMYK.

図8は、第2実施例におけるルックアップテーブル生成部242による色変換ルックアップテーブルLUTの生成手順を示すフローチャートである。図8のルーチンでは、色変換ルックアップテーブルLUTの各格子点を順次解析し(以下、このときの解析対象の格子点を「注目格子点」と呼ぶ)、注目格子点に色変換原ルックアップテーブル232aと色調整設定値とに従って決定されるインク量データ(以下、「色変換値」とも呼ぶ)を設定する。   FIG. 8 is a flowchart showing a procedure for generating a color conversion lookup table LUT by the lookup table generator 242 in the second embodiment. In the routine of FIG. 8, each grid point of the color conversion lookup table LUT is sequentially analyzed (the grid point to be analyzed at this time is referred to as “target grid point”), and the color conversion source lookup is performed on the target grid point. Ink amount data (hereinafter also referred to as “color conversion value”) determined according to the table 232a and the color adjustment setting value is set.

図9は、第2実施例における色変換ルックアップテーブルLUTの生成処理の様子を示す説明図である。なお、格子点P1〜P5に付された括弧中の数値は、各格子点P1〜P5のRGB表色系での色成分値を表している。   FIG. 9 is an explanatory diagram showing a state of the process of generating the color conversion lookup table LUT in the second embodiment. The numerical values in parentheses attached to the grid points P1 to P5 represent the color component values in the RGB color system of the grid points P1 to P5.

ステップS200において、ルックアップテーブル生成部242は、注目格子点の色情報であるRGB値を取得する。ステップS202において、ルックアップテーブル生成部242は、取得されたRGB値R,G,Bから注目格子点と無彩色を表すグレー軸GRYとの距離を表す変位量Dを算出する。なお、変位量Dは、例えば、注目格子点のRGB値R,G,Bと注目格子点に最も近いグレー軸GRY上の格子点のRGB値R0,G0,B0とを用いて、以下の式(7)により算出することができる。 In step S <b> 200, the lookup table generation unit 242 acquires RGB values that are color information of the target lattice point. In step S202, the lookup table generation unit 242 calculates a displacement amount D that represents the distance between the target grid point and the gray axis GRY that represents the achromatic color from the acquired RGB values R, G, and B. Note that the displacement amount D is obtained by using, for example, the RGB values R, G, B of the target lattice point and the RGB values R 0 , G 0 , B 0 of the lattice point on the gray axis GRY closest to the target lattice point. It can be calculated by the following equation (7).

D=max(|R−R0|,|G−G0|,|B−B0|) …(7) D = max (| R−R 0 |, | G−G 0 |, | B−B 0 |) (7)

ステップS204において、ルックアップテーブル生成部242は、注目格子点の変位量Dが所定の変位量閾値Dt以下であるかを判断する。注目格子点の変位量Dが変位量閾値Dt以下、すなわち注目格子点の色が無彩色を含む所定の範囲内の色である場合、制御はステップS206に移される。一方、注目格子点の変位量Dが変位量閾値Dtよりも大きい場合、制御はステップS208に移される。図9では、丸で表された格子点が変位量Dが変位量閾値Dt以下の格子点となっている。このうち、白丸はグレー軸GRY上の格子点を示しており、黒丸はグレー軸GRY外の格子点を示している。   In step S204, the lookup table generation unit 242 determines whether the displacement amount D of the target lattice point is equal to or less than a predetermined displacement amount threshold value Dt. When the displacement amount D of the target lattice point is equal to or less than the displacement amount threshold value Dt, that is, when the color of the target lattice point is a color within a predetermined range including an achromatic color, the control is moved to step S206. On the other hand, when the displacement amount D of the target lattice point is larger than the displacement amount threshold value Dt, the control is moved to step S208. In FIG. 9, lattice points represented by circles are lattice points whose displacement amount D is equal to or less than the displacement amount threshold value Dt. Among these, white circles indicate lattice points on the gray axis GRY, and black circles indicate lattice points outside the gray axis GRY.

なお、所定の変位量閾値Dtは、例えば、グレー軸GRYに隣接する格子点のRGB値から算出される変位量Dに設定することができる。また、変位量Dとして第1実施例における彩度値Sを用い、変位量閾値Dtを第1実施例における彩度閾値Stに設定するものとしてもよい。   Note that the predetermined displacement amount threshold value Dt can be set to, for example, the displacement amount D calculated from the RGB values of grid points adjacent to the gray axis GRY. Further, the saturation value S in the first embodiment may be used as the displacement amount D, and the displacement amount threshold value Dt may be set to the saturation threshold value St in the first embodiment.

ステップS206において、ルックアップテーブル生成部242は、注目格子点のRGB各成分値に対して第1実施例と同様に階調変換を行う。図9の例では、格子点P4,P5のRGB各成分値は、中間基準値IM(図6)とハイライト基準値IH(図6)との間の値をとるため、階調変換によりRGB各成分値が変更される。そのため、格子点P4,P5の色変換値の設定には、点P4a,P5aのRGB各成分値が用いられる。一方、格子点P1,P2,P3は階調変換によってもRGB各成分値が変更されないので、格子点P1,P2,P3の色変換値の設定には、格子点P1,P2,P3のRGB各成分値がそのまま用いられる。 In step S206, the lookup table generation unit 242 performs gradation conversion on the RGB component values of the target lattice point in the same manner as in the first embodiment. In the example of FIG. 9, the RGB component values of the grid points P4 and P5 take values between the intermediate reference value I M (FIG. 6) and the highlight reference value I H (FIG. 6). As a result, the RGB component values are changed. Therefore, the RGB component values of the points P4a and P5a are used for setting the color conversion values of the grid points P4 and P5. On the other hand, since the RGB component values of the grid points P1, P2, and P3 are not changed even by gradation conversion, the RGB conversion values of the grid points P1, P2, and P3 are set for the RGB conversion values of the grid points P1, P2, and P3. The component value is used as it is.

ステップS208において、ルックアップテーブル生成部242は、注目格子点に階調変換されたRGB各成分値に対応する色変換値を設定する。変位量Dが変位領域値Dtより大きい注目格子点と階調変換によりRGB各成分値が変更されない注目格子点とには、色変換原ルックアップテーブル232aの色変換値C0,M0,Y0,K0がそのまま設定される。階調変換によりRGB各成分値が変更された注目格子点には、変更されたRGB各成分値に対応する色変換値CMYKが設定される。この場合、変更されたRGB各成分値で表される点は格子点より外れるので、色変換値CMYKは色変換原ルックアップテーブル232aを用いた補間演算により求められる。図9の例では、格子点P4,P5のRGB各成分値は階調変換により変更されるので、格子点P4,P5には点P4a,P5aに対応する色変換値CMYKが設定される。一方、格子点P1,P2,P3のRGB各成分値は階調変換により変更されないので、色変換原ルックアップテーブル232aの色変換値C0,M0,Y0,K0が設定される。   In step S208, the lookup table generation unit 242 sets color conversion values corresponding to the RGB component values subjected to gradation conversion to the target grid point. The noticed grid points whose displacement amount D is larger than the displacement region value Dt and the noticed grid points whose RGB component values are not changed by gradation conversion are color conversion values C0, M0, Y0, K0 of the color conversion original lookup table 232a. Is set as is. Color conversion values CMYK corresponding to the changed RGB component values are set at the target grid points whose RGB component values have been changed by gradation conversion. In this case, since the points represented by the changed RGB component values deviate from the grid points, the color conversion value CMYK is obtained by an interpolation operation using the color conversion original lookup table 232a. In the example of FIG. 9, since the RGB component values at the grid points P4 and P5 are changed by gradation conversion, color conversion values CMYK corresponding to the points P4a and P5a are set at the grid points P4 and P5. On the other hand, the RGB component values of the grid points P1, P2, and P3 are not changed by the gradation conversion, so that the color conversion values C0, M0, Y0, and K0 of the color conversion original lookup table 232a are set.

このように、第2実施例のルックアップテーブル生成部242により生成される色変換ルックアップテーブルLUTは、所定の範囲の色を表す入力値が入力された場合に、色変換原ルックアップテーブル232aの出力値をより明度の高い色を表すように修正した出力値を出力する。   As described above, the color conversion lookup table LUT generated by the lookup table generation unit 242 of the second embodiment has the color conversion source lookup table 232a when an input value representing a predetermined range of colors is input. The output value is corrected so that it represents a color with higher brightness.

ステップS210において、ルックアップテーブル生成部242は、全ての格子点の色変換値の設定が完了したか否かを判断する。全ての格子点の色変換値の設定が完了したと判断された場合、このルックアップテーブル生成ルーチンは終了する。一方、色変換値の設定が行われていない格子点がある場合、注目格子点は未処理の格子点に設定され、制御はステップS200に戻される。そして、ルックアップテーブル生成部242は、全ての格子点の色変換値の設定が完了するまで、ステップS200からS210を繰り返し実行する。   In step S210, the lookup table generation unit 242 determines whether the setting of color conversion values for all grid points has been completed. If it is determined that the setting of the color conversion values for all grid points has been completed, this lookup table generation routine ends. On the other hand, if there is a grid point for which no color conversion value has been set, the target grid point is set to an unprocessed grid point, and control returns to step S200. Then, the lookup table generation unit 242 repeatedly executes steps S200 to S210 until the setting of the color conversion values of all grid points is completed.

このように生成された第2実施例のルックアップテーブルLUTは、グレー軸GRY近傍の格子点を入力した場合に、格子点が表す色の明度が高い場合には、より明度の高い色を表す出力値を出力する。そして、グレー軸GRY近傍の格子点が表す明度が所定の値以上の場合には白色(C=M=Y=K=0)を表す出力値を出力する。そのため、地色のように彩度が低く明度が高い色を色変換ルックアップテーブルLUTを用いて色変換を行うと、インク量CMYKはほぼ0となる。   The lookup table LUT of the second embodiment generated in this way represents a color with higher brightness when the brightness of the color represented by the grid point is high when grid points near the gray axis GRY are input. Output the output value. When the lightness represented by the grid points near the gray axis GRY is equal to or greater than a predetermined value, an output value representing white (C = M = Y = K = 0) is output. For this reason, when color conversion is performed using a color conversion look-up table LUT for a color with low saturation and high lightness, such as a ground color, the ink amount CMYK becomes almost zero.

第2実施例においても、第1実施例と同様に、地色の領域ではインク量がほぼ0の白色として出力され、地色でない領域は適当な色で出力される。そのため、第2実施例においても、写真や文字の色の変化を抑制しつつ紙の色を白色として出力することができるので、画像原稿を読み取ることにより生成された画像を出力する際の出力画像の品質が改善される。また、第2実施例においても、複数のモードで同一の色変換原ルックアップテーブル232aを使用できるので、色変換原ルックアップテーブル232aの保持に要する記憶容量を低減することができる。   Also in the second embodiment, as in the first embodiment, in the ground color area, the ink amount is output as white with almost 0, and the non-ground color area is output in an appropriate color. Therefore, in the second embodiment as well, since the color of the paper can be output as white while suppressing the change in the color of the photograph or character, the output image when outputting the image generated by reading the image original The quality is improved. Also in the second embodiment, since the same color conversion source lookup table 232a can be used in a plurality of modes, the storage capacity required to hold the color conversion source lookup table 232a can be reduced.

第2実施例は、画素毎の色調整の処理を行わないため、出力画像の品質を改善するための処理に要する時間が短縮できる点で、第1実施例よりも好ましい。一方、第1実施例は、画素毎の色調整を行うので、地色の画素に対するインク量の値を0とすることができる点で、第2実施例よりも好ましい。   The second embodiment is preferable to the first embodiment in that the color adjustment processing for each pixel is not performed, and thus the time required for the processing for improving the quality of the output image can be shortened. On the other hand, since the first embodiment performs color adjustment for each pixel, it is preferable to the second embodiment in that the value of the ink amount for the ground color pixels can be set to zero.

なお、第2実施例では、格子点に設定される出力値を調整することによって出力値が表す色の明度を高めているが、色変換原ルックアップテーブル232aを用いて生成される出力値を調整することによって出力値が表す色の明度を高めるものとしてもよい。例えば、入力値によって表される色が無彩色を含む所定の範囲の色である場合に、出力されたインク量を所定の変換特性に基づいて低減するようにしても良い。   In the second embodiment, the brightness of the color represented by the output value is increased by adjusting the output value set to the grid point. However, the output value generated using the color conversion original lookup table 232a It is good also as what raises the brightness of the color which an output value represents by adjusting. For example, when the color represented by the input value is in a predetermined range including an achromatic color, the output ink amount may be reduced based on a predetermined conversion characteristic.

C.トーンカーブの変形例:
図10は、階調変換に用いられるトーンカーブの変形例を示している。上記各実施例では、図6に示されるトーンカーブTCを用いて階調変換を行っているが、階調変換に用いるトーンカーブは、入力色成分値IXによりも大きい出力色成分値OXを出力できればよい。例えば、図10に示されるような、トーンカーブTCa,TCb,TCcを階調変換に用いることができる。これらのトーンカーブTCa,TCb,TCcを用いても、明度を高める階調変換を行うことができる。
C. Tone curve variations:
FIG. 10 shows a modification of the tone curve used for gradation conversion. In the above embodiments, although performing tone conversion using the tone curve TC shown in FIG. 6, the tone curve used for the gradation conversion, even more input color component value I X larger output color component value O X Can be output. For example, tone curves TCa, TCb, TCc as shown in FIG. 10 can be used for gradation conversion. Even using these tone curves TCa, TCb, TCc, gradation conversion can be performed to increase the brightness.

C1.トーンカーブの変形例1:
トーンカーブTCaは、入力色成分値IXがシャドウ基準値IL以下の場合、出力色成分値OXが0にされる点で図6のトーンカーブTCと異なっている。このトーンカーブTCaを用いることにより、無彩色を含む所定の範囲の色は、明度が所定の明度閾値(R=G=B=IL)以下の場合に、黒色(R=G=B=0)に変更される。この黒色は、最大量の黒インク(K)のインクドットで形成されるので、黒色の文字を含む入力画像を印刷する際の、黒色の文字部分の品質が改善される。
C1. Variation of tone curve 1:
The tone curve TCa is different from the tone curve TC of FIG. 6 in that the output color component value O X is set to 0 when the input color component value I X is equal to or less than the shadow reference value I L. By using the tone curve TCa, a predetermined range of colors including an achromatic color is black (R = G = B = 0) when the lightness is equal to or lower than a predetermined lightness threshold (R = G = B = I L ). ). Since this black color is formed by the maximum amount of ink dots of black ink (K), the quality of the black character portion is improved when an input image including black characters is printed.

C2.トーンカーブの変形例2:
トーンカーブTCbは、入力色成分値IXが0から255の全範囲で滑らかな曲線となっている点で図6のトーンカーブTCと異なっている。このトーンカーブTCbでは、入力色成分値IXの全範囲で出力色成分値IXが入力色成分値IXより大きいので、明度の高低にかかわらず明度が高くなるように色調整が行われる。トーンカーブTCbを階調変換に用いた場合、ハイライト基準値IHでの階調の変化がなめらかになるので、明度が連続して変化する領域の画像の品質が改善される。
C2. Tone curve modification 2:
The tone curve TCb is different from the tone curve TC of FIG. 6 in that the input color component value I X is a smooth curve in the entire range from 0 to 255. In the tone curve TCb, since the output color component value I X is larger than the input color component value I X in the entire range of the input color component value I X , color adjustment is performed so that the brightness is high regardless of the brightness level. . When the tone curve TCb is used for gradation conversion, the gradation change at the highlight reference value I H becomes smooth, so that the quality of the image in the region where the brightness changes continuously is improved.

C3.トーンカーブの変形例3:
トーンカーブTCcは、入力色成分値IXが0から中間基準値IMの範囲で出力色成分値OXが入力色成分値IXよりも小さくなっている点でトーンカーブTCbと異なっている。このトーンカーブTCcによっても、ハイライト基準値IHでの階調の変化がなめらかになるので、明度が連続して変化する領域の画像の品質が改善される。トーンカーブTCcを用いることによっても、入力色成分値IXが中間基準値IMより小さいには出力色成分値IXが入力色成分値IXより小さくなるので、明度が所定の明度閾値(R=G=B=IX)以下の場合に、明度を下げる階調変換を行うことができる。そのため、明度の低い黒色の文字を含む入力画像を印刷する際の、黒色の文字部分の品質が改善される。
C3. Variation 3 of the tone curve:
The tone curve TCc is different from the tone curve TCb in that the output color component value O X is smaller than the input color component value I X in the range of the input color component value I X from 0 to the intermediate reference value I M. . Also by this tone curve TCc, the gradation change at the highlight reference value I H becomes smooth, so that the quality of the image in the region where the brightness changes continuously is improved. Also by using a tone curve TCc, the input color component value I X is output color component value I X is smaller than the input color component value I X The smaller intermediate reference value I M, brightness predetermined brightness threshold value ( R = G = B = I x ) or less, it is possible to perform gradation conversion that lowers the brightness. Therefore, the quality of the black character portion is improved when an input image including a black character with low brightness is printed.

D.変形例:
なお、この発明は上記実施例や実施形態に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能であり、例えば次のような変形も可能である。
D. Variations:
In addition, this invention is not restricted to the said Example and embodiment, It can implement in a various aspect in the range which does not deviate from the summary, For example, the following deformation | transformation is also possible.

D1.変形例1:
上記各実施例では、色変換部224,224aが色調整部240またはルックアップテーブル生成部242のいずれかを用いることによって出力画像の品質を改善しているが、出力画像の品質の改善には無彩色を含む所定の範囲の色を表す入力値に対して出力値で表される色の明度を高めることができればよい。例えば、色変換部は、明度が所定の値より高い色を表す入力値に対して第1実施例の色変換部224を用いて色変換を行い、明度が所定の値より低い色を表す入力値に対して第2実施例の色変換部224aを用いて色変換を行うものとしてもよい。このようにすれば、背景除去の効果が高い明度の高い領域でより適切な色調整を行い、明度が低い領域に対しては画像処理時間を短縮することができる。
D1. Modification 1:
In each of the above embodiments, the color conversion units 224 and 224a improve the quality of the output image by using either the color adjustment unit 240 or the lookup table generation unit 242, but for the improvement of the quality of the output image, It is only necessary that the brightness of the color represented by the output value can be increased with respect to the input value representing a predetermined range of colors including an achromatic color. For example, the color conversion unit performs color conversion on an input value representing a color whose lightness is higher than a predetermined value by using the color conversion unit 224 of the first embodiment, and an input representing a color whose lightness is lower than the predetermined value. The value may be subjected to color conversion using the color conversion unit 224a of the second embodiment. In this way, it is possible to perform more appropriate color adjustment in a high brightness area where the effect of background removal is high, and to shorten the image processing time for a low brightness area.

D2.変形例2:
上記各実施例では、印刷データ生成部220,220aには、RGB表色系で表される画像データを入力しているが、カラー画像を表現できるデータであれば任意の表色系で表される画像データを入力するものとしてもよい。画像データを表す表色系としては、例えば、L*a*b*表色系やYCbCr表色系を用いることができる。
D2. Modification 2:
In each of the embodiments described above, image data represented in the RGB color system is input to the print data generation units 220 and 220a. However, any data that can represent a color image is represented in any color system. The image data may be input. As a color system representing image data, for example, an L * a * b * color system or a YCbCr color system can be used.

D3.変形例3:
上記各実施例では、プリンタユニット130は、CMYKの4種類のインクを利用しているが、これに代えて、任意の複数種類のインクを利用してもよい。この場合、色変換ルックアップテーブル232,LUTもしくは色変換原ルックアップテーブル232aは、印刷データ生成部220,220aに供給される画像データの表色系の入力に対して複数種類のインクの量に対応する表色系での色変換値を出力できればよい。
D3. Modification 3:
In each of the above-described embodiments, the printer unit 130 uses four types of CMYK inks. However, instead of this, arbitrary plural types of inks may be used. In this case, the color conversion lookup table 232, the LUT or the color conversion original lookup table 232a has a plurality of types of ink amounts with respect to the color system input of the image data supplied to the print data generation units 220 and 220a. It is only necessary to output a color conversion value in the corresponding color system.

D4.変形例4:
上記各実施例では、印刷データ生成部220,220aをSPC100に適用しているが、印刷データの生成を行う処理装置であれば印刷データ生成部220,220aを適用することができる。この場合、例えば、印刷データ生成部220,220aは、パーソナルコンピュータ上で動作するプリンタドライバに組み込まれるものとしてもよい。
D4. Modification 4:
In each of the embodiments described above, the print data generation units 220 and 220a are applied to the SPC 100. However, the print data generation units 220 and 220a can be applied to any processing apparatus that generates print data. In this case, for example, the print data generation units 220 and 220a may be incorporated in a printer driver that operates on a personal computer.

本発明の一実施例としてのSPCの構成を示す説明図。Explanatory drawing which shows the structure of SPC as one Example of this invention. 操作パネルの操作によるSPCの設定の様子を示す説明図。Explanatory drawing which shows the mode of the setting of SPC by operation of an operation panel. 第1実施例における印刷データ生成部の構成を示すブロック図。FIG. 3 is a block diagram illustrating a configuration of a print data generation unit in the first embodiment. 色調整部による内部画像データrgbの生成手順を示すフローチャート。6 is a flowchart showing a procedure for generating internal image data rgb by a color adjustment unit. 色調整部による画像データの処理結果を示す説明図。Explanatory drawing which shows the processing result of the image data by a color adjustment part. 第1実施例において注目画素の色調整に使用されるトーンカーブ。FIG. 3 is a tone curve used for color adjustment of a target pixel in the first embodiment. FIG. 第2実施例における印刷データ生成部の構成を示すブロック図。The block diagram which shows the structure of the print data generation part in 2nd Example. 第2実施例におけるルックアップテーブル生成部による色変換ルックアップテーブルLUTの生成手順を示すフローチャート。12 is a flowchart illustrating a procedure for generating a color conversion lookup table LUT by a lookup table generation unit according to the second embodiment. 第2実施例におけるルックアップテーブル生成部による色変換ルックアップテーブルの生成処理の様子を示す説明図。Explanatory drawing which shows the mode of the production | generation process of the color conversion lookup table by the lookup table production | generation part in 2nd Example. トーンカーブの変形例。A modification of the tone curve.

符号の説明Explanation of symbols

100…SPC
110…スキャナユニット
120…制御ユニット
130…プリンタユニット
200…制御実行部
210…画像データ取得部
220,220a…印刷データ生成部
222…解像度変換部
224,224a…色変換部
226…ハーフトーン処理部
228…データ配列部
230…ルックアップテーブル選択部
232…色変換ルックアップテーブル
232a…色変換原ルックアップテーブル
240…色調整部
242…ルックアップテーブル生成部
300…操作パネル
310…I/F部
CB…コピーボタン
DP…表示装置
LUT…色変換ルックアップテーブル
MB…メニューボタン
SB…スタートボタン
XB…選択ボタン
100 ... SPC
DESCRIPTION OF SYMBOLS 110 ... Scanner unit 120 ... Control unit 130 ... Printer unit 200 ... Control execution part 210 ... Image data acquisition part 220,220a ... Print data generation part 222 ... Resolution conversion part 224,224a ... Color conversion part 226 ... Halftone processing part 228 ... Data arrangement section 230 ... Look-up table selection section 232 ... Color conversion lookup table 232a ... Color conversion source lookup table 240 ... Color adjustment section 242 ... Look-up table generation section 300 ... Operation panel 310 ... I / F section CB ... Copy button DP ... Display device LUT ... Color conversion lookup table MB ... Menu button SB ... Start button XB ... Select button

Claims (2)

入力画像データによって表される第1の表色系の色を、印刷に使用する複数のインクの量を表す第2の表色系の色に変換する色変換装置であって、
前記第1の表色系の色成分値である格子点に対して前記第2の表色系の色成分値対応付ける色変換原ルックアップテーブルと、
前記色変換原ルックアップテーブルから、前記格子点に対して前記第2の表色系の色成分値を対応付ける色変換ルックアップテーブルを生成するルックアップテーブル生成部と、
モードに応じて、前記色変換原ルックアップテーブルと前記色変換ルックアップテーブルとのいずれかを参照することによって、前記第1の表色系の色成分値である入力値から前記第2の表色系の色成分値である出力値を生成する色変換部と、
を備え、
前記色変換部は、前記入力値が前記格子点から外れている場合には、前記色変換原ルックアップテーブルあるいは前記色変換ルックアップテーブルにおいて前記格子点に対応付けられた前記第2の表色系の色を補間することにより前記出力値を生成し、
前記ルックアップテーブル生成部は、
無彩色を含む所定の範囲の色を表す前記色変換ルックアップテーブルの格子点については、対応付けられる前記第2の表色系の色成分値として、当該格子点により表される色よりも明度の高い色を表す高明度色成分値を入力値として前記色変換部が前記色変換原ルックアップテーブルを参照して生成した出力値を設定し、
前記所定の範囲外の色を表す前記色変換ルックアップテーブルの格子点については、対応付けられる前記第2の表色系の色成分値として、前記色変換原ルックアップテーブルの対応する格子点の第2の表色系の色成分値を設定することにより、前記色変換ルックアップテーブルを生成する
色変換装置。
A color conversion device that converts a color of a first color system represented by input image data into a color of a second color system representing a plurality of ink amounts used for printing,
A color conversion original lookup table associating the color component values of the second color system with the grid points that are the color component values of the first color system;
A lookup table generation unit that generates a color conversion lookup table for associating the color component values of the second color system with the grid points from the color conversion source lookup table;
Depending on the mode, by referring to either the color conversion source look-up table or the color conversion look-up table, the second table can be obtained from the input value which is the color component value of the first color system. A color conversion unit that generates an output value that is a color component value of the color system;
With
The color conversion unit, when the input value is out of the grid point, the second color specification associated with the grid point in the color conversion original lookup table or the color conversion lookup table. Generating the output value by interpolating the colors of the system;
The lookup table generator is
For the grid point of the color conversion lookup table representing a predetermined range of colors including an achromatic color, the lightness is higher than the color represented by the grid point as the color component value of the associated second color system. An output value generated by referring to the color conversion source lookup table by the color conversion unit using a high brightness color component value representing a high color as an input value;
For the grid point of the color conversion lookup table representing the color outside the predetermined range, the corresponding grid point of the color conversion source lookup table is used as the color component value of the second color system to be associated. A color conversion device that generates the color conversion lookup table by setting a color component value of a second color system.
請求項1記載の色変換装置であって、
前記色変換原ルックアップテーブルは、複数の色変換原ルックアップテーブルから選択される
色変換装置。
A color conversion apparatus according to claim 1 Symbol placement,
The color conversion source lookup table is a color conversion device selected from a plurality of color conversion source lookup tables.
JP2004073985A 2004-03-08 2004-03-16 Image background removal technology Expired - Fee Related JP4315027B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2004073985A JP4315027B2 (en) 2004-03-16 2004-03-16 Image background removal technology
US11/075,315 US20050206927A1 (en) 2004-03-08 2005-03-07 Color conversion technique for printing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004073985A JP4315027B2 (en) 2004-03-16 2004-03-16 Image background removal technology

Publications (2)

Publication Number Publication Date
JP2005268857A JP2005268857A (en) 2005-09-29
JP4315027B2 true JP4315027B2 (en) 2009-08-19

Family

ID=35092990

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004073985A Expired - Fee Related JP4315027B2 (en) 2004-03-08 2004-03-16 Image background removal technology

Country Status (1)

Country Link
JP (1) JP4315027B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5106436B2 (en) * 2009-02-02 2012-12-26 理想科学工業株式会社 Color conversion apparatus and color conversion processing method
JP2012101453A (en) * 2010-11-10 2012-05-31 Seiko Epson Corp Printing apparatus, color conversion method, program, and recording medium
JP2012101455A (en) * 2010-11-10 2012-05-31 Seiko Epson Corp Printing apparatus, color conversion method, program, and recording medium
JP7385813B2 (en) 2019-11-22 2023-11-24 京セラドキュメントソリューションズ株式会社 image forming device

Also Published As

Publication number Publication date
JP2005268857A (en) 2005-09-29

Similar Documents

Publication Publication Date Title
JP4388553B2 (en) Generate a color conversion profile for printing
US20050206927A1 (en) Color conversion technique for printing apparatus
JP2006333431A (en) Image processing method, image processing apparatus, image forming apparatus, computer program, and recording medium
JP2012518303A (en) Image processing system for processing digital image and image processing method for processing digital image
JP2010166506A (en) Image output device, image output method, image output program and recording medium
JP2002112022A (en) Image formation device, image formation method, and recording medium capable of reading computer recording image formation program
JP2008109554A (en) Image forming system, image forming method, image formation program, and recording medium
JP4315027B2 (en) Image background removal technology
JP2001285638A (en) Image processing method
JP4023491B2 (en) Image processing apparatus, image processing program, and image processing method
JP4029997B2 (en) Color conversion apparatus, color conversion method, program, and recording medium
JP2006237808A (en) Image processor, and image processing program and method
JP4176656B2 (en) Image processing apparatus, image processing method, image forming apparatus, image processing program, and recording medium recording the program
JP2005303569A (en) Technology for removing base of image
JP4101741B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and recording medium
JP2005252993A (en) Color conversion processing technology for image
JP2008271131A (en) Method and device for image processing, and image forming apparatus
JP6350877B2 (en) Image forming apparatus
JP2001285656A (en) Color image processing method and color image processing apparatus, and color image forming device
JPH11252388A (en) Color image processing method and its device
JP4266002B2 (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and recording medium
JP2001352456A (en) Image-processing method and image-processing unit, and image-forming device provided with them
JP2008245156A (en) Color adjusting device, color adjusting method, image forming apparatus, color adjustment program and recording medium
JP4375223B2 (en) Image processing apparatus, image processing method, and image processing program
JP2021197717A (en) Image processing device and computer program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070308

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080707

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080805

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081006

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090203

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090326

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090413

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090428

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090511

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120529

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees