JP2002064712A - Image processing unit - Google Patents

Image processing unit

Info

Publication number
JP2002064712A
JP2002064712A JP2000246136A JP2000246136A JP2002064712A JP 2002064712 A JP2002064712 A JP 2002064712A JP 2000246136 A JP2000246136 A JP 2000246136A JP 2000246136 A JP2000246136 A JP 2000246136A JP 2002064712 A JP2002064712 A JP 2002064712A
Authority
JP
Japan
Prior art keywords
quantization
character
image
image data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000246136A
Other languages
Japanese (ja)
Inventor
Hiroyoshi Kamijo
裕義 上條
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2000246136A priority Critical patent/JP2002064712A/en
Publication of JP2002064712A publication Critical patent/JP2002064712A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To realize high compression rate, while suppressing the occurrence of image quality deterioration, even in the case of compressing/expanding image data and especially restrain image quality deterioration due, especially twisted character and mosquito noise or the like. SOLUTION: The image processing unit 10 is constituted with a character/ pattern separation means 12, that separates received image data into a character area and a pattern area, a quantization means 14b that uses one of preset quantization tables 15a-15c to quantize the image data for data compression, and a table changeover means 15d that changes over the quantization tables 15a-15c used by the quantization means 14b for the character area and the pattern area, on the basis of the result of separation by the character/pattern separation means 12.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、画像データに対す
るデータ圧縮処理を行う機能を有した画像処理装置に関
するものである。
[0001] 1. Field of the Invention [0002] The present invention relates to an image processing apparatus having a function of performing data compression processing on image data.

【0002】[0002]

【従来の技術】一般に、静止画についての画像データに
対するデータ圧縮技術としては、JPEG(Joint Phot
ographic Experts Group)等の非可逆圧縮が知られてい
る。JPEGでは、画像データを8×8画素のブロック
単位に分割し、各ブロック毎に離散コサイン変換(Disc
rete Cosine Transform;以下「DCT」と略す)とハ
フマン符号化を行うことで、冗長なデータや高周波のデ
ータ等を削ってそのデータ量を減らしている。
2. Description of the Related Art Generally, as a data compression technique for image data of a still image, JPEG (Joint Photo
Lossless compression, such as the Graphicographic Experts Group), is known. In JPEG, image data is divided into blocks of 8 × 8 pixels, and discrete cosine transform (Disc
Rete Cosine Transform (hereinafter abbreviated as “DCT”) and Huffman coding reduce redundant data and high-frequency data to reduce the amount of data.

【0003】ところで、JPEGは、非可逆圧縮である
ため、その圧縮率を高めると、圧縮した画像データを復
号化して再現した場合に、画質の劣化を伴ってしまう。
このような画質の劣化を極力抑えつつ、その圧縮率を高
めるべく、例えば特開平10−285409号公報に
は、データ圧縮・伸張の過程で、画像データをブロック
単位に分割して、各ブロック毎にエッジ/非エッジの判
定を行い、非エッジと判定されたブロックについては、
ローパスフィルタによる補正処理を施した後に圧縮処理
を行うことで、周波数分解した高周波成分を失わせて圧
縮率を稼ぐ一方、エッジと判定されたブロックについて
は、その補正処理を行わないことで、高周波成分がぼけ
てしまうのを防ぎ、復号画像の画質の劣化を解消するよ
うにした画像データ処理装置が提案されている。
[0003] By the way, since JPEG is irreversible compression, if its compression ratio is increased, image quality is deteriorated when compressed image data is decoded and reproduced.
In order to suppress such image quality degradation as much as possible and to increase the compression ratio, for example, Japanese Patent Application Laid-Open No. 10-285409 discloses that image data is divided into blocks in a data compression / expansion process, and each block is divided into blocks. The edge / non-edge is determined for the block, and for the block determined to be non-edge,
By performing a compression process after performing a correction process using a low-pass filter, the frequency-resolved high-frequency component is lost to increase the compression ratio. On the other hand, for a block determined to be an edge, the correction process is not performed. There has been proposed an image data processing device which prevents a component from blurring and eliminates deterioration of image quality of a decoded image.

【0004】[0004]

【発明が解決しようとする課題】しかしながら、特開平
10−285409号公報に開示された画像データ処理
装置では、例えば8×8画素のブロック毎にエッジ/非
エッジの判定を行っているが、その分離境界付近では1
画素分の濃度がブロック全体の判定結果に影響を及ぼす
ため、本来エッジである部分を非エッジと判定してしま
う可能性がある。例えば、8×8画素のブロックが図3
(a)に示すような濃度値である場合には、二次元DC
Tにより変換された8×8DCT係数が図3(b)に示
すようになり、そのブロックは「エッジ」であると判定
されるが、図4(a)に示すように、図3(a)の場合
に比べて一つの画素値(図中ハッチング部参照)が変わ
っただけでも、二次元DCTにより変換された8×8D
CT係数は図4(b)に示すようになり、そのブロック
は「非エッジ」であると判定されてしまう。
However, in the image data processing apparatus disclosed in Japanese Patent Laid-Open No. 10-285409, for example, edge / non-edge determination is performed for each block of 8 × 8 pixels. 1 near the separation boundary
Since the density of pixels affects the determination result of the entire block, there is a possibility that a part which is originally an edge is determined as a non-edge. For example, a block of 8 × 8 pixels is shown in FIG.
If the density value is as shown in FIG.
The 8 × 8 DCT coefficients converted by T are as shown in FIG. 3B, and the block is determined to be an “edge”. However, as shown in FIG. 4A, FIG. Is different from the case of (1), even if only one pixel value (see the hatched portion in the figure) is changed, the 8 × 8D converted by the two-dimensional DCT is used.
The CT coefficients are as shown in FIG. 4B, and the block is determined to be “non-edge”.

【0005】このように、本来エッジである部分が非エ
ッジと判定されてしまうと、そのブロックについては、
高周波成分を失わせて圧縮率を稼ぐような圧縮処理を行
うことから、復号化した画像を再現した際に、高周波成
分の損失が例えば図5に示すように文字や線等の「撚
れ」となって現れるおそれがある。また、高周波成分を
失わせることで、文字や線等の階調変化の大きい部分に
おいて、そのエッジ部分の周りにモヤモヤとした、いわ
ゆるモスキートノイズが現れるおそれもある。
[0005] As described above, when a part which is originally an edge is determined to be a non-edge, the block is
Since the compression processing is performed so as to increase the compression rate by losing the high-frequency components, when the decoded image is reproduced, the loss of the high-frequency components may be, for example, as shown in FIG. May appear. In addition, by losing the high-frequency component, so-called mosquito noise may appear around the edge portion of a portion where the gradation change is large, such as a character or a line.

【0006】そこで、本発明は、画像データの圧縮・伸
張を行う場合であっても、画質劣化の発生を抑えつつ高
圧縮率を実現可能とし、しかもこれをエッジ/非エッジ
の判定によらずに行うことで、文字撚れやモスキートノ
イズ等による画質劣化を確実に解消することのできる画
像処理装置の提供を目的とする。
Accordingly, the present invention makes it possible to realize a high compression ratio while suppressing the deterioration of image quality even when performing compression / expansion of image data. Accordingly, it is an object of the present invention to provide an image processing apparatus capable of reliably eliminating image quality deterioration due to character twisting, mosquito noise, and the like.

【0007】[0007]

【課題を解決するための手段】本発明は上記目的を達成
するために案出された画像処理装置で、入力された画像
データを文字領域と絵柄領域とに分離する絵文字分離手
段と、予め設定された複数の量子化テーブルのいずれか
を用いて前記入力された画像データに対してデータ圧縮
のための量子化を行う量子化手段と、前記絵文字分離手
段による分離結果を基に文字領域と絵柄領域とで前記量
子化手段が量子化を行う際に用いる量子化テーブルを切
り替えるテーブル切り替え手段とを備えることを特徴と
する。
According to the present invention, there is provided an image processing apparatus devised to achieve the above object, wherein a pictographic character separating means for separating input image data into a character area and a picture area, Quantizing means for performing quantization for data compression on the input image data by using any of the plurality of quantization tables obtained as described above, and a character area and a pattern based on a separation result by the pictogram separating means. Table switching means for switching a quantization table used when the quantization means performs quantization between regions.

【0008】上記構成の画像処理装置では、テーブル切
り替え手段が、文字領域と絵柄領域とで、量子化手段が
量子化を行う際に用いる量子化テーブルを切り替える。
そのため、例えば、文字領域については、画質優先で係
数の小さな量子化テーブルを用いて高周波成分を保持
し、高周波成分の損失に起因する文字撚れやモスキート
ノイズ等の発生を抑える一方、絵柄領域については、圧
縮率を稼いでも画質劣化が目立たないことから、圧縮率
優先で係数の大きな量子化テーブルを用いる、といった
ことが可能となる。
In the image processing apparatus having the above configuration, the table switching means switches a quantization table used when the quantization means performs quantization between the character area and the picture area.
For this reason, for example, for the character area, the high-frequency component is held using a quantization table with a small coefficient with priority on image quality, and the occurrence of character twisting and mosquito noise caused by loss of the high-frequency component is suppressed, while the picture area is Since the image quality degradation is not conspicuous even if the compression rate is increased, it is possible to use a quantization table having a large coefficient with priority on the compression rate.

【0009】[0009]

【発明の実施の形態】以下、図面に基づき本発明に係る
画像処理装置について説明する。図1は、本発明に係る
画像処理装置の一例の機能構成を示すブロック図であ
る。なお、ここでは、本発明を、デジタル複写機に搭載
された画像処理装置に適用した場合を例に挙げるものと
する。
DESCRIPTION OF THE PREFERRED EMBODIMENTS An image processing apparatus according to the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram illustrating a functional configuration of an example of an image processing apparatus according to the present invention. Here, a case in which the present invention is applied to an image processing apparatus mounted on a digital copying machine will be described as an example.

【0010】先ず、本発明が適用された画像処理装置の
説明に先立ち、その画像処理装置が搭載されるデジタル
複写機について簡単に説明する。図1に示すように、デ
ジタル複写機は、画像処理装置(Image Processing Sys
tem;以下「IPS」と称す)10の他に、画像読取装置
(Image Input Terminal;以下「IIT」と称す)20
と、画像形成装置(Image Output Terminal;以下「IO
T」と称す)30とを備えて構成されている。
First, prior to description of an image processing apparatus to which the present invention is applied, a digital copier equipped with the image processing apparatus will be briefly described. As shown in FIG. 1, the digital copying machine includes an image processing system (Image Processing System).
(hereinafter referred to as “IPS”) 10 and an image reading terminal (hereinafter referred to as “IIT”) 20.
And an image forming device (Image Output Terminal;
T ”) 30).

【0011】IIT20は、原稿画像から光学的に画像
データを読み取るCCD(Charge Coupled Device)2
1と、そのCCD21が読み取った画像データをデジタ
ル化するA/D(アナログ/デジタル)変換器22と、
を備えたものである。
An IIT 20 is a CCD (Charge Coupled Device) 2 for optically reading image data from a document image.
An A / D (analog / digital) converter 22 for digitizing image data read by the CCD 21;
It is provided with.

【0012】また、IOT30は、周知の電子写真技術
を利用して、画像データを用紙等の媒体上に可視画像と
して印刷出力するものである。
The IOT 30 prints out image data as a visible image on a medium such as paper using a well-known electrophotographic technique.

【0013】IPS10は、これらIIT20およびI
OT30の間に配されたもので、IIT20が読み取っ
た画像データを受け取ると、その画像データに対してI
OT30での出力に必要となる画像処理を施すようにな
っている。
The IPS 10 uses these IITs 20 and I
When the image data read by the IIT 20 is received between the OT 30 and the IIT 20
Image processing necessary for output from the OT 30 is performed.

【0014】また、IPS10では、必要に応じて、I
IT20から受け取った画像データを、一時的に記憶保
持(スプール)するようにもなっている。そのために、
IPS10では、IIT20からの画像データに対して
JPEG方式によるデータ圧縮処理を行って、スプール
に要する記憶容量の削減を図るとともに、その画像デー
タを復号化した後に、IOT30へ送り出すようになっ
ている。
In the IPS 10, if necessary,
The image data received from the IT 20 is temporarily stored (spooled). for that reason,
The IPS 10 performs a data compression process on the image data from the IIT 20 according to the JPEG system to reduce the storage capacity required for the spool, and decodes the image data before sending it to the IOT 30.

【0015】ここで、このようなIPS10の機能構成
について、さらに詳しく説明する。IPS10は、色変
換部11a,11bと、TI分離処理部12と、フィル
タリング部13と、DCT部14aと、量子化器14b
と、量子化テーブル選択部15と、ハフマン符号化部1
4cと、メモリ部16と、ハフマン復号化部17aと、
逆量子化器17bと、IDCT部17cと、フィルタリ
ング部18と、階調補正部19と、を有している。
Here, the functional configuration of the IPS 10 will be described in more detail. The IPS 10 includes color conversion units 11a and 11b, a TI separation processing unit 12, a filtering unit 13, a DCT unit 14a, and a quantizer 14b.
, The quantization table selector 15 and the Huffman encoder 1
4c, a memory unit 16, a Huffman decoding unit 17a,
It has an inverse quantizer 17b, an IDCT unit 17c, a filtering unit 18, and a gradation correction unit 19.

【0016】色変換部11a,11bは、それぞれ、I
IT20から受け取った画像データに対して、その色成
分の変換を行うものである。具体的には、色変換部11
aは、R(赤),G(緑),B(青)の各色成分信号
を、明度および色度で表されるL***信号に変換す
る。また、色変換部11bは、L***信号を、IO
T30での印刷出力に適したY(イエロー),M(マゼ
ンタ),C(シアン),K(黒)の各色成分信号に変換
する。
The color conversion units 11a and 11b respectively
The color component is converted for the image data received from the IT 20. Specifically, the color conversion unit 11
a converts R (red), G (green), and B (blue) color component signals into L * a * b * signals represented by lightness and chromaticity. The color conversion unit 11b converts the L * a * b * signal into an IO
The signal is converted into color component signals of Y (yellow), M (magenta), C (cyan), and K (black) suitable for print output at T30.

【0017】TI分離処理部12は、IIT20からの
画像データに対する文字(テキスト)/絵柄(イメー
ジ)分離処理を行うものである。すなわち、その画像デ
ータを構成する画素毎に、各画素が文字領域に属するか
絵柄領域に属するかを判定し、さらには文字領域に属す
る画素が黒文字を表すものか色文字(中間彩度文字)を
表すものかを判定し、これらの判定結果を画素毎にタグ
情報(以下「TI tag」と称す)として出力するものであ
る。ただし、文字/絵柄分離処理の詳細については、周
知技術を利用しているため、ここではその説明を省略す
る。
The TI separation processing section 12 performs a character (text) / picture (image) separation process on the image data from the IIT 20. That is, for each pixel constituting the image data, it is determined whether each pixel belongs to a character area or a picture area, and furthermore, pixels belonging to the character area represent black characters or color characters (intermediate saturation characters). Is determined, and these determination results are output as tag information (hereinafter, referred to as “TI tag”) for each pixel. However, the details of the character / pattern separation process use well-known technology, and a description thereof will be omitted.

【0018】フィルタリング部13は、IIT20での
データ読み取り特性を補正するためのフィルタリング処
理(例えば、画像データの波形を整えるための処理)を
行うものである。なお、フィルタリング部13では、T
I分離処理部12での文字/絵柄分離処理の結果に応じ
て、フィルタリング処理を行う際のパラメータを変える
ようにしてもよい。
The filtering unit 13 performs a filtering process (for example, a process for adjusting the waveform of image data) for correcting the data reading characteristics of the IIT 20. In the filtering unit 13, T
The parameters for performing the filtering process may be changed according to the result of the character / picture separation process in the I separation processing unit 12.

【0019】DCT部14aは、IIT20からの画像
データに対して、例えば8×8画素のブロック単位で、
そのデータ量を圧縮するための必要な二次元DCTを施
すものである。この二次元DCTについても、周知技術
を利用しているため、ここではその説明を省略する。
The DCT unit 14a converts the image data from the IIT 20 into blocks of, for example, 8 × 8 pixels.
The necessary two-dimensional DCT for compressing the data amount is performed. Since the well-known technique is used for the two-dimensional DCT, the description thereof is omitted here.

【0020】量子化器14bは、DCT部14aでの二
次元DCTによって有意と判定された画素あるいはその
組み合わせに対して、スカラーまたはベクトル量子化を
行うものである。このスカラーまたはベクトル量子化に
ついても、周知技術を利用しているため、ここではその
説明を省略する。ただし、量子化器14bでは、後述す
るように、予め設定された三つの量子化テーブルのうち
のいずれかを用いて量子化を行うようになっている。
The quantizer 14b performs scalar or vector quantization on pixels or combinations thereof determined to be significant by the two-dimensional DCT in the DCT unit 14a. As for the scalar or vector quantization, a well-known technique is used, and the description thereof is omitted here. However, the quantizer 14b is configured to perform quantization using one of three preset quantization tables, as described later.

【0021】量子化テーブル選択部15は、量子化器1
4bが量子化を行う際に用いる三つの量子化テーブル
(Quantzite Table;以下「Q-table」と称する)15
a〜15cを予め保持しているとともに、どのQ-table
15a〜15cを用いるか選択するための選択部(以下
「SEL」と称す)15dを有している。三つのQ-tab
le15a〜15cとしては、黒文字の量子化に適したQ
-table(黒文字)15aと、色文字の量子化に適したQ
-table(色文字)15bと、中間調画像の量子化に適し
たQ-table(中間調)15cとがある。また、SEL1
5dでは、これら三つQ-table15a〜15cの中から
いずれか一つを、TI分離処理部12から出力されるタ
グ情報に基づいて選択し、その選択結果を量子化器14
bおよび逆量子化器14bに対して指示ようになってい
る。
The quantization table selection unit 15 includes a quantizer 1
4b, three quantization tables (Quantzite Tables; hereinafter referred to as “Q-tables”) 15 used when performing quantization.
a to 15c are stored in advance, and which Q-table
A selection unit (hereinafter, referred to as "SEL") 15d for selecting whether to use 15a to 15c is provided. Three Q-tabs
le15a to 15c are Q suitable for quantization of black characters.
-table (black character) 15a and Q suitable for color character quantization
-table (color character) 15b and Q-table (halftone) 15c suitable for quantization of a halftone image. Also, SEL1
In 5d, any one of these three Q-tables 15a to 15c is selected based on the tag information output from the TI separation processing unit 12, and the selection result is
b and the inverse quantizer 14b.

【0022】ハフマン符号化部14cは、量子化器14
bからの量子化出力に対して、平均的な符号長が短くな
るようなハフマン符号化(符号割り当て)を行うもので
ある。このハフマン符号化についても、周知技術を利用
しているため、ここではその説明を省略する。
The Huffman encoding unit 14c includes a quantizer 14
Huffman coding (code allocation) is performed on the quantized output from b so that the average code length is shortened. Since the well-known technique is used for the Huffman coding, the description thereof is omitted here.

【0023】メモリ部16は、例えばハードディスク装
置からなるもので、DCT部14a、量子化器14bお
よびハフマン符号化部14cによってデータ量が削減さ
れた後の画像データ(以下、このデータを「符号デー
タ」と称す)を、一時的に記憶保持するものである。
The memory unit 16 is composed of, for example, a hard disk device. The image data whose data amount has been reduced by the DCT unit 14a, the quantizer 14b, and the Huffman encoding unit 14c (hereinafter referred to as “code data”). ) Is temporarily stored and held.

【0024】ハフマン復号化部17a、逆量子化器17
bおよびIDCT部17cは、メモリ部16内の符号デ
ータを復号化して、圧縮前の画像データを再現するため
のものである。なお、逆量子化器17bは、量子化テー
ブル選択部15におけるSEL15dからの指示に従い
つつ、量子化器14bが量子化を行った際に用いたのと
同一のQ-table15a〜15cにより逆量子化を行うも
のとする。
Huffman decoding unit 17a, inverse quantizer 17
b and the IDCT unit 17c are for decoding the code data in the memory unit 16 and reproducing the image data before compression. Note that the inverse quantizer 17b performs the inverse quantization by using the same Q-tables 15a to 15c used when the quantizer 14b performs the quantization while following the instruction from the SEL 15d in the quantization table selector 15. Shall be performed.

【0025】フィルタリング部18は、復号化により再
現された画像データに対して、所定のフィルタリング処
理を行うものである。具体的には、JPEG方式による
データ圧縮特性を補うためのフィルタリング処理や、出
力画像の画質を調整するための強調フィルタ処理、ロー
パスフィルタ処理等を行うようになっている。
The filtering section 18 performs a predetermined filtering process on the image data reproduced by decoding. More specifically, filtering processing for compensating for data compression characteristics according to the JPEG method, enhancement filter processing for adjusting the image quality of an output image, low-pass filter processing, and the like are performed.

【0026】階調補正部19は、復号化により再現され
た画像データに対して、IOT30での画像出力特性に
合わせた階調補正処理を行うものである。具体的には、
Hi−γの階調補正処理やリニアな階調補正処理等を行
うようになっている。
The tone correcting section 19 performs a tone correcting process on the image data reproduced by decoding in accordance with the image output characteristics of the IOT 30. In particular,
Hi-γ gradation correction processing, linear gradation correction processing, and the like are performed.

【0027】なお、上述したメモリ部16以外の各部1
1a〜15,17〜19は、専用ASIC(Applicatio
n Specific Integrated Circuit)の組み合わせによっ
て実現すればよい。
Each unit other than the memory unit 16 described above
1a-15, 17-19 are dedicated ASICs (Applicatio
n Specific Integrated Circuit).

【0028】次に、以上のように構成されたIPS10
における処理動作例について説明する。図2は、本発明
に係る画像処理装置における処理動作の一例を示すフロ
ーチャートである。
Next, the IPS 10 configured as described above
An example of the processing operation in will be described. FIG. 2 is a flowchart illustrating an example of a processing operation in the image processing apparatus according to the present invention.

【0029】IPS10では、IIT20が読み取った
画像データを受け取ると、色変換部11a,11bでの
色成分の変換処理、フィルタリング部13でのフィルタ
リング処理を経た後に、DCT部14a、量子化器14
bおよびハフマン符号化部14cが、その画像データに
対して、8×8画素のブロック単位で、JPEG方式に
よるデータ圧縮処理を行う。
In the IPS 10, upon receiving the image data read by the IIT 20, after undergoing color component conversion processing in the color conversion units 11a and 11b and filtering processing in the filtering unit 13, the DCT unit 14a and the quantizer 14
b and the Huffman encoding unit 14c perform data compression processing on the image data by the JPEG method in units of 8 × 8 pixels.

【0030】ただし、そのデータ圧縮処理に先立って、
TI分離処理部12は、IIT20からの画像データに
対して文字/絵柄分離処理を行い、その画像データの各
画素毎にTI tagを出力している。そして、量子化テーブ
ル選択部15は、そのTI tagに基づいて、量子化器14
bが量子化を行う際に用いるQ-table15a〜15cを
選択し、その選択結果を量子化器14bに対して指示す
る。
However, prior to the data compression processing,
The TI separation processing unit 12 performs character / picture separation processing on the image data from the IIT 20, and outputs a TI tag for each pixel of the image data. Then, based on the TI tag, the quantization table selecting unit 15
b selects the Q-tables 15a to 15c used when performing quantization, and instructs the quantizer 14b of the selection result.

【0031】詳しくは、図2に示すように、TI分離処
理部12からのTI tagが入力されると(ステップ10
1、以下ステップを「S」と略す)、量子化テーブル選
択部15のSEL15dは、先ず、量子化器14bが量
子化対象とする8×8画素のブロック内の計64画素中
に、TI分離処理部12によって文字領域に属し、か
つ、黒文字に該当すると判定された画素がいくつあるか
をカウントする。そして、そのカウント数を予め設定さ
れた閾値(n/64)と比較して、閾値よりもカウント
数が多いか否かを判断する(S102)。
More specifically, as shown in FIG. 2, when a TI tag is input from the TI separation processing unit 12 (step 10).
1. Hereinafter, the steps are abbreviated as “S”.) The SEL 15 d of the quantization table selection unit 15 first performs TI separation into a total of 64 pixels in a block of 8 × 8 pixels to be quantized by the quantizer 14 b. The processing unit 12 counts how many pixels belong to the character area and are determined to correspond to black characters. Then, the count is compared with a preset threshold (n / 64) to determine whether the count is greater than the threshold (S102).

【0032】この判断の結果、カウント数が閾値よりも
多ければ、SEL15dは、そのブロックが黒文字を表
すものであると判定し(S103)、三つのQ-table1
5a〜15cの中から黒文字の量子化に適したQ-table
(黒文字)15aを選択し(S104)、そのQ-table
(黒文字)15aを用いて量子化を行うように量子化器
14bに指示を与える。
If the result of this determination is that the count number is greater than the threshold value, the SEL 15d determines that the block represents a black character (S103), and the three Q-tables 1
Q-table suitable for quantization of black characters from 5a to 15c
(Black character) 15a is selected (S104) and its Q-table is selected.
An instruction is given to the quantizer 14b to perform quantization using (black characters) 15a.

【0033】この指示に従うことで、量子化器14bで
は、黒文字と判定されたブロックについては、黒文字の
量子化に適したQ-table(黒文字)15aを用いて量子
化を行うことになる。具体的には、係数が小さく設定さ
れたQ-table(黒文字)15aを用いることで、量子化
を行っても周波数分解した高周波成分が失われないよう
にする。
By following this instruction, the quantizer 14b quantizes the block determined to be a black character using a Q-table (black character) 15a suitable for quantizing the black character. Specifically, by using a Q-table (black character) 15a in which the coefficient is set to be small, the frequency-resolved high-frequency component is not lost even if quantization is performed.

【0034】また、黒文字の画素数が閾値以下であれ
ば、続いて、SEL15dは、8×8画素のブロック内
の計64画素中に、TI分離処理部12によって文字領
域に属し、かつ、色文字(中間彩度文字)に該当すると
判定された画素がいくつあるかをカウントする。そし
て、そのカウント数を予め設定された閾値(n/64)
と比較して、閾値よりもカウント数が多いか否かを判断
する(S105)。
If the number of pixels of a black character is equal to or less than the threshold value, the SEL 15d then determines whether the pixel belongs to the character area by the TI separation processing unit 12 and has a color of 64 pixels in a block of 8 × 8 pixels. The number of pixels determined to correspond to the character (intermediate saturation character) is counted. Then, the count number is set to a predetermined threshold value (n / 64).
Then, it is determined whether or not the count number is larger than the threshold value (S105).

【0035】この判断の結果、カウント数が閾値よりも
多ければ、SEL15dは、そのブロックが色文字を表
すものであると判定し(S106)、三つのQ-table1
5a〜15cの中から色文字の量子化に適したQ-table
(色文字)15bを選択し(S107)、そのQ-table
(色文字)15bを用いて量子化を行うように量子化器
14bに指示を与える。
If the result of this determination is that the count number is greater than the threshold, the SEL 15d determines that the block represents a color character (S106), and the three Q-tables 1
Q-table suitable for quantization of color characters from 5a to 15c
(Color character) 15b is selected (S107), and its Q-table is selected.
An instruction is given to the quantizer 14b to perform quantization using the (color character) 15b.

【0036】この指示に従うことで、量子化器14bで
は、色文字と判定されたブロックについては、色文字の
量子化に適したQ-table(色文字)15bを用いて量子
化を行うことになる。具体的には、色文字は黒文字の場
合に比べたら画質劣化(文字の撚れ等)が目立たないの
で、黒文字の場合よりも係数がやや大きく設定されたQ
-table(色文字)15bを用いて、画質と性能(圧縮
率)の両立を図る。
By following this instruction, the quantizer 14b performs quantization on the block determined to be a color character by using a Q-table (color character) 15b suitable for color character quantization. Become. More specifically, since the deterioration of the image quality (such as twisting of characters) is less noticeable in color characters than in black characters, the coefficient Q is set to be slightly larger than in black characters.
Using -table (color character) 15b to achieve both image quality and performance (compression ratio).

【0037】また、色文字の画素数が閾値以下であれ
ば、SEL15dは、そのブロックが文字ではなく中間
調画像を表すもの、すなわち絵柄領域に属すると判定し
(S108)、三つのQ-table15a〜15cの中から
中間調画像の量子化に適したQ-table(中間調)15c
を選択し(S109)、そのQ-table(中間調)15c
を用いて量子化を行うように量子化器14bに指示を与
える。
If the number of pixels of the color character is equal to or less than the threshold value, the SEL 15d determines that the block does not represent a character but a halftone image, that is, belongs to a picture area (S108), and the three Q-tables 15a Q-table (halftone) 15c suitable for quantizing halftone images from
Is selected (S109), and the Q-table (halftone) 15c is selected.
Is given to the quantizer 14b so as to perform quantization by using.

【0038】この指示に従うことで、量子化器14bで
は、中間調画像と判定されたブロックについては、中間
調画像の量子化に適したQ-table(中間調)15cを用
いて量子化を行うことになる。具体的には、中間調画像
は圧縮率を稼いでも画質劣化が目立たないことから、圧
縮率優先で係数の大きなQ-table(中間調)15cを用
いるようにする。
By following this instruction, the quantizer 14b quantizes the block determined to be a halftone image using a Q-table (halftone) 15c suitable for quantizing the halftone image. Will be. More specifically, since the image quality degradation of the halftone image is not conspicuous even if the compression ratio is increased, a Q-table (halftone) 15c having a large coefficient with a priority on the compression ratio is used.

【0039】このようにして、DCT部14a、量子化
器14bおよびハフマン符号化部14cが、8×8画素
のブロック単位でデータ圧縮処理を行うと、IPS10
では、メモリ部16がそのデータ圧縮処理後の符号デー
タを一時的に記憶保持する。
As described above, when the DCT unit 14a, the quantizer 14b, and the Huffman encoding unit 14c perform the data compression processing in units of 8 × 8 pixels, the IPS 10
Then, the memory unit 16 temporarily stores the code data after the data compression processing.

【0040】その後、メモリ部16内の符号データをI
OT30へ送出する場合には、ハフマン復号化部17
a、逆量子化器17bおよびIDCT部17cが、メモ
リ部16から取り出した符号データをブロック単位で復
号化して、圧縮前の画像データを再現する。このとき、
逆量子化器17bは、各ブロック毎に、量子化器14b
が量子化を行った際に用いたのと同一のQ-table15a
〜15cにより逆量子化を行う。
Thereafter, the code data in the memory section 16 is
When transmitting to the OT 30, the Huffman decoding unit 17
a, the inverse quantizer 17b and the IDCT unit 17c decode the coded data extracted from the memory unit 16 in block units to reproduce the image data before compression. At this time,
The inverse quantizer 17b includes a quantizer 14b for each block.
Is the same Q-table 15a as used when performing the quantization.
Inverse quantization is performed by .about.15c.

【0041】ハフマン復号化部17a、逆量子化器17
bおよびIDCT部17cが画像データを再現すると、
IPS10では、続いて、フィルタリング部18がフィ
ルタリング処理を行う。例えば、TI分離処理部12に
よって文字領域と判定されたブロックについては、画像
のエッジ部分を強調してシャープさを高めるための強調
フィルタ処理を行う。また、TI分離処理部12によっ
て絵柄領域と判定されたブロックについては、高周波成
分をぼやけさせて各画素の連続性を高めるためのローパ
スフィルタ処理を行う。
Huffman decoding section 17a, inverse quantizer 17
b and the IDCT unit 17c reproduce the image data,
Subsequently, in the IPS 10, the filtering unit 18 performs a filtering process. For example, for a block determined to be a character area by the TI separation processing unit 12, an enhancement filter process is performed to enhance an edge portion of an image to enhance sharpness. In addition, for the block determined as a picture area by the TI separation processing unit 12, low-pass filter processing is performed to blur high-frequency components and increase continuity of each pixel.

【0042】これらのフィルタリング処理は、フィルタ
リング部18によって、画像データの圧縮・伸張の後に
行われる。したがって、これらのフィルタリング処理を
行っても、そのことによってモスキートノイズ等による
画質劣化を招いてしまうおそれはない。
These filtering processes are performed by the filtering unit 18 after the compression and expansion of the image data. Therefore, even if these filtering processes are performed, there is no possibility that the image quality is deteriorated due to mosquito noise or the like.

【0043】さらにその後、IPS10では、階調補正
部19が階調補正処理を行う。例えば、TI分離処理部
12によって文字領域と判定されたブロックについて
は、Hi−γのパラメータにより階調補正処理を行い、
またTI分離処理部12によって絵柄領域と判定された
ブロックについては、リニアなパラメータにより階調補
正処理を行う。
Thereafter, in the IPS 10, the gradation correction section 19 performs a gradation correction process. For example, for a block determined to be a character area by the TI separation processing unit 12, gradation correction processing is performed using the Hi-γ parameter.
In addition, for the block determined to be a picture area by the TI separation processing unit 12, gradation correction processing is performed using linear parameters.

【0044】これらの階調補正処理は、階調補正部19
によって、画像データをIOT30へ送出する直前、す
なわちIPS10内での最終段階にて行われる。したが
って、それ以前の処理(データ圧縮処理やフィルタリン
グ処理等)を、IOT30での画像出力特性を意識する
ことなく行い得るようになるので、IPS10を構成す
る際の自由度を高めることができる。
The gradation correction processing is performed by the gradation correction unit 19.
Is performed immediately before sending the image data to the IOT 30, that is, at the final stage in the IPS 10. Therefore, the previous processing (data compression processing, filtering processing, and the like) can be performed without being conscious of the image output characteristics of the IOT 30, so that the degree of freedom in configuring the IPS 10 can be increased.

【0045】そして、階調補正処理後の画像データは、
IPS10からIOT30へ送られ、そのIOT30で
用紙等の媒体上に可視画像として印刷出力される。
The image data after the gradation correction processing is
The data is sent from the IPS 10 to the IOT 30, where the IOT 30 prints out a visible image on a medium such as paper.

【0046】以上のように、本実施形態におけるIPS
10は、TI分離処理部12による文字/絵柄分離処理
の結果に応じて、量子化テーブル選択部15のSEL1
5dが最適なQ-table15a〜15cを選択し、その選
択されたQ-table15a〜15cを用いて量子化器14
bが量子化を行うようになっている。そのため、例え
ば、文字領域の黒文字部分については、画質優先で係数
の小さなQ-table(黒文字)15aを用いて高周波成分
を保持し、高周波成分の損失に起因する文字撚れやモス
キートノイズ等の発生を抑える一方、絵柄領域の中間調
画像部分については、圧縮率を稼いでも画質劣化が目立
たないことから、圧縮率優先で係数の大きなQ-table
(中間調)15cを用いる、といったことが可能とな
る。つまり、本実施形態のIPS10によれば、画像デ
ータの圧縮・伸張を行う場合であっても、エッジ/非エ
ッジの判定によらずに、画質劣化の発生防止と高圧縮率
とを実現しているので、データ圧縮に起因する高周波成
分の欠落による文字撚れ現象を改善しつつ、データ圧縮
時の高圧縮率を達成とし、しかもモスキートノイズ等に
よる画質劣化を防止するといった、3次元のトレードオ
フ項目の実現が可能である。
As described above, the IPS in this embodiment
Reference numeral 10 denotes SEL1 of the quantization table selection unit 15 in accordance with the result of the character / picture separation processing by the TI separation processing unit 12.
5d selects the optimal Q-tables 15a to 15c, and uses the selected Q-tables 15a to 15c to
b performs quantization. Therefore, for example, for a black character portion of a character area, high-frequency components are held using a Q-table (black character) 15a having a small coefficient with priority on image quality, and character twisting and mosquito noise due to loss of the high-frequency component are generated. On the other hand, in the halftone image portion of the picture area, even if the compression ratio is increased, the image quality degradation is not conspicuous,
(Halftone) 15c can be used. In other words, according to the IPS 10 of the present embodiment, even when performing compression / expansion of image data, prevention of image quality deterioration and high compression ratio can be realized without depending on edge / non-edge determination. The three-dimensional trade-off that achieves a high compression rate during data compression while preventing the character twisting phenomenon due to the lack of high-frequency components due to data compression, and prevents image quality degradation due to mosquito noise, etc. The realization of the item is possible.

【0047】特に、本実施形態のIPS10では、量子
化器14bが8×8画素のブロック単位で量子化を行う
とともに、量子化テーブル選択部15のSEL15dも
ブロック単位でQ-table15a〜15cの選択を切り替
えるようになっている。したがって、本実施形態のIP
S10は、静止画に対するデータ圧縮技術として広く用
いられているJPEG方式に対応するのに非常に好適な
ものとなる。
In particular, in the IPS 10 of the present embodiment, the quantizer 14b performs quantization in block units of 8 × 8 pixels, and the SEL 15d of the quantization table selection unit 15 selects the Q-tables 15a to 15c in block units. Is switched. Therefore, the IP of the present embodiment
S10 is very suitable for complying with the JPEG method widely used as a data compression technique for still images.

【0048】しかも、本実施形態のIPS10は、TI
分離処理部12から各画素毎に出力されるTI tagに基づ
いて、量子化テーブル選択部15のSEL15dが量子
化対象となるブロック中での黒文字画素数をカウント
し、そのカウント数と閾値との比較結果に応じてQ-tab
le15a〜15cの選択の切り替えを制御するようにな
っている。したがって、ブロック単位でQ-table15a
〜15cの選択を切り替える場合であっても、適切な切
り替えを行い得るようになる。
In addition, the IPS 10 of the present embodiment has a TI
Based on the TI tag output for each pixel from the separation processing unit 12, the SEL 15d of the quantization table selection unit 15 counts the number of black character pixels in the block to be quantized, and calculates Q-tab according to the comparison result
The switching of the selection of the le 15a to 15c is controlled. Therefore, Q-table 15a
Appropriate switching can be performed even in the case of switching the selection of ~ 15c.

【0049】なお、本実施形態では、JPEG方式のデ
ータ圧縮処理を例に挙げて説明したが、本発明はこれに
限定されるものではなく、例えばブロック単位ではない
固定長の圧縮方式を用いたものであっても、全く同様に
適用することができる。
In this embodiment, the JPEG data compression processing has been described as an example. However, the present invention is not limited to this. For example, a fixed length compression method that is not a block unit is used. Even if it is a thing, it can be applied exactly the same.

【0050】また、本実施形態では、本発明をデジタル
複写機に搭載された画像処理装置に適用した場合につい
て説明したが、本発明はこれに限定されるものではな
い。すなわち、画像データに対する量子化を行ってその
データ量を削減するとともに、文字/絵柄分離処理機能
を有したものであれば、他のシステムを構成するものに
も適用することが考えられる。
In the present embodiment, the case where the present invention is applied to an image processing apparatus mounted on a digital copying machine has been described, but the present invention is not limited to this. That is, image data may be quantized to reduce the amount of data, and may be applied to those constituting another system as long as it has a character / pattern separation processing function.

【0051】[0051]

【発明の効果】以上に説明したように、本発明の画像処
理装置は、テーブル切り替え手段が、文字領域と絵柄領
域とで、量子化手段が量子化を行う際に用いる量子化テ
ーブルを切り替えるようになっている。そのため、例え
ば、文字領域については、画質優先で係数の小さな量子
化テーブルを用いて高周波成分を保持し、高周波成分の
損失に起因する文字撚れやモスキートノイズ等の発生を
抑える一方、絵柄領域については、圧縮率を稼いでも画
質劣化が目立たないことから、圧縮率優先で係数の大き
な量子化テーブルを用いる、といったことが可能とな
る。つまり、画像データの圧縮・伸張を行う場合であっ
ても、エッジ/非エッジの判定によらずに、画質劣化の
発生防止と高圧縮率とを実現しているので、データ圧縮
に起因する高周波成分の欠落による文字撚れ現象を改善
しつつ、データ圧縮時の高圧縮率を達成とし、しかもモ
スキートノイズ等による画質劣化を防止するといった、
3次元のトレードオフ項目の実現が可能である。
As described above, in the image processing apparatus according to the present invention, the table switching means switches the quantization table used when the quantization means performs quantization between the character area and the picture area. It has become. For this reason, for example, for the character area, the high-frequency component is held using a quantization table with a small coefficient with priority on image quality, and the occurrence of character twisting and mosquito noise caused by loss of the high-frequency component is suppressed, while the picture area is Since the image quality degradation is not conspicuous even if the compression rate is increased, it is possible to use a quantization table having a large coefficient with priority on the compression rate. In other words, even in the case of compressing / expanding image data, prevention of image quality deterioration and high compression ratio are realized regardless of edge / non-edge determination. While improving the character twisting phenomenon due to missing components, achieving a high compression rate at the time of data compression, and preventing image quality deterioration due to mosquito noise etc.
It is possible to realize a three-dimensional trade-off item.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 本発明に係る画像処理装置の一例の機能構成
を示すブロック図である。
FIG. 1 is a block diagram illustrating a functional configuration of an example of an image processing apparatus according to the present invention.

【図2】 本発明に係る画像処理装置における処理動作
の一例を示すフローチャートである。
FIG. 2 is a flowchart illustrating an example of a processing operation in the image processing apparatus according to the present invention.

【図3】 従来におけるエッジ/非エッジの判定におい
て、エッジと判定された場合の具体例を示す説明図であ
り、(a)はあるブロックの濃度値の図、(b)は二次
元DCTにより変換された8×8DCT係数の図であ
る。
3A and 3B are explanatory diagrams showing a specific example of a conventional edge / non-edge determination when an edge is determined, where FIG. 3A is a diagram of density values of a certain block, and FIG. It is a figure of the 8x8 DCT coefficient converted.

【図4】 従来におけるエッジ/非エッジの判定におい
て、非エッジと判定された場合の具体例を示す説明図で
あり、(a)はあるブロックの濃度値の図、(b)は二
次元DCTにより変換された8×8DCT係数の図であ
る。
FIGS. 4A and 4B are explanatory diagrams showing a specific example in a case where a conventional edge / non-edge determination is made as a non-edge, where FIG. 4A is a diagram of density values of a certain block, and FIG. FIG. 8 is a diagram of 8 × 8 DCT coefficients converted by (1).

【図5】 高周波成分の損失による画像の撚れの一例を
示す説明図である。
FIG. 5 is an explanatory diagram illustrating an example of image twist due to loss of a high-frequency component.

【符号の説明】[Explanation of symbols]

10…IPS(画像処理装置)、12…TI分離処理
部、14a…DCT部、14b…量子化器、14c…ハ
フマン符号化部、15…量子化テーブル選択部、15a
…Q-table(黒文字)、15b…Q-table(色文字)、
15c…Q-table(中間調)、15d…SEL、16…
メモリ部、17a…ハフマン復号化部、17b…逆量子
化器、17c…IDCT部、18…フィルタリング部、
19…階調補正部
10 IPS (image processing device), 12 TI separation processing unit, 14a DCT unit, 14b quantizer, 14c Huffman encoding unit, 15 quantization table selection unit, 15a
... Q-table (black letters), 15b ... Q-table (color letters),
15c: Q-table (halftone), 15d: SEL, 16 ...
Memory unit, 17a Huffman decoding unit, 17b inverse quantizer, 17c IDCT unit, 18 filtering unit
19: gradation correction unit

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】 入力された画像データを文字領域と絵柄
領域とに分離する絵文字分離手段と、 予め設定された複数の量子化テーブルのいずれかを用い
て前記入力された画像データに対してデータ圧縮のため
の量子化を行う量子化手段と、 前記絵文字分離手段による分離結果を基に文字領域と絵
柄領域とで前記量子化手段が量子化を行う際に用いる量
子化テーブルを切り替えるテーブル切り替え手段とを備
えることを特徴とする画像処理装置。
1. A pictographic character separating means for separating input image data into a character area and a picture area, and using any one of a plurality of quantization tables set in advance for data of the input image data. Quantizing means for performing quantization for compression, and table switching means for switching a quantization table used when the quantizing means performs quantization between a character area and a picture area based on a separation result obtained by the pictorial character separating means. An image processing apparatus comprising:
【請求項2】 前記量子化手段は、複数画素からなるブ
ロック単位で前記画像データに対する量子化を行うもの
であり、 前記テーブル切り替え手段は、前記ブロック単位で前記
量子化テーブルの切り替えを行うものであることを特徴
とする請求項1記載の画像処理装置。
2. The image processing apparatus according to claim 1, wherein the quantization unit performs quantization on the image data in a unit of a block including a plurality of pixels, and the table switching unit performs switching of the quantization table in a unit of the block. The image processing apparatus according to claim 1, wherein:
【請求項3】 前記テーブル切り替え手段は、前記量子
化手段で処理対象となるブロック中での文字領域または
絵柄領域とされた画素数に基づいて前記量子化テーブル
の切り替えを制御するものであることを特徴とする請求
項2記載の画像処理装置。
3. The table switching means controls switching of the quantization table on the basis of the number of pixels in a block to be processed by the quantization means, which is a character area or a picture area. The image processing apparatus according to claim 2, wherein:
JP2000246136A 2000-08-15 2000-08-15 Image processing unit Pending JP2002064712A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000246136A JP2002064712A (en) 2000-08-15 2000-08-15 Image processing unit

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000246136A JP2002064712A (en) 2000-08-15 2000-08-15 Image processing unit

Publications (1)

Publication Number Publication Date
JP2002064712A true JP2002064712A (en) 2002-02-28

Family

ID=18736513

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000246136A Pending JP2002064712A (en) 2000-08-15 2000-08-15 Image processing unit

Country Status (1)

Country Link
JP (1) JP2002064712A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109051A (en) * 2004-10-05 2006-04-20 Sharp Corp Image encoder, image encoding method, image encoding program and computer readable recording medium which records image encoding program
JP2010021668A (en) * 2008-07-08 2010-01-28 Sharp Corp Image processing method, image processing apparatus, image forming apparatus equipped with it, image processing program, and recording medium

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006109051A (en) * 2004-10-05 2006-04-20 Sharp Corp Image encoder, image encoding method, image encoding program and computer readable recording medium which records image encoding program
JP2010021668A (en) * 2008-07-08 2010-01-28 Sharp Corp Image processing method, image processing apparatus, image forming apparatus equipped with it, image processing program, and recording medium

Similar Documents

Publication Publication Date Title
JP3466705B2 (en) How to decompress compressed images
JP4870743B2 (en) Selective chrominance decimation for digital images
JP3902968B2 (en) Image processing apparatus, control method therefor, computer program, and storage medium
JP2007336467A (en) Image compression apparatus, image reader with the same, image processor with image compression apparatus, image forming apparatus with the same, method of image compression processing, computer program hereof, and recording medium
EP0680202B1 (en) Image processing apparatus and method
US7149350B2 (en) Image compression apparatus, image depression apparatus and method thereof
JP2006191253A (en) Rate converting method and rate converter
WO2019003676A1 (en) Image processing device, image processing method, and program
JP3469438B2 (en) Image signal processing method and apparatus, recording medium
JPH09205647A (en) Image coder, image decoder and image processor
JP2002064712A (en) Image processing unit
JP2901656B2 (en) Image coding device
JP2004343334A (en) Image processing apparatus, image forming apparatus, image processing method, image processing program, and recording medium
JP4926128B2 (en) Image processing apparatus, image reading apparatus, image forming apparatus, computer program, recording medium, and image processing method
JP3190164B2 (en) Code amount estimation device
Singh Recent Patents on Image Compression- A Survey
JP3825871B2 (en) Image processing apparatus and method, and computer-readable recording medium storing image processing program code
JP2002247386A (en) Color image-processing device
JP2004274143A (en) Image processor and its method
JP2004112345A (en) Image processing apparatus, image processing method, and image processing program
JP3199786B2 (en) Image processing device
JP3778710B2 (en) Color image processing device
JPH06113140A (en) Picture processor
JP4711879B2 (en) Image processing apparatus, image forming apparatus, computer program, recording medium, and image processing method
JPH0622148A (en) Picture processor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040818

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070626

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071023