JPH11308444A - Image processing method and image processor - Google Patents

Image processing method and image processor

Info

Publication number
JPH11308444A
JPH11308444A JP10770698A JP10770698A JPH11308444A JP H11308444 A JPH11308444 A JP H11308444A JP 10770698 A JP10770698 A JP 10770698A JP 10770698 A JP10770698 A JP 10770698A JP H11308444 A JPH11308444 A JP H11308444A
Authority
JP
Japan
Prior art keywords
image processing
image data
image
digital
rough
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10770698A
Other languages
Japanese (ja)
Other versions
JP4162102B2 (en
Inventor
Takaaki Terashita
隆章 寺下
Original Assignee
Fuji Photo Film Co Ltd
富士写真フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP4011098 priority Critical
Priority to JP10-40110 priority
Application filed by Fuji Photo Film Co Ltd, 富士写真フイルム株式会社 filed Critical Fuji Photo Film Co Ltd
Priority to JP10770698A priority patent/JP4162102B2/en
Publication of JPH11308444A publication Critical patent/JPH11308444A/en
Application granted granted Critical
Publication of JP4162102B2 publication Critical patent/JP4162102B2/en
Anticipated expiration legal-status Critical
Application status is Expired - Lifetime legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To efficiently perform the decision of image processing conditions and an image processing to digital image data in the method and device for processing images for applying the image processing to the digital image data obtained by a digital camera.
SOLUTION: In this image processing method, the digital image data S are converted into rough image data RS in a rough image data preparation means 4, image processing conditions are decided in an automatic setup means 5 based on the data RS, the image processing is applied to the rough image data RS by the image processing conditions and they are displayed at an image display means 10. An operator observes displayed images and corrects the image processing conditions by an image correction means 11 and the corrected image processing conditions are stored in a second memory 6. An image data conversion means 7 reads the image processing conditions from the second memory 6, applies the image processing to the digital image data S based on the conditions and obtains processed image data S'. The processed image data S' are variably magnified, output converted and outputted from an output means 12.
COPYRIGHT: (C)1999,JPO

Description

【発明の詳細な説明】 DETAILED DESCRIPTION OF THE INVENTION

【0001】 [0001]

【発明の属する技術分野】本発明はデジタルカメラにより取得されたデジタル画像データに対して画像処理を施す画像処理方法および装置に関するものである。 The present invention relates to relates to an image processing method and apparatus performs image processing on the digital image data acquired by a digital camera.

【0002】 [0002]

【従来の技術】デジタル電子スチルカメラ(以下デジタルカメラとする)においては、撮影により取得した画像をデジタル画像データとしてデジタルカメラ内部に設けられた内部メモリやICカードなどの記録媒体に記憶し、記録されたデジタル画像データに基づいて、プリンタやモニタに撮影により取得した画像を表示することができる。 BACKGROUND OF THE INVENTION Digital electronic still camera (hereinafter called digital camera), and stores the image obtained by photographing in a recording medium such as an internal memory or an IC card provided in the digital camera as a digital image data, recorded based on the digital image data, an image obtained by photography to a printer or a monitor can be displayed. このように、デジタルカメラにより取得した画像をプリントする場合においては、ネガフイルムからプリントされた写真と同様の高品位な画質を有するものとすることが期待されている。 Thus, in the case of printing an image obtained by a digital camera it is expected to be assumed to have the same high image quality and photographs printed from negative film.

【0003】一方、従来よりカラーネガフイルムに記録された画像を読み取ってモニタに表示し、モニタに表示された画像を観察しながら画像処理条件を修正するようにした画像処理装置が提案されている(例えば特開昭5 On the other hand, reads the image recorded on conventionally color negative film displayed on the monitor, the image processing apparatus adapted to correct the image processing conditions while observing the image displayed on the monitor has been proposed ( For example, JP-A-5
6−62243号公報)。 6-62243 JP). また、画像処理が施されたデジタル画像データをモニタに表示し、表示された画像を確認した後に出力するようにした画像処理装置(例えば特開昭63−61591号公報、特開平6−24252 Also, to display the digital image data subjected to the image processing to the monitor, the image processing apparatus (for example, JP 63-61591 discloses that to output after confirming the displayed image, Hei 6-24252
2号公報)も提案されている。 2 No.) has been proposed. さらには、ネガフイルムに記録された画像を読み取ってプリントする際の画像処理条件を決定し、この画像処理条件に基づいて画像処理が施された画像データをモニタに表示し、モニタに表示された画像を観察しながら画像処理条件を修正し、この修正された画像処理条件に基づいて画像データに対して画像処理を施すようにした画像処理装置も提案されている(特開平7−5593号公報)。 Furthermore, to determine the image processing conditions for printing read images recorded on a negative film, this based on the image processing condition to display the image data subjected to the image processing on the monitor, which is displayed on the monitor Correct observation while the image processing condition image, the image processing apparatus is also proposed (JP-a-7-5593 discloses that to perform image processing on the image data based on the corrected image processing condition ). このような画像処理装置においては、処理される画像データはネガフイルムなどから読み取られた画像データであるが、デジタルカメラにより取得したデジタル画像データに対して同様の処理を行うことも可能である。 In such an image processing apparatus, image data to be processed is an image data read from such a negative film, it is also possible to perform the same processing on the digital image data acquired by a digital camera.

【0004】図3はデジタルカメラにより取得したデジタル画像データに対して処理を施す従来の画像処理装置の構成を示すブロック図である。 [0004] FIG. 3 is a block diagram showing the configuration of a conventional image processing apparatus which performs processing on the digital image data acquired by a digital camera. 図3に示すように、従来の画像処理装置は、デジタルカメラ内の記録媒体からデジタル画像データSを入力する画像データ入力手段3 As shown in FIG. 3, the conventional image processing apparatus, the image data input means 3 for inputting the digital image data S from a recording medium in the digital camera
1と、デジタル画像データSが圧縮されている場合に伸長するとともに、画像データSの各種ファイルフォーマットを本装置において処理可能なファイルフォーマットに変換する画像伸長/フォーマット変換手段32と、デジタル画像データSを一時記憶する画像データメモリ3 1, as well as extended when the digital image data S is compressed, the image expansion / format conversion unit 32 for converting the various file formats of the image data S can be processed file format in the device, the digital image data S image data memory 3 for temporarily storing
3と、デジタル画像データSの画素数を減らしてラフ画像データRSを作成するラフ画像データ作成手段34 3, the rough image data creating means 34 for creating a rough image data RS by reducing the number of pixels the digital image data S
と、デジタル画像データSを出力手段42により適正な画像として出力するための画像処理条件を自動的に決定するオートセットアップ手段35と、オートセットアップ手段35において決定された画像処理条件に基づいてデジタル画像データSに対して画像処理を施して処理済み画像データS′を得る画像データ変換手段37と、出力サイズに適するように処理済み画像データS′を拡大・縮小する変倍手段38と、処理済み画像データS′を出力手段42に適した出力画像データS″に変換する出力変換手段39と、出力変換手段において変換された出力画像データを表示するモニタなどの画像表示手段40 If, auto setup means 35 for automatically determining the image processing conditions for outputting the digital image data S as an appropriate image by the output unit 42, a digital image based on the image processing conditions determined in the auto setup means 35 performs image processing processed image data S to the data S and scaling means 38 scale the 'image data conversion means 37 to obtain the processed image data S to be suitable for output size', processed an output conversion unit 39 for converting the output image data S "suitable output means 42 image data S ', the image display unit such as a monitor for displaying the output image data converted in the output conversion unit 40
と、画像表示手段40に表示された画像を観察しながら画像処理条件をマニュアル修正するための画像修正手段41とを備える。 If, and an image correcting unit 41 for manually correcting the image processing conditions while observing the image displayed on the image display unit 40.

【0005】このような画像処理装置においては、画像データ変換手段37において、オートセットアップ手段35により決定された画像処理条件に基づいてデジタル画像データSに対して画像処理が施され、さらに変倍、 [0005] In such an image processing apparatus, the image data conversion unit 37, image processing on the digital image data S on the basis of the automatic set-up means 35 image processing conditions determined by is performed, further scaling,
出力変換がなされて出力画像データS″が画像表示手段40に表示される。オペレータは画像表示手段40に表示された画像を観察しながら画像修正手段41により画像処理条件を修正する。修正された画像処理条件は画像データ変換手段37に入力され、ここで処理済み画像データS′に対して再度処理を施すか、またはデジタル画像データSに対して修正された画像処理条件に基づいて処理を施す。そして再度の画像処理が施されることにより得られた処理済み画像データS′は再度変倍、出力変換がなされて出力手段42から出力される。 Output conversion output image data S "is made is displayed on the image display unit 40. The operator corrects the image processing conditions. Corrected by the image correction means 41 while observing the image displayed on the image display unit 40 image processing condition is input to the image data conversion unit 37 performs processing based on where the processed image subjected to the processing again for the data S 'or the digital image data S modified image processing conditions for . the processed image data S 'is again variable power obtained by the image processing again is performed, the output conversion is output from the output means 42 is made.

【0006】図4は別の画像処理装置の構成を示すブロック図である。 [0006] FIG. 4 is a block diagram showing the configuration of another image processing apparatus. なお、図4において図3と同一の構成については同一の参照番号を付し、詳細な説明は省略する。 Note that the same reference numbers are used for the same configuration as FIG. 3 in FIG. 4, a detailed description thereof will be omitted. 図4に示す画像処理装置は、画像データ変換手段3 The image processing apparatus shown in FIG. 4, the image data conversion means 3
7において得られた処理済み画像データS′を、変倍、 The resulting processed image data S 'in the 7, zooming,
出力変換することなく画像表示手段40に表示して画像修正手段41により修正するようにしたものである。 And displayed on the image display unit 40 without outputting conversion is obtained so as to correct the image correction means 41. この図4に示す画像処理装置によれば、図3に示す画像処理装置と比較して、処理済み画像データS′を画像表示手段40に表示する前に変倍、出力変換を行う必要がないため、処理時間を短縮することができる。 According to the image processing apparatus shown in FIG. 4, as compared with the image processing apparatus shown in FIG. 3, there is no need to perform zooming, the output conversion before displaying the processed image data S 'to the image display unit 40 Therefore, it is possible to shorten the processing time.

【0007】 [0007]

【発明が解決しようとする課題】しかしながら、一旦画像処理が施されたデジタル画像データは画像処理により濃度、色あるいは階調が修正されており、修正が適切でないと色の飛び、濃度の飽和などが生じて、画像データのデータ値が失われていることが多い。 [SUMMARY OF THE INVENTION However, once the digital image data subjected to image processing has been fixed concentration, color or gradation by image processing, modification flew in the not proper colors, the concentration of saturated such as is generated, it is often the data value of the image data is lost. このため、上記図3に示す画像処理装置において処理済み画像データに対してさらに修正された画像処理条件により処理を施しても、失われたデータを元に戻すことはできず、その結果所望とする画像処理が施された処理済み画像データを得ることができなかった。 Therefore, even when subjected to a treatment by further modified image processing conditions for the processed image data in the image processing apparatus shown in FIG. 3, it can not be undone lost data, and the result desired image processing for could not obtain a processed image data subjected. この際、修正された画像処理条件により元のデジタル画像データに対して画像処理を施せばこのような問題は生じない。 In this case, such a problem does not occur if Hodokose image processing on the original digital image data by the modified image processing conditions. しかしながら、画像データ変換手段において画像処理を行っている最中にはオートセットアップ手段において他の画像データの画像処理条件を求めることができないため、画像処理が終了して画像が出力され次の画像データの処理を開始するまでに待ち時間が生じることから効率よく処理を行うことができなかった。 However, since the middle of performing an image process in the image data converting means is not able to determine the image processing conditions of the other image data in the automatic setup means, the next image data the image processing is outputted image ends could not be performed efficiently processed from the waiting time until the start of the process occurs. また、上記図4に示す画像処理装置においては図3に示す画像処理装置よりも処理時間を短縮することができるものの、1つの画像データに対して画像処理を行っている最中には他の画像データの画像処理条件をオートセットアップ手段において求めることができないため、効率よく処理を行うことができなかった。 Although the image processing apparatus shown in FIG. 4 it is possible to shorten the processing time than the image processing apparatus shown in FIG. 3, the other is the middle of performing image processing on one image data it is not possible to determine the image processing conditions of the image data in the automatic setup means, can not be performed efficiently processing.

【0008】本発明は上記事情に鑑みなされたものであり、効率よく画像処理を行うことができる画像処理方法および装置を提供することを目的とするものである。 [0008] The present invention has been made in view of the above circumstances, it is an object to provide an image processing method and apparatus capable of efficiently image processing.

【0009】 [0009]

【課題を解決するための手段】本発明による画像処理方法は、デジタルカメラにより取得されたデジタル画像データに基づいて該デジタル画像データに対する画像処理条件を決定し、該画像処理条件に基づいて前記デジタル画像データに対して画像処理を施して処理済み画像データを得る画像処理方法において、前記画像処理条件を画像処理条件記憶手段に記憶し、該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施すことを特徴とするものである。 The image processing method according to the present invention, in order to solve the problems], based on the digital image data acquired by a digital camera to determine an image processing condition for said digital image data, the digital on the basis of the image processing conditions an image processing method for obtaining processed image data by performing image processing on the image data, the image processing condition stored in the image processing condition storage means, the digital image data on the basis of the stored image processing condition it is characterized in performing image processing.

【0010】また、本発明による画像処理方法においては、前記デジタル画像データから画素数を減らしたラフ画像データを作成し、該ラフ画像データに基づいて前記画像処理条件を決定することが好ましい。 [0010] In the image processing method according to the invention, to create a rough image data with a reduced number of pixels from the digital image data, it is preferable to determine the image processing conditions on the basis of the rough image data.

【0011】さらにこの場合、前記ラフ画像データに対して前記画像処理条件に基づいて画像処理を施して処理済みラフ画像データを得、該処理済みラフ画像データを可視像として表示し、該表示された処理済みラフ画像データに基づいて修正された前記画像処理条件を前記画像処理条件記憶手段に記憶することが好ましい。 [0011] Further, in this case, the rough image data to be subjected to image processing based on the image processing conditions to obtain a processed rough image data, and displays the processed rough image data as a visible image, the display preferably stores have been processed rough image data the image processing conditions modified based on the image processing condition storage means.

【0012】また、本発明による画像処理方法においては、前記デジタル画像データに対する画像処理条件を決定し、該画像処理条件を前記画像処理条件記憶手段に記憶する行程と、該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す行程とをそれぞれ独立して行うことが好ましい。 [0012] In the image processing method according to the present invention, the image processing conditions determined for the digital image data, a step of storing the image processing conditions in the image processing condition storage means, the stored image processing conditions it is preferred to carry out the digital image data, respectively and a step of performing image processing independently for based on.

【0013】本発明による画像処理装置は、デジタルカメラにより取得されたデジタル画像データに基づいて該デジタル画像データに対する画像処理条件を決定する画像処理条件決定手段と、該画像処理条件決定手段において決定された画像処理条件に基づいて前記デジタル画像データに対して画像処理を施して処理済み画像データを得る画像処理手段とを備えた画像処理装置において、前記画像処理条件を記憶する画像処理条件記憶手段をさらに備え、前記画像処理手段は、該画像処理条件記憶手段に記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す手段であることを特徴とするものである。 [0013] The image processing apparatus according to the present invention, an image processing condition determining means for determining an image processing condition for the digital image data based on the digital image data acquired by a digital camera are determined in the image processing condition determining means an image processing apparatus and image processing means for obtaining processed image data by performing image processing upon the digital image data based on the image processing conditions, the image processing condition storage means for storing the image processing conditions further comprising, said image processing means is characterized in that based on the image processing condition stored in the image processing condition storage means is means for performing image processing on the digital image data.

【0014】また、本発明による画像処理装置においては、前記デジタル画像データから画素数を減らしたラフ画像データを作成するラフ画像データ作成手段をさらに備え、前記画像処理条件決定手段は該ラフ画像データに基づいて前記画像処理条件を決定する手段であることが好ましい。 [0014] In the image processing apparatus according to the present invention further comprises a rough image data creating means for creating rough image data with a reduced number of pixels from the digital image data, the image processing condition determining means the rough image data it is preferably a means for determining the image processing conditions based on.

【0015】さらにこの場合、前記ラフ画像データに対して前記画像処理条件に基づいて画像処理を施して処理済みラフ画像データを得、該処理済みラフ画像データを可視像として表示するラフ画像表示手段と、該ラフ画像表示手段に表示された処理済みラフ画像データに基づいて前記画像処理条件を修正する修正手段とをさらに備え、前記画像処理条件記憶手段には該修正された画像処理条件が記憶されるようにすることが好ましい。 [0015] Further, in this case, the resulting processed rough image data by performing image processing based on the image processing condition for the rough image data, rough image display for displaying the processed rough image data as a visible image means and, said further a correction means for correcting the image processing conditions based on the displayed processed rough image data to the rough image display means, said image processing condition image processing conditions are the modified in the storage means it is preferable to be stored.

【0016】また、本発明による画像処理装置においては、前記デジタル画像データに対する画像処理条件を決定し、該画像処理条件を前記画像処理条件記憶手段に記憶する行程と、該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す行程とをそれぞれ独立して行うことが好ましい。 [0016] In the image processing apparatus according to the present invention, the image processing conditions determined for the digital image data, a step of storing the image processing conditions in the image processing condition storage means, the stored image processing conditions it is preferred to carry out the digital image data, respectively and a step of performing image processing independently for based on.

【0017】 [0017]

【発明の効果】本発明の画像処理方法および装置によれば、画像処理条件を画像処理条件記憶手段に記憶するようにしたため、決定された画像処理条件を順次画像処理条件記憶手段に記憶する一方で、決定された画像処理条件を画像処理条件記憶手段から読み出してデジタル画像データに対して画像処理を行うことができる。 According to the image processing method and apparatus of the present invention, since so as to store the image processing condition to the image processing condition storage means, while storing the determined image processing condition sequentially to the image processing condition storage unit in, it is possible to perform image processing on the digital image data by reading the determined image processing condition from the image processing condition storage means. このように本発明においては、画像処理条件の決定とこの画像処理条件に基づく画像処理とを並列に行うことができるため、次の画像データの画像処理条件を決定するまでの待ち時間がなくなり、これによりデジタル画像データに対する画像処理を効率よく行うことができる。 Thus in the present invention, since the determination of the image processing conditions and the image processing based on the image processing condition can be performed in parallel, there is no waiting time for determining the image processing conditions of the next image data, Thus it is possible to efficiently perform image processing on digital image data.

【0018】また、デジタル画像データから画素数を減らしたラフ画像データに基づいて画像処理条件を決定することにより演算時間を短縮することができ、これにより画像処理条件の決定を高速に行うことができる。 [0018] Based on the digital image data to the rough image data with a reduced number of pixels can be shortened operation time by determining the image processing conditions, thereby performing the determination of the image processing conditions in a high speed it can.

【0019】さらに、ラフ画像データに対して画像処理を施して処理済みラフ画像データを得、この処理済みラフ画像データを可視像として表示して画像処理条件を修正することにより、上述した従来の画像処理装置と比較して画像処理が施された画像の表示までの時間を短縮することができ、これにより一層効率よく画像処理を行うことができる。 Furthermore, subjected to obtain the processed rough image data image processing on the rough image data, by modifying the image processing condition show this processed rough image data as a visible image, the above-mentioned conventional can image processing as compared with the image processing apparatus to shorten the time until the display of the image subjected, thereby it is possible to perform more efficiently image processing. また、上述したオートセットアップ手段において決定された画像処理条件を修正し、修正した画像処理条件によりデジタル画像データに対して画像処理を施すことができるため、適切な画像処理を効率よく行うことができる。 Also, to correct the image processing conditions determined in the auto setup means described above, it is possible by modifying the image processing condition performs image processing on the digital image data, it is possible to perform appropriate image processing efficiently .

【0020】また、画像処理条件を画像処理条件記憶手段に記憶する行程と、デジタル画像データに対して画像処理を施す行程とを独立して行うことにより、画像処理条件の記憶および画像処理を効率よく行うことができる。 Further, the step of storing the image processing condition to the image processing condition storage means, by performing independently a step of performing image processing on the digital image data, efficiency storage and image processing of the image processing conditions it can be carried out well.

【0021】 [0021]

【発明の実施の形態】以下図面を参照して本発明の実施形態について説明する。 DETAILED DESCRIPTION OF THE INVENTION Referring to the drawings will be described embodiments of the present invention.

【0022】図1は本発明の実施形態による画像処理装置の構成を示すブロック図である。 [0022] FIG. 1 is a block diagram showing the configuration of an image processing apparatus according to an embodiment of the present invention. 図1に示すように、 As shown in FIG. 1,
本発明による画像処理装置は、デジタルカメラ内の記録媒体からデジタル画像データSを入力する画像データ入力手段1と、デジタル画像データSが圧縮されていることから圧縮されたデジタル画像データSを伸長するとともに、デジタル画像データSの各種ファイルフォーマットを本装置において処理可能なファイルフォーマットに変換する画像伸長/フォーマット変換手段2と、デジタル画像データSを一時記憶する第1のメモリ3と、デジタル画像データSの画素数を減らしてラフ画像データR The image processing apparatus according to the present invention decompresses image data input unit 1 for inputting digital image data S from a recording medium in the digital camera, the digital image data S, which is compressed from the digital image data S is compressed together with an image decompression / format conversion unit 2 for converting the processable file format in the device of various file formats of the digital image data S, the first memory 3 which temporarily stores the digital image data S, the digital image data S rough image data R by reducing the number of pixels
Sを作成するラフ画像データ作成手段4と、デジタル画像データSをプリンタなどの出力手段12により適正な画像として出力するための画像処理条件を自動的に決定するオートセットアップ手段5と、オートセットアップ手段5において決定された画像処理条件を記憶する第2 A rough image data creating means 4 for creating S, the automatic set-up means (5) for automatically determining the image processing conditions for outputting the digital image data S as an appropriate image by an output device 12 such as a printer, automatic set-up means the stores the determined image processing conditions in 5 2
のメモリ6と、第2のメモリ6に記憶された画像処理条件に基づいてデジタル画像データSに対して画像処理を施して処理済み画像データS′を得る画像データ変換手段7と、出力手段12における出力サイズに適するように処理済み画像データS′に対して補間演算を施して拡大・縮小を行う変倍手段8と、処理済み画像データS′ A memory 6, an image data conversion means 7 to obtain by performing image processing processed image data S 'with respect to the digital image data S on the basis of the second memory 6 to the stored image processing condition, the output unit 12 the processed image data S to be suitable for the output size of 'zooming means 8 for performing scaling by performing interpolation operation on the processed image data S'
を出力手段12に適した出力画像データS″に変換する出力変換手段9と、オートセットアップ手段5において決定された画像処理条件に基づいてラフ画像データRS The output conversion unit 9 for converting the output image data S "suitable output means 12, the automatic set-up means rough image data based on the determined image processing condition in 5 RS
に対して画像処理を施し、画像処理が施されたラフ画像データRSを可視像として表示するためのCRTモニタなどの画像表示手段10と、オペレータが画像表示手段10に表示された画像を観察しながら画像処理条件をマニュアル修正するための画像修正手段11とを備える。 Observing subjected to image processing, the rough image data RS subjected to image processing and image display means 10 such as a CRT monitor for displaying a visible image, an image operator is displayed on the image display unit 10 with respect to and an image correcting unit 11 for manually correcting the image processing conditions while.

【0023】第1のメモリ3は単にデジタル画像データSを記憶するのみならず、入力した全ての画像の処理が終了したこと、あるいは順次デジタル画像データSを読み出している場合は1つのデジタル画像データSの処理が終了したことを表す信号を画像入力手段1に入力し(図1の破線参照)、処理の終了あるいは次のデジタル画像データの読出しを行わせるものである。 [0023] Not only the first memory 3 simply stores the digital image data S, entered all that processing of the image is completed, or sequential digital image of one when the data are read out S digital image data inputs a signal indicating that the processing of S has been completed to the image input unit 1 (see the broken line in FIG. 1) is the end of the process or that causes the reading of the next digital image data.

【0024】ラフ画像データ作成手段4においては、デジタル画像データSの画素数を減らすことによりラフ画像データRSが作成される。 [0024] In the rough image data generating means 4, the rough image data RS is generated by reducing the number of pixels the digital image data S. すなわち、デジタルカメラに応じてデジタル画像データSの画素数は異なり数十万画素から数百万画素ある。 That is, the number of pixels the digital image data S is millions of pixels from different number hundreds of thousands of pixels in accordance with the digital camera. 画像処理条件を決定するためには数千から数万の画素で十分であり、ラフ画像データ作成手段4はこの程度の画素数にまで画素数を減らしてラフ画像データRSを作成する。 Is sufficient tens of thousands of pixels from the thousands in order to determine the image processing conditions, the rough image data generating unit 4 creates a rough image data RS by reducing the number of pixels to the number of pixels of this degree.

【0025】ラフ画像データRSは、デジタル画像データSの画素を一定間隔で間引くことにより作成してもよく、複数個(例えば5×5)の画素値の平均値を求めてこれをラフ画像データRSとしてもよく、さらにこれと画素を間引くことにより得られたラフ画像データRSとを用いて平均値の精度を向上させるようにしてもよい。 The rough image data RS may be prepared by thinning the pixels of the digital image data S at regular intervals, a plurality (e.g., 5 × 5) of the rough image data with the average of the pixel values may be a RS, it may be to improve the accuracy of the average value by using the rough image data RS obtained by further thinning this pixel.
通常、デジタルカメラにより取得されたデジタル画像データSは8ビットの比較的粗い値を有しており、さらにシャドー側には電気的なノイズが含まれる。 Normally, the digital image data S acquired by a digital camera has a relatively rough value of 8 bits, the more the shadow side include electrical noise. したがって、複数個の画素の平均値を求め、これをラフ画像データRSとすることにより、演算時間は長くなるものの画素値の精度を向上させることができる。 Accordingly, the average value of a plurality of pixels, which by the rough image data RS, calculation time can improve the accuracy of the pixel values ​​of those longer. 一方、デジタル画像データSの画素を間引くことによりラフ画像データRSを作成する方法は、容易かつ短時間でラフ画像データRSを求めることができるが、画素値の精度はそれほどよくないものである。 Meanwhile, a method of creating a rough image data RS by thinning out pixels of the digital image data S, which can be obtained rough image data RS easily and in a short time, the accuracy of the pixel value is one not so good.

【0026】さらに、ラフ画像データRSを求める方法としては、デジタル画像データSの画素を一定間隔で間引いた後複数個の画素値の平均値を求めてこれをラフ画像データRSとする方法、複数個の画素値の平均値を求めた後これらの画素を間引いてこれをラフ画像データR Furthermore, as a method for obtaining a rough image data RS is how to do this by the average value of a plurality of pixel values ​​and the rough image data RS after thinning out the pixels of the digital image data S at regular intervals, a plurality This rough image data R by thinning out these pixels after the average value of pixels values
Sとする方法など、種々の方法を用いることができる。 And a method in which the S, can be used a variety of methods.

【0027】オートセットアップ手段5において決定される画像処理条件としては、画像の濃度、色、階調、階調バランスの他、覆い焼きやシャープネス強調、粒状改良処理、モアレ除去処理なども含まれるものである。 Examples of the image processing conditions determined in the auto setup unit 5, image density, color, gray scale, other tone balance, dodging and sharpness enhancement, granularity improvement process, which is also included, such as moiré elimination processing it is.

【0028】画像データ変換手段7はオートセットアップ手段5において決定された画像処理条件に基づいてデジタル画像データSに対して画像処理を施す。 The image data converting unit 7 performs image processing on the digital image data S on the basis of the automatic set-up means the image processing conditions determined in 5. また、出力手段12や出力媒体など本実施形態を内包する画像システムに最適化した固定パラメータによるデジタル画像データSの変換も同時に行うようにしてもよい。 It is also possible to carry out simultaneously converts the digital image data S by optimized fixed parameters imaging system containing the present embodiment such as the output unit 12 or output medium. これらの変換はルックアップテーブルやマトリクス演算により行うものである。 These conversions is performed by a lookup table or matrix operation.

【0029】出力変換手段9は処理済み画像データS′ The output converting means 9 processed image data S '
を出力手段12に対応した出力画像データS″に変換する。なお、本実施形態においては、画像データ変換手段7における固定パラメータによる画像データの変換を出力変換手段9において行うようにしてもよい。 Into an output image data S "corresponding to the output unit 12 a. In the present embodiment, may be performed to convert the image data by a fixed parameter in the image data conversion means 7 at the output conversion unit 9.

【0030】画像表示手段10においては、画像処理が施されたラフ画像データRSが可視像として表示されるが、表示のための画素数変換、表示系と出力画像との一致を図るための階調修正、色修正、エッジ強調などの処理を行うようにしてもよい。 [0030] In the image display unit 10 is rough image data RS subjected to image processing is displayed as a visible image, conversion of the number of pixels for the display, for achieving a match with the display system and the output image gradation corrected, color correction may be performed processing such as edge enhancement.

【0031】画像修正手段11は、画像表示手段10に表示された画像をオペレータが観察しながら、画像の色、濃度、階調などを、キーボード、マウス、タッチボード等からマニュアル入力により修正するためのものである。 The image correction means 11, while the image displayed on the image display unit 10 operator observation, image color, density, gradation and the like, a keyboard, a mouse, to correct by manual input from the touchpad or the like belongs to.

【0032】次いで、本実施形態の動作について説明する。 [0032] Next, the operation of this embodiment will be described. まず画像データ入力手段1よりデジタルカメラの記録媒体からデジタル画像データSが入力され、画像伸長/フォーマット変換手段2においてデジタル画像データSの伸長およびフォーマットの変換が行われ、第1のメモリ3にデジタル画像データSが記録される。 First, the image data the digital image data S from a recording medium of the digital camera from the input unit 1 is input, the image expansion / format conversion unit 2 is extended and format conversion of the digital image data S is performed, the digital to the first memory 3 image data S is recorded. ラフ画像データ作成手段4は第1のメモリ3からデジタル画像データSを読み出し、デジタル画像データSの画素数を減らしてラフ画像データRSを作成し、オートセットアップ手段5に入力する。 Rough image data generating unit 4 reads the digital image data S from the first memory 3, by reducing the number of pixels the digital image data S to create a rough image data RS, and inputs to the auto setup means 5. オートセットアップ手段5においてはラフ画像データRSに基づいてデジタル画像データSに対する画像処理条件が決定される。 The image processing conditions are determined for the digital image data S on the basis of the rough image data RS is in the automatic setup means 5. 決定された画像処理条件は第2のメモリ6に記憶されるとともに、画像表示手段10に入力される。 Determined image processing conditions while being stored in the second memory 6 is input to the image display unit 10. 画像表示手段10においては、入力された画像処理条件に基づいてラフ画像データRSに対して画像処理を施し、画像処理が施されたラフ画像データRSが可視像として表示される。 In the image display unit 10 performs image processing on the rough image data RS based on the input image processing conditions, the rough image data RS subjected to image processing is displayed as a visible image. オペレータは画像表示手段10に表示された画像を観察しながら画像修正手段11によりマニュアルで画像処理条件を修正する。 The operator modifies the image processing condition manually by the image correcting means 11 while observing the image displayed on the image display unit 10. 修正された画像処理条件は第2のメモリ6に記憶される。 Modified image processing condition is stored in the second memory 6. なお、この際、オートセットアップ手段5において決定された画像処理条件と修正された画像処理条件とをともに第2のメモリ6に記憶しておくことにより、 It is to be noted that, by this time, and stores the image processing condition is corrected with the image processing conditions determined in the auto setup means 5 both in the second memory 6,
再度の修正を行う際に画像処理条件をまた決定する必要がなくなるため好ましい。 It preferred because it is not necessary to also determine the image processing conditions when performing the re-corrected.

【0033】画像データ変換手段7は第2のメモリ6に記憶された画像処理条件(修正されたもの)に基づいて第1のメモリ3に記憶されたデジタル画像データSに対して画像処理を施して処理済み画像データS′を得る。 The image data converting unit 7 performs image processing on the digital image data S stored in the first memory 3 on the basis of the second memory 6 to the stored image processing conditions (those that have been modified) obtaining processed image data S 'Te.
処理済み画像データS′は変倍手段8に入力されて拡大・縮小処理が施され、さらに出力手段9において出力手段12に適合した処理が施されて出力画像データS″が得られる。出力画像データS″は出力手段12に入力され、ここでプリント画像として再生される。 Processed image data S 'is scaling processing is input to the scaling means 8 is performed, the process adapted to obtain an output image data S "is applied to the output unit 12 further in the output unit 9. Output image data S "is inputted to the output unit 12, is reproduced herein as the print image.

【0034】このように、本実施形態においてはオートセットアップ手段5において決定された画像処理条件を記憶する第2のメモリ6を設けるようにしたため、画像処理条件の決定とデジタル画像データSに対する画像処理とをそれぞれ独立して行うことができる。 [0034] Thus, since in this embodiment was set to provide a second memory 6 for storing the auto-setup means image processing conditions determined in 5, the image processing for determining the digital image data S of the image processing conditions DOO can be a carried out independently. すなわち、 That is,
ラフ画像データRSの作成、画像処理条件の決定、画像の表示および画像の修正を第1の行程、デジタル画像データSに対する画像処理、変倍、出力変換および出力を第2の行程とするならば、第1の行程における画像処理条件を決定および修正して第2のメモリ6に記憶する作業と、第2の行程における画像処理条件に基づくデジタル画像データSへの画像処理とを並列に行うことができる。 Creating rough image data RS, determining the image processing conditions, the display and the image first step a correction of the image, the image processing for the digital image data S, zooming, if the output conversion and output to the second stage , by performing the operations of storing in the second memory 6 to determine and correct the image processing conditions in the first step, and an image processing to the digital image data S based on the image processing conditions in the second stage in parallel can. したがって、画像処理条件の決定および画像処理を効率よく行うことができる。 Therefore, it is possible to perform the determination and image processing of the image processing condition efficiently. さらに、第1の行程を行う装置と第2の行程を行う装置とを別個に設けてもよく、 Further it may be provided a device and for performing device and a second step of performing a first stroke separately,
第1の行程を行う装置1台に対して第2の行程を行う装置を複数台設けて処理を行ってもよく、第2の行程を行う装置1台に対して第1の行程を行う装置を複数台設けて処理を行ってもよい。 May the apparatus for performing the second stage to the apparatus one performing the first stroke by performing a plurality provided processing apparatus for performing a first stroke to the apparatus one performing the second step the may be performed a plurality provided process.

【0035】また、ラフ画像データRSに基づいて画像処理条件を決定するとともに、ラフ画像データRSに対して画像処理を施して画像表示手段10に表示するようにしたため、画像処理および画像表示のための演算時間を短縮することができる。 Further, and it determines the image processing conditions on the basis of the rough image data RS, due to be displayed on the image display unit 10 performs image processing on the rough image data RS, image processing and image display for it is possible to shorten the calculation time.

【0036】なお、上記実施形態においては画像伸長/ [0036] In the above embodiment the image decompression /
フォーマット変換手段2において変換されたデジタル画像データSを第1のメモリ3に記憶しているが、図2に示すように、第1の行程および第2の行程とでそれぞれ別個に画像伸長/フォーマット変換手段2A,2Bを設けるようにしてもよい。 Although the digital image data S converted by the format conversion unit 2 are stored in the first memory 3, as shown in FIG. 2, separably image expansion in the first stroke and the second stroke / Format converting means 2A, it may be provided 2B. すなわち、図1に示す実施形態においては、第1のメモリ3に記憶されるデジタル画像データは伸長されているため容量が大きいが、図2に示す実施形態においては、デジタルカメラの記録媒体から読み出されて圧縮された状態のデジタル画像データSが第1のメモリ3に記憶されるため、図1に示す実施形態と比較してより多くのデジタル画像データSを第1のメモリ3に記憶することが可能となる。 That is, in the embodiment shown in FIG. 1, the digital image data stored in the first memory 3 is large capacity because it is extended, in the embodiment shown in FIG. 2, read from the recording medium of the digital camera since the digital image data S issued a state of being compressed is stored in the first memory 3, to store more digital image data S to the first memory 3 as compared with the embodiment shown in FIG. 1 it becomes possible.

【0037】なお、上記実施形態においては、デジタルカメラと別個に画像処理装置を設けているが、デジタルカメラに本発明による画像処理装置を設けるようにしてもよい。 [0037] In the above embodiment, is provided with the digital camera separately from the image processing apparatus may be provided an image processing apparatus according to the present invention to a digital camera.

【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS

【図1】本発明の実施形態による画像処理装置の構成を示すブロック図 Block diagram showing the configuration of an image processing apparatus according to an embodiment of the present invention; FIG

【図2】本発明の他の実施形態による画像処理装置の構成を示すブロック図 Block diagram showing the configuration of an image processing apparatus according to another embodiment of the present invention; FIG

【図3】従来の画像処理装置の構成を示すブロック図 FIG. 3 is a block diagram showing the configuration of a conventional image processing apparatus

【図4】従来の画像処理装置の構成を示すブロック図 4 is a block diagram showing a configuration of a conventional image processing apparatus

【符号の説明】 DESCRIPTION OF SYMBOLS

1 画像データ入力手段 2 画像伸長/フォーマット変換手段 3 第1のメモリ 4 ラフ画像データ作成手段 5 オートセットアップ手段 6 第2のメモリ 7 画像データ変換手段 8 変倍手段 9 出力変換手段 10 画像表示手段 11 画像修正手段 12 出力手段 S デジタル画像データ S′ 処理済み画像データ S″ 出力画像データ RS ラフ画像データ 1 image data input section 2 the image decompression / format conversion unit 3 the first memory 4 rough image data creating unit 5 automatic set-up means 6 the second memory 7 the image data conversion means 8 scaling means 9 output conversion unit 10 the image displaying unit 11 image correcting means 12 output means S digital image data S 'processed image data S "output image data RS rough image data

Claims (8)

    【特許請求の範囲】 [The claims]
  1. 【請求項1】 デジタルカメラにより取得されたデジタル画像データに基づいて該デジタル画像データに対する画像処理条件を決定し、該画像処理条件に基づいて前記デジタル画像データに対して画像処理を施して処理済み画像データを得る画像処理方法において、 前記画像処理条件を画像処理条件記憶手段に記憶し、該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施すことを特徴とする画像処理方法。 1. A based on the digital image data acquired by a digital camera to determine an image processing condition for said digital image data, the image processing processed by carrying out image processing on the digital image data based on a condition an image processing method for obtaining the image data, image processing method, wherein the image processing conditions stored in the image processing condition storage means, performs image processing on the digital image data on the basis of the stored image processing condition .
  2. 【請求項2】 前記デジタル画像データから画素数を減らしたラフ画像データを作成し、該ラフ画像データに基づいて前記画像処理条件を決定することを特徴とする請求項1記載の画像処理方法。 Wherein said digital image data to create a rough image data with a reduced number of pixels from the image processing method according to claim 1, wherein determining the image processing conditions on the basis of the rough image data.
  3. 【請求項3】 前記ラフ画像データに対して前記画像処理条件に基づいて画像処理を施して処理済みラフ画像データを得、該処理済みラフ画像データを可視像として表示し、該表示された処理済みラフ画像データに基づいて修正された前記画像処理条件を前記画像処理条件記憶手段に記憶することを特徴とする請求項2記載の画像処理方法。 3. A resulting processed rough image data by performing image processing based on the image processing condition for the rough image data, the processed rough image data displayed as a visible image, which is the display the image processing method according to claim 2, wherein the storing is corrected based on the processed rough image data the image processing conditions in the image processing condition storage means.
  4. 【請求項4】 前記デジタル画像データに対する画像処理条件を決定し、該画像処理条件を前記画像処理条件記憶手段に記憶する行程と、 該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す行程とをそれぞれ独立して行うことを特徴とする請求項1から3のいずれか1項記載の画像処理方法。 4. Determine the image processing condition for said digital image data, the image processing condition and a process for storing the image processing condition storage means, the image on the digital image data on the basis of the stored image processing condition the image processing method according to any one of claims 1 to 3, characterized in that the treatment is subjected to the process independently.
  5. 【請求項5】 デジタルカメラにより取得されたデジタル画像データに基づいて該デジタル画像データに対する画像処理条件を決定する画像処理条件決定手段と、 該画像処理条件決定手段において決定された画像処理条件に基づいて前記デジタル画像データに対して画像処理を施して処理済み画像データを得る画像処理手段とを備えた画像処理装置において、 前記画像処理条件を記憶する画像処理条件記憶手段をさらに備え、前記画像処理手段は、該画像処理条件記憶手段に記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す手段であることを特徴とする画像処理装置。 And the image processing condition determining means for determining an image processing condition for the digital image data based on the 5. A digital image data acquired by a digital camera, based on the image processing conditions determined in the image processing condition determining means an image processing apparatus and image processing means for obtaining processed image data by performing image processing upon the digital image data Te, further comprising an image processing condition storage unit that stores the image processing condition, the image processing means, image processing apparatus, characterized in that on the basis of image processing conditions stored in the image processing condition storage means is means for performing image processing on the digital image data.
  6. 【請求項6】 前記デジタル画像データから画素数を減らしたラフ画像データを作成するラフ画像データ作成手段をさらに備え、前記画像処理条件決定手段は該ラフ画像データに基づいて前記画像処理条件を決定する手段であることを特徴とする請求項5記載の画像処理装置。 6. further comprising a rough image data creating means for creating rough image data with a reduced number of pixels from the digital image data, the image processing condition determining means determines the image processing conditions on the basis of the rough image data the image processing apparatus according to claim 5, characterized in that the means for.
  7. 【請求項7】 前記ラフ画像データに対して前記画像処理条件に基づいて画像処理を施して処理済みラフ画像データを得、該処理済みラフ画像データを可視像として表示するラフ画像表示手段と、該ラフ画像表示手段に表示された処理済みラフ画像データに基づいて前記画像処理条件を修正する修正手段とをさらに備え、前記画像処理条件記憶手段には該修正された画像処理条件が記憶されることを特徴とする請求項6記載の画像処理装置。 7. obtain the processed rough image data by performing image processing based on the image processing condition for the rough image data, and rough image display means for displaying the processed rough image data as a visible image , wherein further comprising a correction means for correcting the image processing conditions based on the displayed processed rough image data to the rough image display means, image processing conditions are the modifications are stored in the image processing condition storage unit the image processing apparatus according to claim 6, wherein Rukoto.
  8. 【請求項8】 前記デジタル画像データに対する画像処理条件を決定し、該画像処理条件を前記画像処理条件記憶手段に記憶する行程と、 該記憶された画像処理条件に基づいて前記デジタル画像データに画像処理を施す行程とをそれぞれ独立して行うことを特徴とする請求項5から7のいずれか1項記載の画像処理装置。 8. Determine the image processing condition for said digital image data, the image processing condition and a process for storing the image processing condition storage means, the image on the digital image data on the basis of the stored image processing condition the image processing apparatus according to any one of the processes performed a stroke claim 5, characterized in that independently performed 7.
JP10770698A 1998-02-23 1998-04-17 Image processing method and apparatus Expired - Lifetime JP4162102B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP4011098 1998-02-23
JP10-40110 1998-02-23
JP10770698A JP4162102B2 (en) 1998-02-23 1998-04-17 Image processing method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10770698A JP4162102B2 (en) 1998-02-23 1998-04-17 Image processing method and apparatus

Publications (2)

Publication Number Publication Date
JPH11308444A true JPH11308444A (en) 1999-11-05
JP4162102B2 JP4162102B2 (en) 2008-10-08

Family

ID=26379545

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10770698A Expired - Lifetime JP4162102B2 (en) 1998-02-23 1998-04-17 Image processing method and apparatus

Country Status (1)

Country Link
JP (1) JP4162102B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009017525A (en) * 2006-09-19 2009-01-22 Sharp Corp Image processing apparatus, image forming apparatus, image reading apparatus, image processing system, image processing method, computer program and recording medium
US8107728B2 (en) 2006-09-19 2012-01-31 Sharp Kabushiki Kaisha Image processing apparatus, image forming apparatus, image processing system, computer program and recording medium
US8199227B2 (en) 2005-09-28 2012-06-12 Olympus Corporation Image-signal processing apparatus for performing space-variant image-signal processing

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8199227B2 (en) 2005-09-28 2012-06-12 Olympus Corporation Image-signal processing apparatus for performing space-variant image-signal processing
JP2009017525A (en) * 2006-09-19 2009-01-22 Sharp Corp Image processing apparatus, image forming apparatus, image reading apparatus, image processing system, image processing method, computer program and recording medium
US8107728B2 (en) 2006-09-19 2012-01-31 Sharp Kabushiki Kaisha Image processing apparatus, image forming apparatus, image processing system, computer program and recording medium

Also Published As

Publication number Publication date
JP4162102B2 (en) 2008-10-08

Similar Documents

Publication Publication Date Title
JP4570336B2 (en) A method for constructing an extended color gamut digital image from a limited color gamut digital image.
JP3492202B2 (en) Image processing method, apparatus and a recording medium
DE60027835T2 (en) Color image processing apparatus and method
EP0597555B1 (en) Image processing apparatus
US7072084B2 (en) Color converting device emphasizing a contrast of output color data corresponding to a black character
JP3668014B2 (en) Image processing method and apparatus
US20010035989A1 (en) Method, apparatus and recording medium for color correction
US6822762B2 (en) Local color correction
US6952223B2 (en) Image processing method and apparatus
JP3520550B2 (en) Color image processing system and the data correction method
JP2004341889A (en) Image brightness correction processing
EP0453802A2 (en) Method of recording integrated image and image recorder therefor
JP2005269639A (en) Method and system for converting color image to gray scale image, gray scale image, method for improving conversion from color to gray scale, and edge emphasizing method
JP2004517384A (en) Dynamic image correction and image system
JP2000050076A (en) Digital photograph finishing system containing scene- balanced/contrast-normalized/visualized digital picture processing
EP0357385B1 (en) Image processing method and apparatus
EP0580365B1 (en) Color image processing method
US20030138143A1 (en) Method and apparatus for correcting the density and color of an image and storage medium having a program for executing the image correction
US7251054B2 (en) Method, apparatus and recording medium for image processing
JPH089172A (en) Color image processing unit
JP2005108194A (en) Creation of image quality adjustment information and adjustment of image quality using this information
EP0460193A1 (en) A method to extend the linear range of images captured on film.
US4602294A (en) Image reproducing method having a retouching function and an apparatus embodying the same
JP2003092690A (en) Image data processing method, apparatus, storage medium and program
US20020141005A1 (en) Image processing program and image processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060518

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060613

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060626

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20061024

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061218

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20070115

A912 Removal of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20070202

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080613

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080717

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110801

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110801

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120801

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120801

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130801

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term