JP4605288B2 - RAW data processing apparatus, RAW data processing method and program thereof - Google Patents

RAW data processing apparatus, RAW data processing method and program thereof Download PDF

Info

Publication number
JP4605288B2
JP4605288B2 JP2008316735A JP2008316735A JP4605288B2 JP 4605288 B2 JP4605288 B2 JP 4605288B2 JP 2008316735 A JP2008316735 A JP 2008316735A JP 2008316735 A JP2008316735 A JP 2008316735A JP 4605288 B2 JP4605288 B2 JP 4605288B2
Authority
JP
Japan
Prior art keywords
data
development
processing
raw data
raw
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008316735A
Other languages
Japanese (ja)
Other versions
JP2009077437A (en
Inventor
貴義 小嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2008316735A priority Critical patent/JP4605288B2/en
Publication of JP2009077437A publication Critical patent/JP2009077437A/en
Application granted granted Critical
Publication of JP4605288B2 publication Critical patent/JP4605288B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Editing Of Facsimile Originals (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Description

本発明は、RAWデータ処理装置、RAWデータ処理方法及びそのプログラムに関する。   The present invention relates to a RAW data processing device, a RAW data processing method, and a program thereof.

従来より、画像データにセピア処理やモノクロ処理を行うデジタルカメラが知られている。例えば、特許文献1に記載のデジタルカメラは、このデジタルカメラに接続されたプリンタから、ユーザによってプリンタのセピア/モノクロキーボタンが操作されてセピア処理又はモノクロ処理を実行するコマンドが入力され、それらの処理を施す対象の画像データを受信したとき、その画像データで表現されている画像に対してセピア処理又はモノクロ処理を実行し、画像処理が施された画像データファイルをプリンタへ送信する。この画像処理が施された画像データファイルを受け取ったプリンタは、その画像データの印刷を実行する。
特開2002−314930
Conventionally, digital cameras that perform sepia processing and monochrome processing on image data are known. For example, in the digital camera described in Patent Document 1, a command for executing sepia processing or monochrome processing is input from a printer connected to the digital camera by a user operating a sepia / monochrome key button of the printer. When image data to be processed is received, sepia processing or monochrome processing is executed on the image represented by the image data, and the image data file subjected to the image processing is transmitted to the printer. The printer that has received the image data file subjected to the image processing executes printing of the image data.
JP 2002-314930 A

ところで、CCDなどの撮像素子で撮影された現像処理前のRAWデータを保存する機能を持つデジタルカメラにおいて、撮影時に、ユーザがセピア処理やモノクロ処理等の単色化処理の実行を指示することがある。このとき、この種のデジタルカメラの中には、各種の情報を含むヘッダ情報やRAWデータをRAWファイルに格納するときに、併せて、単色化処理と現像処理とを施した縮小画像データ(例えば、サムネイルデータやスクリーンネイルデータ)をRAWファイルに格納するものがある。そして、このようなRAWファイルに含まれるRAWデータの印刷が印刷機器に指示されると、印刷機器はRAWデータの現像処理と単色化処理を実行したあと印刷を実行する。   By the way, in a digital camera having a function of saving RAW data before development processing, which is captured by an image sensor such as a CCD, a user may instruct execution of monochromatic processing such as sepia processing or monochrome processing at the time of shooting. . At this time, in this type of digital camera, when storing header information and RAW data including various types of information in the RAW file, the reduced image data (for example, subjected to monochromatic processing and development processing) (for example, , Thumbnail data and screen nail data) are stored in a RAW file. When the printing device is instructed to print the RAW data included in the RAW file, the printing device executes the printing after executing the RAW data development processing and the monochromatic processing.

しかしながら、一般的には、RAWファイルのフォーマットはデジタルカメラの各機種毎に異なっているため、撮影時にユーザが単色化処理を指示したRAWファイルであるか否かの情報が、このRAWファイルの中に必ず記述されているとは限らない。従って、RAWファイルに含まれるRAWデータの印刷処理を実行する印刷機器は、印刷処理前の現像処理時にそのRAWファイルの内容を解析できたとしても、撮影時にユーザが単色化処理を指示したか否かの情報をそのRAWファイルから直接得られないことがある。この場合、ユーザが単色化処理を希望していたとしても単色化処理を実行することができない。   However, generally, since the format of the RAW file is different for each model of the digital camera, information on whether or not the RAW file is a RAW file instructed by the user at the time of shooting in the RAW file. It is not always described in. Therefore, even if the printing device that executes the printing process of the RAW data included in the RAW file can analyze the contents of the RAW file during the development process before the printing process, whether or not the user has instructed the monochrome process at the time of shooting. Such information may not be obtained directly from the RAW file. In this case, even if the user desires a monochromatic process, the monochromatic process cannot be executed.

本発明は、上述した課題に鑑みなされたものであり、他機においてユーザにより単色化処理の指示がなされたRAWデータに自機の単色化処理を含む現像処理を施すことが可能なRAWデータ処理装置、RAWデータ処理方法及びそのプログラムを提供することを目的とする。   The present invention has been made in view of the above-described problems, and RAW data processing is capable of performing development processing including monochromatic processing of the own device on RAW data for which the user has instructed monochromatic processing in another device. An object is to provide a device, a RAW data processing method, and a program thereof.

本発明のRAWデータ処理装置、RAWデータ処理方法及びそのプログラムは、上述の目的の少なくとも一部を達成するために以下の手段を採った。   The RAW data processing apparatus, the RAW data processing method, and the program thereof according to the present invention employ the following means in order to achieve at least a part of the above object.

本発明のRAWデータ処理装置は、
RAWデータを処理するRAWデータ処理装置であって、
所定の出力処理を行う出力手段と、
前記RAWデータと該RAWデータに他の装置が現像処理を施した他機現像データとを記憶している記憶手段から前記RAWデータと前記他機現像データとを読み出すデータ読出手段と、
前記RAWデータの出力要求があったとき、読み出された前記他機現像データが他機の単色化処理を含む現像処理が施されたものか否かを判定し、該他機の単色化処理を含む現像処理が施されたものだったときには読み出された前記RAWデータに自機の単色化処理を含む現像処理を施すことにより自機現像データを生成し該自機現像データに基づいて前記所定の出力処理を行うよう前記出力手段を制御する制御手段と、
を備えたものである。
The RAW data processing apparatus of the present invention
A RAW data processing device for processing RAW data,
Output means for performing predetermined output processing;
A data reading means for reading out the RAW data and the other machine development data from a storage means for storing the RAW data and other machine development data obtained by developing another device on the RAW data;
When there is an output request for the RAW data, it is determined whether the read development data of the other machine has been subjected to a development process including a monochrome process of the other machine, and the monochrome process of the other machine is performed. If the development process including the self-development process is performed, the read-out RAW data is subjected to the development process including the monochromatic process of the self-machine to generate the self-development data, and based on the self-development data Control means for controlling the output means to perform predetermined output processing;
It is equipped with.

このRAWデータ処理装置では、RAWデータの出力要求があったとき、読み出された他機現像データが他機の単色化処理を含む現像処理が施されたものか否かを判定し、該他機の単色化処理を含む現像処理が施されたものだったときには読み出されたRAWデータに自機の単色化処理を含む現像処理を施すことにより自機現像データを生成し該自機現像データに基づいて所定の出力処理を行うよう出力手段を制御する。こうすることにより、他機においてユーザにより単色化処理の指示がなされたRAWデータに自機の単色化処理を含む現像処理を施すことができる。ここで、所定の出力処理としては、印刷処理や表示処理等が挙げられる。また、単色化処理とは、画像を白、黒、グレーで表現するモノクロ処理や画像を1つの有彩色の濃淡や明暗だけで表現するモノトーン処理などを含む意である。   In this RAW data processing apparatus, when there is a request for outputting RAW data, it is determined whether or not the read development data of the other device has been subjected to development processing including monochrome processing of the other device. When the development process including the monochrome process of the machine is performed, the developed data including the monochrome process of the machine is generated by performing the development process including the monochrome process of the machine to the read RAW data. The output means is controlled to perform a predetermined output process based on the above. By doing so, it is possible to perform development processing including monochrome processing of the own device on the RAW data for which the user has instructed the monochrome processing in another device. Here, examples of the predetermined output process include a printing process and a display process. The monochromatic processing includes monochromatic processing that expresses an image in white, black, and gray, and monotone processing that expresses an image by only one chromatic shade of light and shade.

本発明のRAWデータ処理装置において、前記他機現像データは、前記RAWデータを含むファイルに記録されたサムネイルデータ又はスクリーンネイルデータであるとしてもよい。サムネイルデータやスクリーンネイルデータは撮影装置(例えばデジタルカメラ)において作成されたRAWデータと共に保存されることが多いため、現像済みデータとしてこれらのデータを活用することが好ましい。   In the RAW data processing apparatus of the present invention, the other-device development data may be thumbnail data or screen nail data recorded in a file including the RAW data. Since thumbnail data and screen nail data are often stored together with RAW data created in a photographing apparatus (for example, a digital camera), it is preferable to utilize these data as developed data.

本発明のRAWデータ処理装置において、前記他機現像データは、前記RAWデータを含むファイルとは別のファイルとして前記記憶手段に記憶された同時記録ファイルに含まれる画像データであるとしてもよい。こうすれば、同時記録ファイルが作成されているときにはその同時記録ファイルを有効に活用することができる。   In the RAW data processing apparatus of the present invention, the other-device development data may be image data included in a simultaneous recording file stored in the storage unit as a file different from the file including the RAW data. In this way, when a simultaneous recording file is created, the simultaneous recording file can be used effectively.

本発明のRAWデータ処理装置において、前記制御手段は、前記RAWデータの出力要求があったとき、読み出された前記他機現像データが他機の単色化処理を含む現像処理が施されたものか否かを判定するにあたり、前記他機現像データの一部又は全部の各画素の色情報に基づいて、読み出された前記他機現像データが他機の単色化処理を含む現像処理が施されたものであるか否かを判定する手段であるとしてもよい。こうすれば、出力要求の対象のRAWデータが他機の単色化処理が施されたものであるか否かを的確に判定することができる。   In the RAW data processing apparatus according to the present invention, when the output of the RAW data is requested, the control unit is configured such that the read development data of the other machine is subjected to development processing including monochrome processing of the other machine. In this case, based on the color information of each or all of the pixels of the other machine development data, the read development data of the other machine is subjected to development processing including monochromatic processing of the other machine. It is good also as a means to determine whether it is what was done. In this way, it is possible to accurately determine whether or not the RAW data that is the target of the output request has been subjected to the monochrome processing of the other device.

本発明のRAWデータ処理装置は、自機の単色化処理を含む現像処理に関わる設定値をユーザが入力可能な設定値入力手段を備え、前記制御手段は、読み出された前記RAWデータに自機の単色化処理を含む現像処理を施すにあたり、該現像処理を前記設定値に基づいて施す手段であるとしてもよい。こうすれば、ユーザの所望する現像処理を実行することができる。   The RAW data processing apparatus of the present invention includes setting value input means that allows a user to input setting values related to development processing including monochromatic processing of the own device, and the control means is configured to automatically read the RAW data read out. When performing development processing including monochromatic processing of a machine, the development processing may be performed based on the set value. In this way, the development process desired by the user can be executed.

本発明のRAWデータ処理方法は、RAWデータに所定の出力処理を行うコンピュータソフトウェアによるRAWデータ処理方法であって、
(a)前記RAWデータの出力要求があったとき、記憶手段から読み出した他機現像データが他機の単色化処理を含む現像処理が施されたものか否かを判定するステップと、
(b)前記ステップ(a)で前記他機の単色化処理を含む現像処理が施されたものであると判定したときには、前記記憶手段から読み出した前記RAWデータに自機の単色化処理を含む現像処理を施すことにより自機現像データを生成し該自機現像データに基づいて出力処理を行うステップと、
を含むものである。
The RAW data processing method of the present invention is a RAW data processing method by computer software that performs predetermined output processing on RAW data,
(A) when there is an output request for the RAW data, determining whether or not the other device development data read from the storage means has been subjected to development processing including monochrome processing of the other device;
(B) When it is determined in step (a) that the development process including the monochromatic process of the other machine has been performed, the RAW data read from the storage means includes the monochromatic process of the own machine. Generating own development data by performing development processing and performing output processing based on the own development data;
Is included.

このRAWデータ処理方法では、RAWデータの出力要求があったとき、記憶手段から読み出した他機現像データが他機の単色化処理を含む現像処理が施されたものか否かを判定し、他機の単色化処理を含む現像処理が施されたものであると判定したときには、記憶手段から読み出したRAWデータに自機の単色化処理を含む現像処理を施すことにより自機現像データを生成し該自機現像データに基づいて出力処理を行う。こうすることにより、他機においてユーザにより単色化処理の指示がなされたRAWデータに自機の単色化処理を含む現像処理を施すことができる。ここで、所定の出力処理としては、印刷処理や表示処理等が挙げられる。また、単色化処理とは、画像を白、黒、グレーで表現するモノクロ処理や画像を1つの有彩色の濃淡や明暗だけで表現するモノトーン処理などを含む意である。なお、上述した本発明のRAWデータ処理装置が備える各種の構成によって奏される作用・機能を実現するためのステップを追加してもよい。   In this RAW data processing method, when there is a RAW data output request, it is determined whether or not the other device development data read from the storage means has undergone development processing including monochrome processing of the other device. When it is determined that the development process including the monochrome process of the machine has been performed, the development data including the monochrome process of the own machine is generated on the RAW data read from the storage unit to generate the own development data. An output process is performed based on the own development data. By doing so, it is possible to perform development processing including monochrome processing of the own device on the RAW data for which the user has instructed the monochrome processing in another device. Here, examples of the predetermined output process include a printing process and a display process. The monochromatic processing includes monochromatic processing that expresses an image in white, black, and gray, and monotone processing that expresses an image by only one chromatic shade of light and shade. In addition, you may add the step for implement | achieving the effect | action and function show | played by the various structures with which the raw data processing apparatus of this invention mentioned above is equipped.

本発明のプログラムは、上述したRAWデータ処理方法の各ステップを1又は複数のコンピュータに実行させるためのものである。このプログラムは、コンピュータが読み取り可能な記録媒体(例えばハードディスク、ROM、FD、CD、DVDなど)に記録されていてもよいし、伝送媒体(インターネットやLANなどの通信網)を介してあるコンピュータから別のコンピュータへ配信されてもよいし、その他どのような形で授受されてもよい。このプログラムを一つのコンピュータに実行させるか複数のコンピュータに分散して実行させれば、上述したRAWデータ処理方法の各ステップが実行されるため、上述したRAWデータ処理方法と同様の作用効果が得られる。   The program of the present invention is for causing one or more computers to execute each step of the above-described RAW data processing method. This program may be recorded on a computer-readable recording medium (for example, hard disk, ROM, FD, CD, DVD, etc.), or from a computer via a transmission medium (communication network such as the Internet or LAN). It may be distributed to another computer, or may be exchanged in any other form. If this program is executed by one computer or distributed to a plurality of computers, each step of the above-described RAW data processing method is executed, so that the same effect as the above-described RAW data processing method can be obtained. It is done.

次に、本発明の実施の形態を図面に基づいて説明する。図1は、本発明のファイル処理装置の一実施形態であるマルチファンクションプリンタ10の概略構成を示す外観図及びブロック図、図2はメモリカード42に保存されているファイルの説明図、図3はRAWファイル90の説明図である。   Next, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is an external view and block diagram showing a schematic configuration of a multifunction printer 10 which is an embodiment of a file processing apparatus of the present invention, FIG. 2 is an explanatory diagram of files stored in a memory card 42, and FIG. It is explanatory drawing of the RAW file 90. FIG.

本実施形態のマルチファンクションプリンタ10は、図1に示すように、印刷ジョブに基づいて印刷用紙Sへの印刷を実行するプリンタユニット20と、ガラス台36に載置された書類を読み取るスキャナユニット30と、メモリカードスロット40に挿入されたメモリカード42との間でデータの入出力を行うメモリカードコントローラ44と、各種情報を表示部52に表示したりユーザの指示をボタン類54の操作を介して入力したりする操作パネル50と、装置全体の制御を司るメインコントローラ60とを備えている。このマルチファンクションプリンタ10は、プリンタユニット20やスキャナユニット30,メモリカードコントローラ44,メインコントローラ60がバス12を介して各種制御信号やデータのやり取りができるよう構成されている。   As shown in FIG. 1, the multi-function printer 10 of the present embodiment includes a printer unit 20 that performs printing on a printing paper S based on a print job, and a scanner unit 30 that reads a document placed on a glass table 36. And a memory card controller 44 for inputting / outputting data to / from the memory card 42 inserted in the memory card slot 40, displaying various information on the display unit 52, and giving user instructions via the operation of buttons 54. Input operation panel 50 and a main controller 60 for controlling the entire apparatus. The multifunction printer 10 is configured such that the printer unit 20, the scanner unit 30, the memory card controller 44, and the main controller 60 can exchange various control signals and data via the bus 12.

プリンタユニット20は、プリンタASIC22とプリンタエンジン24とを備えている。プリンタASIC22は、プリンタエンジン24を制御する集積回路であり、メインコントローラ60から印刷指令を受けると、その印刷指令の対象となる画像ファイルに基づいて用紙Sに印刷するようプリンタエンジン24を制御する。また、プリンタエンジン24は、印刷ヘッドから用紙へインクを吐出することにより印刷を行う周知のインクジェット方式のカラープリンタ機構として構成されている。なお、ASICは、Application Specific Integrated Circuitの略である。   The printer unit 20 includes a printer ASIC 22 and a printer engine 24. The printer ASIC 22 is an integrated circuit that controls the printer engine 24. Upon receiving a print command from the main controller 60, the printer ASIC 22 controls the printer engine 24 to print on the paper S based on the image file that is the target of the print command. The printer engine 24 is configured as a well-known inkjet color printer mechanism that performs printing by discharging ink from a print head onto a sheet. Note that ASIC is an abbreviation for Application Specific Integrated Circuit.

スキャナユニット30は、スキャナASIC32とスキャナエンジン34とを備えている。スキャナASIC32は、スキャナエンジン34を制御する集積回路であり、メインコントローラ60からのスキャン指令を受けると、ガラス台36に載置された書類を画像データとして読み取るようスキャナエンジン34を制御する。また、スキャナエンジン34は、周知のイメージスキャナとして構成され、書類に向かって発光したあとの反射光をレッド(R)、グリーン(G)、ブルー(B)の各色に分解してスキャンデータとする周知のカラーイメージセンサを備えている。   The scanner unit 30 includes a scanner ASIC 32 and a scanner engine 34. The scanner ASIC 32 is an integrated circuit that controls the scanner engine 34. Upon receiving a scan command from the main controller 60, the scanner ASIC 32 controls the scanner engine 34 to read a document placed on the glass table 36 as image data. The scanner engine 34 is configured as a well-known image scanner, and the reflected light after emitting light toward the document is separated into red (R), green (G), and blue (B) colors to obtain scan data. A known color image sensor is provided.

メモリカードコントローラ44は、操作パネル50の横に備えられているメモリカードスロット40に挿入されたメモリカード42との間でデータの入出力を行うものである。このメモリカードコントローラ44は、メモリカードスロット40にメモリカード42が接続されているとき、メモリカード42に保存されているファイルを読み出してメインコントローラ60に送信したりメインコントローラ60からの命令を入力し該命令に基づいてメモリカード42にデータを書き込んだりする。このとき、メモリカード42には、例えば、図2に示すように、ユーザがデジタルカメラ等で被写体1を撮影して生成されたRAWファイル90aやそのとき作成された被写体1についての同時記録JPEGファイル90b、被写体2を撮影して作成されたRAWファイル90c、被写体3を撮影して作成されたRAWファイル90dなどが保存されている。   The memory card controller 44 inputs and outputs data to and from the memory card 42 inserted in the memory card slot 40 provided on the side of the operation panel 50. When the memory card 42 is connected to the memory card slot 40, the memory card controller 44 reads a file stored in the memory card 42 and transmits it to the main controller 60 or inputs a command from the main controller 60. Data is written to the memory card 42 based on the command. At this time, for example, as shown in FIG. 2, the memory card 42 stores a RAW file 90a generated by the user shooting the subject 1 with a digital camera or the like, and a simultaneous recording JPEG file for the subject 1 created at that time. 90b, a RAW file 90c created by photographing the subject 2, a RAW file 90d created by photographing the subject 3, and the like are stored.

ここで、RAWファイル90aについて、図3を用いて説明する。RAWファイル90aは、例えば、デジタルカメラで撮影したときにそのデジタルカメラの内部で作成されるファイルであり、そのデジタルカメラに挿入されたメモリカード42に保存される。このRAWファイル90aは、各種情報が格納されたヘッダ92と、デジタルカメラの撮像素子(例えばCCDやCMOS)が受けた光によって発生した電荷から得られた電気信号をデジタルデータ化した未加工データであるRAWデータ94に加えて、RAWデータ94を現像した縮小画像であるサムネイルデータ96やスクリーンネイルデータ98を含んでいる。なお、他のRAWファイルも同様であり、多くの場合、サムネイルデータやスクリーンネイルデータを含んでいる。ヘッダ92は、例えばRAWデータ94の縦の画素数、横の画素数、1画素のサイズ、サムネイルデータやスクリーンネイルデータの有無、添付されたサムネイルデータ96やスクリーンネイルデータ98の圧縮形式、各種の現像パラメータといった情報を持つ領域である。ここで、このヘッダ92には、単色化処理を実行することをユーザが撮影時に選択していたか否かを示す情報が含まれることもあるが、カメラによっては含まれていないことがある。デジタルカメラによって作成されるRAWファイル90aのフォーマットは、通常、機種毎に異なっているからである。従って、本実施形態の説明においては、RAWファイル90aのヘッダ92には、単色化処理を実行することをユーザが撮影時に指示していたか否かを示す情報が含まれていないものとして説明する。RAWデータ94は、1画素につきRGBのいずれか1つのデータを持つ。撮像素子がカラーCCDの場合を例に挙げると、一般にデジタルカメラに使用されるカラーCCD70は、図4に示すように、RGBの3つの色のいずれか一つのカラーフィルタを各CCD素子に被せることで個々の素子がそれぞれ別々の色を識別できるようにしたものであり、2画素×2画素の窓70aにRとBがそれぞれ1つ、Gが2つ配置されている。このため、RAWデータ94は、1画素につきRGBのいずれか1つのデータを持つことになる。なお、RAWデータ94は、通常RGB各8〜16ビットの豊かな階調表現を持っており、無圧縮か又は圧縮しても再び同じ状態に復元できる可逆圧縮がなされている。サムネイルデータ96は、主に、デジタルカメラの表示画面に複数の画像データを表示させるときの画像データとして作成され、所定の画素サイズ(例えば160×120)となるようにRAWデータ94をデジタルカメラの内部で現像したものである。このため、撮影時にユーザがモノクロ処理やセピア処理等の単色化処理を実行することを指示していた場合には、サムネイルデータ96の各画素の色情報は、単色化処理が施された後の色を表現するものとなっている。スクリーンネイルデータ98は、デジタルカメラの表示画面に一枚だけ表示させる画像データとして作成され、サムネイルデータ96よりは大きな所定の画素サイズ(例えば480×360)となるようにRAWデータ94をデジタルカメラの内部で現像したものである。このため、サムネイルデータ96と同様、撮影時にユーザが単色化処理を実行することを指示していた場合には、スクリーンネイルデータ98の各画素の色情報は、単色化処理が施された後の色を表現するものとなっている。なお、サムネイルデータ96やスクリーンネイルデータ98は、それらを作成するためにRAWデータがデジタルカメラの内部で現像される際に、所定の圧縮処理(本実施形態では、JPEG圧縮処理とする)が施されて作成される。   Here, the RAW file 90a will be described with reference to FIG. The RAW file 90a is, for example, a file created inside the digital camera when it is photographed by the digital camera, and is stored in the memory card 42 inserted into the digital camera. This RAW file 90a is raw data obtained by digitizing an electric signal obtained from a charge generated by light received by an image pickup device (for example, CCD or CMOS) of a digital camera and a header 92 in which various information is stored. In addition to the RAW data 94, thumbnail data 96 and screen nail data 98, which are reduced images obtained by developing the RAW data 94, are included. The same applies to other RAW files, and in many cases includes thumbnail data and screen nail data. The header 92 includes, for example, the number of vertical pixels of the RAW data 94, the number of horizontal pixels, the size of one pixel, the presence / absence of thumbnail data and screen nail data, the compression format of the attached thumbnail data 96 and screen nail data 98, various This area has information such as development parameters. Here, the header 92 may include information indicating whether or not the user has selected to execute the monochromatic process at the time of shooting, but may not be included depending on the camera. This is because the format of the RAW file 90a created by the digital camera is usually different for each model. Therefore, in the description of the present embodiment, it is assumed that the header 92 of the RAW file 90a does not include information indicating whether or not the user has instructed execution of monochromatic processing at the time of shooting. The RAW data 94 has any one of RGB data per pixel. Taking the case where the image pickup device is a color CCD as an example, as shown in FIG. 4, a color CCD 70 generally used in a digital camera covers each CCD device with one color filter of three colors of RGB. The individual elements can distinguish different colors, and one R and one B and two G are arranged in a 2 pixel × 2 pixel window 70a. Therefore, the RAW data 94 has any one of RGB data per pixel. Note that the RAW data 94 usually has a rich gradation expression of 8 to 16 bits for each of RGB, and is either uncompressed or reversible compressed so that it can be restored to the same state even after being compressed. The thumbnail data 96 is mainly created as image data when displaying a plurality of image data on the display screen of the digital camera, and the RAW data 94 is converted into the predetermined pixel size (for example, 160 × 120) from the digital camera. It is developed inside. For this reason, when the user has instructed the execution of monochromatic processing such as monochrome processing or sepia processing at the time of shooting, the color information of each pixel of the thumbnail data 96 is obtained after the monochromatic processing is performed. It expresses color. The screen nail data 98 is created as image data to be displayed on the display screen of the digital camera, and the RAW data 94 is converted into a predetermined pixel size (for example, 480 × 360) larger than the thumbnail data 96. It is developed inside. For this reason, as with the thumbnail data 96, when the user has instructed to execute the monochromatic process at the time of shooting, the color information of each pixel of the screen nail data 98 is the color information after the monochromatic process is performed. It expresses color. The thumbnail data 96 and the screen nail data 98 are subjected to predetermined compression processing (in this embodiment, JPEG compression processing) when RAW data is developed inside the digital camera in order to create them. To be created.

次に、同時記録JPEGファイル90bについて説明する。撮影時に、上述したRAWファイルに加えてJPEGファイルをも保存すること及び単色化処理を実行することがユーザによって選択されていた場合は、撮影時にユーザによってなされた設定(例えば、作成するJPEG圧縮された画像データのサイズ等の設定)にしたがって、JPEGファイルが作成されメモリカード42に保存される。このJPEGファイルが同時記録JPEGファイルである。この同時記録JPEGファイルに含まれる画像データの各画素の色情報は、既述したサムネイルデータ96やスクリーンネイルデータ98と同様に単色化処理が施された後の色を表現するものとなっている。   Next, the simultaneous recording JPEG file 90b will be described. If the user has selected to save a JPEG file in addition to the above-described RAW file and execute a monochromatic process at the time of shooting, the settings made by the user at the time of shooting (for example, the JPEG compressed to be created) JPEG file is created and stored in the memory card 42 in accordance with the setting of the image data size and the like. This JPEG file is a simultaneous recording JPEG file. The color information of each pixel of the image data included in the simultaneous recording JPEG file expresses the color after being subjected to monochromatic processing, like the thumbnail data 96 and the screen nail data 98 described above. .

なお、サムネイルデータ96やスクリーンネイルデータ98はJPEG圧縮されて作成されることが多く、また、同時記録JPEGファイルに含まれる画像データはJPEG圧縮された画像データであるため、それらの画像データの各画素の色情報はJPEG圧縮の規格に従って周知のYCbCr表色系で表現されている。また、ここで作成されるJPEG圧縮された画像データは、通常、RAWデータに含まれる情報を適宜間引くことによってデータサイズを小さくするようにして作成されるものであり、加えてJPEG圧縮時にコンピュータの演算誤差などが発生するため、このJPEG圧縮された画像データからRAWデータを100パーセント再現するのは不可能である。   The thumbnail data 96 and the screen nail data 98 are often created by JPEG compression, and the image data included in the simultaneous recording JPEG file is JPEG compressed image data. Pixel color information is expressed in the well-known YCbCr color system according to the JPEG compression standard. The JPEG-compressed image data created here is usually created by reducing the data size by appropriately thinning out the information contained in the RAW data. Since an arithmetic error or the like occurs, it is impossible to reproduce 100% of the RAW data from the JPEG-compressed image data.

操作パネル50は、表示部52とボタン類54とを備えている。表示部52は、液晶ディスプレイであり、印刷状況に関する情報や印刷メニュー、現像パラメータの入力画面、印刷を実行する画像データなどを表示する。ボタン類54は、印刷を実行する画像データの選択時や現像パラメータの入力時などに操作される矢印キー56や選択された画像データの印刷を実行するときに押下される印刷ボタン58、現像パラメータを確定するときに押下される図示しない決定ボタン、電源のオンオフを行うときに操作される図示しない電源ボタンなどからなり、内部通信インタフェース69を介してメインコントローラ60にユーザの指示を入力可能なデバイスである。   The operation panel 50 includes a display unit 52 and buttons 54. The display unit 52 is a liquid crystal display, and displays information related to the printing status, a print menu, a development parameter input screen, image data to be printed, and the like. Buttons 54 include an arrow key 56 that is operated when image data to be printed is selected or when development parameters are input, a print button 58 that is pressed when printing selected image data, and development parameters. A device that can be inputted with a user instruction to the main controller 60 via the internal communication interface 69. It is.

メインコントローラ60は、CPU62を中心とするマイクロプロセッサとして構成されており、各種処理プログラムや各種データ、各種テーブルなどを記憶したROM64と、一時的にスキャンデータや印刷データを記憶するRAM66と、電気的に書き換え可能で電源を切ってもデータは保持されるフラッシュメモリ68と、操作パネル50との通信を可能とする内部通信インタフェース69とを備え、これらはバス12を介して互いに信号のやり取りが可能なように接続されている。このメインコントローラ60は、プリンタユニット20やスキャナユニット30,メモリカードコントローラ44からの各種動作信号や各種検出信号を入力したり、操作パネル50のボタン類54の操作に応じて発生する操作信号を入力したりする。また、メモリカード42からRAWファイル90a,90c,90dやJPEGファイル90bを読み出してメインコントローラ60へ出力する指令をメモリカードコントローラ44に出力したり、現像済みデータ(例えば、JPEG圧縮された画像データ)の印刷を実行するようプリンタユニット20に指令を出力したり、操作パネル50のボタン類54のスキャン指令に基づいてガラス台36に載置された書類を画像データとして読み取るようスキャナユニット30に指令を出力したり、操作パネル5
0に表示部52の制御指令を出力したりする。
The main controller 60 is configured as a microprocessor centered on a CPU 62, and includes a ROM 64 that stores various processing programs, various data, various tables, a RAM 66 that temporarily stores scan data and print data, and an electrical circuit. And a flash memory 68 that retains data even when the power is turned off, and an internal communication interface 69 that enables communication with the operation panel 50, and these can exchange signals with each other via the bus 12. It is connected like that. The main controller 60 inputs various operation signals and various detection signals from the printer unit 20, the scanner unit 30 and the memory card controller 44, and inputs operation signals generated in response to the operation of the buttons 54 of the operation panel 50. To do. Further, a command for reading out the RAW files 90a, 90c, 90d and the JPEG file 90b from the memory card 42 and outputting them to the main controller 60 is output to the memory card controller 44, or developed data (for example, JPEG compressed image data). A command is output to the printer unit 20 so as to execute printing, and a command is issued to the scanner unit 30 to read a document placed on the glass table 36 as image data based on a scan command of the buttons 54 of the operation panel 50. Output and operation panel 5
The control command of the display unit 52 is output to 0.

次に、こうして構成された本実施形態のマルチファンクションプリンタ10の動作、特に、メモリカード42に保存されたRAWファイルに含まれるRAWデータを印刷する場合の動作について説明する。   Next, the operation of the multifunction printer 10 of the present embodiment configured as described above, particularly the operation when printing RAW data included in the RAW file saved in the memory card 42 will be described.

図5は、マルチファンクションプリンタ10のCPU62により実行されるRAWデータ印刷処理ルーチンの一例を示すフローチャートである。このルーチンは、マルチファンクションプリンタ10のROM64に記憶されている。また、このルーチンは、メモリカード42に保存されたRAWファイルをユーザが操作パネル50の矢印キー56を操作して印刷対象として選択し、ユーザが操作パネル50の印刷ボタン58を押下することによってそのRAWファイルについての印刷指令が内部通信インタフェース69を介して入力されたときに実行される。このルーチンが実行されると、マルチファンクションプリンタ10のCPU62は、まず、ユーザによって印刷対象として選択されたRAWファイルが作成されるときに同時に作成された既述の同時記録JPEGファイルがメモリカード42に保存されているか否かを判定する(ステップS100)。ここで、そのRAWファイルに対応する同時記録JPEGファイルがメモリカード42に保存されているか否かは、例えば、メモリカード42に保存されている各JPEGファイルの拡張子を除くファイル名と、そのRAWファイルの拡張子を除くファイル名とを比較し、同一のファイル名を有するJPEGファイルがメモリカード42に保存されているか否かによって判断することができる。   FIG. 5 is a flowchart illustrating an example of a RAW data print processing routine executed by the CPU 62 of the multifunction printer 10. This routine is stored in the ROM 64 of the multifunction printer 10. Also, in this routine, the RAW file stored in the memory card 42 is selected by the user by operating the arrow key 56 on the operation panel 50 and the user presses the print button 58 on the operation panel 50. This is executed when a print command for the RAW file is input via the internal communication interface 69. When this routine is executed, the CPU 62 of the multi-function printer 10 first stores the above-described simultaneous recording JPEG file created at the same time when the RAW file selected for printing by the user is created in the memory card 42. It is determined whether it is stored (step S100). Here, whether or not the simultaneous recording JPEG file corresponding to the RAW file is stored in the memory card 42 is determined by, for example, the file name excluding the extension of each JPEG file stored in the memory card 42 and the RAW file. The file name excluding the file extension can be compared to determine whether a JPEG file having the same file name is stored in the memory card 42 or not.

次に、ステップS100で同時記録JPEGファイルがメモリカード42に保存されていると判定されたときは、その同時記録JPEGファイルに含まれるJPEG圧縮された画像データのうちの複数画素についてのデータ(色情報)を読み出す(ステップS110)。このとき、処理時間の短縮等のため、本実施形態では、その画像データの縦方向又は横方向の1ライン置きにデータを読み出すものとした。一方、ステップS100で同時記録JPEGファイルがメモリカード42に保存されていないと判定されたときは、ユーザが印刷対象として選択したRAWファイルに既述のスクリーンネイルデータが記録されているか否かを判定する(ステップS120)。ここで、スクリーンネイルデータが記録されているか否かは、RAWファイルのヘッダに記録された情報を参照することにより判断することができる。スクリーンネイルデータがそのRAWファイルに記録されているときは、そのスクリーンネイルデータのうちの複数画素についてのデータ(色情報)を読み出す(ステップS130)。このとき、処理時間の短縮等のため、本実施形態では、そのスクリーンネイルデータの縦方向又は横方向の1ライン置きにデータを読み出すものとした。一方、スクリーンネイルデータがそのRAWファイルに記録されていないときは、ユーザが印刷対象として選択したRAWファイルに既述のサムネイルデータが記録されているか否かを判定する(ステップS140)。ここで、サムネイルデータが記録されているか否かは、RAWファイルのヘッダに記録された情報を参照することにより判断することができる。サムネイルデータがそのRAWファイルに記録されているときは、そのサムネイルデータのうちの複数画素についてのデータ(色情報)を読み出す(ステップS150)。このとき、処理時間の短縮等のため、本実施形態では、そのサムネイルデータの縦方向又は横方向の1ライン置きにデータを読み出すものとした。なお、通常、同時記録JPEGファイルに含まれる画像データの画素数はスクリーンネイルデータの画素数よりも多く、また、スクリーンネイルデータの画素数はサムネイルデータの画素数よりも多いため、同時記録JPEGファイルに含まれる画像データから読み出されるデータ数が最も多く、サムネイルデータから読み出されるデータ数が最も少ない。   Next, when it is determined in step S100 that the simultaneous recording JPEG file is stored in the memory card 42, the data (colors) for a plurality of pixels in the JPEG compressed image data included in the simultaneous recording JPEG file. Information) is read out (step S110). At this time, in order to shorten the processing time, in the present embodiment, the data is read every other line in the vertical or horizontal direction of the image data. On the other hand, when it is determined in step S100 that the simultaneous recording JPEG file is not stored in the memory card 42, it is determined whether or not the screen nail data described above is recorded in the RAW file selected as the print target by the user. (Step S120). Here, whether screen nail data is recorded can be determined by referring to information recorded in the header of the RAW file. When the screen nail data is recorded in the RAW file, data (color information) for a plurality of pixels in the screen nail data is read (step S130). At this time, in order to shorten the processing time and the like, in this embodiment, the data is read every other line in the vertical or horizontal direction of the screen nail data. On the other hand, when the screen nail data is not recorded in the RAW file, it is determined whether or not the above-described thumbnail data is recorded in the RAW file selected as the print target (step S140). Here, whether or not thumbnail data is recorded can be determined by referring to the information recorded in the header of the RAW file. When thumbnail data is recorded in the RAW file, data (color information) for a plurality of pixels in the thumbnail data is read (step S150). At this time, in order to shorten the processing time, in the present embodiment, the data is read every other line in the vertical direction or the horizontal direction of the thumbnail data. Usually, the number of pixels of image data included in the simultaneous recording JPEG file is larger than the number of pixels of screen nail data, and the number of pixels of screen nail data is larger than the number of pixels of thumbnail data. The number of data read from the image data included in is the largest, and the number of data read from the thumbnail data is the smallest.

そして、ステップS150のあと又は、ステップS110で同時記録JPEGファイルに含まれるJPEG圧縮された画像データのうちの複数画素についてのデータを読み出したあと又は、ステップS130でスクリーンネイルデータのうちの複数画素についてのデータを読み出したあと、読み出したデータが単色化処理が施されているものであるか否かを判定する(ステップS160)。ここで、読み出されるデータ(色情報)はYCbCr表色系で表されており、読み出した全てのデータの色差Cbの標準偏差が所定の閾値Cbrefより小さく、且つ、読み出した全てのデータの色差Crの標準偏差が所定の閾値Crrefより小さいとき、読み出したデータが単色化処理が施されているものであると判定するものとした。なお、閾値Cbref、Crrefは、単色化処理を含む現像処理を施して作成した画像データから複数のデータを読み出し、その全てのデータの色差Cb,Crの標準偏差に基づいてそれぞれ予め設定するものとした。   After step S150, or after reading out data for a plurality of pixels in the JPEG-compressed image data included in the simultaneous recording JPEG file in step S110, or for a plurality of pixels in the screen nail data in step S130. After reading the data, it is determined whether or not the read data has been subjected to monochromatic processing (step S160). Here, the read data (color information) is expressed in the YCbCr color system, the standard deviation of the color difference Cb of all the read data is smaller than a predetermined threshold Cbref, and the color difference Cr of all the read data. When the standard deviation is smaller than a predetermined threshold value Crref, it is determined that the read data has been subjected to monochromatic processing. The threshold values Cbref and Crref are set in advance based on the standard deviations of the color differences Cb and Cr of all the data read out from the image data created by performing development processing including monochromatic processing. did.

ステップS160において、読み出したデータが単色化処理が施されているものであると判定されたときは、読み出した元のデータ(同時記録JPEGファイルに含まれる画像データ等)が、他の機器によって単色化処理を含む現像処理が施されているものであるとみなすこととし、RAWファイルに記録されたRAWデータを読み出し(ステップS170)、各現像処理(後述する補間処理や色再現処理、ガンマ補正処理、JPEG圧縮処理)における現像パラメータの入力画面を表示するよう表示部52を制御する(ステップS180)。このとき、RAWファイルのヘッダから他の機器の現像処理における複数の現像パラメータ(例えば、ガンマ補正値等)を読み出して初期値として表示するものとした。ユーザは必要に応じて矢印キー56や図示しない決定ボタン等を用いてこれらの現像パラメータを変更することができる。続いて、現像パラメータが確定されたか否かを判定する(ステップS190)。本実施形態では、現像パラメータが確定されたか否かは、ユーザによって適宜現像パラメータが変更されたあとに、全ての現像パラメータを確定する機能が割り当てられた図示しない決定ボタンが押下されたか否かによって判定するものとした。そして、現像パラメータが確定されていなければそのまま待機し、現像パラメータが確定されたときは、読み出したRAWデータに補間処理を実行する(ステップS200)。この補間処理は、既述したようにRAWデータに含まれる1つのCCD素子からの出力データが、RGBの各色要素のうちのいずれか1つの色要素についての情報しか持っていないために行う処理である。具体的には、図4に示したような周囲の他の色要素に対応するCCD素子からの出力データを参照して、1つの画素に含まれない他の色要素についての情報を補う。こうすることにより、各画素はRGBの各色要素の情報を持つこととなる。続いて、CCD素子に被せられたカラーフィルタの分光特性と人間の目の感度特性とのマッチングをとるため色再現処理を行い(ステップS210)、非線形なデバイス特性を有するCCD等からの出力を補正するためガンマ補正処理を行う(ステップS220)。   If it is determined in step S160 that the read data has been subjected to monochromatic processing, the read original data (such as image data included in the simultaneous recording JPEG file) is converted to a single color by another device. RAW data recorded in the RAW file is read (step S170), and each development process (interpolation process, color reproduction process, gamma correction process described later) is performed. , JPEG compression processing), the display unit 52 is controlled to display the development parameter input screen (step S180). At this time, a plurality of development parameters (for example, gamma correction values) in the development processing of other devices are read from the header of the RAW file and displayed as initial values. The user can change these development parameters as necessary using the arrow key 56 or a determination button (not shown). Subsequently, it is determined whether or not development parameters have been determined (step S190). In the present embodiment, whether or not the development parameters have been confirmed depends on whether or not a decision button (not shown) to which a function for confirming all development parameters has been assigned has been pressed after the development parameters have been appropriately changed by the user. Judgment was made. If the development parameters are not determined, the process stands by, and if the development parameters are determined, interpolation processing is executed on the read RAW data (step S200). As described above, this interpolation processing is performed because the output data from one CCD element included in the RAW data has information on only one of the RGB color elements. is there. Specifically, information on other color elements not included in one pixel is supplemented by referring to output data from CCD elements corresponding to other surrounding color elements as shown in FIG. By doing so, each pixel has information on each color element of RGB. Subsequently, color reproduction processing is performed to match the spectral characteristics of the color filter placed on the CCD element and the sensitivity characteristics of the human eye (step S210), and the output from the CCD having nonlinear device characteristics is corrected. Therefore, gamma correction processing is performed (step S220).

続いて、単色化を伴うJPEG圧縮処理を行う(ステップS230)。ここで、JPEG圧縮を行うときには、通常は圧縮の前に、各画素について、RGBの値から周知の変換式によりYCbCr表色系で表したときの値へと変換する。本実施形態では、この変換後の輝度Yの値を単色化処理後の各画素の階調を表す値として採用し、色差Cb,Crの値として、変換後の各画素の色差Cb,Crの値に代えて、ステップS110、ステップS130又はステップS150によって読み出された複数データの色差Cb,Crの値の統計的な分布の中心値(平均値でもよい)を全ての画素に用いることによって、読み出した元のデータと同様とみなせる単色化を施すものとした。そして、プリンタASIC22にそのJPEG圧縮されて作成された画像データに基づいて用紙Sへの印刷を実行するよう指令を出力して(ステップS240)、本ルーチンを終了する。この印刷指令を受け取ったプリンタASIC22はその画像データに基づいて用紙Sへの印刷を実行するようプリンタエンジン24を制御する。なお、本実施形態では、プリンタエンジン24が用紙Sへの印刷を実行するときの用紙のサイズや印刷枚数等の印刷条件は予め定められているものとした(例えば、用紙のサイズは写真のL判サイズ、枚数は1枚等)。   Subsequently, JPEG compression processing with monochromatization is performed (step S230). Here, when JPEG compression is performed, normally, before compression, each pixel is converted from RGB values to values expressed in the YCbCr color system by a well-known conversion formula. In the present embodiment, the value of the luminance Y after conversion is adopted as a value representing the gradation of each pixel after monochromatic processing, and the color difference Cb, Cr of each pixel after conversion is used as the value of the color difference Cb, Cr. Instead of the value, the central value (which may be an average value) of the statistical distribution of the color differences Cb and Cr of the plurality of data read out in step S110, step S130, or step S150 is used for all the pixels. It was assumed that a single color that can be regarded as the same as the read original data was applied. Then, the printer ASIC 22 is instructed to execute printing on the paper S based on the image data created by the JPEG compression (step S240), and this routine is finished. The printer ASIC 22 that has received this print command controls the printer engine 24 to execute printing on the paper S based on the image data. In the present embodiment, it is assumed that printing conditions such as the paper size and the number of prints when the printer engine 24 executes printing on the paper S are predetermined (for example, the paper size is the L of the photograph). Size, number of sheets, etc.).

また、ステップS140において、サムネイルデータがないと判定されたとき(即ち、ユーザが印刷対象として選択したRAWファイルに含まれるRAWデータを他の機器で現像処理した画像がないとき)又は、ステップS160において、同時記録JPEGファイルに含まれる画像データ等が単色でないと判定されたときは、RAWファイルに記録されたRAWデータを読み出し(ステップS250)、ステップS180の処理と同様に、現像処理における現像パラメータの入力画面を表示するよう表示部52を制御する(ステップS260)。続いて、ステップS190の処理と同様に、現像パラメータが確定されたか否かを判定し(ステップS270)、現像パラメータが確定されていなければそのまま待機し、現像パラメータが確定されたときは、読み出したRAWデータにステップS200の処理と同様の補間処理を実行する(ステップS280)。そして、ステップS210の処理と同様の色再現処理(ステップS290)を行い、ステップS220の処理と同様のガンマ補正処理(ステップS300)を行う。続いて、単色化を伴わないJPEG圧縮処理を実行する(ステップS310)。このステップS310の処理では、ステップS230の処理とは異なり、単色化を行わない。つまり、カラー画像として扱う。そして、プリンタASIC22にそのJPEG圧縮されて作成された画像データに基づいて用紙Sへの印刷を実行するよう指令を出力して(ステップS240)、本ルーチンを終了する。この印刷指令を受け取ったプリンタASIC22はその画像データに基づいて用紙Sへの印刷を実行するようプリンタエンジン24を制御する。   In step S140, when it is determined that there is no thumbnail data (that is, when there is no image in which RAW data included in the RAW file selected as a print target is developed by another device), or in step S160. When it is determined that the image data included in the simultaneous recording JPEG file is not a single color, the raw data recorded in the raw file is read (step S250), and the development parameter of the development process is determined in the same manner as the process in step S180. The display unit 52 is controlled to display the input screen (step S260). Subsequently, similarly to the processing in step S190, it is determined whether or not the development parameter has been determined (step S270). If the development parameter has not been determined, the process stands by. If the development parameter has been determined, it is read. An interpolation process similar to the process of step S200 is performed on the RAW data (step S280). Then, a color reproduction process (step S290) similar to the process of step S210 is performed, and a gamma correction process (step S300) similar to the process of step S220 is performed. Subsequently, JPEG compression processing without monochromatic processing is executed (step S310). In the process of step S310, unlike the process of step S230, monochromatization is not performed. That is, it is treated as a color image. Then, the printer ASIC 22 is instructed to execute printing on the paper S based on the image data created by the JPEG compression (step S240), and this routine is finished. The printer ASIC 22 that has received this print command controls the printer engine 24 to execute printing on the paper S based on the image data.

ここで、本実施形態の構成要素と本発明の構成要素との対応関係を明らかにする。本実施形態のプリンタユニット20が本発明の出力手段に相当し、メモリカードコントローラ44がデータ読出手段に相当し、メインコントローラ60が制御手段に相当し、ボタン類54が設定値入力手段に相当する。なお、本実施形態では、マルチファンクションプリンタ10の動作を説明することにより本発明のRAWデータ処理方法の一例も明らかにしている。   Here, the correspondence between the components of the present embodiment and the components of the present invention will be clarified. The printer unit 20 of the present embodiment corresponds to output means of the present invention, the memory card controller 44 corresponds to data reading means, the main controller 60 corresponds to control means, and the buttons 54 correspond to setting value input means. . In this embodiment, an example of the RAW data processing method of the present invention is also clarified by describing the operation of the multifunction printer 10.

以上詳述した本実施形態のマルチファンクションプリンタ10によれば、RAWデータの印刷指令が内部通信インタフェース69を介して入力されたとき、サムネイルデータ、スクリーンネイルデータ又は同時記録JPEGファイルに含まれる画像データから読み出した複数画素のデータ(色情報)が単色化処理が施されているものであるか否かを判定し、単色化処理が施されているものであるときには読み出されたRAWデータにマルチファンクションプリンタ10の単色化処理を含む現像処理を施すことによりJPEG圧縮された画像データを生成し該JPEG圧縮された画像データに基づいて印刷処理を行うようプリンタユニット20へ指令を出力する。こうすることにより、他の機器においてユーザにより単色化処理の指示がなされたRAWデータにマルチファンクションプリンタ10の単色化処理を含む現像処理を施すことができる。また、他の機器(例えばデジタルカメラ)においてRAWデータを保存する際に作成されたRAWデータと共に保存されることが多いサムネイルデータやスクリーンネイルデータを活用することができる。更に、同時記録JPEGファイルが作成されているときにはその同時記録JPEGファイルを有効に活用することができる。更にまた、サムネイルデータ等の他の機器で現像されたデータの色情報を用いて単色化処理が施されたものか否かを判定するため、印刷処理の対象のRAWデータが他の機器の単色化処理が施されたものであるか否かを的確に判定することができる。   According to the multifunction printer 10 of the present embodiment described in detail above, when a RAW data print command is input via the internal communication interface 69, image data included in thumbnail data, screen nail data, or simultaneously recorded JPEG files. It is determined whether or not the data (color information) of a plurality of pixels read out from is subjected to monochromatic processing, and if the data is subjected to monochromatic processing, the read raw data is By performing development processing including monochromatic processing of the function printer 10, JPEG compressed image data is generated, and a command is output to the printer unit 20 to perform printing processing based on the JPEG compressed image data. In this way, development processing including monochrome processing of the multifunction printer 10 can be performed on the RAW data for which the user has instructed monochrome processing in another device. In addition, it is possible to use thumbnail data and screen nail data that are often saved together with RAW data created when RAW data is saved in another device (for example, a digital camera). Further, when the simultaneous recording JPEG file is created, the simultaneous recording JPEG file can be effectively used. Furthermore, in order to determine whether or not the monochrome processing has been performed using the color information of the data developed by the other device such as thumbnail data, the RAW data that is the target of the printing processing is the single color of the other device. It is possible to accurately determine whether or not the processing has been performed.

なお、本発明は上述した実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の態様で実施し得ることはいうまでもない。   It should be noted that the present invention is not limited to the above-described embodiment, and it goes without saying that the present invention can be implemented in various modes as long as it belongs to the technical scope of the present invention.

例えば、上述した実施形態では、JPEG圧縮された画像データの色情報である色差Cb,Crを用いて該画像データが単色であるか否かを判定するものとしたが、単色か否かを判定可能であれば色差Cb,Cr以外の色情報を利用してもよい。例えば、光の三原色RGBの値を利用してもよい。この場合、単色であると判定可能な条件として、ステップS110、ステップS130又はステップS150で読み出した全てのデータ(画素)について、色差Cbの標準偏差が所定の閾値Cbrefより小さく、且つ、色差Crの標準偏差が所定の閾値Crrefより小さいという条件の代わりに、ステップS110、ステップS130又はステップS150で読み出した全てのデータ(画素)についてYCbCrからRGBへ変換してR/G,B/Gの値を求め、この求めた値の統計をとり、その標準偏差がそれぞれの所定の閾値以下であるという条件を用いてもよい。ここで、所定の閾値は、単色化処理を含む現像処理を施して作成した画像データから複数のデータを読み出し、その読み出した全てのデータについてYCbCrからRGBへ変換してR/G,B/Gの値を求め、その標準偏差に基づいてそれぞれ予め設定するものとしてもよい。   For example, in the above-described embodiment, it is determined whether or not the image data is a single color using the color differences Cb and Cr that are the color information of the JPEG compressed image data. If possible, color information other than the color differences Cb and Cr may be used. For example, the values of the three primary colors RGB of light may be used. In this case, as a condition that can be determined to be a single color, the standard deviation of the color difference Cb is smaller than a predetermined threshold Cbref for all the data (pixels) read in step S110, step S130, or step S150, and the color difference Cr Instead of the condition that the standard deviation is smaller than the predetermined threshold value Crref, all the data (pixels) read in step S110, step S130 or step S150 are converted from YCbCr to RGB and the values of R / G and B / G are changed. It is also possible to obtain a statistic of the obtained value and use a condition that the standard deviation is equal to or less than a predetermined threshold value. Here, the predetermined threshold value is obtained by reading a plurality of data from image data created by performing development processing including monochromatic processing, converting all the read data from YCbCr to RGB, and R / G, B / G. It is good also as what is calculated | required and it presets each based on the standard deviation.

上述した実施形態では、ステップS110やステップS130、ステップS150において読み出すデータは縦又は横方向の位置ライン置きに読み出すとしたが、複数の画素についてのデータが読み出し可能であれば、如何なる読み出し方をしてもよい。例えば、1画素置きに読み出してもよいし、ランダムに選択された画素のデータを読み出してもよい。また、サムネイルデータに含まれると見込まれる画素数を越えない範囲で予め設定された同一のデータ数(例えば、1000個)に至るまで、データを読み出すものとしてもよいし、サムネイルデータやスクリーンネイルデータ、同時記録JPEGファイルに含まれる画像データ毎に予め設定されたデータ数に至るまで、データを読み出すものとしてもよい。   In the embodiment described above, the data read in step S110, step S130, and step S150 is read at every position line in the vertical or horizontal direction. However, any reading method may be used as long as the data for a plurality of pixels can be read. May be. For example, every other pixel may be read out, or data of pixels selected at random may be read out. Further, the data may be read out until the same number of data (for example, 1000) set in advance within a range not exceeding the number of pixels expected to be included in the thumbnail data, or thumbnail data or screen nail data. The data may be read out until the number of data set in advance for each image data included in the simultaneous recording JPEG file is reached.

上述した実施形態では、JPEGファイルに含まれる画像データ、スクリーンネイルデータ、サムネイルデータの順にメモリカード42に保存されているか又はRAWファイルに記録されているか否かを判定し、いずれかのデータが保存又は記録されていると判定された時点で該データから複数画素についてのデータ(色情報)を読み出すものとしたが、メモリカード42に保存されているか又はRAWファイルに記録されているか否かを判定する順番は、この順番に限られない。例えば、最初にサムネイルデータがRAWファイルに記録されているか否かを判定し、次に、スクリーンネイルデータがRAWファイルに記録されているか否かを判定し、最後にJPEGファイルに含まれる画像データがメモリカード42に保存されているか否かを判定するものとしてもよい。   In the above-described embodiment, it is determined whether the image data, screen nail data, and thumbnail data included in the JPEG file are stored in the memory card 42 or recorded in the RAW file in that order, and any data is stored. Alternatively, when it is determined that data is recorded, data (color information) for a plurality of pixels is read from the data, but it is determined whether the data is stored in the memory card 42 or recorded in the RAW file. The order to do is not limited to this order. For example, it is first determined whether thumbnail data is recorded in a RAW file, then it is determined whether screen nail data is recorded in the RAW file, and finally image data included in the JPEG file is stored. It may be determined whether it is stored in the memory card 42 or not.

上述した実施形態では、JPEG圧縮処理において単色化を実行するものとしたが、単色化を実行するタイミングはJPEG圧縮処理の時には限られない。例えば、色再現処理を行うときに実行してもよいし、ガンマ補正処理を行う時に実行してもよい。   In the above-described embodiment, monochromatic processing is executed in the JPEG compression processing. However, the timing for executing monochromatic processing is not limited to the time of JPEG compression processing. For example, it may be executed when color reproduction processing is performed, or may be performed when gamma correction processing is performed.

上述した実施形態では、メモリカード42からRAWファイル及び同時記録JPEGファイルを読み出すものとしたが、これらのファイルが記録されているものからであれば如何なるものから読み出すものとしてもよい。例えば、赤外線通信によりデジタルカメラからこれらのファイルを受信して一時的に記憶しているメモリ66から読み出すものとしてもよいし、USB接続により接続されたデジタルカメラ内のメモリからこれらのファイルを読み出すものとしてもよいし、コンピュータネットワーク(例えば、インターネット)上の他のコンピュータからこれらのファイルを受信して一時的に記憶しているメモリ66から読み出すものとしてもよい。これらの場合は、赤外線通信やUSB接続、ネットワーク接続を実現する赤外線通信ボードやUSBコントローラ、ネットワークインタフェースボード等を備えることとなる。   In the above-described embodiment, the RAW file and the simultaneously recorded JPEG file are read from the memory card 42. However, any file may be read as long as these files are recorded. For example, these files may be received from the digital camera by infrared communication and read from the temporarily stored memory 66, or those files may be read from the memory in the digital camera connected by USB connection. Alternatively, these files may be received from another computer on a computer network (for example, the Internet) and read from the memory 66 temporarily stored. In these cases, an infrared communication board, a USB controller, a network interface board, and the like for realizing infrared communication, USB connection, and network connection are provided.

上述した実施形態では、本発明を印刷出力するマルチファンクションプリンタ10に適用することについて説明したが、画像データを表示出力するものに適用してもよい。例えば、フォトストレージビューアやデジタルカメラ等に適用してもよい。   In the above-described embodiment, the application of the present invention to the multifunction printer 10 that prints out has been described. However, the present invention may be applied to an apparatus that displays and outputs image data. For example, you may apply to a photo storage viewer, a digital camera, etc.

上述した実施形態では、インクジェット方式を採用し着色剤としてインクを利用するフルカラーのプリンタ10としたが、電子写真方式を採用し着色剤としてトナーを利用するカラーレーザプリンタや、熱転写方式を採用し着色剤としてインクリボンを利用するカラープリンタとしてもよい。また、FAX機やコピー機などの印刷装置としてもよい。   In the above-described embodiment, the full-color printer 10 that employs an ink jet method and uses ink as a colorant is used. However, a color laser printer that employs an electrophotographic method and uses toner as a colorant, or a thermal transfer method that employs color. A color printer using an ink ribbon as the agent may be used. Also, a printing apparatus such as a FAX machine or a copier may be used.

マルチファンクションプリンタ10の外観図及びブロック図。FIG. 2 is an external view and a block diagram of the multifunction printer 10. メモリカード42に記録されたファイルの説明図。Explanatory drawing of the file recorded on the memory card. RAWファイルの説明図。Explanatory drawing of a RAW file. CCDの説明図。Explanatory drawing of CCD. RAWデータ印刷処理ルーチンの一例を示すフローチャート。6 is a flowchart illustrating an example of a RAW data print processing routine.

符号の説明Explanation of symbols

10 マルチファンクションプリンタ、12 バス、20 プリンタユニット、22 プリンタASIC、24 プリンタエンジン、30 スキャナユニット、32 スキャナASIC、34 スキャナエンジン、40 メモリカードスロット、42 メモリカード、44 メモリカードコントローラ、50 操作パネル、52 表示部、54 ボタン類、56 矢印キー、58 印刷ボタン、60 メインコントローラ、62 CPU、64 ROM、66 RAM、68 フラッシュメモリ、69 内部通信インタフェース、70 CCD、70a 窓、90a 被写体1のRAWファイル、90b 被写体1のJPEGファイル、90c 被写体2のRAWファイル、90d 被写体3のRAWファイル、92 ヘッダ、94 RAWデータ、96 サムネイルデータ、98 スクリーンネイルデータ、S 用紙。   10 Multifunction Printer, 12 Bus, 20 Printer Unit, 22 Printer ASIC, 24 Printer Engine, 30 Scanner Unit, 32 Scanner ASIC, 34 Scanner Engine, 40 Memory Card Slot, 42 Memory Card, 44 Memory Card Controller, 50 Operation Panel, 52 display unit, 54 buttons, 56 arrow keys, 58 print button, 60 main controller, 62 CPU, 64 ROM, 66 RAM, 68 flash memory, 69 internal communication interface, 70 CCD, 70a window, 90a RAW file of subject 1 90b Subject 1 JPEG file, 90c Subject 2 RAW file, 90d Subject 3 RAW file, 92 header, 94 RAW data, 96 thumbnail Data, 98 screen nail data, S paper.

Claims (4)

RAWデータを処理するRAWデータ処理装置であって、
RAWデータと、該RAWデータに基づいて現像処理が施された現像データとを取得するデータ取得手段と、
前記RAWデータに関する出力要求があったとき、前記現像データの一部又は全部の各画素の色差の偏差に基づいて前記現像データが単色化処理を含む現像処理が施されたものであるか否かを判定し、前記現像データが単色化処理を含む現像処理が施されたものであれば前記RAWデータに対して単色化処理を含む現像処理を施す現像手段と、
前記RAWデータに対して前記現像処理を施した画像につき所定の出力処理を行う出力手段と、
を備えたRAWデータ処理装置。
A RAW data processing device for processing RAW data,
Data acquisition means for acquiring RAW data and development data subjected to development processing based on the RAW data;
When there is an output request related to the RAW data, whether or not the development data is subjected to a development process including a monochromatic process based on a color difference deviation of each or all of the pixels of the development data And developing means for performing development processing including monochrome processing on the RAW data if the development data has been subjected to development processing including monochrome processing;
An output means for performing a predetermined output process for an image obtained by performing the development process on the RAW data;
RAW data processing apparatus.
前記現像手段は、前記現像データの一部又は全部の各画素の色素の標準偏差が所定の閾値よりも小さい場合に前記現像データが単色化処理を含む現像処理が施されたものであると判定する、
請求項1に記載のRAWデータ処理装置。
The developing means determines that the development data has undergone a development process including a monochromatic process when the standard deviation of the pigment of each pixel of a part or all of the development data is smaller than a predetermined threshold value. To
The RAW data processing apparatus according to claim 1.
RAWデータに所定の出力処理を行うコンピュータソフトウェアによるRAWデータ処理方法であって、
(a)RAWデータと、該RAWデータに基づいて現像処理が施された現像データとを取得するステップと、
(b)前記RAWデータに関する出力要求があったとき、前記ステップ(a)で取得した前記現像データの一部又は全部の各画素の色差の偏差に基づいて前記現像データが単色化処理を含む現像処理が施されたものであるか否かを判定し、前記現像データが単色化処理を含む現像処理が施されたものであれば前記RAWデータに対して単色化処理を含む現像処理を施すステップと、
(c)前記ステップ(b)で前記現像処理を施した画像につき所定の出力処理を行うステップと、
を含むRAWデータ処理方法。
A RAW data processing method by computer software for performing predetermined output processing on RAW data,
(A) obtaining RAW data and development data subjected to development processing based on the RAW data;
(B) When there is an output request related to the RAW data, the development data includes a monochromatic process based on a deviation in color difference of each or all of the pixels of the development data acquired in step (a). A step of determining whether or not processing has been performed, and performing development processing including monochrome processing on the RAW data if the development data has been subjected to development processing including monochrome processing When,
(C) performing a predetermined output process on the image subjected to the development process in the step (b);
RAW data processing method.
コンピュータに、
(a)RAWデータと、該RAWデータに基づいて現像処理が施された現像データとを取得するステップと、
(b)前記RAWデータに関する出力要求があったとき、前記ステップ(a)で取得した前記現像データの一部又は全部の各画素の色差の偏差に基づいて前記現像データが単色化処理を含む現像処理が施されたものであるか否かを判定し、前記現像データが単色化処理を含む現像処理が施されたものであれば前記RAWデータに対して単色化処理を含む現像処理を施すステップと、
(c)前記ステップ(b)で前記現像処理を施した画像につき所定の出力処理を行うステップと、
実行させるためのプログラム。
On the computer,
(A) obtaining RAW data and development data subjected to development processing based on the RAW data;
(B) When there is an output request related to the RAW data, the development data includes a monochromatic process based on a deviation in color difference of each or all of the pixels of the development data acquired in step (a). A step of determining whether or not processing has been performed and, if the development data has been subjected to development processing including monochrome processing, performing development processing including monochrome processing on the RAW data When,
(C) performing a predetermined output process on the image subjected to the development process in the step (b);
Program for the execution.
JP2008316735A 2008-12-12 2008-12-12 RAW data processing apparatus, RAW data processing method and program thereof Expired - Fee Related JP4605288B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008316735A JP4605288B2 (en) 2008-12-12 2008-12-12 RAW data processing apparatus, RAW data processing method and program thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008316735A JP4605288B2 (en) 2008-12-12 2008-12-12 RAW data processing apparatus, RAW data processing method and program thereof

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2006289210A Division JP4259565B2 (en) 2006-10-24 2006-10-24 RAW data processing apparatus, RAW data processing method and program thereof

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010178590A Division JP4771001B2 (en) 2010-08-09 2010-08-09 RAW data processing apparatus, RAW data processing method and program thereof

Publications (2)

Publication Number Publication Date
JP2009077437A JP2009077437A (en) 2009-04-09
JP4605288B2 true JP4605288B2 (en) 2011-01-05

Family

ID=40611902

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008316735A Expired - Fee Related JP4605288B2 (en) 2008-12-12 2008-12-12 RAW data processing apparatus, RAW data processing method and program thereof

Country Status (1)

Country Link
JP (1) JP4605288B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010279067A (en) * 2010-08-09 2010-12-09 Seiko Epson Corp Raw data processor, raw data processing method and program thereof

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4605289B2 (en) * 2008-12-12 2011-01-05 セイコーエプソン株式会社 RAW data processing apparatus, RAW data processing method and program thereof

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1042286A (en) * 1996-07-19 1998-02-13 Canon Inc Device and method for processing image and computer readable memory device
JP2000350234A (en) * 1999-06-07 2000-12-15 Fuji Photo Film Co Ltd Electronic camera and print controller
JP2002314930A (en) * 2001-04-10 2002-10-25 Olympus Optical Co Ltd Image processing system, method for processing image, printing device, and electronic camera
JP2004104600A (en) * 2002-09-11 2004-04-02 Canon Inc Image pickup device, data processing method in image pickup device, storage medium and program
JP2004128809A (en) * 2002-10-01 2004-04-22 Canon Inc Method and apparatus for image processing, and imaging device
JP2004304712A (en) * 2003-04-01 2004-10-28 Canon Inc Image processing method and apparatus
JP2006166051A (en) * 2004-12-08 2006-06-22 Canon Inc Electronic camera
JP2006197243A (en) * 2005-01-13 2006-07-27 Canon Inc Imaging apparatus and method, program, and storage medium
JP2006227698A (en) * 2005-02-15 2006-08-31 Seiko Epson Corp Raw data processing method, program and device
JP2007150492A (en) * 2005-11-25 2007-06-14 Nikon Corp Electronic camera
JP2007334708A (en) * 2006-06-16 2007-12-27 Sony Corp Image processor, image processing method, program for the image processing method, and recording medium recording the program
JP2009077438A (en) * 2008-12-12 2009-04-09 Seiko Epson Corp Raw data processor, raw data processing method and program thereof
JP4259565B2 (en) * 2006-10-24 2009-04-30 セイコーエプソン株式会社 RAW data processing apparatus, RAW data processing method and program thereof

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1042286A (en) * 1996-07-19 1998-02-13 Canon Inc Device and method for processing image and computer readable memory device
JP2000350234A (en) * 1999-06-07 2000-12-15 Fuji Photo Film Co Ltd Electronic camera and print controller
JP2002314930A (en) * 2001-04-10 2002-10-25 Olympus Optical Co Ltd Image processing system, method for processing image, printing device, and electronic camera
JP2004104600A (en) * 2002-09-11 2004-04-02 Canon Inc Image pickup device, data processing method in image pickup device, storage medium and program
JP2004128809A (en) * 2002-10-01 2004-04-22 Canon Inc Method and apparatus for image processing, and imaging device
JP2004304712A (en) * 2003-04-01 2004-10-28 Canon Inc Image processing method and apparatus
JP2006166051A (en) * 2004-12-08 2006-06-22 Canon Inc Electronic camera
JP2006197243A (en) * 2005-01-13 2006-07-27 Canon Inc Imaging apparatus and method, program, and storage medium
JP2006227698A (en) * 2005-02-15 2006-08-31 Seiko Epson Corp Raw data processing method, program and device
JP2007150492A (en) * 2005-11-25 2007-06-14 Nikon Corp Electronic camera
JP2007334708A (en) * 2006-06-16 2007-12-27 Sony Corp Image processor, image processing method, program for the image processing method, and recording medium recording the program
JP4259565B2 (en) * 2006-10-24 2009-04-30 セイコーエプソン株式会社 RAW data processing apparatus, RAW data processing method and program thereof
JP2009077438A (en) * 2008-12-12 2009-04-09 Seiko Epson Corp Raw data processor, raw data processing method and program thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010279067A (en) * 2010-08-09 2010-12-09 Seiko Epson Corp Raw data processor, raw data processing method and program thereof

Also Published As

Publication number Publication date
JP2009077437A (en) 2009-04-09

Similar Documents

Publication Publication Date Title
JP4323748B2 (en) Digital camera and control method thereof, image processing apparatus, image processing method, and image processing system
JP5594382B2 (en) Output image adjustment for image files
US7956895B2 (en) Image output device, image processing apparatus, image output and image processing system, and method therefore
US9094642B2 (en) Color image processing apparatus and method for processing color image
WO2004030373A1 (en) Adjusting output image of image data
JP4259565B2 (en) RAW data processing apparatus, RAW data processing method and program thereof
JP4605288B2 (en) RAW data processing apparatus, RAW data processing method and program thereof
JP4605289B2 (en) RAW data processing apparatus, RAW data processing method and program thereof
US8390880B2 (en) Printing apparatus, method and program for automatic image quality adjustment based on combination of correction amounts and display of image and correction information
JP5098506B2 (en) Printing apparatus, control method therefor, and program
JP2004240992A (en) Output image adjustment of image file
JP4771001B2 (en) RAW data processing apparatus, RAW data processing method and program thereof
JP4924274B2 (en) Image processing apparatus, image processing method, and program thereof
JP4764889B2 (en) Image processing apparatus and image processing method
JP3666439B2 (en) Output image adjustment for image files
JP2002344763A (en) Image processor
JP4131267B2 (en) Image processing device
US9131181B2 (en) Apparatus and method for producing a monochrome image
JP2000071578A (en) Printer
JP2002344764A (en) Image processor
JP2017132126A (en) Image forming device and image forming system
JP2000083165A (en) Printer
JP2009023191A (en) Printer, its control method and program
JP4595965B2 (en) Output image adjustment for image files
JP2006262162A (en) Image forming apparatus, system and method for printing image, and program

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090116

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100608

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100907

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100920

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131015

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees