JP4432505B2 - Inspection device, inspection program, inspection method, control device, and control program - Google Patents

Inspection device, inspection program, inspection method, control device, and control program Download PDF

Info

Publication number
JP4432505B2
JP4432505B2 JP2004014196A JP2004014196A JP4432505B2 JP 4432505 B2 JP4432505 B2 JP 4432505B2 JP 2004014196 A JP2004014196 A JP 2004014196A JP 2004014196 A JP2004014196 A JP 2004014196A JP 4432505 B2 JP4432505 B2 JP 4432505B2
Authority
JP
Japan
Prior art keywords
inspection
image data
defect
information
security
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004014196A
Other languages
Japanese (ja)
Other versions
JP2005208890A (en
Inventor
弘毅 上床
康二 足立
善弥 伊本
慎一 大橋
靖幸 田中
伸介 杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2004014196A priority Critical patent/JP4432505B2/en
Publication of JP2005208890A publication Critical patent/JP2005208890A/en
Application granted granted Critical
Publication of JP4432505B2 publication Critical patent/JP4432505B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は、印刷画像を読み取って作成した検査画像データをもとに行う印刷画像の検査に関連した技術、特に、画像欠陥が検出された欠陥検査画像データのセキュリティ対策技術に関する。   The present invention relates to a technique related to a print image inspection performed based on inspection image data created by reading a print image, and more particularly to a security countermeasure technique for defect inspection image data in which an image defect is detected.

画像形成装置により形成された印刷画像を撮像し、得られた検査画像データを用いて印刷画像の検査を実施する技術が知られている。   A technique is known in which a print image formed by an image forming apparatus is picked up and an inspection of the print image is performed using the obtained inspection image data.

下記特許文献1には、まず、ラインセンサで印刷物の表面を監視して欠陥検出を行い、画像欠陥が検出された場合に欠陥部分をエリアセンサで撮像記録して得た欠陥検査画像データを随時読み出し表示可能とする構成が開示されている。また、画像欠陥の検出信号を基に印刷画像毎の欠陥数を把握する技術が記されている。   In the following Patent Document 1, first, defect inspection image data obtained by monitoring a surface of a printed matter with a line sensor and detecting a defect and imaging and recording a defective portion with an area sensor when an image defect is detected is recorded as needed. A configuration enabling reading and display is disclosed. Further, a technique is described in which the number of defects for each print image is grasped based on an image defect detection signal.

下記特許文献2には、欠陥検出の履歴に対応した欠陥検査画像データに基づいて縮小画像を表示する技術が開示されている。   Patent Document 2 below discloses a technique for displaying a reduced image based on defect inspection image data corresponding to a defect detection history.

特開平5−188009号公報Japanese Patent Laid-Open No. 5-188209 特開2000−338052号公報JP 2000-338052 A

しかしながら、上記特許文献1,2の技術では、欠陥検査画像データが対応する印刷画像のもつ機密情報を含む場合にも、そのセキュリティを考慮することなく保管処理を行ってしまう。このため、管理者や社外サポートを含む他者がメインテナンスを行う時にこの機密情報を知り得てしまう等の問題が生じる。   However, in the techniques of Patent Documents 1 and 2, even when the defect inspection image data includes confidential information of the corresponding print image, the storage process is performed without considering the security. For this reason, there arises a problem that the confidential information can be obtained when an administrator or another person including external support performs maintenance.

本発明の目的は、欠陥検査画像データを、そのセキュリティを考慮して管理することにある。   An object of the present invention is to manage defect inspection image data in consideration of its security.

本発明の検査装置は、印刷画像の読み取り処理により得られた検査画像データ、及び、その検査画像データのセキュリティ情報を取得する取得手段と、前記検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データの保管処理において前記セキュリティ情報に基づいたセキュリティ処理を行うか否かを判定する判定手段と、前記判定手段の判定結果に従って前記欠陥検査画像データの保管処理を行う保管処理手段と、前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管手段と、を備え、前記代用特性生成保管手段は、前記判定手段によりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して実施されるThe inspection apparatus according to the present invention includes an inspection image data obtained by a print image reading process, an acquisition unit that acquires security information of the inspection image data, and a defect inspection of the print image using the inspection image data. Inspection means for performing, determination means for determining whether or not to perform security processing based on the security information in storage processing of defect inspection image data, which is inspection image data in which an image defect is detected by the defect inspection, and the determination Storage processing means for storing the defect inspection image data according to the determination result of the means, and substitute characteristic generation storage means for generating and storing substitute characteristic information indicating defect characteristics of the defect inspection image data , The substitute characteristic generation storage unit stores the defect inspection image data determined to be subjected to security processing by the determination unit. It is performed on.

検査装置は、検査画像データの検査を行う装置である。そして、検査画像データは、プリンタや複写機等の画像形成装置により紙等の用紙上に印刷された印刷画像を読み取ることで得られる電子的な情報である。検査装置は、画像形成装置に組み込まれて一体形成されていてもよいし、PC(パーソナルコンピュータ)などを用いて別途構成されていてもよい。   The inspection apparatus is an apparatus that inspects inspection image data. The inspection image data is electronic information obtained by reading a print image printed on paper such as paper by an image forming apparatus such as a printer or a copier. The inspection apparatus may be integrated with the image forming apparatus and may be separately configured using a PC (personal computer) or the like.

取得手段は、検査画像データと対応する印刷画像のセキュリティ情報を取得する。この検査画像データは、検査装置が印刷画像から撮像生成する手段を備えることで取得されてもよいし、他の装置で生成されたものを検査装置が入力手段を用いて入力することにより取得されてもよい。セキュリティ情報は、検査画像データの機密扱いの状況を示す情報であり、例えば、対応する印刷画像がもつセキュリティ情報に基づいて与えることも可能であり、また、ユーザ入力等により設定されてもよい。そして、セキュリティ情報の取得は、検査画像データの取得時に行われてもよいし、別途行われてもよい。なお、セキュリティ情報が取得されない場合の処理態様は適宜設定することが可能であり、一般的にはセキュリティを考慮しない処理が行われる。   The acquisition unit acquires security information of the print image corresponding to the inspection image data. The inspection image data may be acquired by the inspection apparatus including a unit that captures and generates from a print image, or is acquired by the inspection apparatus using an input unit that is generated by another apparatus. May be. The security information is information indicating the confidential status of the inspection image data. For example, the security information can be given based on the security information of the corresponding print image, and may be set by user input or the like. And acquisition of security information may be performed at the time of acquisition of inspection image data, and may be performed separately. Note that the processing mode when security information is not acquired can be set as appropriate, and processing that does not consider security is generally performed.

検査手段は、検査画像データに基づいて印刷画像の品質上の画像欠陥を検査する欠陥検査を行うために設けられている。欠陥検査は、検査対象となる検査画像データのみを用いて行ってもよいし、他の検査画像データとの比較や、印刷画像を形成する際に用いた原画像データとの比較などによって行うことも可能である。   The inspection means is provided for performing a defect inspection for inspecting an image defect in quality of the printed image based on the inspection image data. The defect inspection may be performed using only the inspection image data to be inspected, or by comparison with other inspection image data, comparison with the original image data used when forming the print image, or the like. Is also possible.

判定手段は、欠陥検査画像データの保管処理においてセキュリティ処理を行うか否かを判定する。すなわち、機密情報を含む欠陥検査画像データから機密が漏洩する事態を防ぐため、セキュリティ情報に基づいて機密保持を可能とするセキュリティ処理を行うか否か判定する。セキュリティ情報への基づき方は、予め設定されてもよいし、動的に設定されてもよい。   The determination means determines whether or not to perform security processing in the defect inspection image data storage processing. That is, in order to prevent a situation in which confidentiality is leaked from the defect inspection image data including confidential information, it is determined whether or not to perform security processing that enables confidentiality maintenance based on the security information. The method based on the security information may be set in advance or may be set dynamically.

保管処理手段は、保管処理内容に従って欠陥検査により欠陥が検出された検査画像データ(これを欠陥検査画像データと呼ぶ)の保管処理を行う。すなわち、保管処理の内容に応じて、欠陥検査画像データの画像処理や保管を行う。保管は具体的には記憶部に記憶されることで行われる。記憶部は、例えば、半導体メモリやハードディスク等を備え、両者の間では適宜データの移動を行うことができる。保管手段は、記憶部が検査装置に内蔵されている場合には保管手段はこの記憶部を用いて保管を行う。また、記憶部が外部装置に設けられているような場合には、保管手段はこの外部装置に対し保管指示を行う。なお、保管処理は、既に長期保管用を意図して(例えばハードディスクに)保管されている欠陥検査画像データに対して行われてもよいし、長期保管用される前に一時的に(例えば主記憶装置に)保管されている欠陥検査画像データに対して行われてもよい。また、本発明の一態様の検査装置において、保管処理手段は、判定手段の判定結果がセキュリティ処理を行うことである場合に、欠陥検査画像データの保管処理を行わないものであってよい。 The storage processing means performs storage processing of inspection image data (hereinafter referred to as defect inspection image data) in which defects are detected by defect inspection according to the contents of the storage processing. That is, image processing and storage of defect inspection image data are performed according to the content of the storage processing. Specifically, the storage is performed by being stored in the storage unit. The storage unit includes, for example, a semiconductor memory, a hard disk, and the like, and can appropriately move data between the two. When the storage unit is built in the inspection apparatus, the storage unit stores the storage unit using the storage unit. When the storage unit is provided in the external device, the storage unit issues a storage instruction to the external device. The storage process may be performed on defect inspection image data that has already been stored for long-term storage (for example, on a hard disk) or temporarily (for example, main data) before long-term storage. It may be performed on defect inspection image data stored in the storage device. In the inspection apparatus according to one aspect of the present invention, the storage processing unit may not perform the storage processing of the defect inspection image data when the determination result of the determination unit is that the security processing is performed.

検査装置の制御は、演算制御機能とその演算制御機能の動作を規定するアプリケーションソフトウエア(プログラム)とによって構成される制御部によって行われる。通常、検査装置は、検査装置と一体構成された制御部から制御を受けるが、画像形成装置や他のPC等に設けられた制御部から適当な制御指令を受けることも可能である。   The inspection apparatus is controlled by a control unit configured by an arithmetic control function and application software (program) that defines the operation of the arithmetic control function. Normally, the inspection apparatus is controlled by a control unit integrally formed with the inspection apparatus, but it is also possible to receive an appropriate control command from a control unit provided in the image forming apparatus or another PC.

この構成によれば、欠陥検査画像データを、そのセキュリティを考慮して管理することができる。すなわち、第三者に対する機密情報の漏洩を防ぐことができ、セキュリティ上の信頼性の高い検査装置を構築することが可能となる。なお、画像欠陥が見つからない検査画像データを保管するような場合にも、当然ながらセキュリティ情報に基づいたセキュリティ処理を実行することができる。   According to this configuration, defect inspection image data can be managed in consideration of its security. That is, it is possible to prevent leakage of confidential information to a third party, and to build a highly reliable inspection apparatus for security. Even when inspection image data in which no image defect is found is stored, naturally security processing based on security information can be executed.

望ましくは、本発明の検査装置において、前記セキュリティ処理は、前記欠陥検査画像データを閲覧不能にする処理である。閲覧不能にする処理とは、通常の読み込み処理を行ったのでは前記欠陥検査画像データの内容を把握できないようにする処理である。一例としては、一般ユーザに対して読み込み権限を与えないようにする読込不能化処理、すなわち、パスワード等による認証を経た特定のユーザに対してのみ読み込みを許す処理を挙げることができる。望ましくは、本発明の検査装置において、前記閲覧不能にする処理は、前記欠陥検査画像データを削除する処理である。望ましくは、本発明の検査装置において、前記閲覧不能にする処理は、前記欠陥検査画像データを暗号化する処理である。例えばセキュリティ情報が機密レベルの情報である場合には、機密レベルが所定のレベル以上の時に機密にすべき欠陥検査画像データを削除する、あるいは、暗号化することにより、欠陥検査画像データの機密を確保することが可能である。したがって、例えばこの機密レベルをユーザが指定することにすれば、ユーザは欠陥検査画像データを残すものと残さないものとに分類することも可能である。また、例えばセキュリティ情報が機密領域情報である場合には、少なくともその機密領域については、欠陥検査画像データの保存を行わない、あるいは、暗号化を行うことにより欠陥検査画像データの機密を確保することが可能である。   Preferably, in the inspection apparatus according to the present invention, the security processing is processing for making the defect inspection image data unviewable. The process for making browsing impossible is a process for preventing the contents of the defect inspection image data from being grasped by performing a normal reading process. As an example, there can be cited a process of disabling reading that does not give a read authority to a general user, that is, a process of permitting reading only for a specific user who has been authenticated by a password or the like. Preferably, in the inspection apparatus according to the present invention, the process of making the browsing impossible is a process of deleting the defect inspection image data. Preferably, in the inspection apparatus according to the present invention, the process of making the browsing impossible is a process of encrypting the defect inspection image data. For example, if the security information is confidential level information, the defect inspection image data that should be kept confidential when the security level is a predetermined level or higher is deleted or encrypted, thereby protecting the confidentiality of the defect inspection image data. It is possible to secure. Therefore, for example, if the user designates this security level, the user can also classify the security inspection data into those that leave defect inspection image data. For example, when the security information is confidential area information, at least for the confidential area, the defect inspection image data is not stored, or the defect inspection image data is secured by encryption. Is possible.

望ましくは、本発明の検査装置において、前記印刷画像に含まれる文字についての文字情報を取得する文字情報取得手段を有し、前記セキュリティ処理は、前記文字情報の取得結果に基づいて、前記印刷画像に文字が含まれる場合に行われる処理である。文字情報とは、文字含有情報(文字が含まれているか否か)、文字領域情報(文字が含まれている領域はどこか)、機密文字含有情報(文字に住所や電話番号などのセキュリティ上重要と判断される所定の文字が含まれているかどうか)などの情報である。文字情報を取得する手段は、検査装置自体が欠陥検査画像データ上の文字情報を認識する手段を備えることで実現されてもよいし、印刷画像の基になった原画像データのPDL(ページ記述言語)等から取得することも可能である。また、ユーザがモニタ画面を見ながら陽に文字領域情報を入力してもよい。そして、この文字情報に基づいて、文字に対するセキュリティ処理を実施する。セキュリティ処理の内容としては、例えば、閲覧不能にする処理をその文字、あるいは、欠陥検査画像データの全て又は文字を含む部分に対して実行することを挙げることができる。   Preferably, in the inspection apparatus of the present invention, the inspection apparatus includes character information acquisition means for acquiring character information about characters included in the print image, and the security processing is based on the acquisition result of the character information. This process is performed when a character is included in. Character information includes character-containing information (whether or not characters are included), character area information (where the character is included), confidential character-containing information (characters such as address and phone number) Whether a predetermined character judged to be important is included). The means for acquiring the character information may be realized by the inspection apparatus itself having means for recognizing the character information on the defect inspection image data, or the PDL (page description of the original image data on which the print image is based). (Language). Further, the user may explicitly input the character area information while looking at the monitor screen. And based on this character information, the security process with respect to a character is implemented. As the contents of the security process, for example, the process of making the browsing impossible can be performed on the character, or all of the defect inspection image data or a part including the character.

望ましくは、本発明の検査装置において、前記文字情報は前記印刷画像に含まれる文字領域の情報であり、前記セキュリティ処理は、少なくとも前記文字領域に対応するデータを閲覧不能にする処理である。例えば文字領域に対応するデータを削除した場合には、その部分に、適当な文字や図形パターンの画像データを埋め込むことも可能である。埋め込む画像データはもとの図形パターンに基づいて作成してもよい(例えばモザイク処理やぼかし処理などの迷彩化処理)。   Preferably, in the inspection apparatus of the present invention, the character information is information on a character area included in the print image, and the security process is a process of making at least data corresponding to the character area unviewable. For example, when data corresponding to a character area is deleted, image data of an appropriate character or graphic pattern can be embedded in that portion. The embedded image data may be created based on the original graphic pattern (for example, camouflaging processing such as mosaic processing or blur processing).

望ましくは、本発明の検査装置において、前記セキュリティ情報は、少なくとも2段階のランクを備えた機密レベル情報である。すなわち、機密レベル情報には、セキュリティを考慮しないレベルとセキュリティを考慮するレベルの情報が少なくとも含まれる。一方のレベルをデフォルト値とすることで、入力の有無により他方のレベル情報が与えられたものとみなしてもよい。セキュリティを考慮する際の考慮のレベルとしては、暗号化による保存を許すレベルや、必ず削除を行わなければならないレベルなど、多段階のレベルを設けてもよい。機密レベル情報は、必ずしも直接的に機密レベルを表現していなくてもよく、例えば、印刷画像のジョブ入力者の名前や所属部署に応じて機密レベルを割り当てるといったように、予め設定されたテーブル等に従って直接的な機密レベル情報に変換可能な間接的機密レベル情報であってもよい。   Preferably, in the inspection apparatus of the present invention, the security information is confidential level information having at least two ranks. That is, the confidential level information includes at least information on a level not considering security and a level considering security. By setting one level as a default value, it may be considered that the other level information is given depending on the presence or absence of input. As a level of consideration when considering security, a multi-stage level such as a level that allows storage by encryption or a level that must be deleted must be provided. The security level information does not necessarily represent the security level directly. For example, a table set in advance, such as assigning a security level according to the name of the job input person of the print image and the department to which the job belongs, etc. Indirect confidential level information that can be converted into direct confidential level information according to

望ましくは、本発明の検査装置において、前記セキュリティ情報は、対応する前記印刷画像の機密領域を表す機密領域情報である。機密領域とは、その領域に含まれる印刷画像の情報漏洩を防ぐように、通常とは異なる処理が求められる領域である。実際に機密領域に含まれている情報が機密にすべきものであるか否かは問題ではなく、例えば空白域に対して機密領域が設定されてもよい。機密領域は、印刷画像上の全領域を表すものであってもよいし、部分的範囲を表すものであってもよい。望ましくは、本発明の検査装置において、前記セキュリティ処理は、前記機密領域以外の領域で前記欠陥が検出された場合に、少なくとも前記機密領域を閲覧不能にし、少なくとも前記欠陥が検出された前記機密領域以外の領域を閲覧可能とする処理である。   Preferably, in the inspection apparatus of the present invention, the security information is confidential area information representing a confidential area of the corresponding print image. The confidential area is an area that requires processing different from normal processing so as to prevent information leakage of the print image included in the area. It does not matter whether the information actually contained in the confidential area should be confidential. For example, the confidential area may be set for a blank area. The confidential area may represent the entire area on the print image, or may represent a partial range. Preferably, in the inspection apparatus according to the present invention, when the defect is detected in an area other than the confidential area, the security process makes at least the confidential area unreadable and at least the confidential area in which the defect is detected. It is the process which enables browsing of areas other than.

用特性情報は、削除する欠陥検査画像データに代わって、欠陥検査の結果を把握するために必要な情報である。通常、見いだされた欠陥に関する簡単な記録は、別途生成される履歴情報中に残されるが、これだけでは欠陥の把握が十分に行えないため、欠陥の詳細な内容を示す必要がある。そこで、代用特性情報として、欠陥の種類、発生範囲(位置や広さなど)、欠陥の質的大きさ(濃度むらの濃さや、位置ずれの大きさなど)、圧縮情報(スペクトルや頻度分布など)等を残すことで、管理者等が欠陥の状況を詳細に把握することが可能となる。なお、代用特性情報を記憶する記憶部が外部に設けられている場合には、記憶指示を行うことで保管を行うことができる。例えば、検査装置の内部の演算部で代用特性情報を生成し、外部の記憶装置に記憶するように構成されていてもよい。
The cash for property information on behalf of the defect inspection image data to be deleted, the information needed to determine the result of the defect inspection. Usually, a simple record relating to the found defect is left in the separately generated history information. However, it is not sufficient to grasp the defect by itself, and it is necessary to indicate the detailed contents of the defect. Therefore, as substitute characteristic information, the type of defect, the range of occurrence (position and size, etc.), the qualitative size of the defect (density density, magnitude of positional deviation, etc.), compression information (spectrum, frequency distribution, etc.) ) Etc., it becomes possible for the administrator or the like to grasp the details of the defect in detail. In addition, when the memory | storage part which memorize | stores substitute characteristic information is provided in the exterior, it can preserve | save by performing a memory | storage instruction | indication. For example, the substitute characteristic information may be generated by an arithmetic unit inside the inspection apparatus and stored in an external storage device.

図1は、本実施形態の装置構成の概略を示す機能ブロック図である。   FIG. 1 is a functional block diagram showing an outline of the apparatus configuration of the present embodiment.

画像形成システム10は、画像形成装置20と検査・制御装置30とからなる。画像形成装置20は、プリンタ、複写機、ファクシミリ等の画像形成機能を備えた装置、あるいは、これらの機能を複合的に備えた装置を想定したものである。以下では、カラー印刷可能な複合機を念頭において説明を行う。また、検査・制御装置30は、演算処理機能をもつハードウエアとこのハードウエアの動作を規定するソフトウエアとを含む演算処理装置によって実現可能であり、以下ではPC(パーソナルコンピュータ)を利用するものとして説明を行う。検査・制御装置30は、画像形成装置20と直接接続されてその制御を行うとともに、画像形成装置20の印刷処理状態の検査と検査結果の管理も行っている。検査・制御装置30は、さらに、LAN(ローカルエリアネットワーク)300にも接続されており、このネットワークに接続された装置から印刷処理を要求するジョブを受け付けたり、制御指示を受け付けたりすることができる。   The image forming system 10 includes an image forming apparatus 20 and an inspection / control apparatus 30. The image forming apparatus 20 is assumed to be an apparatus having an image forming function such as a printer, a copying machine, or a facsimile, or an apparatus having these functions in combination. The following description will be made with a multifunction printer capable of color printing in mind. Further, the inspection / control device 30 can be realized by an arithmetic processing device including hardware having an arithmetic processing function and software defining the operation of the hardware, and uses a PC (personal computer) below. Will be described. The inspection / control apparatus 30 is directly connected to and controls the image forming apparatus 20, and also performs inspection of the print processing state of the image forming apparatus 20 and management of inspection results. The inspection / control apparatus 30 is further connected to a LAN (local area network) 300, and can accept a job requesting print processing or a control instruction from an apparatus connected to the network. .

画像形成装置20はカラー印刷可能な複合機であり、特徴的な構成として画像形成部22と検査画像データ生成部24を含んでいる。画像形成部22は紙等の用紙上に原画像データに基づいた印刷画像の形成を行う。原画像データは、画像形成装置20で複写実施時にスキャナ機能を用いて読み取り生成されたり、検査・制御装置30を通じて印刷命令とともに入力されたりする。原画像データの形式は、特に限定されないが、前者の場合はラスタ形式(ビットマップ形式)が標準的であり、後者の場合には、ラスタ形式に加えPDL(ページ記述言語)等を利用したベクタ形式も広く用いられる。また、画像形成は典型的には電子写真方式によって行われるが、インクジェット方式やオフセット方式など様々なタイプの方式によって行われてもよい。検査画像データ生成部24は、画像形成が行われた印刷画像を光学的に読み取って、印刷画像の検査用の検査画像データを生成する。なお、画像形成装置20には、この他にも様々な処理構成を行う機能が設けられており、具体例としては、印刷指示を行うための機能や、動作状況を表示するためのモニタ等を挙げることができる。また、画像形成装置20自身に適当な制御機能が設けられていてもよく、次に説明する検査・制御装置30からの制御と協調して動作することができる。   The image forming apparatus 20 is a multifunction machine capable of color printing, and includes an image forming unit 22 and an inspection image data generating unit 24 as a characteristic configuration. The image forming unit 22 forms a print image based on the original image data on paper such as paper. The original image data is read and generated by the image forming apparatus 20 using a scanner function at the time of copying, or input together with a print command through the inspection / control apparatus 30. The format of the original image data is not particularly limited. In the former case, the raster format (bitmap format) is standard, and in the latter case, a vector using PDL (page description language) or the like in addition to the raster format. The format is also widely used. The image formation is typically performed by an electrophotographic method, but may be performed by various types of methods such as an inkjet method and an offset method. The inspection image data generation unit 24 optically reads a print image on which image formation has been performed, and generates inspection image data for inspection of the print image. Note that the image forming apparatus 20 is provided with other functions for performing various processing configurations. Specific examples include a function for issuing a print instruction and a monitor for displaying an operation status. Can be mentioned. The image forming apparatus 20 itself may be provided with an appropriate control function, and can operate in cooperation with the control from the inspection / control apparatus 30 described below.

続いて検査・制御装置30について説明する。検査・制御装置30は、一般のPCに対しその動作を規定するプログラムをインストールすることにより実現されている。すなわち、そのCPUや主記憶装置等を利用した演算処理機能をOSを含むプログラムで動作させることにより、各種の処理を実現することができる。また、ハードディスク等の記憶装置や、外部との通信機能なども適宜利用することが可能である。以下に説明する各処理構成部は、このような機能を有機的に利用することにより実現されている。   Next, the inspection / control device 30 will be described. The inspection / control apparatus 30 is realized by installing a program that defines the operation of a general PC. That is, various processes can be realized by operating the arithmetic processing function using the CPU, the main storage device, and the like by a program including the OS. In addition, a storage device such as a hard disk, an external communication function, and the like can be used as appropriate. Each processing component described below is realized by organically utilizing such a function.

検査・制御装置30が備える主たる機能構成としては、入出力部32、ユーザ出力部36、検査部38、履歴情報管理部40、代用特性生成部42、制御部50、データ解析部60、判定部70、保管部80、テストチャートデータ部90、セキュリティ処理部100がある。これらの各部は基本的に制御部50によって動作を制御されていると同時に、画像形成装置20の動作制御にも利用されている。   The main functional configuration of the inspection / control apparatus 30 includes an input / output unit 32, a user output unit 36, an inspection unit 38, a history information management unit 40, a substitute characteristic generation unit 42, a control unit 50, a data analysis unit 60, and a determination unit. 70, a storage unit 80, a test chart data unit 90, and a security processing unit 100. The operations of these units are basically controlled by the control unit 50, and at the same time, are used for operation control of the image forming apparatus 20.

入出力部32は、画像形成装置20及び検査・制御装置30との間で、命令信号やデータの送受信を行うために設けられている。ユーザ入力部34は、キーボード等の入力装置を通じてユーザが制御部50に対し指示信号等を入力するために設けられている。これにより、ユーザは、画像形成の指令や原画像データのセキュリティ情報等を入力するなどして画像形成システム10を動作させることができる他、印刷画像の欠陥診断やその修正の指示等を行うこともできる。表示部36は、ディスプレイ等に検査・制御装置30の動作状況を表示したり、ユーザに対して入力を促す表示を行うための部位である。   The input / output unit 32 is provided to transmit / receive command signals and data to / from the image forming apparatus 20 and the inspection / control apparatus 30. The user input unit 34 is provided for the user to input an instruction signal or the like to the control unit 50 through an input device such as a keyboard. As a result, the user can operate the image forming system 10 by inputting an image formation command, security information of the original image data, and the like, and can also perform a defect diagnosis of the print image and an instruction to correct the print image. You can also. The display unit 36 is a part for displaying the operation status of the inspection / control apparatus 30 on a display or the like, or performing display for prompting the user to input.

検査部38は、検査画像データ生成部24で生成された検査画像データを用いて画像の画像欠陥検査を行う部位である。欠陥検査は、検査画像データ全体を対象として行ってもよいし、特定の部分を対象として行ってもよい。欠陥検査としては様々な種類の画質不良検査を行うことが可能であり、それにより、印刷画像(用紙)全体にわたる欠陥や、印刷画像(用紙)の部分的範囲に対する欠陥を様々に突き止めることができる。全体にわたる欠陥の例としては、用紙と印刷画像の位置がずれるスキューと呼ばれる欠陥や、印刷画像全体に濃度が低濃度側あるいは高濃度側に移る濃度欠陥などを挙げることができる。また、部分的な欠陥の例としては、白抜けや文字抜けなどの局所的な印字欠落や、色むらや濃度むらが局所的に発生する濃度欠陥などを挙げることができる。こうした欠陥検査を行うことによって、欠陥の有無、欠陥の種類、欠陥の位置や範囲、欠陥の質的大きさなどが判明する。履歴情報管理部40は、画像形成装置20における画像形成の記録や検査部38による検査結果の記録を履歴情報として作成管理する。また、この履歴情報に基づいて欠陥の種類別の発生頻度等を集計することもできる。また、代用特性生成部42は、検査部38によって見つけられた欠陥について詳細に記した代用特性情報を作成する。代用特性情報は、欠陥がみつかった欠陥検査画像データの代わりに欠陥の様子を把握できるようにするためのデータである。具体的には、例えば、欠陥の種類、発生範囲(部分の特定など)、欠陥の強度(濃度むらの濃さや、位置ずれの大きさなど)、圧縮情報(スペクトルや頻度分布など)等の情報を挙げることができる。この代用特性情報は、欠陥検査画像データとともに保管することも可能である。   The inspection unit 38 is a part that performs image defect inspection of an image using the inspection image data generated by the inspection image data generation unit 24. The defect inspection may be performed on the entire inspection image data or on a specific portion. It is possible to perform various types of image quality defect inspections as defect inspections, whereby various defects on the entire printed image (paper) and partial areas of the printed image (paper) can be identified. . Examples of the defect over the whole include a defect called skew in which the position of the paper and the print image is shifted, and a density defect in which the density moves to the low density side or the high density side in the entire print image. Examples of partial defects include local printing defects such as white spots and missing letters, and density defects in which color unevenness and density unevenness occur locally. By performing such a defect inspection, the presence / absence of a defect, the type of defect, the position and range of the defect, the qualitative size of the defect, and the like are found. The history information management unit 40 creates and manages image formation records in the image forming apparatus 20 and inspection result records by the inspection unit 38 as history information. Also, the occurrence frequency and the like for each type of defect can be totaled based on this history information. In addition, the substitute characteristic generation unit 42 creates substitute characteristic information describing in detail the defect found by the inspection unit 38. The substitute characteristic information is data for making it possible to grasp the state of the defect instead of the defect inspection image data in which the defect is found. Specifically, for example, information such as defect type, occurrence range (part identification, etc.), defect strength (density unevenness, misalignment magnitude, etc.), compression information (spectrum, frequency distribution, etc.), etc. Can be mentioned. This substitute characteristic information can be stored together with the defect inspection image data.

制御部50は、各構成部の動作制御を行う他、入出力部32を介してLAN300や画像形成装置20から送られる指示信号や、ユーザ入力部34から送られる指示信号等を受け付けて、動作に反映させることもできる。制御部50に設けられた指示部52はこの制御のために設けられており、各構成部や画像形成装置20に対する指示信号を生成して送信する役割を担っている。例えば、画像形成部22に対して原画像データの印刷を実行させたり、検査画像データ生成部24に対して印刷画像を読み取って検査画像データを作成及び送信をさせたりする指示を行うことが可能である。   The control unit 50 controls the operation of each component unit, and receives an instruction signal sent from the LAN 300 or the image forming apparatus 20 via the input / output unit 32, an instruction signal sent from the user input unit 34, or the like. Can also be reflected. An instruction unit 52 provided in the control unit 50 is provided for this control, and plays a role of generating and transmitting an instruction signal to each component unit and the image forming apparatus 20. For example, it is possible to instruct the image forming unit 22 to print the original image data, or to instruct the inspection image data generation unit 24 to read the print image and create and transmit inspection image data. It is.

データ解析部60は、原画像データや欠陥画像データを解析して、これらのデータのもつ特徴を抽出する。抽出する特徴情報は様々なものが可能であり、例えば、カラー情報(カラーかモノクロか、カラーは何色からなるか等)、画質情報(濃度、解像度等)、文字情報(文字は含まれるか、文字が含まれるのはどの範囲か、どのような文字が含まれているか等)、写真・図形情報(写真や図形は含まれているか、どの範囲に含まれているか、どのような写真や図形が含まれているかなど)などを挙げることができる。文字情報解析部62は、この文字情報解析を行うために設けられており、例えば、原画像データがラスタ形式である場合にはOCRを含むパターン認識等の手法により、原画像データがPDL等により記述されている場合にはその言語解析の手法により文字情報解析を行うことができる。   The data analysis unit 60 analyzes the original image data and the defect image data, and extracts features of these data. Various types of feature information can be extracted. For example, color information (color or monochrome, how many colors are used), image quality information (density, resolution, etc.), character information (whether characters are included) , Which range includes characters, what characters are included, etc.), photo / graphic information (whether photos or graphics are included, what range is included, Etc.). The character information analysis unit 62 is provided for performing this character information analysis. For example, when the original image data is in a raster format, the original image data is obtained by PDL or the like by a method such as pattern recognition including OCR. If it is described, character information analysis can be performed by the language analysis method.

判定部70は、検査部38による欠陥検査の結果、欠陥が見いだされた欠陥検査画像データに対する保管処理の内容を判定する。判定内容は様々に設定可能であるが、ここでは特に特徴的な判定を行う構成として、削除判定部72、セキュリティ処理判定部76、テストチャート処理判定部78が設けられている。   The determination unit 70 determines the content of the storage process for the defect inspection image data in which a defect is found as a result of the defect inspection by the inspection unit 38. The determination content can be set in various ways, but here, a deletion determination unit 72, a security processing determination unit 76, and a test chart processing determination unit 78 are provided as a configuration that performs a particularly characteristic determination.

削除判定部72は、欠陥検査画像データを削除するか否かの判定を行う。判定にあたっては、履歴情報管理部40によって与えられる欠陥種類別の発生頻度や保管部80に保管される欠陥検査画像データの数量に基づくことができる。また、削除判定部がもつ欠陥の重要度(これは削除の順番と対応させることができる)を記したテーブルに従って、削除判断を行うこともできる。このテーブルは予め設定してもよいし、動的に作成することも可能である。削除判定部72には、非部分データ削除判定部74が含まれる。この非部分データ削除判定部74は、欠陥検査の結果、欠陥が検査画像データの一部分にだけ存在することが明らかになった場合に、それ以外の部分の少なくとも一部を削除するか否かを判定するために設けられている。   The deletion determination unit 72 determines whether to delete the defect inspection image data. The determination can be based on the occurrence frequency for each defect type given by the history information management unit 40 and the quantity of defect inspection image data stored in the storage unit 80. It is also possible to make a deletion determination according to a table in which the importance of defects possessed by the deletion determination unit (this can be associated with the order of deletion). This table may be set in advance or dynamically created. The deletion determination unit 72 includes a non-partial data deletion determination unit 74. The non-partial data deletion determination unit 74 determines whether or not to delete at least a part of the other part when it is determined as a result of the defect inspection that the defect exists only in a part of the inspection image data. It is provided for judgment.

セキュリティ処理判定部76は、欠陥検査画像データに対し、セキュリティ処理を行うか否かを判定する。この判定にあたっては、原画像データと同時入力されたり、検査時にユーザ入力されたりするセキュリティ情報に基づいて行われる。セキュリティ情報としては、機密レベルを表す情報(この情報はセキュリティ処理の実行レベルと対応づけることができる)や機密範囲を表す情報(なんらかのセキュリティ処理を行う必要がある範囲)、文字、図形、写真等の情報(文字、図形、写真等をセキュリティ処理対象とする場合)などを用いることができる。また、セキュリティ処理の内容としては、読込許可の制限、削除、暗号化などをあげることができる。また、データ解析部60の解析の結果、セキュリティ上重要であると解析された情報(例えば文字情報)に対してセキュリティ処理を行うことも可能である。   The security processing determination unit 76 determines whether or not to perform security processing on the defect inspection image data. This determination is made based on security information that is input simultaneously with the original image data or input by the user during inspection. Security information includes information indicating the confidentiality level (this information can be associated with the security processing execution level), information indicating the confidentiality range (a range where some security processing needs to be performed), characters, figures, photographs, etc. Information (in the case where characters, figures, photographs, etc. are targeted for security processing) can be used. Further, the contents of the security processing can include read permission restriction, deletion, encryption, and the like. Further, as a result of analysis by the data analysis unit 60, it is possible to perform security processing on information (for example, character information) analyzed as important for security.

テストチャート処理判定部78は、欠陥検査画像データの代わりに、テストチャートデータの印刷画像に基づくテストチャート欠陥検査画像データの保管処理を実施するかどうか判定を行うものである。判定は、典型的には、前に説明したセキュリティ情報により欠陥検査画像データが保管可能であるか否かを調べることで行われる。すなわち、テストチャート欠陥検査画像データの保管処理は、典型的には、セキュリティのために保存できない欠陥検査画像データのセキュリティ処理(主として削除だが、暗号化等でもよい)と対になって実施される。また、テストチャート処理判定部78は、利用するテストチャートデータを作成するのか、テストチャートデータ部90がもつテストチャートデータから選択するのかといった判定も行う。   The test chart process determination unit 78 determines whether or not to perform a test chart defect inspection image data storage process based on a print image of the test chart data instead of the defect inspection image data. The determination is typically performed by checking whether the defect inspection image data can be stored based on the security information described above. In other words, the storage process of the test chart defect inspection image data is typically performed in combination with the security process of defect inspection image data (mainly deleted but may be encrypted or the like) that cannot be stored for security. . The test chart processing determination unit 78 also determines whether to create test chart data to be used or to select from test chart data included in the test chart data unit 90.

判定部70は、ここに例示した個別の判定部が備えるような機能(及びその判定内容を実施するための構成)を必ずしも全て有する必要はなく、少なくとも一つの機能を有すれば十分である。また、逆に、このような様々な判定機能を複数備えて、設定により適宜組み合わせて実施可能に構成してもよい。たとえば、セキュリティ処理判定部76とテストチャート処理判定部78の両方の判定を行うことは有効である。さらに、いずれの判定も行わない(すなわち通常の保管処理を行う)場合を含め、ユーザ入力等により判定内容を選択できるようにすることも効果的である。   The determination unit 70 is not necessarily required to have all the functions (and the configuration for implementing the determination contents) included in the individual determination units exemplified here, and it is sufficient that the determination unit 70 has at least one function. Conversely, a plurality of such various determination functions may be provided, and may be configured to be appropriately combined depending on the setting. For example, it is effective to perform both the security process determination unit 76 and the test chart process determination unit 78. Furthermore, it is also effective to be able to select the determination contents by user input or the like, including the case where neither determination is performed (that is, normal storage processing is performed).

保管部80は、欠陥検査画像データの保管を行うために設けられており、削除部82及び削除部82に含まれる非部分データ削除部84を備えている。これにより、保管部80は、欠陥検査画像データ群86をハードディスク等の記憶装置に記憶させて管理するとともに、削除部82を用いて削除することもできる。削除部82及び非部分データ削除部84の動作は、それぞれ、削除判定部72及び非部分データ削除判定部74の判定に基づいて行われる。なお、これらによる削除の実施は、既に長期の保管を意図して格納された欠陥検査画像データ群86に対して行うこともできるし、未だ長期の保管がなされず一時的に保持されている欠陥検査画像データに対しても実施可能である。   The storage unit 80 is provided for storing defect inspection image data, and includes a deletion unit 82 and a non-partial data deletion unit 84 included in the deletion unit 82. Accordingly, the storage unit 80 can manage the defect inspection image data group 86 by storing the defect inspection image data group 86 in a storage device such as a hard disk, and can also delete the defect inspection image data group 86 using the deletion unit 82. The operations of the deletion unit 82 and the non-partial data deletion unit 84 are performed based on the determinations of the deletion determination unit 72 and the non-partial data deletion determination unit 74, respectively. Note that the deletion by these can be performed on the defect inspection image data group 86 already stored for the purpose of long-term storage, or a defect that has not been stored for a long time and is temporarily held. It can also be applied to inspection image data.

テストチャートデータ部90は、テストチャート処理判定部78の判定結果に基づいてテストチャートデータを用意するために設けられている。テストチャートデータ部90には、作成部92、選択部94、及び、テストチャートデータ群96が含まれている。作成部92はテストチャートデータを新たに作成する部位である。作成部92は、テストチャートデータ群96を改変したり、欠陥検査画像データに対応する原画像データを改変したりしてテストチャートデータを作成してもよい。また、選択部94は、テストチャートデータ群の中からテストチャートデータの選択を行う。選択は、データ解析部60によって抽出された特徴情報との類似性に基づいて行ってもよいし、検査部38で明らかになった欠陥検査の種類毎に予め設定したテストチャートデータを選択するようにしてもよい。   The test chart data unit 90 is provided for preparing test chart data based on the determination result of the test chart process determination unit 78. The test chart data unit 90 includes a creation unit 92, a selection unit 94, and a test chart data group 96. The creation unit 92 is a part for newly creating test chart data. The creation unit 92 may create test chart data by modifying the test chart data group 96 or modifying original image data corresponding to defect inspection image data. The selection unit 94 selects test chart data from the test chart data group. The selection may be performed based on the similarity with the feature information extracted by the data analysis unit 60, or test chart data set in advance for each type of defect inspection revealed by the inspection unit 38 is selected. It may be.

セキュリティ処理部100は、セキュリティ処理判定部76の判定に応じて欠陥検査画像データに対しセキュリティ処理を行う。そのため、セキュリティ処理部100は、主要な構成として削除処理部102、暗号化処理部104、文字情報処理部106を備えている。削除処理部102は、機密を保持すべき部分的あるいは全体の領域を削除するものであり、保管部80の削除部82の機能を用いて実施してもよい。また、暗号化処理部104は、機密を保持すべき部分的あるいは全体の領域を暗号化する。そして、文字情報処理部106は、文字情報の機密を保持するために対象となる文字や文字領域のセキュリティ処理(削除や暗号化など)を行う。なお、セキュリティ処理部100は、その他にもファイルの読み込み権限をもつユーザの制限化や、機密を含む情報を迷彩化などの処理を行ってもよい。処理された欠陥検査画像データは、適宜、保管部80において保管処理を受ける。   The security processing unit 100 performs security processing on the defect inspection image data according to the determination of the security processing determination unit 76. Therefore, the security processing unit 100 includes a deletion processing unit 102, an encryption processing unit 104, and a character information processing unit 106 as main components. The deletion processing unit 102 deletes a partial or entire area where confidentiality should be maintained, and may be implemented using the function of the deletion unit 82 of the storage unit 80. Also, the encryption processing unit 104 encrypts a partial or entire area that should be kept confidential. Then, the character information processing unit 106 performs security processing (deletion, encryption, etc.) on the target character or character area in order to maintain confidentiality of character information. In addition, the security processing unit 100 may perform other processes such as restricting users who have authority to read files and camouflaging information including confidential information. The processed defect inspection image data is subjected to storage processing in the storage unit 80 as appropriate.

以上に述べた画像形成システム10の構成は典型例の一つであり、他にも様々な構成態様をとることが可能である。例えば、検査・制御装置30は、画像形成装置20の中に一体的に組み込むことが可能である。すなわち、画像形成装置20にその演算処理機能の動作を規定するアプリケーションソフトウエアを組み込むことでこのような構成をとることができる。また、他の例としては、検査・制御装置30のもつ検査機能を、LAN300に接続された適当なコンピュータにおいて実現することも可能である。データ転送は、適宜暗号化を行うことで、セキュリティ上の懸念を払拭することができる。また、このコンピュータにおいては、複数の画像形成システム10の検査を一括して実施してもよい。同様の例としては、検査・制御装置30がデータの保管を行う際に用いる記憶部の機能をLAN300に接続された記憶サーバ等に委ねる構成を挙げることができる。このように、画像形成システム10のもつ各機能は、様々な装置に分散あるいは統合することが可能である。   The configuration of the image forming system 10 described above is one of typical examples, and various other configuration modes can be adopted. For example, the inspection / control apparatus 30 can be integrated into the image forming apparatus 20. That is, it is possible to adopt such a configuration by incorporating into the image forming apparatus 20 application software that defines the operation of the arithmetic processing function. As another example, the inspection function of the inspection / control apparatus 30 can be realized by an appropriate computer connected to the LAN 300. Data transfer can eliminate security concerns by performing appropriate encryption. Further, in this computer, inspections of a plurality of image forming systems 10 may be performed collectively. As a similar example, a configuration in which the function of a storage unit used when the inspection / control apparatus 30 stores data is left to a storage server or the like connected to the LAN 300 can be cited. As described above, each function of the image forming system 10 can be distributed or integrated in various apparatuses.

次に、フローチャートを用いて典型的な処理の流れを説明する。説明は、[1]削除判定部72を用いる場合の例、[2]セキュリティ処理判定部76を用いる場合の例、[3]テストチャート処理判定部78を用いる場合の例の順に行う。   Next, a typical processing flow will be described using a flowchart. The description will be given in the order of [1] an example in which the deletion determination unit 72 is used, [2] an example in which the security processing determination unit 76 is used, and [3] an example in which the test chart processing determination unit 78 is used.

[1]まず、削除判定部72を用いる場合の処理を説明する。図2のフローチャートは、検査画像データの保管に係る処理工程を示している。まず、制御部50は、画像形成装置20において複写による印刷命令がなされたことを受信すると(S10)、検査画像データ生成部24から検査画像データを取得し、検査部38に欠陥検査を実施させる(S11)。削除判定部72は、履歴情報管理部40から印刷処理や検査結果を記した履歴を取得する(S12)。削除判定部72においては、まず、履歴情報に基づいて、欠陥検出がなされたか否かが確認される(S14)そして、欠陥が見つかった場合には削除判定を行う(S16)。この削除の判定は、二つの観点から行われる。一つは、履歴情報に基づいて得られる欠陥種類の発生頻度が所定値よりも大きいか否かであり、もう一つは、欠陥が予め決められた重要な欠陥に分類されるか否かである。そして、発生頻度が所定値よりも大きい場合かつ欠陥が重要でない場合には、削除の判定がなされる。そして、削除部82においてその検査画像データが削除されるとともに、履歴情報管理部40は履歴情報に対し検査画像データが削除された旨の記録を行う(S18)。また、欠陥が検出されない場合にも、同様に削除部82においてその検査画像データが削除されるとともに、履歴情報管理部40において対応する履歴が残される(S18)。一方、発生頻度が所定値よりも小さい場合、または、欠陥が重要であると判断された場合には、保管部80はその欠陥検査画像データを保管し、履歴情報管理部40は欠陥発生の記録にその欠陥検査画像データへのリンク情報を加える(S20)。   [1] First, processing when the deletion determination unit 72 is used will be described. The flowchart of FIG. 2 shows a processing step related to storage of inspection image data. First, when the control unit 50 receives that a print command for copying is made in the image forming apparatus 20 (S10), the control unit 50 acquires inspection image data from the inspection image data generation unit 24 and causes the inspection unit 38 to perform defect inspection. (S11). The deletion determination unit 72 acquires a history describing the printing process and the inspection result from the history information management unit 40 (S12). The deletion determination unit 72 first confirms whether or not a defect has been detected based on the history information (S14). If a defect is found, a deletion determination is performed (S16). This determination of deletion is performed from two viewpoints. One is whether or not the occurrence frequency of the defect type obtained based on the history information is larger than a predetermined value, and the other is whether or not the defect is classified into a predetermined important defect. is there. Then, if the occurrence frequency is greater than a predetermined value and the defect is not important, the deletion is determined. Then, the inspection image data is deleted in the deletion unit 82, and the history information management unit 40 records that the inspection image data is deleted in the history information (S18). Similarly, when no defect is detected, the inspection image data is similarly deleted in the deletion unit 82, and the corresponding history is left in the history information management unit 40 (S18). On the other hand, when the occurrence frequency is smaller than a predetermined value or when it is determined that the defect is important, the storage unit 80 stores the defect inspection image data, and the history information management unit 40 records the defect occurrence. Is added with link information to the defect inspection image data (S20).

図3は、履歴情報管理部40が管理する履歴情報を表示した履歴情報テーブル110の例である。履歴情報テーブル110には、項目として、印刷日時112、原画像データ名を示すファイル名114、欠陥の状態116(○は欠陥なし、△は欠陥の疑いあり、×は欠陥あり)、欠陥種類118(A,B,C,...などで表示)、欠陥の空間的広がりを示す欠陥サイズレベル120(数字が大きいほど大きい)、検査画像データを識別する記録画像番号122が設けられている。印刷が行われた順に、次々と記録が行われている。例えばある印刷処理130においては、欠陥がみつからなかったため、欠陥の状態116は欠陥なしを示す○である。しかし、印刷処理132では、欠陥の状態は△であり、欠陥種類118はA、欠陥サイズレベルは最も小さいことを示す1、記録画像番号は1である。同様にして印刷処理134では、欠陥の状態は×、欠陥種類はA、欠陥サイズレベルは4、記録画像番号は2であり、印刷処理136では、欠陥の状態は△、欠陥種類はB、欠陥サイズレベルは2、記録画像番号は3である。   FIG. 3 is an example of the history information table 110 displaying the history information managed by the history information management unit 40. The history information table 110 includes, as items, a printing date and time 112, a file name 114 indicating the name of the original image data, a defect status 116 (◯ indicates no defect, Δ indicates a defect, and × indicates a defect), defect type 118 (Indicated by A, B, C,...), A defect size level 120 (larger as the number is larger) indicating the spatial extent of the defect, and a recorded image number 122 for identifying inspection image data are provided. Recording is performed one after another in the order of printing. For example, in a certain printing process 130, since no defect was found, the defect status 116 is ◯ indicating no defect. However, in the printing process 132, the defect state is Δ, the defect type 118 is A, the defect size level is 1 indicating the smallest, and the recorded image number is 1. Similarly, in the printing process 134, the defect state is x, the defect type is A, the defect size level is 4, the recorded image number is 2, and in the printing process 136, the defect state is Δ, the defect type is B, and the defect The size level is 2 and the recorded image number is 3.

これに対し、判定部70は、欠陥の状態116がグレー、すなわち欠陥の疑いありの状態であり、かつ、欠陥サイズレベルが最小の1を示す印刷処理132の欠陥は、予め与えられた基準によれば重要でないとの判断を下す。そして、削除部82はこの記録画像番号122が1であるこの欠陥検査画像データを削除し、履歴情報管理部40は履歴情報を履歴情報テーブル140のように書き換える。なお、判定部70の判断はこの他にも可能であり、例えば欠陥の状態が△であるものについては全て削除し、欠陥の状態が×であるものについては全て残すといったように、欠陥の質的大きさに基づいて削除を判断することも可能である。   On the other hand, the determination unit 70 determines that the defect of the printing process 132 in which the defect state 116 is gray, that is, a defect is suspected and the defect size level is 1 which is the minimum, is based on a predetermined reference. Judge that it is not important. Then, the deletion unit 82 deletes the defect inspection image data whose recording image number 122 is 1, and the history information management unit 40 rewrites the history information as in the history information table 140. The determination unit 70 can make other determinations. For example, the defect quality is such that all defects having a Δ state are deleted and all defects having a X state are left. It is also possible to determine deletion based on the target size.

図4は、図3に示したような履歴情報に基づいて得られる欠陥の種類毎の種別発生頻度の状況を示した表150である。項目は、欠陥種類152、欠陥の疑いが生じた(△)回数、欠陥が発生した(×)回数を表している。例えば、種類Aは△が3回×が0回、種類Bは△が10回×が2回、種類Cは△が5回×が0回、種類Dは△が20回×が5回である。これにより、削除判定部72は、欠陥発生頻度が高い種類Dについては、一定数以上の欠陥検査画像データを保管する必要はないと判断し、新たに種類Dの欠陥が発生した場合には欠陥検査画像データを削除する判定を行うことになる。なお、この場合に削除する欠陥検査画像データは、必ずしも最新の欠陥検査画像データである必要はない。例えば、最も古いデータ、中間程度に古いデータ、最新のデータなどがバランスよく含まれるように、適宜残すデータを入れ替えることができる。   FIG. 4 is a table 150 showing the status of the type occurrence frequency for each type of defect obtained based on the history information as shown in FIG. The items represent the defect type 152, the number of times that a defect was suspected (Δ), and the number of times that a defect occurred (x). For example, type A is 3 times x 0 times, type B is 10 times x 2 times, type C is 5 times x 0 times, type D is 20 times x 5 times is there. Accordingly, the deletion determination unit 72 determines that it is not necessary to store a certain number or more of defect inspection image data for the type D having a high defect occurrence frequency. It is determined to delete the inspection image data. Note that the defect inspection image data to be deleted in this case is not necessarily the latest defect inspection image data. For example, it is possible to replace the data that is left as appropriate so that the oldest data, middle-aged data, latest data, and the like are included in a balanced manner.

図5は、図2を用いて説明した処理例の変形例を示すフローチャートである。同一のステップには、同一の番号を付して説明を省略する。図5と図2の相違点は、ステップS16で削除しないと判定されたあとの処理である。この場合、削除判定部72は、欠陥が対応する印刷画像のページ全体にわたる欠陥であるか否かを判定する(S22)。そして、ページ全体にわたる欠陥ではない場合には、非部分データ削除判定部74において、欠陥が含まれる部分データ以外のデータについて削除可能な領域を判定する。この場合、保管部80においては、非部分データ削除部84によって判定された領域の削除が行われ、残る欠陥を含む部分の欠陥検査画像データが保管される。また、履歴情報管理部40は欠陥発生の記録にその部分的な欠陥検査画像データへのリンク情報を記録する(S24)。   FIG. 5 is a flowchart illustrating a modification of the processing example described with reference to FIG. The same steps are denoted by the same reference numerals and description thereof is omitted. The difference between FIG. 5 and FIG. 2 is the processing after it is determined not to delete in step S16. In this case, the deletion determination unit 72 determines whether or not the defect is a defect over the entire page of the corresponding print image (S22). If the defect does not cover the entire page, the non-partial data deletion determination unit 74 determines an area that can be deleted for data other than the partial data including the defect. In this case, in the storage unit 80, the area determined by the non-partial data deletion unit 84 is deleted, and the defect inspection image data of the part including the remaining defect is stored. Further, the history information management unit 40 records the link information to the partial defect inspection image data in the defect occurrence record (S24).

一方、印刷画像全体の位置がずれるスキューや印刷画像全体に濃度が低濃度側あるいは高濃度側に移る濃度欠陥といった、欠陥がページ全体にわたる欠陥である場合には、代用特性生成部42がその欠陥特性を表す代用特性情報を生成する。代用特性情報としては、欠陥の種類、発生範囲、欠陥の質的大きさ、圧縮情報等が挙げられ、例えばスキューの場合には回転角度や回転方向、濃度欠陥の場合には印刷画像全体の濃度平均の正常状態からのずれ量などが挙げられる。保管部80は、この代用特性情報を欠陥検査画像データの代わりに保管し、履歴情報管理部40は、欠陥発生の記録にこの代用特性情報へのリンク情報を加える(S26)。   On the other hand, if the defect is a defect that covers the entire page, such as a skew in which the position of the entire print image is shifted or a density defect in which the density of the entire print image is shifted to the low density side or the high density side, the substitute characteristic generation unit 42 Substitute property information representing the property is generated. The substitute characteristic information includes the type of defect, the range of occurrence, the qualitative size of the defect, compression information, and the like. For example, in the case of skew, the rotation angle and direction, and in the case of a density defect, the density of the entire printed image. The amount of deviation from the average normal state can be mentioned. The storage unit 80 stores the substitute characteristic information instead of the defect inspection image data, and the history information management unit 40 adds link information to the substitute characteristic information to the record of the occurrence of the defect (S26).

以上に示したような複数の態様例は、必ずしもその一つを固定的に実施することを意図したものではない。すなわち、複数ある態様のうちどの態様を実施するかを、ユーザにその都度選択させるようにすることも可能である。この場合においては、削除をするしないの選択を完全にユーザ入力に委ねる選択肢を付与してもよい。   A plurality of example embodiments as described above are not necessarily intended to be implemented in a fixed manner. That is, it is possible to allow the user to select which mode to implement from among a plurality of modes each time. In this case, you may give the option which leaves the selection not to delete to a user input completely.

[2]次に、セキュリティ処理判定部76を用いる場合の処理を説明する。図6は、処理の流れを示すフローチャートであり、図2に対応するものである。ステップS30、S31、S32は、それぞれ、図2のS10、S11、S12と同様である。特徴的な点は、ステップS32で検査画像データ及び履歴情報を取得した後、セキュリティ情報のひとつとして機密レベル情報を取得している(S34)ことである。機密レベル情報は、対応する検査画像データを機密扱いのレベルを示す情報である。そして、図2と同様に欠陥検査に基づく判定が行われ(S36)、欠陥が見つかった場合には、セキュリティ処理判定部76がこの機密レベル情報に基づいて欠陥検査画像データを削除するか否か判定している(S38)。これにより、削除の判定がなされた場合には、セキュリティ処理部100の削除処理部102において削除処理がなされる(S40)。一方、削除が行われない場合は、図2のステップS20と同様に欠陥画像データの保管が行われる(S42)。   [2] Next, processing when the security processing determination unit 76 is used will be described. FIG. 6 is a flowchart showing the flow of processing, and corresponds to FIG. Steps S30, S31, and S32 are the same as S10, S11, and S12 in FIG. 2, respectively. A characteristic point is that after acquiring the inspection image data and history information in step S32, the security level information is acquired as one of the security information (S34). The confidential level information is information indicating the level of confidentiality of the corresponding inspection image data. Then, the determination based on the defect inspection is performed in the same manner as in FIG. 2 (S36), and if a defect is found, whether or not the security processing determination unit 76 deletes the defect inspection image data based on this confidential level information. It is determined (S38). As a result, when deletion is determined, deletion processing is performed in the deletion processing unit 102 of the security processing unit 100 (S40). On the other hand, when the deletion is not performed, the defect image data is stored as in step S20 of FIG. 2 (S42).

ステップS38の欠陥検査における判定基準は、機密レベル情報の内容と欠陥の内容とを結びつけるテーブル等を設定することで容易に行うことができる。また、機密レベル情報事態にどのようなセキュリティ処理がなされるべきかという命令情報を持たせることも有効である。   The determination criteria in the defect inspection in step S38 can be easily performed by setting a table or the like that links the contents of the confidential level information and the contents of the defects. It is also effective to have command information on what kind of security processing should be performed in a confidential level information situation.

次に、図7を用いて、文字情報に基づいてセキュリティ処理がなされた場合の例を説明する。図7は、処理の流れを示すフローチャートである。ここでは、印刷命令を受信し(S50)、欠陥検査を行った(S52)後で、セキュリティ情報として、文字を機密扱いすることに関しての情報を入力している(S54)。制御部50は、文字を機密扱いするために、セキュリティ情報としての文字情報を取得することを目的として、データ解析部60の文字情報解析部62に対し、検査画像データの文字情報解析が行われている(S56)。これにより、検査画像データに文字データが含まれるか否か、含まれる場合にはどの範囲に含まれるかが明らかとなる。セキュリティ処理判定部76は、文字データの有無に基づいて判定を行い(S58)文字データが含まれない場合には通常の処理を行わせる。すなわち、履歴情報の取得を行い(S60)、欠陥検出の有無を判定する(S62)。そして、欠陥が検出されない場合には検査画像データを削除し、履歴情報の編集を行う(S64)。また、欠陥が検出される場合には、欠陥検査画像データの保管と、保管情報の履歴情報への追加が行われる(S66)。   Next, an example when security processing is performed based on character information will be described with reference to FIG. FIG. 7 is a flowchart showing the flow of processing. Here, after receiving a print command (S50) and performing a defect inspection (S52), information relating to confidentiality of characters is input as security information (S54). The control unit 50 performs character information analysis of the inspection image data on the character information analysis unit 62 of the data analysis unit 60 for the purpose of acquiring character information as security information in order to treat the character as confidential. (S56). Thereby, it becomes clear whether or not character data is included in the inspection image data, and if included, in which range. The security process determination unit 76 performs determination based on the presence / absence of character data (S58), and performs normal processing when character data is not included. That is, history information is acquired (S60), and the presence / absence of defect detection is determined (S62). If no defect is detected, the inspection image data is deleted and the history information is edited (S64). When a defect is detected, the defect inspection image data is stored and the storage information is added to the history information (S66).

文字データがあると判定された場合には、セキュリティ処理判定部76は、セキュリティ情報に従って文字領域だけをセキュリティ処理するのか、それとも印刷画像全体の処理を行うかを判定する(S68)。そして、文字領域のみの処理を行う場合には、文字情報処理部106において、マスク生成、すなわち、文字領域のデータを閲覧不能にするための準備がなされる(S70)。続いて履歴情報を取得し(S72)、欠陥検査の結果を調べる(S74)。欠陥が検出されない場合には、ステップS64で、検査画像データを削除しその旨を履歴情報に反映させる(S64)。   If it is determined that there is character data, the security processing determination unit 76 determines whether to perform security processing only on the character area in accordance with the security information or to process the entire print image (S68). When processing only the character area, the character information processing unit 106 prepares for mask generation, that is, for making the data in the character area unviewable (S70). Subsequently, history information is acquired (S72), and the result of the defect inspection is examined (S74). If no defect is detected, the inspection image data is deleted and reflected to the history information in step S64 (S64).

これに対し、欠陥が検出された場合には、文字情報処理部106はマスク合成、すなわち、文字領域のデータの閲覧不能化を実施する(S76)。閲覧不能化とは、具体的には、その文字情報のデータレベルでの削除、暗号化、迷彩化などを指すが、簡易には、形成される画像レベルでの削除、暗号化、迷彩化などであってもよい。保管部80は、このセキュリティ処理がなされた欠陥検査画像データの保管を行い、履歴情報管理部40は保管情報を履歴情報に追加する(S76)。   On the other hand, if a defect is detected, the character information processing unit 106 performs mask composition, that is, disables browsing of data in the character area (S76). Inability to browse specifically refers to deletion, encryption, camouflage, etc. of the character information at the data level, but simply, deletion, encryption, camouflage, etc. at the image level to be formed It may be. The storage unit 80 stores the defect inspection image data subjected to the security processing, and the history information management unit 40 adds the storage information to the history information (S76).

ステップS68において、文字領域を含む全体の処理をすべしとの判断がなされた場合には、履歴情報を取得する(S78)が、欠陥検出の結果(S72)に関わらず、検査画像データは削除され、対応する履歴情報の編集が行われる(S78)。   If it is determined in step S68 that the entire process including the character area should be performed, history information is acquired (S78), but the inspection image data is deleted regardless of the defect detection result (S72). Then, the corresponding history information is edited (S78).

図8は、ステップS72の処理を具体的に説明する図である。検査画像データが表現する画像160は、「いろはにほへとちりぬるを」の12文字からなる文字群162と、○及び△からなる図形群164を含んでいる。そして、図形群164部分には、印刷欠陥としての横線166が入っている。ステップS52の欠陥検査においてこの欠陥が検出され、さらに、文字情報解析S56により文字領域168の存在が判明することで、横線166は文字領域168外に生じたことが明らかになる。そこで、欠陥検査画像データの保管にあたっては、横線166を残す一方で、機密保持の観点から保管すべきではない文字領域にマスクをかける。これにより、処理後の画像170では、文字領域168にあった文字群162が取り除かれている。   FIG. 8 is a diagram for specifically explaining the processing in step S72. The image 160 represented by the inspection image data includes a character group 162 composed of 12 characters “Iroha ni henri niruru” and a graphic group 164 composed of ○ and Δ. The graphic group 164 includes horizontal lines 166 as printing defects. When this defect is detected in the defect inspection in step S52, and the presence of the character area 168 is determined by the character information analysis S56, it becomes clear that the horizontal line 166 is generated outside the character area 168. Therefore, when storing the defect inspection image data, while leaving the horizontal line 166, the character area that should not be stored is masked from the viewpoint of maintaining confidentiality. As a result, the character group 162 in the character area 168 is removed from the processed image 170.

図9は、図8と同様の図であるが、画像180に生じた横線186は、文字群162と重なっている。このような場合には、文字群のセキュリティのために文字領域168を削除してしまうと、欠陥情報を残すことができなくなる。そこで、セキュリティ処理後には画像190は削除される。このように、機密を保持すべき領域と欠陥の範囲との関係に応じて、機密を保持すべき領域のみのセキュリティ処理を行う場合と、全体の削除等を行う場合とを柔軟に使いわけることができる。   FIG. 9 is a view similar to FIG. 8, but the horizontal line 186 generated in the image 180 overlaps the character group 162. In such a case, if the character area 168 is deleted for the security of the character group, the defect information cannot be left. Therefore, the image 190 is deleted after the security processing. In this way, depending on the relationship between the area that should be kept confidential and the scope of the defect, the security process for only the area that should keep the security and the case where the entire area is deleted can be flexibly used. Can do.

図10は、機密領域に関するセキュリティ処理例を示すフローチャートである。ここでは、印刷命令の受信を受けて(S80)、欠陥検査が行われた(S82)後で、セキュリティ情報としてユーザ指定による機密領域が入力される(S84)。そこで、この機密領域を閲覧不能にするためのマスク生成がなされる(S86)。続いて履歴情報が取得され(S88)、欠陥の有無が判定される(S90)。欠陥がない場合には、検査画像データを削除し、履歴情報にその旨を記録する(S92)。一方、欠陥が検出される場合には、マスク合成により、機密領域の閲覧ができないように処置される(S94)。そして、マスクされた欠陥検査画像データが保管されるとともに、そのリンク情報が履歴情報に追加される(S96)。   FIG. 10 is a flowchart illustrating an example of security processing relating to a confidential area. Here, after receiving the print command (S80) and after defect inspection is performed (S82), a confidential area designated by the user is input as security information (S84). Therefore, a mask is generated to make this confidential area unviewable (S86). Subsequently, history information is acquired (S88), and the presence / absence of a defect is determined (S90). If there is no defect, the inspection image data is deleted and the fact is recorded in the history information (S92). On the other hand, when a defect is detected, a process is performed so that the confidential area cannot be browsed by mask composition (S94). Then, the masked defect inspection image data is stored, and the link information is added to the history information (S96).

図11は、暗号化によるセキュリティ処理例を示すフローチャートである。ここでは、印刷命令の受信を受けて(S100)、欠陥検査が行われた(S102)後で、セキュリティ情報として暗号化を必要とする印刷処理ページについての情報が、ユーザ入力等により入力される(S104)。続いて履歴情報が取得され(S106)、欠陥の有無が判定される(S108)。欠陥がない場合には、検査画像データを削除し、履歴情報にその旨を記録する(S110)。一方、欠陥が検出される場合には、その印刷処理ページに当たる検査画像データが暗号化を求められているページであるかどうかが、セキュリティ処理判定部76において判定される(S112)。そして、暗号化が必要でないと判定された場合には、欠陥検査画像データを暗号化することなく保存するとともに、対応する履歴情報の編集が行われる(S114)。これに対し、暗号化が必要なページであると判定された場合には、暗号化処理部104によって暗号化が行われる。そして、暗号化された欠陥検査画像データが保管されるとともに、そのリンク情報が履歴情報に追加される(S116)。なお、暗号化されたデータの復号化は、通常は、ユーザがパスワードを入力することで行われる。これにより、一般ユーザに対しては、暗号化された情報を閲覧不能に保つことが可能となる。   FIG. 11 is a flowchart showing an example of security processing by encryption. Here, after receiving a print command (S100) and after a defect inspection is performed (S102), information about a print processing page that requires encryption as security information is input by user input or the like. (S104). Subsequently, history information is acquired (S106), and the presence / absence of a defect is determined (S108). If there is no defect, the inspection image data is deleted and the fact is recorded in the history information (S110). On the other hand, if a defect is detected, the security processing determination unit 76 determines whether the inspection image data corresponding to the print processing page is a page for which encryption is required (S112). If it is determined that encryption is not necessary, the defect inspection image data is stored without being encrypted, and the corresponding history information is edited (S114). On the other hand, when it is determined that the page needs to be encrypted, the encryption processing unit 104 performs encryption. Then, the encrypted defect inspection image data is stored, and the link information is added to the history information (S116). Note that decryption of encrypted data is usually performed by the user inputting a password. This makes it possible to keep the encrypted information unviewable for general users.

[3]続いて、テストチャート処理判定部78を用いる場合の処理を説明する。図12は、処理の流れを示すフローチャートである。ここでは、印刷命令の受信を受けて(S120)、欠陥検査が行われた(S122)後で、欠陥検査された検査画像データの代わりにテストチャートに基づく検査画像データを保管する旨の指示が入力可能となっている(S124)。これを受けてデータ解析部60は、欠陥検査された検査画像データに対応する原画像データの解析を実施して特徴情報を抽出する(S126)。そして、テストチャートデータ部90において、テストチャートデータ群96の中からこの特徴情報と類似した特徴情報をもつテストチャートデータが選択される(S128)。続いて履歴情報が取得され(S130)、欠陥の有無が判定される(S132)。欠陥がない場合には、検査画像データを削除し、履歴情報にその旨を記録する(S134)。一方、欠陥が検出される場合には、その欠陥検査画像データが、ステップS124で代用指定されたページに対応するかどうかが判定される(S136)。代用指定されたページである場合には、ステップS128で選択したテストチャートデータに基づく画像形成及び対応する検査画像データの生成を、画像形成装置20に指示する。そして、得られた検査画像データを保管するとともに、その旨を履歴情報に記録する。これに対し、代用指定されないページである場合には、当該欠陥検査画像データを保管するとともに、そのリンク情報を履歴情報に記録する。   [3] Next, processing when the test chart processing determination unit 78 is used will be described. FIG. 12 is a flowchart showing the flow of processing. Here, after receiving the print command (S120) and after the defect inspection is performed (S122), an instruction to store the inspection image data based on the test chart is used instead of the inspection image data subjected to the defect inspection. Input is possible (S124). In response to this, the data analysis unit 60 analyzes the original image data corresponding to the inspection image data subjected to the defect inspection, and extracts feature information (S126). Then, the test chart data unit 90 selects test chart data having feature information similar to the feature information from the test chart data group 96 (S128). Subsequently, history information is acquired (S130), and the presence / absence of a defect is determined (S132). If there is no defect, the inspection image data is deleted and the fact is recorded in the history information (S134). On the other hand, if a defect is detected, it is determined whether or not the defect inspection image data corresponds to the page designated for substitution in step S124 (S136). If the page is designated as a substitute, the image forming apparatus 20 is instructed to form an image based on the test chart data selected in step S128 and to generate corresponding inspection image data. Then, the obtained inspection image data is stored and the fact is recorded in the history information. On the other hand, when the page is not designated as a substitute, the defect inspection image data is stored and the link information is recorded in the history information.

図13には、テストチャートデータ群96に含まれるテストチャートデータが表す画像(以下テストチャートと呼ぶ)の例を示した。図13(a)に示した文字テストチャート200は、文字のみからなるテストチャートである。この文字テストチャート200は、ひらがな、小文字アルファベット、大文字アルファベット、及び、数字からなる。しかしながら、欠陥検査を行われた検査画像データが、必ずしもこれらの文字からなるとは限らず、その場合には、画像形成の条件が異なるため欠陥が生じないことも考えられる。そこで、なるべく欠陥検査を行われた検査画像データに近いテストチャートデータを用意できるように、各種の文字種類(ひらがな、漢字、数字等)の組み合わせ(1種類のみ、2種類、3種類の組み合わせ等)からなるテストチャートデータを、様々な文字の大きさ(10ポイント、20ポイント等)や様々な文字のタイプ(明朝体、ゴシック等)について作成しておくことも有効である。ただし、そして、これらのテストチャートデータの特徴と、欠陥検査を行われた検査画像データ(または原画像データ)の特徴との類似度に応じて適切なテストチャートデータを作成することも有効である。   FIG. 13 shows an example of an image (hereinafter referred to as a test chart) represented by test chart data included in the test chart data group 96. A character test chart 200 shown in FIG. 13A is a test chart composed of only characters. The character test chart 200 is composed of hiragana, lower case alphabets, upper case alphabets, and numbers. However, the inspection image data subjected to the defect inspection is not necessarily composed of these characters, and in this case, it is conceivable that no defect occurs because the image forming conditions are different. Therefore, combinations of various character types (Hiragana, Kanji, numbers, etc.) (only one type, two types, three types of combinations, etc.) are provided so that test chart data as close as possible to inspection image data subjected to defect inspection can be prepared. It is also effective to create test chart data consisting of () for various character sizes (10 points, 20 points, etc.) and various character types (Mincho, Gothic, etc.). However, it is also effective to create appropriate test chart data according to the degree of similarity between the characteristics of these test chart data and the characteristics of inspection image data (or original image data) subjected to defect inspection. .

図13(b)の図形テストチャート202は、図形のみを含むテストチャートである。この図形テストチャート202についても、図形の形や、配置、数、色、線の太さなどに応じて、様々な種類のテストチャートデータを用意することが有効である。また、図13(c)の写真テストチャート204は、写真のみを含むテストチャートである。同様にして写真テストチャート204についても、風景写真、人物の写真、動物の写真など、多様なバリエーションを用意することができる。図13(d)の文字図形テストチャート206は、文字と図形とが組み合わされたテストチャートである。この他にも、文字と写真の組み合わせや、写真と図形の組み合わせ、文字、写真、図形の組み合わせなど、様々な組み合わせが可能であり、その配置や大きさなどにも多様性がある。そこで、文字テストチャート200、図形テストチャート202、写真テストチャート204のデータベースに含まれるテストチャートを適宜組み合わせたテストチャートを作成し、そのバリエーションを増やすことで効率的に多数のデータを用意することが可能である。   A graphic test chart 202 shown in FIG. 13B is a test chart including only a graphic. For this graphic test chart 202, it is effective to prepare various types of test chart data according to the shape of the graphic, arrangement, number, color, line thickness, and the like. A photographic test chart 204 in FIG. 13C is a test chart including only photographs. Similarly, various variations of the photo test chart 204 such as a landscape photo, a person photo, and an animal photo can be prepared. A character graphic test chart 206 in FIG. 13D is a test chart in which characters and graphics are combined. In addition, various combinations such as a combination of characters and photos, a combination of photos and graphics, a combination of characters, photos, and graphics are possible, and there are various arrangements and sizes. Therefore, it is possible to prepare a test chart appropriately combining the test charts included in the database of the character test chart 200, the graphic test chart 202, and the photographic test chart 204, and efficiently prepare a large amount of data by increasing the variations. Is possible.

なお、このように様々なテストチャートを用意した場合にも、必ずしも類似度が高いテストチャートが得られない可能性もある。そこで、テストチャートデータ部90における作成部92を用いて、欠陥検査を行われた検査画像データや原画像データに基づいてテストチャートデータを作成することも有効である。特に欠陥が見いだされた箇所に対応する原画像データのデータ解析を行い、抽出された特徴を備えながらも、原画像データの情報を捕らえることが困難なテストチャートを作成することは有効である。例えば、欠陥がある一文字の箇所にのみ発生した場合、文字解析を行ってその文字及び周辺の文字の情報を把握する。そして、欠陥が生じた一文字だけを同じ文字にしたまま、他の文字をランダムに別の文字に置き換えるような処理をすることで、極めて類似度の高いテストチャートを作成することが可能となる。   Even when various test charts are prepared in this way, there is a possibility that a test chart having a high degree of similarity is not necessarily obtained. Therefore, it is also effective to create test chart data based on inspection image data and original image data subjected to defect inspection using the creation unit 92 in the test chart data unit 90. In particular, it is effective to perform data analysis of the original image data corresponding to a location where a defect is found, and to create a test chart that has the extracted features but is difficult to capture the information of the original image data. For example, when a defect occurs only at a single character, character analysis is performed to grasp information about the character and surrounding characters. Then, it is possible to create a test chart with a very high degree of similarity by performing a process of replacing another character with another character at random while keeping only one character having a defect the same character.

以上に示した各態様は代表例であって、本発明はこれらの例に限定されるものではない。また、各例において、処理の流れを適宜入れ替えることも可能である。例えば、図7における文字情報解析(S56)やマスク生成(S70)、図12における原画像データ解析(S126)や代用テストチャート選択(S128)は、これらを用いた処理を行うことが決定した時点以降に実施することで、処理の無駄を省くことが可能となる。   Each aspect shown above is a typical example, Comprising: This invention is not limited to these examples. In each example, it is also possible to appropriately change the flow of processing. For example, the character information analysis (S56) and mask generation (S70) in FIG. 7 and the original image data analysis (S126) and substitute test chart selection (S128) in FIG. 12 are determined to be performed using these. By carrying out after that, it is possible to eliminate waste of processing.

装置構成の概略を示す機能ブロック図である。It is a functional block diagram which shows the outline of an apparatus structure. 削除処理の例を示すフローチャートである。It is a flowchart which shows the example of a deletion process. 履歴情報の例を示す図である。It is a figure which shows the example of log | history information. 欠陥の集計例を示した図である。It is the figure which showed the example of a total of a defect. 削除処理の変形例を示すフローチャートである。It is a flowchart which shows the modification of a deletion process. セキュリティ処理の例を示すフローチャートである。It is a flowchart which shows the example of a security process. セキュリティ処理の別の例を示すフローチャートである。It is a flowchart which shows another example of a security process. セキュリティ処理の具体例を示す図である。It is a figure which shows the specific example of a security process. セキュリティ処理の別の具体例を示す図である。It is a figure which shows another specific example of a security process. セキュリティ処理の変形例を示すフローチャートである。It is a flowchart which shows the modification of a security process. セキュリティ処理の別の変形例を示すフローチャートである。It is a flowchart which shows another modification of a security process. テストチャート処理の例を示すフローチャートである。It is a flowchart which shows the example of a test chart process. テストチャートの例を示す図である。It is a figure which shows the example of a test chart.

符号の説明Explanation of symbols

10 画像形成システム、20 画像形成装置、22 画像形成部、24 検査画像データ生成部、30 検査・制御装置、32 入出力部、34 ユーザ入力部、36 ユーザ出力部、36 表示部、38 検査部、40 履歴情報管理部、42 代用特性生成部、50 制御部、52 指示部、60 データ解析部、62 文字情報解析部、70 判定部、72 削除判定部、74 非部分データ削除判定部、76 セキュリティ処理判定部、78 テストチャート処理判定部、80 保管部、82 削除部、84 非部分データ削除部、86 欠陥検査画像データ群、90 テストチャートデータ部、92 作成部、94 選択部、96 テストチャートデータ群、100 セキュリティ処理部、102 削除処理部、104 暗号化処理部、106 文字情報処理部。   DESCRIPTION OF SYMBOLS 10 Image forming system, 20 Image forming apparatus, 22 Image forming part, 24 Inspection image data generation part, 30 Inspection / control apparatus, 32 Input / output part, 34 User input part, 36 User output part, 36 Display part, 38 Inspection part 40 history information management unit 42 substitute characteristic generation unit 50 control unit 52 instruction unit 60 data analysis unit 62 character information analysis unit 70 determination unit 72 deletion determination unit 74 non-partial data deletion determination unit 76 Security processing determination unit, 78 Test chart processing determination unit, 80 Storage unit, 82 Deletion unit, 84 Non-partial data deletion unit, 86 Defect inspection image data group, 90 Test chart data unit, 92 Creation unit, 94 Selection unit, 96 test Chart data group, 100 security processing unit, 102 deletion processing unit, 104 encryption processing unit, 106 character information Processing unit.

Claims (14)

印刷画像の読み取り処理により得られた検査画像データ、及び、その検査画像データのセキュリティ情報を取得する取得手段と、
前記検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、
前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データの保管処理において前記セキュリティ情報に基づいたセキュリティ処理を行うか否かを判定する判定手段と、
前記判定手段の判定結果に従って前記欠陥検査画像データの保管処理を行う保管処理手段と、
前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管手段と、
を備え、
前記代用特性生成保管手段は、前記判定手段によりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して実施される、
ことを特徴とする検査装置。
Inspection image data obtained by print image reading processing, and acquisition means for acquiring security information of the inspection image data;
Inspection means for performing a defect inspection of the print image using the inspection image data;
Determining means for determining whether or not to perform security processing based on the security information in storage processing of defect inspection image data which is inspection image data in which an image defect is detected by the defect inspection;
Storage processing means for storing the defect inspection image data according to the determination result of the determination means;
Substitution characteristic generation storage means for generating and storing substitution characteristic information indicating defect characteristics of the defect inspection image data;
With
The substitute characteristic generation storage unit is performed on the defect inspection image data determined to be subjected to security processing by the determination unit.
Inspection apparatus characterized by that.
請求項1に記載の検査装置において、
前記セキュリティ処理は、前記欠陥検査画像データを閲覧不能にする処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 1,
The inspection apparatus according to claim 1, wherein the security process is a process of making the defect inspection image data unviewable.
請求項2に記載の検査装置において、
前記閲覧不能にする処理は、前記欠陥検査画像データを削除する処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 2,
2. The inspection apparatus according to claim 1, wherein the process of making the browsing impossible is a process of deleting the defect inspection image data.
請求項2に記載の検査装置において、
前記閲覧不能にする処理は、前記欠陥検査画像データを暗号化する処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 2,
2. The inspection apparatus according to claim 1, wherein the process of making the browsing impossible is a process of encrypting the defect inspection image data.
請求項1に記載の検査装置において、
前記印刷画像に含まれる文字についての文字情報を取得する文字情報取得手段を有し、
前記セキュリティ処理は、前記文字情報の取得結果に基づいて、前記印刷画像に文字が含まれる場合に行われる処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 1,
Character information acquisition means for acquiring character information about characters included in the print image,
The inspection apparatus according to claim 1, wherein the security process is a process performed when a character is included in the print image based on an acquisition result of the character information.
請求項5に記載の検査装置において、前記文字情報は前記印刷画像に含まれる文字領域の情報であり、
前記セキュリティ処理は、少なくとも前記文字領域に対応するデータを閲覧不能にする処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 5, wherein the character information is information on a character region included in the print image,
The inspection apparatus according to claim 1, wherein the security process is a process for making at least data corresponding to the character area unviewable.
請求項1に記載の検査装置において、
前記セキュリティ情報は、少なくとも2段階のランクを備えた機密レベル情報である、ことを特徴とする検査装置。
The inspection apparatus according to claim 1,
The inspection apparatus according to claim 1, wherein the security information is confidential level information having at least two ranks.
請求項1に記載の検査装置において、
前記セキュリティ情報は、対応する前記印刷画像の機密領域を表す機密領域情報である、ことを特徴とする検査装置。
The inspection apparatus according to claim 1,
The inspection apparatus according to claim 1, wherein the security information is confidential area information representing a confidential area of the corresponding print image.
請求項8に記載の検査装置において、
前記セキュリティ処理は、前記機密領域以外の領域で前記画像欠陥が検出された場合に、少なくとも前記機密領域を閲覧不能にし、少なくとも前記画像欠陥が検出された前記機密領域以外の領域を閲覧可能とする処理である、ことを特徴とする検査装置。
The inspection apparatus according to claim 8, wherein
When the image defect is detected in an area other than the confidential area, the security processing makes at least the confidential area unviewable and enables at least an area other than the confidential area in which the image defect is detected An inspection apparatus characterized by being a process.
請求項1に記載の検査装置において、
前記保管処理手段は、前記判定手段の判定結果がセキュリティ処理を行うことである場合に、前記欠陥検査画像データの保管処理を行わない、
ことを特徴とする検査装置。
The inspection apparatus according to claim 1,
The storage processing unit does not perform the storage processing of the defect inspection image data when the determination result of the determination unit is to perform security processing;
Inspection apparatus characterized by that.
印刷画像の読み取り処理により得られた検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、
前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データを保管する保管手段と、
を備えた検査装置を制御するプログラムであって、
前記検査画像データに対応する印刷画像のセキュリティ情報を取得する取得手順と、
前記欠陥検査画像データの保管処理において前記セキュリティ情報に基づいてセキュリティ処理を行うか否かを判定する判定手順と、
前記判定結果に従って前記欠陥検査画像データの保管処理を行う保管処理手順と、
前記判定手順によりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して、前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管手順と、
をコンピュータに実行させる、
ことを特徴とする検査プログラム。
Inspection means for inspecting defects of the print image using inspection image data obtained by the print image reading process;
Storage means for storing defect inspection image data which is inspection image data in which an image defect is detected by the defect inspection;
A program for controlling an inspection apparatus comprising:
An acquisition procedure for acquiring security information of a print image corresponding to the inspection image data;
A determination procedure for determining whether to perform security processing based on the security information in the storage processing of the defect inspection image data;
A storage processing procedure for storing the defect inspection image data according to the determination result;
For the defect inspection image data determined to be subjected to security processing according to the determination procedure, a substitute property generation storage procedure for generating and storing substitute property information indicating a defect property of the defect inspection image data,
To run on a computer,
An inspection program characterized by that.
印刷画像の読み取り処理により得られた検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、
前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データを保管する保管手段と、
を備えた検査装置において実行される方法であって、
前記検査画像データに対応する印刷画像のセキュリティ情報を取得する取得ステップと、
前記欠陥検査画像データの保管処理において前記セキュリティ情報に基づいてセキュリティ処理を行うか否かを判定する判定ステップと、
前記判定結果に従って前記欠陥検査画像データの保管処理行う保管処理ステップと、
前記判定ステップによりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して、前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管ステップと、
を含む、ことを特徴とする検査方法。
Inspection means for inspecting defects of the print image using inspection image data obtained by the print image reading process;
Storage means for storing defect inspection image data which is inspection image data in which an image defect is detected by the defect inspection;
A method performed in an inspection apparatus comprising:
An acquisition step of acquiring security information of a print image corresponding to the inspection image data;
A determination step of determining whether to perform security processing based on the security information in the storage processing of the defect inspection image data;
A storage process step for storing the defect inspection image data according to the determination result;
A substitute property generation and storage step for generating and storing substitute property information indicating a defect property of the defect inspection image data for the defect inspection image data determined to be subjected to security processing by the determination step;
An inspection method characterized by comprising:
検査装置を制御する制御装置であって、
前記検査装置は、
印刷画像の読み取り処理により得られた検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、
前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データの保管処理を行う保管処理手段と、
前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管手段と、
を備え、
前記制御装置は、
前記検査手段から、前記欠陥検査の結果を取得する手段と、
前記検査画像データに係るセキュリティ情報を取得する手段と、
前記セキュリティ情報に基づいて前記欠陥検査画像データに対するセキュリティ処理を行うか否かを判定する判定手段と、
前記保管処理手段に対し、前記判定手段の判定結果に従った保管処理の実行を指示する保管処理指示手段と、
前記代用特性生成保管手段に対し、前記判定手段によりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して前記代用特性情報の生成及び保管を行うことを指示する代用特性生成保管指示手段と、
を含む、
ことを特徴とする制御装置。
A control device for controlling the inspection device,
The inspection device includes:
Inspection means for inspecting defects of the print image using inspection image data obtained by the print image reading process;
Storage processing means for storing defect inspection image data which is inspection image data in which an image defect is detected by the defect inspection;
Substitution characteristic generation storage means for generating and storing substitution characteristic information indicating defect characteristics of the defect inspection image data;
With
The controller is
Means for obtaining a result of the defect inspection from the inspection means;
Means for obtaining security information relating to the inspection image data;
Determining means for determining whether to perform security processing on the defect inspection image data based on the security information;
A storage processing instruction means for instructing the storage processing means to execute a storage process according to a determination result of the determination means;
Substitution characteristic generation storage instruction means for instructing the substitution characteristic generation storage means to generate and store the substitution characteristic information for the defect inspection image data determined to be subjected to security processing by the determination means. When,
including,
A control device characterized by that.
検査装置を制御するプログラムであって、
前記検査装置は、
印刷画像の読み取り処理により得られた検査画像データを用いて前記印刷画像の欠陥検査を行う検査手段と、
前記欠陥検査により画像欠陥が検出された検査画像データである欠陥検査画像データの保管処理を行う保管処理手段と、
前記欠陥検査画像データの欠陥特性を示す代用特性情報の生成及び保管を行う代用特性生成保管手段と、
を備え、
前記プログラムは、
前記検査手段から、前記欠陥検査の結果を取得する手順と、
前記検査画像データに係るセキュリティ情報を取得する手順と、
前記セキュリティ情報に基づいて前記欠陥検査画像データに対するセキュリティ処理を行うか否かを判定する手順と、
前記保管処理手段に対し、前記判定する手順の判定結果に従った保管処理の実行を指示する手順と、
前記代用特性生成保管手段に対し、前記判定する手順によりセキュリティ処理を行うことが判定された前記欠陥検査画像データに対して前記代用特性情報の生成及び保管を行うことを指示する手順と、
をコンピュータに実行させる、
ことを特徴とする制御プログラム。
A program for controlling an inspection device,
The inspection device includes:
Inspection means for inspecting defects of the print image using inspection image data obtained by the print image reading process;
Storage processing means for storing defect inspection image data which is inspection image data in which an image defect is detected by the defect inspection;
Substitution characteristic generation storage means for generating and storing substitution characteristic information indicating defect characteristics of the defect inspection image data;
With
The program is
A procedure for obtaining the result of the defect inspection from the inspection means;
A procedure for acquiring security information relating to the inspection image data;
A procedure for determining whether to perform security processing on the defect inspection image data based on the security information;
A procedure for instructing the storage processing means to execute a storage process according to a determination result of the determination procedure;
A procedure for instructing the substitute property generation storage unit to generate and store the substitute property information for the defect inspection image data determined to be subjected to security processing according to the determination procedure;
To run on a computer,
A control program characterized by that.
JP2004014196A 2004-01-22 2004-01-22 Inspection device, inspection program, inspection method, control device, and control program Expired - Fee Related JP4432505B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004014196A JP4432505B2 (en) 2004-01-22 2004-01-22 Inspection device, inspection program, inspection method, control device, and control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004014196A JP4432505B2 (en) 2004-01-22 2004-01-22 Inspection device, inspection program, inspection method, control device, and control program

Publications (2)

Publication Number Publication Date
JP2005208890A JP2005208890A (en) 2005-08-04
JP4432505B2 true JP4432505B2 (en) 2010-03-17

Family

ID=34900057

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004014196A Expired - Fee Related JP4432505B2 (en) 2004-01-22 2004-01-22 Inspection device, inspection program, inspection method, control device, and control program

Country Status (1)

Country Link
JP (1) JP4432505B2 (en)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5164749B2 (en) * 2008-09-01 2013-03-21 キヤノン株式会社 Image inspection apparatus and image forming apparatus having the same
JP5267789B2 (en) * 2008-09-26 2013-08-21 オムロン株式会社 Appearance inspection apparatus and program
JP5912374B2 (en) * 2011-09-29 2016-04-27 株式会社Screenホールディングス Image inspection device
JP6201790B2 (en) * 2013-02-12 2017-09-27 株式会社リコー Image inspection apparatus, image inspection system, and image inspection method
JP6252183B2 (en) * 2013-02-12 2017-12-27 株式会社リコー Image inspection apparatus, image inspection system, and image inspection method
JP6098356B2 (en) * 2013-05-20 2017-03-22 コニカミノルタ株式会社 Image reading apparatus, image forming system, and program
JP6453130B2 (en) * 2015-03-26 2019-01-16 株式会社Screenホールディングス Image inspection apparatus, reprint designation method and program thereof, and printing apparatus including the same
JP6790751B2 (en) * 2016-11-17 2020-11-25 コニカミノルタ株式会社 Image forming device
US10482280B2 (en) * 2017-01-30 2019-11-19 Symantec Corporation Structured text and pattern matching for data loss prevention in object-specific image domain
JP6798348B2 (en) * 2017-02-23 2020-12-09 コニカミノルタ株式会社 Image forming device and image forming control program
JP2019195122A (en) * 2018-05-01 2019-11-07 コニカミノルタ株式会社 Image processing device and program
JP7085418B2 (en) * 2018-06-26 2022-06-16 サトーホールディングス株式会社 Inspection system and inspection method
IL260417B (en) * 2018-07-04 2021-10-31 Tinyinspektor Ltd System and method for automated visual inspection
US20210334930A1 (en) 2018-09-26 2021-10-28 Amgen Inc. Image sampling technologies for automated visual inspection systems
CN109580653A (en) * 2018-11-06 2019-04-05 深圳技术大学(筹) A kind of rail fastener image-pickup method
AU2019374742B2 (en) * 2018-11-07 2022-10-06 Servicenow Canada Inc. Removal of sensitive data from documents for use as training sets
EP4104100A4 (en) 2020-02-13 2024-01-10 Inspekto A M V Ltd User interface device for autonomous machine vision inspection

Also Published As

Publication number Publication date
JP2005208890A (en) 2005-08-04

Similar Documents

Publication Publication Date Title
JP4704010B2 (en) Image forming apparatus, image forming system, security management apparatus, and security management method
JP4432505B2 (en) Inspection device, inspection program, inspection method, control device, and control program
JP5309774B2 (en) Network apparatus and processing method
US8194289B2 (en) Image processing device, method and program product processing barcodes with link information corresponding to other barcodes
JP4276672B2 (en) Image processing device
JP3991030B2 (en) Image forming apparatus, operation history storage method, and computer program
JP4974963B2 (en) Image forming apparatus, dot pattern calibration method, and program
US7742197B2 (en) Image processing apparatus that extracts character strings from a image that has had a light color removed, and control method thereof
US20090009801A1 (en) Image processing apparatus and image processing method
CN101355626B (en) Image-processing apparatus, image-processing method
JP5109516B2 (en) Document processing system, image forming apparatus, and program
US20070106902A1 (en) Image processing apparatus, image managing method, document managing apparatus, and document managing method
US20090219561A1 (en) Image processing apparatus and image processing method
JP2006252231A (en) Output management device, output management method and its program
JP2007079693A (en) Image processing device
JP2005205722A (en) Inspection image data managing apparatus, controlling apparatus, control program, and control method
JP2006303870A (en) Image forming apparatus and method
JP2007214611A (en) Image processing apparatus
JP4609495B2 (en) Image processing apparatus, image processing system, and image processing program
JP5537149B2 (en) Image processing apparatus, control method therefor, and program
JP2005205723A (en) Controlling apparatus, control program, and control method
JP2008283290A (en) Image output device and control method thereof
JP4895696B2 (en) Information processing apparatus, information processing method, and information processing program
JP6113258B2 (en) PRINT CONTROL DEVICE, PRINT CONTROL METHOD, PROGRAM THEREOF, AND STORAGE MEDIUM
JP2018160890A (en) Image processing apparatus, program, and image processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090807

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091005

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091201

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091214

R150 Certificate of patent or registration of utility model

Ref document number: 4432505

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees