JP5904149B2 - 画像検査システムおよびプログラム - Google Patents

Description

本発明は、画像検査システム、プログラムに関する。

特許文献１には、欠陥検査を行った後に、テストチャートの利用を指示する代用指定入力が行われ、画像データ解析に基づいて検査画像データと類似したテストチャートが選択される制御装置であって、検査結果を記録した履歴情報に基づいて欠陥検出の有無を調べ、欠陥が検出されない場合には、検査画像データを削除し履歴情報に削除した旨を記録し、一方、欠陥が検出された場合には、代用指定入力に基づいて、検査画像データを保管するか、選択したテストチャートを印刷して保管するかが選ばれるものが開示されている。

特開２００５−２０５７２３号公報

記録材上に形成され欠陥領域を有する画像について、内容を知られることなく欠陥領域の確認ができることが望ましい。

請求項１に記載の発明は、原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する画像読み取り手段と、前記原画像データを取得する取得手段と、前記画像読み取り手段により生成された前記読み取り画像データと前記取得手段により取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する判断手段と、前記判断手段により前記形成画像に欠陥領域があると判断され、当該欠陥領域と当該形成画像における文字とに重なりが生じていた場合に、当該読み取り画像データから当該欠陥領域との重なりが最も大きい１文字のみを含む画像を抽出する抽出手段と、前記抽出手段により抽出された前記画像を表示する画像表示装置と、を備え、前記画像表示装置により表示される前記画像には欠陥領域が含まれることを特徴とする画像検査システムである。

請求項２に記載の発明は、原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する画像読み取り手段と、前記原画像データを取得する取得手段と、前記画像読み取り手段により生成された前記読み取り画像データと前記取得手段により取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する判断手段と、前記判断手段により前記形成画像に欠陥領域があると判断され、当該欠陥領域と当該形成画像における文字とに重なりが生じていない場合に、当該読み取り画像データから当該欠陥領域および当該欠陥領域を中心とする十字形状の領域で隣接する文字のみの画像を抽出する抽出手段と、前記抽出手段により抽出された前記画像を表示する画像表示装置と、を備えることを特徴とする画像検査システムである。
請求項３に記載の発明は、前記画像表示装置は、前記読み取り画像データのページの全体像を、当該ページにおける前記欠陥領域の箇所のみを示した状態で表示することを特徴とする請求項１または２に記載の画像検査システムである。
請求項４に記載の発明は、前記画像表示装置は、前記判断手段により前記形成画像に複数の欠陥領域があると判断された場合に、当該複数の欠陥領域のうち、より大きい欠陥領域について前記抽出手段が抽出した画像を前記画像表示装置で表示し、他の欠陥領域を表示しないことを特徴とする請求項１乃至３のいずれかに記載の画像検査システムである。
請求項５に記載の発明は、コンピュータに、原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する機能と、前記原画像データを取得する機能と、生成された前記読み取り画像データと取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する機能と、前記形成画像に欠陥領域があると判断され、当該欠陥領域と前記形成画像における文字とに重なりが生じていた場合に、当該読み取り画像データから当該欠陥領域との重なりが最も大きい１文字のみを含む画像を抽出する機能と、を実現させ、抽出された前記画像には欠陥領域が含まれることを特徴とするプログラムである。

請求項６に記載の発明は、コンピュータに、原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する機能と、前記原画像データを取得する機能と、生成された前記読み取り画像データと取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する機能と、前記形成画像に欠陥領域があると判断され、当該欠陥領域と前記形成画像における文字とに重なりが生じていない場合に、当該読み取り画像データから当該欠陥領域および当該欠陥領域を中心とする十字形状の領域で隣接する文字のみの画像を抽出する機能と、を実現させるプログラムである。

請求項１の発明によれば、記録材上に形成され欠陥領域を有する画像について、欠陥領域およびその周囲全体の文字を含む状態で表示される場合に比べ、画像の内容を知られにくい状態で、欠陥領域との重なりが最も大きい１文字のみの確認ができる画像検査システムが提供できる。
請求項２の発明によれば、記録材上に形成され欠陥領域を有する画像について、欠陥領域およびその周囲全体の文字を含む状態で表示される場合に比べ、画像の内容を知られにくい状態で、欠陥領域の確認ができる画像検査システムが提供できる。
請求項３の発明によれば、画像の内容全体を表示されることなく、画像のページにおける欠陥領域の箇所を知ることができる。
請求項４の発明によれば、複数の欠陥領域がある場合に、その複数の欠陥領域すべてとその周囲全体の文字を含む状態で表示される場合に比べ、画像の内容を知られにくい状態で、確認することができる。
請求項５の発明によれば、記録材上に形成され欠陥領域を有する画像について、欠陥領域およびその周囲全体の文字を含む状態で表示される場合に比べ、画像の内容を知られにくい状態で、欠陥領域との重なりが最も大きい１文字のみの確認ができる機能をコンピュータにより実現できる。
請求項６の発明によれば、記録材上に形成され欠陥領域を有する画像について、欠陥領域およびその周囲全体の文字を含む状態で表示される場合に比べ、画像の内容を知られにくい状態で、欠陥領域の確認ができる機能をコンピュータにより実現できる。

本実施形態にかかる画像形成システムの全体構成を示した図である。 図１の矢印ＩＩ方向から送り出しローラを眺めた場合の図である。 本実施形態の画像形成システムにて実行される処理の流れを示したフローチャートである。 用紙に形成されたコード画像を示した図である。 モニタにおける表示画面の一例を示した図である。 （ａ）〜（ｃ）は、文字の画像の抽出を行う方法について説明した第１の例である。 （ａ）〜（ｃ）は、文字の画像の抽出を行う方法について説明した第２の例である。 結果保持部が文字の画像を抽出する手順を説明したフローチャートである。

以下、添付図面を参照して本発明の実施形態について説明する。
図１は、本実施形態にかかる画像形成システムの全体構成を示した図である。
本実施形態の画像形成システム１は、記録材の一例である用紙Ｐに対して画像を形成する画像形成装置１００、画像形成装置１００によって用紙Ｐ上に形成された画像（形成画像）を検査する画像検査システムの一例である検査装置２００、検査装置２００から排出された用紙Ｐを収容する用紙収容装置３００を備えている。さらに、画像形成システム１には、検査装置２００によって用紙Ｐ上に形成されたコード画像（詳細は後述）を読み取るコード画像読み取り装置４００が設けられている。

画像形成装置１００は、不図示のＰＣ（Personal Computer）などから、形成される画像の元となる画像データ（以下、「原画像データ」と称する）を取得し、取得したこの原画像データに基づき、トナーなどの画像形成材を用いて用紙Ｐに対して画像を形成する。なお、本実施形態において、用紙Ｐに画像を形成する機構は特に限定されず、いわゆる電子写真方式やインクジェット方式等、既存の種々の方式が用いられる。

検査装置２００には、タッチパネル方式のモニタ２１１を有しユーザ（オペレータ）からの操作を受け付けるとともにユーザに対し情報の表示を行う端末装置２１０が設けられている。さらに、検査装置２００には、画像形成装置１００から排出された用紙Ｐが搬送される用紙搬送経路Ｒが設けられている。また、用紙搬送経路Ｒの脇に設けられ、用紙Ｐの先端部のエッジを検知するエッジ検知センサ２１２、エッジ検知センサ２１２を通過した用紙Ｐをさらに下流側へ送り出す第１送りローラ２１３が設けられている。

さらに、検査装置２００には、第１送りローラ２１３よりも用紙Ｐの搬送方向における下流側に設けられ、用紙Ｐをさらに下流側へ送り出す第２送りローラ２１４が設けられている。また、第１送りローラ２１３よりも下流側且つ第２送りローラ２１４よりも上流側には、用紙Ｐに形成された画像を読み取る画像読み取り装置２２０が設けられている。

また、第２送りローラ２１４よりも下流側には、用紙搬送経路Ｒ上の用紙Ｐに対してコード画像を形成するコード画像形成ヘッド２１５が設けられている。さらに、検査装置２００には、コード画像形成ヘッド２１５によるコード画像の形成処理を制御する制御部２４０が設けられている。なお、コード画像形成ヘッド２１５は、例えばインクジェットヘッドによって構成される。

画像読み取り装置２２０には、用紙搬送経路Ｒの一方の脇に配置され（図中、用紙搬送経路Ｒよりも上方に配置され）、用紙Ｐの表面に形成された画像を読み取る表面画像読み取り装置２２１、用紙搬送経路Ｒの他方の脇に配置され（図中、用紙搬送経路Ｒよりも下方に配置され）、用紙Ｐの裏面に形成された画像を読み取る裏面画像読み取り装置２２２が設けられている。

ここで、表面画像読み取り装置２２１および裏面画像読み取り装置２２２の各々の画像読み取り装置には、用紙Ｐに光を照射する光源２２５と、用紙Ｐからの反射光を複数の受光素子にて受光し画像データ（以下、「読み取り画像データ」と称する）を生成するラインセンサ２２６と、用紙Ｐからの反射光をこのラインセンサ２２６に導く反射鏡２２７とが設けられている。さらに、各々の画像読み取り装置には、反射鏡２２７により導かれた用紙Ｐからの反射光を、ラインセンサ２２６に結像させる結像光学系２２８が設けられている。本実施形態では、表面画像読み取り装置２２１および裏面画像読み取り装置２２２は、原画像データに基づき用紙Ｐ上に形成された形成画像を読み取り、読み取り画像データを生成する画像読み取り手段として機能する。

次に、制御部２４０について説明すると、制御部２４０には、表面画像読み取り装置２２１および裏面画像読み取り装置２２２から出力されてきた読み取り画像データを蓄積する第１バッファメモリ２４１が設けられている。また、画像形成装置１００やＰＣ（不図示）などから送信されてきた原画像データを蓄積する第２バッファメモリ２４２が設けられている。本実施形態では、第２バッファメモリ２４２は、原画像データを取得する取得手段として機能する。

さらに、制御部２４０には、第１バッファメモリ２４１および第２バッファメモリ２４２から照合処理部２４４への画像データ（原画像データ、読み取り画像データ）の出力を制御する出力制御部２４３を備えている。なお、本実施形態では、この照合処理部２４４において、読み取り画像データと原画像データとの照合を行う。なお、この照合をより行いやすくするため、第２バッファメモリ２４２へ原画像データの格納を行う際などに、原画像データに対しグレースケール変換や解像度変換などの処理を行っておくとよい。

ここで、出力制御部２４３は、第１バッファメモリ２４１に格納されている読み取り画像データの第１バッファメモリ２４１からの出力タイミングと、第２バッファメモリ２４２に格納されている原画像データの第２バッファメモリ２４２からの出力タイミングとが同じとなるように、第１バッファメモリ２４１および第２バッファメモリ２４２からの画像データの出力を制御する。

より具体的に説明すると、出力制御部２４３は、第１バッファメモリ２４１および第２バッファメモリ２４２から、１ページ分（用紙１枚分）の原画像データおよび読み取り画像データを順次出力していくが、この際（各ページの画像データの出力を開始する際）、例えば、各ページの先頭に形成される画像に対応した画像データから出力を開始し、最後に、各ページの後端に形成される画像に対応した画像データを出力する。

さらに、本実施形態では、第１バッファメモリ２４１からの読み取り画像データの出力開始タイミングと、第２バッファメモリ２４２からの原画像データの出力開始タイミングとを一致させるとともに、各ページの後端に形成される画像に対応した画像データを出力する際にも、読み取り画像データの出力タイミングと原画像データの出力タイミングとを一致させる。これにより、本実施形態では、原画像データと読み取り画像データとが照合処理部２４４において比較される際、原画像データにより特定される画像の用紙Ｐ上における位置と、読み取り画像データにより特定される画像の用紙Ｐ上における位置とが一致するようになる。

さらに説明すると、本実施形態では、エッジ検知センサ２１２からの出力が出力制御部２４３へ出力され、出力制御部２４３は、エッジ検知センサ２１２への用紙Ｐの先端部の到達を把握する。また、第１バッファメモリ２４１には、ラインセンサ２２６から、画像の読み取りに同期したクロック信号が画像読み取りデータとともに送信されてくる。さらに、第２バッファメモリ２４２には、原画像データとともに、ページ同期信号（ＰＣなどから送信されてきた情報のうち原画像データがどの部分であるかを特定するために用いられる信号）が送られてくる。出力制御部２４３は、エッジ検知センサ２１２からの出力、クロック信号、ページ同期信号に基づき、原画像データおよび読み取り画像データの出力を行う際のタイミングを決定する。

制御部２４０についてさらに説明すると、制御部２４０には、第１バッファメモリ２４１から出力された読み取り画像データと第２バッファメモリ２４２から出力された原画像データとを照合する照合処理部２４４が設けられている。さらに、照合処理部２４４による照合の結果を保持する結果保持部２４５が設けられている。また、照合処理部２４４による照合の結果に基づき、コード画像形成ヘッド２１５の制御を行うコード画像形成制御部２４６が設けられている。

なお、照合処理部２４４では、第１バッファメモリ２４１から送られてくる読み取り画像データおよび第２バッファメモリから送られてくる原画像データのそれぞれを予め定められた領域に分割するとともに、各領域毎に、パターンマッチング処理を行い、形成された画像に不良が発生している箇所（欠陥領域）があるか否かを判断する。
なお、パターンマッチング処理の典型的な手法としては、例えば、比較対象となっている二つの領域の各々に含まれる複数の画素毎に、濃度値などの予め定められたパラメータを比較し、この二つのパラメータ間における差分を求める。そして、各画素の比較により得られた複数の差分の絶対値和を求め、この絶対値和が予め定められた閾値を超えているか否かを判断する。そして、絶対値和が予め定められた閾値を超えている場合に、画像（の一部）に不良が発生していると判断する。
本実施形態では、照合処理部２４４は、表面画像読み取り装置２２１および裏面画像読み取り装置２２２により生成された読み取り画像データと第２バッファメモリ２４２により取得された原画像データとを比較し、形成画像に欠陥領域があるか否かを判断する判断手段として機能する。

次に、用紙収容装置３００について説明する。
本実施形態の用紙収容装置３００には、筐体３１０が設けられている。また、この筐体３１０に内部に収められ、検査装置２００から順次排出されてくる用紙Ｐが積載される用紙積載部３２０が設けられている。さらに、検査装置２００から排出されてくる用紙Ｐをこの用紙積載部３２０に送り出す送り出しローラ３３０が設けられている。

なお、本実施形態では、図２（図１の矢印ＩＩ方向から送り出しローラ３３０を眺めた場合の図）に示すように、送り出しローラ３３０は、不図示のモータにより回転駆動を行う駆動ローラ３３１と、この駆動ローラ３３１に押し付けられ駆動ローラ３３１に従動して回転する駆動ローラ３３２とから構成されている。また、本実施形態では、送り出しローラ３３０は、送り出しローラ３３０の軸方向に沿って移動可能に設けられている。

さらに、本実施形態では、モータやカム（何れも不図示）などを備え、送り出しローラ３３０の軸方向に沿って送り出しローラ３３０を移動させる移動機構３４０が設けられている。ここで、本実施形態では、移動機構３４０によって送り出しローラ３３０を軸方向に移動させることで、用紙Ｐの積載位置を異ならせることができるようになっている。言い換えると、用紙Ｐの積載位置をオフセットできるようになっている。

図３は、本実施形態の画像形成システム１にて実行される処理の流れを示したフローチャートである。
本実施形態では、不図示のスタートボタンがユーザにより押圧されることで、印刷ジョブに基づく画像形成処理が開始される（ステップ１０１）。具体的には、まず、ユーザから提供された原画像データが画像形成装置１００に入力され（ステップ１０２）、これにより、画像形成装置１００において画像形成処理が実行される（ステップ１０３）。なお、ユーザから提供された原画像データは、検査装置２００（図１参照）の第２バッファメモリ２４２にも格納され、後述する照合処理にも用いられる。

その後、画像形成処理に伴い画像形成装置１００から順次排出される用紙Ｐが検査装置２００に送り込まれ、検査装置２００にて、用紙Ｐ上の画像の読み取りが行われる（ステップ１０４）。なお、この読み取り処理により得られた読み取り画像データは、図１にて示した第１バッファメモリ２４１に格納される。その後、本実施形態では、検査装置２００の照合処理部２４４が照合処理を実行する（ステップ１０５）。具体的には、第１バッファメモリ２４１に格納された読み取り画像データと、第２バッファメモリ２４２に格納された原画像データとが用いられ、上記パターンマッチング処理が行われる。

次いで、照合処理部２４４は、パターンマッチング処理に基づき、用紙Ｐ上に形成された画像に不良が発生しているか否かを判断する（ステップ１０６）。そして、不良が発生していないと照合処理部２４４が判断した場合、不図示のメイン制御部にて、印刷ジョブが全て終了しているか否かが判断され（ステップ１１０）、印刷ジョブが全て終了していると判断された場合は全体の処理を終了する。その一方で、印刷ジョブが終了していないと判断された場合は、ステップ１０２以降の処理が再度実行される。

一方、ステップ１０６において、不良が発生していると判断された場合、照合処理部２４４は、不良が発生しているページのページ情報（ページ番号）、不良の発生位置（ページ内における位置）、不良の程度、不良の個数、原画像データ、読み取り画像データなどにより構成される不良状況データと、この不良状況データを他の不良状況データと識別するための識別情報（ＩＤ）とを対応づけたうえで、この不良状況データおよび識別情報を、結果保持部２４５に出力する。

これにより、互いに関連付けられた不良状況データおよび識別情報が、結果保持部２４５によって保持されるようになる（ステップ１０７）。なお詳しくは後述するが、このとき結果保持部２４５は、原画像データおよび読み取り画像データの一部を抽出して保持する。その後、コード画像形成制御部２４６（図１参照）が、上記識別情報に基づきコード画像を生成し、不良が発生していると判断された用紙Ｐに対して、コード画像形成ヘッド２１５を用い、生成したこのコード画像を形成する（ステップ１０８）。

なお、コード画像が形成された用紙Ｐは、用紙積載部３２０（図１参照）上に積載されることとなるが、この際、移動機構３４０（図２参照）によって送り出しローラ３３０が移動し、コード画像が形成された用紙Ｐは、オフセットされた状態で用紙積載部３２０上に積載される（ステップ１０９）。その後、ステップ１１０において、印刷ジョブが全て終了しているか否かを判断され、印刷ジョブが全て終了していると判断された場合は全体の処理を終了する。その一方で、印刷ジョブが終了していないと判断された場合は、ステップ１０２以降の処理が再度実行される。

図４は、用紙Ｐに形成されたコード画像を示した図である。
本実施形態における画像形成装置１００は、図中「印字データ領域」で示す矩形の領域内に画像を形成する。さらに、画像形成装置１００は、同図に示すように、矩形状に形成された用紙の四隅の各々であって、「印字データ領域」よりも外側に位置する箇所に、十字のマークＭＫ１を形成（印字）する。

さらに、本実施形態では、互いに隣り合う十字のマークＭＫ１の間に、Ｔ字状のマークＭＫ２が形成される。ここで、本実施形態では、製本時等に、マークＭＫ１およびマークＭＫ２よりも外側に位置する領域が、切り落とされる。そして、本実施形態では、この切り落とされる部分に対し上記コード画像が形成される。これにより、本実施形態では、コード画像が用紙Ｐ上に残った状態で製本等されることが防止される。なお、コード画像は特に限定されないが、例えば、１次元のバーコードや、ＱＲコード（登録商標）などの２次元のバーコードなどを用いることができる。

ここで、本実施形態では、用紙Ｐが搬送される際の搬送方向（検査装置２００における用紙搬送方向、図４において矢印４Ａで示す搬送方向）において、用紙Ｐの後端部側に、コード画像が形成される。ここで、検査装置２００（図１参照）をより小型にできるため、コード画像形成ヘッド２１５を、用紙Ｐの搬送方向において、より上流側に配置し、画像読み取り装置２２０に対しコード画像形成ヘッド２１５を接近させることが好ましい。その一方で、コード画像形成ヘッド２１５を画像読み取り装置２２０に接近させすぎると、コード画像形成ヘッド２１５によるコード画像の形成時に、コード画像形成ヘッド２１５よりも下流側に用紙Ｐが位置し、コード画像の形成ができなくなるという不具合が起こりうる。

このため、本実施形態では、コード画像形成ヘッド２１５による用紙Ｐへのコード画像の形成が可能になる箇所のうち、最も上流側に、コード画像形成ヘッド２１５を配置するようにし、コード画像の形成ができなくなるという上記不具合の発生を抑制しつつ、検査装置２００の小型化を図っている。なお、この場合、上記のとおり、用紙Ｐの搬送方向において、用紙Ｐの後端部側に、コード画像が形成される。

用紙Ｐへの画像の形成が終了後、本実施形態では、ユーザによって、不良が発生していると判断された画像の質が確認されることがある。かかる場合、本実施形態では、まず、用紙積載部３２０（図１参照）において、ユーザにより、積載されている用紙Ｐの中から、不良が発生していると判断された画像が形成された用紙Ｐ（検査装置２００によって不良が発生していると判断された画像が形成された用紙Ｐ）（以下、「不良用紙Ｐ」と称することがある）が見出される。ここで、本実施形態では、不良用紙Ｐに対しては、不良用紙Ｐの側部に対して上記コード画像が形成されており、ユーザは、このコード画像の有無により、不良用紙Ｐを見出す。

その後、本実施形態では、図１にて示したコード画像読み取り装置４００がユーザにより操作され、不良用紙Ｐ上のコード画像が読み取られる。なお、コード画像読み取り装置４００は可搬できる装置となっており、コード画像の読み取りは、用紙積載部３２０に不良用紙Ｐが積載されている状態にて行われる。さらに説明すると、不良用紙Ｐは、不良の程度によっては、取り除かれずそのまま用紙積載部３２０に残されることもあり、本実施形態では、ユーザは、用紙積載部３２０に未だ積載されている状態の不良用紙Ｐからコード画像の読み取りを行う。コード画像読み取り装置４００としては、例えば、バーコードリーダが挙げられる。なお、バーコードリーダなどの専用の装置に限らず、カメラ付きの携帯電話やスマートフォンなどを、コード画像読み取り装置４００として用いる構成としてもよい。

そして、不良用紙Ｐ上のコード画像の読み取りが行われると、モニタ２１１（図１参照）上に、不良についての情報が表示される。
つまり検査装置２００において、人間が行うような主観的な検査を行うことは困難である。このため、検査装置２００において不良が発生していると判断された画像であっても、人間が判断すると、不良が発生していないことがある。このような状況において、検査装置２００にて不良と判断されたものを一律に廃棄処分等してしまうことは妥当ではない。例えば、欠陥領域が小さな点状であった場合、このような欠陥領域について検査装置２００は、形成画像に不良が生じていると判断する。しかし一般的には、このような欠陥領域があったとしても問題にならない場合が多い。ただし数値が形成画像として印刷されている箇所にこのような点状の欠陥領域が生じていた場合は、これを見る者は、欠陥領域を小数点として誤って認識するおそれがある。よってこのような場合は、不良と判断することがよいことになる。そこで検査装置２００において不良と判断された場合でも、ユーザによる確認を行うことが望ましくなる。そのため本実施形態では、モニタ２１１に不良についての情報を表示し、ユーザが目視による検査を再度行うことにしている。

しかしながら原画像データに基づく画像や読み取り画像データに基づく画像を全て表示すると個人情報等の秘密にすべき情報についても、モニタ２１１に表示されることになる。そのため検査装置２００を操作するユーザに秘密にすべき情報が知られてしまう可能性がある。
そこで本実施形態では、以下に説明するような方法で、原画像データに基づく画像や読み取り画像データに基づく画像の一部を抽出してモニタ２１１に表示することで、この問題の抑制を図っている。

図５は、モニタ２１１における表示画面の一例を示した図である。
本実施形態では、モニタ２１１における表示画面の図中左上に、コード画像を読み取ることにより得られた上記識別情報（ＩＤ）が表示される。また、表示画面の右上には、表示画面上に現在表示しているページのページ番号が表示される。

また、本実施形態では、表示画面の中段且つ中央に、不良が発生している箇所を拡大して表示する拡大表示部４１２が設けられている。
付言すると、表示画面の中段且つ中央には、不良が発生している箇所の読み取り画像データに基づく画像を拡大して表示する拡大表示部４１２が設けられている。

さらに、本実施形態では、表示画面の中段且つ左側に（拡大表示部４１２の左側に）、原画像データに基づく画像を表示する原画像表示部４１１が設けられている。
付言すると、表示画面の中段且つ左側に、原画像データのうち、不良が発生している箇所に対応した原画像データに基づく画像を拡大して表示する原画像表示部４１１が設けられている。ここで、本実施形態では、このように、拡大表示部４１２と原画像表示部４１１とが互いに隣接した状態で表示され、拡大表示部４１２に表示されている画像と、原画像表示部４１１に表示されている画像とを見比べやすくなっている。

さらに、本実施形態では、表示画面の中段且つ右側に、現在表示しているページの全体像４１３が表示される。ただしここでは、現在表示しているページの内容については表示されず、このページ内で不良が発生している箇所のみを表示する。図５においては、この全体像には、４つの丸いマークＭＫ３が表示されており、この４つの丸いマークＭＫ３が表示されている箇所にて不良が発生していることを示している。つまりこの４つのマークＭＫ３以外は、このページは、白紙として表示される。そして上記４つのマークＭＫ３のうち、拡大表示部４１２にて表示されている不良（不良画像）を取り囲んでいるマークＭＫ３（図中、最も上に位置するマークＭＫ３）は、太い線で表示され、強調表示されている。これにより、ユーザは、全体像４１３にて複数表示されている不良の何れの不良が、拡大表示部４１２にて拡大表示されているかを認識しやすくなる。

なおページの全体像４１３として、文字が認識出来ないレベルまで解像度を粗くして表示してもよい。
また原画像データから個人情報などのセキュリティの高い領域を取得し、その領域の文字をマスクして表示してもよい。この場合、この領域は、予め定められた色で塗りつぶしされたり、「個人情報」などの文字列が替わりに表示される。
または、ページの全体像４１３そのものを表示しないようにしてもかまわない。

なお不良が発生している箇所が同一ページ中に２箇所以上あり、かつそれぞれの不良が発生している箇所が近接している場合は、全てを表示してしまうと、名前などの個人情報がユーザにより認識できてしまうことがある。そのためこの場合は、例えば、１つの不良が発生している箇所のみを、原画像表示部４１１と拡大表示部４１２に表示するようにすることが好ましい。つまり例えば、「平松崇」という名前の情報の中に、不良が発生している箇所が、「平」と「松」の間に１つ、「松」と「崇」の間に１つあるとすると、ユーザがこの領域を連続して読み取った場合、「平松崇」という名前の情報全体を把握することができてしまう。よってこの場合、例えば、不良の程度がより大きい方を表示し、他方は表示しないようにすることが好ましい。
また同様にして不良が発生している箇所が２文字以上の文字列を横切る形で発生した場合も、ある１文字を中心とした領域だけを原画像表示部４１１と拡大表示部４１２に表示することが好ましい。

そして識別情報が表示されている箇所の右側には、２つの三角形が表示され、拡大表示部４１２に表示される不良箇所を他の不良箇所に切り替える際にユーザにより操作される切り替え用操作部４１４が設けられている。さらに、ページ番号が表示されている箇所の右側には、同様に２つの三角形が表示され、ページを他のページに切り替える際にユーザにより操作（押圧）されるページ切り替え操作部４１５が表示される。

また、本実施形態では、表示画面の図中下段且つ右側に、ユーザが再印刷を希望する場合にユーザにより操作（押圧）される再印刷ボタン４１６が表示される。ここで、表示画面をユーザが確認した結果、限度を超えた不良が発生しているとユーザが判断した場合は、この再印刷ボタン４１６がユーザにより押圧される。そして再印刷ボタン４１６が押圧された場合は、画像形成装置１００（図１）にて画像形成が行われ、画像が形成された新たな用紙Ｐが用紙積載部３２０に積載される。

以下、拡大表示部４１２に表示される画像についてさらに詳しく説明を行う。
図５に示す例では、読み取り画像データから欠陥領域の周囲に存在する文字の画像を抽出し、抽出された文字の画像を欠陥領域の画像とともに重畳させて表示している。そしてこの文字の画像の抽出は、予め定められた規則に従い行われる。

図６（ａ）〜（ｃ）は、文字の画像の抽出を行う方法について説明した第１の例である。
この第１の例では、欠陥領域と文字とに重なりが生じていないときに抽出される文字の画像について図示している。
具体的には、本実施形態では、欠陥領域と文字とに重なりが生じていないときは、欠陥領域に対し上方向、下方向、左方向および右方向に隣接して存在する文字のうち少なくとも２つの文字の画像を抽出する。

図６（ａ）では、左側に欠陥領域Ｋ１周辺の画像を示している。そして図中右側にここから抽出した文字の画像を示している。この場合、例えば、欠陥領域Ｋ１を中心にして上方向、下方向、左方向および右方向に存在する４つの文字を抽出する。具体的には、「書」、「０」、「松」、「崇」の４つの文字が抽出されている。なおこれは、欠陥領域Ｋ１を中心とする十字形状の領域で文字の画像を抽出すると言い換えることもできる。
さらにここでは例えば、欠陥領域Ｋ１を中心にして左方向および右方向に存在する２つの文字を抽出する場合も示している。具体的には、「松」、「崇」の２つの文字が抽出されている。即ち、欠陥領域Ｋ１を中心として行方向に隣接する２つの文字を抽出している。なお図示はしていないが、欠陥領域Ｋ１を中心にして上方向および下方向に存在する２つの文字を抽出する方法もある。この場合、具体的には、「書」、「０」の２つの文字が抽出されることになる。即ち、欠陥領域Ｋ１を中心として列方向に隣接する２つの文字を抽出する。

図６（ｂ）では、図６（ａ）と同様に左側に欠陥領域Ｋ２周辺の画像を示している。そして図中右側にここから抽出した文字の画像を示している。この場合は、欠陥領域Ｋ２を中心にして下方向、左方向および右方向に存在する３つの文字を抽出している。具体的には、「円」、「崇」、「様」の３つの文字が抽出されている。この例では、上方向には、文字が存在しないため、文字の抽出は行われないが、この部分については欠陥領域Ｋ２の画像を表示している。なおこの場合も、欠陥領域Ｋ２を中心とする十字形状の領域で文字の画像を抽出すると言うことができる。

さらに図６（ｃ）は、欠陥領域Ｋ３と文字との記録材上における距離が予め定められた値以内である文字の画像を抽出する例を示している。
図６（ｃ）では、左側に欠陥領域Ｋ３周辺の画像を示している。そして図中右側にここから抽出した文字の画像を示している。この場合、欠陥領域Ｋ３と「書」および「崇」の２文字については、欠陥領域Ｋ３との距離が近いが、「様」の１文字については、欠陥領域Ｋ３との距離が遠いため抽出が行われなかった例である。

図６（ａ）〜（ｃ）について左側の画像がモニタ２１１に表示された場合、この画像を見たユーザは、このページが「請求書」を意味し、かつ請求先が「平松 崇 様」であって、請求額が、「１００００円」であることを把握することができる。一方、図６（ａ）〜（ｃ）の右側の画像のように文字の画像の抽出を行った場合、この画像がモニタ２１１に表示されても、ユーザは、その内容を把握することは困難である。そしてこの場合でも欠陥領域とその周辺の画像についての画像は表示される。本実施形態では、欠陥領域と欠陥領域に隣接する少なくとも２文字との関係を見ることで、この欠陥領域がこのページを見る者に対し情報伝達を阻害するか否かを判断する。情報伝達を阻害するか否かを判断するには、このような抽出された領域を表示するだけで十分であり、欠陥領域が限度を超えた不良であるか否かをユーザが判断する作業に対し支障が生じることは少ない。

図７（ａ）〜（ｃ）は、文字の画像の抽出を行う方法について説明した第２の例である。
この第２の例では、欠陥領域と文字とに重なりが生じているときに抽出される文字の画像について図示している。
具体的には、本実施形態では、欠陥領域と文字とに重なりが生じていたときに、文字の中から欠陥領域との重なりが最も大きい１文字の画像を抽出する。

図７（ａ）では、左側に欠陥領域Ｋ４周辺の画像を示している。そして図中右側にここから抽出した文字の画像を示している。この場合、欠陥領域Ｋ４と「書」および「崇」の２つの文字とが重なっている。ただし「崇」の文字より「書」の文字の方が欠陥領域Ｋ４との重なりが大きいため、「書」の１文字を抽出している。

また図７（ｂ）でも同様に左側に欠陥領域Ｋ５周辺の画像を示している。そして図中右側にここから抽出した文字の画像を示している。この場合、欠陥領域Ｋ５と「０」の１文字のみが重なっているため、「０」の１文字を抽出している。

図７（ａ）〜（ｂ）の右側の画像のように文字の画像の抽出を行った場合、この画像がモニタ２１１に表示されても、ユーザは、やはりページの内容を把握することは困難である。そして本実施形態では、文字の中から欠陥領域との重なりが最も大きい１文字の画像を抽出している。これにより最も不良と判断されやすい領域を選択的に抽出することができる。また抽出される文字の画像が１つであるため、ユーザがページの内容を把握することはさらに困難となる。

前述したように文字の画像の抽出を行う処理は、結果保持部２４５が行っている。よって本実施形態では、結果保持部２４５は、照合処理部２４４により形成画像に欠陥領域があると判断された場合に、読み取り画像データから欠陥領域の周囲に存在する文字の画像を予め定められた規則に従い抽出する抽出手段として機能する。

図８は、結果保持部２４５が文字の画像を抽出する手順を説明したフローチャートである。なお図８で示したフローチャートは、図３のステップ１０７で行われる処理の一部に対応する。

まず結果保持部２４５は、形成画像に不良が発生していると判断された場合、まず欠陥領域と文字とに重なりが生じているか否かを判断する（ステップ２０１）。

そして結果保持部２４５は、欠陥領域と文字とに重なりが生じていた場合（ステップ２０１でＹｅｓ）、図７（ａ）〜（ｂ）に示したように、重なりが生じている文字の中から欠陥領域との重なりが最も大きい１文字の画像を抽出する（ステップ２０２）。

一方、欠陥領域と文字とに重なりが生じていない場合（ステップ２０１でＮｏ）、結果保持部２４５は、図６（ａ）〜（ｃ）に示したように、欠陥領域に対し上方向、下方向、左方向および右方向（上下左右方向）に隣接して存在する文字のうち少なくとも２つの文字を抽出する（ステップ２０３）。このとき図６（ａ）で示したように、上下左右方向に４つの文字を抽出してもよく、行方向および列方向に存在する２つの文字を抽出する処理を行ってもよい。さらに何れかの方向において文字が存在しなかった場合、図６（ｂ）に示したように、文字の替わりに欠陥領域を抽出する処理を行ってもよい。また図６（ｃ）に示したように欠陥領域と文字との用紙Ｐ上における距離が予め定められた値以内である２つの文字の画像を抽出することとし、欠陥領域と文字との用紙Ｐ上における距離がこの値を超える文字の画像を抽出は行わないことにしてもよい。

そして結果保持部２４５は、抽出した文字の画像についての原画像データおよび読み取り画像データを保持する処理を行う（ステップ２０４）。

なお本実施形態における制御部２４０が行なう処理は、ソフトウェアとハードウェア資源とが協働することにより実現される。即ち、制御部２４０に設けられた制御用コンピュータ内部の図示しないＣＰＵが、制御部２４０の各機能を実現するプログラムを実行し、これらの各機能を実現させる。

よって制御部２４０が行なう処理は、コンピュータに、原画像データに基づき用紙Ｐ上に形成された形成画像を読み取り、読み取り画像データを生成する機能と、原画像データを取得する機能と、生成された読み取り画像データと取得された原画像データとを比較し、形成画像に欠陥領域があるか否かを判断する機能と、形成画像に欠陥領域があると判断された場合に、読み取り画像データから欠陥領域の周囲に存在する文字の画像を予め定められた規則に従い抽出する機能と、を実現させるプログラムとして把握することもできる。

なお以上説明した例では、不良が発生していると判断され、コード画像が形成された用紙Ｐは、オフセットされた状態で用紙積載部３２０上に積載していたが、これに限られるものではない。例えば、用紙積載部３２０を２つ設け、不良が発生していると判断された用紙Ｐと不良が発生していると判断されなかった用紙Ｐとで振り分けるようにしてもよい。またオフセットせずに合紙を挟むだけでもよい。

１…画像形成システム、１００…画像形成装置、２００…検査装置、２１１…モニタ、２２１…表面画像読み取り装置、２２２…裏面画像読み取り装置、２４０…制御部、２４１…第１バッファメモリ、２４２…第２バッファメモリ、２４３…出力制御部、２４４…照合処理部、２４５…結果保持部、３００…用紙収容装置、Ｐ…用紙

Claims (6)

1. 原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する画像読み取り手段と、
   前記原画像データを取得する取得手段と、
   前記画像読み取り手段により生成された前記読み取り画像データと前記取得手段により取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する判断手段と、
   前記判断手段により前記形成画像に欠陥領域があると判断され、当該欠陥領域と当該形成画像における文字とに重なりが生じていた場合に、当該読み取り画像データから当該欠陥領域との重なりが最も大きい１文字のみを含む画像を抽出する抽出手段と、
   前記抽出手段により抽出された前記画像を表示する画像表示装置と、
   を備え、
   前記画像表示装置により表示される前記画像には欠陥領域が含まれることを特徴とする画像検査システム。
2. 原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する画像読み取り手段と、
   前記原画像データを取得する取得手段と、
   前記画像読み取り手段により生成された前記読み取り画像データと前記取得手段により取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する判断手段と、
   前記判断手段により前記形成画像に欠陥領域があると判断され、当該欠陥領域と当該形成画像における文字とに重なりが生じていない場合に、当該読み取り画像データから当該欠陥領域および当該欠陥領域を中心とする十字形状の領域で隣接する文字のみの画像を抽出する抽出手段と、
   前記抽出手段により抽出された前記画像を表示する画像表示装置と、
   を備えることを特徴とする画像検査システム。
3. 前記画像表示装置は、前記読み取り画像データのページの全体像を、当該ページにおける前記欠陥領域の箇所のみを示した状態で表示することを特徴とする請求項１または２に記載の画像検査システム。
4. 前記画像表示装置は、前記判断手段により前記形成画像に複数の欠陥領域があると判断された場合に、当該複数の欠陥領域のうち、より大きい欠陥領域について前記抽出手段が抽出した画像を前記画像表示装置で表示し、他の欠陥領域を表示しないことを特徴とする請求項１乃至３のいずれかに記載の画像検査システム。
5. コンピュータに、
   原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する機能と、
   前記原画像データを取得する機能と、
   生成された前記読み取り画像データと取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する機能と、
   前記形成画像に欠陥領域があると判断され、当該欠陥領域と前記形成画像における文字とに重なりが生じていた場合に、当該読み取り画像データから当該欠陥領域との重なりが最も大きい１文字のみを含む画像を抽出する機能と、
   を実現させ、
   抽出された前記画像には欠陥領域が含まれることを特徴とするプログラム。
6. コンピュータに、
   原画像データに基づき記録材上に形成された形成画像を読み取り、読み取り画像データを生成する機能と、
   前記原画像データを取得する機能と、
   生成された前記読み取り画像データと取得された前記原画像データとを比較し、前記形成画像に欠陥領域があるか否かを判断する機能と、
   前記形成画像に欠陥領域があると判断され、当該欠陥領域と前記形成画像における文字とに重なりが生じていない場合に、当該読み取り画像データから当該欠陥領域および当該欠陥領域を中心とする十字形状の領域で隣接する文字のみの画像を抽出する機能と、
   を実現させるプログラム。

Images