JP2007087304A - 画像処理装置、入力画像補正方法、およびコンピュータプログラム - Google Patents

Abstract

【課題】ユーザにとって従来よりも簡単に入力画像の中からノイズを取り除くことができるようにする。
【解決手段】画像処理装置１に、原稿画像ＧＡ０に含まれるノイズの画像を検出するノイズ画像検出部１０３と、ユーザによって指定された、原稿画像ＧＡ０を複数に分割した分割画像のうちの１つまたは複数を、ノイズ画像検出部１０３によって検出されたノイズの画像であるノイズ画像Ｇｚのうちのその指定された分割画像に含まれるものの位置を示す印とともに表示する、画面表示処理部１０２と、表示されている分割画像に含まれるノイズ画像Ｇｚのうちのノイズ画像検出部１０３によって誤ってノイズの画像として検出されたものをユーザに選択させるためのノイズ編集ウィンドウＷＮ２と、ノイズ画像Ｇｚのうちのノイズ編集ウィンドウＷＮ２において選択されたもの以外を原稿画像ＧＡ０から除去した画像である補正画像ＧＡ２を生成する入力画像補正部１０７と、を設ける。
【選択図】図３

Description

本発明は、スキャナなどで入力された入力画像を補正する画像処理装置および補正方法などに関する。

原稿の画像をスキャナによって入力すると、その入力画像の中にノイズの画像が含まれてしまうことがある。より綺麗な入力画像を得るためには、入力画像からノイズを除去するのが望ましい。そこで、例えば、特許文献１に記載されるような、入力画像からノイズを取り除く方法が提案されている。

係る方法によると、画像処理装置は、画像入力機器から読み込まれた入力画像を、連続する黒画素を一まとめにした外接矩形の集合として抽出する。次に各矩形について、ノイズであるか否かの判定を行う。ノイズと判定した矩形内の黒画素を白画素に変換することによって、ノイズを取り除く。ノイズを除去した入力画像を、ディスプレイに表示させる。ここで、ユーザは、表示されたその入力画像を確認しつつ、誤判定されたノイズの修正指示を行う。つまり、除去されていないノイズに対しては、ノイズである事を指示し、除去されてしまった画像の一部はノイズでない旨の指示を行う。そして、指示された内容は実行され、画像は修正される。修正作業が終了した時点でノイズ除去の処理が完了する。
特開２００４−１１０１２８号公報

しかし、特許文献１に記載されるような従来の方法では、修正の指示が難しい。なぜなら、通常、ノイズは入力画像の広範囲に点在している。よって、最初の除去処理の際に除去できなかったノイズも広範囲に点在しているので、ユーザは、これらを１つずつ指定する作業をしていると、どこまで作業が進んだのかが徐々に分かりにくくなり、精神的負担が大きくなってしまうからである。作業のミスも発生しやすい。

また、ノイズでないにも関わらず除去されてしまった部分を指定するのはもっと難しい。なぜなら、係る部分は既に除去されておりディスプレイに表示されないので、元の原稿とディスプレイに表示されている画像とを比較しながら指定しなければならないからである。

本発明は、このような問題点に鑑み、ユーザにとって従来よりも簡単に入力画像の中からノイズの部分を正確に取り除くことができるようにすることを目的とする。

本発明に係る画像処理装置は、画像入力装置によって入力された画像である入力画像に含まれるノイズの画像を検出するノイズ画像検出手段と、ユーザによって指定された、前記入力画像を複数に分割した分割画像のうちの１つまたは複数を、前記ノイズ画像検出手段によって検出されたノイズの画像である検出ノイズ画像のうちの当該指定された分割画像に含まれるものの位置を示す印とともに表示する、分割画像表示手段と、表示されている前記分割画像に含まれる前記検出ノイズ画像のうちの前記ノイズ画像検出手段によって誤ってノイズの画像として検出されたものをユーザに選択させるための誤検出ノイズ選択手段と、前記検出ノイズ画像のうちの前記誤検出ノイズ選択手段によって選択されたもの以外を前記入力画像から除去した画像であるノイズ補正画像を生成するノイズ補正画像生成手段と、を有することを特徴とする。

好ましくは、前記入力画像の前記各分割画像に対応するセルが当該各分割画像同士の相対的な位置関係に従って配置されてなるセル群を、当該各セルのうちの、前記分割画像表示手段によって現在表示されている前記分割画像に対応するセルが、第一の表示形態になるように、ユーザによってノイズの検出の誤りの有無を確認された前記分割画像に対応するセルが、第二の表示形態になるように、および前記分割画像表示手段によって現在表示されておらずかつ未だユーザによってノイズの検出の誤りの有無を確認されていない前記分割画像に対応するセルが、第三の表示形態になるように、表示する、分割画像セル表示手段、を有する。

または、画像入力装置によって入力された画像である入力画像に含まれるノイズの画像を検出するノイズ画像検出手段と、前記入力画像に含まれる、ノイズであると疑わしい部分の画像である疑ノイズ画像を検出する、疑ノイズ画像検出手段と、前記入力画像を、当該入力画像に含まれる、前記ノイズ画像検出手段によって検出されたノイズの画像である検出ノイズ画像の位置に、第一の印を施しかつ当該入力画像に含まれる前記疑ノイズ画像の位置に第二の印を施して、表示する、入力画像表示手段と、表示されている前記入力画像に含まれる前記検出ノイズ画像のうちの前記ノイズ画像検出手段によって誤ってノイズの画像として検出されたものおよび前記疑ノイズ画像のうちのノイズの画像であるものをユーザに選択させるための選択手段と、前記検出ノイズ画像のうちの前記選択手段によって選択されたもの以外と前記疑ノイズ画像のうちの前記選択手段によって選択されたものとを前記入力画像から除去した画像であるノイズ補正画像を生成するノイズ補正画像生成手段と、を有することを特徴とする。

本発明において、検出ノイズ画像の位置の印および疑ノイズ画像の位置の印は、例えば、その検出ノイズ画像および疑ノイズ画像に、元の画像とは異なる色を付けることによって施される。または、その検出ノイズ画像および疑ノイズ画像の周囲を、点線または一点鎖線などで囲うことによって印を施してもよい。または、その検出ノイズ画像および疑ノイズ画像の上にアイコンを印として表示するようにしてもよい。

本発明によると、ユーザは、従来よりも簡単に入力画像の中からノイズの部分を正確に取り除くことができる。

図１は画像処理装置１が設けられたシステムの全体的な構成の例を示す図、図２は画像処理装置１のハードウェア構成の例を示す図、図３は画像処理装置１の機能的構成の例を示す図である。

本発明に係る画像処理装置１とＭＦＰ（Multi Function Peripherals）２とは、図１に示すように、通信回線３を介して互いに接続されている。通信回線３として、インターネット、ＬＡＮ、公衆回線、または専用線などが用いられる。ＵＳＢまたはＲＳ−２３２Ｃなどのインタフェースを介して接続してもよい。

画像処理装置１は、図２に示すように、画像処理装置本体１０、ディスプレイ１１、および入力装置１２などによって構成される。入力装置１２は、マウスまたはキーボードなどの、ユーザが画像処理装置本体１０に対してデータまたは指令などを入力するための装置である。

画像処理装置本体１０は、ＣＰＵ１０ａ、ＲＡＭ１０ｂ、ＲＯＭ１０ｃ、ハードディスク１０ｄ、通信インタフェース１０ｅ、ビデオインタフェース１０ｆ、および入力インタフェース１０ｇなどからなる。

通信インタフェース１０ｅは、ＮＩＣ（Network Interface Card）またはモデムなどであって、通信回線３を介してＭＦＰ２と通信を行うために用いられる。ビデオインタフェース１０ｆおよび入力インタフェース１０ｇは、それぞれ、ディスプレイ１１および入力装置１２と接続するために用いられる。

ハードディスク１０ｄには、図３に示すような原稿画像受信部１０１、画面表示処理部１０２、ノイズ画像検出部１０３、疑ノイズ画像検出部１０４、ノイズ除去画像生成部１０５、画像分割部１０６、入力画像補正部１０７、画像等記憶部１Ｍ１、および修正ノイズ位置等記憶部１Ｍ２などの機能を実現するためのプログラムおよびデータが記憶されている。これらのプログラムおよびデータは、必要に応じてＲＡＭ１０ｂに呼び出され、ＣＰＵ１０ａによってプログラムが実行される。

画像処理装置１として、例えばパーソナルコンピュータまたはワークステーションなどが用いられる。

ＭＦＰ２は、コピー、ネットワークプリンティング、スキャナ、ファックス、ドキュメントサーバ、およびファイル転送などの機能を備えた画像形成装置である。「複合機」などと呼ばれることもある。

以下、図３に示す画像処理装置１の各部およびＭＦＰ２の機能および処理内容などについて詳細に説明する。

図４は原稿画像ウィンドウＷＮ１の表示例を示す図、図５はノイズ編集ウィンドウＷＮ２および領域確認ウィンドウＷＮ３の表示例を示す図、図６は補正画像生成処理の流れの例を説明するフローチャートである。

図３において、ＭＦＰ２は、原稿台にセットされた原稿の用紙に描かれている写真、文字、絵、図表などの画像をスキャナによって光学的に読み取り、画像ファイルＦＧを生成する。そして、その画像ファイルＦＧをＦＴＰ（File Transfer Protocol）などによって画像処理装置１に転送する。以下、ＭＦＰ２によって読み取られた原稿の画像を「原稿画像ＧＡ０」と記載する。なお、本実施形態では、原稿画像ＧＡ０が白黒の二値画像である場合を例に説明する。

画像処理装置１の原稿画像受信部１０１は、ＭＦＰ２から原稿画像ＧＡ０の画像ファイルＦＧを受信する。受信された原稿画像ＧＡ０の画像ファイルＦＧは、画像等記憶部１Ｍ１に記憶される。画像等記憶部１Ｍ１には、そのほか、後に説明するノイズ画像Ｇｚ、疑ノイズ画像Ｇｄ、分割画像ＧＡｂ、および補正画像ＧＡ２などの画像の画像データが記憶される。

画面表示処理部１０２は、ＭＦＰ２からの画像ファイルＦＧが受信された後、図４に示すような原稿画像ウィンドウＷＮ１をデスクトップＤＰに表示させる。この原稿画像ウィンドウＷＮ１は、画像表示領域ＲＹ１、拡大率指定メニューＫＭ１、および分割実行ボタンＢＮ１などによって構成される。画像表示領域ＲＹ１には、受信された画像ファイルＦＧに基づいて原稿画像ＧＡ０が表示される。

原稿画像ＧＡ０のサイズまたは形状と画像表示領域ＲＹ１のサイズまたは形状との関係で、原稿画像ＧＡ０を画像表示領域ＲＹ１に表示しきれないときは、原稿画像ＧＡ０の一部分だけを画像表示領域ＲＹ１に表示させる。この場合は、ユーザは、画像表示領域ＲＹ１の右方のスクロールボタンを操作して原稿画像ＧＡ０をスクロールさせ、表示されていない部分を表示させることができる。

なお、画面表示処理部１０２は、後に説明するノイズ編集ウィンドウＷＮ２および領域確認ウィンドウＷＮ３（図５参照）などのウィンドウをデスクトップＤＰに表示させる処理も行う。

ところで、原稿画像ＧＡ０には、ＭＦＰ２がその元の原稿を読み取った際に発生したノイズの画像が含まれていることがある。本実施形態に係る画像処理装置１によると、ユーザは、この原稿画像ウィンドウＷＮ１の画像表示領域ＲＹ１の原稿画像ＧＡ０を拡大表示させてノイズを確認しながら、ノイズを正確に除去するように画像処理装置１に対して指示を与えることができる。

ノイズ画像検出部１０３は、原稿画像ＧＡ０に発生しているノイズの画像を検出する。以下、ノイズ画像検出部１０３によって検出されたノイズの画像を「ノイズ画像Ｇｚ」と記載する。ノイズ画像Ｇｚは、公知の方法によって検出すればよいが、本実施形態では、例えば次のような方法で検出する。

所定のサイズαとして、「αｘ×αｙ」を予め設定しておく。原稿画像ＧＡ０の中から黒色を示す値を有する１つの画素または連続する複数の画素からなる塊を検索する。つまり、白色を示す値を有する画素によって周囲を囲まれた画素の塊を検索する。そして、検索された塊のサイズがサイズα未満である場合すなわちその塊の横方向の長さがαｘ未満でありかつ縦方向の長さがαｙ未満である場合に、その塊の部分の画像をノイズ画像Ｇｚであると判別する。

疑ノイズ画像検出部１０４は、原稿画像ＧＡ０の中からノイズであると疑われる画像を検出する。以下、疑ノイズ画像検出部１０４によって検出された画像を「疑ノイズ画像Ｇｄ」と記載する。疑ノイズ画像Ｇｄは、次のような方法によって検知すればよい。

所定のサイズβとして、「βｘ×βｙ」を予め設定しておく。原稿画像ＧＡ０の中から黒色を示す値を有する連続する複数の画素の塊を検索する。そして、検索された塊のサイズがサイズα以上でありかつサイズβ未満である場合すなわちその塊の横方向の長さがαｘ以上かつβｘ未満でありかつ縦方向の長さがαｙ以上かつβｙ未満である場合に、その塊の画像を疑ノイズ画像Ｇｄであると判別する。ただし、「βｘ≧αｘ」かつ「βｙ≧αｙ」かつ「（βｘ×βｙ）＞（αｘ×αｙ）」である。

ノイズ画像検出部１０３によって検出されたノイズ画像Ｇｚの画像データは、原稿画像ＧＡ０におけるそのノイズ画像Ｇｚの各画素の位置を示す位置情報Ｐｚとともに、画像等記憶部１Ｍ１に記憶される。同様に、疑ノイズ画像検出部１０４によって検出された疑ノイズ画像Ｇｄの画像データは、原稿画像ＧＡ０におけるその疑ノイズ画像Ｇｄの各画素の位置を示す位置情報Ｐｄとともに、画像等記憶部１Ｍ１に記憶される。

ノイズ除去画像生成部１０５は、ノイズ画像検出部１０３によって検出されたノイズ画像Ｇｚおよび疑ノイズ画像検出部１０４によって検出された疑ノイズ画像Ｇｄを原稿画像ＧＡ０から除去することによってノイズ除去画像ＧＡ１を生成する。ノイズ除去画像ＧＡ１は、公知の方法によって生成すればよい。例えば、原稿画像ＧＡ０の中の、検出されたノイズ画像Ｇｚの各画素の値および疑ノイズ画像Ｇｄの各画素の値を、白を示す値に変更することによって、ノイズ除去画像ＧＡ１を生成することができる。生成されたノイズ除去画像ＧＡ１は、画像等記憶部１Ｍ１に記憶される。

画像分割部１０６は、ノイズ除去画像ＧＡ１を複数の矩形の領域の画像に分割する処理を行う。係る処理は、ユーザが図４の原稿画像ウィンドウＷＮ１などで指定した拡大率に基づいて行われる。

すなわち、ユーザが、デスクトップＤＰに表示されている原稿画像ウィンドウＷＮ１において、拡大率指定メニューＫＭ１を操作して原稿画像ＧＡ０の表示の拡大率（以下、「拡大率Ｋｒ」と記載する。）を指定し分割実行ボタンＢＮ１をクリックすると、画像分割部１０６は、その原稿画像ＧＡ０のノイズ除去画像ＧＡ１を分割する処理を開始する。

まず、原稿画像ＧＡ０を拡大率Ｋｒに応じて拡大したときのサイズを算出する。つまり、原稿画像ＧＡ０の横の長さおよび縦の長さをそれぞれＬｘおよびＬｙとすると、「Ｌｘ×Ｋｒ」および「Ｌｙ×Ｋｒ」を算出する。例えば、「Ｋｒ＝５００％」である場合は、ＬｘおよびＬｙをそれぞれ５倍する。以下、算出された拡大時の横の長さおよび縦の長さをそれぞれＬｘ’およびＬｙ’と記載する。

「Ｌｘ’／ＲＹｘ」および「Ｌｙ’／ＲＹｙ」を算出し、割り切れない場合は算出した商の小数点第一位を繰り上げる。ただし、ＲＹｘおよびＲＹｙは、それぞれ、後に説明する画像表示領域ＲＹ２（図５参照）の横の長さおよび縦の長さである。以下、このようにして求められた値を、それぞれ、ＤＶｘ、ＤＶｙと記載する。

そして、ノイズ除去画像ＧＡ１を、ＤＶｘ×ＤＶｙ個の矩形の領域の画像に等分する。これにより、ノイズ除去画像ＧＡ１の分割の処理が完了する。以下、分割された各画像を「分割画像ＧＡｂ」と記載する。

画像分割部１０６によってノイズ除去画像ＧＡ１が複数の分割画像ＧＡｂに分割された後、画面表示処理部１０２は、原稿画像ウィンドウＷＮ１をクローズする。そして、図５に示すように、ノイズ編集ウィンドウＷＮ２および領域確認ウィンドウＷＮ３をデスクトップＤＰに表示させる。

ノイズ編集ウィンドウＷＮ２は、画像表示領域ＲＹ２、拡大率指定メニューＫＭ２、分割実行ボタンＢＮ２、チェックボックスＣＢ２、上移動ボタンＭＢ２１、下移動ボタンＭＢ２２、右移動ボタンＭＢ２３、および左移動ボタンＭＢ２４などによって構成されている。

画面表示処理部１０２は、画像表示領域ＲＹ２に、ノイズ除去画像ＧＡ１の分割画像ＧＡｂのうちのいずれか１つを、ユーザが指定した拡大率Ｋｒで拡大して表示させる。さらに、その分割画像ＧＡｂの元の原稿画像ＧＡ０に含まれていたノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄのうちの、その分割画像ＧＡｂの領域内に位置していたものを、その分割画像ＧＡｂの上にレイヤのように重ね合わせて表示させる。

ノイズ画像Ｇｚを分割画像ＧＡｂに重ね合わせる位置は、そのノイズ画像Ｇｚの位置情報Ｐｚに基づいて、そのノイズ画像Ｇｚが元にあった位置になるようにする。つまり、ノイズ画像Ｇｚは、それが分割画像ＧＡｂから削除されていなければその分割画像ＧＡｂに表れていた位置に、重ね合わされる。疑ノイズ画像Ｇｄについても同様である。

また、ノイズ画像Ｇｚ、疑ノイズ画像Ｇｄ、および分割画像ＧＡｂの表示形態をそれぞれ異なるようにして、ユーザが簡単に区別することができるようにする。例えば、分割画像ＧＡｂのコンテンツ部分を黒色で表示し、ノイズ画像Ｇｚのコンテンツ部分を赤色で表示し、疑ノイズ画像Ｇｄのコンテンツ部分を黄色で表示する。または、ノイズ画像Ｇｚの周囲を点線で囲み、疑ノイズ画像Ｇｄの周囲を一点鎖線で囲んでもよい。

このような処理によって、画像表示領域ＲＹ２には、原稿画像ＧＡ０の分割画像が、それに含まれるノイズ画像Ｇｚの部分、疑ノイズ画像Ｇｄの部分、およびこれら以外の画像の部分（分割画像ＧＡｂ）をそれぞれ異なる表示形態によって、表示される。

なお、ノイズ編集ウィンドウＷＮ２を表示させた時点では、デフォルトとして、ノイズ除去画像ＧＡ１の分割画像ＧＡｂのうちの一番左上に位置する分割画像ＧＡｂを画像表示領域ＲＹ２に表示させる。そして、右移動ボタンＭＢ２３がクリックされたら、現在表示している分割画像ＧＡｂの表示を止め、その右隣の分割画像ＧＡｂを表示させる。このときも、新たに表示させたその分割画像ＧＡｂの領域の範囲内にあったノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄを、重ね合わせて表示させる。同様に、下移動ボタンＭＢ２２がクリックされたらその下隣の分割画像ＧＡｂ、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄを表示させ、左移動ボタンＭＢ２４がクリックされたらその左隣の分割画像ＧＡｂ、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄを表示させ、上移動ボタンＭＢ２１がクリックされたらその上隣の分割画像ＧＡｂ、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄを表示させる。

領域確認ウィンドウＷＮ３は、表示位置確認テーブルＴＬ３および補正実行ボタンＢＮ３などによって構成される。表示位置確認テーブルＴＬ３は、ＤＶｘ×ＤＶｙ個のセルすなわち分割された分割画像ＧＡｂの個数分のセルを有する。各セルは、相対的な位置関係が同じである分割画像ＧＡｂと対応している。つまり、左からＸ番目でありかつ上からＹ番目であるセルは、分割された分割画像ＧＡｂのうちの左からＸ番目でありかつ上からＹ番目である分割画像ＧＡｂに対応している。

ノイズ編集ウィンドウＷＮ２の画像表示領域ＲＹ２に現在表示されている分割画像ＧＡｂに対応するセルは、他のセルと異なる表示形態（例えば黒色など）で表示される。したがって、画像表示領域ＲＹ２に表示される分割画像ＧＡｂが変わるごとに、黒色のカーソルが移動するかのように、セルの表示形態が変化する。

ノイズ編集ウィンドウＷＮ２において、ユーザは、画像を今よりも拡大して見たい場合は、前に指定した拡大率Ｋｒよりも大きな拡大率Ｋｒを、拡大率指定メニューＫＭ２を操作して指定する。または、縮小して見たい場合は、前に指定した拡大率Ｋｒよりも小さな拡大率Ｋｒを指定する。そして、分割実行ボタンＢＮ２をクリックする。

すると、画像分割部１０６は、新たに指定された拡大率Ｋｒに基づいてノイズ除去画像ＧＡ１の分割の処理をやり直す。画面表示処理部１０２は、再分割された分割画像ＧＡｂを画像表示領域ＲＹ２に表示させる。

また、ユーザは、ノイズ編集ウィンドウＷＮ２の画像表示領域ＲＹ２において、本来ノイズでないにも関わらずノイズ画像検出部１０３によって検出されたノイズ画像Ｇｚを確認し指定することができる。また、疑ノイズ画像検出部１０４によって検出された疑ノイズ画像Ｇｄのうちノイズであるものを確認し指定することができる。これらの指定は、例えば、そのノイズ画像Ｇｚまたは疑ノイズ画像Ｇｄの画像の上にマウスポインタを合わせ、マウスのボタンをダブルクリックするなどして選択することによって行う。

すると、図３の修正ノイズ位置等記憶部１Ｍ２は、指定されたノイズ画像Ｇｚの位置情報Ｐｚに示される位置（つまり、実際はノイズでないノイズ画像Ｇｚの、元のノイズ除去画像ＧＡ１における位置）を、非ノイズ位置情報Ｎｚとして記憶する。また、指定された疑ノイズ画像Ｇｄの位置情報Ｐｚに示される位置（つまり、実際にノイズである疑ノイズ画像Ｇｄの、元のノイズ除去画像ＧＡ１における位置）を、ノイズ位置情報Ｎｄとして記憶する。

指定されたノイズ画像Ｇｚの表示形態は、指定されていないノイズ画像Ｇｚの表示形態と異なるようにし、ユーザが簡単に区別することができるようにする。例えば、指定されたノイズ画像Ｇｚの色を、指定されていないノイズ画像Ｇｚの色よりも濃くして表示する。疑ノイズ画像Ｇｄについても同様である。

ユーザは、ノイズ画像Ｇｚまたは疑ノイズ画像Ｇｄを誤って指定した場合は、そのノイズ画像Ｇｚまたは疑ノイズ画像Ｇｄをもう一度ダブルクリックするなどして選択する。すると、そのノイズ画像Ｇｚの非ノイズ位置情報Ｎｚまたは疑ノイズ画像Ｇｄのノイズ位置情報Ｎｄが修正ノイズ位置等記憶部１Ｍ２から削除されるとともに、そのノイズ画像Ｇｚまたは疑ノイズ画像Ｇｄの表示形態が元に戻る。これにより、指定が解除される。

画像表示領域ＲＹ２に現在表示されているノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄについて必要な指定が終わったら、ユーザは、上移動ボタンＭＢ２１、下移動ボタンＭＢ２２、右移動ボタンＭＢ２３、および左移動ボタンＭＢ２４のうちのいずれかをクリックする。

すると、画面表示処理部１０２は、画像表示領域ＲＹ２の表示内容を一旦クリアした後、その移動ボタンに対応する隣の分割画像ＧＡｂを画像表示領域ＲＹ２に表示させ、さらに、その分割画像ＧＡｂの範囲内にあったノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄをその分割画像ＧＡｂにレイヤのように重ね合わせて表示する。これにより、画像表示領域ＲＹ２には、隣り合う分割画像ＧＡｂがコマ送りのように順番に表示される。

また、このとき、領域確認ウィンドウＷＮ３の表示位置確認テーブルＴＬ３の中の、直前に画像表示領域ＲＹ２に表示されていた分割画像ＧＡｂに対応するセルを、確認済であることがユーザに分かるように、灰色などの色で強調表示する。さらに、新たに表示された分割画像ＧＡｂに対応するセルを黒色に変更する。ここで、ユーザは、新たに重ね合わせて表示されたノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄについても、誤って検出されたものおよびノイズであるものを指定する。

画面表示処理部１０２は、既に確認済である分割画像ＧＡｂが画像表示領域ＲＹ２にもう一度表示するときは、チェックボックスＣＢ２を「オン」の状態にしておき、画像表示領域ＲＹ２の全体が薄い灰色などでマスクされるようにする。ただし、マスクの下の分割画像ＧＡｂ、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄを、透けて見えるようにする。このような表示形態は、その分割画像ＧＡｂの範囲内にあったノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄについての指定が禁止されている（つまり、編集不可である）ことを意味する。そこで、ユーザは、これらのノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄについて指定をやり直したい場合は、チェックボックスＣＢ２をクリックして「オフ」にする。これにより、マスクの表示および指定の禁止が解除され、再指定が可能となる。

入力画像補正部１０７は、領域確認ウィンドウＷＮ３の中の補正実行ボタンＢＮ３がクリックされると、例えば図６（ａ）に示すような手順で原稿画像ＧＡ０を補正し、補正画像ＧＡ２を生成する処理を行う。

補正対象である原稿画像ＧＡ０のノイズ除去画像ＧＡ１と、修正ノイズ位置等記憶部１Ｍ２に記憶されている非ノイズ位置情報Ｎｚに示される位置にあるノイズ画像Ｇｚ（つまり、ノイズ画像検出部１０３によって誤って検知されたが本来はノイズでないノイズ画像Ｇｚ）の画像データおよびその位置情報Ｐｚと、いずれのノイズ位置情報Ｎｄにも示されない位置にある疑ノイズ画像Ｇｄ（つまり、ノイズの疑いがあるものとして疑ノイズ画像検出部１０４によって検知された疑ノイズ画像Ｇｄのうちの、実際はノイズでない疑ノイズ画像Ｇｄ）の画像データおよびその位置情報Ｐｄとを、画像等記憶部１Ｍ１から呼び出す（図６（ａ）の＃２０１）。

呼び出したノイズ除去画像ＧＡ１に、同じく呼び出したノイズ画像Ｇｚを重ね合わせる（＃２０２）。ただし、そのノイズ画像Ｇｚを重ね合わせる位置は、そのノイズ画像Ｇｚの位置情報Ｐｚに示される位置とする。

さらに、そのノイズ除去画像ＧＡ１に、呼び出した疑ノイズ画像Ｇｄを重ね合わせる（＃２０３）。この場合もステップ＃２０２と同様に、その疑ノイズ画像Ｇｄを重ね合わせる位置は、その疑ノイズ画像Ｇｄの位置情報Ｐｄに示される位置とする。

このように、ノイズでありまたはその疑いがあると機械的に判別された部分の画像が除去されているノイズ除去画像ＧＡ１の上に、ユーザが指定した実際はノイズでない画像を重ね合わせることによって、原稿画像ＧＡ０からノイズがより正確に除去された補正画像ＧＡ２を生成することができる。

または、図６（ｂ）に示すような手順で、ノイズ除去画像生成部１０５によって前に実行したノイズ除去画像ＧＡ１の生成処理を取り消し（Ｕｎｄｏし）、ユーザがノイズ編集ウィンドウＷＮ２で指定した内容などに基づいてノイズ除去画像ＧＡ１の生成をやり直すことによって補正画像ＧＡ２を生成してもよい。

まず、画像等記憶部１Ｍ１および修正ノイズ位置等記憶部１Ｍ２に記憶されている位置に関する情報に基づいて、原稿画像ＧＡ０に発生しているノイズの位置を確認する。具体的には、画像等記憶部１Ｍ１に記憶されている位置情報Ｐｚの中から、修正ノイズ位置等記憶部１Ｍ２に記憶されている非ノイズ位置情報Ｎｚが示す位置のうちのいずれをも示さない位置情報Ｐｚを呼び出す（図６（ｂ）の＃２１１）。つまり、ノイズ画像検出部１０３によって誤りなく検知されたノイズ画像Ｇｚの位置情報Ｐｚを呼び出す。さらに、修正ノイズ位置等記憶部１Ｍ２に記憶されているノイズ位置情報Ｎｄを呼び出す（＃２１２）。つまり、実際にノイズである疑ノイズ画像Ｇｄのノイズ位置情報Ｎｄを呼び出す。

そして、原稿画像ＧＡ０を構成する画素のうちの、ステップ＃２１１、＃２１２で呼び出した位置情報Ｐｚおよびノイズ位置情報Ｎｄにそれぞれ示される位置の画素を、白色の値を示すように変更することによって、ノイズ除去画像ＧＡ１を生成し直す（＃２１３）。このようにして生成されたノイズ除去画像ＧＡ１が補正画像ＧＡ２となる。

次に、画像処理装置１が原稿画像ＧＡ０からノイズを除去して補正画像ＧＡ２を生成する際の全体的な処理の流れを、フローチャートを参照して説明する。図７は画像処理装置１の全体的な処理の流れの例を説明するフローチャートである。

図７において、画像処理装置１は、ＭＦＰ２から原稿画像ＧＡ０のデータを取得すると（＃１）、その原稿画像ＧＡ０の中からノイズ画像Ｇｚおよびその位置情報Ｐｚを検出するとともに（＃２）、疑ノイズ画像Ｇｄおよびその位置情報Ｐｄを検出する（＃３）。そして、検出したノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄを原稿画像ＧＡ０から除去することによってノイズ除去画像ＧＡ１を生成し（＃４）、デスクトップＤＰに原稿画像ウィンドウＷＮ１（図４参照）を表示させる（＃５）。この原稿画像ウィンドウＷＮ１の画像表示領域ＲＹ１には、ステップ＃４で生成したノイズ除去画像ＧＡ１が表示されている。

ここで、ユーザによって拡大率Ｋｒの指定がなされると（＃６）、画像処理装置１は、拡大率Ｋｒに応じてノイズ除去画像ＧＡ１を複数の分割画像ＧＡｂに分割し（＃７）、原稿画像ウィンドウＷＮ１をクローズした後、ノイズ編集ウィンドウＷＮ２および領域確認ウィンドウＷＮ３（図５参照）をデスクトップＤＰに表示させる（＃８）。

このノイズ編集ウィンドウＷＮ２の画像表示領域ＲＹ２には、ステップ＃７で分割した分割画像ＧＡｂのうちのいずれか１つを拡大率Ｋｒに応じて拡大表示する。さらに、分割画像ＧＡｂには、ステップ＃２で検出されたノイズ画像Ｇｚおよびステップ＃３で検出された疑ノイズ画像Ｇｄのうちの、その分割画像ＧＡｂの領域内に位置していたものを、その分割画像ＧＡｂの上にレイヤのように重ね合わせて表示する。これらのノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄも、拡大率Ｋｒに応じて拡大表示する。

ここで、ユーザは、画像表示領域ＲＹ２に表示されているノイズ画像Ｇｚのうちの、ノイズであると誤って検出されているノイズ画像Ｇｚを、マウスでダブルクリックするなどして指定する。さらに、画像表示領域ＲＹ２に表示されている疑ノイズ画像Ｇｄのうちの、ノイズである疑ノイズ画像Ｇｄを指定する。

画像処理装置１は、これらの指定を受け付けると（＃９）、指定されたノイズ画像Ｇｚの非ノイズ位置情報Ｎｚおよび疑ノイズ画像Ｇｄのノイズ位置情報Ｎｄを取得する（＃１０）。

ユーザは、ノイズ編集ウィンドウＷＮ２において、上移動ボタンＭＢ２１ないし左移動ボタンＭＢ２４を操作することによって、画像表示領域ＲＹ２に表示する分割画像ＧＡｂを切り換えることができる。切り換わった分割画像ＧＡｂにおいても、ノイズであると誤って検出されているノイズ画像Ｇｚおよびノイズである疑ノイズ画像Ｇｄを指定する。

ユーザは、ノイズ除去画像ＧＡ１のすべての分割画像ＧＡｂについてノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄの確認および必要な指定が完了したら（＃１１でＹｅｓ）、ステップ＃２で取得した位置情報Ｐｚおよび位置情報Ｐｄおよびステップ＃１０で取得した非ノイズ位置情報Ｎｚおよびノイズ位置情報Ｎｄなどに基づいて、ステップ＃４で生成したノイズ除去画像ＧＡ１よりも正確に、原稿画像ＧＡ０からノイズを除去した画像である補正画像ＧＡ２を生成する（＃１２）。補正画像ＧＡ２を生成する手順は、前に、図６（ａ）（ｂ）で説明した通りである。

補正画像ＧＡ２を生成した後、ノイズ編集ウィンドウＷＮ２および領域確認ウィンドウＷＮ３をクローズし、新たにウィンドウをオープンしこれにその補正画像ＧＡ２を表示してもよい。または、補正画像ＧＡ２の画像データを所定のフォーマットに変換し、画像ファイルとしてハードディスク１０ｄに保存しておいてもよいし画像処理装置１に接続されている他の装置に出力してもよい。

本実施形態によると、ノイズの検出結果（ノイズ画像Ｇｚ）を、ノイズが除去された原稿画像（ノイズ除去画像ＧＡ１）の上に重ね合わせて表示する。さらに、ノイズであることが疑わしい部分の画像（疑ノイズ画像Ｇｄ）も、ノイズ除去画像ＧＡ１の上に重ね合わせて表示する。しかも、ノイズ除去画像ＧＡ１、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄの表示色として、それぞれ、黒色、赤色、および黄色を用いている。これにより、ユーザは、原稿画像に含まれているノイズの部分を従来よりも簡単にかつ正確に取り除くことができる。

しかも、ノイズ除去画像ＧＡ１、ノイズ画像Ｇｚ、および疑ノイズ画像Ｇｄの表示は、ノイズ除去画像ＧＡ１の分割画像ＧＡｂの単位で行う。また、領域確認ウィンドウＷＮ３の表示位置確認テーブルＴＬ３には、現在表示されている範囲、確認済の範囲、および未確認の範囲がそれぞれ異なる色のセルで示される。よって、ユーザは、ノイズの検出の誤りなどを、どの範囲まで確認したのかを容易に把握することができ、従来よりも精神的負担が軽減される。

図８は比較ウィンドウＷＮ４の例を示す図である。

本実施形態では、原稿画像ＧＡ０からノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄを検出し、ノイズ除去画像ＧＡ１を生成した後に、分割画像ＧＡｂへの分割を行ったが、他の順番で行ってもよい。例えば、先に原稿画像ＧＡ０を分割画像に分割しておき、その後で、各分割画像について、ノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄを検出し、ノイズ除去画像を生成してもよい。この場合は、分割画像ごとに、ユーザが指定した、実際にノイズが発生している部分のノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄをノイズ除去画像に重ね合わせる処理を行う。そして、重ね合わせが行われた各ノイズ除去画像を元の位置に配置して統合することによって、原稿画像ＧＡ０の補正画像ＧＡ２を生成すればよい。

ノイズ画像検出部１０３で検出されたノイズ画像Ｇｚが誤りであることが多い場合は、ノイズの判別の基準となる閾値であるサイズαを小さい値に変更し、変更後のサイズαでノイズ画像Ｇｚの検出処理をやり直すようにしてもよい。変更する値は、ユーザが指定してもよいし画像処理装置１が自動的に決定してもよい。または、ノイズ画像Ｇｚの検出漏れが多い場合は、サイズαを大きい値に変更し、ノイズ画像Ｇｚの検出処理をやり直すようにしてもよい。同様に、疑ノイズ画像Ｇｄを検出する際の閾値の１つであるサイズβについても、検出の精度に応じて変更し、疑ノイズ画像Ｇｄの検出処理をやり直すようにしてもよい。

また、サイズαまたはサイズβの変更前のノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄの検出結果と変更後のノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄの検出結果とを同時に表示することによって、変更前の閾値（サイズαおよびサイズβ）を採用すべきか変更後の閾値を採用すべきかを、ユーザが選択できるようにしてもよい。例えば、図８の比較ウィンドウＷＮ４のように、変更前の閾値に基づく検出結果と変更後の閾値に基づく検出結果とを並べて同時に表示してもよい。そして、その中からユーザが選択した方を採用するようにすればよい。または、１つの領域に、変更前の閾値に基づく検出結果と変更後の閾値に基づく検出結果とを重ねて表示するようにしてもよい。この場合は、ノイズ画像Ｇｚの表示形態を、変更前のみに検出されたもの、変更後のみに検出されたもの、および変更前にも変更後にも検出されたものによって、異なるようにするのが望ましい。例えば、変更前のみに検出されたノイズ画像Ｇｚを濃い赤色で表示し、変更後のみに検出されたノイズ画像Ｇｚを薄い赤色で表示し、変更前にも変更後にも検出されたノイズ画像Ｇｚをその中間の濃さの赤色で表示するようにする。疑ノイズ画像Ｇｄについても同様である。

本実施形態では、ＭＦＰ２で入力された原稿画像ＧＡ０を画像処理装置１に送信し、画像処理装置１でノイズの除去の処理を行ったが、ＭＦＰ２が単体ですべての処理を行うようにしてもよい。この場合は、図３に示す各部の機能をＭＦＰ２に設けるようにすればよい。

本実施形態では、ノイズ編集ウィンドウＷＮ２において、分割画像ＧＡｂを１つだけ表示したが、画像表示領域ＲＹ２を複数設けておき、分割画像ＧＡｂを複数同時に表示できるようにしてもよい。

本実施形態では、原稿画像ＧＡ０が白黒の二値画像である場合を例に説明したが、原稿画像ＧＡ０がカラー画像である場合にも本発明を適用することができる。この場合は、原稿画像ＧＡ０を例えばＣ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、およびＫ（ブラック）の各版に色分解し、各版の画像についてノイズ画像Ｇｚおよび疑ノイズ画像Ｇｄの検出処理などを行えばよい。また、本発明は、線強調処理の際に画像処理装置が自動的に検出した線の誤りを修正するためにも適用することができる。

その他、画像処理装置１の全体または各部の構成、処理内容、処理順序などは、本発明の趣旨に沿って適宜変更することができる。

本発明は、特に、色または模様の付いている用紙に印刷されている原稿の入力画像からノイズを除去するために好適に用いられる。

画像処理装置が設けられたシステムの全体的な構成の例を示す図である。 画像処理装置のハードウェア構成の例を示す図である。 画像処理装置の機能的構成の例を示す図である。 原稿画像ウィンドウの表示例を示す図である。 ノイズ編集ウィンドウおよび領域確認ウィンドウの表示例を示す図である。 補正画像生成処理の流れの例を説明するフローチャートである。 画像処理装置の全体的な処理の流れの例を説明するフローチャートである。 比較ウィンドウの例を示す図である。

符号の説明

１ 画像処理装置
２ ＭＦＰ（画像入力装置）
１２ 入力装置（誤検出ノイズ選択手段、選択手段）
１０２ 画面表示処理部（分割画像表示手段、分割画像セル表示手段、入力画像表示手段）
１０３ ノイズ画像検出部（ノイズ画像検出手段）
１０４ 疑ノイズ画像検出部（疑ノイズ画像検出手段）
１０７ 入力画像補正部（ノイズ補正画像生成手段）
ＧＡ０ 原稿画像（入力画像）
ＧＡ２ 補正画像（ノイズ補正画像）
Ｇｄ 疑ノイズ画像
Ｇｚ ノイズ画像（検出ノイズ画像）
ＲＹ２ 画像表示領域（分割画像表示手段、誤検出ノイズ選択手段、選択手段）
ＴＬ３ 表示位置確認テーブル（セル群）
ＷＮ３ 領域確認ウィンドウ（分割画像セル表示手段）
α サイズ（第一のサイズ）
β サイズ（第二のサイズ）

Claims (9)

1. 画像入力装置によって入力された画像である入力画像に含まれるノイズの画像を検出するノイズ画像検出手段と、
   ユーザによって指定された、前記入力画像を複数に分割した分割画像のうちの１つまたは複数を、前記ノイズ画像検出手段によって検出されたノイズの画像である検出ノイズ画像のうちの当該指定された分割画像に含まれるものの位置を示す印とともに表示する、分割画像表示手段と、
   表示されている前記分割画像に含まれる前記検出ノイズ画像のうちの前記ノイズ画像検出手段によって誤ってノイズの画像として検出されたものをユーザに選択させるための誤検出ノイズ選択手段と、
   前記検出ノイズ画像のうちの前記誤検出ノイズ選択手段によって選択されたもの以外を前記入力画像から除去した画像であるノイズ補正画像を生成するノイズ補正画像生成手段と、
   を有することを特徴とする画像処理装置。
2. 前記入力画像の前記各分割画像に対応するセルが当該各分割画像同士の相対的な位置関係に従って配置されてなるセル群を、当該各セルのうちの、前記分割画像表示手段によって現在表示されている前記分割画像に対応するセルが、第一の表示形態になるように、ユーザによってノイズの検出の誤りの有無を確認された前記分割画像に対応するセルが、第二の表示形態になるように、および前記分割画像表示手段によって現在表示されておらずかつ未だユーザによってノイズの検出の誤りの有無を確認されていない前記分割画像に対応するセルが、第三の表示形態になるように、表示する、分割画像セル表示手段、を有する、
   請求項１記載の画像処理装置。
3. ユーザによって指定された前記分割画像および前記セル群は、同一のデスクトップ上に並べられて表示される、
   請求項１記載の画像処理装置。
4. 画像入力装置によって入力された画像である入力画像に含まれるノイズの画像を検出するノイズ画像検出手段と、
   前記入力画像に含まれる、ノイズであると疑わしい部分の画像である疑ノイズ画像を検出する、疑ノイズ画像検出手段と、
   前記入力画像を、当該入力画像に含まれる、前記ノイズ画像検出手段によって検出されたノイズの画像である検出ノイズ画像の位置に、第一の印を施しかつ当該入力画像に含まれる前記疑ノイズ画像の位置に第二の印を施して、表示する、入力画像表示手段と、
   表示されている前記入力画像に含まれる前記検出ノイズ画像のうちの前記ノイズ画像検出手段によって誤ってノイズの画像として検出されたものおよび前記疑ノイズ画像のうちのノイズの画像であるものをユーザに選択させるための選択手段と、
   前記検出ノイズ画像のうちの前記選択手段によって選択されたもの以外と前記疑ノイズ画像のうちの前記選択手段によって選択されたものとを前記入力画像から除去した画像であるノイズ補正画像を生成するノイズ補正画像生成手段と、
   を有することを特徴とする画像処理装置。
5. 前記ノイズ画像検出手段は、前記入力画像に含まれる、連続する黒色を示す画素の塊が第一のサイズ未満である場合に、当該塊をノイズの画像として検出し、
   前記疑ノイズ画像検出手段は、前記入力画像に含まれる、連続する黒色を示す画素の塊が前記第一のサイズ以上でありかつ第二のサイズ未満である場合に、当該塊を前記疑ノイズ画像として検出する、
   請求項４記載の画像処理装置。
6. 画像入力装置によって入力された画像である入力画像を補正する入力画像補正方法であって、
   前記入力画像に含まれるノイズの画像を検出し、
   ユーザによって指定された、前記入力画像を複数に分割した分割画像のうちの１つまたは複数を、検出したノイズの画像である検出ノイズ画像のうちの当該指定された分割画像に含まれるものの位置を示す印とともに表示し、
   表示している前記分割画像に含まれる前記検出ノイズ画像のうちの誤ってノイズの画像として検出したものをユーザに選択させ、
   前記検出ノイズ画像のうちのユーザによって選択されたもの以外を前記入力画像から除去した画像であるノイズ補正画像を生成する、
   ことを特徴とする入力画像補正方法。
7. 画像入力装置によって入力された画像である入力画像を補正する入力画像補正方法であって、
   前記入力画像に含まれるノイズの画像を検出し、
   前記入力画像に含まれる、ノイズであると疑わしい部分の画像である疑ノイズ画像を検出し、
   前記入力画像を、当該入力画像に含まれる、検出したノイズの画像である検出ノイズ画像の位置に、第一の印を施しかつ当該入力画像に含まれる前記疑ノイズ画像の位置に第二の印を施して、表示し、
   表示している前記入力画像に含まれる前記検出ノイズ画像のうちの誤ってノイズの画像として検出したものおよび前記疑ノイズ画像のうちのノイズの画像であるものをユーザに選択させ、
   前記検出ノイズ画像のうちのユーザによって選択されたもの以外と前記疑ノイズ画像のうちのユーザによって選択されたものとを前記入力画像から除去した画像であるノイズ補正画像を生成する、
   ことを特徴とする入力画像補正方法。
8. 画像入力装置によって入力された画像である入力画像の補正を行うコンピュータに用いられるコンピュータプログラムであって、
   前記入力画像に含まれるノイズの画像を検出する処理と、
   ユーザによって指定された、前記入力画像を複数に分割した分割画像のうちの１つまたは複数を、検出したノイズの画像である検出ノイズ画像のうちの当該指定された分割画像に含まれるものの位置を示す印とともに表示する処理と、
   表示している前記分割画像に含まれる前記検出ノイズ画像のうちの誤ってノイズの画像として検出したものをユーザに選択させる処理と、
   前記検出ノイズ画像のうちのユーザによって選択されたもの以外を前記入力画像から除去した画像であるノイズ補正画像を生成する処理と、
   をコンピュータに実行させるためのコンピュータプログラム。
9. 画像入力装置によって入力された画像である入力画像の補正を行うコンピュータに用いられるコンピュータプログラムであって、
   前記入力画像に含まれるノイズの画像を検出する処理と、
   前記入力画像に含まれる、ノイズであると疑わしい部分の画像である疑ノイズ画像を検出する処理と、
   前記入力画像を、当該入力画像に含まれる、検出したノイズの画像である検出ノイズ画像の位置に、第一の印を施しかつ当該入力画像に含まれる前記疑ノイズ画像の位置に第二の印を施して、表示する処理と、
   表示している前記入力画像に含まれる前記検出ノイズ画像のうちの誤ってノイズの画像として検出したものおよび前記疑ノイズ画像のうちのノイズの画像であるものをユーザに選択させる処理と、
   前記検出ノイズ画像のうちのユーザによって選択されたもの以外と前記疑ノイズ画像のうちのユーザによって選択されたものとを前記入力画像から除去した画像であるノイズ補正画像を生成する処理と、
   をコンピュータに実行させるためのコンピュータプログラム。