JP2021097333A - 画像処理装置、画像読取装置及び画像形成装置 - Google Patents

Abstract

【課題】複数の原稿を一度に読み取った際のマルチクロップ処理の時間を低減する。【解決手段】配置部８６は、クリップ処理部８５が切り出した全てのクリップ領域を、画像メモリー３内のワークメモリー３Ｂのワークエリアに、互いに重ならない位置に配置する。向き補正部８９は、配置部８６がワークエリアに配置した全てのクリップ領域の向きを、予め定められた向きにそれぞれ補正する。ＯＣＲ処理部９０は、全てのクリップ領域の向きが予め定められた向きに補正された後のワークエリアＷＡに対して、ＯＣＲ処理を行う。【選択図】図２

Description

本発明は、画像処理装置、画像読取装置、及び画像形成装置に関し、特に、画像に含まれる複数の原稿画像を切り出してＯＣＲを行うための技術に関する。

原稿の画像を読み取る画像読取装置では、読み取った画像から原稿画像だけを切り出す機能（クリップ機能）と、切り出した原稿画像中に含まれる文字を認識する機能（ＯＣＲ機能）とを有するマルチクロップ機能を備えているものがある。クリップ機能は、原稿載置台に置かれた原稿が斜めに傾いている場合でも、クリッピングを行う際に原稿画像の傾きを検出し、切り出した原稿画像の傾きを補正し、更に傾き補正後の原稿画像の向きを補正して表示又は保存まで行う機能である。ＯＣＲ機能は、切り出した原稿画像に含まれる各文字画像をキャラクター化して文字認識する機能である。

特許文献１には、原稿画像の傾きの補正に用いることが可能な画像メモリーの空き容量が少ない場合に、原稿画像の領域を分割した分割領域ごとに傾きの補正を行うことが記載されている。

特開２０１８−２０７２０２号公報

しかし、原稿載置台に載置された複数の原稿（例えば名刺）を読み取る場合、載置された複数の名刺毎に、クリップ処理及びＯＣＲ処理が実行される。つまり、クリップ処理及びＯＣＲ処理が、名刺の枚数に亘って繰り返し実行される。このため、載置された名刺の枚数が増加するにつれて、クリップ処理及びＯＣＲ処理の時間が増加し、マルチクロップ処理に時間がかかるという問題がある。上記特許文献１に記載された技術では、この問題を解決できない。

本発明は、上記の問題を解決するためになされたもので、複数の原稿を一度に読み取った際のマルチクロップ処理の時間を低減することを可能にする画像処理装置、画像読取装置及び画像形成装置を提供することを目的とする。

本発明における画像処理装置は、画像を記憶する画像メモリーと、前記画像メモリーに記憶された画像に含まれる複数の原稿の領域をそれぞれクリップ領域として認識するクリップ領域認識部と、複数の前記クリップ領域の傾きをそれぞれ検出する傾き検出部と、複数の前記クリップ領域のうち１つのクリップ領域を選択するクリップ領域選択部と、前記選択されたクリップ領域の傾きに基づいて前記画像の傾きを補正する傾き補正部と、前記傾き補正部が傾きを補正した傾き補正後の画像から当該選択されたクリップ領域を切り出すクリップ処理部と、前記クリップ領域選択部に１つの前記クリップ領域を選択させ、前記傾き補正部に当該選択されたクリップ領域の傾きに基づいて前記画像の傾きを補正させた後、前記クリップ処理部に当該選択されたクリップ領域を前記傾き補正後の画像から切り出させるクリップ処理を、前記クリップ領域認識部が認識した全てのクリップ領域についてそれぞれ行う処理制御部と、前記クリップ処理部が切り出した全てのクリップ領域を、前記画像メモリー内のワークエリアに互いに重ならない位置に配置する配置部と、前記配置部が前記ワークエリアに配置した全てのクリップ領域の向きを、予め定められた向きにそれぞれ補正する向き補正部と、全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアに対して、ＯＣＲ処理を行うＯＣＲ処理部と、を備えるものである。

また、本発明における画像読取装置は、原稿載置台に置かれた複数の原稿を１つの画像として取得し、当該取得した画像を前記画像メモリーに記憶させる画像読取部と、上記の画像処理装置と、を備える。

また、本発明における画像形成装置は、上記の画像読取装置と、前記画像読取装置が読み取った画像を用紙に印刷する画像形成部と、を備える。

この発明によれば、複数の原稿を一度に読み取った際のマルチクロップ処理の時間を低減することができる。

本発明の実施形態に係る画像読取装置の全体構成を示す概略断面図である。 画像読取装置の主要内部構成を示す機能ブロック図である。 画像読取部が読み取った画像の一例を示す図である。 傾き補正のために回転された画像の一例を示す図である。 傾き補正のために回転された画像の一例を示す図である。 傾き補正のために回転された画像の一例を示す図である。 本発明の実施形態に係るマルチクロップ処理の流れを示すフローチャートである。 （Ａ）は画像読取部が読み取った画像の一例を示す図、（Ｂ）は全てのクリップ領域が配置されたワークエリアの一例を示す図である。 （Ａ）は第１処理における配置変更により纏められた纏め画像の一例を示す図、（Ｂ）は第１処理における纏め画像の回転後のワークエリアの一例を示す図、（Ｃ）は第１処理におけるワークエリアに対する一括的にＯＣＲ処理を行う例を示す図である。 （Ａ）は画像読取部が読み取った画像の一例を示す図、（Ｂ）は全てのクリップ領域が配置されたワークエリアの一例を示す図、（Ｃ）は第２処理におけるＯＣＲ処理を行う例を示す図である。

以下、本発明の実施形態に係る画像処理装置、画像読取装置及び画像形成装置について、図面に基づき詳細に説明する。尚、本実施の形態では、本実施形態に係る画像読取装置として画像形成装置を例に挙げて説明する。

図１は、本発明の実施形態に係る画像形成装置１の全体構成を示す概略断面図である。図２は、画像形成装置１の主要内部構成を示す機能ブロック図である。画像形成装置１は、制御ユニット１０、画像読取部５、画像メモリー３、記憶部４、操作部７、画像形成部１２、及びデータ送受信部９を備えている。

まず、画像読取部５について説明する。画像読取部５は、上面に設けられた原稿を載置するためのコンタクトガラス１６１、コンタクトガラス１６１に載置された原稿に光を照射する光源２６、原稿からの反射光を第２ミラー２２に反射する第１ミラー２１、反射光をＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等のイメージセンサーで構成された撮像素子２５へ導く第３ミラー２３及びレンズ系２４を有する。

ユーザーがコンタクトガラス１６１上に原稿を置き、圧板６を閉じて、スタートボタン（不図示）を押下すると、図２に示す制御部１００の制御に従って光源２６が発光し、この光源２６の光がコンタクトガラス１６１を透過して原稿に照射される。その結果、原稿の反射光がコンタクトガラス１６１を通して第１ミラー２１に入射する。この入射光は、第２ミラー２２、第３ミラー２３及びレンズ系２４を通過した後、撮像素子２５へ入射する。

撮像素子２５は、制御部１００の制御に従って動作し、入射光を電気信号へ変換する。撮像素子２５は、主走査方向に配列しており、主走査方向の１ライン分の出力値を得る。

更に、光源２６、第１ミラー２１、第２ミラー２２及び第３ミラー２３は、モーター等の駆動部（不図示）によって副走査方向（矢印Ｙ方向）に一定速度で移動する。こうすることで、画像読取部５は原稿の主走査方向１ライン分の出力値を副走査方向に連続して取得し、結果として原稿全体の画像を読み取ることができる。

制御ユニット１０は、プロセッサー、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、及び専用のハードウェア回路を含んで構成される。プロセッサーは、例えばＣＰＵ（Central Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＭＰＵ（Micro Processing Unit）等である。制御ユニット１０は、制御部１００と、処理制御部１０１と、画像処理部８とを備えている。

制御ユニット１０は、記憶部４に記憶されている制御プログラムが上記プロセッサーで実行されることにより、制御部１００と、処理制御部１０１と、画像処理部８として機能する。なお、制御ユニット１０の上記の各構成要素は、前述の制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部１００は、画像形成装置１の全体的な動作制御を司る。制御部１００は、画像読取部５、画像形成部１２、画像メモリー３、記憶部４、及びデータ送受信部９と接続され、これら各部の駆動制御等を行う。

画像メモリー３は、画像読取部５が読み取ったデータやデータ送受信部９が外部装置から受信したデータ等を一時的に保存する入力画像メモリー３Ａと、制御ユニット１０における画像処理部８のワークエリアとして用いられるワークメモリー３Ｂとを備える。ここでは、入力画像メモリー３Ａ、及びワークメモリー３Ｂを個別に示しているが、単一のメモリーを、入力画像メモリー３Ａ、及びワークメモリー３Ｂとして兼用する構成でも構わない。

記憶部４は、例えばＨＤＤ（Hard Disk Drive）等の記憶装置である。記憶部４は、画像形成装置１の動作に必要なプログラムやデータを記憶する。

画像形成部１２は、印刷すべき画像のトナー像を用紙（記録媒体）上に形成する。画像メモリー３は、画像形成部１２のプリント対象となるデータを一時的に保存したりするための領域としても機能する。

操作部（入力受付部）７は、画像形成装置１が実行可能な各種動作及び処理についてユーザーからの指示を受け付けるものである。例えば、操作部７は、テンキーや各種処理を実行、停止させるためのスタートボタン、リセットボタン等のハードキー、ＬＣＤ（Liquid Crystal Display）等で構成された表示画面を有する。表示画面は操作方法や各種メッセージ、操作ボタン等を表示する。

制御ユニット１０に備えられる画像処理部８は、画像メモリー３が記憶するデータに対して、種々の画像処理を施すものである。画像処理部８は、クリップ領域認識部８１、傾き検出部８２、クリップ領域選択部８３、傾き補正部８４、クリップ処理部８５、配置部８６、向き検出部８７、配置変更部８８、向き補正部８９、ＯＣＲ処理部９０、及び判定部９１を有する。

クリップ領域認識部８１は、画像読取部５が読み取った画像から、例えば原稿とコンタクトガラス１６１との濃度差を利用して原稿エッジ（エッジ画像）を検出し、この原稿エッジが示すエッジ情報を使ってクリップ領域を決定する。そして、クリップ領域認識部８１は、画像読取部５が読み取った画像であって、上記原稿エッジを検出した画像から、１つのかたまりとして原稿エッジにより四辺が囲まれた矩形画像をクリップ領域として決定する。

例えば、コンタクトガラス１６１上に３枚のカード（例えば名刺）が置かれ、画像読取部５がこの複数の名刺を一度に読み取った場合、例えば図３に示すように、読み取った画像９００には、３枚の名刺の画像が含まれる。この場合、クリップ領域認識部８１は、各名刺について原稿エッジを検出し、クリップ領域を決定する。つまり、クリップ領域認識部８１は、画像９００から３枚の名刺の原稿エッジを検出し、クリップ領域を決定する。図３において、点線で示す領域９１、９２及び９３がクリップ領域である。

傾き検出部８２は、各クリップ領域の傾きを検出する。本実施の形態では、傾き検出部８２は、例えば、主走査方向に対するクリップ領域の長辺の傾きを検出する。図３では、傾き検出部８２は、領域９１が傾きθ１、領域９２が傾きθ２、領域９３が主走査方向に対して平行、傾きゼロと検出する。

クリップ領域選択部８３は、クリップ領域認識部８１が認識したクリップ領域のうち、１つのクリップ領域を選択する。例えば、クリップ領域選択部８３は、全てのクリップ領域が、予め定められた順番で１つずつ選択されて傾き補正が行われる。前記予め定められた順番は、例えば、画像９００の左上から右上、続いて左中から右中、続いて、左下から右下という順番である。このため、クリップ領域選択部８３は、画像９００の左上に位置する領域９１を最初に選択したとする。

傾き補正部８４は、クリップ領域選択部８３が選択中のクリップ領域の傾きを傾き検出部８２が検出した傾きに応じて補正する。例えば、領域９１が主走査方向から反時計回りの方向にθ１傾いていた場合、傾き補正部８４は画像９００を時計回りの方向にθ１回転する。図４は、回転後の画像９０１を示している。これにより領域９１は主走査方向に対して平行、傾きゼロとなる。

クリップ処理部８５は、原稿画像から、クリップ領域認識部８１により決定された各クリップ領域の画像をそれぞれに切り出す処理（クリップ処理）を行う。例えば、クリップ処理部８５は、図４に示すように、傾き補正後の画像９０１から領域９１をクリップする。

処理制御部１０１は、クリップ領域選択部８３に１つのクリップ領域を選択させ、傾き補正部８４に当該選択されたクリップ領域の傾きに基づいて画像９００の傾きを補正させた後、クリップ処理部８５に当該選択されたクリップ領域を傾き補正後の画像９００から切り出させるクリップ処理を、クリップ領域認識部８１が認識した全てのクリップ領域についてそれぞれ行う。

具体的には、処理制御部１０１は、図４に示す領域９２及び領域９３のクリップ処理が終わっていないので、クリップ領域選択部８３に領域９２を選択させ、図５に示すように、傾き補正部８４に領域９２の傾きがゼロになるように画像９００を主走査方向に対して時計回りにθ２回転させ、クリップ処理部８５が傾き補正後の画像９０２から領域９２をクリップする。

続いて、処理制御部１０１は、領域９３に対しても同様の処理を行う。領域９３は主走査方向に対する傾きがない、つまり主走査方向に平行の向きである場合、傾き補正部８４は画像９００を回転させる必要はなく、図６に示すように、クリップ処理部８５が画像９００からそのまま領域９３をクリップする。

配置部８６は、クリップ処理部８５が切り出した全てのクリップ領域を、画像メモリー３内のワークメモリー３Ｂのワークエリアに互いに重ならない位置に配置する。

向き検出部８７は、配置部８６がワークメモリー３Ｂのワークエリアに配置した全てのクリップ領域の向きが、天地正向き、天地逆向き、右向き、及び左向きの何れであるかをそれぞれ検出する。天地正向きとは、名刺の画像の天地が正しい向きである。天地逆向きとは、名刺の画像の天地が反転している向きである。右向きとは、名刺の画像の天が右側で地が左側となっている向きである。左向きとは、名刺の画像の天が左側で地が右側となっている向きである。具体的には、向き検出部８７は、記憶部４に予め記憶されている４種（天地正向き、天地逆向き、右向き、及び左向き）の名刺の画像基準パターンと、クリップ領域の画像とのパターンマッチングにより、クリップ領域の向きが、天地正向き、天地逆向き、右向き、及び左向きの何れであるかを検出する。そして、向き検出部８７は、検出した全てのクリップ領域の向きを、クリップ領域ごとに画像メモリー３に記憶させる。

また、向き検出部８７は、クリップ領域の画像中の文字列画像の長さ方向又はクリップ領域の長辺が横向きであれば、天地正向き又は天地逆向きであると判定し、２種（天地正向き、及び天地逆向き）の名刺の画像基準パターンとのパターンマッチングにより、クリップ領域の向きが天地正向き又は天地逆向きの何れであるかを検出し、クリップ領域の画像中の文字列画像の長さ方向又はクリップ領域の長辺が縦向きであれば、右向き又は左向きであると判定し、２種（右向き、及び左向き）の名刺の画像基準パターンとのパターンマッチングにより、クリップ領域の向きが右向き又は左向きの何れであるかを検出してもよい。

配置変更部８８は、配置部８６が前記ワークエリアに配置した全てのクリップ領域について、向き検出部８７の検出結果に基づいて、クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行う。具体的には、向き検出部８７は、検出した全てのクリップ領域の向きを、クリップ領域ごとに画像メモリー３に記憶させている。このため、配置変更部８８は、画像メモリー３に記憶されたクリップ領域の向きに基づいて、クリップ領域の向きが同じもの同士を隣接させて纏める。そして、配置変更部８８は、纏めたクリップ領域の大きさから配置変更後の位置を特定する。そして、配置変更部８８は、纏めたクリップ領域（後述する纏め画像）毎にクリップ領域の向きを示すデータを画像メモリーに記憶させる。

向き補正部８９は、配置部８６がワークエリアに配置した全てのクリップ領域の向きを、予め定められた向き（例えば、天地正向き）にそれぞれ補正する。具体的には、向き補正部８９は、配置変更部８８が前記配置変更を行うことにより生成された纏め画像を、画像メモリーに纏め画像毎に記憶されたクリップ領域の向きを示すデータに基づいて、当該纏め画像に含まれるクリップ領域の向きを天地正向きに補正するように回転させる。

ＯＣＲ処理部９０は、全てのクリップ領域の向きが予め定められた向き（例えば、天地正向き）に補正された後のワークエリアに対して、ＯＣＲ（Optical Character Recognition）処理を行う。具体的には、ＯＣＲ処理部９０は、天地正向きに揃えられた全てのクリップ領域を、一括的にＯＣＲ処理を行い、全てのクリップ領域に含まれる各文字画像をキャラクター化して文字認識する。

制御部１００は、ＯＣＲ処理部９０が全てのクリップ領域に対してＯＣＲ処理を行った各クリップ領域の文字データをそれぞれ記憶部４に記憶させる。

判定部９１は、配置変更部８８が前記配置変更を行うことにより生成された纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上である場合に、向きバラツキありと判定する。

（ｉ）クリップ領域認識部８１が認識したクリップ領域の数Ｎが予め定められた設定数ＳＱ（例えば、「４」）以上である場合、又は、判定部９１が向きバラツキありと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上である場合）、配置変更部８８は、配置部８６がワークエリアに配置した全てのクリップ領域について、クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行い、向き補正部８９は、配置変更部８８が前記配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれるクリップ領域の向きを天地正向きに補正し、ＯＣＲ処理部９０は、全てのクリップ領域の向きが天地正向きに補正された後のワークエリアに対して、ＯＣＲ処理を行う。

（ｉｉ）クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）より少ない場合で、かつ、判定部９１が向きバラツキなしと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）未満である場合）、配置変更部８８は、前記配置変更を行わず、向き補正部８９は、配置部８６がワークエリアに配置した全てのクリップ領域の向きを、天地正向きにそれぞれ補正し、ＯＣＲ処理部９０は、全てのクリップ領域の向きが天地正向きに補正された後のワークエリアの各クリップ領域に対して、個別にＯＣＲ処理を行う。

データ送受信部９は、接続されたＬＡＮ等を介して、ローカルエリア内又はインターネット上のパーソナルコンピューター等の外部装置と種々のデータの送受信を行う。

図７は、本発明の実施形態に係るマルチクロップ処理の流れを示すフローチャートである。最初に、画像読取部５は、コンタクトガラス１６１に載置された原稿を読み取って画像を取得する（Ｓ１１）。例えばコンタクトガラス１６１上に名刺が９枚置かれ、画像読取部５が９枚の名刺を１つの画像９１０として読み取ったとする。図８（Ａ）は、画像読取部５が読み取った画像９１０の一例である。画像メモリー３は、制御部１００の制御の下、画像９１０を一旦保存する。本実施形態では、画像読取部５が読み取った画像９１０は、四辺を直線とする矩形形状となっている。

続いて、クリップ領域認識部８１が画像９１０から原稿エッジを検出し、クリップ領域を決定する（Ｓ１２）。つまり、クリップ領域認識部８１は、画像９１０から９枚の名刺の原稿エッジを検出し、クリップ領域を決定する。図８（Ａ）において、領域９１〜９９がそれぞれクリップ領域である。また、クリップ領域認識部８１は、画像９１０における領域９１〜９９と、その位置を示す座標データとを、画像メモリー３に記憶させている。

そして、傾き検出部８２が、各クリップ領域の傾きを検出する（Ｓ１３）。図８（Ａ）では、傾き検出部８２は、主走査方向に対するクリップ領域の長辺の傾きを検出することとして説明する。つまり、傾き検出部８２は、領域９１が傾きθ１、領域９２が傾きθ２、領域９４が傾きθ３、領域９８が傾きθ４、領域９３及び領域９５が傾きゼロ、領域９６、領域９７及び領域９９が傾き９０度と検出する。傾き検出部８２は、領域９１〜９９の傾きを、当該領域９１〜９９に対応付けて画像メモリー３に記憶させる。

まず、クリップ領域選択部８３は、クリップ領域を１つ選択する（Ｓ１４）。なお、全てのクリップ領域が１つずつ選択されて傾き補正が行われるため、Ｓ１４においてどの順番でクリップ領域が選択されても構わない。クリップ領域選択部８３は、画像メモリー３に記憶された９個のクリップ領域（つまり、領域９１〜９９）の中から、クリップ領域を１つ選択する。

次に傾き補正部８４が、領域９１の傾きがゼロになるように画像９１０を回転させる（Ｓ１５）。領域９１が主走査方向から反時計回りの方向にθ１傾いていた場合、傾き補正部８４は画像９１０を時計回りの方向にθ１回転する。これにより領域９１は主走査方向に対して平行、傾きゼロとなる。

そして、クリップ処理部８５が、画像９１０から領域９１をクリップする（Ｓ１６）。全てのクリップ領域のクリップ処理が終わっていない場合（Ｓ１７でＮＯ）、処理制御部１０１はＳ１４へ処理を移行する。例えば、次にクリップ領域選択部８３は領域９２を選択し、傾き補正部８４が領域９２の傾きがゼロになるように画像９１０を主走査方向に対して反時計回りにθ２回転し、クリップ処理部８５が回転後の画像９１０から領域９２をクリップする。

続いて、処理制御部１０１は、領域９３に対しても同様の処理を行う。領域９３は主走査方向に対する傾きがない、つまり主走査方向に平行の向きである場合、傾き補正部８４は画像９１０を回転する必要はなく（処理制御部１０１はＳ１５を行わず）、クリップ処理部８５が画像９１０からそのまま領域９３をクリップする。そして、処理制御部１０１は、領域９４〜９９に対しても同様の処理を行う。なお、領域９６、９７、及び９９については、主走査方向から時計回りの方向に９０度傾いているため、傾き補正部８４は、領域９６、９７、及び９９については画像９１０を回転させない。

全てのクリップ領域のクリップ処理が終わった場合（Ｓ１７でＹＥＳ）、その後、配置部８６は、図８（Ｂ）に示すように、クリップ処理部８５が切り出した全てのクリップ領域（つまり、領域９１〜９９）を、画像メモリー３内のワークメモリー３ＢのワークエリアＷＡに互いに重ならない位置に配置する（Ｓ１８）。このとき、配置部８６は、ワークエリアＷＡにおける各クリップ領域（つまり、領域９１〜９９）の配置位置を示す配置座標データを、画像メモリー３に記憶させている。

そして、制御部１００は、クリップ領域認識部８１が認識したクリップ領域の数Ｎが予め定められた設定数ＳＱ（例えば、「４」）以上であるか否かと、配置変更部８８が配置変更を行うことにより生成された纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上であるか否かと、を判定する（Ｓ１９）。

制御部１００は、クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）以上である場合（Ｓ１９でＹＥＳ）、又は、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上である場合（Ｓ１９でＹＥＳ）、第１処理を行う（Ｓ２３〜Ｓ２５）。

第１処理は、Ｓ２３〜Ｓ２５からなる処理である。具体的には、（ｉ）クリップ領域認識部８１が認識したクリップ領域の数Ｎが予め定められた設定数ＳＱ（例えば、「４」）以上である場合、又は、判定部９１が向きバラツキありと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上である場合）、配置変更部８８は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域について、クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行う（Ｓ２３）。図９（Ａ）に示すように、天地正向きの３つの領域９１、９３及び９４が纏められ、天地逆向きの３つの領域９２、９５及び９８が纏められ、左向きの２つの領域９６及び９９が纏められている。なお、配置変更部８８は、配置部８６が画像メモリー３に記憶させた図８（Ｂ）に示す各クリップ領域（つまり、領域９１〜９９）の配置位置を示す配置座標データに基づいて、図８（Ｂ）に示す各クリップ領域（つまり、領域９１〜９９）を、図９（Ａ）に示す配置変更後の配置位置に配置変更を行う。なお、配置変更部８８は、図９（Ａ）に示す配置変更後の各クリップ領域（つまり、領域９１〜９９）の配置変更後座標データを画像メモリー３に記憶させている。

続いて、向き補正部８９は、配置変更部８８が前記配置変更を行うことにより生成された纏め画像を回転させることにより（Ｓ２４）、当該纏め画像に含まれるクリップ領域の向きを天地正向きに補正する。向き補正部８９は、図９（Ｂ）に示すように、配置変更を行うことにより生成された纏め画像のうちで、天地逆向きの３つの領域９２、９５及び９８からなる纏め画像を、例えば時計回りに１８０度回転させて、領域９２、９５及び９８の向きを天地正向きに補正する。また、向き補正部８９は、左向きの２つの領域９６及び９９からなる纏め画像を、例えば時計回りに９０度回転させて、領域９６及び９９の向きを天地正向きに補正する。また、向き補正部８９は、右向きの１つの領域９７を、例えば反時計回りに９０度回転させて、領域９７の向きを天地正向きに補正する。なお、向き補正部８９は、３つの領域９１、９３及び９４については、天地正向きであるため、天地正向きの３つの領域９１、９３及び９４からなる纏め画像を回転させない。

続いて、ＯＣＲ処理部９０は、図９（Ｃ）に示すように全てのクリップ領域の向きが天地正向きに補正された後のワークエリアＷＡに対して、ＯＣＲ処理を行う（Ｓ２５）。ＯＣＲ処理部９０は、天地正向きに揃えられた全てのクリップ領域を、一括的にＯＣＲ処理を行い、全てのクリップ領域に含まれる各文字画像をキャラクター化した文字認識し、図９（Ｃ）に示すＯＣＲ処理後の文字データを取得する。図９（Ｃ）では、ＯＣＲ処理部９０は、領域９１〜９９の各文字画像をキャラクター化した各テキストデータ（図９（Ｃ）に示す「Ａ」〜「Ｋ」）を取得する。

一方、制御部１００は、クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）未満で、かつ、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）未満である場合（Ｓ１９でＮＯ）、第２処理を行う（Ｓ２０、Ｓ２１）。ここでは、例えばコンタクトガラス１６１上に名刺が３枚置かれ、画像読取部５が３枚の名刺を１つの画像９２０として読み取ったとする。図１０（Ａ）は、画像読取部５が読み取った画像９２０の一例である。画像メモリー３は、制御部１００の制御の下、画像９２０を一旦保存する。図１０（Ａ）に示すように、制御部１００は、クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）未満で、かつ、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）未満であるため（Ｓ１９でＮＯ）、第２処理を行う（Ｓ２０、Ｓ２１）。

第２処理は、Ｓ２０及びＳ２１からなる処理である。具体的には、（ｉｉ）クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）より少ない場合で、かつ、判定部９１が向きバラツキなしと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）未満である場合）、配置変更部８８は、前記配置変更を行わず（つまり、Ｓ２３及びＳ２４の処理を行わない）、向き補正部８９は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域の向きを、天地正向きにそれぞれ補正する（Ｓ２０）。具体的には、向き補正部８９は、図１０（Ｂ）に示すように、配置部８６がワークエリアＷＡに配置した全てのクリップ領域（つまり、領域９１〜９３）のうちで、天地逆向きの領域９２の向きを、図１０（Ｃ）に示すように、天地正向きに補正する。続いて、ＯＣＲ処理部９０は、図１０（Ｃ）に示すように全てのクリップ領域の向きが天地正向きに補正された後のワークエリアＷＡの各クリップ領域に対して、個別にＯＣＲ処理を行う（Ｓ２１）。図１０（Ｃ）では、ＯＣＲ処理部９０は、領域９１〜９３を個別にＯＣＲ処理を行い、領域９１〜９３の各文字画像をキャラクター化した各テキストデータ（図９（Ｃ）に示す「Ａ」〜「Ｃ」）を取得する。

制御部１００は、Ｓ２１の処理後、又は、Ｓ２５の処理後、ＯＣＲ処理部９０が全てのクリップ領域に対してＯＣＲ処理を行った各クリップ領域の文字データをそれぞれ記憶部４に記憶させる（Ｓ２２）。

制御部１００は、Ｓ２２の処理後、本処理を終了する。

上記の実施形態によれば、配置部８６は、クリップ処理部８５が切り出した全てのクリップ領域を、画像メモリー３内のワークエリアＷＡに互いに重ならない位置に配置する。向き補正部８９は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域の向きを、予め定められた向きにそれぞれ補正する。ＯＣＲ処理部９０は、全てのクリップ領域の向きが予め定められた向きに補正された後のワークエリアＷＡに対して、ＯＣＲ処理を行う。すなわち、複数のクリップ領域の画像（クリップ画像）を纏めた１つの画像（つまり、ワークエリアＷＡの画像）に対してＯＣＲ処理を行うことで、ＯＣＲ処理を１回で済ますことができる。これにより、複数の原稿を一度に読み取った際のマルチクロップ処理の時間を低減することができる。

ここで、一般的なマルチクロップ処理と上記実施形態のマルチクロップ処理との差異について、もう少し詳細に説明する。一般的なマルチクロップ処理では、複数のクリップ領域の画像（クリップ画像）毎にその向き補正及びＯＣＲ処理の実行が繰り返されることから、ＯＣＲ処理がクリップ画像の枚数回に亘って実行されるため、マルチクロップ処理に時間がかかるという問題がある。これに対して、上記実施形態のマルチクロップ処理では、上記したようにＯＣＲ処理を１回で済ますことができるので、マルチクロップ処理の時間を低減することができる。

また、向き検出部８７は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域の向きをそれぞれ検出する。配置変更部８８は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域について、向き検出部８７の検出結果に基づいて、クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行う。向き補正部８９は、配置変更部８８が配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれるクリップ領域の向きを予め定められた向きに補正する。すなわち、ワークエリアＷＡの纏め画像に対して１回だけ回転処理を行うだけでよく、マルチクロップ処理の時間を低減することができる。なお、一般的なマルチクロップ処理における向き補正では、異なる向きで揃う複数のクリップ画像（例えば、天地逆向きの複数のクリップ領域）を当該クリップ画像毎に個別に回転させる必要があるため、複数回回転させることになり、マルチクロップ処理に時間がかかる。これに対して、上記実施形態のマルチクロップ処理における向き補正では、上記したように纏め画像に対して１回だけの回転処理で済ますことができるので、マルチクロップ処理の時間を低減することができる。

また、（ｉ）クリップ領域の数Ｎが予め定められた設定数ＳＱ以上である場合、又は、判定部９１が向きバラツキありと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上である場合）には、配置変更部８８は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域について、クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行う。向き補正部８９は、配置変更部８８が配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれるクリップ領域の向きを予め定められた向きに補正する。すなわち、ワークエリアＷＡの纏め画像に対して１回だけ回転処理を行うだけで済ますことができる。そして、ＯＣＲ処理部９０は、複数のクリップ領域の画像（クリップ画像）を纏めた１つの画像（つまり、ワークエリアＷＡの画像）に対してＯＣＲ処理を行うことで、ＯＣＲ処理を１回で済ますことができる。これにより、クリップ領域の数Ｎが予め定められた設定数ＳＱ以上である場合、マルチクロップ処理の時間を低減することができる。一方、（ｉｉ）クリップ領域の数Ｎが設定数ＳＱより少ない場合でかつ判定部９１が向きバラツキなしと判定した場合（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）未満である場合）、配置変更部８８は、配置変更を行わず、向き補正部８９は、ワークエリアＷＡに配置された全てのクリップ領域の向きを、予め定められた向きにそれぞれ補正し、ＯＣＲ処理部９０は、予め定められた向きに補正された後のワークエリアＷＡの各クリップ領域を個別にＯＣＲ処理を行う。すなわち、一般的なマルチクロップ処理を行う。この場合には、マルチクロップ処理の時間を低減することはできないが、纏め画像を記憶するエリアを設ける必要がないので、画像メモリー３の使用量の増大を抑制できる。

また、制御部１００は、ＯＣＲ処理部９０が全てのクリップ領域に対してＯＣＲ処理を行った各クリップ領域の文字データをそれぞれ記憶部４に記憶させる。これにより、各クリップ領域の文字データを保存でき、活用することができる。

なお、本発明は上記実施の形態の構成に限られず種々の変形が可能である。例えば、上記実施形態では、本発明に係る画像形成装置の一実施形態として複合機を用いて説明しているが、これは一例に過ぎず、プリンター等の画像形成装置でもよい。

なお、上記実施形態のＳ１９では、クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）以上であるか否かと、向きバラツキの有無の判定（つまり、纏め画像に含まれるクリップ領域の合計数ＴＮが予め定められた閾値ＴＨ（例えば、「３」）以上であるであるか否か）とを判定しているが、Ｓ１９において、クリップ領域の数Ｎが設定数ＳＱ（例えば、「４」）以上であるか否かのみを判定する構成、或いは、Ｓ１９において、向きバラツキの有無のみを判定する構成としてもよい。

また、制御部１００は、配置部８６がワークエリアＷＡに配置した全てのクリップ領域の向きが予め定められた種類（例えば２種類）以上であれば、前記第１処理を行い、未満であれば第２処理を行うとしてもよい。

なお、本発明の実施形態に係る画像読取装置１１に、電子写真方式やインクジェット方式等の画像形成部１２（図２）を追加したものが、本実施形態に係る上記の画像形成装置１である。また、本実施形態に係る画像処理装置は、本実施形態に係る画像読取装置１１から画像読取部５（図２）を除去したものである。本実施形態に係る画像処理装置は、データ送受信部９が、後述する処理制御部１０１、第二処理制御部１０２、及び画像処理部８による処理対象となる画像を、ネットワーク接続された他のパーソナルコンピューター等から取得する。

また、図１乃至図１０を用いて上記実施形態により示した構成及び処理は、本発明の一実施形態に過ぎず、本発明を当該構成及び処理に限定する趣旨ではない。

１ 画像形成装置
３ 画像メモリー
４ 記憶部
５ 画像読取部
１０ 制御ユニット
１１ 画像読取装置
８１ クリップ領域認識部
８２ 傾き検出部
８３ クリップ領域選択部
８４ 傾き補正部
８５ クリップ処理部
８６ 配置部
８７ 向き検出部
８８ 配置変更部
８９ 向き補正部
９０ ＯＣＲ処理部
９１ 判定部
１００ 制御部
１０１ 処理制御部

Claims (7)

1. 画像を記憶する画像メモリーと、
   前記画像メモリーに記憶された画像に含まれる複数の原稿の領域をそれぞれクリップ領域として認識するクリップ領域認識部と、
   複数の前記クリップ領域の傾きをそれぞれ検出する傾き検出部と、
   複数の前記クリップ領域のうち１つのクリップ領域を選択するクリップ領域選択部と、
   前記選択されたクリップ領域の傾きに基づいて前記画像の傾きを補正する傾き補正部と、
   前記傾き補正部が傾きを補正した傾き補正後の画像から当該選択されたクリップ領域を切り出すクリップ処理部と、
   前記クリップ領域選択部に１つの前記クリップ領域を選択させ、前記傾き補正部に当該選択されたクリップ領域の傾きに基づいて前記画像の傾きを補正させた後、前記クリップ処理部に当該選択されたクリップ領域を前記傾き補正後の画像から切り出させるクリップ処理を、前記クリップ領域認識部が認識した全てのクリップ領域についてそれぞれ行う処理制御部と、
   前記クリップ処理部が切り出した全てのクリップ領域を、前記画像メモリー内のワークエリアに互いに重ならない位置に配置する配置部と、
   前記配置部が前記ワークエリアに配置した全てのクリップ領域の向きを、予め定められた向きにそれぞれ補正する向き補正部と、
   全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアに対して、ＯＣＲ処理を行うＯＣＲ処理部と、を備える画像処理装置。
2. 前記配置部が前記ワークエリアに配置した全てのクリップ領域の向きをそれぞれ検出する向き検出部と、
   前記配置部が前記ワークエリアに配置した全てのクリップ領域について、前記向き検出部の検出結果に基づいて、前記クリップ領域の向きが同じもの同士を隣接させて纏める配置変更を行う配置変更部と、を更に備え、
   前記向き補正部は、前記配置変更部が前記配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれる前記クリップ領域の向きを前記予め定められた向きに補正する請求項１に記載の画像処理装置。
3. （ｉ）前記クリップ領域認識部が認識したクリップ領域の数が予め定められた設定数以上である場合、前記配置変更部は、前記配置部が前記ワークエリアに配置した全てのクリップ領域について、前記配置変更を行い、前記向き補正部は、前記配置変更部が前記配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれる前記クリップ領域の向きを前記予め定められた向きに補正し、前記ＯＣＲ処理部は、全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアに対して、ＯＣＲ処理を行い、
   （ｉｉ）前記クリップ領域の数が前記設定数より少ない場合、前記配置変更部は、前記配置変更を行わず、前記向き補正部は、前記配置部が前記ワークエリアに配置した全てのクリップ領域の向きを、前記予め定められた向きにそれぞれ補正し、前記ＯＣＲ処理部は、全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアの各クリップ領域に対して、個別にＯＣＲ処理を行う請求項２に記載の画像処理装置。
4. 前記配置変更部が前記配置変更を行うことにより生成された纏め画像に含まれる前記クリップ領域の数が予め定められた閾値以上である場合に、向きバラツキありと判定する判定部を、更に備え、
   （ｉ）前記判定部が向きバラツキありと判定した場合、前記配置変更部は、前記配置部が前記ワークエリアに配置した全てのクリップ領域について、前記配置変更を行い、前記向き補正部は、前記配置変更部が前記配置変更を行うことにより生成された纏め画像を回転させることにより、当該纏め画像に含まれる前記クリップ領域の向きを前記予め定められた向きに補正し、前記ＯＣＲ処理部は、全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアに対して、ＯＣＲ処理を行い、
   （ｉｉ）前記判定部が向きバラツキなしと判定した場合、前記配置変更部は、前記配置変更を行わず、前記向き補正部は、前記配置部が前記ワークエリアに配置した全てのクリップ領域の向きを、前記予め定められた向きにそれぞれ補正し、前記ＯＣＲ処理部は、全てのクリップ領域の向きが前記予め定められた向きに補正された後のワークエリアの各クリップ領域に対して、個別にＯＣＲ処理を行う請求項２又は請求項３に記載の画像処理装置。
5. 記憶部と、
   前記ＯＣＲ処理部が前記全てのクリップ領域に対してＯＣＲ処理を行った各クリップ領域の文字データをそれぞれ前記記憶部に記憶させる制御部を、更に備える請求項１乃至請求項４の何れか１項に記載の画像処理装置。
6. 原稿載置台に置かれた複数の原稿を１つの画像として取得する画像読取部と、
   請求項１乃至請求項５の何れか１項に記載の画像処理装置と、
   を備える画像読取装置。
7. 請求項６に記載の画像読取装置と、
   前記画像読取装置が読み取った画像を用紙に印刷する画像形成部と、
   を備える画像形成装置。

Images