JP2021175051A - 折れ曲がり検出装置、画像処理装置及びプログラム - Google Patents

Abstract

【課題】原稿が折れ曲がっていることをユーザに認識させる。【解決手段】プロセッサを備え、プロセッサは、原稿が読み取られることにより得られた読取画像を受け付け、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、原稿が折れ曲がっていることをユーザに通知することを特徴とする折れ曲がり検出装置。【選択図】図２

Description

本発明は、折れ曲がり検出装置、画像処理装置及びプログラムに関する。

原稿のサイズを自動検知しているときに、原稿のカールや折れにより原稿のサイズの検知結果が所定時間内に所定回数変動するときに、原稿サイズを正しく検知していないと推定し、原稿サイズを正しく検知していないと推定した際に、原稿サイズを設定するための原稿サイズ設定用画面を表示する画像処理装置は、知られている（例えば、特許文献１参照）。

特開２０１２−２２２７６４号公報

原稿を読み取る際、原稿が折れ曲がった状態で読み取られることがある。このような場合に、原稿サイズを正しく検知していないことのみを通知する構成を採用したのでは、原稿が折れ曲がっていることをユーザに認識させることはできない。

本発明の目的は、原稿が折れ曲がっていることをユーザに認識させることにある。

請求項１に記載の発明は、プロセッサを備え、前記プロセッサは、原稿が読み取られることにより得られた読取画像を受け付け、前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知することを特徴とする折れ曲がり検出装置である。
請求項２に記載の発明は、前記プロセッサは、前記読取画像が、前記原稿が折れ曲がっていることを示す直線を含む場合に、当該読取画像が、当該原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置である。
請求項３に記載の発明は、前記原稿が折れ曲がっていることを示す直線は、水平方向に対して閾値以上の角度をなし、かつ、垂直方向に対して閾値以上の角度をなす直線であることを特徴とする請求項２に記載の折れ曲がり検出装置である。
請求項４に記載の発明は、前記プロセッサは、前記読取画像が、第１の方向に並ぶ第１の画像要素の列と、当該第１の方向とは異なる第２の方向に並ぶ当該第１の画像要素と同種の第２の画像要素の列とを含むことを条件として、当該読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置である。
請求項５に記載の発明は、前記プロセッサは、前記第１の画像要素の列が第１の位置で終了し、前記第２の画像要素の列が当該第１の位置とは異なり当該第１の位置から予め定められた範囲内の第２の位置から開始することを更なる条件として、前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項４に記載の折れ曲がり検出装置である。
請求項６に記載の発明は、前記第１の画像要素及び前記第２の画像要素の種類は、記号、直線の部分、色の情報が付加された領域の少なくとも１つであることを特徴とする請求項４に記載の折れ曲がり検出装置である。
請求項７に記載の発明は、前記第１の画像要素及び前記第２の画像要素の種類は、記号であり、前記第１の方向は、前記第１の画像要素の列の認識処理を行うことにより得られた第１の座標列によって求められ、前記第２の方向は、前記第２の画像要素の列の認識処理を行うことにより得られた第２の座標列によって求められることを特徴とする請求項６に記載の折れ曲がり検出装置である。
請求項８に記載の発明は、前記第１の座標列は、前記第１の画像要素の列の形態素解析を更に行うことにより得られ、前記第２の座標列は、前記第２の画像要素の列の形態素解析を更に行うことにより得られることを特徴とする請求項７に記載の折れ曲がり検出装置である。
請求項９に記載の発明は、前記プロセッサは、前記読取画像が、第１の位置で終了する第１の画像要素の列と、当該第１の位置とは異なる第２の位置から開始する当該第１の画像要素と同種の第２の画像要素の列とを含むことを条件として、当該読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置である。
請求項１０に記載の発明は、前記第１の位置と前記第２の位置とは、予め定められた範囲内にあることを特徴とする請求項９に記載の折れ曲がり検出装置である。
請求項１１に記載の発明は、前記プロセッサは、前記原稿が折れ曲がっていることを、当該原稿の折れ曲がっている箇所に生じる直線を含む通知画像によって通知することを特徴とする請求項１に記載の折れ曲がり検出装置である。
請求項１２に記載の発明は、前記通知画像は、前記読取画像の少なくとも一部を更に含むことを特徴とする請求項１１に記載の折れ曲がり検出装置である。
請求項１３に記載の発明は、原稿を読み取る読取手段と、前記読取手段により前記原稿が読み取られることにより得られた読取画像が、前記読取手段により当該原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知する通知手段とを備えたことを特徴とする画像処理装置である。
請求項１４に記載の発明は、コンピュータに、原稿が読み取られることにより得られた読取画像を受け付ける機能と、前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知する機能とを実現させるためのプログラムである。

請求項１の発明によれば、原稿が折れ曲がっていることをユーザに認識させることが可能となる。
請求項２の発明によれば、原稿が折れ曲がっていることを示す直線を手掛かりとして、原稿が折れ曲がっていることを判定することができる。
請求項３の発明によれば、原稿に描かれた直線を、原稿が折れ曲がっていることを示す直線と誤認識する可能性が低下する。
請求項４の発明によれば、２つの画像要素の列が異なる方向に並んでいることを手掛かりとして、原稿が折れ曲がっていることを判定することができる。
請求項５の発明によれば、２つの画像要素の列のうちの一方の終了位置と他方の開始位置とが異なっていることを更なる手掛かりとして、原稿が折れ曲がっていることを判定することができる。
請求項６の発明によれば、画像要素として、記号、直線の部分、色の情報が付加された領域の少なくとも１つを用いることができる。
請求項７の発明によれば、２つの画像要素の列の方向を、それらの画像要素の列の認識処理を行うことにより求めることができる。
請求項８の発明によれば、２つの画像要素の列の方向を、それらの画像要素の列の形態素解析を更に行うことにより求めることができる。
請求項９の発明によれば、２つの画像要素の列のうちの一方の終了位置と他方の開始位置とが異なっていることを手掛かりとして、原稿が折れ曲がっていることを判定することができる。
請求項１０の発明によれば、２つの画像要素の列のうちの一方の終了位置と他方の開始位置とが予め定められた範囲内にあることを更なる手掛かりとして、原稿が折れ曲がっていることを判定することができる。
請求項１１の発明によれば、原稿のどこに折れ曲がりが生じているかをユーザに認識させることができる。
請求項１２の発明によれば、原稿を読み取って得られた読取画像上でどこに折れ曲がりが生じているかをユーザに認識させることができる。
請求項１３の発明によれば、原稿が折れ曲がっていることをユーザに認識させることが可能となる。
請求項１４の発明によれば、原稿が折れ曲がっていることをユーザに認識させることが可能となる。

本発明の実施の形態における画像処理装置のハードウェア構成例を示した図である。 本発明の実施の形態における折れ曲がり検出装置の機能構成例を示したブロック図である。 本発明の実施の形態における折れ曲がり検出装置の動作例を示したフローチャートである。 スキャン画像取得部が取得したスキャン画像の一例を示した図である。 第１の折れ曲がり検出処理の概要を説明するための図である。 第１の折れ曲がり検出処理の処理例を示したフローチャートである。 第２の折れ曲がり検出処理の概要を説明するための図である。 第３の折れ曲がり検出処理の概要を説明するための図である。 第２及び第３の折れ曲がり検出処理の処理例を示したフローチャートである。

以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。

［画像処理装置のハードウェア構成］
図１は、本実施の形態における画像処理装置１０のハードウェア構成例を示した図である。図示するように、画像処理装置１０は、ＣＰＵ（Central Processing Unit）１１と、ＲＡＭ（Random Access Memory）１２と、ＲＯＭ（Read Only Memory）１３と、ＨＤＤ（Hard Disk Drive）１４と、操作パネル１５と、画像読取部１６と、画像形成部１７と、通信インターフェース（以下、「通信Ｉ／Ｆ」と表記する）１８とを備える。

ＣＰＵ１１は、ＲＯＭ１３等に記憶された各種プログラムをＲＡＭ１２にロードして実行することにより、後述する各機能を実現する。

ＲＡＭ１２は、ＣＰＵ１１の作業用メモリ等として用いられるメモリである。ＲＯＭ１３は、ＣＰＵ１１が実行する各種プログラム等を記憶するメモリである。ＨＤＤ１４は、画像読取部１６が読み取った画像データや画像形成部１７における画像形成にて用いる画像データ等を記憶する例えば磁気ディスク装置である。

操作パネル１５は、各種情報の表示やユーザからの操作入力の受付を行う例えばタッチパネルである。ここで、操作パネル１５は、各種情報が表示されるディスプレイと、指やスタイラスペン等の指示手段で指示された位置を検出する位置検出シートとからなる。或いは、タッチパネルに代えて、ディスプレイ及びキーボードを用いてもよい。

画像読取部１６は、読取手段の一例であり、紙等の記録媒体に記録された画像を読み取る。ここで、画像読取部１６は、例えばスキャナであり、光源から原稿に照射した光に対する反射光をレンズで縮小してＣＣＤ（Charge Coupled Devices）で受光するＣＣＤ方式や、ＬＥＤ光源から原稿に順に照射した光に対する反射光をＣＩＳ（Contact Image Sensor）で受光するＣＩＳ方式のものを用いるとよい。

画像形成部１７は、紙等の記録媒体に画像を形成する。ここで、画像形成部１７は、例えばプリンタであり、感光体に付着させたトナーを記録媒体に転写して像を形成する電子写真方式や、インクを記録媒体上に吐出して像を形成するインクジェット方式のものを用いるとよい。

通信Ｉ／Ｆ１８は、通信回線を介して他の装置との間で各種情報の送受信を行う。

［本実施の形態の概要］
本実施の形態では、画像処理装置１０が、原稿が読み取られることにより得られた読取画像を受け付け、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、原稿が折れ曲がっていることをユーザに通知する。

ここで、画像処理装置１０は、次の３つの条件の何れかが満たされる場合に、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定する。

第１の条件は、読取画像が、原稿が折れ曲がっていることを示す直線を含む、という条件である。ここで、原稿が折れ曲がっていることを示す直線は、水平方向に対して閾値以上の角度をなし、かつ、垂直方向に対して閾値以上の角度をなす直線であってよい。

第２の条件は、読取画像が、第１の方向に並ぶ第１の画像要素の列と、第１の方向とは異なる第２の方向に並ぶ第１の画像要素と同種の第２の画像要素の列とを含む、という条件を含む。また、第２の条件は、第１の画像要素の列が第１の位置で終了し、第２の画像要素の列が第１の位置とは異なり第１の位置から予め定められた範囲内の第２の位置から開始する、という条件を更に含んでもよい。

第３の条件は、読取画像が、第１の位置で終了する第１の画像要素の列と、第１の位置とは異なる第２の位置から開始する第１の画像要素と同種の第２の画像要素の列とを含む、という条件である。ここで、第１の位置と第２の位置とは、予め定められた範囲内にあってよい。

［折れ曲がり検出装置の機能構成］
図２は、本実施の形態における折れ曲がり検出装置２０の機能構成例を示したブロック図である。ここで、折れ曲がり検出装置２０は、画像処理装置１０のＣＰＵ１１（図１参照）が、後述する各機能部を実現するプログラムを例えばＲＯＭ１３（図１参照）からＲＡＭ１２（図１参照）に読み込んで実行することにより、実現される装置として捉えられる。

図示するように、折れ曲がり検出装置２０は、スキャン画像取得部２１と、折れ曲がり検出部２２と、通知メッセージ生成部２３と、サムネイル画像生成部２４と、表示制御部２５と、操作受付部２６とを備えている。

スキャン画像取得部２１は、画像読取部１６（図１参照）で読み取られた読取画像（スキャン画像）を取得する。本実施の形態では、原稿が読み取られることにより得られた読取画像を受け付ける手段の一例として、スキャン画像取得部２１を設けている。

折れ曲がり検出部２２は、スキャン画像取得部２１が取得したスキャン画像を解析することにより原稿の折れ曲がりを検出する。本実施の形態では、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定する手段の一例として、折れ曲がり検出部２２を設けている。

通知メッセージ生成部２３は、ユーザに通知する通知メッセージを生成する。ここで、通知メッセージとしては、例えば「原稿内部に折れが検出されました。原稿を確認して下さい。」といったものが考えられる。

サムネイル画像生成部２４は、原稿のどこに折れ曲がりが検出されたかを示すサムネイル画像を生成する。ここで、サムネイル画像は、白紙画像に折れ曲がり部分の直線を示したものであってよい。或いは、サムネイル画像は、スキャン画像に折れ曲がり部分の直線を示したものであってもよい。この場合、サムネイル画像は、スキャン画像から折れ曲がり部分の直線の画像を除去した画像に、折れ曲がり部分の直線を示したものであってよい。本実施の形態では、原稿の折れ曲がっている箇所に生じる直線を含む通知画像の一例として、また、読取画像の少なくとも一部を更に含む通知画像の一例として、サムネイル画像を設けている。

表示制御部２５は、通知メッセージ生成部２３が生成した通知メッセージと、サムネイル画像生成部２４が生成したサムネイル画像とを、操作パネル１５に表示するように制御する。本実施の形態では、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、原稿が折れ曲がっていることをユーザに通知する手段の一例として、また、原稿が折れ曲がっていることを通知画像によって通知する手段の一例として、表示制御部２５を設けている。

操作受付部２６は、操作パネル１５上でユーザが行った操作を受け付ける。

［折れ曲がり検出装置の動作］
図３は、本実施の形態における折れ曲がり検出装置２０の動作例を示したフローチャートである。

図示するように、折れ曲がり検出装置２０では、まず、スキャン画像取得部２１が、画像読取部１６（図１参照）で読み取られたスキャン画像を取得する（ステップ２０１）。

次に、折れ曲がり検出部２２が、ステップ２０１で取得されたスキャン画像を解析することにより原稿の折れ曲がりを検出する折れ曲がり検出処理を行う（ステップ２０２）。そして、折れ曲がり検出部２２は、ステップ２０２の折れ曲がり検出処理で原稿の折れ曲がりが検出されたかどうかを判定する（ステップ２０３）。

ステップ２０３で原稿の折れ曲がりが検出されたと判定された場合は、通知メッセージ生成部２３が、ユーザに通知する通知メッセージを生成する（ステップ２０４）。ここで、通知メッセージとしては、「原稿内部に折れが検出されました。原稿を確認して下さい。」等のメッセージを生成するとよい。また、この場合、サムネイル画像生成部２４が、原稿のどこに折れ曲がりが発生したかを示すサムネイル画像を生成する（ステップ２０５）。このように、ステップ２０４で通知メッセージが生成され、ステップ２０５でサムネイル画像が生成されると、表示制御部２５が、この通知メッセージとサムネイル画像とを操作パネル１５（図１参照）に表示するように制御する（ステップ２０６）。

これにより、操作パネル１５には、通知メッセージとサムネイル画像とが表示され、ユーザは、これらを参照することにより、スキャンし直す必要があるかを判断することになる。その結果、スキャンし直す必要があると判断すれば、ユーザは、操作パネル１５上で再スキャンを指示する操作を行う。すると、折れ曲がり検出装置２０では、操作受付部２６が、再スキャンを指示する操作を受け付けたかどうかを判定する（ステップ２０７）。ステップ２０７で再スキャンを指示する操作を受け付けたと判定された場合、表示制御部２５は、スキャンを指示するためのスキャン画面を操作パネル１５に表示するように制御する（ステップ２０８）。

一方、ステップ２０３で原稿の折れ曲がりが検出されたと判定されなかった場合、折れ曲がり検出装置２０は処理を終了する。

また、ステップ２０６で操作パネル１５に表示された通知メッセージとサムネイル画像とを参照することにより、ユーザはスキャンし直す必要がないと判断することもある。この場合は、ステップ２０７で再スキャンを指示する操作を受け付けたと判定されないこととなり、折れ曲がり検出装置２０は処理を終了する。

［折れ曲がり検出処理の詳細］
図４は、スキャン画像取得部２１が取得したスキャン画像の一例を示した図である。以下では、スキャン画像取得部２１がこのスキャン画像３００を取得したものとして、折れ曲がり検出部２２による折れ曲がり検出処理について説明する。

（第１の折れ曲がり検出処理）
図５は、第１の折れ曲がり検出処理の概要を説明するための図である。この第１の折れ曲がり検出処理は、上述した第１の条件が満たされる場合に、スキャン画像が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定する処理である。この場合、第１の折れ曲がり検出処理は、スキャン画像が、水平方向に対しても垂直方向に対しても閾値以上の角度をなす直線を含んでいれば、原稿の折れ曲がりを検出する処理となる。これは、原稿の折れ曲がり部分が直線となることが多いからである。しかも、原稿上に意図的に描かれた線は一般に水平方向又は垂直方向を向くのに対し、原稿の折れ曲がり部分はこれとは関係のない方向を向くことが多いからである。ここで、直線は、例えばハフ変換によって求めるとよい。

図では、直線３１１が、水平方向の線３１２に対して閾値以上の角度をなし、垂直方向の線３１３に対して閾値以上の角度をなしている。従って、第１の折れ曲がり検出処理では、スキャン画像３００が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定される。

図６は、第１の折れ曲がり検出処理の処理例を示したフローチャートである。

図示するように、折れ曲がり検出部２２は、まず、折れ曲がり部分の直線の数をカウントするための変数Ｍに０を代入する（ステップ２２１）。そして、折れ曲がり検出部２２は、スキャン画像３００から複数の直線を抽出する（ステップ２２２）。ここで、複数の直線は、例えばハフ変換によって抽出するとよい。

次に、折れ曲がり検出部２２は、ステップ２２２で抽出した複数の直線のうち、１本の直線に着目する（ステップ２２３）。

次いで、折れ曲がり検出部２２は、ステップ２２３で着目した直線の角度θを算出する（ステップ２２４）。そして、折れ曲がり検出部２２は、ステップ２２４で算出された角度θの絶対値が閾値Ｔ１以上かつ閾値Ｔ２以下であるかどうかを判定する（ステップ２２５）。ここで、閾値Ｔ１は、直線と水平方向の線とがなす角度に対する閾値であり、閾値Ｔ２は、直線と垂直方向の線とがなす角度に対する閾値である。

ステップ２２５で角度θの絶対値が閾値Ｔ１以上かつ閾値Ｔ２以下であると判定されれば、折れ曲がり検出部２２は、折れ曲がり部分の直線の数をカウントするための変数Ｍに１を加算する（ステップ２２６）。そして、折れ曲がり検出部２２は、ステップ２２３で着目した１本の直線の端点の座標Ｐ１（Ｍ），Ｑ１（Ｍ）を記憶し（ステップ２２７）、処理をステップ２２８へ進める。

一方、ステップ２２５で角度θの絶対値が閾値Ｔ１以上かつ閾値Ｔ２以下であると判定されなかった場合、つまり、角度θの絶対値が閾値Ｔ１より小さい又は閾値Ｔ２より大きいと判定された場合、折れ曲がり検出部２２は、処理をステップ２２８へ進める。

その後、折れ曲がり検出部２２は、着目していない直線が他に存在するかどうかを判定する（ステップ２２８）。

ステップ２２８で着目していない直線が他に存在すると判定されれば、折れ曲がり検出部２２は、処理をステップ２２３へ戻す。

一方、ステップ２２８で着目していない直線が他に存在すると判定されなければ、折れ曲がり検出部２２は、変数Ｍの値が０より大きいかどうかを判定する（ステップ２２９）。

ステップ２２９で変数Ｍの値が０より大きいと判定されれば、折れ曲がり検出部２２は、原稿の折れ曲がりを検出した旨を通知メッセージ生成部２３に出力し、ステップ２２７で記憶した直線の端点の座標Ｐ１（Ｍ），Ｑ１（Ｍ）をサムネイル画像生成部２４に出力し（ステップ２３０）、処理を終了する。尚、サムネイル画像生成部２４では、この座標Ｐ１（Ｍ），Ｑ１（Ｍ）をそれぞれ結ぶことにより得られたＭ本の直線が、白紙画像又はスキャン画像上に描画される。

一方、ステップ２２９で変数Ｍの値が０より大きいと判定されなければ、つまり、折れ曲がり部分の直線がなければ、そのまま処理を終了する。

（第２及び第３の折れ曲がり検出処理例）
図７は、第２の折れ曲がり検出処理の概要を説明するための図である。この第２の折れ曲がり検出処理は、上述した第２の条件及び第３の条件が満たされる場合に、スキャン画像が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定する処理の一例である。

この第２の折れ曲がり検出処理では、上述した第２の条件及び第３の条件における第１の画像要素及び第２の画像要素の種類を記号とする。記号は、文字、数字、狭義の記号を含むが、ここでは、特に文字とする。つまり、この第２の折れ曲がり検出処理では、第１の画像要素の列及び第２の画像要素の列を文字列とする。この場合、第２の折れ曲がり検出処理は、２つの近接する文字列の方向が閾値を超える角度で変化していたり、２つの近接する文字列の終了位置と開始位置とがずれていたりすれば、原稿の折れ曲がりを検出する処理となる。ここで、文字列の方向は、文字列に含まれる複数の文字を文字認識することによって得られた複数の座標を結んだ方向とすればよい。また、文字列の方向は、文字列を文字認識して更に形態素解析を行うことによって得られた単語に含まれる複数の文字の座標を結んだ方向としてもよい。

図では、近接する文字列３２２ａ，３２１ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。また、近接する文字列３２３ａ，３２２ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。従って、第２の折れ曲がり検出処理では、スキャン画像３００が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定される。

図８は、第３の折れ曲がり検出処理の概要を説明するための図である。この第３の折れ曲がり検出処理は、上述した第２の条件及び第３の条件が満たされる場合に、スキャン画像が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定する処理の一例である。

この第３の折れ曲がり検出処理では、上述した第２の条件及び第３の条件における第１の画像要素及び第２の画像要素の種類を、記号の画像の下限の画素を結んだ直線（以下、「下限線」という）の部分とする。記号は、文字、数字、狭義の記号を含むが、ここでも、特に文字とする。つまり、この第３の折れ曲がり検出処理では、第１の画像要素の列及び第２の画像要素の列を、文字列の画像の下限線とする。この場合、第３の折れ曲がり検出処理は、２つの近接する下限線の方向が閾値を超える角度で変化していたり、２つの近接する下限線の終了位置と開始位置とがずれていたりすれば、原稿の折れ曲がりを検出する処理となる。

図では、近接する下限線３３２ａ，３３１ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。また、近接する下限線３３３ａ，３３２ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。従って、第３の折れ曲がり検出処理では、スキャン画像３００が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定される。

また、この第３の折れ曲がり検出処理では、上述した第２の条件及び第３の条件における第１の画像要素及び第２の画像要素の種類を原稿に意図的に描かれた罫線等の直線の部分としてもよい。この場合、第３の折れ曲がり検出処理は、２つの近接する罫線の方向が閾値を超える角度で変化していたり、２つの近接する罫線の終了位置と開始位置とがずれていたりすれば、原稿の折れ曲がりを検出する処理となる。ここで、罫線は、例えばハフ変換によって求めるとよい。

図では、近接する罫線３３４ａ，３３４ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが閾値若干ずれている。また、近接する罫線３３５ａ，３３５ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。従って、第３の折れ曲がり検出処理では、スキャン画像３００が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定される。

更に、この第３の折れ曲がり検出処理では、上述した第２の条件又は第３の条件における第１の画像要素及び第２の画像要素の種類を、色値又は明度値に基づくブロック等の色の情報が付加された領域としてもよい。この場合、第３の折れ曲がり検出処理は、２つの近接する色値又は明度値に基づくブロックの方向が閾値を超える角度で変化していたり、２つの近接する色値又は明度値に基づくブロックの終了位置と開始位置とがずれていたりすれば、原稿の折れ曲がりを検出する処理となる。

図では、近接するブロック３３６ａ，３３６ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。また、近接するブロック３３７ａ，３３７ｂについて、その方向が閾値を超える角度で変化しており、その終了位置と開始位置とが若干ずれている。従って、第３の折れ曲がり検出処理では、スキャン画像３００が、原稿が折れ曲がった状態で読み取られることにより得られたものであると判定される。

図９は、第２及び第３の折れ曲がり検出処理の処理例を示したフローチャートである。

図示するように、折れ曲がり検出部２２は、まず、折れ曲がりを検出するための画像要素のペアの数をカウントするための変数Ｎに０を代入する（ステップ２４１）。そして、折れ曲がり検出部２２は、スキャン画像３００から複数の画像要素のペアを抽出する（ステップ２４２）。ここで、画像要素が罫線である場合、複数の画像要素のペアは、例えばハフ変換によって抽出するとよい。また、画像要素が文字列、文字列の画像の下限線、色値又は明度値のブロックである場合、複数の画像要素のペアは、公知の画像処理の手法によって抽出するとよい。

次に、折れ曲がり検出部２２は、ステップ２４２で抽出した複数の画像要素のうち、画像要素のペアに着目する（ステップ２４３）。

次いで、折れ曲がり検出部２２は、ステップ２４３で着目した画像要素のペアについて、画像要素の端点間の距離δを算出する（ステップ２４４）。そして、折れ曲がり検出部２２は、ステップ２４４で算出された距離δが、閾値Ｔ３より小さいかどうかを判定する（ステップ２４５）。ここで、閾値Ｔ３は、画像要素の端点間の距離が予め定められた範囲内にあるかどうかを調べるための閾値である。

ステップ２４５で距離δが閾値Ｔ３より小さいと判定されれば、折れ曲がり検出部２２は、ステップ２４３で着目した画像要素のペアについて、その方向の角度α、βを算出する（ステップ２４６）。ここで、画像要素が文字列である場合、画像要素の方向は、文字列の認識処理を行って得られた座標列を結ぶことによって求めればよい、また、画像要素が下限線や罫線である場合、画像要素の方向は、下限線や罫線の方向とすればよい。更に、画像要素が色値又は明度値のブロックである場合、画像要素の方向は、ブロックの境界線の方向に基づいて求めればよい。そして、折れ曲がり検出部２２は、ステップ２４６で算出された角度α、βの差の絶対値が、閾値Ｔ４を超えているかどうかを判定する（ステップ２４７）。ここで、閾値Ｔ４は、画像要素のペアのうち、一方の画像要素の方向と他方の画像要素の方向とがなす角度に対する閾値である。

ステップ２４７で角度α、βの差の絶対値が閾値Ｔ４を超えていると判定されれば、折れ曲がりを検出するための画像要素のペアの数をカウントするための変数Ｎに１を加算する（ステップ２４８）。そして、折れ曲がり検出部２２は、ステップ２４３で着目した画像要素のペアのうち、一方の画像要素の終了位置の座標Ｅ（Ｎ）と、他方の画像要素の開始位置の座標Ｓ（Ｎ）とを算出し（ステップ２４９）、処理をステップ２５０へ進める。

一方、ステップ２４５で距離δが閾値Ｔ３より小さいと判定されなかった場合、つまり、距離δが閾値Ｔ３以上と判定された場合、折れ曲がり検出部２２は、処理をステップ２５０へ進める。また、ステップ２４７で角度α、βの差の絶対値が閾値Ｔ４を超えていると判定されなかった場合、つまり、角度α、βの差の絶対値が閾値Ｔ４以下であると判定された場合も、折れ曲がり検出部２２は、処理をステップ２５０へ進める。

その後、折れ曲がり検出部２２は、着目していない画像要素のペアが他に存在するかどうかを判定する（ステップ２５０）。

ステップ２５０で着目していない画像要素のペアが他に存在すると判定されれば、折れ曲がり検出部２２は、処理をステップ２４３へ戻す。

一方、ステップ２５０で着目していない画像要素のペアが他に存在すると判定されなければ、折れ曲がり検出部２２は、変数Ｎの値が２以上であるかどうかを判定する（ステップ２５１）。尚、ここでは、画像要素のペアが少なくとも２つあれば、折れ曲がり部分の直線が描画できるという考えの下、変数Ｎの値が２以上であるかどうかを判定することとしたが、この限りではない。折れ曲がり部分の直線をより正確に描画するために、変数Ｎの値が２よりも大きい予め定められた値以上であるかどうかを判定することとしてもよい。

ステップ２５１で変数Ｎの値が２以上であると判定されれば、折れ曲がり検出部２２は、ステップ２４９で算出した座標Ｅ（Ｎ）と座標Ｓ（Ｎ）との２以上のペアを通る直線を求め、その端点の座標Ｐ２，Ｑ２を記憶する（ステップ２５２）。そして、折れ曲がり検出部２２は、原稿の折れ曲がりを検出した旨を通知メッセージ生成部２３に出力し、ステップ２５２で記憶した直線の端点の座標Ｐ２，Ｑ２をサムネイル画像生成部２４に出力し（ステップ２５３）、処理を終了する。尚、サムネイル画像生成部２４では、この座標Ｐ２，Ｑ２を結ぶことにより得られた直線が、白紙画像又はスキャン画像上に描画される。

一方、ステップ２５１で変数Ｎの値が２以上であると判定されなければ、つまり、折れ曲がりを検出するための画像要素がないか又は１つであれば、そのまま処理を終了する。

尚、この処理例では、２つの画像要素の端点間の距離δが閾値Ｔ３より小さいという条件、及び、２つの画像要素の方向の角度α、βの差の絶対値が閾値Ｔ４を超えているという条件が満たされた場合に、原稿の折れ曲がりを検出するようにしたが、この限りではない。２つの画像要素の端点間の距離δが閾値Ｔ３より小さいという条件だけが満たされた場合に、原稿の折れ曲がりを検出するようにしてもよい。或いは、２つの画像要素の方向の角度α、βの差の絶対値が閾値Ｔ４を超えているという条件だけが満たされた場合に、原稿の折れ曲がりを検出するようにしてもよい。

［プロセッサ］
本実施の形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵ：Central Processing Unit等）や、専用のプロセッサ（例えばＧＰＵ：Graphics Processing Unit、ＡＳＩＣ：Application Specific Integrated Circuit、ＦＰＧＡ：Field Programmable Gate Array、プログラマブル論理デバイス等）を含むものである。

また、本実施の形態におけるプロセッサの動作は、１つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は、本実施の形態において記載した順序のみに限定されるものではなく、変更してもよい。

［プログラム］
本実施の形態における折れ曲がり検出装置２０が行う処理は、例えば、アプリケーションソフトウェア等のプログラムとして用意される。

即ち、本実施の形態を実現するプログラムは、コンピュータに、原稿が読み取られることにより得られた読取画像を受け付ける機能と、読取画像が、原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、原稿が折れ曲がっていることをユーザに通知する機能とを実現させるためのプログラムとして捉えられる。

尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、ＣＤ−ＲＯＭ等の記録媒体に格納して提供することも可能である。

１０…画像処理装置、２０…折れ曲がり検出装置、２１…スキャン画像取得部、２２…折れ曲がり検出部、２３…通知メッセージ生成部、２４…サムネイル画像生成部、２５…表示制御部、２６…操作受付部

Claims (14)

1. プロセッサを備え、
   前記プロセッサは、
   原稿が読み取られることにより得られた読取画像を受け付け、
   前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知する
   ことを特徴とする折れ曲がり検出装置。
2. 前記プロセッサは、前記読取画像が、前記原稿が折れ曲がっていることを示す直線を含む場合に、当該読取画像が、当該原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置。
3. 前記原稿が折れ曲がっていることを示す直線は、水平方向に対して閾値以上の角度をなし、かつ、垂直方向に対して閾値以上の角度をなす直線であることを特徴とする請求項２に記載の折れ曲がり検出装置。
4. 前記プロセッサは、前記読取画像が、第１の方向に並ぶ第１の画像要素の列と、当該第１の方向とは異なる第２の方向に並ぶ当該第１の画像要素と同種の第２の画像要素の列とを含むことを条件として、当該読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置。
5. 前記プロセッサは、前記第１の画像要素の列が第１の位置で終了し、前記第２の画像要素の列が当該第１の位置とは異なり当該第１の位置から予め定められた範囲内の第２の位置から開始することを更なる条件として、前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項４に記載の折れ曲がり検出装置。
6. 前記第１の画像要素及び前記第２の画像要素の種類は、記号、直線の部分、色の情報が付加された領域の少なくとも１つであることを特徴とする請求項４に記載の折れ曲がり検出装置。
7. 前記第１の画像要素及び前記第２の画像要素の種類は、記号であり、
   前記第１の方向は、前記第１の画像要素の列の認識処理を行うことにより得られた第１の座標列によって求められ、
   前記第２の方向は、前記第２の画像要素の列の認識処理を行うことにより得られた第２の座標列によって求められることを特徴とする請求項６に記載の折れ曲がり検出装置。
8. 前記第１の座標列は、前記第１の画像要素の列の形態素解析を更に行うことにより得られ、
   前記第２の座標列は、前記第２の画像要素の列の形態素解析を更に行うことにより得られることを特徴とする請求項７に記載の折れ曲がり検出装置。
9. 前記プロセッサは、前記読取画像が、第１の位置で終了する第１の画像要素の列と、当該第１の位置とは異なる第２の位置から開始する当該第１の画像要素と同種の第２の画像要素の列とを含むことを条件として、当該読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものであると判定することを特徴とする請求項１に記載の折れ曲がり検出装置。
10. 前記第１の位置と前記第２の位置とは、予め定められた範囲内にあることを特徴とする請求項９に記載の折れ曲がり検出装置。
11. 前記プロセッサは、前記原稿が折れ曲がっていることを、当該原稿の折れ曲がっている箇所に生じる直線を含む通知画像によって通知することを特徴とする請求項１に記載の折れ曲がり検出装置。
12. 前記通知画像は、前記読取画像の少なくとも一部を更に含むことを特徴とする請求項１１に記載の折れ曲がり検出装置。
13. 原稿を読み取る読取手段と、
    前記読取手段により前記原稿が読み取られることにより得られた読取画像が、前記読取手段により当該原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知する通知手段と
    を備えたことを特徴とする画像処理装置。
14. コンピュータに、
    原稿が読み取られることにより得られた読取画像を受け付ける機能と、
    前記読取画像が、前記原稿が折れ曲がった状態で読み取られることにより得られたものである場合に、当該原稿が折れ曲がっていることをユーザに通知する機能と
    を実現させるためのプログラム。

Images