JP7287097B2 - 画像処理装置、画像処理プログラム及び画像処理方法 - Google Patents

Description

本開示は、付箋が貼付された原稿を画像読取部（イメージスキャナー）により光学的に読み取って生成した読取画像に基づき電子ファイルを生成する画像処理装置、画像処理プログラム及び画像処理方法に関する。

付箋が貼付された原稿を画像読取部により光学的に読み取って生成した読取画像に基づき電子ファイルを生成する技術が知られている。

特開２０１５－１２６４８６号公報 特開２０１８－０９３３０６号公報 特開２０１１－１６６５３７号公報

付箋が貼付された原稿を画像読取部により光学的に読み取って生成した読取画像に基づき電子ファイルを生成する技術は、益々ユーザーフレンドリーであることが望ましい。

本開示の一形態に係る画像処理装置は、
画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得する読取画像取得部と、
前記第１の読取画像から、前記原稿の領域である原稿領域を抽出する原稿領域抽出部と、
前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出する付箋領域抽出部と、
前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断する文字判断部と、
前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成する原稿画像生成部と、
前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断する画像マッチング部と、
前記第１の文字を含むファイル名を生成するファイル名生成部と、
前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成するファイル生成部
として動作する制御回路を有する。

（１）本実施形態によれば、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定の位置に付箋を貼付し、付箋を添付したページを画像読取部に読み取らせるだけで、ファイル生成部により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、付箋を添付する原稿中の位置だけを意識すればよいので、ユーザーの面倒が無くユーザーフレンドリーである。また、原稿画像生成部は、原稿領域に含まれる第１の付箋領域をマスクして原稿画像を生成するので、最終ファイルとしては本来不要な第１の付箋領域を含まずユーザーが所望する品質の、オリジナル読取画像の電子ファイルを生成することができる。

前記読取画像取得部は、前記画像読取部が、第２の文字が記載された第２の付箋が貼付された前記原稿の第２のページを光学的に読み取って生成した第２の読取画像をさらに取得し、
前記付箋領域抽出部は、前記第２の読取画像から、前記第２のページの原稿領域の前記第１の位置と異なる第２の位置に位置する前記第２の付箋の領域である第２の付箋領域を抽出し、
前記文字判断部は、前記第２の付箋領域に含まれる前記第２の文字を光学文字認識により判断し、
前記原稿画像生成部は、前記原稿領域に含まれる前記第２の付箋領域をマスクして前記第２のページの前記原稿画像を生成し、
前記画像マッチング部は、前記第２のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第２のページを判断し、
前記制御回路は、
前記第２の文字を含むインデックス名を生成するインデックス名生成部と、
前記インデックス名を含むページであるインデックスページを生成し、前記オリジナル読取画像の前記第２のページにリンクするためのリンク情報を生成し、前記インデックスページに含まれる前記インデックス名に前記リンク情報を紐づけるインデックスページ生成部
としてさらに動作し、
前記ファイル生成部は、前記インデックスページ及び前記オリジナル読取画像を含む前記電子ファイルを生成する。

（２）本実施形態によれば、マスク後の原稿画像とオリジナル読取画像とをマッチングすることにより、画像マッチング部は、オリジナル読取画像の複数のページのうち、何れのページが第２のページであるか判断できる確実性が高い。また、ユーザーにとっては、インデックス名にすべき文字を付箋に記載し、原稿の特定の位置に付箋を貼付し、付箋を添付したページを画像読取部に読み取らせるだけで、ファイル生成部により、所望のインデックス名に付箋が貼付された第２のページへのリンク情報が紐づけられたインデックスページを有する電子ファイルを生成することができる。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、付箋を添付する原稿中の位置だけを意識すればよいので、ユーザーの面倒が無くユーザーフレンドリーである。また、第１の位置と第２の位置とは異なるため、付箋にファイル名として記載した文字が誤ってインデックス名になったり、逆に、付箋にインデックス名として記載した文字が誤ってファイル名になることが防止される。

前記原稿領域抽出部は、エッジ及び／又はポイントを検出することにより、矩形の前記原稿領域を抽出し、
前記付箋領域抽出部は、前記原稿領域の第１の辺との距離が第１の閾値より小さい位置である前記第１の位置に位置する前記第１の付箋領域を抽出する。

（３）本実施形態によれば、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定の位置（上辺の近くなど、ファイル名を記載した付箋を通常貼付するような位置）に付箋を貼付し、付箋を添付したページを画像読取部に読み取らせるだけで、ファイル生成部により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、上辺の近くなど、ファイル名を記載した付箋を通常貼付するような位置に、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

前記原稿領域抽出部は、エッジ及び／又はポイントを検出することにより、矩形の前記原稿領域を抽出し、
前記付箋領域抽出部は、前記読取画像の特定のページから、前記第１の付箋領域を抽出する。

（４）本実施形態によれば、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定のページ（１ページ目など、ファイル名を記載した付箋を通常貼付するようなページ）に付箋を貼付し、付箋を添付したページを画像読取部に読み取らせるだけで、ファイル生成部により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、１ページ目など、ファイル名を記載した付箋を通常貼付するようなページに、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

前記原稿領域抽出部は、エッジ及び／又はポイントを検出することにより、矩形の前記原稿領域を抽出し、
前記付箋領域抽出部は、前記原稿領域の前記第１の辺と異なる第２の辺との距離が第２の閾値より小さい位置である前記第２の位置に位置する前記第２の付箋領域を抽出する。

（５）本実施形態によれば、ユーザーにとっては、インデックス名にすべき文字を付箋に記載し、原稿の特定の位置（右辺の近くなど、インデックス名を記載した付箋を通常貼付するような位置）に付箋を貼付し、付箋を添付したページを画像読取部に読み取らせるだけで、ファイル生成部により、所望のインデックス名に付箋が貼付された第２のページへのリンク情報が紐づけられたインデックスページを有する電子ファイルを生成することができる。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、右辺の近くなど、インデックス名を記載した付箋を通常貼付するような位置に、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

前記付箋領域抽出部は、前記第１の位置及び前記第２の位置以外に位置する付箋領域を抽出しない。

（６）本実施形態によれば、原稿画像生成部は、付箋領域抽出部が抽出しなかった、特定の位置（第１の位置、第２の位置）以外に位置する付箋領域は、マスクしない。これにより、ユーザーが通常使用する付箋が誤ってマスクされてしまうことを防止できる。また、ユーザーは、画像の読取（スキャン）の前に、通常使用する付箋を外す必要が無いので、使い勝手がよくユーザーフレンドリーである。

画像処理装置は、前記画像読取部をさらに具備する。

（７）本実施形態によれば、画像処理装置は、画像読取部を有する画像形成装置を用いて実現可能であるし、画像読取部を有さない情報処理装置を用いても実現可能である。後者の場合、情報処理装置は、典型的には、ネットワークを介して、近距離無線通信により、又はＵＳＢ接続を介して、画像読取部を有する画像形成装置から読取画像を取得すればよい。

本開示の一形態に係る画像処理プログラムは、
画像処理装置の制御回路を、
画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得する読取画像取得部と、
前記第１の読取画像から、前記原稿の領域である原稿領域を抽出する原稿領域抽出部と、
前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出する付箋領域抽出部と、
前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断する文字判断部と、
前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成する原稿画像生成部と、
前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断する画像マッチング部と、
前記第１の文字を含むファイル名を生成するファイル名生成部と、
前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成するファイル生成部
として動作させる。

本開示の一形態に係る画像処理方法は、
読取画像取得部により、画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得し、
原稿領域抽出部により、前記第１の読取画像から、前記原稿の領域である原稿領域を抽出し、
付箋領域抽出部により、前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出し、
文字判断部により前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断し、
原稿画像生成部により、前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成し、
画像マッチング部により、前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断し、
ファイル名生成部により前記第１の文字を含むファイル名を生成し、
ファイル生成部により、前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成する。

本開示によれば、付箋が貼付された原稿を画像読取部により光学的に読み取って生成した読取画像に基づき電子ファイルを生成する技術を、益々ユーザーフレンドリーとすることを図れる。

なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。

画像形成装置のハードウェア構成を示す。 画像形成装置の機能的構成を示す。 画像形成装置の動作フローを示す。 付箋が貼付されたページの読取画像を示す。 付箋が貼付された別のページの読取画像を示す。 ＧＵＩの例を示す。

以下、図面を参照しながら、本開示の実施形態を説明する。

本実施形態に係る画像処理装置は、画像読取部（イメージスキャナー）が、付箋が貼付された原稿を光学的に読み取って生成した読取画像を取得する。本実施形態では、具体例として、画像処理装置を、画像読取部を内蔵する画像形成装置（例えば、Multifunction Peripheral、ＭＦＰ）として説明する。あるいは、画像処理装置は、画像読取部を有さない情報処理装置（パーソナルコンピューター、タブレットコンピューター、スマートフォン等）でもよい（図示せず）。この場合、情報処理装置は、典型的には、ネットワークを介して、近距離無線通信により、又はＵＳＢ接続を介して、画像読取部を有する画像形成装置から読取画像を取得すればよい。

１．画像形成装置のハードウェア構成

図１は、画像形成装置のハードウェア構成を示す。

画像形成装置１０は、制御回路１００を備える。制御回路１００は、プロセッサーであるＣＰＵ１１ａ（Central Processing Unit）、ＲＡＭ１１ｂ（Random Access Memory）、メモリーであるＲＯＭ１１ｃ（Read Only Memory）及び専用のハードウェア回路等から構成され、画像形成装置１０の全体的な動作制御を司る。ＣＰＵ１１ａは、ＲＯＭ１１ｃが記憶する情報処理プログラムをＲＡＭ１１ｂにロードして実行する。ＲＯＭ１１ｃは、ＣＰＵ１１ａが実行するプログラムやデータなどを固定的に記憶する。ＲＯＭ１１ｃは、非一過性のコンピューター読み取り可能な記録媒体の一例である。

制御回路１００は、画像読取部１２（イメージスキャナー）、画像処理部１４（ＧＰＵ（Graphics Processing Unit）を含む）、画像メモリー１５、画像形成部１６（プリンター）、表示部１７ａを備える操作部１７（タッチパネル）、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等の大容量の不揮発性の記憶装置１８、ファクシミリ通信部１９及びネットワーク通信インターフェース１３等と接続されている。操作部１７（タッチパネル）は、入力装置の一形態であり、入力装置として、マイクロフォンを含む音声入力装置が設けられてもよい。制御回路１００は、接続されている上記各部の動作制御や、各部との間での信号又はデータの送受信を行う。

本実施形態では、画像読取部１２（イメージスキャナー）は、オートフィーダー（図示せず）によりフィードされた原稿又はプラテン（図示せず）に載置された原稿を光学的に読み取り、画像（読取画像と称する）を生成する。原稿は、物理的な媒体（典型的には、紙）であり、１以上のページを有する。

２．画像形成装置の機能的構成

図２は、画像形成装置の機能的構成を示す。

画像形成装置１０の制御回路１００において、ＣＰＵ１１ａは、ＲＯＭ１１ｃが記憶する情報処理プログラムをＲＡＭ１１ｂにロードして実行することにより、原稿画像取得部１０１、原稿領域抽出部１０２、付箋領域抽出部１０３、文字判断部１０４、原稿画像生成部１０５、ファイル名生成部１０６、インデックス名生成部１０７、インデックスページ生成部１０８、ファイル生成部１０９及び画像マッチング部１１０として動作する。

３．画像形成装置の動作フロー

図３は、画像形成装置の動作フローを示す。

原稿画像取得部１０１は、画像読取部１２が、オリジナルの原稿を光学的に読み取って生成したオリジナル読取画像を取得する（ステップＳ１１０）。原稿は、１以上（本例では、複数）のページを有する。オリジナルの原稿とは、原稿の所定位置に、文字が記載された付箋（後述）が貼付されていない原稿を意味する。

その後、ユーザーは、原稿の複数のページのうち、少なくとも一部のページの所定位置に、文字（典型的には、手書きの文字）が記載された付箋（第１の付箋、第２の付箋）を貼付する。付箋は、典型的には、原稿よりもサイズの小さい媒体（典型的には、紙）である。付箋は、予め塗布された糊又は粘着テープ等により、全面又は一部が原稿に貼付（簡易的に接着）される。

原稿画像取得部１０１は、画像読取部１２が、第１の付箋が所定位置に貼付された第１のページ（単数）を光学的に読み取って生成した第１の読取画像を取得する。原稿画像取得部１０１は、画像読取部１２が、第２の付箋が所定位置に貼付された第２のページ（単数又は複数）を光学的に読み取って生成した第２の読取画像を取得する（ステップＳ１０１）。原稿画像取得部１０１は、第１のページ及び第２のページを個別に読み取ってもよいし、一括で読み取ってもよい。

図４は、付箋が貼付されたページの読取画像を示す。図５は、付箋が貼付された別のページの読取画像を示す。

本例では、原稿画像取得部１０１は、付箋が貼付された原稿の読取画像Ｉ１、Ｉ２を抽出する。読取画像Ｉ１、Ｉ２は、原稿の全てのエッジ及びポイントと、付箋のエッジ及びポイントとを含む。言い換えれば、読取画像Ｉ１、Ｉ２に含まれる原稿及び付箋は途切れていない。読取画像Ｉ１、Ｉ２は、１ページ毎の画像である。

原稿領域抽出部１０２は、公知の方法（エッジ及び／又はポイントを検出する等）により、読取画像Ｉ１、Ｉ２から原稿領域Ｄ１、Ｄ２を抽出する（ステップＳ１０２）。原稿領域Ｄ１、Ｄ２は、読取画像Ｉ１、Ｉ２のうち、１ページ毎の原稿のエッジ及びポイントにより区画される領域である。言い換えれば、原稿領域Ｄ１、Ｄ２は、１ページ毎の原稿領域である。原稿領域Ｄ１、Ｄ２は、付箋が重なった領域を含む。

付箋領域抽出部１０３は、公知の方法（エッジ及び／又はポイントを検出する等）により、読取画像Ｉ１、Ｉ２から、特定の位置（第１の位置、第２の位置）に位置する付箋領域Ｎ１、Ｎ２を抽出し、原稿領域Ｄ１、Ｄ２に対する付箋領域Ｎ１、Ｎ２の位置（具体的には、座標）を判断する（ステップＳ１０３）。付箋領域Ｎ１、Ｎ２は、読取画像Ｉ１、Ｉ２のうち、付箋のエッジ及びポイントにより区画される領域である。付箋領域抽出部１０３は、特定のサイズ（典型的な付箋の定形サイズ）の矩形を付箋領域Ｎ１、Ｎ２と判断する。あるいは、付箋領域抽出部１０３は、特定のサイズ（典型的な市販の付箋のサイズ）且つ、特定の色（典型的な市販の付箋の色）の矩形を付箋領域Ｎ１、Ｎ２と判断してもよい。付箋領域Ｎ１、Ｎ２は、原稿に重なった領域及び原稿からはみ出た領域を含む。なお、付箋領域抽出部１０３は、特定の位置（第１の位置、第２の位置）以外に位置する付箋領域は、抽出しない。

具体的には、付箋領域抽出部１０３は、特定のページ（典型的には、１ページ目）である第１のページの第１の読取画像Ｉ１から、原稿領域Ｄ１の第１の位置に位置する、第１の付箋領域Ｎ１を抽出する。第１の位置は、原稿領域Ｄ１の第１の辺Ｅ１（本例では、上辺）との距離が第１の閾値より小さい位置である。「原稿領域Ｄ１の第１の辺Ｅ１との距離が第１の閾値より小さい位置（第１の位置）」とは、第１の付箋領域Ｎ１が第１の辺Ｅ１の近くに位置する（又は本例のように第１の辺Ｅ１に重なる）ことを意味する。

一方、付箋領域抽出部１０３は、任意のページ（１ページ目でもよいし、１ページ目以外でもよい）である第２のページの第２の読取画像Ｉ２から、原稿領域Ｄ２の第２の位置に位置する、第２の付箋領域Ｎ２を抽出する。第２の位置は、原稿領域Ｄ２の第２の辺Ｅ２（本例では、右辺）との距離が第２の閾値（第１の閾値と同じでも異なってもよい）より小さい位置である。第１の辺Ｅ１（本例では、上辺）と、第２の辺Ｅ２（本例では、右辺）とは異なる。即ち、第１の位置と、第２の位置とは異なる。「原稿領域Ｄ２の第２の辺Ｅ２との距離が第２の閾値より小さい位置（第２の位置）」とは、第２の付箋領域Ｎ２が第２の辺Ｅ２の近くに位置する（又は本例のように第２の辺Ｅ２に重なる）ことを意味する。

文字判断部１０４は、光学文字認識（ＯＣＲ、Optical Character Recognition）により、第１の付箋領域Ｎ１に含まれる第１の文字Ｔ１を判断し、第２の付箋領域Ｎ２に含まれる第２の文字Ｔ２を判断する（ステップＳ１０４）。具体的には、文字判断部１０４は、第１の付箋領域Ｎ１に含まれる第１の文字Ｔ１の画像と、第２の付箋領域Ｎ２に含まれる第２の文字Ｔ２の画像（文字画像と称する）とを抽出する。文字判断部１０４は、文字認識用データベース１１１を参照し、抽出した文字画像それぞれが示す文字を識別する。具体的には、文字認識用データベース１１１には、文字の画像パターンと文字コードとが対応付けられて１文字ずつ登録されている。文字判断部１０４は、抽出した文字画像の画像パターンを文字認識用データベース１１１から検索し、検索により得られた画像パターンが対応付けられた文字コードを判断する。

原稿画像生成部１０５は、第１の原稿領域Ｄ１に含まれる第１の付箋領域Ｎ１をマスクし、第２の原稿領域Ｄ２に含まれる第２の付箋領域Ｎ２をマスクする。具体的には、原稿画像生成部１０５は、第１の原稿領域Ｄ１に含まれる、第１の付箋領域Ｎ１の一部であるマスク領域Ｍ１を、原稿領域Ｄ１の色（背景色）でマスクする。マスク領域Ｍ１は、第１の原稿領域Ｄ１と第１の付箋領域Ｎ１とが重なり合っている領域である。一方、原稿画像生成部１０５は、第１の原稿領域Ｄ１に含まれる、第１の付箋領域Ｎ１の一部であるマスク領域Ｍ２を、原稿領域Ｄ２の色（背景色）でマスクする。マスク領域Ｍ２は、第２の原稿領域Ｄ２と第２の付箋領域Ｎ２とが重なり合っている領域である。一方、原稿画像生成部１０５は、読取画像が付箋領域を含まない場合、読取画像から原稿画像を抽出する（マスクしない）。また、原稿画像生成部１０５は、付箋領域抽出部１０３が抽出しなかった、特定の位置（第１の位置、第２の位置）以外に位置する付箋領域は、マスクしない。これにより、原稿画像生成部１０５は、第１の読取画像から第１のページの原稿画像を生成し、第２の読取画像から第２のページの原稿画像を生成する（ステップＳ１０５）。

画像マッチング部１１０は、第１のページの原稿画像とオリジナル読取画像とをマッチングして、オリジナル読取画像の第１のページを判断する。言い換えれば、画像マッチング部１１０は、オリジナル読取画像の複数のページのうち、何れのページが第１のページであるか判断する。画像マッチング部１１０は、第２のページの原稿画像とオリジナル読取画像とをマッチングして、オリジナル読取画像の第２のページを判断する。言い換えれば、画像マッチング部１１０は、オリジナル読取画像の複数のページのうち、何れのページが第２のページであるか判断する（ステップＳ１１１）。

ファイル名生成部１０６は、第１の位置に位置する第１の付箋領域Ｎ１に含まれる第１の文字Ｔ１を含むファイル名を生成する（ステップＳ１０６）。

インデックス名生成部１０７は、第２の位置に位置する第２の付箋領域Ｎ２に含まれる第２の文字Ｔ２を含むインデックス名を生成する（ステップＳ１０７）。

インデックスページ生成部１０８は、インデックスページを生成する。インデックスページは、インデックス名生成部１０７が生成したインデックス名（第２の付箋領域Ｎ２に含まれる第２の文字Ｔ２を含む）を目次として含むページである。インデックスページ生成部１０８は、オリジナル読取画像の第２のページ（第２の付箋が貼付されるページ）にリンクするためのリンク情報を生成する。インデックスページ生成部１０８は、インデックスページに含まれるインデックス名にリンク情報を紐づける（ステップＳ１０８）。

ファイル生成部１０９は、ファイル名生成部１０６が生成したファイル名（第１の文字Ｔ１を含む）を有し、インデックスページ生成部１０８が生成したインデックスページ及びオリジナル読取画像を含む電子ファイルを生成する。ファイル生成部１０９は、オリジナル読取画像の１ページ目又は２ページ目等にインデックスページを挿入した電子ファイルを生成する（ステップＳ１０９）。

４．ＧＵＩの例

図６は、ＧＵＩの例を示す。

画像形成装置１０は、上記動作フローを実行中に、ユーザーに作業を促すためのＧＵＩを表示してもよい。以下に具体例を述べる。

原稿領域抽出部１０２が読取画像Ｉ１、Ｉ２から原稿領域Ｄ１、Ｄ２を抽出する（ステップＳ１０２）前に、ＧＵＩｇ１を表示部１７ａに表示して、付箋を貼付する位置や付箋の色をユーザーに通知してもよい。これにより、付箋領域抽出部１０３は、例えば、特定の位置に位置する特定の色の矩形を、付箋領域Ｎ１、Ｎ２と判断することができる（ステップＳ１０３）。

画像読取部１２がオリジナルの原稿を光学的に読み取ってオリジナル読取画像を生成し、原稿画像取得部１０１がオリジナル読取画像を取得する（ステップＳ１１０）前に、ＧＵＩｇ２を表示部１７ａに表示して、付箋が貼付されていないオリジナルの原稿を画像読取部１２に読み取らせることを、ユーザーに促してもよい。

画像読取部１２が第１の付箋が所定位置に貼付された第１のページを光学的に読み取って第１の読取画像を生成し、原稿画像取得部１０１が第１の読取画像を取得する（ステップＳ１０１）前に、ＧＵＩｇ３を表示部１７ａに表示して、第１の付箋を貼付すべきページ及び位置を、ユーザーに通知してもよい。

画像読取部１２が第２の付箋が所定位置に貼付された第２のページを光学的に読み取って第２の読取画像を生成し、原稿画像取得部１０１が第２の読取画像を取得する（ステップＳ１０１）前に、ＧＵＩｇ４を表示部１７ａに表示して、第２の付箋を貼付すべきページ及び位置を、ユーザーに通知してもよい。

５．結語

（１）本実施形態によれば、付箋領域抽出部１０３は、第１の読取画像Ｉ１から、第１のページの原稿領域Ｄ１の第１の位置に位置する第１の付箋領域Ｎ１を抽出する（ステップＳ１０３）。ファイル名生成部１０６は、第１の付箋領域Ｎ１に含まれる第１の文字Ｔ１を含むファイル名を生成する（ステップＳ１０６）。これにより、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定の位置に付箋を貼付し、付箋を添付したページを画像読取部１２に読み取らせるだけで、ファイル生成部１０９により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる（ステップＳ１０９）。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、付箋を添付する原稿中の位置だけを意識すればよいので、ユーザーの面倒が無くユーザーフレンドリーである。また、ユーザーにとっては、付箋の貼付されていないオリジナルな原稿を画像読取部１２に読み取らせるだけで、最終ファイルとしては本来不要な第１の付箋領域Ｎ１を含まずユーザーが所望する品質の、オリジナル読取画像の電子ファイルを生成することができる。

また、貼付した付箋は後で剥がせばよいので、例えば原稿自体に手書きの文字を記載して後で消す場合に比べて、原稿が劣化しない。また、手書きの文字を記載すべきでない原稿（機密文書等）にも有用である。また、文字判断部１０４は、付箋領域内Ｎ１だけを光学文字認識するので、例えば原稿全域を光学文字認識する場合に比べて処理量が少なく高速である。また、付箋領域抽出部１０３は、特定の位置（第１の位置、第２の位置）に位置し、特定のサイズ（典型的な付箋の定形サイズ）の矩形を付箋領域Ｎ１、Ｎ２として抽出すればよい。このため、例えば事前に抽出すべき付箋領域を詳細に登録しておく必要が無い。

（２）本実施形態によれば、画像マッチング部１１１は、第２のページの原稿画像とオリジナル読取画像とをマッチングして、オリジナル読取画像の第２のページを判断する（ステップＳ１１１）。マスク後の原稿画像とオリジナル読取画像とをマッチングすることにより、画像マッチング部１１０は、オリジナル読取画像の複数のページのうち、何れのページが第２のページであるか判断できる確実性が高い。また、インデックス名生成部１０７は、第１の位置と異なる第２の位置に位置する第２の付箋領域Ｎ２に含まれる第２の文字Ｔ２を含むインデックス名を生成する（ステップＳ１０７）。ファイル生成部１０９は、インデックスページ及びオリジナル読取画像を含む電子ファイルを生成する（ステップＳ１０９）。これにより、ユーザーにとっては、インデックス名にすべき文字を付箋に記載し、原稿の特定の位置に付箋を貼付し、付箋を添付したページを画像読取部１２に読み取らせるだけで、ファイル生成部１０９により、所望のインデックス名に付箋が貼付された第２のページへのリンク情報が紐づけられたインデックスページを有する電子ファイルを生成することができる（ステップＳ１０７）。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、付箋を添付する原稿中の位置だけを意識すればよいので、ユーザーの面倒が無くユーザーフレンドリーである。また、第１の位置と第２の位置とは異なるため、付箋にファイル名として記載した文字が誤ってインデックス名になったり、逆に、付箋にインデックス名として記載した文字が誤ってファイル名になることが防止される。

（３）本実施形態によれば、付箋領域抽出部１０３は、原稿領域Ｄ１の第１の辺Ｅ１（例えば、上辺）との距離が第１の閾値より小さい第１の位置に位置する第１の付箋領域Ｎ１を抽出する（ステップＳ１０３）。これにより、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定の位置（上辺の近くなど、ファイル名を記載した付箋を通常貼付するような位置）に付箋を貼付し、付箋を添付したページを画像読取部１２に読み取らせるだけで、ファイル生成部１０９により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる（ステップＳ１０９）。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、上辺の近くなど、ファイル名を記載した付箋を通常貼付するような位置に、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

（４）本実施形態によれば、付箋領域抽出部１０３は、第１の読取画像Ｉ１の特定のページ（典型的には、１ページ目）から、第１の付箋領域Ｎ１を抽出する（ステップＳ１０３）。これにより、ユーザーにとっては、ファイル名にすべき文字を付箋に記載し、原稿の特定のページ（１ページ目など、ファイル名を記載した付箋を通常貼付するようなページ）に付箋を貼付し、付箋を添付したページを画像読取部１２に読み取らせるだけで、ファイル生成部１０９により所望のファイル名を有するオリジナル読取画像の電子ファイルを生成することができる（ステップＳ１０９）。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、１ページ目など、ファイル名を記載した付箋を通常貼付するようなページに、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

（５）本実施形態によれば、付箋領域抽出部１０３は、原稿領域の第１の辺Ｅ１と異なる第２の辺Ｅ２との距離が第２の閾値より小さい位置である第２の位置に位置する第２の付箋領域Ｎ２を抽出する（ステップＳ１０３）。これにより、ユーザーにとっては、インデックス名にすべき文字を付箋に記載し、原稿の特定の位置（右辺の近くなど、インデックス名を記載した付箋を通常貼付するような位置）に付箋を貼付し、付箋を添付したページを画像読取部１２に読み取らせるだけで、ファイル生成部１０９により、所望のインデックス名に付箋が貼付された第２のページへのリンク情報が紐づけられたインデックスページを有する電子ファイルを生成することができる（ステップＳ１０９）。特に、ユーザーにとっては、例えば付箋の種類（色や形等）を区別すること無く、右辺の近くなど、インデックス名を記載した付箋を通常貼付するような位置に、付箋を貼付すればよいので、直感的に使い勝手がよくユーザーフレンドリーである。

（６）本実施形態によれば、付箋領域抽出部１０３は、第１の位置及び第２の位置以外に位置する付箋領域を抽出しない（ステップＳ１０３）。これにより、原稿画像生成部１０５は、付箋領域抽出部１０３が抽出しなかった、特定の位置（第１の位置、第２の位置）以外に位置する付箋領域は、マスクしない（ステップＳ１０５）。これにより、ユーザーが通常使用する付箋が誤ってマスクされてしまうことを防止できる。また、ユーザーは、画像の読取（スキャン）の前に、通常使用する付箋を外す必要が無いので、使い勝手がよくユーザーフレンドリーである。

（７）本実施形態によれば、画像処理装置は、画像読取部を有する画像形成装置を用いて実現可能であるし、画像読取部を有さない情報処理装置を用いても実現可能である。後者の場合、情報処理装置は、典型的には、ネットワークを介して、近距離無線通信により、又はＵＳＢ接続を介して、画像読取部を有する画像形成装置から読取画像を取得すればよい。

本技術の各実施形態及び各変形例について上に説明したが、本技術は上述の実施形態にのみ限定されるものではなく、本技術の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。

画像形成装置１０
原稿画像取得部１０１
原稿領域抽出部１０２
付箋領域抽出部１０３
文字判断部１０４
原稿画像生成部１０５
ファイル名生成部１０６
インデックス名生成部１０７
インデックスページ生成部１０８
ファイル生成部１０９
画像マッチング部１１０

Claims (9)

1. 画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得する読取画像取得部と、
   前記第１の読取画像から、前記原稿の領域である原稿領域を抽出する原稿領域抽出部と、
   前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出する付箋領域抽出部と、
   前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断する文字判断部と、
   前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成する原稿画像生成部と、
   前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断する画像マッチング部と、
   前記第１の文字を含むファイル名を生成するファイル名生成部と、
   前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成するファイル生成部
   として動作する制御回路を有する
   画像処理装置。
2. 請求項１に記載の画像処理装置であって、
   前記読取画像取得部は、前記画像読取部が、第２の文字が記載された第２の付箋が貼付された前記原稿の第２のページを光学的に読み取って生成した第２の読取画像をさらに取得し、
   前記付箋領域抽出部は、前記第２の読取画像から、前記第２のページの原稿領域の前記第１の位置と異なる第２の位置に位置する前記第２の付箋の領域である第２の付箋領域を抽出し、
   前記文字判断部は、前記第２の付箋領域に含まれる前記第２の文字を光学文字認識により判断し、
   前記原稿画像生成部は、前記原稿領域に含まれる前記第２の付箋領域をマスクして前記第２のページの前記原稿画像を生成し、
   前記画像マッチング部は、前記第２のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第２のページを判断し、
   前記制御回路は、
   前記第２の文字を含むインデックス名を生成するインデックス名生成部と、
   前記インデックス名を含むページであるインデックスページを生成し、前記オリジナル読取画像の前記第２のページにリンクするためのリンク情報を生成し、前記インデックスページに含まれる前記インデックス名に前記リンク情報を紐づけるインデックスページ生成部
   としてさらに動作し、
   前記ファイル生成部は、前記インデックスページ及び前記オリジナル読取画像を含む前記電子ファイルを生成する
   画像処理装置。
3. 請求項１又は２に記載の画像処理装置であって、
   前記原稿領域抽出部は、エッジを検出することにより、矩形の前記原稿領域を抽出し、
   前記付箋領域抽出部は、前記原稿領域の第１の辺との距離が第１の閾値より小さい位置である前記第１の位置に位置する前記第１の付箋領域を抽出する
   画像処理装置。
4. 請求項１乃至３の何れか一項に記載の画像処理装置であって、
   前記原稿領域抽出部は、エッジを検出することにより、矩形の前記原稿領域を抽出し、
   前記付箋領域抽出部は、前記第１の読取画像の特定のページから、前記第１の付箋領域を抽出する
   画像処理装置。
5. 請求項２に記載の画像処理装置であって、
   前記原稿領域抽出部は、エッジを検出することにより、矩形の前記原稿領域を抽出し、
   前記付箋領域抽出部は、
   前記原稿領域の第１の辺との距離が第１の閾値より小さい位置である前記第１の位置に位置する前記第１の付箋領域を抽出し、
   前記原稿領域の前記第１の辺と異なる第２の辺との距離が第２の閾値より小さい位置である前記第２の位置に位置する前記第２の付箋領域を抽出する
   画像処理装置。
6. 請求項２又は５に記載の画像処理装置であって、
   前記付箋領域抽出部は、前記第１の位置及び前記第２の位置以外に位置する付箋領域を抽出しない
   画像処理装置。
7. 請求項１乃至６の何れか一項に記載の画像処理装置であって、
   前記画像読取部
   をさらに具備する画像処理装置。
8. 画像処理装置の制御回路を、
   画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得する読取画像取得部と、
   前記第１の読取画像から、前記原稿の領域である原稿領域を抽出する原稿領域抽出部と、
   前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出する付箋領域抽出部と、
   前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断する文字判断部と、
   前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成する原稿画像生成部と、
   前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断する画像マッチング部と、
   前記第１の文字を含むファイル名を生成するファイル名生成部と、
   前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成するファイル生成部
   として動作させる
   画像処理プログラム。
9. 読取画像取得部により、画像読取部が、１以上のページを有する原稿を光学的に読み取って生成したオリジナル読取画像と、第１の文字が記載された第１の付箋が貼付された前記原稿の第１のページを光学的に読み取って生成した第１の読取画像とを取得し、
   原稿領域抽出部により、前記第１の読取画像から、前記原稿の領域である原稿領域を抽出し、
   付箋領域抽出部により、前記第１の読取画像から、前記第１のページの前記原稿領域の第１の位置に位置する前記第１の付箋の領域である第１の付箋領域を抽出し、
   文字判断部により前記第１の付箋領域に含まれる前記第１の文字を光学文字認識により判断し、
   原稿画像生成部により、前記原稿領域に含まれる前記第１の付箋領域をマスクして前記第１のページの原稿画像を生成し、
   画像マッチング部により、前記第１のページの前記原稿画像と前記オリジナル読取画像とをマッチングして、前記オリジナル読取画像の前記第１のページを判断し、
   ファイル名生成部により前記第１の文字を含むファイル名を生成し、
   ファイル生成部により、前記ファイル名を有する前記オリジナル読取画像の電子ファイルを生成する
   画像処理方法。

Images