JP2023023593A - 画像処理装置 - Google Patents

Abstract

【課題】文字列を原稿の画像から抽出して、当該抽出と共に、この文字列に対しユーザー所望の処理を施す。【解決手段】画像形成装置１０いて、制御部３１は、画像メモリー２７に記憶されている原稿の画像を示す画像データに基づき、原稿の画像に含まれるマーキング、下線、ボックスなどの指標を判定し、指標により指定されている原稿の画像の部分を抽出して、該抽出された原稿の画像の部分における文字列を認識し、該認識された文字列に対して上記指標に対応付けられている処理を施した編集情報を上記原稿の画像から生成する。【選択図】図２

Description

本発明は、原稿の画像を入力して処理する画像処理装置に関し、特に、原稿の画像における文字列を認識して処理するための技術に関する。

画像処理装置としては、例えば複合機（ＭＦＰ）がある。このＭＦＰでは、画像読取部により原稿の画像を読取るか、又は外部から原稿の画像を受信して入力し、この原稿の画像を記録紙に印刷する。

一方、特許文献１に記載の原稿読取装置では、原稿におけるマーキングで指定された写真の領域を抽出して、この写真の画像データを電子ファイルに記憶させている。

また、特許文献２に記載のデータ保存装置では、ファイルの格納先を示す二次元コードをサーバーから送信し、この二次元コードを携帯電話機で読取らせ、ファイルと該ファイルの格納先を携帯電話機からサーバーへと送受信させて、サーバーによりファイルをその格納先に記憶させている。

特開２００９－２６０５９０号公報 特開２０１３－１８６８０４号公報

ここで、原稿の画像には、文字列（テキストなど）が含まれることがあり、この文字列を原稿の画像から抽出して、この文字列に対し、ユーザー所望の処理を抽出と共に施すことができれば、利便性が向上する。

上記特許文献１では、原稿におけるマーキングで指定された写真の領域を抽出して、この写真の画像データを電子ファイルに記憶させているが、写真の領域に対しユーザー所望の処理を施すものではない。

また、上記特許文献２では、ファイルと該ファイルの格納先を携帯電話機からサーバーへと送信させて、サーバーによりファイルをその格納先に記憶させているが、やはりファイルに対しユーザー所望の処理を施していない。

本発明は、上記の事情に鑑みなされたものであり、文字列を原稿の画像から抽出して、当該抽出と共に、この文字列に対しユーザー所望の処理を施すことを目的とする。

本発明の一局面にかかる画像処理装置は、原稿の画像を入力する画像入力部と、前記画像入力部で入力された原稿の画像に含まれる予め設定された指標を判定し、前記指標により指定されている前記原稿の画像の部分を抽出して、該抽出された原稿の画像の部分における文字列を認識し、該認識された文字列に対して前記指標に対応付けられている処理を施した編集情報を、前記原稿の画像から生成する制御部と、を備えるものである。

本発明によれば、文字列を原稿の画像から抽出して、当該抽出と共に、この文字列に対しユーザー所望の処理を施すことができる。

本発明にかかる一実施形態の画像処理装置が適用された画像形成装置を示す断面図である。 画像形成装置の主要内部構成を示す機能ブロック図である。 （Ａ）は原稿の画像における文字列に印されたマーキングを示す図であり、（Ｂ）は原稿の画像における文字列の下側に印された下線を示す図であり、（Ｃ）は原稿の画像における文字列を囲むボックスを示す図である。 表示部に表示された編集モードの設定画面を示す図ある。 表示部に表示された処理選択画面を示す図ある。 表示部に表示された別の処理選択画面を示す図ある。 指標と処理を対応付けてなるデータテーブルを概念的に示す図である。 原稿の画像を例示する図である。 原稿の画像を示す画像データに基づき原稿の画像から編集情報を生成して記憶させるための制御手順を示すフローチャートである。 （Ａ）はボックスの部分により小さな２つのボックスの部分が含まれている状態を示す図であり、（Ｂ）はボックスの部分にマーキングの部分が含まれている状態を示す図である。 図８の原稿の画像から生成された編集情報を例示する図である。

以下、本発明の実施形態について図面を参照して説明する。

図１は、本発明にかかる一実施形態の画像処理装置が適用された画像形成装置を示す断面図である。この画像形成装置１０は、例えばコピー機能、プリンター機能、ファクシミリ機能のような複数の機能を兼ね備えたＭＦＰ（複合機）である。この画像形成装置１０は、画像読取部１１と、画像形成部１２とを備えている。

画像読取部１１は、原稿の画像を光学的に読み取る撮像素子を有しており、この撮像素子のアナログ出力がデジタル信号に変換されて、原稿の画像を示す画像データが生成される。

画像形成部１２は、上記画像データによって示される画像を記録紙に形成するものであり、マゼンタ用の画像形成ユニット３Ｍ、シアン用の画像形成ユニット３Ｃ、イエロー用の画像形成ユニット３Ｙ、及びブラック用の画像形成ユニット３Ｂｋを備えている。各画像形成ユニット３Ｍ、３Ｃ、３Ｙ、及び３Ｂｋのいずれにおいても、感光体ドラム４の表面を均一帯電させ、感光体ドラム４の表面を露光して、感光体ドラム４の表面に静電潜像を形成し、感光体ドラム４の表面の静電潜像をトナー像に現像して、感光体ドラム４の表面のトナー像を中間転写ベルト５に１次転写する。これにより、カラーのトナー像が中間転写ベルト５上に形成される。このカラーのトナー像は、中間転写ベルト５と２次転写ローラー６の間のニップ域Ｎにおいて給紙部１４から搬送路８を通じて搬送されてきた記録紙Ｐに２次転写される。

この後、定着装置１５で記録紙Ｐが加熱及び加圧されて、記録紙Ｐ上のトナー像が熱圧着により定着され、更に記録紙Ｐが排出ローラー１６を通じて排出トレイ１７に排出される。

次に、画像形成装置１０の制御に係る構成について説明する。図２は、画像形成装置１０の主要内部構成を示す機能ブロック図である。図２に示すように画像形成装置１０は、画像読取部１１と、画像形成部１２と、表示部２１と、操作部２２と、タッチパネル２３と、ＵＳＢコネクタ２４と、ネットワーク通信部２５と、ファクシミリ通信部２６と、画像メモリー２７と、記憶部２８と、制御ユニット２９とを備えている。これらの構成要素は、互いにバスを通じてデータ又は信号の送受信が可能とされている。

表示部２１は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）ディスプレイなどから構成される。操作部２２は、テンキー、決定キー、スタートキーなどの物理キーを備えている。操作部２２は、ユーザーによる操作に基づく各種の指示を受け付ける。操作部２２は、特許請求の範囲における操作部として機能する。

表示部２１の画面には、タッチパネル２３が配置されている。タッチパネル２３は、所謂抵抗膜方式や静電容量方式などのタッチパネルであって、タッチパネル２３に対するユーザーの指などの接触（タッチ）をその接触位置とともに検知して、その接触位置の座標を示す検知信号を制御ユニット２９の後述する制御部３１などに出力する。タッチパネル２３も、特許請求の範囲における操作部として機能する。

ＵＳＢコネクタ２４は、ＵＳＢ規格に基づく接続端子であり、ＵＳＢメモリーに接続されたり、ＵＳＢケーブルを通じて端末装置に接続されたりする。

ネットワーク通信部（ＮＷ通信部）２５は、不図示のＬＡＮチップなどの通信モジュールを備える通信インターフェイスであり、有線又は無線ＬＡＮを通じて他の端末装置と接続され、他の端末装置との間でデータの送受信を行う。

ファクシミリ通信部（ＦＡＸ通信部）２６は、例えばファクス機能を有するモデムＰＣＩボードであり、画像を示す画像データを、ネットワークを通じて他の画像形成装置やファクシミリ装置などとの間で送受信する。

画像メモリー２７には、画像読取部１１により読取られた原稿の画像を示す画像データ、あるいは外部の端末装置から送信されてネットワーク通信部２５で受信された原稿の画像を示す画像データなどが記憶される。

記憶部２８は、ＳＳＤ（Solid State Drive）又はＨＤＤ（Hard Disk Drive）などの大容量の記憶装置であって、各種のアプリケーションプログラムや種々のデータを記憶している。

制御ユニット２９は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、例えばＣＰＵ（Central Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）、又はＭＰＵ（Micro Processing Unit）等である。制御ユニット２９は、上記のＲＯＭ又は記憶部２８に記憶された制御プログラムが上記のプロセッサーで実行されることにより、制御部３１として機能する。

制御部３１は、画像形成装置１０を統括的に制御する。制御ユニット２９は、画像読取部１１、画像形成部１２、表示部２１、操作部２２、タッチパネル２３、ＵＳＢコネクタ２４、ネットワーク通信部２５、ファクシミリ通信部２６、画像メモリー２７、及び記憶部２８などと接続されている。制御部３１は、これらの構成要素の動作制御や、該各構成要素との間での信号またはデータの送受信を行う。

制御部３１は、画像形成装置１０による画像形成に必要な各種の処理などを実行する処理部としての役割を果たす。

また、制御部３１は、タッチパネル２３から出力される検知信号あるいは操作部２２の物理キーの操作に基づき、ユーザーにより入力された操作指示を受け付ける。例えば、制御部３１は、タッチパネル２３を通じて表示部２１の画面に表示されているＧＵＩ（Graphical User Interface）などに対するタッチ操作を受け付ける。

更に、制御部３１は、表示部２１の表示動作を制御する機能、ネットワーク通信部２５及びファクシミリ通信部２６の通信動作を制御する機能を有する。

このような構成の画像形成装置１０において、例えば、ユーザーが、原稿を画像読取部１１にセットし、操作部２２のスタートキーを操作すると、操作部２２が画像形成指示を受け付け、制御部３１は、この画像形成指示に従って、画像読取部１１により原稿の画像を読取らせて、原稿の画像を示す画像データを画像メモリー２７に一旦記憶させ、画像データを画像形成部１２に入力させて、画像形成部１２より原稿の画像を記録紙に形成させる。

また、外部の端末装置から送信された原稿の画像を示す画像データがネットワーク通信部２５で受信されると、制御部３１は、その受信された画像データを画像メモリー２７に一旦記憶させ、画像データを画像形成部１２に入力させて、画像形成部１２より原稿の画像を記録紙に形成させる。

また、制御部３１は、画像形成装置１０の各機構により、原稿の画像に含まれる文字列を認識して編集する動作を行わせる編集モードを有している。制御部３１は、編集モードが設定されている場合に、画像メモリー２７に記憶されている原稿の画像を示す画像データに基づき、原稿の画像に含まれる予め設定された指標を判定し、この指標により指定されている原稿の部分を抽出して、該抽出された原稿の部分における文字列を認識し、該認識された文字列に対して該指標に対応付けられている処理を施して、原稿の画像から編集情報を生成する。

その指標としては、例えば図３（Ａ）に示すように原稿Ｍの画像における文字列Ｃに印されたマーキングＭＫ、図３（Ｂ）に示すように原稿Ｍの画像における文字列Ｃの下側に印された下線ＵＬ、図３（Ｃ）に示すように原稿Ｍの画像における文字列Ｃを囲むボックスＢＸがある。

指標に対応付ける処理としては、文字列Ｃの収集、文字列Ｃの除外、文字列Ｃの収集及び除外により生成される編集情報の記憶、などである。

ここで、ユーザーによる表示部２１の画面に表示されているＧＵＩなどの操作に基づいて、編集モードの設定画面の表示指示がタッチパネル２３に入力されると、制御部３１は、タッチパネル２３から受け付けた当該表示指示に従って、編集モードの設定画面を表示部２１に表示させる。

例えば、表示部２１には、図４に示すような編集モードの設定画面Ｇ１が表示される。この図４に示す設定画面Ｇ１には、マーキングＭＫを示すマーキングキーＫ１１、下線ＵＬを示す下線キーＫ１２、及びボックスＢＸを示すボックスキーＫ１３が表示されている。

ユーザーは、この編集モードの設定画面において、設定を行う対象として、マーキングＭＫ、下線ＵＬ、及びボックスＢＸのうちの少なくとも１つを選択する。

このとき、例えばユーザーがマーキングキーＫ１１及びボックスキーＫ１３にタッチ操作すると、制御部３１は、タッチパネル２３を通じて、マーキングキーＫ１１によって示されるマーキングＭＫ、及びボックスキーＫ１３によって示されるボックスＢＸを、ユーザーが利用する指標として選択する指示を受け付ける。制御部３１は、この指示に従って、選択されたマーキングＭＫ及びボックスＢＸに、それぞれの処理を対応付ける選択を受け付けるための処理選択画面を表示部２１に表示させる。

例えば、表示部２１には、図５に示すような指標を任意の処理に対応付けるための処理選択画面Ｇ２が表示される。この図５に示す処理選択画面Ｇ２には、上記選択されたマーキングＭＫに対応付けられる処理を選択するためのウインドウＷ１、上記選択されたボックスＢＸに対応付けられる処理を選択するためのウインドウＷ２が表示される。

ウインドウＷ１では、マーキングＭＫが印された文字列Ｃの収集を選択するための収集キーＫ２１、及びマーキングＭＫが印された文字列Ｃの除外を選択するための除外キーＫ２２が表示される。制御部３１は、ユーザーによる収集キーＫ２１及び除外キーＫ２２の操作によりタッチパネル２３を介して、収集キーＫ２１の操作に対しては文字列Ｃを収集する指示を受け付け、除外キーＫ２２の操作に対しては文字列Ｃを除外する指示を受け付ける。なお、ウインドウＷ１には、除外キーＫ２２のタッチ操作により文字列Ｃの除外が選択されたときの表示状態を示している。なお、制御部３１は、収集キーＫ２１のタッチ操作により文字列Ｃの収集の選択を受け付けている場合、文字列Ｃが収集されてなる編集情報の記憶先としてＵＳＢ又は記憶部などを選択するためのそれぞれのキー（図示せず）を処理選択画面Ｇ２に表示させる。

ウインドウＷ２では、ボックスＢＸで囲まれる文字列Ｃの収集を選択するための収集キーＫ３１、及びボックスＢＸで囲まれる文字列Ｃの除外を選択するための除外キーＫ３２が表示される。制御部３１は、ユーザーによる収集キーＫ３１及び除外キーＫ３２の操作によりタッチパネル２３を介して、収集キーＫ３１の操作に対しては文字列Ｃを収集する指示を受け付け、除外キーＫ３２の操作に対しては文字列Ｃを除外する指示を受け付ける。なお、ウインドウＷ２には、除外キーＫ３２のタッチ操作により文字列Ｃの収集が選択されたときの表示状態を示している。ウインドウＷ２では、制御部３１が、収集キーＫ３１のタッチ操作により文字列Ｃの収集の選択を受け付けており、文字列Ｃが収集されてなる編集情報の記憶先としてＵＳＢ、記憶部２８、又は外部のストレージを選択するための各キーＫ３３、Ｋ３４、Ｋ３５を表示している状態を示している。

キーＫ３３は、ＵＳＢコネクタ２４に接続されたＵＳＢメモリーを記憶先とする指示を受け付けるためのものである。キーＫ３４は、記憶部２８を記憶先とする指示を受け付けるためのものである。キーＫ３５は、ネットワーク通信部２５を通じて画像形成装置１０と接続される外部のストレージを記憶先とする指示を受け付けるためのものである。制御部３１は、各キーＫ３３、Ｋ３４、Ｋ３５のいずれかに対するタッチ操作に応じて受け付ける指示に従って、編集情報をＵＳＢメモリー、記憶部２８、及び外部のストレージのいずれかに記憶させる。

更に、制御部３１は、ウインドウＷ２の各キーＫ３３、Ｋ３４、Ｋ３５のいずれかに対するタッチ操作に基づいて、編集情報の記憶先を指定する指示を受け付けてたとき、図６に例を示すような、別の処理選択画面Ｇ３を表示させる。この別の処理選択画面Ｇ３にはウインドウＷ３が表示される。ウインドウＷ３には、編集情報のファイル形式を選択するためのテキストボックスＴＢ１、及び原稿の画像の処理範囲を示すテキストボックスＴＢ２が表示されている。

制御部３１は、ユーザーによる操作部２２の操作で入力された、編集情報のファイル形式としてのテキスト形式又はＣＳＶ形式を、記憶部２８のデータテーブルＤＴに指標と対応付けて登録すると共に、テキストボックスＴＢ１に表示させる。また、制御部３１は、ユーザーによる操作部２２の操作で入力された、原稿画像の処理範囲を、記憶部２８のデータテーブルＤＴに指標と対応付けて登録すると共に、テキストボックスＴＢ２に表示させる。

このように、設定画面Ｇ１、処理選択画面Ｇ２、処理選択画面Ｇ３に対するユーザーによる操作に基づいて、制御部３１が、原稿Ｍの画像に印されている指標の選択、選択された指標に対応付ける処理の選択を受け付けたとき、制御部３１は、その選択された指標、この選択された指標に対応付ける処理を示すデータテーブルを作成して記憶部２８に記憶させる。例えば、図７に示すようなデータテーブルＤＴが作成されて記憶部２８に記憶される。この図７に示すデータテーブルＤＴは、マーキングＭＫ及びボックスＢＸが登録され、マーキングＭＫに対応付けて除外が設定され、またボックスＢＸに対応付けて収集、記憶先のＵＳＢ、及びファイル形式（ｔeｘt又はｃｓｖ）が設定された例を示している。なお、制御部３１は、マーキングＭＫを、色の種別と共に登録する。

データテーブルＤＴが作成されて記憶部２８に記憶されている状態で、制御部３１が、画像読取部１１により原稿の画像を読取らせて原稿の画像を示す画像データを画像メモリー２７に記憶させるか、又は、外部の端末装置から送信されてきた原稿の画像を示す画像データがネットワーク通信部２５で受信されて当該画像データが画像メモリー２７に記憶されたとき、制御部３１は、画像メモリー２７に記憶されている原稿の画像を示す画像データに基づき、データテーブルＤＴにおける指標を参照して、原稿の画像に含まれる指標を判定し、この指標により指定されている原稿の部分を抽出して、該抽出された原稿の部分における文字列を認識し、該認識された文字列に対して、データテーブルＤＴにおけるその指標に対応付けられている処理を施して、原稿の画像から編集情報を生成し、この編集情報を記憶先に記憶させる。

次に、図８に示す原稿Ｍを例に挙げて、上記のように原稿Ｍの画像を示す画像データに基づき原稿の画像から編集情報を生成して記憶させる処理を、図９に示すフローチャートを参照して説明する。

図８に示すように原稿Ｍの画像は、複数の縦線と複数の横線からなる表Ｈを含む。この表Ｈは、行列方向に並べられた複数のボックスＢＸからなる。各ボックスＢＸには、それぞれの文字列Ｃ１～Ｃ２１が記入されている。また、各文字列Ｃ２０、Ｃ２１には、マーキングＭＫが印されている。

制御部３１による制御の下、画像読取部１１により図８に示す原稿Ｍの画像が読取られて、原稿Ｍの画像を示す画像データが画像メモリー２７に記憶されるか、又は原稿Ｍの画像を示す画像データがネットワーク通信部２５で受信されて、この画像データが画像メモリー２７に記憶される（Ｓ１０１）。

そして、制御部３１は、記憶部２８に記憶されているデータテーブルＤＴから、登録されている指標、ここではマーキングＭＫ及びボックスＢＸを読み出す。更に制御部３１は、原稿Ｍの画像を示す画像データに基づき、原稿Ｍの画像に含まれるマーキングＭＫ及びボックスＢＸを判定して、これらのマーキングＭＫ及びボックスＢＸにより指定されているそれぞれの部分を当該画像データから抽出する（Ｓ１０２）。制御部３１は、登録されているマーキングＭＫと同一色の部分をマーキングＭＫとして判定し、この部分を抽出する。また、制御部３１は、原稿Ｍの画像における一対の縦線と一対の横線で区分されて囲まれた部分をボックスＢＸと判定し、判定した各ボックスＢＸを抽出する。

制御部３１は、Ｓ１０２で抽出された指標により指定されている部分毎に、当該部分の中に更に他の指標により指定されている部分があるかを判定する（Ｓ１０３）。

制御部３１は、当該部分の中に更に他の指標により指定されている部分が含まれていないと判定したときは（Ｓ１０３「Ｎｏ」）、Ｓ１０２で抽出された部分そのものの画像データを取得する（Ｓ１０５）。

また、制御部３１は、当該部分の中に更に他の指標により指定されている部分が含まれていると判定した場合は（Ｓ１０３「Ｙｅｓ」）、Ｓ１０２で抽出された指標により指定されている部分を無効とし、この無効とした部分の代わりに、他の指標により指定されている部分を有効にして（Ｓ１０４）、Ｓ１０３に戻る。そして、制御部３１は、当該更に他の指標により指定されている部分の中に更に別の指標により指定されている部分が含まれるか否かを判定する（Ｓ１０３）。制御部３１は、更に別の指標により指定されている部分が含まれていないと判定したきとは（Ｓ１０３「Ｎｏ」）、Ｓ１０４で有効にされた他の指標により指定されている部分を取得する（Ｓ１０５）。また、制御部３１は、更に別の指標により指定されている部分が含まれていると判定すると（Ｓ１０３「Ｙｅｓ」）、Ｓ１０４、Ｓ１０３を繰り返す。すなわち、制御部３１は、それまで抽出した部分に差し替えて、新たに抽出した部分を有効にする。

Ｓ１０２では、例えば、制御部３１は、ボックスＢＸで囲まれる部分を抽出した場合に（Ｓ１０２）、この部分の中に、更なる指標、例えば、より小さな他のボックスＢＸの部分が含まれているか否かを判定し（Ｓ１０３）、より小さな他のボックスＢＸの部分が含まれていないと判定した場合に（Ｓ１０３「Ｎｏ」）、Ｓ１０２で抽出されたボックスＢＸで囲まれる部分を取得する（Ｓ１０５）。

また、制御部３１は、Ｓ１０２で抽出した部分の中に更に、より小さな他のボックスＢＸの部分が含まれていると判定した場合は（Ｓ１０３「Ｙｅｓ」）、当該より小さな他のボックスＢＸの部分を抽出して（Ｓ１０４）、この抽出されたボックスＢＸの部分の中に、更なる指標、例えば更に小さな別のボックスＢＸの部分が含まれるか否かを判定する（Ｓ１０３）。制御部３１は、ボックスＢＸの部分により小さな別のボックスＢＸが含まれないと判定した場合に（Ｓ１０３「Ｎｏ」）、Ｓ１０４で抽出されたボックスＢＸで囲まれる部分を取得する（Ｓ１０５）。

図１０（Ａ）に例を示す。この例では、制御部３１は、太線で示されるボックスＢＸ１１の部分について、その中により小さな２つのボックスＢＸ２１、ＢＸ２２の部分が含まれると判定し（Ｓ１０３「Ｙｅｓ」）、各ボックスＢＸ２１、ＢＸ２２の部分を抽出する（Ｓ１０４）。そして、制御部３１は、各ボックスＢＸ２１、ＢＸ２２の部分については、更に小さな２つのボックスＢＸの部分が含まれないと判定し（Ｓ１０３「Ｎｏ」）、Ｓ１０４で抽出された各ボックスＢＸ２１、ＢＸ２２の部分を取得される（Ｓ１０５）。

また、図１０（Ｂ）に示す例では、制御部３１は、ボックスＢＸ３１の部分については、その中に更に、マーキングＭＫの部分が含まれると判定する（Ｓ１０３「Ｙｅｓ」）。そして、制御部３１は、マーキングＭＫの部分を抽出し（Ｓ１０４）、更にマーキングＭＫの部分については、その中には更なる小さなボックスＢＸ又はマーキングＭＫの部分が含まれないと判定して（Ｓ１０３「Ｎｏ」）、Ｓ１０４で抽出されたマーキングＭＫの部分を取得する（Ｓ１０５）。

このようにして、原稿Ｍの画像における各ボックスＢＸの部分及び各マーキングＭＫの部分が取得される（Ｓ１０５）。

そして、制御部３１は、Ｓ１０５で原稿Ｍの画像における各指標の部分を取得する際に、原稿Ｍの画像における該各指標の部分の行列方向の位置を判定しておき、該各指標の部分の行列方向の位置に基づき、該各指標の部分の選択順を設定する（Ｓ１０６）。例えば、各指標の部分の行列方向の位置に基づき、１列目の左側から右側へと各指標の部分の順番を設定していき、次に２列目の左側から右側へと各指標の部分の順番を設定し、以降同様に、次の列の左側から右側へと各指標の部分の順番を設定していく、という各指標の部分の順番を設定する。

制御部３１は、Ｓ１０６で設定した、原稿Ｍの画像における各指標の部分の順番を記憶する（Ｓ１０７）。続いて、制御部３１は、画像メモリー２７に記憶されている原稿Ｍの画像を示す画像データに基づき、各指標の部分を、周知のＯＣＲ（Optical Character Recognition）機能により解析して、この部分における文字列Ｃを認識する（Ｓ１０８）。そして、制御部３１は、その抽出した各指標の部分について、指標に対応付けられている収集又は除外を記憶部２８に記憶されているデータテーブルＤＴから取得し、収集又は除外をその認識した文字列Ｃに施す（Ｓ１０９）。制御部３１は、この収集又は除外を行った各指標の部分における文字列Ｃを用いて、Ｓ１０７で記憶した順番に並べて、編集情報を生成する（Ｓ１１０）。

更に、制御部３１は、各指標の部分について、ユーザーにより指定されているファイル形式及び記憶先を記憶部２８に記憶されているデータテーブルＤＴから読み出して取得し、上記生成した編集情報をその取得されたファイル形式（テキスト形式又はＣＳＶ形式）のファイルに変換し（Ｓ１１３）、更に、当該ファイル形式が変換された、編集情報を格納するファイルを、上記読み出した記憶先（ＵＳＢメモリー、記憶部２８、又は外部のストレージ）に記憶させる（Ｓ１１４）。この後、処理は終了する。

例えば、図８に示す原稿Ｍの画像の場合、制御部３１により、原稿Ｍの画像における各ボックスＢＸの部分が順次選択されて、各ボックスＢＸの部分の文字列Ｃ１～Ｃ１９が認識され、各ボックスＢＸの部分の文字列Ｃ１～Ｃ１９に対して、各ボックスＢＸに対応付けられている収集が施されて、各ボックスＢＸの部分の文字列Ｃ１～Ｃ１９が編集情報に順次追加される。また、原稿Ｍの画像における各マーキングＭＫの部分が順次選択されて、各マーキングＭＫの部分の文字列Ｃ２０、Ｃ２１が認識され、各マーキングＭＫの部分の文字列Ｃ２０、Ｃ２１に対して、各マーキングＭＫに対応付けられている除外が施されて、各マーキングＭＫの部分の文字列Ｃ２０、Ｃ２１が編集情報に追加されない。これにより、図１１に示すような編集情報ＨＤが生成される。この編集情報ＨＤがテキスト形式又はＣＳＶ形式のファイルに変換されて、このファイルがＵＳＢメモリー、記憶部２８、又は外部のストレージに記憶される。

このように本実施形態では、原稿Ｍの画像を示す画像データに基づき、原稿Ｍの画像に含まれるマーキングＭＫ、下線ＵＬ、ボックスＢＸなどの指標を判定し、この指標により指定されている原稿Ｍの部分を抽出して、この抽出された原稿Ｍの部分における文字列Ｃを認識し、この認識された文字列Ｃに対して指標に対応付けられている収集、除去などの処理を施して、原稿Ｍの画像から編集情報を生成しているので、原稿Ｍの画像を簡単に編集することができ、利便性が向上する。

なお、上記実施形態では、マーキングＭＫが印された文字列Ｃの除外を選択すると共に、ボックスＢＸで囲まれる文字列Ｃの収集を選択しているが、マーキングＭＫが印された文字列Ｃの収集又は除外、ボックスＢＸで囲まれる文字列Ｃの収集又は除外、及び下線ＵＬが印された文字列Ｃの収集又は除外を適宜組み合わせても構わない。この場合、マーキングＭＫ、ボックスＢＸ、及び下線ＵＬをデータテーブルＤＴに設定し、マーキングＭＫ、ボックスＢＸ、及び下線ＵＬに対応付けて収集又は除外をデータテーブルＤＴに登録し、更にマーキングＭＫ、ボックスＢＸ、及び下線ＵＬのいずれかに対応付けてファイル形式及び記憶先をデータテーブルＤＴに登録しておく。制御部３１は、データテーブルＤＴに登録されているマーキングＭＫ、ボックスＢＸ、及び下線ＵＬと収集又は除外の対応関係に基づき、マーキングＭＫ、ボックスＢＸ、及び下線ＵＬが印されたそれぞれの文字列Ｃに対して収集又は除外の処理を施して、この処理の度に、編集情報を生成又は更新し、編集情報をデータテーブルＤＴに登録されているファイル形式のファイルに変換して、このファイルをデータテーブルＤＴに登録されている記憶先に記憶させる。

また、本発明は、上記実施形態の画像形成装置に限定されるものではなく、画像読取部を備えるコピー機やファクシミリ装置、あるいはＰＣ、スキャナーなどを組み合わせてなるシステムに適用することも可能である。

また、図１乃至図１１を用いて説明した上記実施形態の構成及び処理は、本発明の一例に過ぎず、本発明を当該構成及び処理に限定する趣旨ではない。

１０ 画像形成装置
１１ 画像読取部
１２ 画像形成部
２１ 表示部
２２ 操作部
２３ タッチパネル
２４ ＵＳＢコネクタ
２５ ネットワーク通信部
２６ ファクシミリ通信部
２７ 画像メモリー
２８ 記憶部
２９ 制御ユニット
３１ 制御部

Claims (8)

1. 原稿の画像を入力する画像入力部と、
   前記画像入力部で入力された原稿の画像に含まれる予め設定された指標を判定し、前記指標により指定されている前記原稿の画像の部分を抽出して、該抽出された原稿の画像の部分における文字列を認識し、該認識された文字列に対して前記指標に対応付けられている処理を施した編集情報を、前記原稿の画像から生成する制御部と、を備える画像処理装置。
2. ユーザーによる操作に基づく指示を受け付ける操作部を備え、
   前記制御部は、前記指標に対応付けられている処理として、前記操作部に受け付けられた指示に従って収集又は除外を設定し、前記指標により指定されている前記原稿の画像の部分を抽出して、該抽出された原稿の画像の部分における文字列を認識すると、前記指示に従って前記文字列を収集又は除外して、前記編集情報を生成する請求項１に記載の画像処理装置。
3. 前記制御部は、前記指標に対応付けられている更なる処理として、前記操作部に指定が受け付けられた記憶先を設定して、前記編集情報を前記記憶先に記憶させる請求項２に記載の画像処理装置。
4. 前記指標は、前記原稿の部分に記されたマーキングであり、
   前記制御部は、前記画像入力部で入力された原稿の画像に含まれる前記マーキングを抽出し、前記マーキングが印されている前記原稿の画像の部分を抽出する請求項１乃至請求項３のいずれかに記載の画像処理装置。
5. 前記指標は、前記原稿の部分に記された下線であり、
   前記制御部は、前記画像入力部で入力された原稿の画像に含まれる前記下線を抽出し、前記下線が印されている前記原稿の画像の部分を抽出する請求項１乃至請求項３のいずれかに記載の画像処理装置。
6. 前記指標は、前記原稿の部分を囲むボックスであり、
   前記制御部は、前記画像入力部で入力された原稿の画像に含まれる前記ボックスを抽出し、前記ボックスで囲まれた前記原稿の画像の部分を抽出する請求項１乃至請求項３のいずれかに記載の画像処理装置。
7. 前記制御部は、前記原稿に含まれる複数種の前記指標を抽出したとき、前記抽出した指標毎に、指標により指定されている前記原稿の部分を抽出して、該抽出された原稿の部分における文字列を認識し、該認識された文字列に対して該指標のそれぞれに対応付けられているそれぞれの処理を施して、前記原稿の画像から編集情報を生成する請求項１乃至請求項６のいずれかに記載の画像処理装置。
8. 前記制御部は、前記原稿に含まれる前記指標を抽出したとき、前記指標により指定されている前記原稿の部分の中に、更に指標により指定されている部分があるかを判定し、当該更に指標により指定されている部分があると判定したときは、先に抽出した前記指標により指定されている前記原稿の部分に代えて、当該更に指標により指定されている部分を、前記文字列を認識する処理の対象とする、請求項１乃至請求項７いずれかに記載の画像処理装置。

Images