JP2008271462A - 画像読取装置、画像読取方法および画像読取プログラム - Google Patents

Abstract

【課題】 電子ペーパに追記された手書文字を容易に検出する。
【解決手段】 ＭＦＰは、画像を読み取り画像データを出力する画像読取部と、電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換える電子ペーパ通信部と、電子ペーパを非表示状態に切換えた後に（Ｓ０３）、原稿読取部に電子ペーパの画像を読み取らせ（Ｓ０６）、原稿読取部が出力する第１画像データを取得する第１画像データ取得部（Ｓ０７）と、を備える。
【選択図】 図１１

Description

この発明は、画像読取装置、画像読取方法および画像読取プログラムに関し、特に電子ペーパに表示された画像を読み取る画像読取装置、その画像読取装置で実行される画像読取方法および画像読取プログラムに関する。

近年、電子ペーパが普及しつつある。電子ペーパは、無電源で画像を表示保持することが可能な表示装置である。この電子ペーパは、紙媒体と異なり、画像の表示と消去を繰り返すことが可能であり、さらに、手書きで文字などを追記することができ、紙資源の節約等の観点から利用促進が望まれている。

また、従来、画像が印刷された用紙に手書された文字の画像を抽出する技術が開発されている。特開２００５−０７４７２４号公報（特許文献１）および特開２００６−０９９５５９号公報（特許文献２）には、原稿をプリントする時点の画像データを予め記憶しておき、手書文字を追記した後の原稿を読み取って得られる画像データとプリント時点の画像データとの差分から手書文字を抽出する技術が記載されている。

しかしながら従来の技術では、手書の文字が追記される前後の２つの画像を比較することにより用紙に手書された文字の画像を抽出するので、画像を処理するための処理量が多く長い時間を要し、また、手書文字を抽出する精度が悪いといった問題があった。
特開２００５−０７４７２４号公報 特開２００６−０９９５５９号公報

この発明は上述した問題点を解決するためになされたもので、この発明の目的の１つは、電子ペーパに追記された手書文字を容易に検出することが可能な画像読取装置を提供することである。

この発明の他の目的は、電子ペーパに追記された手書文字を容易に検出することが可能な画像読取方法および画像読取プログラムを提供することである。

上述した目的を達成するためにこの発明のある局面によれば、画像読取装置は、画像を読み取り画像データを出力する読取手段と、電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換える電子ペーパ制御手段と、電子ペーパを非表示状態に切換えた後に読取手段に電子ペーパの画像を読み取らせ、読取手段が出力する第１画像データを取得する第１画像データ取得手段と、を備える。

この局面に従えば、電子ペーパを非表示状態に切換えた後に電子ペーパの画像を読み取って第１画像データが取得される。このため、電子ペーパに追記された手書文字を容易に検出することが可能な画像読取装置を提供することができる。

好ましくは、電子ペーパと通信する通信手段をさらに備え、電子ペーパ制御手段は、通信手段に電子ペーパと通信させることにより、表示状態と非表示状態とのいずれかに切換える。

好ましくは、電子ペーパ制御手段は、第１画像データが取得された後に、電子ペーパを非表示状態から表示状態に切換える。

好ましくは、電子ペーパが表示状態にあるときに読取手段に電子ペーパの画像を読み取らせ、読取手段が出力する第２画像データを取得する第２画像データ取得手段と、取得された第１画像データに基づいて文字認識する文字認識手段と、認識された文字に対応して予め記憶された画像に置き換えた第３画像データを生成する第３画像データ生成手段と、第２画像データから第１画像データを差し引いた第４画像データと第３画像データとを合成した第５画像データを生成する合成手段と、生成された第５画像データを出力する出力手段と、をさらに備える。

この局面に従えば、電子ペーパが表示状態にあるときに電子ペーパの画像を読み取って第２画像データが取得され、第１画像データから認識された文字に対応して予め記憶された画像に置き換えた第３画像データが生成され、第２画像データから第１画像データを差し引いた第４画像データと第３画像データとが合成され、出力される。このため、手書文字が、その文字に対応して予め記憶された画像に置き換えられるので、手書文字を例えば予め記憶されたフォントの画像に変換することができる。

好ましくは、電子ペーパが表示状態にあるときに読取手段に電子ペーパの画像を読み取らせ、読取手段が出力する第２画像データを取得する第２画像データ取得手段と、第２画像データから第１画像データを差し引いた第３画像データと第１画像とを関連付けて、記憶する記憶手段と、をさらに備える。

この発明の他の局面によれば、画像読取方法は、電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換えるステップと、電子ペーパを非表示状態に切換えた後に電子ペーパの画像を読み取って、第１画像データを取得するステップと、を含む。

この局面に従えば、電子ペーパに追記された手書文字を容易に検出することが可能な画像読取方法を提供することができる。

この発明のさらに他の局面によれば、画像読取プログラムは、電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換えるステップと、電子ペーパを非表示状態に切換えた後に電子ペーパの画像を読み取って、第１画像データを取得するステップと、をコンピュータに実行させる。

この局面に従えば、電子ペーパに追記された手書文字を容易に検出することが可能な画像読取プログラムを提供することができる。

以下、本発明の実施の形態について図面を参照して説明する。以下の説明では同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがってそれらについての詳細な説明は繰返さない。

図１は、本発明の実施の形態の１つにおけるＭＦＰの外観を示す斜視図である。図１を参照して、ＭＦＰ１００は、自動原稿搬送装置（ＡＤＦ）１０と、画像読取部２０と、画像形成部３０と、給紙部４０と、後処理部５０と、上面に設けられた操作パネル９と、を含む。

ＡＤＦ１０は、原稿台１１に搭載された複数枚の原稿をさばいて１枚ずつ順に、画像読取部２０に搬送する。画像読取部２０は、写真、文字、絵等の画像情報を原稿から光学的に読み取って画像データを取得する。

画像形成部３０は、画像データが入力されると、画像データに基づいて記録シート上に画像を形成する。記録シートは、紙媒体としての普通紙、ＯＨＰ用紙等を含む。画像形成部３０は、ＣＰＵ１１１からの指示に従って、記録シートに画像を形成する。画像形成部３０は、シアン、マゼンタ、イエローの３色のトナーを用いてカラーの画像を形成する、また、シアン、マゼンタ、イエローおよびブラックのいずれか１つトナーを用いてモノクロの画像を形成する。

給紙部４０は、記録シートを格納するためのトレイを有する。ＣＰＵ１１１からの指示に基づき、記録シートを１枚ずつ画像形成部３０に供給する。後処理部５０は、画像が形成された記録シートを排紙する。後処理部５０は、複数の排出トレイを有し、記録シートをソートして排出することが可能である。また、後処理部５０は、パンチ穴加工部、ステープル加工部を備えており、排紙された記録シートにパンチ穴加工、またはステープル加工することが可能である。

図２は、ＭＦＰのハードウェア構成の一例を示すブロック図である。図２を参照して、ＭＦＰ１００は、メイン回路１０１を含み、メイン回路１０１は、ファクシミリ部６０と、通信制御部６１と、ＡＤＦ１０と、画像読取部２０と、画像形成部３０と、給紙部４０と、後処理部５０と、電子ペーパ通信部７０と、接続される。

メイン回路１０１は、中央演算装置（ＣＰＵ）１１１と、ＣＰＵ１１１の作業領域として使用されるＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１１２と、ＣＰＵ１１１が実行するプログラム等を記憶するためのＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１１３と、表示部１１４と、操作部１１５と、大容量記憶装置としてのハードディスクドライブ（ＨＤＤ）１１６と、データ通信制御部１１７と、を含む。ＣＰＵ１１１は、表示部１１４、操作部１１５、ＨＤＤ１１６およびデータ通信制御部１１７とそれぞれ接続され、メイン回路１０１の全体を制御する。また、ＣＰＵ１１１は、ファクシミリ部６０、通信制御部６１、ＡＤＦ１０、画像読取部２０、画像形成部３０、給紙部４０、後処理部５０および電子ペーパ通信部７０と接続され、ＭＦＰ１００の全体を制御する。

表示部１１４は、液晶表示装置（ＬＣＤ）、有機ＥＬＤ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）等の表示装置であり、ユーザに対する指示メニューや取得した画像データに関する情報等を表示する。操作部１１５は、複数のキーを備え、キーに対応するユーザの操作による各種の指示、文字、数字などのデータの入力を受付ける。操作部１１５は、表示部１１４上に設けられたタッチパネルを含む。表示部１１４と操作部１１５とで、操作パネル９が構成される。

データ通信制御部１１７は、ＴＣＰ（Ｔｒａｎｓｍｉｓｓｉｏｎ Ｃｏｎｔｒｏｌ Ｐｒｏｔｏｃｏｌ）またはＵＤＰ（Ｕｓｅｒ Ｄａｔａｇｒａｍ Ｐｒｏｔｏｃｏｌ）等の通信プロトコルで通信するためのインターフェースであるＬＡＮ端子１１８と、シリアル通信するためのシリアル通信インターフェース端子１１９とを有する。データ通信制御部１１７は、ＣＰＵ１１１からの指示に従って、ＬＡＮ端子１１８またはシリアル通信インターフェース端子１１９に接続された外部の機器との間でデータを送受信する。

ＬＡＮ端子１１８に，ネットワークに接続するためのＬＡＮケーブルが接続される。データ通信制御部１１７は、ＬＡＮ端子１１８を介して接続された他のＭＦＰおよびコンピュータと通信する。

また、ＣＰＵ１１１は、データ通信制御部１１７を制御して、メモリカード１１９ＡからＣＰＵ１１１が実行するためのプログラムを読出し、読み出したプログラムをＲＡＭ１１２に記憶し、実行する。なお、ＣＰＵ１１１が実行するためのプログラムを記憶する記録媒体としては、メモリカード１１９Ａに限られず、フレキシブルディスク、カセットテープ、光ディスク（ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）／ＭＯ（Ｍａｇｎｅｔｉｃ Ｏｐｔｉｃａｌ Ｄｉｓｃ）／ＭＤ（Ｍｉｎｉ Ｄｉｓｃ）／ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ））、ＩＣカード、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ ＥＰＲＯＭ）などの半導体メモリ等の媒体でもよい。さらに、ＣＰＵ１１１がインターネットに接続されたコンピュータからプログラムをダウンロードしてＨＤＤ１１６に記憶する、または、インターネットに接続されたコンピュータがプログラムをＨＤＤ１１６に書込みするようにして、ＨＤＤ１１６に記憶されたプログラムをＲＡＭ１１２にロードしてＣＰＵ１１１で実行するようにしてもよい。ここでいうプログラムは、ＣＰＵ１１１により直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。

通信制御部６１は、ＣＰＵ１１１をＰＳＴＮ（Ｐｕｂｌｉｃ Ｓｗｉｔｃｈｅｄ Ｔｅｌｅｐｈｏｎｅ Ｎｅｔｗｏｒｋｓ）７に接続するためのモデムである。通信制御部６１は、ＰＳＴＮ７に接続された他のコンピュータと通信する。また、ＭＦＰ１００には、ＰＳＴＮ７における電話番号が予め割り当てられており、ＰＳＴＮ７に接続されたファクシミリ装置からＭＦＰ１００に割り当てられた電話番号に発呼があると、通信制御部６１がその発呼を検出する。通信制御部６１は、発呼を検出すると通話を確立し、ファクシミリ部６０に通信させる。

ファクシミリ部６０は、ＰＳＴＮ７に接続され、ＰＳＴＮ７にファクシミリデータを送信する、またはＰＳＴＮ７からファクシミリデータを受信する。ファクシミリ部６０は、受信したファクシミリデータを画像形成部３０でプリント可能なプリントデータに変換して、画像形成部３０に出力する。これにより、画像形成部３０は、ファクシミリ部６０により受信されたファクシミリデータを記録シートにプリントする。また、ファクシミリ部６０は、ＨＤＤ１１６に記憶されたデータをファクシミリデータに変換して、ＰＳＴＮ７に接続されたファクシミリ装置または他のＭＦＰに出力する。これにより、ＨＤＤ１１６に記憶されたデータをファクシミリ装置または他のＭＦＰに出力することができる。このように、ＭＦＰ１００は、ファクシミリ送受信機能を有する。

電子ペーパ通信部７０は、電子ペーパと通信する。電子ペーパ通信部７０は、画像読取部２０またはＡＤＦ１０に設置され、画像読取部２０の読取位置に存在する電子ペーパと無線による通信が可能である。電子ペーパ通信部７０は、ＡＤＦ１０が用紙を画像読取部２０の読取位置に搬送した時点で、通信を開始し、電子ペーパと通信可能ならば、通信可能であることを示す信号を、ＣＰＵ１１１に出力する。

ここで、電子ペーパが画像を表示する原理について説明する。図３は、電子ペーパの表示原理を説明するための模式図である。図３を参照して、電子ペーパ８０は、フィルター層としての透明電極８１と、インク層としての複数のマイクロカプセル８３と、ドライバ層としての駆動電極８５とを含む。なお、駆動電極８５の下にフィルター層が設けられる場合もある。マイクロカプセル８３は、白色粒子８９と青色粒子８７の２色の粒子が収められている。２色は、例えば、白と青である。電子ペーパ８０は、通常は表面（図中上側）を「白」にする状態になっている。ドライバ層である駆動電極８５は、インク層のマイクロカプセル８３の必要部分にマイナスの電場を与える。マイクロカプセル８３内の白色粒子８９が電気泳動現象によって裏面（図中下側）に引き込まれ、表面に青色粒子８７が集まる。これにより、マイナスの電場が与えられたマイクロカプセル８３の表面が黒として表される。また、マイクロカプセル８３に代えて、上下で２色に塗り分けられた帯電ビーズ（シリコンビーズ）が用いられる場合がある。帯電ビーズを用いた電子ペーパも上述した原理と同様に、電荷が与えられると帯電ビーズが回転し、白と黒を表現する。

本実施の形態においては、電子ペーパ８０は、ドライバ層である駆動電極８５を有するタイプを用いている。電子ペーパ通信部７０は、電子ペーパ８０と有線または無線で通信し、画像データを電子ペーパ８０に送信する。電子ペーパ８０は、電子ペーパ通信部７０から受信する画像データに基づいて、駆動電極８５を駆動し、画像を表示する。

なお、ドライバ層である駆動電極８５を有する電子ペーパ８０を用いる例を説明するが、駆動電極８５を有しない電子ペーパを用いるようにしてもよい。この場合、電子ペーパ通信部７０に代えて、上述した駆動電極８５の代わりに上述した原理で電子ペーパに電荷を与えるための電子ペーパ書込部をＭＦＰ１００の画像読取部２０に備えるようにして、電子ペーパ書込部が電子ペーパに画像を表示させる。

図４は、電子ペーパの機能の概略を示す機能ブロック図である。図４を参照して、電子ペーパ８０は、電子ペーパ８０の全体を制御するための制御部２０１と、駆動電極８５を駆動するための駆動制御部２０３と、表示データを記憶するための表示データメモリ２０５と、電子ペーパ８０に動作電力を供給するための電源部２０７と、ＭＦＰ１００と通信するための通信部２０９と、を含む。

通信部２０９は、ＭＦＰ１００の電子ペーパ通信部７０と無線で通信する。通信部２０９は、電子ペーパ通信部７０からコマンドまたは表示データを受信し、受信したコマンドまたは表示データを制御部２０１に出力する。

コマンドは、画像を表示させるための表示コマンドと、表示している画像を消去するための消去コマンドと、画像を再表示させるための再表示コマンドと、を含む。通信部２０９は、表示コマンドを受信する場合、画像データ（表示データ）を表示コマンドとともに受信する。

制御部２０１は、表示コマンドを受信すると、それとともに受信する表示データを表示データメモリ２０５に格納するとともに、駆動制御部２０３に表示データを表示させる。駆動制御部２０３は、表示データに基づいて、駆動電極８５を駆動する。これにより、上述した原理で電子ペーパ８０に表示データの画像が表示される。電子ペーパ８０が画像を表示している状態を表示状態といい、画像を表示していない状態を非表示状態という。また、制御部２０１は、通信部２０９から消去コマンドが入力されると、駆動制御部２０３に表示している画像を消去させる。駆動制御部２０３は、駆動電極８５を駆動し、電子ペーパ８０に表示されている画像を消去する。さらに、制御部２０１は、通信部２０９から再表示コマンドが入力されると、表示データメモリ２０５に記憶されている表示データを読出し、駆動制御部２０３に表示データを表示させる。駆動制御部２０３は、表示データに基づいて、駆動電極８５を駆動する。これにより、電子ペーパ８０に表示データメモリ２０５に記憶されている表示データの画像が表示される。

図５は、ＭＦＰが備えるＣＰＵの機能の概要を示す機能ブロック図である。図５を参照して、ＣＰＵ１１１は、画像読取部２０が出力する画像データを受け付ける第１画像データ取得部１５１および第２画像データ取得部１５７と、画像データから文字を認識する文字認識部１５３と、２つの画像データの差分を算出する差分画像生成部１５９と、文字データから文字を含む画像を生成する文字画像生成部１５５と、２つの画像データを合成する合成部１６１と、電子ペーパ８０を制御するための電子ペーパ制御部１６３と、を含む。

電子ペーパ制御部１６３は、電子ペーパ通信部７０を介して、電子ペーパ８０と通信する。電子ペーパ８０がＡＤＦ１０により画像読取部２０の読取位置まで搬送されると、通信を開始し、画像読取部２０の読取位置に存在する用紙が、電子ペーパ８０であるか否かを判断する。通信が可能であれば電子ペーパ８０と判断し、通信できなければ電子ペーパ８０でないと判断する。また、電子ペーパ制御部１６３は、電子ペーパ通信部７０を介してコマンドを送信することにより、電子ペーパ８０の表示を制御する。電子ペーパ制御部１６３が電子ペーパ８０に表示コマンドまたは再表示コマンドを送信すれば、電子ペーパは表示状態になり、消去コマンドを送信すれば、電子ペーパは非表示状態となる。したがって、電子ペーパ制御部１６３は、電子ペーパ８０の表示状態を切り替えることが可能である。

第１画像データ取得部１５１は、電子ペーパ８０が非表示状態のときに画像読取部２０に電子ペーパ８０の表面を読み取らせ、画像読取部２０が出力する第１画像データを取得する。電子ペーパ８０が非表示状態のとき電子ペーパは画像を表示していないが、電子ペーパ８０に手書で文字または記号が記載されていれば、第１画像データは、手書の文字または記号の画像を含む。第１画像データ取得部１５１は、取得した第１画像データを文字認識部１５３および差分画像生成部１５９に出力する。図６に第１画像データの一例を示す。電子ペーパ８０に手書で記載された文字および記号を含んでいる。

文字認識部１５３は、第１画像データ取得部１５１から入力される第１画像データを文字認識し、認識した文字のデータ（文字データ）を文字画像生成部１５５に出力する。ここでは、文字データはテキストデータとしている。

文字画像生成部１５５は、文字認識部１５３から入力される文字データを、ＭＦＰ１００が予めＥＥＰＲＯＭ１１３に記憶しているフォントの文字画像に置き換えた文字画像データを生成する。文字画像生成部１５５は、文字画像データを合成部１６１に出力する。図７に文字画像データの一例を示す。図７を参照して、文字画像データは、図６に示した第１画像データに含まれる手書の文字および記号に対応するフォントの文字の画像を含む。

なお、文字認識部１５３が、認識した文字の第１画像データ中の位置情報を検出するようにして、文字データと位置情報とを文字画像生成部１５５に出力するようにしてもよい。この場合、文字画像生成部１５５は、位置情報で特定される位置に文字画像を配置した文字画像データを生成する。

第２画像データ取得部１５７は、電子ペーパ８０が表示状態のときに画像読取部２０に電子ペーパ８０の表面を読み取らせ、画像読取部２０が出力する第２画像データを取得する。電子ペーパ８０が表示状態のとき電子ペーパは画像を表示しているので、電子ペーパ８０に手書で文字または記号が記載されていれば、第１画像データは、表示している画像と手書の文字または記号の画像とを含む。第１画像データ取得部１５１は、取得した第２画像データを差分画像生成部１５９に出力する。図８に、第２画像データの一例を示す。

差分画像生成部１５９は、第２画像データと第１画像データとの差分を算出し、算出した差分画像データ（第３画像データ）を合成部１６１に出力する。差分画像データは、第２画像データに含まれる画像のうち第１画像データに含まれる画像以外の画像を含む。すなわち、差分画像データは、電子ペーパ８０が表示している画像を含み、電子ペーパ８０に手書で追記された文字または記号を含まない。図９に、差分画像データの一例を示す。図９を参照して、差分画像データは、図８に示した第２画像データから図６に示した第１画像データに含まれる手書の文字または記号を除いた画像を含む。

合成部１６１は、操作部１１５にユーザによりコピー指示が入力された場合、差分画像データと文字画像データとを合成し、合成した合成画像データ（第４画像データ）を画像形成部３０に出力する。画像形成部３０は、合成画像データに基づいて記録シートに画像を形成する。合成画像データは、電子ペーパ８０が表示している画像と、電子ペーパ８０に手書で追記された文字または記号をＭＦＰ１００が予め記憶しているフォントの文字画像に置き換えた画像とを含む。図１０に合成画像データの一例を示す。このため、電子ペーパ８０に手書で文字または記号が追記されている場合、電子ペーパ８０に手書で追記された文字または記号の画像をＭＦＰ１００が予め記憶するフォントの画像に置き換えた画像を記録シートに形成することができる。また、画像形成することなく、差分画像データと文字画像データとをＨＤＤ１１６に記憶する。

合成部１６１は、操作部１１５にユーザによりスキャン指示が入力された場合、差分画像データと文字画像データとを関連付け、それらをＨＤＤ１１６に記憶する。

図１１は、画像読取処理の流れの一例を示すフローチャートである。画像読取処理は、ＣＰＵ１１１が画像読取プログラムを実行することによりＣＰＵ１１１により実行される処理である。また、画像読取処理は、ユーザが、コピー指示またはスキャン指示をＭＦＰ１００に入力した時点に実行される処理である。

図１１を参照して、ＣＰＵ１１１は、原稿が電子ペーパか否かを判断する（ステップＳ０１）。電子ペーパならば処理をステップＳ０２に進め、そうでなければ処理をステップＳ１６に進める。電子ペーパ通信部７０が電子ペーパと通信可能であれば原稿が電子ペーパと判断し、通信できなければ原稿が電子ペーパでないと判断する。

ステップＳ０２においては、加筆部検出モードか否かを判断する。ユーザによりＭＦＰ１００が予め加筆部検出モードに設定されていれば、加筆部検出モードと判断する。加筆部検出モードであれば処理をステップＳ０３に進め、そうでなければ処理をステップＳ１６に進める。加筆部検出モードの設定は、予めＭＦＰ１００に設定しておいてもよいし、ユーザがコピー指示またはスキャン指示をＭＦＰ１００に入力するごとに、設定するようにしてもよい。

ステップＳ０３においては、電子ペーパ８０に非表示要求を送信する。具体的には、消去コマンドを送信する。そして、電子ペーパ８０から状態信号を受信し（ステップＳ０４）、状態信号が非表示状態を示すか否かを判断する（ステップＳ０５）。電子ペーパ８０は、表示状態または非表示状態のいずれかの状態信号を出力する。ステップＳ０５において、状態信号が非表示状態を示すならば処理をステップＳ０６に進め、状態信号が表示状態を示すならば処理をステップＳ０４に戻す。すなわち、電子ペーパ８０が非表示状態になるまで待機して、非表示状態になると処理をステップＳ０６に進める。

ステップＳ０６においては、画像読取部２０に読み取りを開始させる。ステップＳ０７においては、画像読取部２０が出力する画像データを第１画像データとして取得し、ＨＤＤ１１６に記憶する。ここでは、図６に示した第１画像データが取得されたとする。

ステップＳ０８においては、電子ペーパ８０に表示要求を送信する。具体的には、再表示コマンドを送信する。そして、電子ペーパ８０から状態信号を受信し（ステップＳ０９）、状態信号が表示状態を示すか否かを判断する（ステップＳ１０）。ステップＳ１０において、状態信号が表示状態を示すならば処理をステップＳ１１に進め、状態信号が非表示状態を示すならば処理をステップＳ０９に戻す。すなわち、電子ペーパ８０が表示状態になるまで待機して、非表示状態になると処理をステップＳ１１に進める。

ステップＳ１１においては、画像読取部２０に読み取りを開始させる。ステップＳ１２においては、画像読取部２０が出力する画像データを第２画像データとして取得し、ＨＤＤ１１６に記憶する。ここでは、図８に示した第２画像データが取得されたとする。

ステップＳ１３においては、ユーザにより入力された指示がコピー指示か否かを判断する。コピー指示ならば処理をステップＳ１４に進め、コピー指示でなくスキャン指示ならば処理をステップＳ１５に進める。ステップＳ１４においては、コピー処理を実行し、ステップＳ１５においてはスキャン処理を実行し、処理を終了する。

一方、ステップＳ１６においては、コピー指示が入力されていれば、通常のコピー処理を実行し、スキャン指示が入力されていれば、通常のスキャン処理を実行する。通常のコピー処理は、画像読取部２０が原稿を読み取り、画像形成部３０が画像読取部２０の出力する画像データに基づいて記録シートに画像を形成する処理である。通常のスキャン処理は、画像読取部２０が原稿を読み取り、画像読取部２０の出力する画像データをＨＤＤ１１６に記憶する処理である。

図１２は、コピー処理の流れの一例を示すフローチャートである。コピー処理は、図１１の画像読取処理のステップＳ１４において実行される処理である。図１２を参照して、ＣＰＵ１１１は、差分画像を生成する（ステップＳ２１）。具体的には、第２画像データと第１画像データとの差分を算出する。そして、算出した差分画像データ（第３画像データ）をＨＤＤ１１６に記憶する（ステップＳ２２）。差分画像データは、第２画像データに含まれる画像のうち第１画像データに含まれる画像以外の画像を含む。ここでは、図９に示した差分画像データが生成され、記憶される。

次のステップＳ２３においては、第１画像データを文字認識する。そして、第１画像データから認識した文字のテキストデータをＨＤＤ１１６に記憶する（ステップＳ２４）。第１画像データ中の文字の位置情報を検出しておき、テキストデータと共に位置情報を記憶する。

そして、フォントの指定を受け付ける（ステップＳ２５）。表示部１１４にフォントの種類を表示し、ユーザが表示された種類のいずれかを選択する指示を操作部１１５に入力すると、指示された種類のフォントを受け付ける。なお、ＭＦＰ１００に１つのフォントを設定しておき、設定されたフォントが自動的に指定されるようにしてもよい。この場合ステップＳ２５は不要である。

次のステップＳ２６においては、文字画像データを生成する。具体的には、テキストデータを、ステップＳ２５で指定された種類のフォントの文字画像に置き換えた文字画像データを生成する。テキストデータとともにＨＤＤ１１６に記憶されている位置情報に基づいて、テキストデータに対応する文字画像を位置情報により特定される位置に配置する。ここでは、図７に示した文字画像データが生成される。そして、生成した文字画像データをＨＤＤ１１６に記憶する（ステップＳ２７）。

次のステップＳ２８においては、合成画像データを生成する。具体的には、ステップＳ２２においてＨＤＤ１１６に記憶された差分画像データとステップＳ２７においてＨＤＤ１１６に記憶された文字画像データとを読出し、それらを合成する。次のステップＳ２９においては、差分画像データと文字画像データとを合成した合成画像データを、画像形成部３０に出力し、合成画像データに基づいて記録シートに画像を形成する。これにより、電子ペーパ８０に手書で追記された文字または記号の画像をＭＦＰ１００が予め記憶するフォントの画像に置き換えた画像が記録シートに形成される。

図１３は、スキャン処理の流れの一例を示すフローチャートである。スキャン処理は、図１１に示した画像読取処理のステップＳ１５において実行される処理である。図１３を参照して、ＣＰＵ１１１は、図１２に示したコピー処理のステップＳ２１およびステップＳ２２と同様に、差分画像を生成し（ステップＳ３１）、算出した差分画像データをＨＤＤ１１６に記憶する（ステップＳ３２）。そして、図１１に示した画像読取処理のステップＳ０７において、ＨＤＤ１１６に記憶された第１画像データと、ステップＳ３２でＨＤＤ１１６に記憶された差分画像データとを関連付ける。関連付けは、いかなる方法を用いてもよい。例えば、第１画像データおよび差分画像データそれぞれのファイル名を含む関連付テーブルを生成するようにしてもよいし、２つのファイル名の一部が同じになるように、ファイル名を変更するようにしてもよいし、第１画像データおよび差分画像データを同じフォルダに記憶するようにしてもよい。

なお、駆動電極８５を有しない電子ペーパ８０を用いる場合、電子ペーパ８０を非表示状態にする前に電子ペーパを読み取って、得られる第２画像データを記憶する必要がある。具体的には、図１１におけるステップＳ１１およびステップＳ１２を、ステップＳ０２とステップＳ０３との間に実行するようにすればよい。

以上説明したように、ＭＦＰ１００は、電子ペーパ８０を非表示状態に切換えた後に画像読取部２０に電子ペーパ８０の画像を読み取らせ、画像読取部２０が出力する第１画像データを取得し、第１画像データに基づいて文字認識するので、原稿に追記された手書文字を容易に検出することができる。

また、電子ペーパ８０を表示状態に切換え、電子ペーパの画像を読み取って第２画像データを取得し、第１画像データから認識された文字を予め記憶されたフォントの画像に置き換えた文字画像データを生成し、第２画像データから第１画像データを差し引いた差分画像データと、文字画像データとを合成し、記録シートに画像を形成する。このため、手書文字を、その文字に対応して予め記憶されたフォントの画像に変換した画像を形成することができる。

なお、上述した実施の形態においては、画像読取装置としてＭＦＰ１００について説明したが、図１１〜図１３に示した処理を実行するための画像読取方法または、画像読取方法をコンピュータに実行させるための画像読取プログラムとして発明を捉えることができるのは言うまでもない。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

本発明の実施の形態の１つにおけるＭＦＰの外観を示す斜視図である。 ＭＦＰのハードウェア構成の一例を示すブロック図である。 電子ペーパの表示原理を説明するための模式図である。 電子ペーパの機能の概略を示す機能ブロック図である。 ＭＦＰが備えるＣＰＵの機能の概要を示す機能ブロック図である。 第１画像データの一例を示す図である、 文字画像データの一例を示す図である。 第２画像データの一例を示す図である。 差分画像データの一例を示す図である。 合成画像データの一例を示す図である。 画像読取処理の流れの一例を示すフローチャートである コピー処理の流れの一例を示すフローチャートである。 スキャン処理の流れの一例を示すフローチャートである。

符号の説明

９ 操作パネル、１０ ＡＤＦ、２０ 画像読取部、３０ 画像形成部、４０ 給紙部、５０ 後処理部、６０ ファクシミリ部、６１ 通信制御部、７０ 電子ペーパ通信部、８０ 電子ペーパ、８１ 透明電極、８３ マイクロカプセル、８５ 駆動電極、８７ 青色粒子、８９ 白色粒子、１００ ＭＦＰ、１０１ メイン回路、１１１ ＣＰＵ１１１、１１２ ＲＡＭ、１１３ ＥＥＰＲＯＭ、１１４ 表示部、１１５ 操作部、１１６ ＨＤＤ、１１７ データ通信制御部、１１９Ａ メモリカード、１５１ 画像データ取得部、１５３ 文字認識部、１５５ 文字画像生成部、１５７ 画像データ取得部、１５９ 差分画像生成部、１６１ 合成部、１６３ 電子ペーパ制御部、２０１ 制御部、２０３ 駆動制御部、２０５ 表示データメモリ、２０７ 電源部、２０９ 通信部。

Claims (7)

1. 画像を読み取り画像データを出力する読取手段と、
   電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換える電子ペーパ制御手段と、
   前記電子ペーパを非表示状態に切換えた後に前記読取手段に前記電子ペーパの画像を読み取らせ、前記読取手段が出力する第１画像データを取得する第１画像データ取得手段と、を備えた画像読取装置。
2. 電子ペーパと通信する通信手段をさらに備え、
   前記電子ペーパ制御手段は、前記通信手段に前記電子ペーパと通信させることにより、前記表示状態と前記非表示状態とのいずれかに切換える、請求項１に記載の画像読取装置。
3. 前記電子ペーパ制御手段は、前記第１画像データが取得された後に、前記電子ペーパを前記非表示状態から前記表示状態に切換える、請求項２に記載の画像読取装置。
4. 前記電子ペーパが前記表示状態にあるときに前記読取手段に前記電子ペーパの画像を読み取らせ、前記読取手段が出力する第２画像データを取得する第２画像データ取得手段と、
   取得された前記第１画像データに基づいて文字認識する文字認識手段と、
   前記認識された文字に対応して予め記憶された画像に置き換えた第３画像データを生成する第３画像データ生成手段と、
   前記第２画像データから前記第１画像データを差し引いた第４画像データと前記第３画像データとを合成した第５画像データを生成する合成手段と、
   生成された前記第５画像データを出力する出力手段と、をさらに備えた請求項１に記載の画像形成装置。
5. 前記電子ペーパが前記表示状態にあるときに前記読取手段に前記電子ペーパの画像を読み取らせ、前記読取手段が出力する第２画像データを取得する第２画像データ取得手段と、
   前記第２画像データから前記第１画像データを差し引いた第３画像データと、前記第１画像とを関連付けて、記憶する記憶手段と、をさらに備えた請求項１に記載の画像形成装置。
6. 電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換えるステップと、
   前記電子ペーパを非表示状態に切換えた後に前記電子ペーパの画像を読み取って、第１画像データを取得するステップと、を含む画像読取方法。
7. 電子データを表示する表示状態から電子データを表示しない非表示状態に電子ペーパの状態を切換えるステップと、
   前記電子ペーパを非表示状態に切換えた後に前記電子ペーパの画像を読み取って、第１画像データを取得するステップと、をコンピュータに実行させる画像読取プログラム。

Images