JP6874721B2 - 画像処理システムおよび画像形成装置 - Google Patents

Description

本発明は、画像処理システムおよび画像形成装置に関し、特に、画像形成装置側で原稿中の背景の色変更を簡易かつ迅速に行うための技術に関する。

特許文献１に記載された情報処理装置は、表示画面に表示される元画像に対して、ユーザーによるタッチペンの操作により、新たな手書き図形が描画されるものである。また、特許文献２に記載された文字表示装置は、表示画面に表示される薄い文字を、タッチペンでなぞることにより、濃い文字に変化させるものである。

特開平１１−６６３３３号公報 特開２００８−１５９９７号公報

しかしながら、特許文献１では、表示画面に表示される元画像については一切変更できず、タッチペンで描画された画像を削除したり変更したりすることができるだけである。すなわち、元画像中の図形の色、柄、模様などを変更することができない。また、特許文献２では、文字の濃淡を変化させるだけであり、別色の変換はできない。ところで、複合機などの画像形成装置により印刷された原稿中の背景を、印刷後に他の色に変更したい場合には、画像編集機能を有するコンピューターにより、当該原稿中の背景の色を変更する必要があり、当該画像形成装置のみで色変更を行うことはできないし、印刷するまでに非常に手間及び時間がかかるという問題がある。

本発明は、上記の事情に鑑みなされたものであり、画像形成装置による出力後の原稿又は出力直前の原稿中の背景の色等変更指示を反映させた色等変更後の原稿生成を、画像形成装置側で簡易かつ迅速に行うことを可能にすることを目的とする。

本発明の一局面にかかる画像処理システムは、情報処理装置と画像形成装置とを備える画像処理システムであって、
前記情報処理装置は、
背景を含む画像を取得する画像取得部と、
前記画像取得部が取得した画像を表示画面に表示する表示部と、
筆記色の選択操作と、前記表示画面に沿って移動される筆記操作とがユーザーによって行われる指示体と、
前記表示画面に沿って移動する前記指示体の当該表示画面の画像上の位置を示す各筆記座標を検知する座標検知部と、
前記指示体にて選択された筆記色を示す色情報を取得する色情報取得部と、
前記色情報取得部が取得した前記色情報が示す筆記色で、かつ、前記座標検知部が検知した各筆記座標を結ぶ軌跡で、筆記画像を前記表示画面の画像上に描画する筆記画像描画部と、
前記筆記画像描画部が描画した前記筆記画像の各筆記座標を示す座標情報と前記色情報とを含む筆記情報を生成する筆記情報生成部と、
前記筆記画像描画部により前記筆記画像が描画された画像データと、前記筆記情報とを送信する送信部と、を備え、
前記画像形成装置は、
前記送信部から前記画像データと前記筆記情報とを受信する受信部と、
前記受信部にて受信した前記画像データによる画像中の前記筆記画像を、前記筆記情報に含まれる前記座標情報と前記色情報とを用いて特定する筆記画像特定部と、
前記筆記画像特定部が特定した前記筆記画像を含む背景を特定する背景特定部と、
前記筆記画像特定部が特定した前記筆記画像が、前記画像中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
前記画像中から前記筆記画像を削除し、前記処理特定部が特定した色変更処理に従って当該画像中の前記背景特定部が特定した背景の表示態様を前記色情報が示す前記筆記色による表示態様に変更する色変更部と、
前記色変更部が前記背景の色を前記筆記色に変更した画像を記録紙に形成する画像形成部と、を備えるものである。

また、本発明の別の一局面にかかる画像形成装置は、背景を含む画像に筆記画像が描画された画像データと、前記筆記画像についての前記画像上の位置を示す各筆記座標の情報からなる座標情報と当該筆記画像の筆記色を示す色情報とを含む筆記情報とを、情報処理装置から受信する受信部と、
前記受信部にて受信した前記画像データによる画像中の前記筆記画像を、前記筆記情報に含まれる前記座標情報と前記色情報とを用いて特定する筆記画像特定部と、
前記筆記画像特定部が特定した前記筆記画像を含む背景を特定する背景特定部と、
前記筆記画像特定部が特定した前記筆記画像が、前記画像中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
前記画像中から前記筆記画像を削除し、前記処理特定部が特定した色変更処理に従って当該画像中の前記背景特定部が特定した背景の表示態様を前記色情報が示す前記筆記色による表示態様に変更する色変更部と、
前記色変更部が前記背景の色を前記筆記色に変更した画像を記録紙に形成する画像形成部と、を備えるものである。

また、本発明の別の一局面にかかる画像形成装置は、背景を含む原稿を読み取る原稿読取部と、
前記原稿読取部が読み取った原稿の画像データを記憶する記憶部と、
前記記憶部に記憶された前記原稿の画像を記録紙に形成する画像形成部と、
筆記具により前記記録紙に筆記画像が描画された描画紙を前記原稿読取部が読み取った描画後画像データと、前記記憶部に記憶された前記原稿の画像データとの差分を取ることにより、前記筆記具の筆記画像を取得する筆記画像取得部と、
前記筆記画像取得部が取得した前記筆記画像を含む背景を特定する背景特定部と、
前記筆記画像取得部が取得した筆記画像が、前記原稿読取部が読み取った記録紙中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
前記処理特定部が特定した色変更処理に従って前記原稿の画像データ中の前記背景特定部が特定した背景の表示態様を前記筆記画像取得部が取得した前記筆記画像の色である筆記色による表示態様に変更する色変更部と、を備え
前記画像形成部は、前記色変更部が前記背景の色を前記筆記色に変更した画像を新たな記録紙に形成するものである。

本発明によれば、画像形成装置による出力後の原稿又は出力直前の原稿中の背景の色等変更指示を反映させた色等変更後の原稿生成を、画像形成装置側で簡易かつ迅速に行うことができる。

本発明の実施形態１にかかる画像処理システムの構成を示すブロック図である。 実施形態１の画像形成装置の外観を示す斜視図である。 実施形態１の画像形成装置の主要内部構成例を示す機能ブロック図である。 実施形態１にかかる画像処理システムの情報処理装置における画像データ送信処理の一例を示すフローチャートである。 画像形成装置における色等変更後画像の画像形成処理の一例を示すフローチャートである。 単体図形の色変換の一例を示す図である。 単体図形の色変換の一例を示す図である。 単体図形の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、単体図形の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、単体図形の色柄変換の一例を示す図である。 （Ａ）は単体図形の色柄変換の一例を示す図、（Ｂ）は単体図形の２色分割変換の一例を示す図である。 連結図形の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、連結図形の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、連結図形の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、連結図形の色柄変換の一例を示す図である。 連結図形の色柄変換の一例を示す図である。 背景の色変換の一例を示す図である。 背景の色変換の一例を示す図である。 （Ａ）、（Ｂ）は、背景のグラデーション変換の一例を示す図である。 実施形態２の画像形成装置の主要内部構成例を示す機能ブロック図である。 実施形態２の画像形成装置における色等変更後画像の画像形成処理の一例を示すフローチャートである。

以下、本発明の実施形態１にかかる画像処理システムについて図面を参照して詳細に説明する。

図１は、本発明の実施形態１にかかる画像処理システムの構成を示すブロック図である。本実施形態の画像処理システム３００は、情報処理装置の一例であるコンピューター２００と、画像形成装置１とを備える。コンピューター２００と画像形成装置１とは、ＬＡＮ又はインターネットなどのネットワークを介して通信可能に接続されている。

コンピューター２００は、例えばタブレット型コンピューターであり、表示部２２２と、タッチパネル２２３と、通信部２２４と、記憶部２２５と、無線通信部２２６と、制御ユニット２１０とを備える。これらの構成要素は、互いにバスを通じてデータ又は信号の送受信が可能とされている。なお、コンピューター２００は、スマートフォンなどの携帯端末装置、デスクトップ型のパーソナル・コンピューターなどであってもよい。

更に、コンピューター２００は、表示部２２２の表示画面に対して入力操作を行うためのペン型の入力装置である電子ペン８００を備える。更に、電子ペン８００は、任意の対象物の色を検出し、その色の色情報を取得する機能を有する。すなわち、電子ペン８００は、筆記色の選択操作と、表示部２２２の表示画面に沿って移動される筆記操作とが、ユーザーによって行われるものである。

具体的には、電子ペン８００は、表示部２２２の表示画面に対して入力操作を行うためのペン先部８０１と、対象物の色を検出するＲＧＢカラーセンサー８０２と、予め定められた色数（例えば、１６７０万色）の色データを記憶する色データ記憶部８０３と、ＲＧＢカラーセンサー８０２で検出した対象物の色を、色データ記憶部８０３を用いて判定する色判定部８０４と、色判定部８０４で判定した色を表示する表示部８０５と、表示部８０５に表示された色を筆記色に決定するとの決定指示がユーザーによりなされると当該筆記色を示す色情報を無線通信部２２６に送信する通信部８０６とを備える。通信部８０６は、近距離無線通信チップなどの通信モジュールを備える通信インターフェイスである。なお、電子ペン８００は、特許請求の範囲における指示体の一例となる。

表示部２２２は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）などから構成される。

タッチパネル２２３は、所謂抵抗膜方式や静電容量方式等のタッチパネルである。タッチパネル２２３は、表示部２２２の画面に配置され、表示部２２２の画面に対する電子ペン８００又は指などの接触をその接触位置と共に検知する。例えば、タッチパネル２２３は、表示部２２２の表示画面に沿って移動する電子ペン８００の当該表示画面の画像上の位置を示す各筆記座標を検知する。タッチパネル２２３は、電子ペン８００又は指などの接触を検知すると、その接触位置の座標を示す検知信号を制御ユニット２１０の制御部２１１などに出力する。従って、タッチパネル２２３は、表示部２２２の画面に対するユーザー操作が入力される操作部としての役割を果たす。なお、タッチパネル２２３は、特許請求の範囲における座標検知部の一例となる。

また、コンピューター２００は、ユーザー操作が入力される操作部として、上記のタッチパネル２２３に加えてハードキーを備えてもよい。

通信部２２４は、例えば、無線ＬＡＮチップなどの通信モジュールを備える通信インターフェイスである。通信部２２４は、画像形成装置１との通信機能を有する。

記憶部２２５は、大容量のＳＳＤ（Solid State Drive）、ＨＤＤ（Hard Disk Drive）などからなり、各種のデータやプログラムを記憶している。また、記憶部２２５は、例えば、画像形成装置１にて記録紙に画像が形成（印刷）される原稿画像の画像データが予め記憶されている。原稿画像としては、例えば、輪郭が閉じた図形Ｚ１を含む画像Ｇ１（図６参照）、輪郭が閉じた図形Ｚ３、Ｚ４が２つ以上連結された連結図形ＲＺを含む画像Ｇ３（図１２参照）、背景ＢＺを含む画像Ｇ４（図１７参照）などがある。

無線通信部２２６は、例えば、ブルートゥース（登録商標）、Wi-Fiの規格の近距離無線通信チップなどの通信モジュールを備える通信インターフェイスである。無線通信部２２６は、電子ペン８００との通信機能を有する。無線通信部２２６は、電子ペン８００の筆記色を示す色情報を、当該電子ペン８００の通信部８０６から受信可能となっている。

制御ユニット２１０は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、ＣＰＵ（Central Processing Unit）、ＭＰＵ、又はＡＳＩＣ等である。この制御ユニット２１０は、上記のＲＯＭ又は記憶部２２５に記憶された制御プログラムが上記プロセッサーで実行されることにより、制御部２１１、通信制御部２１２、画像取得部２１３、色情報取得部２１４、筆記画像描画部２１５及び筆記情報生成部２１６として機能する。なお、制御ユニット２１０の上記の各構成要素は、前述の制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部２１１は、コンピューター２００の全体的な動作制御を司る。また、制御部２１１は、表示部２２２、タッチパネル２２３、通信部２２４、および記憶部２２５と接続されており、上記各構成要素の動作制御や、各構成要素との間の信号またはデータの送受信を行う。制御部２１１は、特に、表示部２２２の表示動作を制御する。通信制御部２１２は、通信部２２４の通信動作と無線通信部２２６の通信動作とを制御する機能を有する。また、制御部２１１は、タッチパネル２２３から出力される検知信号に基づき、ユーザーにより入力されたユーザー操作を特定する。そして、制御部２１１は、特定したユーザー操作に応じた制御を行う。

画像取得部２１３は、ユーザーによる操作に従って、画像形成装置１にて記録紙に画像形成される画像データを、記憶部２２５から読み出す（取得する）。例えば、輪郭が閉じた図形Ｚ１を含む画像Ｇ１（図６参照）の画像データを取得する。

表示部２２２は、画像取得部２１３が取得した画像（例えば図６の左上に示すように、輪郭が閉じた三角形の図形Ｚ１を含む画像Ｇ１）を表示画面に表示する。電子ペン８００は、例えばＲＧＢカラーセンサー８０２により対象物の色（例えば赤色）を検出し、筆記色が赤色に決定されるといった筆記色の選択操作と、表示部２２２の表示画面に沿って移動される筆記操作とが、ユーザーによって行われる。

色情報取得部２１４は、無線通信部２２６が受信した、電子ペン８００の筆記色（図６では赤色が選択されている）を示す色情報を、無線通信部２２６から取得する。

筆記画像描画部２１５は、色情報取得部２１４が取得した色情報が示す筆記色で、かつ、タッチパネル２２３が検知した各筆記座標を結ぶ軌跡で、筆記画像を表示部２２２の表示画面の画像上に描画する。例えば図６の右上に示すように、画像Ｇ１上に赤色の筆記画像Ｗ１が描画される。

筆記情報生成部２１６は、筆記画像描画部２１５が描画した筆記画像の各筆記座標を示す座標情報と色情報とを含む筆記情報を生成する。

通信部２２４は、筆記画像描画部２１５により筆記画像が描画された画像データと、筆記情報とを画像形成装置１に送信する。なお、通信部２２４は、特許請求の範囲における送信部の一例となる。

次に、画像形成装置１について図面を参照して説明する。図２は、画像形成装置１の外観を示す斜視図である。画像形成装置１は、例えば、コピー機能、プリンター機能、スキャナー機能、及びファクシミリ機能のような複数の機能を兼ね備えた複合機である。

図２に示すように、画像形成装置１は、装置本体２と、装置本体２の上方に配置された画像読取部５と、画像読取部５と装置本体２との間に設けられた連結部３とから構成される。

画像形成装置１の外郭を構成する筐体７には、画像形成装置１の様々な機能を実現するための複数の構成機器が収容されている。例えば、筐体７には、画像読取部５、画像形成部１２（図３）、定着部１３（図３）、給紙部３０等が収容されている。

画像読取部５は、原稿搬送部６と、原稿搬送部６により搬送されてくる原稿又は不図示のコンタクトガラスに載置された原稿を光学的に読み取るスキャナーとを有するＡＤＦ（Auto Document Feeder）である。画像形成装置１が画像読取動作を行う場合、画像読取部５は、原稿搬送部６により搬送されてくる原稿又は不図示のコンタクトガラスに載置された原稿を１枚ずつ読み取ることで、原稿の画像を取得する。なお、画像読取部５は、特許請求の範囲における原稿読取部の一例となる。

画像形成部１２は、感光体ドラム、帯電装置、露光装置、現像装置、及び転写装置を備え、画像読取部５によって読み取られた画像や、ネットワーク接続されたコンピューター２００や他のファクシミリ装置から送られてくる印刷データを用いて、給紙部３０から供給される記録紙に画像を形成（印刷）する。画像形成済みの記録紙は定着部１３による定着処理を受けた後、排出トレイ４に排出される。

操作部４７は、例えば、当該画像形成装置１により可能な機能の実行を指示するためのスタートキーやユーザー（操作者）の操作を確定させる決定キー（エンターキー）、更に、数値入力を行うための数値入力キー等を備える。

また、操作部４７は、ユーザーへの操作案内等を表示する表示部４７３を備えている。表示部４７３はタッチパネルになっており、ユーザーは表示部４７３に表示される画像やアイコンに触れることで画像形成装置１を操作することができる。

次に、画像形成装置１の構成を説明する。図３は画像形成装置１の主要内部構成例を示す機能ブロック図である。

画像形成装置１は、制御ユニット１０を備える。制御ユニット１０は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、ＣＰＵ（Central Processing Unit）、ＭＰＵ(Micro-Processing Unit）、又はＡＳＩＣ（Application Specific Integrated Circuit）等である。

画像読取部５は、制御ユニット１０による制御の下、光照射部及びＣＣＤセンサー等を有する読取機構を備える。画像読取部５は、光照射部により原稿を照射し、その反射光をＣＣＤセンサーで受光することにより、原稿から画像を読み取る。

画像処理部３１は、画像読取部５で読み取られた原稿画像を、必要に応じて画像処理する。例えば、画像処理部３１は、画像読取部５により読み取られた画像が画像形成部１２により画像形成された後の品質を向上させるために、シェーディング補正等の予め定められた画像処理を行う。

画像メモリー３２は、画像読取部５による読取で得られた原稿画像を一時的に記憶したり、画像形成部１２による画像形成の対象となる画像を一時的に保存したりする領域である。

画像形成部１２は、画像読取部５で読み取られた原稿画像、ネットワーク接続されたコンピューター２００から受信した印刷データ等の画像形成を行う。この印刷データとしては、例えば図６の右上に示すように、筆記画像Ｗ１が描画された画像Ｇ１の画像データが含まれる。

定着部１３は、画像形成部１２の画像形成処理により表面に画像（トナー像）が形成された記録紙を加熱し、熱圧着により当該画像を記録しに定着させる定着処理を行う。

操作部４７は、画像形成装置１が実行可能な各種動作及び処理についてユーザーからの指示を受け付ける。操作部４７は、ユーザーへの操作案内等を表示する表示部４７３を備えている。

ファクシミリ通信部７１は、図略の符号化／復号化部、変復調部及びＮＣＵ（Network Control Unit）を備え、公衆電話回線網を用いてのファクシミリの送受信を行うものである。

ネットワークインターフェイス部９１は、ＬＡＮボード等の通信モジュールから構成され、当該ネットワークインターフェイス部９１に接続されたＬＡＮ等を介して、コンピューター２００と種々のデータの送受信を行う。特に、ネットワークインターフェイス部９１は、コンピューター２００からの印刷データ、例えば筆記画像が描画された画像データと、筆記情報とを受信する。なお、ネットワークインターフェイス部９１は、特許請求の範囲における受信部の一例となる。

ＨＤＤ（Hard Disk Drive）９２は、各種のデータやプログラム、画像読取部５によって読み取られた原稿画像等を記憶する大容量の記憶装置である。また、ＨＤＤ９２は、筆記画像のパターンを特定するための予め定められた複数種類の筆記パターンを記憶する筆記パターン記憶部９２１を備えている。筆記パターン記憶部９２１は、第１〜第８筆記パターンと、第１〜第８種筆記パターンと、第１〜第３背景筆記パターンとを記憶している。なお、ＨＤＤ９２は、特許請求の範囲における記憶部の一例となる。

第１筆記パターンは、図６の右上に示す筆記画像Ｗ１のように、輪郭内が白色である図形Ｚ１に対して、輪郭内に位置しかつ当該輪郭に沿う態様の筆記パターンである。第２筆記パターンは、図７の右上に示す筆記画像Ｗ２のように、図形Ｚ１の輪郭外に位置しかつ当該輪郭に沿う態様の筆記パターンである。第３筆記パターンは、図９（Ａ）の左端に示す筆記画像Ｗ３のように、輪郭内が有色（白色以外の色）である図形Ｚ２に対して、輪郭外に位置しかつ当該輪郭に沿う態様の筆記パターンである。第４筆記パターンは、図９（Ｂ）の左端に示す筆記画像Ｗ４のように、第３筆記パターンの筆記画像Ｗ３の外側に位置しかつ当該輪郭に沿う態様の筆記パターンである。第５筆記パターンは、図１０（Ａ）の左端に示す筆記画像Ｗ５のように、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内にドットが記された態様とからなる筆記パターンである。第６筆記パターンは、図１０（Ｂ）の左端に示す筆記画像Ｗ６のように、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内に十字が記された態様とからなる筆記パターンである。第７筆記パターンは、図１１（Ａ）の左端に示す筆記画像Ｗ７のように、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内にドット及び十字以外の模様が記された態様とからなる筆記パターンである。第８筆記パターンは、図１１（Ｂ）の左端に示す筆記画像Ｗ８のように、図形Ｚ１の輪郭の一部範囲が第１筆記色でなぞられ、かつ、図形Ｚ１の輪郭のうち前記一部範囲以外の残り範囲を第２筆記色でなぞられた態様の筆記パターンである。

第１種筆記パターンは、図１２の右上に示す筆記画像Ｗ１１のように、輪郭内が白色である連結図形ＲＺに対して、連結図形ＲＺの一部の図形Ｚ３の輪郭内に位置しかつ当該輪郭に沿う態様の筆記パターンである。第２種筆記パターンは、図１３（Ａ）の左端に示す筆記画像Ｗ１２のように、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの一部の図形Ｚ３に沿う態様の筆記パターンである。第３種筆記パターンは、図１３（Ｂ）の左端に示す筆記画像Ｗ１３のように、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの外周のうち予め定められた閾値範囲以上（例えば外周長さの１／２又は２／３以上など）にわたって連結図形ＲＺに沿う態様の筆記パターンである。第４種筆記パターンは、図１４（Ａ）の左端に示す筆記画像Ｗ１４のように、輪郭内が有色である連結図形ＲＺに対して、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの一部の図形Ｚ５に沿う態様の筆記パターンである。第５種筆記パターンは、図１４（Ｂ）の左端に示す筆記画像Ｗ１５のように、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの外周のうち予め定められた閾値範囲以上（例えば外周長さの１／２又は２／３以上など）にわたって連結図形ＲＺに沿う第１筆記色による態様と、連結図形ＲＺの少なくとも一部の図形Ｚ５、Ｚ６の輪郭内に位置しかつ当該輪郭に沿う第２筆記色による態様とからなる筆記パターンである。第６種筆記パターンは、図１５（Ａ）の左端に示す筆記画像Ｗ１６又は図１６の左端に示す筆記画像Ｗ１８のように、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの一部の図形Ｚ３に沿う態様と当該一部の図形Ｚ３の輪郭内又は輪郭外にドットが記された態様とからなる筆記パターンである。第７種筆記パターンは、図１５（Ｂ）の左端に示す筆記画像Ｗ１７のように、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの一部の図形Ｚ３に沿う態様と当該一部の図形Ｚ３の輪郭内又は輪郭外に十字が記された態様とからなる筆記パターンである。第８種筆記パターンは、連結図形の輪郭外に位置しかつ当該連結図形の一部の図形に沿う態様と当該一部の図形の輪郭内又は輪郭外にドット及び十字以外の模様が記された態様とからなる筆記パターンである。

第１背景筆記パターンは、図１７の右上に示す筆記画像Ｗ２１のように、背景ＢＺの全体の色変更を示す態様の背景筆記パターンである。第２背景筆記パターンは、図１８の右上に示す筆記画像Ｗ２２のように背景ＢＺの一部の閉領域を指定する態様と、筆記画像Ｗ２１のように閉領域の色変更を示す態様とからなる背景筆記パターンである。第３背景筆記パターンは、図１９（Ａ）又は図１９（Ｂ）の左端に示す筆記画像Ｗ２３、Ｗ２４のように、閉領域の階調を示す態様の背景筆記パターンである。

駆動モーター７０は、画像形成部１２や定着部１３等における各回転部材及び搬送ローラー対等に回転駆動力を付与する駆動源である。

制御ユニット１０は、制御部１００と、筆記画像特定部１０１と、判定部１０５と、処理特定部１０６と、色変更部１０７と、図形輪郭抽出部１０２と、連結図形輪郭抽出部１０３と、背景特定部１０４とを備える。

制御ユニット１０は、ＨＤＤ９２に記憶された制御プログラムが上記プロセッサーで実行されることにより、制御部１００と、筆記画像特定部１０１と、図形輪郭抽出部１０２と、連結図形輪郭抽出部１０３と、背景特定部１０４と、判定部１０５と、処理特定部１０６と、色変更部１０７として機能する。なお、制御ユニット１０の上記の各構成要素は、前述の制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部１００は、画像形成装置１の全体的な動作制御を司る。また、制御部１００は、画像読取部５、原稿搬送部６、画像処理部３１、画像メモリー３２、画像形成部１２、定着部１３、操作部４７、表示部４７３、ファクシミリ通信部７１、ネットワークインターフェイス部９１、及びＨＤＤ（ハードディスクドライブ）９２等と接続され、これら各部の駆動制御を行う。

筆記画像特定部１０１は、ネットワークインターフェイス部９１にて受信した画像データによる画像中の筆記画像を、筆記情報に含まれる座標情報と色情報とを用いて特定する。例えば図６の左下に示す場合には、筆記画像特定部１０１は、筆記画像Ｗ１の画像Ｇ１上の位置を示す座標情報により、画像Ｇ１における筆記画像Ｗ１を特定する。

図形輪郭抽出部１０２は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中の図形のうち、筆記画像を含む図形又は筆記画像が外周に位置する図形の輪郭を抽出する。例えば図６の左下に示す場合には、図形輪郭抽出部１０２は、筆記画像Ｗ１を含む図形Ｚ１の輪郭を抽出する。また、図７の左下に示す場合には、図形輪郭抽出部１０２は、筆記画像Ｗ１が外周に位置する図形Ｚ１の輪郭を抽出する。

連結図形輪郭抽出部１０３は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中の連結図形のうち、筆記画像を含む連結図形又は筆記画像が外周に位置する連結図形の輪郭を抽出する。例えば図１２の左下に示す場合には、連結図形輪郭抽出部１０３は、筆記画像Ｗ１１を含む連結図形ＲＺの輪郭を抽出し、連結図形ＲＺが図形Ｚ３と図形Ｚ４とが連結されて構成されていることから、連結図形ＲＺであると特定する。また、図１３（Ａ）の左端に示す場合には、連結図形輪郭抽出部１０３は、筆記画像Ｗ１２が外周に位置する連結図形ＲＺの輪郭を抽出する。なお、連結図形輪郭抽出部１０３は、連結図形ＲＺの輪郭を抽出した場合に、連結図形であることを示す連結図形フラグを「１」として例えばＨＤＤ９２に記憶させる。

背景特定部１０４は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中において輪郭が閉じていない領域を背景として特定する。例えば図１７の左下に示す場合には、背景特定部１０４は、筆記画像Ｗ２１を含む領域の輪郭が閉じていない場合には、当該領域を背景ＢＺとして特定する。すなわち、画像Ｇ４のうち筆記画像Ｗ２１を含む領域については、下部側に山状の輪郭が抽出されるのみで、当該画像Ｇ４のうち左辺、上辺及び右辺には輪郭が検出されないことから、画像Ｇ４のうち筆記画像Ｗ２１を含む領域は背景ＢＺとして特定される。背景特定部１０４は、背景ＢＺと特定した場合に、背景であることを示す背景フラグを「１」として例えばＨＤＤ９２に記憶させる。

判定部１０５は、筆記画像特定部１０１が特定した筆記画像が、画像中の図形輪郭抽出部１０２が輪郭を抽出した図形に対する予め定められた筆記パターンとして、例えば第１〜第８筆記パターンの何れの筆記パターンに合致するか否かを判定する。例えば図６の左下に示す筆記画像Ｗ１の場合には、判定部１０５は、画像データの図形Ｚ１の輪郭内の画素が白色であることから、図形Ｚ１の輪郭内が白色であると判定し、筆記画像Ｗ１が図形Ｚ１の輪郭内に位置しかつ当該輪郭に沿う態様であることから、筆記画像Ｗ１が、輪郭内が白色である図形Ｚ１に対して、輪郭内に位置しかつ当該輪郭に沿う態様の第１筆記パターンに合致すると判定する。

判定部１０５は、筆記画像特定部１０１が特定した筆記画像が、画像中の連結図形輪郭抽出部１０３が輪郭を抽出した連結図形に対する予め定められた筆記パターンとして、例えば第１〜第８種筆記パターンの何れの筆記パターンに合致するか否かを判定する。

判定部１０５は、筆記画像特定部１０１が特定した筆記画像が、画像中の背景特定部１０４が特定した背景に対する予め定められた筆記パターンとして、例えば第１〜第３背景筆記パターンの何れの筆記パターンに合致するか否かを判定する。

処理特定部１０６は、判定部１０５にて筆記画像が筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する。例えば、処理特定部１０６は、例えば図６の左下に示す筆記画像Ｗ１が第１筆記パターンに合致すると判定されると、第１筆記パターンに対応する色変更処理としての第１色変更処理を特定する。この第１色変更処理は、図形の輪郭及び輪郭内を筆記色に変更する処理である。例えば図６の下中央に示すように、図形Ｚ１１の輪郭及び輪郭内を筆記色である赤色に変更する第１色変更処理が特定される。

色変更部１０７は、画像中から筆記画像を削除し、処理特定部１０６が特定した色変更処理に従って当該画像中の図形の表示態様を色情報が示す筆記色による表示態様に変更する。例えば第１色変更処理の場合には、図６の下中央に示すように、図形Ｚ１１の輪郭及び輪郭内を筆記色である赤色に変更する処理が実行される。

画像形成部１２は、色変更部１０７が図形の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。画像形成部１２は、例えば図６の右下に示すように、図形Ｚ１１の輪郭及び輪郭内を筆記色である赤色に変更した画像Ｇ１１を記録紙に形成する。

次に、本実施形態の画像処理システム３００のコンピューター２００における画像データ送信処理を、図４に示すフローチャートを参照して説明する。

まず、コンピューター２００の画像取得部２１３は、ユーザーによる操作に従って、画像形成装置１にて画像形成される原稿として、輪郭が閉じた図形を含む画像の原稿の画像データを、記憶部２２５から取得する（Ｓ１１）。そして、制御部２１１は、画像取得部２１３が取得した画像（例えば図６の左上に示すように、輪郭が閉じた三角形の図形Ｚ１を含む画像Ｇ１）を、表示部２２２の表示画面に表示させる（Ｓ１２）。

そして、制御部２１１は、電子ペン８００による操作の有無を判定する（Ｓ１３）。電子ペン８００による操作、すなわち、電子ペン８００に対して筆記色の選択操作がユーザーにより行われ、電子ペン８００を表示部２２２の表示画面に沿って移動させる筆記操作がユーザーにより行われると（Ｓ１３「Ｙｅｓ」）、色情報取得部２１４は、電子ペン８００にて選択された筆記色を示す色情報を取得し、筆記画像描画部２１５は、色情報取得部２１４が取得した色情報が示す筆記色で、かつ、タッチパネル２２３が検知した各筆記座標を結ぶ軌跡で、筆記画像を表示部２２２の表示画面の画像上に描画する（Ｓ１４）。例えば図６の右上に示すように、画像Ｇ１上に筆記画像Ｗ１が描画される。一方、電子ペン８００による操作が一定期間において無かった場合（Ｓ１３「Ｎｏ」）には、本処理を終了する。

筆記情報生成部２１６は、筆記画像描画部２１５が描画した筆記画像の各筆記座標を示す座標情報と色情報とを含む筆記情報を生成する（Ｓ１５）。そして、制御部２１１は、ユーザーによる送信指示の有無を判定する（Ｓ１６）。具体的には、制御部２１１は、表示部２２２の表示画面に表示された「送信」のボタン表示にユーザーが触れると、このユーザーによる接触操作がタッチパネル２２３によって検出され（Ｓ１６「Ｙｅｓ」）、筆記画像描画部２１５により筆記画像が描画された画像データと、筆記情報生成部２１６が生成した筆記情報とを、通信部２２４から画像形成装置１に送信させ（Ｓ１７）、本処理を終了する。一方、制御部２１１は、ユーザーによる送信指示が無い場合（Ｓ１６「Ｎｏ」）には、送信指示を受けるまで待機する。

次に、本実施形態の画像処理システム３００の画像形成装置１における色等変更後画像の画像形成処理を、図５に示すフローチャートを参照して説明する。

画像形成装置１の制御部１００は、ネットワークインターフェイス部９１がコンピューター２００からの印刷データ、例えば筆記画像が描画された画像データと、筆記情報とを受信したか否かを判定する（Ｓ２１）。

ネットワークインターフェイス部９１が、筆記画像が描画された画像データと、筆記情報とを受信した場合（Ｓ２１「Ｙｅｓ」）、筆記画像特定部１０１は、ネットワークインターフェイス部９１にて受信した画像データによる画像中の筆記画像を、筆記情報に含まれる座標情報と色情報とを用いて特定する（Ｓ２２）。例えば図６の左下に示す場合には、筆記画像Ｗ１が特定される。一方、ネットワークインターフェイス部９１が、筆記画像が描画された画像データと、筆記情報とを受信しない場合（Ｓ２１「Ｎｏ」）には、本処理を終了する。

図形輪郭抽出部１０２は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中の図形のうち、筆記画像を含む図形又は筆記画像が外周に位置する図形の輪郭を抽出する（Ｓ２２Ａ）。また、連結図形輪郭抽出部１０３は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中の連結図形のうち、筆記画像を含む連結図形又は筆記画像が外周に位置する連結図形の輪郭を抽出する（Ｓ２２Ａ）。背景特定部１０４は、既知のエッジ検出処理により、ネットワークインターフェイス部９１にて受信した画像データによる画像中において輪郭が閉じていない領域を背景として特定する（Ｓ２２Ａ）。

判定部１０５は、筆記画像特定部１０１が特定した筆記画像が、いずれの筆記パターンに合致するか否かを判定する（Ｓ２３）。具体的には、制御部１００が例えば連結図形フラグが「０」であると判定すると、判定部１０５は、画像中の図形に対する予め定められた第１〜第８筆記パターンの何れに合致するか否かを判定し、制御部１００が例えば連結図形フラグが「１」であると判定すると、判定部１０５は、画像中の連結図形に対する予め定められた第１〜第８種筆記パターンの何れに合致するか否かを判定し、制御部１００が例えば背景フラグが「１」であると判定すると、判定部１０５は、第１〜第３背景筆記パターンの何れに合致するか否かを判定する（Ｓ２３）。例えば図６の左下に示す筆記画像Ｗ１は、輪郭内が白色である図形Ｚ１に対して、輪郭内に位置しかつ当該輪郭に沿う態様であるため、第１筆記パターンに合致すると判定される。

処理特定部１０６は、判定部１０５にて筆記画像が筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理（例えば図６の場合には第１色変更処理）を特定する（Ｓ２４）。

色変更部１０７は、画像中から筆記画像を削除し、処理特定部１０６が特定した色変更処理に従って当該画像中の図形の表示態様を色情報が示す筆記色による表示態様に変更する（Ｓ２５）。例えば図６の下中央に示すように、第１色変更処理の場合には、筆記画像Ｗ１を削除し、図形Ｚ１の輪郭及び輪郭内を赤色に変更した図形Ｚ１１が生成される。

そして、制御部１００は、ユーザーによる画像形成指示の有無を判定する（Ｓ２６）。具体的には、制御部１００は、表示部４７３の表示画面に表示された「印刷」のボタン表示にユーザーが触れると、このユーザーによる接触操作が表示部４７３のタッチパネル機能によって検出され（Ｓ２６「Ｙｅｓ」）、画像形成部１２は、色変更部１０７が図形の表示態様を筆記色による表示態様に変更した画像を記録紙に形成し（Ｓ２７）、本処理を終了する。例えば図６の右下に示すように、図形Ｚ１の輪郭及び輪郭内が赤色に変更された図形Ｚ１１を含む画像Ｇ１１が記録紙に形成される。一方、制御部１００は、ユーザーによる印刷指示が無い場合（Ｓ２６「Ｎｏ」）には、印刷指示を受けるまで待機する。

上記では、図６に示すように筆記画像Ｗ１が第１筆記パターンに合致する場合に、図形Ｚ１の輪郭及び輪郭内を筆記色（例えば赤色）に変更でき、色変更した図形Ｚ１１を含む画像Ｇ１１を記録紙に形成できることについて説明したが、それ以外の筆記パターンの場合について、以下に説明する。

図７の左下に示すように、筆記画像Ｗ２が、図形Ｚ１の輪郭外に位置しかつ当該輪郭に沿う態様の第２筆記パターンに合致する場合には、処理特定部１０６は、第２筆記パターンに対応する第２色変更処理を特定し、色変更部１０７は、第２色変更処理に従って図形Ｚ１の輪郭の色のみを赤色に変更した図形Ｚ１２を生成し、色変更後の図形Ｚ１２を含む画像Ｇ１２が記録紙に形成される。この場合には、図形Ｚ１の輪郭を筆記色に変更でき、色変更した図形Ｚ１２を含む画像Ｇ１２を記録紙に形成できる。

図８の左下に示すように、２つの筆記画像Ｗ１、Ｗ２がそれぞれ第１、第２筆記パターンに合致する場合には、処理特定部１０６は、第１、第２筆記パターンに対応する第１、第２色変更処理を特定し、色変更部１０７は、第１色変更処理に従って図形Ｚ１の輪郭内の色を筆記画像Ｗ１の筆記色である赤色に変更し、第２色変更処理に従って図形Ｚ１の輪郭の色のみを筆記画像Ｗ２の筆記色である青色に変更した図形Ｚ１３を生成し、色変更後の図形Ｚ１３を含む画像Ｇ１３が記録紙に形成される。この場合には、図形Ｚ１の輪郭と輪郭内とを各筆記色に変更でき、色変更した図形Ｚ１３を含む画像Ｇ１３を記録紙に形成できる。

図９（Ａ）の左端に示すように、筆記画像Ｗ３が、輪郭内が有色（例えば緑色）である図形Ｚ２に対して、輪郭外に位置しかつ当該輪郭に沿う態様の第３筆記パターンに合致する場合には、処理特定部１０６は、第３筆記パターンに対応する第３色変更処理を特定し、色変更部１０７は、第３色変更処理に従って図形Ｚ２の輪郭及び輪郭内の色を赤色に変更した図形Ｚ２１を生成し、色変更後の図形Ｚ２１を含む画像Ｇ２１が記録紙に形成される。この場合には、有色の図形Ｚ２の輪郭及び輪郭内を筆記色に変更でき、色変更した図形Ｚ２１を含む画像Ｇ１３を記録紙に形成できる。

図９（Ｂ）の左端に示すように、２つの筆記画像Ｗ３、Ｗ４がそれぞれ第３、第４筆記パターンに合致する場合、つまり、筆記画像Ｗ３が上記の第３筆記パターンに合致し、更に、筆記画像Ｗ４が筆記画像Ｗ３（第３筆記パターン）の外側に位置しかつ輪郭内が有色（例えば緑色）である図形Ｚ２の輪郭に沿う態様の第４筆記パターンに合致する場合には、処理特定部１０６は、第３、第４筆記パターンに対応する第３、第４色変更処理を特定し、色変更部１０７は、第３色変更処理に従って図形Ｚ２の輪郭内の色を筆記画像Ｗ３の筆記色である赤色に変更し、第４色変更処理に従って図形Ｚ２の輪郭の色を筆記画像Ｗ４の筆記色である青色に変更した図形Ｚ２２を生成し、色変更後の図形Ｚ２２を含む画像Ｇ２２が記録紙に形成される。この場合には、有色の図形Ｚ２の輪郭と輪郭内とを各筆記色に変更でき、色変更した図形Ｚ２２を含む画像Ｇ２２を記録紙に形成できる。

図１０（Ａ）の左端に示すように、筆記画像Ｗ５が、輪郭内が白色である図形Ｚ１に対して、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内にドットが記された態様とからなる第５筆記パターンに合致する場合には、処理特定部１０６は、第５筆記パターンに対応する第５色変更処理を特定し、色変更部１０７は、第５色変更処理に従って図形Ｚ１の輪郭の色を筆記画像Ｗ５の筆記色である赤色に変更し、図形Ｚ１の輪郭内を赤色のドット柄に変更した図形Ｚ１４を生成し、色変更後の図形Ｚ１４を含む画像Ｇ１４が記録紙に形成される。この場合には、図形Ｚ１の輪郭を筆記色に変更でき、図形Ｚ１の輪郭内を筆記色のドット柄に変更でき、色変更した図形Ｚ１４を含む画像Ｇ１４を記録紙に形成できる。

図１０（Ｂ）の左端に示すように、筆記画像Ｗ６が、輪郭内が白色である図形Ｚ１に対して、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内に十字が記された態様とからなる第６筆記パターンに合致する場合には、処理特定部１０６は、第６筆記パターンに対応する第６色変更処理を特定し、色変更部１０７は、第６色変更処理に従って図形Ｚ１の輪郭の色を筆記画像Ｗ６の筆記色である赤色に変更し、図形Ｚ１の輪郭内を赤色の格子柄に変更した図形Ｚ１５を生成し、色変更後の図形Ｚ１５を含む画像Ｇ１５が記録紙に形成される。この場合には、図形Ｚ１の輪郭を筆記色に変更でき、図形Ｚ１の輪郭内を筆記色の格子柄に変更でき、色変更した図形Ｚ１５を含む画像Ｇ１５を記録紙に形成できる。

図１１（Ａ）の左端に示すように、筆記画像Ｗ７が、輪郭内が白色である図形Ｚ１に対して、輪郭外に位置しかつ当該輪郭に沿う態様と当該輪郭内にドット及び十字以外の模様が記された態様とからなる第７筆記パターンに合致する場合には、処理特定部１０６は、第７筆記パターンに対応する第７色変更処理を特定し、色変更部１０７は、第７色変更処理に従って図形Ｚ１の輪郭の色を筆記画像Ｗ７の筆記色である赤色に変更し、図形Ｚ１の輪郭内を赤色の模様柄に変更した図形Ｚ１６を生成し、色変更後の図形Ｚ１６を含む画像Ｇ１６が記録紙に形成される。この場合には、図形Ｚ１の輪郭を筆記色に変更でき、図形Ｚ１の輪郭内を筆記色の模様柄に変更でき、色変更した図形Ｚ１６を含む画像Ｇ１６を記録紙に形成できる。

図１１（Ｂ）の左端に示すように、筆記画像Ｗ８が、輪郭内が白色である図形Ｚ１の輪郭の一部範囲が第１筆記色（図形Ｚ１の左領域部分が赤色）でなぞられ、かつ、図形Ｚ１の輪郭のうち当該一部範囲以外の残り範囲を第２筆記色（図形Ｚ１の右領域部分が青色）でなぞられた態様の第８筆記パターンに合致する場合には、処理特定部１０６は、第８筆記パターンに対応する第８色変更処理を特定し、色変更部１０７は、第８色変更処理に従って図形Ｚ１の一部範囲側の輪郭及び当該輪郭内の色を第１筆記色である赤色に変更するとともに図形Ｚ１の前記残り範囲側の輪郭及び当該輪郭内の色を第２筆記色である青色に変更した図形Ｚ１７を生成し、図形Ｚ１を２色分けした色変更後の図形Ｚ１７を含む画像Ｇ１７が記録紙に形成される。この場合には、図形Ｚ１を２つの筆記色に変更でき、２色分けした図形Ｚ１７を含む画像Ｇ１７を記録紙に形成できる。

次に、図１２〜図１６を用いて、連結図形ＲＺに対する第１〜第８種筆記パターンの場合について説明する。図１２の左上に示すように、輪郭が閉じた図形Ｚ３、Ｚ４が２つ以上連結された連結図形ＲＺを含む画像Ｇ３が、表示部２２２の表示画面に表示され、図１２の上中央に示すように、ユーザーによる電子ペン８００の筆記操作により、表示画面の画像Ｇ３上に筆記画像Ｗ１１が描画されたとする。図１２の左下に示すように、筆記画像Ｗ１１が、輪郭内が白色である連結図形ＲＺに対して、連結図形ＲＺの一部の図形Ｚ３の輪郭内に位置しかつ当該輪郭に沿う態様の第１種筆記パターンに合致する場合には、処理特定部１０６は、第１種筆記パターンに対応する第１種色変更処理を特定し、色変更部１０７は、第１種色変更処理に従って図形Ｚ３の輪郭及び輪郭内の色を筆記画像Ｗ１１の筆記色である赤色に変更した図形Ｚ３１を生成し、色変更後の図形Ｚ３１を含む画像Ｇ３１が記録紙に形成される。この場合には、連結図形ＲＺの少なくとも一つの図形Ｚ３の輪郭及び輪郭内を筆記色に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３１を記録紙に形成できる。

図１３（Ａ）の左端に示すように、筆記画像Ｗ１２が、連結図形ＲＺの輪郭外に位置しかつ当該連結図形ＲＺの一部の図形Ｚ３に沿う態様の第２種筆記パターンに合致する場合には、処理特定部１０６は、第２種筆記パターンに対応する第２種色変更処理を特定し、色変更部１０７は、第２種色変更処理に従って連結図形ＲＺの一部の図形Ｚ３の輪郭及び輪郭内の色を筆記画像Ｗ１２の筆記色である赤色に変更し、図形Ｚ３の輪郭内を赤色に変更した図形Ｚ３１を生成し、色変更後の図形Ｚ３１を含む画像Ｇ３１が記録紙に形成される。この場合には、連結図形ＲＺの一部の図形Ｚ３の輪郭及び輪郭内を筆記色に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３１を記録紙に形成できる。

図１３（Ｂ）の左端に示すように、筆記画像Ｗ１３が、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの外周のうち予め定められた閾値範囲以上（ここでは外周長さの２／３以上）にわたって連結図形ＲＺに沿う態様の第３種筆記パターンに合致する場合には、処理特定部１０６は、第３種筆記パターンに対応する第３種色変更処理を特定し、色変更部１０７は、第３種色変更処理に従って連結図形ＲＺの輪郭及び輪郭内の色を筆記画像Ｗ１３の筆記色である赤色に変更した図形Ｚ３１、Ｚ４１を生成し、色変更後の図形Ｚ３１、Ｚ４１の連結図形ＲＺを含む画像Ｇ３２が記録紙に形成される。この場合には、連結図形ＲＺの輪郭及び輪郭内を筆記色に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３２を記録紙に形成できる。

図１４（Ａ）の左端に示すように、筆記画像Ｗ１４が、輪郭内が有色（例えば緑色）である連結図形ＲＺの輪郭外に位置しかつ当該連結図形ＲＺの一部の図形Ｚ５に沿う態様の第４種筆記パターンに合致する場合には、処理特定部１０６は、第４種筆記パターンに対応する第４種色変更処理を特定し、色変更部１０７は、第４種色変更処理に従って連結図形ＲＺの一部の図形Ｚ５の輪郭及び輪郭内の色を筆記画像Ｗ１４の筆記色である赤色に変更した図形Ｚ５１を生成し、図形Ｚ６と色変更後の図形Ｚ５１とからなる連結図形ＲＺを含む画像Ｇ３３が記録紙に形成される。この場合には、連結図形ＲＺの少なくとも一つの図形Ｚ５の輪郭及び輪郭内を筆記色に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３３を記録紙に形成できる。

図１４（Ｂ）の左端に示すように、筆記画像Ｗ１５が、連結図形ＲＺの輪郭外に位置しかつ連結図形ＲＺの外周のうち予め定められた閾値範囲以上（ここでは外周長さの２／３以上）にわたって連結図形ＲＺに沿う第１筆記色による態様と、連結図形ＲＺの少なくとも一部の図形（ここでは図形Ｚ５、Ｚ６の両方）の輪郭内に位置しかつ当該輪郭に沿う第２筆記色による態様とからなる第５種筆記パターンに合致する場合には、処理特定部１０６は、第５種筆記パターンに対応する第５種色変更処理を特定し、色変更部１０７は、第５種色変更処理に従って連結図形ＲＺの輪郭の色を筆記画像Ｗ１５の第１筆記色である黒色に変更するとともに連結図形ＲＺの少なくとも一部の図形（ここでは図形Ｚ５、Ｚ６の両方）の輪郭内の色を第２筆記色である白色に変更した図形Ｚ３、Ｚ４を生成し、色変更後の図形Ｚ３、Ｚ４の連結図形ＲＺを含む画像Ｇ３１が記録紙に形成される。この場合には、連結図形ＲＺの輪郭及び輪郭内を筆記色に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３１を記録紙に形成できる。

図１５（Ａ）の左端に示すように、筆記画像Ｗ１６が、輪郭内が白色である連結図形ＲＺの輪郭外に位置しかつ当該連結図形ＲＺの一部の図形Ｚ３に沿う態様と当該一部の図形Ｚ３の輪郭内にドットが記された態様とからなる第６種筆記パターンに合致する場合には、処理特定部１０６は、第６種筆記パターンに対応する第６種色変更処理を特定し、色変更部１０７は、第６種色変更処理に従って連結図形ＲＺの一部の図形Ｚ３の輪郭の色を筆記画像Ｗ１６の筆記色である赤色に変更するとともに当該輪郭内を赤色のドット柄に変更した図形Ｚ３２を生成し、図形Ｚ４と色変更後の図形Ｚ３２とからなる連結図形ＲＺを含む画像Ｇ３４が記録紙に形成される。なお、図１５（Ａ）では図形Ｚ３の輪郭内にドットが記されているが、図１６に示すように当該輪郭外にドットが記された場合でも、図１５（Ａ）の場合と同様に変更される。この場合には、連結図形ＲＺの図形Ｚ３の輪郭を筆記色に変更でき、図形Ｚ３の輪郭内を筆記色のドット柄に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３４を記録紙に形成できる。また、図１６に示すように、異なる表示態様のドット（例えば、赤色と青色のドット）の筆記画像Ｗ１８の場合には、図形Ｚ３の輪郭内を各筆記色のドット柄に変更できる。

図１５（Ｂ）の左端に示すように、筆記画像Ｗ１７が、輪郭内が白色である連結図形ＲＺの輪郭外に位置しかつ当該連結図形ＲＺの一部の図形Ｚ３に沿う態様と当該一部の図形Ｚ３の輪郭内に十字が記された態様とからなる第７種筆記パターンに合致する場合には、処理特定部１０６は、第７種筆記パターンに対応する第７種色変更処理を特定し、色変更部１０７は、第７種色変更処理に従って連結図形ＲＺの一部の図形Ｚ３の輪郭の色を筆記画像Ｗ１７の筆記色である赤色に変更するとともに当該輪郭内を赤色の格子柄に変更した図形Ｚ３３を生成し、図形Ｚ４と色変更後の図形Ｚ３３とからなる連結図形ＲＺを含む画像Ｇ３５が記録紙に形成される。この場合には、連結図形ＲＺの図形Ｚ３の輪郭を筆記色に変更でき、図形Ｚ３の輪郭内を筆記色の格子柄に変更でき、色変更した連結図形ＲＺを含む画像Ｇ３５を記録紙に形成できる。

なお、連結図形ＲＺの輪郭外に位置しかつ当該連結図形ＲＺの一部の図形Ｚ３の輪郭内に図１５に示すドット又は格子以外の模様が記された態様とからなる第８筆記パターンの場合には、処理特定部１０６は、第８種筆記パターンに対応する第８種色変更処理を特定し、色変更部１０７は、第８種色変更処理に従って連結図形ＲＺの一部の図形Ｚ３の輪郭の色を筆記画像の筆記色に変更するとともに当該輪郭内を筆記色の模様柄に変更した図形を生成し、色変更後の図形からなる連結図形ＲＺを含む画像が記録紙に形成される。この場合には、色の模様柄に変更した連結図形ＲＺを含む画像を記録紙に形成できる。

次に、図１７〜図２０を用いて、背景に対する第１〜第３背景筆記パターンの場合について説明する。図１７の左上に示すように、背景ＢＺを含む画像Ｇ４が表示部２２２の表示画面に表示され、図１７の上中央に示すように、ユーザーによる電子ペン８００の筆記操作により、表示画面の画像Ｇ４の背景ＢＺ上に筆記画像Ｗ２１が描画されたとする。図１７の左下に示すように、筆記画像Ｗ２１が、背景ＢＺの全体の色変更を示す態様（例えば、実線矢印の態様）の第１背景筆記パターンに合致する場合には、処理特定部１０６は、第１背景筆記パターンに対応する第１背景色変更処理を特定し、色変更部１０７は、第１背景色変更処理に従って背景ＢＺの全体の色を筆記画像Ｗ２１の筆記色である赤色に変更し、色変更後の背景ＢＺを含む画像Ｇ４１が記録紙に形成される。この場合には、背景ＢＺを筆記色に変更でき、色変更した背景ＢＺを含む画像Ｇ４１を記録紙に形成できる。

図１８の左上に示すように、背景ＢＺを含む画像Ｇ４が表示部２２２の表示画面に表示され、図１８の上中央に示すように、ユーザーによる電子ペン８００の筆記操作により、表示画面の画像Ｇ４の背景ＢＺ上に境界線を示す筆記画像Ｗ２２が描画され、図１８の右上に示すように、背景ＢＺ上に筆記画像Ｗ２１が描画されたとする。図１８の左下に示すように、筆記画像Ｗ２２が背景ＢＺの一部の閉領域を指定する態様（つまり、境界線を示す態様）であり、筆記画像Ｗ２１が当該閉領域の色変更を示す態様（例えば、実線矢印の態様）とからなる第２背景筆記パターンに合致する場合には、処理特定部１０６は、第２背景筆記パターンに対応する第２背景色変更処理を特定し、色変更部１０７は、第２背景色変更処理に従って背景ＢＺの閉領域の色を筆記画像Ｗ２１の筆記色である赤色に変更し、色変更後の背景ＢＺを含む画像Ｇ４２が記録紙に形成される。この場合には、背景ＢＺの一部の閉領域を筆記色に変更でき、一部の閉領域を色変更した背景ＢＺを含む画像Ｇ４２を記録紙に形成できる。

図１９（Ａ）の左端に示すように、ユーザーによる電子ペン８００の筆記操作により、表示画面の画像Ｇ４の背景ＢＺ上に境界線を示す筆記画像Ｗ２２が描画され、背景ＢＺ上に筆記画像Ｗ２１、Ｗ２３が描画されたとする。筆記画像Ｗ２２が背景ＢＺの一部の閉領域を指定する態様（つまり、境界線を示す態様）であり、筆記画像Ｗ２１が当該閉領域の色変更を示す態様（例えば、実線矢印の態様）である第１背景筆記パターンに合致する場合には、処理特定部１０６は、第１背景筆記パターンに対応する第１背景色変更処理を特定し、色変更部１０７は、第１背景色変更処理に従って背景ＢＺの閉領域の色を筆記画像Ｗ２１の筆記色である赤色に変更し、更に、筆記画像Ｗ２３が閉領域の階調を示す態様（例えば、破線矢印の態様）の第３背景筆記パターンに合致する場合には、処理特定部１０６は、第３背景筆記パターンに対応する第３背景色変更処理を特定し、色変更部１０７は、第３背景色変更処理に従って背景ＢＺの閉領域の赤色に対して階調（筆記画像Ｗ２３の矢印の方向に進むに連れて濃度が濃くなっていくという濃淡変化）を付け、色変更後の背景ＢＺを含む画像Ｇ４３が記録紙に形成される。この場合には、背景ＢＺの一部の閉領域を筆記色に階調を付すことができ、一部の閉領域を階調色に変更した背景ＢＺを含む画像Ｇ４３を記録紙に形成できる。

図１９（Ｂ）の左端に示すように、ユーザーによる電子ペン８００の筆記操作により、表示画面の画像Ｇ４の背景ＢＺ上に境界線を示す筆記画像Ｗ２２が描画され、背景ＢＺ上に筆記画像Ｗ２１、Ｗ２４が描画されたとする。筆記画像Ｗ２２が背景ＢＺの一部の閉領域を指定する態様（つまり、境界線を示す態様）であり、筆記画像Ｗ２１が当該閉領域の色変更を示す態様（例えば、実線矢印の態様）である第１背景筆記パターンに合致する場合には、処理特定部１０６は、第１背景筆記パターンに対応する第１背景色変更処理を特定し、色変更部１０７は、第１背景色変更処理に従って背景ＢＺの閉領域の色を筆記画像Ｗ２１の筆記色である赤色に変更し、更に、筆記画像Ｗ２４が閉領域の階調を示す態様（例えば、破線両矢印の態様）の第３背景筆記パターンに合致する場合には、処理特定部１０６は、第３背景筆記パターンに対応する第３背景色変更処理を特定し、色変更部１０７は、第３背景色変更処理に従って背景ＢＺの閉領域の赤色に対して階調（筆記画像Ｗ２３の矢印の中央が最も薄く、かつ、筆記画像Ｗ２４の両矢印の方向に進むに連れて濃度が濃くなっていくという濃淡変化）を付け、色変更後の背景ＢＺを含む画像Ｇ４４が記録紙に形成される。この場合には、背景ＢＺの一部の閉領域を筆記色に階調を付すことができ、一部の閉領域を階調色に変更した背景ＢＺを含む画像Ｇ４４を記録紙に形成できる。

このように本実施形態１では、コンピューター２００は、表示部２２２の表示画面上の画像の図形に電子ペン８００によって筆記画像が描画された画像データと筆記情報とを画像形成装置１に送信し、この画像データと筆記情報とを画像形成装置１が受信し、画像形成装置１の筆記画像特定部１０１が筆記情報に含まれる座標情報及び色情報を用いて筆記画像を特定し、図形輪郭抽出部１０２が筆記画像を含む図形の輪郭を抽出し、判定部１０５が筆記画像の筆記パターンを判定し、処理特定部１０６が筆記パターンに対応する色変更処理を特定し、色変更部１０７が、画像中から筆記画像を削除し、色変更処理に従って当該画像中の図形輪郭抽出部１０２が抽出した図形の表示態様を色情報が示す筆記色による表示態様に変更し、画像形成部１２が図形の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。このため、コンピューター２００での画像再修正を必要とせず、電子ペン８００により、コンピューター２００の表示画像に対して簡易な色変更等の指示を行うだけでよく、画像形成装置１の側で当該図形の表示態様を変更した画像を、簡易かつ迅速に記録紙に画像形成することができる。すなわち、画像形成装置１における出力直前の原稿中の図形等の色等変更指示を反映させた色等変更後の原稿生成を、画像形成装置１の側で簡易かつ迅速に行うことができる。

また、連結図形輪郭抽出部１０３が連結図形の輪郭を抽出した場合には、色変更処理に従って当該画像中の連結図形輪郭抽出部１０３が抽出した連結図形の表示態様を色情報が示す筆記色による表示態様に変更し、画像形成部１２が連結図形の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。このため、コンピューター２００での画像再修正を必要とせず、電子ペン８００により、コンピューター２００の表示画像に対して簡易な色変更等の指示を行うだけでよく、画像形成装置１の側で当該連結図形の表示態様を変更した画像を、簡易かつ迅速に記録紙に画像形成することができる。

また、背景特定部１０４が背景を特定した場合には、色変更処理に従って当該画像中の背景特定部１０４が特定した背景の表示態様を色情報が示す筆記色による表示態様に変更し、画像形成部１２が背景の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。このため、コンピューター２００での画像再修正を必要とせず、電子ペン８００により、コンピューター２００の表示画像に対して簡易な色変更等の指示を行うだけでよく、画像形成装置１の側で当該背景の表示態様を変更した画像を、簡易かつ迅速に記録紙に画像形成することができる。

なお、本実施形態１では、指示体として電子ペン８００を用いているが、表示部２２２の表示画面上に各種の色が選択可能な色パレットが表示され、色パレットの任意の色を選択するタッチペンなどを用いてもよい。タッチペンの場合には、色パレットの色の選択操作が行われると、当該色の色情報が色情報取得部２１４に出力されるため、無線通信部２２６が不要となる。

次に、実施形態２の画像形成装置１について、図２０を用いて説明する。図２０は、実施形態２の画像形成装置１の主要内部構成例を示す機能ブロック図である。なお、図３に示した構成と同じ構成については同符号を付して説明を略する。

図２０に示す画像形成装置１の制御ユニット１０は、図３に示す筆記画像特定部１０１に替えて、筆記画像取得部１０８を備える。

筆記画像取得部１０８は、筆記具により記録紙に筆記画像が描画された描画紙を画像読取部５が読み取った描画後画像データと、記憶部に記憶された原稿の画像データとの差分を取ることにより、筆記具の筆記画像を取得する。

上記の筆記具としては、油性又は水性のカラーペン、マジック、ボールペンなどがある。また、上記の筆記具として、上記実施形態１の電子ペン８００にインク吐出機能を持たせた電子ペンを用いてもよい。例えば、インク吐出機能付きの電子ペンとしては、不図示の各色のインクタンクと、図１に示す色判定部８０４が判定した色を、各色のインクタンクからのインクを調合することにより生成する不図示のインク色生成部と、このインク色生成部からのインクを吐出する不図示のインクヘッド部とを備え、図１のＲＧＢカラーセンサー８０２で検出した色のインクを当該電子ペンの内部で生成し、記録紙などに実際に描画するものがある。このような、インク吐出機能付きの電子ペンによれば、対象物の任意の色を検出でき、この検出した色で記録紙に実際に描画することができ、色選択の自由度を飛躍的に拡大させることができる。

次に、実施形態２の画像形成装置１における色等変更後画像の画像形成処理を、図２１に示すフローチャートを参照して説明する。

なお、画像形成装置１は、例えば図６の左上に示す画像Ｇ１を含む記録紙を印刷済みであり、かかる印刷の際又は当該印刷前における画像読取部５での画像Ｇ１を含む原稿の読み取りの際に、画像Ｇ１の画像データが予めＨＤＤ９２に記憶されている。また、上記の印刷済みの記録紙の図形に対して、ユーザーが筆記具を用いて筆記画像が描画されているとする。

画像形成装置１の制御部１００は、筆記画像の有無の各記録紙を読み取っているか否かを判定する（Ｓ２８）。例えば、記録紙に筆記画像が描画された描画紙が原稿搬送部６にセットされ、表示部４７３の表示画面に表示された「描画紙の読み取り」のボタン表示にユーザーが触れると、このユーザーによる接触操作が表示部４７３のタッチパネル機能によって検出され、描画紙が画像読取部５にて読み取られると、制御部１００は、読み取り有りと判定し（Ｓ２８「Ｙｅｓ」）、筆記画像取得部１０８は、筆記具により記録紙に筆記画像が描画された描画紙を画像読取部５が読み取った描画後画像データと、記憶部に記憶された原稿の画像データとの差分を取ることにより、筆記具の筆記画像を取得する（Ｓ２９）。Ｓ２９の後、図２１に示すＳ２２Ａ〜Ｓ２７が上記実施形態１と同様に実行される。

このように実施形態２の画像形成装置１では、筆記画像取得部１０８が、筆記具により記録紙に筆記画像が描画された描画紙を画像読取部５が読み取った描画後画像データと、記憶部に記憶された原稿の画像データとの差分を取ることにより、筆記具の筆記画像を取得し、図形輪郭抽出部１０２が筆記画像を含む図形の輪郭を抽出し、判定部１０５が筆記画像の筆記パターンを判定し、処理特定部１０６が筆記パターンに対応する色変更処理を特定し、色変更部１０７が、色変更処理に従って原稿の画像データ中の図形輪郭抽出部１０２が抽出した図形の表示態様を色情報が示す筆記色による表示態様に変更し、画像形成部１２が図形の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。このため、コンピューター２００での画像再修正を必要とせず、筆記具により記録紙に対して簡易な色変更等の記入（つまり、簡易な筆記画像の描画）を行うだけでよく、画像形成装置１の側で当該図形の表示態様を変更した画像を、簡易かつ迅速に新たな記録紙に画像形成することができる。すなわち、画像形成装置１における出力後の原稿中の図形等の色等変更指示を反映させた色等変更後の原稿生成を、画像形成装置１の側で簡易かつ迅速に行うことができる。

また、連結図形輪郭抽出部１０３が連結図形の輪郭を抽出した場合には、連結図形の表示態様を色情報が示す筆記色による表示態様に変更でき、背景特定部１０４が背景を特定した場合には、背景の表示態様を色情報が示す筆記色による表示態様に変更でき、画像形成部１２が連結図形又は背景の表示態様を筆記色による表示態様に変更した画像を記録紙に形成する。このため、コンピューター２００での画像再修正を必要とせず、電子ペン８００により、コンピューター２００の表示画像に対して簡易な色変更等の指示を行うだけでよく、画像形成装置１の側で連結図形又は背景の表示態様を変更した画像を、簡易かつ迅速に記録紙に画像形成することができる。

１ 画像形成装置
５ 画像読取部（原稿読取部）
１２ 画像形成部
９１ ネットワークインターフェイス部（受信部）
９２ ＨＤＤ（記憶部）
３００ 画像処理システム
１００ 制御部
１０１ 筆記画像特定部
１０２ 図形輪郭抽出部
１０３ 連結図形輪郭抽出部
１０４ 背景特定部
１０５ 判定部
１０６ 処理特定部
１０７ 色変更部
１０８ 筆記画像取得部
２００ コンピューター（情報処理装置）
２１３ 画像取得部
２１４ 色情報取得部
２１５ 筆記画像描画部
２１６ 筆記情報生成部
２２２ 表示部
２２３ タッチパネル（座標検知部）
２２４ 通信部（送信部）
８００ 電子ペン（指示体、筆記具）

Claims (7)

1. 情報処理装置と画像形成装置とを備える画像処理システムであって、
   前記情報処理装置は、
   背景を含む画像を取得する画像取得部と、
   前記画像取得部が取得した画像を表示画面に表示する表示部と、
   筆記色の選択操作と、前記表示画面に沿って移動される筆記操作とがユーザーによって行われる指示体と、
   前記表示画面に沿って移動する前記指示体の当該表示画面の画像上の位置を示す各筆記座標を検知する座標検知部と、
   前記指示体にて選択された筆記色を示す色情報を取得する色情報取得部と、
   前記色情報取得部が取得した前記色情報が示す筆記色で、かつ、前記座標検知部が検知した各筆記座標を結ぶ軌跡で、筆記画像を前記表示画面の画像上に描画する筆記画像描画部と、
   前記筆記画像描画部が描画した前記筆記画像の各筆記座標を示す座標情報と前記色情報とを含む筆記情報を生成する筆記情報生成部と、
   前記筆記画像描画部により前記筆記画像が描画された画像データと、前記筆記情報とを送信する送信部と、を備え、
   前記画像形成装置は、
   前記送信部から前記画像データと前記筆記情報とを受信する受信部と、
   前記受信部にて受信した前記画像データによる画像中の前記筆記画像を、前記筆記情報に含まれる前記座標情報と前記色情報とを用いて特定する筆記画像特定部と、
   前記筆記画像特定部が特定した前記筆記画像を含む背景を特定する背景特定部と、
   前記筆記画像特定部が特定した前記筆記画像が、前記画像中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
   前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
   前記画像中から前記筆記画像を削除し、前記処理特定部が特定した色変更処理に従って当該画像中の前記背景特定部が特定した背景の表示態様を前記色情報が示す前記筆記色による表示態様に変更する色変更部と、
   前記色変更部が前記背景の色を前記筆記色に変更した画像を記録紙に形成する画像形成部と、を備える画像処理システム。
2. 背景を含む画像に筆記画像が描画された画像データと、前記筆記画像についての前記画像上の位置を示す各筆記座標の情報からなる座標情報と当該筆記画像の筆記色を示す色情報とを含む筆記情報とを、情報処理装置から受信する受信部と、
   前記受信部にて受信した前記画像データによる画像中の前記筆記画像を、前記筆記情報に含まれる前記座標情報と前記色情報とを用いて特定する筆記画像特定部と、
   前記筆記画像特定部が特定した前記筆記画像を含む背景を特定する背景特定部と、
   前記筆記画像特定部が特定した前記筆記画像が、前記画像中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
   前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
   前記画像中から前記筆記画像を削除し、前記処理特定部が特定した色変更処理に従って当該画像中の前記背景特定部が特定した背景の表示態様を前記色情報が示す前記筆記色による表示態様に変更する色変更部と、
   前記色変更部が前記背景の色を前記筆記色に変更した画像を記録紙に形成する画像形成部と、を備える画像形成装置。
3. 背景を含む原稿を読み取る原稿読取部と、
   前記原稿読取部が読み取った原稿の画像データを記憶する記憶部と、
   前記記憶部に記憶された前記原稿の画像を記録紙に形成する画像形成部と、
   筆記具により前記記録紙に筆記画像が描画された描画紙を前記原稿読取部が読み取った描画後画像データと、前記記憶部に記憶された前記原稿の画像データとの差分を取ることにより、前記筆記具の筆記画像を取得する筆記画像取得部と、
   前記筆記画像取得部が取得した前記筆記画像を含む背景を特定する背景特定部と、
   前記筆記画像取得部が取得した筆記画像が、前記原稿読取部が読み取った記録紙中の前記背景特定部が特定した背景に対する予め定められた筆記パターンに合致するか否かを判定する判定部と、
   前記判定部にて前記筆記画像が前記筆記パターンに合致すると判定された場合に、当該筆記パターンに対応する色変更処理を特定する処理特定部と、
   前記処理特定部が特定した色変更処理に従って前記原稿の画像データ中の前記背景特定部が特定した背景の表示態様を前記筆記画像取得部が取得した前記筆記画像の色である筆記色による表示態様に変更する色変更部と、を備え
   前記画像形成部は、前記色変更部が前記背景の色を前記筆記色に変更した画像を新たな記録紙に形成する画像形成装置。
4. 前記予め定められた筆記パターンには、前記背景全体の色変更を示す態様の第１背景筆記パターンが含まれ、
   前記処理特定部は、前記判定部にて前記筆記画像が前記第１背景筆記パターンに合致すると判定された場合に、当該第１背景筆記パターンに対応する前記色変更処理としての第１背景色変更処理を特定し、前記色変更部は、前記第１背景色変更処理に従って前記背景全体の色を前記筆記色に変更する、請求項２又は請求項３に記載の画像形成装置。
5. 前記予め定められた筆記パターンには、前記背景の一部の閉領域を指定する態様と当該閉領域の色変更を示す態様とからなる第２背景筆記パターンが含まれ、
   前記処理特定部は、前記判定部にて前記筆記画像が前記第２背景筆記パターンに合致すると判定された場合に、当該第２背景筆記パターンに対応する前記色変更処理としての第２背景色変更処理を特定し、前記色変更部は、前記第２背景色変更処理に従って前記閉領域の色を前記筆記色に変更する、請求項２又は請求項３に記載の画像形成装置。
6. 前記予め定められた筆記パターンには、前記背景全体の色変更を示す態様の第１背景筆記パターンと、前記背景の一部の閉領域の階調を示す態様の第３背景筆記パターンと、が含まれ、
   前記処理特定部は、前記判定部にて２つの前記筆記画像がそれぞれ前記第１背景筆記パターンと前記第３背景筆記パターンとに合致すると判定された場合に、当該第１背景筆記パターンに対応する前記色変更処理としての第１背景色変更処理を特定し、前記色変更部は、前記第１背景色変更処理に従って前記背景全体の色を前記筆記色に変更し、当該第３背景筆記パターンに対応する前記色変更処理としての第３背景色変更処理を特定し、前記色変更部は、前記第３背景色変更処理に従って前記背景全体の変更された筆記色に対して階調を付ける、請求項２又は請求項３に記載の画像形成装置。
7. 前記予め定められた筆記パターンには、前記背景の一部の閉領域を指定する態様と当該閉領域の色変更を示す態様とからなる第２背景筆記パターンと、前記閉領域の階調を示す態様の第３背景筆記パターンと、が含まれ、
   前記処理特定部は、前記判定部にて２つの前記筆記画像がそれぞれ前記第２背景筆記パターンと前記第３背景筆記パターンとに合致すると判定された場合に、当該第２背景筆記パターンに対応する前記色変更処理としての第２背景色変更処理を特定し、前記色変更部は、前記第２背景色変更処理に従って前記閉領域の色を前記筆記色に変更し、当該第３背景筆記パターンに対応する前記色変更処理としての第３背景色変更処理を特定し、前記色変更部は、前記第３背景色変更処理に従って前記閉領域の変更された筆記色に対して階調
   を付ける、請求項２又は請求項３に記載の画像形成装置。

Images