JP6705327B2 - 画像形成装置、特殊パターンの合成方法及び合成プログラム - Google Patents

Description

この発明は、画像内の位置を示す位置情報を有する特殊パターンを画像に重畳して印刷することが可能な画像形成装置、同装置で実行される特殊パターンの合成方法及び合成プログラムに関する。

例えば、コピー機能、プリンタ機能、スキャン機能等の複数の機能を備えた多機能デジタル画像形成装置であるＭＦＰ（Multi Function Peripherals）等の画像形成装置として、パーソナルコンピュータなどの端末装置から、所定モードのプリントジョブとして、図１４（Ａ）に示すような周囲に余白領域を有する電子データからなる元画像７００を受信すると、画像内の位置情報を有する同図（Ｂ）の特殊パターン７０１を元画像７００に重畳して印刷することにより、同図（Ｃ）の特殊パターン付きの印刷物７０２を作成可能な画像形成装置が知られている。この画像形成装置によって印刷された特殊パターン付きの印刷物に対して、同図（Ｄ）に示すように、ユーザーが電子ペン７０３で文字等の情報７０４を書き込むと、書き込んだ画像内の位置が電子ペン７０３と特殊パターン７０１によって特定され、これによって同図（Ｅ）に示すように、書き込んだ情報７０５が元画像の同一位置に反映されるようになっている。

このような電子ペンによる情報の書き込みは、印刷物の余白領域に対して行われることが多い。

特開２０１０−１７８０８４号公報 特開２０１１−６１８７５号公報 特開２００３−１３４３３０号公報

ところで、ユーザーは特殊パターン付きの印刷物のサイズを図１５（Ｃ）のように縮小したい場合がある。この場合、画像はユーザーが望む倍率に縮小できるが、特殊パターンを縮小することはできない。そこで、同図（Ｃ）のように、特殊パターン７０１の一部７１１を縮小後の画像サイズ７１０と同じ大きさに切り出して縮小画像に重畳することが考えられる。しかし、この場合は、印刷物７１２の余白領域における特殊パターンの位置は、縮小前の元画像の余白領域における位置とは相違するため、ユーザーが印刷物７１２の余白領域に電子ペン７０３で情報７０４を書き込んだとしても、同図（Ｄ）のように、元画像７００上の余白領域とは異なるずれた位置に情報７０５が書き込まれることになり、意図した位置に情報を反映することができない。

なお、図１４（Ａ）は元画像７００を縮小することなく特殊パターン７０１を重畳して印刷することにより印刷物７０２を作成する様子を示している。作成された印刷物７０２の余白領域と元画像７００の余白領域とは位置関係が同じであるから、印刷物７０２の余白領域に記載された文字７０４等は、同図（Ｂ）に示すように元画像７００の同じ余白領域に、符号７０５で示されるように反映される。

一方、図１６（Ａ）に示すように、特殊パターン７０１を画像７０１の縮小倍率に合わせて間引くことも考えられる。例えば図１６（Ｂ）に示す各矩形１１〜８８からなる特殊パターン７２１があるとし、この特殊パターン７２１を間引きする場合を考える。各矩形１１〜８８は特殊パターン７２１の基準サイズを示し、特殊パターン７２１の基準サイズは変更できないため、基準サイズ毎に間引きすることになる。縮小倍率が５０％のときに、この縮小倍率に合わせて特殊パターン７２１を間引きした状態の特殊パターン７２２を同図（Ｂ）の右部に示す。なお、図１６（Ｂ）において、グレー表示された各矩形は間引き前後で使用されている矩形であることを示す。

この状態で、同図（Ｃ）のように、印刷物７１２の余白領域に文字Ａを記載した場合を考える。元画像の対応する余白領域における特殊パターン７３１を図１７（Ａ）に示す。この特殊パターン７３１は「１１」〜「８４」の矩形から構成されている。縮小画像の余白領域に対応する特殊パターン７３２を同図（Ｂ）に示す。縮小後の特殊パターン７３２は、縮小前の特殊パターン７３１が基準サイズ単位で間引かれて、「１１」「１３」「３１」「３３」「５１」「５３」「７１」「７３」の６個の矩形から構成されているものとする。

同図（Ｃ）に示すように、間引き後の特殊パターン７３２上で文字を描くと、元画像の反映時には、間引かれた矩形については周囲の間引かれなかった矩形に描かれたデータを用いて補完される。このため、間引き後の特殊パターン７３２上で文字Ａを描いたときは、同図（Ｄ）に示すように補完された状態で文字「Ａ」が元画像に反映されるため、文字形状が崩れてしまい、再現性が良くない。特に、間引かれなかった矩形に描かれたデータを、間引きされた矩形上で直線状に結んで補完する方法では、文字形状の崩れが顕著になる。また、縮小倍率が大きいほど文字形状の崩れが顕著になる。

また、図１８（Ａ）に示すように、間引き後の特殊パターン７４１上で複雑な文字を描いたときは、同図（Ｂ）に補完後の状態を示すように、元画像に反映されても文字形状の崩れによって読めなくなってしまうという問題もある。

なお、特許文献１には、地紋や二次オリジナルコード等のドットの集合によって表現される模様を含む画像を単に画素のサンプリングによって縮小したのではドットが緊密化して縮小画像が全体的に黒っぽくなり、その内容が理解しづらくなるのを防止するため、画像を縮小する縮小手段と、縮小手段で画像を縮小するにあたって画像が情報を隠し持った付加画像を含む場合に当該付加画像を削除する削除手段と、を備えることを特徴とする画像処理装置が開示されている。

特許文献２には、帳票のチェックボックスに対するチェックの有無等の回答検出処理をより高精度に行うことが可能な地紋重畳装置を提供することを目的として、回答欄を有する帳票に地紋パターンを重畳する地紋重畳装置が提供される、この地紋重畳装置は、少なくとも前記回答欄の座標の情報を有するマスク情報を取得し、当該マスク情報に基づいて、地紋パターンを帳票の回答欄を除いた部分に重畳する重畳部を備える地紋重畳装置が提案されている。

特許文献３には、複数のデータ分割領域に対して異なるアルゴリズムを適用した電子透かし埋め込みを可能とした電子透かしの埋め込み処理構成を提供するために、電子透かし埋め込み処理対象となるデータを、データの特性に基づいて、または時系列に、あるいはユーザ選択によって、複数のデータ領域に分割し、各分割領域に対して異なるアルゴリズムを適用した電子透かし埋め込みを実行する装置が提案されている。

しかし、これらの特許文献１〜３に記載された技術は、画像を縮小する場合に、縮小後の縮小画像に地紋等を合成する点についての開示はなく、従って特殊パターンの一部を縮小画像のサイズと同じ大きさに切り出して縮小画像と合成する場合や、特殊パターンを画像の縮小倍率に合わせて間引いて縮小画像と合成する場合に生じる前述の問題に対して、解決策を提供しうるものではなかった。

この発明は、このような技術的背景に鑑みてなされたものであって、元画像内の位置を示す位置情報を有する特殊パターンを、元画像を縮小した縮小画像に重畳して印刷した場合に、印刷物の余白領域に電子ペン等で描かれた情報を、元画像の余白領域に適正かつ正確に反映させることができる画像形成装置を提供し、さらには画像形成装置で実行される特殊パターンの合成方法及び合成プログラムを提供することを課題とする。

上記課題は、以下の手段によって解決される。
（１）電子データからなる元画像を縮小する縮小手段と、前記元画像の余白領域を検出する余白領域検出手段と、元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小手段により元画像が縮小されたときは、前記余白領域検出手段により検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小手段による縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成手段と、前記合成手段により特殊パターンが重畳された縮小画像を印刷する印刷手段と、を備えたことを特徴とする画像形成装置。
（２）前記縮小画像の余白領域のサイズを検出するサイズ検出手段を備え、前記合成手段は、前記サイズ検出手段により検出された縮小画像の余白領域のサイズが所定値以下の場合にのみ、前記特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する前項１に記載の画像形成装置。
（３）特殊パターンの前記余白対応領域は、元画像に隣接する余白領域の前記元画像との境界に沿う方向の長さの中心を含むとともに、縮小画像の余白領域のサイズに合わせて切り出された領域である前項１または２に記載の画像形成装置。
（４）元画像内の文字列を認識処理する文字認識処理手段を備え、前記文字認識処理手段によりユーザーに文字の記入を促す独立した文字列が認識され、かつ前記余白領域検出手段により、前記文字列に隣接した領域において、前記文字列に対応した文字の記入が想定される矩形の余白領域が検出されたときは、前記合成手段は、前記矩形の余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する前項１〜３のいずれかに記載の画像形成装置。
（５）元画像に矩形の外枠を有する表が含まれているかどうかを判定する表解析手段を備え、前記表解析手段により元画像に前記表が含まれていることが判定され、かつ前記余白領域検出手段により前記表の周囲に存在する余白領域であって、前記表に関する書き込みが想定される余白領域が検出されたときは、前記合成手段は、前記余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する前項１〜４のいずれかに記載の画像形成装置。
（６）前記縮小手段による縮小倍率が一定値以下の場合にのみ、前記合成手段は、前記特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する前項１〜５のいずれかに記載の画像形成装置。
（７）前記余白領域検出手段は、印刷物上における元画像を除く領域を余白領域として検出する前項１〜６のいずれかに記載の画像形成装置。
（８）前記余白領域検出手段は、元画像内の明度が一定値以上で連続する領域を余白領域として検出する前項１〜６のいずれかに記載の画像形成装置。
（９）電子データからなる元画像を縮小する縮小ステップと、前記元画像の余白領域を検出する余白領域検出ステップと、元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小ステップにより元画像が縮小されたときは、前記余白領域検出ステップにより検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小ステップによる縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成ステップと、前記合成ステップにより特殊パターンが重畳された縮小画像を印刷する印刷ステップと、を備えたことを特徴とする画像形成装置における特殊パターンの合成方法。
（１０）電子データからなる元画像を縮小する縮小ステップと、前記元画像の余白領域を検出する余白領域検出ステップと、元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小ステップにより元画像が縮小されたときは、前記余白領域検出ステップにより検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小ステップによる縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成ステップと、前記合成ステップにより特殊パターンが重畳された縮小画像を印刷する印刷ステップと、を画像形成装置のコンピュータに実行させるための特殊パターンの合成プログラム。

前項（１）に記載の発明によれば、元画像が縮小されたときは、余白領域検出手段により検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域が、間引かれることなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引かれて、縮小画像の対応する余白領域に重畳されるから、特殊パターンの対応領域と元画像の余白領域とは位置関係が適正に保持される。このため、縮小画像の印刷後の余白領域に電子ペンで文字等の情報が記載された場合、元画像の余白領域に情報を的確に反映することができる。しかも、特殊パターンの対応領域は間引かれていないかまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引かれているから、文字形状の崩れが発生したり、複雑な文字が読めなくなるといった問題を解消できる。

前項（２）に記載の発明によれば、サイズ検出手段により検出された縮小画像の余白領域のサイズが大きい場合は、ユーザーは文字等の情報を大きく記載する傾向があるため、間引き補完による文字形状の崩れが生じても可読性の悪化は避けられる。このため、縮小画像の余白領域のサイズが所定値以下の場合にのみ、特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳することにより、文字形状の崩れ等の発生防止を図ったものである。

前項（３）に記載の発明によれば、特殊パターンの余白対応領域は、元画像に隣接する余白領域の元画像との境界に沿う方向の長さの中心を含むとともに、縮小画像の余白領域のサイズに合わせて切り出された領域とすることにより、印刷物に電子ペンで描かれた情報を、元画像の余白領域の中心部に反映することができ、見栄えが良くなる。

前項（４）に記載の発明によれば、文字認識処理手段によりユーザーに文字の記入を促す独立した文字列が認識され、かつ余白領域検出手段により、文字列に隣接した領域において、文字列に対応した文字の記入が想定される矩形の余白領域が検出されたときは、その余白領域はサイン記入欄等と考えられ文字の可読性を重視する必要がある。このため、矩形の余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳することによって、文字崩れ等の発生を抑制でき、文字の可読性を良好に確保できる。

前項（５）に記載の発明によれば、元画像に矩形の外枠を有する表が含まれている場合は、表の周囲に存在する余白領域に文字等の情報を書き込むことが多いことが予想される。このため、表解析手段により元画像に表が含まれていることが判定され、かつ表の周囲に存在する余白領域であって、表に関する書き込みが想定される余白領域が検出されたときは、表の周囲に存在する余白領域余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳することとしている。

前項（６）に記載の発明によれば、縮小手段による縮小倍率が大きい場合、縮小画像の余白領域が小さくなり、この余白領域に電子ペンで描かれた文字等も小さくなる。このため、特殊パターンの余白対応領域を間引くことなくまたは間引き率を抑制して、縮小画像の余白領域に重畳すると、元画像に反映される文字等のサイズも小さくなりすぎて、却って可読性が悪化する。このため、縮小手段による縮小倍率が一定値以下の場合にのみ、特殊パターンの余白対応領域を、間引くことなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳することとしている。

前項（７）に記載の発明によれば、印刷物上における元画像を除く領域が余白領域として検出されるから、元画像の周囲に存在する余白領域を簡単かつ確実に検出できる。

前項（８）に記載の発明によれば、元画像内の明度が一定値以上で連続する領域が余白領域として検出されるから、元画像の中に存在する余白領域であっても、確実に検出することができる。

前項（９）に記載の発明によれば、縮小画像の余白領域には、特殊パターンの対応領域が間引かれることなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引かれて重畳されるから、特殊パターンの対応領域と元画像の余白領域とは位置関係が適正に保持されることになり、このため、縮小画像の印刷後の余白領域に電子ペンで文字等の情報が記載された場合、元画像の余白領域に情報を的確に反映することができる。しかも、文字形状の崩れが発生したり複雑な文字が読めなくなるといった問題も解消できる。

前項（１０）に記載の発明によれば、特殊パターン合成モードにおいて、元画像が縮小されたときは、元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する処理を、画像形成装置のコンピュータに実行させることができる。

この発明の一実施形態に係る画像形成装置の構成を示すブロック図である。 余白領域検出処理方法の一例を説明するための図である。 余白領域検出処理方法の他の例を説明するための図である。 特殊パターンの基準サイズにおけるパターンの一例を示す図である。 （Ａ）は元画像の上下左右に余白領域が存在する様子を示す図、（Ｂ）は元画像を縮小した縮小画像が印刷された印刷物を示す図、（Ｃ）は印刷物の余白領域に文字を記入した図、（Ｄ）は文字が元画像に反映された状態の図である。 （Ａ）は、特殊パターンにおける元画像の左側の余白領域に対応する部位を示す図、（Ｂ）は中央部の８個の基準サイズのパターンで構成される特殊パターン領域を切り出し部として切り出した図、（Ｃ）は切り出し部に文字Ａを描いた状態の図、（Ｄ）は元の特殊パターンの中央部の位置に文字Ａを反映させた状態の図である。 この発明の他の実施形態を示すものであり、（Ａ）は周囲に余白領域がある元画像を示す図、（Ｂ）は（Ａ）の元画像を縮小して印刷した印刷物を示す図、（Ｃ）は印刷物に記述された文字が反映された元画像を示す図である。 （Ａ）は内部に余白領域がある元画像を示す図、（Ｂ）は（Ａ）の元画像を縮小して印刷した印刷物を示す図である。 縮小画像の縮小倍率と同等の間引き率で基準サイズ単位で間引いて形成した切り出し部を示す図である。 この発明のさらに他の実施形態を示すもので、文字等を記入するための余白領域を有する元画像を示す図である。 （Ａ）は表がある元画像を示す図、（Ｂ）は（Ａ）の元画像を縮小して印刷した印刷物を示す図である。 この発明のさらに他の実施形態を説明するための図であり、（Ａ）は元画像を示す図、（Ｂ）は（Ａ）の元画像を縮小して印刷した印刷物を示す図である。 特殊パターンの合成モードにおける画像形成装置の動作を示すフローチャートである。 元画像に特殊パターンを合成して印刷し、印刷物に記載された情報を元画像に反映させる処理を説明するための図である。 （Ａ）は元画像に特殊パターンを合成し印刷して印刷物を取得するときの説明図、（Ｂ）は（Ａ）に示す印刷物に記載された文字が反映された元画像を示す図、（Ｃ）は元画像を縮小し特殊パターンの一部を合成し印刷して印刷物を取得するときの説明図、（Ｄ）は（Ｃ）に示す印刷物に記載された文字が反映された元画像を示す図である。 （Ａ）は元画像を縮小した縮小画像に、特殊パターンを間引いて合成するときの説明図、（Ｂ）は特殊パターンを間引いたときの図、（Ｃ）は元画像を縮小した縮小画像に特殊パターンを間引いて合成し印刷した得られた印刷物に文字を記載した状態を示す図である。 特殊パターンを間引いたときに、記載された文字を補完して元画像に反映させるときの説明図である。 特殊パターンを間引いたときに、記載された文字を補完して元画像に反映させるときの問題点の一つを説明するための図で、（Ａ）は間引きされた状態で文字が記載された図、（Ｂ）は元画像に反映させるための補完後の図である。

以下、この発明の実施形態を図面に基づいて説明する。

図１はこの発明の一実施形態に係る画像形成装置１の内部構成を示すブロック図である。画像形成装置１として、この実施形態では、コピー機能、プリンタ機能、スキャン機能等の複数の機能を備えた多機能デジタル画像形成装置である前述のＭＦＰが用いられている。

画像形成装置１は、ＣＰＵ１１と、ＲＯＭ１２と、ＲＡＭ１３と、スキャナ部１４と、記憶部１５と、プリンタ部１６と、操作パネル１７と、ネットワークコントローラ（Ｎ１Ｃ）１８と、文字認識処理部１９と、表解析部２０等を備えている。

ＣＰＵ１１は、画像形成装置１の全体を統括制御し、コピー機能、プリンタ機能、スキャン機能、ファクシミリ機能等の基本機能を使用可能に制御する。また、電子データからなる画像の余白領域を検出したり、後述する特殊パターンを画像に重畳したり、画像データに文字認識処理部１９による文字認識処理を施して画像内の文字列を認識したり、表解析部２０による表解析処理を施して画像内に表が含まれているかどうかを判定するが、詳細は後述する。

ＲＯＭ１２は、ＣＰＵ１１の動作プログラム等を格納するメモリである。

ＲＡＭ１３は、ＣＰＵ１１が動作プログラムに基づいて動作する際の作業領域を提供するメモリである。

スキャナ部１４は、原稿台（図示せず）に置かれた原稿の画像を読み取り、画像データに変換する読み取り手段である。

記憶部１５は、例えばハードディスクドライブ（ＨＤＤ）などの不揮発性の記憶デバイスにより構成されており、スキャナ部２４で読み取られた原稿の画像データや、他の画像形成装置あるいはユーザー端末等から送信されてきたデータ、各種のアプリケーション等が記憶されている。また、この実施形態では、画像に重畳合成される後述の特殊パターンも記憶されている。

プリンタ部１６は、前記スキャナ部１４で読み取られた原稿の画像データやユーザー端末からのプリントデータ等を、指示されたモードに従って印刷するものである。特殊パターン合成モードの場合は、画像データに特殊パターンを重畳して印刷する。

操作パネル１７は、各種入力操作等のために使用されるものであり、メッセージや操作画面等を表示するタッチパネル式液晶等からなる表示部と、テンキー、スタートキー、ストップキー等を備えたキー入力部を備えている。

ネットワークコントローラ１８は、ネットワーク上の他の画像形成装置や、その他の外部機器例えばユーザーの端末装置等との間での通信を制御することにより、データの送受信を行うものである。

文字認識処理部１９は、スキャナ部１４で読み取られた原稿の画像、あるいはユーザー端末等から送信された画像に対して文字認識処理を行い、ユーザーによる文字の記入が想定される文字列、例えば「サイン」「署名」等の文字列を認識検出する。この文字認識処理部１９はＣＰＵ１１の機能の一部として構成される。

表解析部２０は、画像データを解析して画像内に表が含まれているかどうかを判定する。この表解析部２０もＣＰＵ１１の機能の一部として構成される。

画像形成装置１は、この実施形態では、図１４で説明したように、電子ペンによる画像（元画像）への書き込みを可能とする印刷物の作成ができるようになっている。この印刷物の作成は、画像形成装置１に特殊パターン合成モードを設定したのち、パーソナルコンピュータ等からなる端末装置から送信されてくる元画像の電子データに、元画像内の位置を示す位置情報を有する特殊パターンを重畳合成して印刷することにより行われる。また、端末装置からの指示に基づいて元画像を縮小するとともに、縮小画像に特殊パターンを重畳して印刷できるようにもなっている。

以下に、特殊パターン合成モードが設定された画像形成装置１において、縮小画像に特殊パターンを重畳して印刷する場合の画像形成装置１の動作を説明する。なお、元画像、予め設定されている用紙サイズ、縮小倍率等は、端末装置からプリンタドライバ等を介して送信されてくる情報に基づいて特定することができる。

特殊パターン合成モードにおいて画像を縮小する場合、画像形成装置１は元画像の余白検知領域を検出する。この余白領域の検出は限定はされないが、図２に示すように、予め設定されているサイズの用紙（印刷物）２００上における元画像１００を除く領域を余白領域３００として検出しても良い。これによって、元画像１００の周囲に存在する余白領域３００を簡単かつ確実に検出できる。

また、元画像の明度を解析して明度が一定値以上で連続する領域を余白領域として検出しても良い。この検出方法によれば、例えば図３に示すように、元画像１００の中に存在する余白領域３００であっても、確実に検出することができる。

元画像１００と重畳される特殊パターンは基準サイズのパターンを縦横に多数配置して形成されている。図４に特殊パターン４００の基準サイズにおけるパターンの一例を示す。特殊パターン４００は基準サイズ毎に、向きの異なる多数の微小線分や記号等からなるパターン情報４０１で構成されており、特殊パターン４００が元画像１００に重畳されて印刷された印刷物上に、軌跡入力デバイスに付属する電子ペンで文字や図形等を記述したときに、電子ペンに搭載されたパターン読み取り装置でパターン情報を読み取り、各パターンがどの方向やどの位置にあるかを判定し、軌跡入力デバイスに搭載されているＣＰＵで座標情報を算出する。そして、算出された座標情報を端末装置にリアルタイムで通知することにより、電子データである元画像１００に紙媒体で記述された軌跡情報を付加し反映するようになっている。

前述したように、元画像１００が縮小される場合、特殊パターン４００はそのまま縮小することができない。また、基準サイズ単位で間引くと文字崩れや可読性の悪化を招く。

そこで、この実施形態では、検出された元画像１００の余白領域３００に対応する特殊パターン４００の余白対応領域を、間引くことなく、縮小画像の対応する余白領域に重畳合成する。これを図５を参照して説明する。

図５（Ａ）は元画像１００の上下左右に余白領域３０１〜３０４が存在する様子を示す図であり、同図（Ｂ）は元画像１００を縮小した縮小画像１１０が印刷された印刷物５００を示す図である。ここで、元画像１００の左側余白領域３０３に対応する特殊パターンの一部を、そのまま間引くことなく切り出すとともに、この切り出し部４０１を印刷物５００の左側の余白領域に合成するものとする。そして、図５（Ｃ）に示すように、印刷物５００の左側余白領域の切り出し部４０１上に例えば文字Ａを電子ペンで記入すると、切り出し部４０１は間引かれていないため、同図（Ｄ）に示すように、切り出し部４０１の位置に対応する元画像１００の左側余白領域３０３に文字Ａがそのまま反映され、文字形状の崩れを生じることはない。また、切り出し部４０１と元画像１００の左側の余白領域３０３とは対応する位置関係が適正に保持されているから、元画像１００の余白領域３０３の適正な位置に文字が反映される。

この作用を特殊パターン４００に焦点を当てて図６で説明する。図６（Ａ）は、特殊パターン４００における元画像の左側の余白領域に対応する部位を示し、「１１」〜「８４」の３２個の基準サイズの矩形によって構成されているものとする。この特殊パターンの中から、同図（Ｂ）に示すように、中央部で連続している「３２」「３３」「４２」「４３」「３２」「５３」「６２」「６３」という８個の基準サイズの矩形で構成される特殊パターン領域を切り出し部４０１として切り出すものとする。なお、グレー表示された各矩形は、縮小前後において使用されている矩形であることを示す。

そして、この切り出し部４０１を縮小画像の左側の余白領域において重畳合成し、同図（Ｃ）に示すように、切り出し部４０１に文字Ａを描くと、これがオリジナル画像１００に反映される。切り出し部４０１は間引かれていないため、同図（Ｄ）に示すように、元の特殊パターン４００の中央部の位置に文字「Ａ」を描いたのと同じとなり、対応する元画像１００の左側の余白領域３０３にそのままの大きさで反映される。従って、文字形状の崩れを生じたり複雑な文字が読めなくなるといった不具合を生じることなく、しかも位置のずれを生じることなく、反映させることができる。

なお、図５（Ａ）に示すように、特殊パターン４００における切り出し部４０１の切り出しに際しては、元画像１００の左側余白領域３０３の上下方向の中心部に位置する領域を、縮小画像１１０の余白領域のサイズに合わせて切り出すのが良い。これによって、印刷物５００に電子ペンで記載された情報を、元画像１００の左側余白領域３０３の上下方向の中心部に反映することができ、見栄えが良くなる。他の余白領域３０１、３０２、３０４についても同様である。

図７はこの発明の他の実施形態を示すものである。この実施形態では、画像形成装置１は、縮小画像１１０の余白領域のサイズを検出するとともに、検出された縮小画像１１０の余白領域のサイズが所定値以下の場合にのみ、特殊パターン４００の余白対応領域を間引くことなく切り出して、縮小画像１１０の対応する余白領域に重畳合成する一方、縮小画像１１０の余白領域のサイズが所定値を超える場合は、特殊パターン４００の余白領域対応部位を縮小画像１１０の縮小倍率と同等の間引き率で間引いて重畳合成するものである。

図７の例では、同図（Ａ）に示すような、元画像１００の周囲上下左右に余白領域がある場合、元画像１００を例えば５０％の縮小倍率で縮小して同図（Ｂ）に示す印刷物５００を作成する。縮小画像１１０の周囲上下左右にも余白領域が存在するが、左側余白領域と上側余白領域は狭くそれらのサイズは所定値以下であるとする。一方、右側余白領域と下側余白領域は広くそれらのサイズは所定値を超えるものとする。

一般に、余白領域が狭い場合、ユーザーは余白領域に収まるように文字等を記載するため、記載する文字サイズが小さくなる傾向にあるが、特殊パターン４００から間引きして切り出すと、間引き部分の補完後の文字形状が崩れて可読性が大きく低下してしまう。このため、縮小画像１１０の余白領域のサイズが所定値以下の場合は、特殊パターン４００の余白領域対応部位を間引くことなく切り出して、この切り出し部を縮小後の対応余白領域に重畳する。一方、余白領域が十分に広い場合は、ユーザーは大きい文字で記載する傾向にあるため、間引き補完により文字形状が多少崩れても可読性が悪化することはない。このため、縮小画像１１０の余白領域のサイズが所定値を超える場合は、元画像１００に反映されたときの文字配列（レイアウト）を優先するために、特殊パターン４００の余白対応領域を縮小画像１１０の縮小倍率と同等の間引き率で間引いて重畳する。

図７の例では、図７（Ｂ）に示すように、印刷物５００の左部の余白領域に記された「渡邊」の文字が、図７（Ｃ）に示すように、そのままの大きさで文字崩れを起こすことなく反映されている。一方、印刷物５００の下部の余白領域に記された「手書き文字」の文字は、間引き補完により拡大され多少の文字崩れが発生しているが、縮小前後で文字配列（レイアウト）は保持されている。

図７の例では、縮小画像１１０の余白領域が画像の周囲に存在する場合を示したが、図８に示すように画像の内部に存在している場合も同様に適用可能である。図８の例では、同図（Ａ）に示すような、内部（内方領域）に２個の矩形の余白領域３０５、３０６が存在する元画像１００を、例えば５０％の縮小倍率で縮小して同図（Ｂ）に示す印刷物５００を作成する。縮小画像１１０の内部にも２個の矩形の余白領域３０５ａ、３０６ａが存在するが、一方の余白領域３０６ａは狭くそのサイズは所定値以下であるとし、他方の余白領域３０５ａは広くそのサイズは所定値を超えるものとする。

そこで、余白領域のサイズが所定値以下の余白領域３０６ａについては、特殊パターン４００の余白対応領域を間引くことなく切り出して、この切り出し部を縮小後の対応余白領域に合成する。一方、サイズが所定値を超える余白領域３０５ａについては、特殊パターンの余白対応領域を縮小画像１１０の縮小倍率と同等の間引き率で間引いて重畳する。

縮小後の余白領域のサイズに応じて、特殊パターンの余白対応領域の間引きの有無を切り替えるために、図６（Ｂ）に示すような間引きのない切り出し部４０１と、図９（Ｂ）に示すように、縮小画像の縮小倍率と同等の間引き率で基準サイズ単位で間引いて形成した切り出し部４０２を作成しておき、余白領域のサイズを検出したときに、検出結果に応じて何れかの切り出し部を選択して合成するようにし、合成処理時間の短縮化を図っても良い。

図１０はこの発明のさらに他の実施形態を示すものである。この実施形態では、元画像１００において、例えば署名欄のような文字等を記入するための余白領域３０７が検出された場合は、特殊パターンの余白対応領域を間引くことなく切り出して、縮小画像１１０の対応余白領域に重畳合成するものである。図１０の右部は余白領域３０７の拡大図である。

署名欄等の余白領域３０７は、文字の可読性を重視する必要があるため、元画像１００に反映させたときに文字形状の崩れが発生しないように、特殊パターンを間引くことなく切り出して合成する。

署名欄等の余白領域３０７の検出は次のようにして行う。即ち、文字認識部１９により元画像１００に対して文字認識処理を実行し、ユーザーによる文字の記入が想定される「サイン」「署名」等の文字列（図１０の例では「サイン」）を認識する。一方、余白領域検出処理により、文字の記入が想定される文字列の近傍に矩形の余白領域３０７が検出されたときは、その余白領域３０７を署名欄等と判定して、特殊パターンの対応部位を間引くことなく切り出した切り出し部を使用する。このような構成とすることにより、縮小画像１１０の印刷物の署名欄に記入された文字は、そのままの形状を保持して元画像１００の署名欄の余白領域３０７に反映されるから、文字等の可読性を悪化させることなく元画像に反映させることができる。

図１１はこの発明のさらに他の実施形態を示すものである。この実施形態では元画像に表が存在する場合の処理を示すものである。

図１１（Ａ）に示すように、元画像１００に表１２０が存在する場合、表１２０の近傍の余白領域３０８については、その表１２０に関する書き込みが行われることが想定されるので、特殊パターンの対応部位を間引くことなく切り出すとともに、同図（Ｂ）の印刷物５００に示すように、切り出し部４０３を縮小画像１１０の対応余白領域に重畳するものである。

元画像１００における表１２０の検出は表解析部２０で行われ、特殊パターンの切り出しは、表１２０の位置が上下方向の中心となるように行われるのが良い。

図１２はこの発明のさらに他の実施形態を示すものである。この実施形態では元画像１００の縮小倍率に応じて、特殊パターンの余白領域を間引きすることなく合成するか否かを決定するようになっている。

即ち、図１２（Ａ）に示す元画像１００を縮小して、同図（Ｂ）の印刷物５００に示すように印刷した場合、縮小倍率が大きい（縮小画像がより小さくなる）と、縮小画像１１０の余白領域が小さくなるため余白領域に記入される文字等も小さくなる。このため、特殊パターンを間引きすることなく切り出して縮小画像１１０に重畳すると、元画像１１０に反映される文字のサイズが小さくなりすぎて、却って可読性が悪化してしまう。

そこで、縮小倍率が一定値以下の場合にのみ、特殊パターンの余白領域を間引きすることなく、縮小画像１１０の余白領域に重畳合成し、元画像１００に反映されたときの可読性を確保する一方、縮小倍率が一定値を超える場合は、間引きして重畳することにより元画像に反映されたときに文字を拡大して反映されるようにし、可読性の悪化を防止する。

図１３は、特殊パターンの合成モードにおける画像形成装置１の動作を示すフローチャートである。この動作は画像形成装置１のＣＰＵ１１がＲＯＭ１２等の記録媒体に格納された動作プログラムに従って動作することにより実行される。

画像形成装置１はステップＳ０１で、特殊パターンの合成モードかどうかを判断し、合成モードでなければ（ステップＳ０１でＮＯ）、処理を終了する。合成モードであれば（ステップＳ０１でＹＥＳ）、ステップＳ０２で縮小印刷かどうかを調べ、縮小印刷でなければ（ステップＳ０２でＮＯ）、ステップＳ０８に進む。

縮小印刷であれば（ステップＳ０２でＹＥＳ）、ステップＳ０３で、縮小倍率に対応する間引き率を設定する。

次いで、ステップＳ０４で所定の領域毎に余白領域の検出処理を行ったのち、ステップＳ０５で余白領域かどうかを判定する。判定対象の領域が余白領域であれば（ステップＳ０５でＹＥＳ）、ステップＳ０６で、その領域についてはステップＳ０３で設定した間引き率を変更して、間引かない設定としたのち、ステップＳ０７に進む。ステップＳ０５で、判定対象の領域が余白領域でなければ（ステップＳ０５でＮＯ）、そのままステップＳ０７に進む。

ステップＳ０７では、全ての領域についての余白領域の判定を終えたかどうかを調べ、終えていなければ（ステップＳ０７でＮＯ）、ステップＳ０４に戻り、全ての領域について余白領域の判定を終えるまでステップＳ０４〜Ｓ０６の処理を繰り返す。全ての領域について余白領域の判定を終えると（ステップＳ０７でＹＥＳ）、ステップＳ０８に進む。

ステップＳ０８では、間引かない領域と間引く領域に応じて特殊パーターンを生成する。生成された特殊パターンは縮小画像に重畳合成して印刷される。

なお、図１３のフローチャートに示した動作において、縮小画像の余白領域のサイズに応じて間引かない設定としたり、縮小倍率が一定値以下の場合にのみ間引かない設定とすることも可能である。

以上、本発明の一実施形態を説明したが、本発明は上記実施形態に限定されることはない。例えば、特殊パターンの余白対応領域を間引かない構成としたが、元画像を縮小画像へ縮小する場合の縮小倍率に対応する間引き率よりも小さい間引き率で間引いてもよい。この場合は、文字形状の多少の崩れ等が発生するが、縮小倍率に対応する間引き率で間引いたときよりも文字形状の崩れ等を抑制することができる。

１ 画像形成装置
１１ ＣＰＵ
１２ ＲＯＭ
１５ 記憶部
１６ プリンタ部
１７ 操作パネル
１８ ネットワークコントローラ
１９ 文字認識部
２０ 表解析部
１００ 元画像
１１０ 縮小画像
２００、５００ 印刷物
３００〜３０７ 余白領域
４００ 特殊パターン
４０１〜４０３ 切り出し部

Claims (10)

1. 電子データからなる元画像を縮小する縮小手段と、
   前記元画像の余白領域を検出する余白領域検出手段と、
   元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小手段により元画像が縮小されたときは、前記余白領域検出手段により検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小手段による縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成手段と、
   前記合成手段により特殊パターンが重畳された縮小画像を印刷する印刷手段と、
   を備えたことを特徴とする画像形成装置。
2. 前記縮小画像の余白領域のサイズを検出するサイズ検出手段を備え、
   前記合成手段は、前記サイズ検出手段により検出された縮小画像の余白領域のサイズが所定値以下の場合にのみ、前記特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する請求項１に記載の画像形成装置。
3. 特殊パターンの前記余白対応領域は、元画像に隣接する余白領域の前記元画像との境界に沿う方向の長さの中心を含むとともに、縮小画像の余白領域のサイズに合わせて切り出された領域である請求項１または２に記載の画像形成装置。
4. 元画像内の文字列を認識処理する文字認識処理手段を備え、
   前記文字認識処理手段によりユーザーに文字の記入を促す独立した文字列が認識され、かつ前記余白領域検出手段により、前記文字列に隣接した領域において、前記文字列に対応した文字の記入が想定される矩形の余白領域が検出されたときは、前記合成手段は、前記矩形の余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する請求項１〜３のいずれかに記載の画像形成装置。
5. 元画像に矩形の外枠を有する表が含まれているかどうかを判定する表解析手段を備え、
   前記表解析手段により元画像に前記表が含まれていることが判定され、かつ前記余白領域検出手段により前記表の周囲に存在する余白領域であって、前記表に関する書き込みが想定される余白領域が検出されたときは、前記合成手段は、前記余白領域に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する請求項１〜４のいずれかに記載の画像形成装置。
6. 前記縮小手段による縮小倍率が一定値以下の場合にのみ、前記合成手段は、前記特殊パターンの余白対応領域を、間引くことなくまたは前記縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する請求項１〜５のいずれかに記載の画像形成装置。
7. 前記余白領域検出手段は、印刷物上における元画像を除く領域を余白領域として検出する請求項１〜６のいずれかに記載の画像形成装置。
8. 前記余白領域検出手段は、元画像内の明度が一定値以上で連続する領域を余白領域として検出する請求項１〜６のいずれかに記載の画像形成装置。
9. 電子データからなる元画像を縮小する縮小ステップと、
   前記元画像の余白領域を検出する余白領域検出ステップと、
   元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小ステップにより元画像が縮小されたときは、前記余白領域検出ステップにより検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小ステップによる縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成ステップと、
   前記合成ステップにより特殊パターンが重畳された縮小画像を印刷する印刷ステップと、
   を備えたことを特徴とする画像形成装置における特殊パターンの合成方法。
10. 電子データからなる元画像を縮小する縮小ステップと、
    前記元画像の余白領域を検出する余白領域検出ステップと、
    元画像内の位置を示す位置情報を有する特殊パターンを画像に重畳する特殊パターン合成モードにおいて、前記縮小ステップにより元画像が縮小されたときは、前記余白領域検出ステップにより検出された元画像の余白領域の少なくとも一部に対応する特殊パターンの余白対応領域を、間引くことなくまたは前記縮小ステップによる縮小倍率に対応する間引き率よりも小さい間引き率で間引いて、縮小画像の対応する余白領域に重畳する合成ステップと、
    前記合成ステップにより特殊パターンが重畳された縮小画像を印刷する印刷ステップと、
    を画像形成装置のコンピュータに実行させるための特殊パターンの合成プログラム。