JP2001127998A - 画像処理装置および画像処理方法 - Google Patents

Abstract

(57)【要約】 【課題】 多様化・複雑化した文書画像データから文字
要素を構成する線分データの抽出を的確に行う。 【解決手段】 所定の色成分に関する色情報を保持記憶
する記憶手段１２と、この記憶手段１２が保持記憶して
いる色情報と処理対象となる画像データとの間における
色空間上の距離を検出し、その検出結果を基に前記記憶
手段１２が保持記憶している色情報により特定される色
成分についてのみ線分抽出を行う線分抽出手段１４ａ
と、を備えるように画像処理装置を構成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、文字要素を含んだ
カラー文書画像データ中から、文字要素、さらに詳しく
は文字要素を構成する線分データを抽出する画像処理装
置および画像処理方法に関するものである。

【０００２】

【従来の技術】従来、文書画像データ中からの線分抽出
を行う画像処理装置としては、以下に述べるような方法
を用いたものが広く知られている。例えば、文書画像デ
ータ全面の濃度情報に基づいて二値化処理のための単一
のしきい値を決定し、その単一のしきい値を用いて高濃
度画素（文字要素）と低濃度画素（非文字要素、背景要
素等）を分離することで、線分抽出を行うものがある。
また、文書画像データを局所ブロックに分割し各ブロッ
ク毎の濃度情報に基づいて二値画像を生成する方法を用
いたものや、文書画像データを文字要素の存在する領域
と写真等の絵柄が存在する領域とに分割した後に文字要
素の存在する領域に対して二値化処理のためのしきい値
を設定して二値画像を生成する方法を用いたもの等もあ
る。さらに、カラー文書画像データに対しては、赤
（Ｒ），緑（Ｇ），青（Ｂ）の原色成分から明るさを表
す明度信号を生成し、それに対して上記の各処理と同様
な方法で対応するものも存在する。

【０００３】

【発明が解決しようとする課題】しかしながら、近年で
はコンピュータや画像入出力機器およびそれらに用いら
れる文書処理ソフトウェア等の文書作成環境の変化・進
歩に伴って、処理の対象となる文書画像が従来に比べて
非常に多様化・複雑化しているため、上述した従来の画
像処理装置および画像処置方法では対応することができ
ずに、結果として線分抽出を的確に行えないおそれがあ
る。

【０００４】例えば、図１７は、昨今の文書作成環境に
て作成される文書画像の一例を示したものである。従来
の画像処理装置および画像処置方法では、図中に示す
ような白背景上の黒文字を構成する線分を主たる抽出対
象としている。そのため、図中に示すような白背景上
の色文字を構成する線分や、図中に示すような背景色
を有する文字を構成する線分については、白背景上の黒
文字の場合と同等の精度で抽出することが困難である。
これに対しては、しきい値等のパラメータ設定を変更し
て、色文字を構成する線分等であっても文字要素と非文
字要素との判定時に抽出すべき線分と判定され易くする
といった対策も考えられるが、かかる場合には文字では
ない要素も誤って文字として抽出してしまう可能性が高
くなる。例えば、図中に示すような絵柄要素を有する
文書については、絵柄要素中のエッジ成分に起因して、
その絵柄について文字を構成する線分と判定してしまう
誤検出が多く発生する可能性がある。また、この他に
も、図中に示すような文字背景が一様でない領域や、
のように色背景上に色文字が存在する領域、あるいは
のように文字と背景の明暗が反転しているような領域
では、さらに線分抽出が困難になってくる。

【０００５】そこで、本発明は、上述したような多様化
・複雑化した文書画像データであってもこれに対応する
ことができ、その文書画像データから文字要素を構成す
る線分データの抽出を的確に行うことのできる画像処理
装置および画像処置方法を提供することを目的とする。

【０００６】

【課題を解決するための手段】本発明は、上記目的を達
成するために案出された画像処理装置で、画像データを
取得する取得手段と、所定の色成分に関する色情報を保
持記憶する記憶手段と、前記取得手段が取得した画像デ
ータと前記記憶手段が保持記憶している色情報との間に
おける色空間上の距離を検出する検出手段と、前記検出
手段による検出結果を基に前記記憶手段が保持記憶して
いる色情報により特定される色成分についてのみ前記取
得手段が取得した画像データからの線分抽出を行う線分
抽出手段とを備えることを特徴とするものである。

【０００７】また、本発明は、上記目的を達成するため
に案出された画像処理方法で、画像データ中から文字要
素を構成する線分データを抽出するための方法であっ
て、所定の色成分に関する色情報を保持記憶しておき、
線分データを抽出すべき画像データを取得するとその画
像データと前記色情報との間における色空間上の距離を
検出し、検出した色空間上の距離に基づいて前記色情報
により特定される色成分に係る線分データのみを取得し
た画像データ中から抽出することを特徴とする。

【０００８】既述のように多様化かつ複雑化してきた文
書画像ではあるが、数十〜数百万もの色を使用するのは
文書中の背景画像や装飾等の絵柄要素であって、文書中
の主たる情報である文字や罫線等の線分に使用される色
は一般に３〜４色程度である。また、線分に使用される
色自体も「黒」、「赤」、「白（反転）」、「濃紺」と
いったように概ね定まっているのが実情である。このこ
とから、上記構成の画像処理装置および上記手順による
画像処理方法では、所定の色成分に関する色情報を保持
記憶しておき、線分データを抽出すべき画像データを取
得すると、保持記憶している色情報により特定される色
成分に係る線分データのみを、取得した画像データから
抽出するようになっている。そのため、文書画像中の文
字要素に使用される色情報を保持記憶しておけば、その
文書画像中に多くの色成分が含まれていても、文字要素
に使用される色成分に係る線分データのみを抽出するこ
とができる。

【０００９】

【発明の実施の形態】以下、図面に基づき本発明に係る
画像処理装置および画像処理方法について説明する。

【００１０】〔第１の実施の形態〕図１は、本発明の第
１の実施の形態における画像処理装置の概略構成を示す
ブロック図である。図例のように、本実施形態における
画像処理装置は、画像入力部１１と、色情報記憶部１２
と、操作部１３と、画像処理部１４と、文字画像蓄積部
１５と、これらの各部を互いに結ぶバス１６と、を備え
ている。

【００１１】画像入力部１１は、画像処理装置の外部よ
り、複数の画素データからなる画像データを取得するも
のである。具体的には、例えばフラットベッドスキャナ
のように、原稿画像を光学的に読み取って、その原稿画
像からＲ，Ｇ，Ｂの各原色成分で表現されるデジタルカ
ラー画像データを取得するものである。ただし、画像入
力部１１は、例えば画像処理装置に接続するネットワー
ク等を通じて外部から画像データを取得するものであっ
てもよい。なお、画像入力部１１が取得する画像データ
は、Ｒ，Ｇ，Ｂそれぞれ８ビット／画素の階調数で、４
００画素／インチの解像度を有しているものとする。

【００１２】色情報記憶部１２は、所定の色成分に関す
る色情報、さらに詳しくは文字抽出の対象色となる色成
分に関する色情報を保持記憶するものである。この色情
報記憶部１２は、ＲＡＭ（Random Access Memory) 等の
半導体メモリによって構成しても、あるいはＨＤＤ（Ha
rd Disk Drive)等の補助記憶装置によって構成してもよ
い。

【００１３】操作部１３は、画像処理装置全体の動作を
制御するための操作が行われるもので、画像処理装置の
ユーザ等が操作するタッチパネルやスイッチ等からなる
ものである。この操作部１３で行われる操作としては、
色情報記憶部１２に保持記憶させる色情報の設定および
入力がある。

【００１４】画像処理部１４は、画像入力部１１が取得
したデジタルカラー画像データに対して、文字要素の抽
出処理を行うものである。そのために、画像処理部１４
は、線分画素抽出部１４ａと、不要画素除去部１４ｂ
と、画像合成部１４ｃと、ワークメモリ１４ｄと、から
構成されている。

【００１５】線分画素抽出部１４ａは、画像入力部１１
が取得したデジタルカラー画像データ中から、所定の色
成分に係る線分データ、詳しくは所定の色成分を有した
線分画像を構成する画素データを抽出するものである。
所定の色成分には、色情報記憶部１２に保持記憶されて
いる色情報によって特定されるものが該当する。なお、
色情報記憶部１２内に複数の色成分に関する色情報が保
持記憶されていれば、線分画素抽出部１４ａは、各色成
分毎に線分データの抽出を行うようになっている。

【００１６】不要画素除去部１４ｂは、線分画素抽出部
１４ａで抽出された線分データの中から、文字要素を構
成しないと判断されるデータ、例えば誤って抽出される
エッジ画素データやノイズデータなどを除去するもので
ある。なお、不要画素除去部１４ｂも、線分画素抽出部
１４ａと同様に、各色成分毎に不要データの除去を行う
ようになっている。

【００１７】画像合成部１４ｃは、線分画素抽出部１４
ａによる各色成分毎の線分データの抽出結果および不要
画素除去部１４ｂによる各色成分毎の不要データの除去
結果を合成して、画像処理部１４からの最終的な出力形
態となる画像データ、すなわち画像入力部１１で取得し
た中に含まれる文字要素に相当する画像データを生成す
るものである。

【００１８】ワークメモリ１４ｄは、これら線分画素抽
出部１４ａ、不要画素除去部１４ｂおよび画像合成部１
４ｃが処理動作を行う際のワークメモリまたはバッファ
メモリとして用いられるものである。なお、ワークメモ
リ１４ｄはＲＡＭ等の半導体メモリによって構成される
ものであるが、線分画素抽出部１４ａ、不要画素除去部
１４ｂおよび画像合成部１４ｃは、所定プログラムを実
行するマイクロコンピュータ等によりソフトウエア的に
構成しても、あるいは所定機能を有した電子回路等によ
りハードウエア的に構成してもよい。

【００１９】また、文字画像蓄積部１５は、画像処理部
１４での処理結果である文字要素に相当する画像データ
を記憶蓄積するものである。そのために、文字画像蓄積
部１５は、ＲＡＭ等の半導体メモリまたはＨＤＤ等の補
助記憶装置によって構成されている。

【００２０】ここで、以上のように構成された画像処理
装置における処理動作の概要について説明する。図２
は、本実施形態の画像処理装置での処理動作例、すなわ
ち本実施形態の画像処理装置によって行われる画像処理
方法の概要を示すフローチャートである。

【００２１】図例のように、本実施形態の画像処理装置
では、線分抽出処理に際し、先ずはじめに、抽出対象と
なる色成分の設定を行う（ステップ１０１、以下ステッ
プをＳと略す）。このとき、抽出対象色は、色情報記憶
部１２に予め保持記憶されているものであってもよい
し、操作部１３から新たに指定入力したものであっても
よい。図中では、Ｎ個の抽出対象色が既に指定され色情
報記憶部１２内に保持記憶されている場合を例に挙げて
いる。

【００２２】抽出対象色が設定されると、次いで、画像
入力部１１は、原稿画像に対する読み取りを行って、そ
の原稿画像からＲ，Ｇ，Ｂの各原色成分で表現されるデ
ジタルカラー画像データを取得する（Ｓ１０２）。ここ
で取得したカラー画像データは、画像処理部１４内のワ
ークメモリ１４ｄに一旦保持される。

【００２３】そして、画像処理部１４は、１〜Ｎ番目の
抽出対象色のうち、先ず１番目の抽出対象色について線
分抽出処理を開始する（Ｓ１０３）。すなわち、画像処
理部１４では、ワークメモリ１４ｄ内のカラー画像デー
タを読み出して、これを線分画素抽出部１４ａに入力す
る。また、このとき、線分画素抽出部１４ａには、１番
目の抽出対象色に係る色情報が色情報記憶部１２からロ
ードされる（Ｓ１０４）。これらにより、線分画素抽出
部１４ａは、入力されたカラー画像データ中から１番目
の抽出対象色の色成分を有する線分データを抽出し（Ｓ
１０５）、その線分データを不要画素除去部１４ｂへ出
力する。

【００２４】不要画素除去部１４ｂでは、線分画素抽出
部１４ａにて抽出された線分データを受け取って、その
線分データの中から誤って抽出されたノイズ成分や非文
字成分等についての画素データを除去する処理を行う
（Ｓ１０６）。そして、その処理後の画像データをワー
クメモリ１４ｄへ出力して、ワークメモリ１４ｄ内に一
旦保持記憶させる（Ｓ１０７）。

【００２５】このようにして１番目の抽出対象色につい
ての線分抽出処理が終了すると、次いで、画像処理部１
４は、２番目以降の抽出対象色に対して（Ｓ１０８）、
Ｎ番目の抽出対象色の線分抽出処理が終了するまで（Ｓ
１０９）、同様の線分抽出処理を繰り返す（Ｓ１０５〜
Ｓ１０９）。これにより、ワークメモリ１４ｄ内には、
Ｎ個の抽出対象色全てについての抽出処理結果が保持記
憶されることになる。

【００２６】全ての抽出対象色に関する抽出処理が完了
すると（Ｓ１０９）、画像処理部１４では、画像合成部
１４ｃがワークメモリ１４ｄ内の全色分の抽出処理結果
を取り出してこれらを合成する処理を行う（Ｓ１１
０）。この処理によって得られる合成画像データ、すな
わち画像処理部１４による抽出処理結果は、文字画像蓄
積部１５に記憶蓄積された後、図示しない文字認識装置
等へ送出され、その文字認識装置等での文字認識処理に
供されることになる。

【００２７】次に、上述した処理動作のうち、線分画素
抽出部１４ａが行う特定色（１〜Ｎ番目の抽出対象色）
についての線分抽出処理（図２におけるＳ１０５）につ
いて詳しく説明する。図３は、線分画素抽出部１４ａが
行う処理動作の概要を示すフローチャートである。な
お、図中において、「Ｒ，Ｇ，Ｂ」は画像入力部１１で
取得したデジタルカラー画像データの注目画素データ値
を、「Ｒｉ，Ｇｉ，Ｂｉ」は色情報記憶部１２からロー
ドされる抽出対象色の色情報値を、「ＯＵＴ」は線分画
素抽出部１４ａによる抽出結果である２値化された画素
データを表している。

【００２８】図例のように、線分画素抽出部１４ａは、
線分抽出処理を行うのにあたって、先ず、注目画素デー
タ値Ｒ，Ｇ，Ｂと抽出対象色の色情報値Ｒｉ，Ｇｉ，Ｂ
ｉとの差分信号「ΔＲ，ΔＧ，ΔＢ」を生成する（Ｓ２
０１）。差分信号ΔＲ，ΔＧ，ΔＢの生成は、以下の
（１）〜（３）式を用いて行う。

【００２９】

【数１】

【００３０】

【数２】

【００３１】

【数３】

【００３２】差分信号ΔＲ，ΔＧ，ΔＢを生成すると、
続いて、線分画素抽出部１４ａは、これらの差分信号Δ
Ｒ，ΔＧ，ΔＢを用いて色検出信号「Ｄ」を生成する
（Ｓ２０２）。色検出信号Ｄの生成は、以下の（４）式
を用いて行う。

【００３３】

【数４】

【００３４】ここで算出される色検出信号Ｄは、注目画
素データ値Ｒ，Ｇ，Ｂと抽出対象色の色情報値Ｒｉ，Ｇ
ｉ，Ｂｉとの間におけるＲＧＢ色空間上の距離を表すも
のである。すなわち、色検出信号Ｄは、ＲＧＢ色空間に
おける各画素の有する色と抽出対象色との距離を示す信
号に相当し、その値が大きくなるほど抽出対象色に近い
色であることを表している。

【００３５】なお、ここでは、注目画素データ値Ｒ，
Ｇ，Ｂと抽出対象色の色情報値Ｒｉ，Ｇｉ，Ｂｉとの間
のユークリッド距離、すなわち差分信号ΔＲ，ΔＧ，Δ
Ｂの二乗和の平方根を色検出信号Ｄとして定義している
が、例えば差分信号ΔＲ，ΔＧ，ΔＢの平均値など、２
点間の隔たりの尺度となる演算でこれを代替することも
可能であることはいうまでもない。

【００３６】色検出信号Ｄを求めると、次いで、線分画
素抽出部１４ａは、求めた色検出信号Ｄを基に線分抽出
を行う。線分抽出は、周知の手法を用いて行えばよい。
例えば、注目画素周辺で階調レベルの変化が急峻であ
り、かつ、注目画素の階調レベルが十分に高い場合に、
その注目画素を線分要素とある判断することが考えられ
る。

【００３７】具体的には、線分画素抽出部１４ａは、先
ず、求めた色検出信号Ｄを用いて、色検出信号Ｄのエッ
ジ特徴量「Ｄｅ」およびレベル特徴量「Ｄｌ」を算出す
る（Ｓ２０３，Ｓ２０４）。エッジ特徴量Ｄｅおよびレ
ベル特徴量Ｄｌは、それぞれ以下の（５）式および
（６）式のように定義される。

【００３８】

【数５】

【００３９】

【数６】

【００４０】ここで、エッジ特徴量Ｄｅは、図４の注目
画素近傍における画素配置の説明図に示すように、注目
画素を「Ｄｊ，ｋ」とすると、注目画素周辺の５×５
（主走査×副走査）画素の平均値と注目画素周辺の３×
３（主走査×副走査）画素の平均との差分の絶対値に相
当する。また、レベル特徴量Ｄｌは、注目画素周辺の３
×３（主走査×副走査）画素の平均値に相当する。な
お、（５）式および（６）式中における「Ｍ」および
「Ｎ」は、調整用のオフセットパラメータであり、画像
処理装置の特性に応じて予め実験的に定められている定
数である。

【００４１】エッジ特徴量Ｄｅおよびレベル特徴量Ｄｌ
を求めると、次いで、線分画素抽出部１４ａは、これら
エッジ特徴量Ｄｅおよびレベル特徴量Ｄｌを、それぞれ
予め設定されているしきい値ＴＨｅ，ＴＨｌと比較す
る。そして、エッジ特徴量Ｄｅがしきい値ＴＨｅ以上で
あり、かつ、レベル特徴量Ｄｌしきい値ＴＨｌ以上であ
るか否かを判定する（Ｓ２０５）。

【００４２】この判定の結果、Ｄｅ≧ＴＨｅかつＤｌ≧
ＴＨｌであれば、線分画素抽出部１４ａは、注目画素Ｄ
ｊ，ｋ周辺で階調レベルの変化が急峻であり、かつ、注
目画素の階調レベルが十分に高いので、注目画素Ｄｊ，
ｋが線分を構成する画素であると判断する。そして、注
目画素データ値Ｒ，Ｇ，Ｂに対する出力画素データ値Ｏ
ＵＴをＯＮとする（Ｓ２０６）。その一方で、Ｄｅ≧Ｔ
ＨｅかつＤｌ≧ＴＨｌでない場合には、線分画素抽出部
１４ａは、出力画素データ値ＯＵＴをＯＦＦとする（Ｓ
２０７）。

【００４３】このように、線分画素抽出部１４ａでは、
画像入力部１１が取得したデジタルカラー画像データを
構成する各画素データに対して、抽出対象色の色情報値
Ｒｉ，Ｇｉ，Ｂｉとの間の距離を表す色検出信号Ｄを基
に二値化を行う。これにより、線分画素抽出部１４ａか
らは、抽出対象色の線分要素に該当する画素データ、す
なわち抽出対象色の色成分に係る線分データが抽出さ
れ、不要画素除去部１４ｂに対して出力されることにな
る。

【００４４】なお、ここでは、線分画素抽出部１４ａが
比較的簡便な手法によって線分抽出を行う場合を例に挙
げたが、本発明は特にこれに限定されるものではない。
例えば、本願出願人が既にした特許出願（特願平１１−
１６６６７６号）で提案しているように、所定の図形形
状要素に相当する線分基本要素によりデジタルカラー画
像データを走査することで、当該線分基本要素に対応す
る幅の線分を構成する画素データを抽出すれば、より高
精度な線分抽出を行うことが可能となる。

【００４５】次に、本実施形態の画像処理装置による処
理動作のうち、不要画素除去部１４ｂが行う不要画素デ
ータの除去処理（図２におけるＳ１０６）について詳し
く説明する。図５および図６は、不要画素除去部１４ｂ
が行う処理動作の概要を示す説明図である。なお、図５
中の矩形内は、線分画素抽出部１４ａから出力される二
値化後の出力画素データＯＵＴをイメージ化した状態を
表している。

【００４６】不要画素除去部１４ｂが行う処理動作は、
周知の文書構造認識／像域分離手法に基づくものであ
る。先ず、不要画素除去部１４ｂは、図５（ａ）に示す
ように、二値化画像イメージに対し垂直方向および水平
方向についての投影分布を作成し、頻度「０」の分布が
最も長いポイントで領域を２分割する。さらに、不要画
素除去部１４ｂは、図５（ｂ），（ｃ）に示すように、
分割した２つの領域のそれぞれに対しても同様の領域分
割処理を行う。そして、この処理を各領域が文書を構成
する最小単位となるまで繰り返す。

【００４７】その後、不要画素除去部１４ｂは、図６
（ａ）に示すように、分割した各領域内で画素データ値
がＯＮである部分について、その外接矩形を生成する。
外接矩形を生成すると、不要画素除去部１４ｂは、各外
接矩形について特徴量を算出し、その特徴量を基に、各
外接矩形が文字要素に相当するものであるか、或いは網
点領域や罫線など文字要素以外の文書構成要素や誤って
抽出されたノイズ成分に相当するものであるかを判断す
る。ここで、特徴量としては、外接矩形の面積、縦横
比、外接矩形内におけるデータ値がＯＮである部分の面
積比、ＯＮ／ＯＦＦ反転回数等を用いることが考えられ
る。例えば、外接矩形の面積を用いた場合には、文字要
素の大きさを表すポイント数を基準に、大きすぎるもの
や小さすぎるものを文字要素でないと判断する。これら
の特徴量を用いた判断の結果、文字画素ではないと判断
された外接矩形に属する画素データについては、不要画
素除去部１４ｂが図６（ｂ）に示すようにその値をＯＮ
からＯＦＦに変換する。

【００４８】そして、不要画素除去部１４ｂは、全ての
外接矩形に対して処理を終了すると、その処理結果をワ
ークメモリ１４ｄ内に保持記憶させる。このような不要
画素データの除去処理を、不要画素除去部１４ｂがＮ個
の抽出対象色すべてに対して実行することにより、ワー
クメモリ１４ｄ内には、Ｎ個の各抽出対象色について、
当該抽出対象色に係る線分データのうち、文字要素を構
成する線分データのみが保持記憶されることになる。

【００４９】次に、本実施形態の画像処理装置による処
理動作のうち、画像合成部１４ｃが行うＮ色分の抽出処
理結果の合成処理（図２におけるＳ１１０）について詳
しく説明する。図７は、画像合成部１４ｃが行う処理動
作の概要を示す説明図である。なお、図中では、簡単の
ため、Ｎ＝３で、「黒」、「白」、「赤」の３色が抽出
対象色として設定されている場合の例を示す。

【００５０】抽出対象色が「黒」、「白」、「赤」の３
色である場合、線分画素抽出部１４ａによる線分抽出処
理および不要画素除去部１４ｂによる不要画素データの
除去処理が完了すると、ワークメモリ１４ｄ内には、図
７中にで示すような黒色成分に係る二値化線分データ
と、同じくで示すような白色成分に係る二値化線分デ
ータと、同じくで示すような赤色成分に係る二値化線
分データとが、それぞれ個別に蓄積される。ここで、画
像合成部１４ｃは、各色成分に係る二値化線分データ
，，をワークメモリ１４ｄ内から取り出し、これ
らに対する合成処理を行い、その合成処理結果を文字画
像蓄積部１５に出力してそこに保存させる。

【００５１】合成処理は、例えば、画像合成部１４ｃが
各色成分に係る二値化線分データ，，の論理和を
取ることによって行い、これにより最終的な画像処理部
１４による抽出処理結果、すなわち抽出対象色の文字要
素を構成する二値画像データを得る（図７（ａ）参
照）。

【００５２】ただし、合成処理は、以下のように行って
もよい。例えば、図７（ｂ）に示すように、各色成分に
係る二値化線分データ，，に、それぞれの色情報
を付加した状態で、これらを合成することが考えられ
る。このときの色情報としては、例えば色情報記憶部
１２に設定されている色No. 等が適当である。このよう
な合成処理を行えば、最終的な画像処理部１４による抽
出処理結果として、各文字要素の色情報が付加された多
層二値画像データを得ることが可能である。さらには、
例えば図７（ｃ）に示すように、二値画像データのヘッ
ダ情報として、色情報を付加した２ビットのカラーマ
ップを生成することも考えられる。このとき、色情報の
上位１ビットは該当する画素データを表し、下位２４ビ
ットはその色成分を表すものとする。このような合成処
理を行えば、最終的な画像処理部１４による抽出処理結
果として、各文字要素の色情報が付加された多値パレッ
ト画像データを得ることが可能である。

【００５３】このように、色情報を付加した合成処理を
行った場合には、その後に行う後処理に対して大きな付
加価値を与えることができる。例えば、文字画像蓄積部
１５に蓄積される文字画像データについて、後処理とし
て文字認識処理を行う場合に、「黒い文字」や「赤い文
字」といった原稿画像上で当該文字が有していた属性を
利用することが可能となる。そのため、特にＨＴＭＬ
（Hyper Text Markup Language）形式等へのデータ変換
を行う場合などには、非常に有効なものとなる。

【００５４】以上のような処理を行った場合の従来技術
に対する優位点を図８〜図１１を用いて説明する。図８
〜図１１は、いずれも、従来技術の項で説明した図１７
と同様に、文書画像の構成要素を示した説明図である。

【００５５】例えば、図８（ａ）に示すのような一様で
ない背景を有する文字については、適切に抽出対象色を
設定して線分抽出処理を行うことによって、図８（ｂ）
に示す二値画像を表す線分データと、図８（ｃ）に示す
二値画像を表す線分データとに、分離して抽出すること
が可能となる。また、これらの線分データに対して不要
画素データの除去処理を行うことによって、最終的には
図８（ｂ）に示すような文字画像のみを表す線分データ
を抽出することが可能となる。

【００５６】図９は、反転文字の抽出の様子を示してい
る。通常の明度成分に基づく線分抽出処理を行う場合に
は、図９（ａ）のような周辺画素よりも高い明度値（周
辺よりも明るい画素データ値）を持つ文字要素を、それ
以外の色の文字と同一の処理論理で抽出することが困難
である。しかしながら、本実施形態の画像処理装置およ
び画像処理方法によれば、予め設定された抽出対象色か
らのユークリッド距離（隔たり）に着目して線分データ
の抽出処理を行うので、図９（ｂ）および（ｃ）に示し
たように反転した文字列でも良好に抽出することができ
る。また、図８に示した例と同様に、図９（ｃ）の枠線
も文字以外の要素として除去されるため、最終的には図
９（ｂ）に示すような文字画像のみを表す線分データを
抽出することが可能となる。

【００５７】図１０は、背景を有する文字の抽出の様子
を示している。図１０（ａ）に示すように背景色を有す
る領域に文字が存在する場合については、その背景色が
抽出対象色でなければ抽出されることがないので、図１
０（ｂ）に示すように文字画像のみを表す線分データの
抽出が可能となる。

【００５８】図１１は、図８と場合と同様に、一様でな
い背景を有する文字の抽出の様子を示している。図１１
（ａ）に示すように、背景がグラデーションで表現され
るような場合には、明度の差異だけで文字抽出を行うの
が非常に困難であるが、本実施形態の画像処理装置およ
び画像処理方法では、抽出すべき文字の色に着目してい
るため、図１１（ｂ）に示すような良好な文字抽出が可
能となる。また、図１１（ｃ）に示すように、抽出され
る文字以外の成分に関しては、不要画素データの除去処
理を行うことによって消去することが可能である。

【００５９】以上に説明したように、本実施形態の画像
処理装置および画像処理方法は、請求項１または６に記
載の発明の如く、抽出すべき文字の色に着目し、抽出対
象色に係る線分データのみを抽出するようになってい
る。したがって、文字要素を抽出すべき文書画像中に多
くの色成分が含まれていても、従来よりも良好かつ的確
に、文字要素を構成する線分データの抽出を行うことが
できる。

【００６０】また、本実施形態の画像処理装置および画
像処理方法は、請求項２または７に記載の発明の如く、
抽出した線分データの中から文字要素を構成しないと判
断されるデータを除去するようになっている。したがっ
て、文字要素を抽出すべき文書画像が多様化・複雑化し
ても、これに対応しつつ、従来よりも良好かつ的確に、
文字要素を構成する線分データの抽出を行うことができ
る。

【００６１】さらに、本実施形態の画像処理装置および
画像処理方法は、請求項３または８に記載の発明の如
く、複数の抽出対象色にも対応し得るようになってい
る。したがって、文書画像の多様化・複雑化への対応が
容易となる。しかも、複数の抽出対象色について順次線
分抽出処理を行うことによって、それぞれの色に対する
抽出範囲を従来の場合よりもより狭く設定できるので、
例えば網点を表す画素データやエッジ部のデータなどの
誤抽出を大きく軽減することができるようになる。

【００６２】〔第２の実施の形態〕次に、本発明の第２
の実施の形態について説明する。ただし、ここでは、上
述した第１の実施の形態との相違点についてのみ説明す
るものとする。

【００６３】本実施形態は、上述した第１の実施の形態
の場合と、線分画素抽出部１４ａによる線分抽出処理の
みが異なる。詳しくは、第１の実施の形態では、ＲＧＢ
色空間における注目画素データ値Ｒ，Ｇ，Ｂと抽出対象
色の色情報値Ｒｉ，Ｇｉ，Ｂｉとの間の三次元的距離
を、抽出対象色と注目画素色との隔たりを表す尺度とし
たのに対し、本実施形態では、注目画素データ値Ｒ，
Ｇ，Ｂとと抽出対象色それぞれの原色成分との間の一次
元的距離を色検出用信号とし、これを用いて各原色成分
毎の抽出結果の論理積を取ることで、抽出対象となる色
線分を有した線分データの抽出を行う点で異なる。

【００６４】以下、図１２を用いて、本実施形態におけ
る線分抽出処理を詳しく説明する。図１２は、線分画素
抽出部１４ａが行う処理動作の他の例を示すフローチャ
ートである。なお、第１の実施の形態の場合（図３参
照）と同様に、図１２中において、「Ｒ，Ｇ，Ｂ」は画
像入力部１１で取得したデジタルカラー画像データの注
目画素データ値を、「Ｒｉ，Ｇｉ，Ｂｉ」は色情報記憶
部１２からロードされる抽出対象色の色情報値を、「Ｏ
ＵＴ」は線分画素抽出部１４ａによる抽出結果である２
値化された画素データを表している。

【００６５】図例のように、本実施形態の場合、線分画
素抽出部１４ａは、線分抽出処理を行うのにあたって、
先ず、注目画素データの赤成分値Ｒと抽出対象色の赤成
分値Ｒｉとの差分信号「ΔＲ」を生成する（Ｓ３０
１）。差分信号ΔＲの生成は、第１の実施の形態の場合
と同様に（１）式を用いて行う。

【００６６】ここで、差分信号ΔＲは、注目画素データ
の赤成分値Ｒと抽出対象色の赤成分値Ｒｉとの間におけ
るＲ軸上の距離を表すものであり、値が大きくなるほど
注目画素の赤成分が抽出対象色の赤成分に近い色である
ことを表している。

【００６７】差分信号ΔＲを生成すると、続いて、線分
画素抽出部１４ａは、その差分信号ΔＲを基に線分抽出
を行う。線分抽出は、周知の手法を用いて行えばよい。
例えば、第１の実施の形態で説明した場合と同様に、注
目画素周辺で階調レベルの変化が急峻であり、かつ、注
目画素の階調レベルが十分に高い場合に、その注目画素
を線分要素とある判断することが考えられる。具体的に
は、線分画素抽出部１４ａは、先ず、生成した差分信号
ΔＲを用いて、そのエッジ特徴量「Ｒｅ」およびレベル
特徴量「Ｒｌ」を算出する（Ｓ３０２，Ｓ３０３）。エ
ッジ特徴量Ｒｅおよびレベル特徴量Ｒｌは、それぞれ以
下の（７）式および（８）式のように定義される。

【００６８】

【数７】

【００６９】

【数８】

【００７０】ここで、エッジ特徴量Ｒｅは、注目画素を
「Ｒｊ，ｋ」とすると、注目画素周辺の５×５（主走査
×副走査）画素の平均値と注目画素周辺の３×３（主走
査×副走査）画素の平均との差分の絶対値に相当する。
また、レベル特徴量Ｒｌは、注目画素周辺の３×３（主
走査×副走査）画素の平均値に相当する（いずれも図４
参照）。なお、（７）式および（８）式中における「Ｍ
ｒ」および「Ｎｒ」は、調整用のオフセットパラメータ
であり、画像処理装置の特性に応じて予め実験的に定め
られている定数である。

【００７１】こうしてエッジ特徴量Ｒｅおよびレベル特
徴量Ｒｌを求めると、、次いで、線分画素抽出部１４ａ
は、これらエッジ特徴量Ｒｅおよびレベル特徴量Ｒｌ
を、それぞれ予め設定されているしきい値ＴＨｅ，ＴＨ
ｌと比較する。そして、エッジ特徴量Ｒｅがしきい値Ｔ
Ｈｅ以上であり、かつ、レベル特徴量Ｒｌしきい値ＴＨ
ｌ以上であるか否かを判定する（Ｓ３０４）。

【００７２】この判定の結果、Ｒｅ≧ＴＨｅかつＲｌ≧
ＴＨｌであれば、線分画素抽出部１４ａは、注目画素Ｒ
ｊ，ｋ周辺で階調レベルの変化が急峻であり、かつ、注
目画素の階調レベルが十分に高いので、注目画素Ｒｊ，
ｋが線分を構成する画素であると判断する。そして、判
定結果信号「Ｒｏ」をＯＮとする（Ｓ３０５）。その一
方で、Ｒｅ≧ＴＨｅかつＲｌ≧ＴＨｌでない場合には、
線分画素抽出部１４ａは、判定結果信号ＲｏをＯＦＦと
する（Ｓ３０６）。

【００７３】以上のような処理を、線分画素抽出部１４
ａは、注目画素データの赤成分値Ｒについてのみなら
ず、注目画素データの緑成分値Ｇおよび青成分値Ｂに対
しても全く同様に実施し、それぞれの判定結果信号Ｇｏ
およびＢｏを得る（Ｓ３０７〜Ｓ３１８）。

【００７４】こうして判定結果信号Ｒｏ，Ｇｏ，Ｂｏを
得ると、線分画素抽出部１４ａは、それぞれの判定結果
信号Ｒｏ，Ｇｏ，Ｂｏを参照して、これら全ての信号が
ＯＮであるか否かを判断し（Ｓ３１９）、全てがＯＮで
あれば出力画素データ値ＯＵＴをＯＮとし（Ｓ３２
０）、そうでなければ出力画素データ値ＯＵＴをＯＦＦ
とする（Ｓ３２１）。

【００７５】このように、線分画素抽出部１４ａでは、
各原色成分毎に抽出対象色との隔たりを表す尺度を算出
し、その判定結果に基づいて最終的な抽出結果を得るこ
とも可能である。このような処理の長所としては、多次
元での距離計算が必要な構成に比べ演算量が少なくて済
むこと、画像入力部１１が画素順次ではなく面順次の形
式で画像データを取得した場合にも対応できること、な
どが挙げられる。

【００７６】なお、上述した第１および第２の実施の形
態では、いずれの場合も、請求項４または９に記載の発
明の如く、ＲＧＢ色空間上のユークリッド距離または各
原色成分毎の隔たりの距離の検出結果を基に注目画素デ
ータを二値化することによって線分抽出を行う場合を例
に挙げて説明した。これは、二値化処理を利用すれば、
比較的簡単な処理にて良好かつ的確な線分抽出を実現す
ることができるからである。ただし、線分画素抽出部１
４ａは、これに限定されるものではなく、他の手法を用
いて線分抽出を行うものであってもよい。

【００７７】〔第３の実施の形態〕次に、本発明の第３
の実施の形態について説明する。ただし、ここでも、上
述した第１の実施の形態との相違点についてのみ説明す
るものとする。

【００７８】本実施形態は、上述した第１の実施の形態
の場合と異なり、抽出対象色を操作部１３から指定入力
するのではなく、画像入力部１１が取得したデジタルカ
ラー画像データを参照して自動的に設定する機能を有す
る点に特徴がある。図１３は、本実施形態における画像
処理装置の概略構成を示すブロック図である。なお、図
中において、上述した第１の実施の形態と同一の構成要
素については、同一の符号を与えてその説明を省略する
ものとする。

【００７９】図例のように、本実施形態における画像処
理装置は、第１の実施の形態における場合に加えて、画
像処理部１４が使用色検出部１４ｅを有している。使用
色検出部１４ｅは、画像入力部１１が取得したデジタル
カラー画像データ中から、その中で使用されている文字
色や線分色を抽出し、その抽出した色成分に関する色情
報を色情報記憶部１２に保持記憶させるものである。な
お、使用色検出部１４ｅは、所定プログラムを実行する
マイクロコンピュータ等によりソフトウエア的に構成し
ても、あるいは所定機能を有した電子回路等によりハー
ドウエア的に構成してもよい。

【００８０】次に、以上のように構成された画像処理装
置における処理動作の概要について説明する。図１４
は、本実施形態の画像処理装置での処理動作例、すなわ
ち本実施形態の画像処理装置によって行われる画像処理
方法の概要を示すフローチャートである。

【００８１】図例のように、本実施形態の画像処理装置
では、線分抽出処理に際し、先ずはじめに、抽出対象色
の数の設定を行う（Ｓ４０１）。ここでいう数は、後述
するように画像入力部１１で取得した画像データから検
出した色の数のみであっても良いし、例えば「黒」，
「赤」等といった色情報記憶部１２内に予め保持記憶さ
れている色に検出色を加えた数であっても良い。図中で
は、色情報記憶部１２に予め記憶されているＮ個の抽出
対象色に、画像入力部１１で取得した画像データから検
出したｎ個の色を加えた、合わせてＮ＋ｎ個を抽出対象
色とする場合を例に挙げている。

【００８２】抽出対象色の数が設定されると、次いで、
画像入力部１１は、原稿画像に対する読み取りを行っ
て、その原稿画像からＲ，Ｇ，Ｂの各原色成分で表現さ
れるデジタルカラー画像データを取得する（Ｓ４０
２）。ここで取得したカラー画像データは、画像処理部
１４内のワークメモリ１４ｄに一旦保持される。

【００８３】そして、ワークメモリ１４ｄがカラー画像
データを保持すると、画像処理部１４の使用色検出部１
４ｅは、ワークメモリ１４ｄ内のカラー画像データを参
照して、そのカラー画像データ中に使用されている色成
分を、ｎ個だけ検出する処理を行う（Ｓ４０３）。

【００８４】ここで、使用色検出部１４ｅによるｎ個分
の色検出処理について詳しく説明する。 図１５は、使
用色検出部１４ｅが行う処理動作の概要を示すフローチ
ャートである。

【００８５】図例のように、使用色検出部１４ｅによる
色検出処理は、画像入力部１１が取得したカラー画像デ
ータ中の色をサンプリング（画像内色サンプリング）す
るステップ（Ｓ５００）と、そのサンプリング結果に基
づいてｎ個の色成分を抽出（色抽出）するステップ（Ｓ
６００）と、から構成されている。

【００８６】画像内色サンプリングは、取得したカラー
画像データ中のエッジ成分を検出し、そのＲ，Ｇ，Ｂ信
号の出現頻度を計測することにより行う。このときに検
出すべき色成分は、文字要素や線分要素に用いられてい
るものである。そのため、使用色検出部１４ｅは、エッ
ジ部分に用いられる色成分のみをサンプリングし、例え
ば均一背景やグラデーション域などの色情報のサンプリ
ングは行わない。

【００８７】具体的には、先ず、使用色検出部１４ｅ
は、エッジ成分の検出のため、エッジ検出用の特徴量
「Ｒｄｔ」，「Ｇｄｔ」，「Ｂｄｔ」を算出する（Ｓ５
０１，Ｓ５０２，Ｓ５０３）。検出用特徴量Ｒｄｔ，Ｇ
ｄｔ，Ｂｄｔは、それぞれ以下の（９）〜（１１）式の
ように定義される。

【００８８】

【数９】

【００８９】

【数１０】

【００９０】

【数１１】

【００９１】ここで、検出用特徴量Ｒｄｔは、図１６の
注目画素近傍における画素配置の説明図に示すように、
注目画素を「Ｒｊ，ｋ」とすると、注目画素周辺の７×
７（主走査×副走査）画素の平均値と注目画素周辺の３
×３（主走査×副走査）画素の平均との差分の絶対値に
相当する。検出用特徴量Ｇｄｔ，Ｂｄｔについても同様
である。また、ここで、（９）〜（１１）式中における
「Ｍｄｔ」は、調整用のオフセットパラメータであり、
画像処理装置の特性に応じて予め実験的に定められてい
る定数である。

【００９２】検出用特徴量Ｒｄｔ，Ｇｄｔ，Ｂｄｔを求
めると、次いで、使用色検出部１４ｅは、これら検出用
特徴量Ｒｄｔ，Ｇｄｔ，Ｂｄｔを、それぞれ予め設定さ
れているしきい値ＴＨｄｔと比較する。この比較の結
果、「Ｒｄｔ≧ＴＨｄｔ」と「Ｇｄｔ≧ＴＨｄｔ」と
「Ｂｄｔ≧ＴＨｄｔ」とのいずれかが満たされる場合、
すなわちＲ，Ｇ，Ｂいずれかの原色成分にエッジが存在
する場合に、使用色検出部１４ｅは、注目画素がエッジ
部分に相当すると判断する（Ｓ５０４）。この判断の結
果、注目画素がエッジ部分である場合に、使用色検出部
１４ｅは、その注目画素データのＲ，Ｇ，Ｂの各信号値
を検出し、その一方で注目画素がエッジ部分でなければ
何の処理も行わない。そして、使用色検出部１４ｅは、
以上のような処理を、取得したカラー画像データ中の全
画素に対して行い、そのカラー画像データが有する色成
分のサンプリング、すなわち出現頻度の計測を完了する
（Ｓ５０５，Ｓ５０６）。

【００９３】このようにして画像内色サンプリングを行
うと、その後、使用色検出部１４ｅは、そのサンプリン
グ結果によって得られた出現頻度データから、抽出対象
となるｎ個の色成分について色抽出を行う。色抽出処理
は、単純に出現頻度の高いｎ個の色成分を選択すること
で行われる。

【００９４】具体的には、先ず、使用色検出部１４ｅ
は、画像データ取得のバラツキや各種ノイズ等を考慮し
て、画素あたり８ビットの中の上位４ビットを用いて３
次元ヒストグラムを生成する（Ｓ６０１）。これによ
り、三次元の色空間は、４０９６個の空間に分割された
ことになる。次いで、使用色検出部１４ｅは、４０９６
個の局所領域の中で大きな頻度を有するもの上位ｎ個分
を代表色領域として選択する（Ｓ６０２）。その後、使
用色検出部１４ｅは、画像内色サンプリングで生成され
た出現頻度データを参照して、選択されたｎ個の代表色
領域（局所領域）内の平均値を算出する（Ｓ６０３）。

【００９５】そして、その算出結果から、使用色検出部
１４ｅは、ｎ個の抽出対象色を得る。ただし、色成分の
頻度分布から代表色を選定するアルゴリズムは、この他
にも各種提案されている。例えば、三次元色空間を分散
の大きな軸から順次分割してｎ個の領域を生成する手法
であるとか、ｎ個の塊を形成するまで領域の統合を繰り
返していく手法等、が広く知られている。したがって、
使用色検出部１４ｅは、他の手法を用いてｎ個の抽出対
象色を得るようにしてもよい。

【００９６】このような処理によって画像入力部１１が
取得したカラー画像データ中のｎ個の使用色成分を検出
すると、使用色検出部１４ｅでは、図１４に示すよう
に、その検出した色成分に関する情報を色情報記憶部１
２内に保持記憶させる（Ｓ４０４）。その後は、第１の
実施の形態で説明したように、色情報記憶部１２内の色
情報を基に特定色線分データの抽出を行い（Ｓ４０５〜
Ｓ４０７）、不要画素データの除去を経て（Ｓ４０
８）、Ｎ＋ｎ個の抽出対象色に関する抽出処理を文字画
像蓄積部１５に記憶蓄積する（Ｓ４０９〜Ｓ４１２）。

【００９７】以上に説明したように、本実施形態の画像
処理装置および画像処理方法は、請求項５または１０に
記載の発明の如く、処理対象となる文書画像中の文字や
線分に使用されている色を検出し、その検出結果に基づ
いて特定色の文字画像を抽出するようになっている。し
たがって、文字要素を抽出すべき文書画像中に多くの色
成分が含まれていても、ユーザ等による煩雑な操作を必
要とすることなく、抽出対象色に係る線分データのみを
従来よりも良好かつ的確に抽出することができるので、
その操作性が大きく向上し、ユーザ等にとっては非常に
便利なものとなる。

【００９８】

【発明の効果】上述したように、本発明の画像処理装置
および画像処理方法では、抽出すべき文字の色に着目
し、抽出対象色に係る線分データのみを、取得した画像
データから抽出するようになっている。そのため、例え
ば複雑で多様な構成を持つ文書画像のように、多くの色
成分を含むものであっても、従来よりも良好かつ的確
に、文字要素に使用される色成分に係る線分データの抽
出を行うことができる。

【図面の簡単な説明】

【図１】 本発明の第１の実施の形態における画像処理
装置の概略構成を示すブロック図である。

【図２】 第１の実施の形態における画像処理方法の概
要を示すフローチャートである。

【図３】 第１の実施の形態における線分画素抽出部が
行う処理動作の概要を示すフローチャートである。

【図４】 線分抽出処理を行う際の注目画素近傍におけ
る画素配置の一例を示す説明図である。

【図５】 第１の実施の形態における不要画素除去部が
行う処理動作の概要を示す説明図（その１）であり、
（ａ）〜（ｃ）はそれぞれ領域分割処理の様子を示す図
である。

【図６】 第１の実施の形態における不要画素除去部が
行う処理動作の概要を示す説明図（その２）であり、
（ａ）は不要画素除去前の状態を示す図、（ｂ）は不要
画素除去後の状態を示す図である。

【図７】 第１の実施の形態における画像合成部が行う
処理動作の概要を示す説明図である。

【図８】 線分抽出処理結果の具体例を示す説明図（そ
の１）であり、（ａ）は処理される原画像を示す図、
（ｂ）は抽出される文字画像を示す図、（ｃ）は除去さ
れる線分画像を示す図である。

【図９】 線分抽出処理結果の具体例を示す説明図（そ
の２）であり、（ａ）は処理される原画像を示す図、
（ｂ）は抽出される文字画像を示す図、（ｃ）は除去さ
れる線分画像を示す図である。

【図１０】 線分抽出処理結果の具体例を示す説明図
（その３）であり、（ａ）は処理される原画像を示す
図、（ｂ）は抽出される文字画像を示す図である。

【図１１】 線分抽出処理結果の具体例を示す説明図
（その４）であり、（ａ）は処理される原画像を示す
図、（ｂ）は抽出される文字画像を示す図、（ｃ）は除
去される線分画像を示す図である。

【図１２】 第２の実施の形態における線分画素抽出部
が行う処理動作の概要を示すフローチャートである。

【図１３】 第３の実施の形態における画像処理装置の
概略構成を示すブロック図である。

【図１４】 第３の実施の形態における画像処理方法の
概要を示すフローチャートである。

【図１５】 第３の実施の形態における使用色検出部が
行う処理動作の概要を示すフローチャートである。

【図１６】 使用色検出処理を行う際の注目画素近傍に
おける画素配置の一例を示す説明図である。

【図１７】 線分抽出処理の対象となる原画像の一例を
示す説明図である。

【符号の説明】

１１…画像入力部、１２…色情報記憶部、１４…画像処
理部、１４ａ…線分画素抽出部、１４ｂ…不要画素除去
部、１４ｃ…画像合成部、１４ｅ…使用色検出部

フロントページの続き Ｆターム(参考） 5C077 MP06 MP07 MP08 PP23 PP31 PP32 PP41 PP43 PP47 PQ22 RR02 5C079 HB01 LA01 LA02 LA05 LA34 LA40 MA01 5L096 AA02 AA06 AA07 BA07 EA43 FA03 FA42 FA44 FA46 LA05

Claims (10)

【特許請求の範囲】
1. 【請求項１】 画像データを取得する取得手段と、 所定の色成分に関する色情報を保持記憶する記憶手段
   と、 前記取得手段が取得した画像データと前記記憶手段が保
   持記憶している色情報との間における色空間上の距離を
   検出する検出手段と、 前記検出手段による検出結果を基に前記記憶手段が保持
   記憶している色情報により特定される色成分についての
   み前記取得手段が取得した画像データからの線分抽出を
   行う線分抽出手段とを備えることを特徴とする画像処理
   装置。
2. 【請求項２】 前記線分抽出手段による線分抽出結果の
   中から、文字要素を構成しない抽出結果を削除する除去
   手段を備えることを特徴とする請求項１記載の画像処理
   装置。
3. 【請求項３】 前記記憶手段に複数の色成分に関する色
   情報が保持記憶されている場合に、前記線分抽出手段が
   前記複数の色成分について線分抽出を行うと、該線分抽
   出によって得られる前記複数の色成分についての線分抽
   出結果を合成する合成手段を備えることを特徴とする請
   求項１または２記載の画像処理装置。
4. 【請求項４】 前記線分抽出手段は、前記検出手段によ
   る検出結果を基に前記取得手段が取得した画像データを
   二値化することによって線分抽出を行うものであること
   を特徴とする請求項１，２または３記載の画像処理装
   置。
5. 【請求項５】 前記取得手段が取得した画像データに含
   まれる色成分を抽出して該色成分に関する色情報を前記
   記憶手段に保持記憶させる色抽出手段を備えることを特
   徴とする請求項１，２，３または４記載の画像処理装
   置。
6. 【請求項６】 画像データ中から文字要素を構成する線
   分データを抽出するための画像処理方法であって、 所定の色成分に関する色情報を保持記憶しておき、 線分データを抽出すべき画像データを取得すると該画像
   データと前記色情報との間における色空間上の距離を検
   出し、 検出した色空間上の距離に基づいて前記色情報により特
   定される色成分に係る線分データのみを取得した画像デ
   ータ中から抽出することを特徴とする画像処理方法。
7. 【請求項７】 線分データの抽出後、当該線分データの
   中から文字要素を構成しない線分データを削除すること
   を特徴とする請求項６記載の画像処理方法。
8. 【請求項８】 複数の色成分に関する色情報を保持記憶
   している場合に、前記複数の色成分に係る線分データを
   抽出すると、抽出した各線分データを合成することを特
   徴とする請求項６または７記載の画像処理方法。
9. 【請求項９】 前記画像データと前記色情報との間にお
   ける色空間上の距離を検出すると、検出した色空間上の
   距離を基に前記抽出対象となる画像データを二値化する
   ことにより、当該画像データからの線分データの抽出を
   行うことを特徴とする請求項６，７または８記載の画像
   処理方法。
10. 【請求項１０】 前記画像データを取得すると、当該画
    像データに含まれる色成分を抽出し、その色成分に関す
    る色情報を保持記憶しておくことを特徴とする請求項
    ６，７，８または９記載の画像処理方法。