JP3794171B2 - 画像処理装置および画像処理方法 - Google Patents
画像処理装置および画像処理方法 Download PDFInfo
- Publication number
- JP3794171B2 JP3794171B2 JP22718898A JP22718898A JP3794171B2 JP 3794171 B2 JP3794171 B2 JP 3794171B2 JP 22718898 A JP22718898 A JP 22718898A JP 22718898 A JP22718898 A JP 22718898A JP 3794171 B2 JP3794171 B2 JP 3794171B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- data
- selection
- image
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Editing Of Facsimile Originals (AREA)
- Processing Of Color Television Signals (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、公衆回線やＬＡＮなどのネットワーク回線を介して異機種間で高品質に画像データを通信するための画像処理を行なう画像処理装置および画像処理方法に関するものである。
【０００２】
【従来の技術】
近年、公衆回線を用いたファクシミリ通信に加え、公衆回線やＬＡＮなどのネットワークを用いた画像通信が盛んに行なわれている。画像データを送受する機器もファクシミリのほか、パーソナルコンピュータや複合ディジタル複写機、ネットワークプリンタなど、各種の機器が用いられている。また最近はこれらの機器のカラー化も進み、カラーＦＡＸやカラープリンタも主流になりつつある。このようなネットワークシステムでは、例えば、解像度がそれぞれ異なる異機種装置間での相互接続や、カラー複写機と白黒複写機といったような色空間がそれぞれ異なる異機種装置間での相互接続が可能である。
【０００３】
このような異機種装置間で画像データをやりとりする場合、通常は入力した原稿画像を１枚のプレーン画像として扱う。つまり１枚のプレーン画像に対して、入力側機器で原稿タイプを判別して原稿に適した画像処理をプレーン画像全体に施して出力側機器へ送信する。このように原稿画像を１枚のプレーン画像として扱った場合、原稿画像が文字のみ、あるいは写真のみといった１種類の属性の画像データだけで構成されるのであれば特に問題はない。しかし、文字と写真が混在しているような複数の属性の画像データから構成されている場合には不都合が生じる。例えば文字と写真が混在している画像データを圧縮しようとした場合、１枚のプレーン画像に対して同じ圧縮処理を施すので、適用する圧縮手法によっては文字部あるいは写真部のいずれかの圧縮率が低下して通信時間が長くなったり、あるいはいずれかの画質が劣化してしまうという問題があった。
【０００４】
【発明が解決しようとする課題】
本発明は、上述した事情に鑑みてなされたもので、画質劣化がほとんどなく、より高画質かつ高圧縮率で画像情報を送信することのできる画像処理装置および画像処理方法を提供することを目的とするものである。
【０００５】
【課題を解決するための手段】
本発明では、入力画像データを第１画像データ、第２画像データ、および第１画像データまたは第２画像データのいずれかを選択する選択データとからなる画像フォーマットに変換する。例えば入力画像データのうち、文字線画部の色情報を第１画像データ、写真などの絵柄部を第２画像データに分離し、文字線画部の形状情報を選択データとすることができる。選択データは第１画像データまたは第２画像データのいずれかを選択するのみであるから、２値のデータとして扱うことができ、高い解像度で画質を維持したまま高圧縮率で圧縮して高速な通信を行なうことが可能である。
【０００６】
このように多層に分離することにより、高速、高画質の通信が可能になる。しかし、このように多層に分離する場合に、それぞれのデータに良好に分離できないと、それぞれのデータに分離して処理を行った利点が損なわれる。例えば写真などの絵柄部を有する第２画像データに文字などの線画部分が含まれていると、絵柄部に最適な処理を施すことによって線画部分の画質が劣化してしまう。そのため、各データに分離する際に的確に分離できることが性能向上につながる。
【０００７】
本発明では、入力画像データの構造に応じて制御情報を生成し、その制御情報にしたがって選択データ生成方式または分離手段を選択して選択データを生成し、選択データを用いて各画像データに分離する。これによって入力画像データは、選択データおよび第１，第２画像データに確実に分離することができる。そのため、各データに対して最適な処理を施すことができるとともに、その処理によって発生する画質の劣化をほとんどなくすことができる。
【０００８】
なお、入力画像データの構造は、ユーザが入力手段から入力してもよいし、また入力画像データから認識してもよい。また、第１画像データ、第２画像データは、いずれかのみ、あるいは両方とも出力されない場合もある。さらに、第１，第２画像データの生成方式は、選択データを生成する際の方式に従って切り換えることもできる。
【０００９】
【発明の実施の形態】
図１は、本発明の第１の実施の形態を示すブロック構成図である。図中、１は色空間変換部、２は輝度信号抽出部、３は選択データ生成部、４はセレクタ部、５〜７は分離部、８はユーザインタフェース部、９は制御部、１０は多層分離部、１１，１３，１５は解像度変換部、１２，１４，１６は圧縮部、１７は画像フォーマットラッピング部である。
【００１０】
色空間変換部１は、入力画像データを入力デバイスの色空間（例えばＲＧＢ色空間など）から所定の色空間（例えばＣＩＥ−Ｌ* ａ* ｂ* などデバイスに依存しない色空間）に変換する。なお、所定の色空間で表現されている入力画像データが入力される場合には、この色空間変換部１を設けずに構成してもよい。
【００１１】
輝度信号抽出部２は、色空間変換部１で色空間変換された入力画像データから輝度成分（例えばＣＩＥ−Ｌ* ａ* ｂ* 色空間であればＬ* 成分）だけを抽出する。
【００１２】
選択データ生成部３は、セレクタ部４および複数の分離部５〜７を有し、輝度信号抽出部２で抽出された輝度信号から選択データを生成する。セレクタ部４は、制御部９で生成した制御信号に従って分離部５〜７のうちの１つを選択し、選択した分離部に対して輝度信号抽出部２で抽出した輝度信号を送出する。分離部５〜７は、セレクタ部４から送出されてきた輝度信号を画像属性に応じて分離し、選択データを生成して出力する。分離部５〜７は、それぞれ異なる選択データ生成方式を備えている。ここでは３つの分離部を有しているので、３種類の選択データ生成方式を有していることになる。もちろん、２種類あるいは４種類以上の選択データ生成方式を具備した構成であってもよい。また、セレクタ部４が各分離部の後段に配置され、各分離部で生成された選択データをセレクトするように構成してもよい。
【００１３】
ユーザインタフェース部８は、ユーザが原稿タイプなどを指定するための入力手段などを提供している。もちろん、原稿タイプの他にも種々の機能設定が可能なように構成されていてよい。
【００１４】
制御部９は、ユーザインタフェース部８でユーザが指定した原稿タイプをもとに、選択データ生成部３において分離部５〜７のいずれを使用するかを指定するための制御信号を生成し、セレクタ部４に出力する。
【００１５】
多層分離部１０は、分離部５〜７の１つから送出される選択データによって、色空間変換部１で色空間変換された入力画像データを属性ごとに複数の画像データに分離する。ここでは、文字や線画などの画像データと、写真やグラフィックなどの画像データの２つの画像データに分離する例を示している。以下の説明では、文字や線画などの画像データを文字画像プレーン、写真やグラフィックなどの画像データを絵柄画像プレーンと呼ぶ。もちろん、多層分離部１０で分離する画像データは２つに限られるものではないし、また、例えば写真とグラフィックスを別の画像データとして分離するなど、分離する属性も文字と絵柄に限られるものではない。
【００１６】
解像度変換部１１は、文字画像プレーンに対して、文字画像に最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１２は、文字画像プレーンに対して、文字画像に最適な手法で圧縮処理を施す。
【００１７】
解像度変換部１３は、絵柄画像プレーンに対して、写真やグラフィック画像に最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１４は、絵柄画像プレーンに対して、写真やグラフィック画像に最適な手法で圧縮処理を施す。
【００１８】
解像度変換部１５は、選択データ生成部３で生成された選択データに対して、選択データに最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１６は、選択データに対して、選択データに最適な手法で圧縮処理を施す。
【００１９】
画像フォーマットラッピング部１７は、解像度変換処理や圧縮処理が施された文字画像プレーン、絵柄画像プレーン、選択データを所定の画像フォーマットに組み込んで出力する。出力されたデータは、例えば送信手段により送信したり、あるいは記憶装置などに格納することができる。
【００２０】
なお、この例では多層分離部１０において各画像プレーンに分離した後の処理として、解像度変換部１１，１３，１５による解像度変換処理と、圧縮部１２，１４，１６による圧縮処理を示しているが、これらの処理に限らず、種々の処理を行うことができる。特に、属性に応じて分離されたデータが処理対象であるので、属性に応じて異なる処理を施すことが望まれる処理を行うとよい。また、色空間変換部１における色空間変換処理以外にも、入力画像データに対して一律に行う種々の画像処理を行ってもよい。
【００２１】
図２は、本発明の第１の実施の形態における分離処理後の各プレーンの具体例の説明図である。この第１の実施の形態では、入力画像データから文字画像プレーンと絵柄画像プレーン、それに選択データを生成する。例えば図２（Ａ）に示したように文字「ＡＢＣＤＥ」と、絵柄部分（矩形で囲んだ部分）が同じ画像中に存在する場合、図２（Ｃ）に示すように文字「ＡＢＣＤＥ」のみからなる文字画像プレーンと、図２（Ｄ）に示すように文字部分を除いた絵柄部分からなる絵柄画像プレーンに多層分離部１０で分離する。
【００２２】
この多層分離部１０における分離の際に用いられるデータが、選択データ生成部３で生成された選択データである。ここでは、選択データは図２（Ｂ）に示すように文字部分のみ、特に文字の各線分を構成する塗りつぶし部分のみについて分離するデータにより構成される例を示している。この選択データによって、文字の各線分の部分は文字画像プレーンに分離され、他は絵柄画像プレーンに分離されることになる。
【００２３】
図２に示す例では、図２（Ｂ）に示す選択データと図２（Ｃ）に示す文字画像プレーンは同じデータのように示されている。しかし実際には、図２（Ｂ）に示す選択データは、入力画像データが分離されるプレーン数を識別できる情報があればよく、ここでは文字画像プレーンと絵柄画像プレーンの２つを識別する２値データで構成すればよい。また図２（Ｃ）に示す文字画像プレーンは、例えば文字に色彩が施されていれば、その色情報も保持することになる。
【００２４】
このように入力された画像を分離することによって、例えば文字画像プレーンには文字データに適した圧縮手法を、絵柄画像プレーンには写真データに適した圧縮手法を適用できるので、圧縮率も向上し、また画質劣化もそれほど目立たなくなる。さらに、これら各プレーンに対して最適な解像度変換処理手法を用いて解像度を変換することによって、それぞれ影響の少ない範囲でデータ量を削減することが可能となる。
【００２５】
このように入力画像データを文字画像プレーンや絵柄画像プレーンに分離する際には、選択データを用いている。そのため、選択データを生成する際の分離精度が問題となる。従来より画像中の属性を判定する手法が多数開発されているが、一般的にはそれぞれ特質を有している。
【００２６】
例えばある１つの手法を用いた場合、文字データとグラフィックデータと写真データが混在した原稿を多層分離部１０で分離した場合、選択データの生成方法によっては、文字データであるにもかかわらずグラフィックデータとして絵柄画像プレーンに分離されてしまう領域や、逆にグラフィックデータであるにもかかわらず文字データとして文字画像プレーンに分離されてしまう領域が発生してしまう場合がある。この場合、例えば文字データとグラフィックデータのみが混在した別の原稿について分離を行っても文字データとグラフィックデータ自体の分離精度は変わらないため、やはり文字データであるにもかかわらずグラフィックデータとして絵柄画像プレーンに分離されてしまう領域や、逆にグラフィックデータであるにもかかわらず文字データとして文字画像プレーンに分離されてしまう領域が発生してしまう。つまり原稿が単純になっても分離精度は変わらない。
【００２７】
このような誤った分離がなされると、例えば絵柄画像プレーンについて絵柄画像に最適な解像度変換処理や圧縮処理を施すと、写真などの絵柄でない領域において画質劣化を生じる。同様に例えば文字画像プレーンについて文字画像に最適な解像度変換処理や圧縮処理を施すと、文字でない領域において画質劣化を生じることになる。
【００２８】
このように１つの手法によって選択データを生成した場合、入力画像データによってはどうしても上述のような誤った分離がなされる場合があった。そのため本発明では、選択データを生成する方式の異なる複数の分離部を設け、入力画像データに応じて選択データを生成する方式を切り換えることができるように構成している。これによって、どのような入力画像データが入力されても、最適な属性判定を行うことができ、選択データの品質向上を図ることができる。
【００２９】
このような異なる選択データの生成方式を有する分離部５〜７の具体例として、分離部５は文字・色文字原稿に適した選択データ生成アルゴリズム、分離部６は文字・グラフィック混在原稿に適した選択データ生成アルゴリズム、分離部７は文字・写真混在原稿に適した選択データ生成アルゴリズムを有するように構成することができる。
【００３０】
分離部５で対象としている文字・色文字原稿には、淡濃度の文字はほとんど含まれないと仮定し、その選択データ生成アルゴリズムは輝度信号Ｌ* だけを用い、ある特定のしきい値で輝度信号Ｌ* を２値化して、文字・色文字領域と白領域（背景領域）を区別する。すなわち、入力画像データの輝度信号をＬ* （０≦Ｌ* ≦１００、Ｌ* ＝１００で黒）、しきい値をＫ（０≦Ｋ≦１００）としたとき、
Ｌ* ≧Ｋ → 文字領域
Ｌ* ＜Ｋ → 白領域（背景領域）
とする。しきい値Ｋについてはここでは特に限定しない。この方法により、文字・色文字原稿中の文字・色文字領域と白領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３１】
分離部６で対象としている文字・グラフィック混在原稿は、文字部の色は黒のみであると仮定し、その選択データ生成アルゴリズムは、輝度信号Ｌ* と色差信号ａ* 、ｂ* を用い、ある特定のしきい値でＬ* を２値化し、なおかつａ* 、ｂ* が０に近い領域（＝無彩色に近い領域）を文字領域と判定し、それ以外をグラフィック領域（背景領域）と判別する。すなわち、入力画像データの輝度信号をＬ* （０≦Ｌ* ≦１００、Ｌ* ＝１００で黒）、色差信号をａ* 、ｂ* （−１２８≦ａ* 、ｂ* ≦１２７）、しきい値をＫ（０≦Ｋ≦１００）、Ｍ（０≦Ｍ≦（−１２８）2 ＝１６３８４）としたとき、
Ｌ* ≧Ｋ かつ （ａ* ）2 ＋（ｂ* ）2 ≦Ｍ → 文字領域
Ｌ* ＜Ｋ あるいは （ａ* ）2 ＋（ｂ* ）2 ＞Ｍ → グラフィック領域（背景領域）
とする。しきい値Ｋ、Ｍについてはここでは特に限定しない。この方法により、文字・グラフィック混在原稿中の文字領域とグラフィック領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３２】
分離部７で対象としている文字・写真混在原稿は、文字部の色は黒のみであると仮定し、その選択データ生成アルゴリズムは、輝度信号Ｌ* のみを用い、８×８画素ブロック単位でエッジの有無を判定する。エッジありと判定されたブロックは文字領域、それ以外を写真領域（背景領域）と判定する。エッジの判定は例えばブロック内のヒストグラムを作成して階調の最大・最小・分散を算出し、階調が大きくちらばっているものはエッジ有りに、階調のちらばりがないものはエッジなしに判定する。すなわち、
階調のちらばり大 → 文字領域
階調のちらばり小 → 写真領域（背景領域）
とする。この方法により、文字・写真混在原稿中の文字・写真混在原稿中の文字領域と写真領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３３】
これら３つの分離部５〜７は、ユーザインタフェース部８で指定した原稿タイプ情報と１：１に対応させてもよいし、あるいは文字・色文字原稿と文字グラフィック混在原稿は分離部５で処理するなど、複数タイプの原稿を１つの分離部で処理してもよく、特に本方式に限定されない。また、従来より例えば特開平４−１０５１７８号公報に記載されている領域分離アルゴリズムなど、各種の領域分離アルゴリズムが提案されている。これら従来より開発されている方式を分離部に適用することも可能である。例えば文字・写真混在原稿に対する選択データの生成方式として、上述の特開平４−１０５１７８号公報に記載されている方式を用いて構成することも可能である。
【００３４】
図３は、本発明の第１の実施の形態における動作の一例を示すフローチャートである。まずＳ４１において、ユーザがユーザインタフェース部８から原稿タイプ情報を入力する。入力方法は例えばユーザインタフェース部がタッチパネルなどの場合、“文字原稿”、“文字・写真混在原稿”、“文字・グラフィック混在原稿”、“文字・写真・グラフィック混在原稿”などの選択肢の中から該当するタッチパネル部分に触れることにより原稿タイプを選択する。あるいは、“文字重視”、“グラフィック重視”などのモード選定により、画質を重視したい特定の属性を選択してもよい。なお、入力方法はタッチパネルに限らず、押しボタンなど、任意の方法でよい。ユーザが原稿タイプ情報（あるいはモード情報）を入力したら、その情報は制御部９へ送られる。
【００３５】
Ｓ４２において、制御部９では、ユーザインタフェース部８から送られてきた原稿タイプ情報（あるいはモード情報）に基づき、分離手段５〜７のいずれかを切り替えるセレクタ部４の制御信号を生成する。
【００３６】
制御部９で生成された制御信号はセレクタ部４に送られる。Ｓ４３において、セレクタ部４は制御信号に従って選択データ生成部３内に設けられている分離部５〜７から１つの分離部を選択する。
【００３７】
Ｓ４４においてセレクタ部４による分離部の選択が完了したか否かを判定する。例えば、制御信号に基づいて分離部が正しく選択されたら、その旨をユーザインタフェース部８を介してユーザに知らせる。さらに、その選択でよいか否かをユーザがユーザインタフェース部８を介して指示するように構成してもよい。
【００３８】
分離部を選択した後、Ｓ４５は原稿画像を入力する。原稿画像の入力は、例えばスキャナを用いてスキャン入力したり、あるいは、例えば予めＣＤ−ＲＯＭやその他の大容量記憶メデイアに記憶されている画像データを入力したり、ハードディスクなどの蓄積装置に蓄積されている画像データを入力してもよい。さらにはデジタルカメラで撮影した画像データを入力してもよく、特に入力方法は限定されない。
【００３９】
画像データを入力したら、Ｓ４６において、色空間変換部１で所定の色空間に変換する。例えば入力画像データが入力機器などのデバイスに依存した色空間（例えばＲＧＢ色空間など）の場合には、デバイスに依存しない色空間（例えばＣＩＥ−Ｌ* ａ* ｂ* 均等色空間など）に変換する。これによって、多様な出力機器に対して高品質な画像を提供できるようにしている。もちろん、入力画像データがデバイスに依存しない色空間で表現されている場合、この色空間変換処理を省略してよい。
【００４０】
色空間変換が完了したら、Ｓ４７において、色空間変換後の入力画像データから輝度信号を抽出する。これは後段の分離部５〜７が基本的に輝度信号をもとに選択データの生成処理を行っているためである。例えば色空間変換後の入力画像データがＣＩＥ−Ｌ* ａ* ｂ* 均等色空間で表現されていれば、Ｌ* 成分を輝度信号として抽出すればよい。また輝度信号以外の、例えば色差信号ａ* 、ｂ* なども使って選択データを生成する場合には、輝度信号抽出部２を介して色差信号も該当する分離部に供給すればよい。
【００４１】
輝度信号を抽出したら、Ｓ４８において、分離部５〜７のうち選択された分離部にて選択データの生成を開始する。Ｓ４９において選択データの生成が完了したか否かを判定する。例えば、１ページ分の入力原稿の像域分離処理が完了したら、Ｓ５０において、選択データをもとに、色空間変換後の入力画像データを多層分離部１０にて文字画像プレーンと絵柄画像プレーンの２つのプレーンに分離する。この多層分離部１０による分離処理までの一連の処理によって、例えば図２（Ａ）に示す入力画像データから、図２（Ｃ）に示す文字画像プレーンと図２（Ｄ）に示す絵柄画像プレーンの２つのプレーンと、図２（Ｂ）に示す選択データが生成されたことになる。なお、分離部５〜７における選択データの生成処理と多層分離部１０における分離処理を並行して行うことも可能である。この場合、分離部５〜７から出力される選択データの画素位置と、多層分離部１０で分離処理する入力画像データの画素位置を合わせるようにタイミング調整を行えばよい。
【００４２】
２つのプレーンへの分離処理が完了したら、Ｓ５１において、解像度変換部１１，解像度変換部１３，解像度変換部１５にて、文字画像プレーン、絵柄画像プレーン、選択データに対してそれぞれ解像度変換処理を施す。解像度変換アルゴリズムについてはここでは触れないが、文字画像プレーンには文字画像に適した解像度変換アルゴリズム、絵柄画像プレーンには写真・グラフィック画像に適した解像度変換アルゴリズム、選択データには分離情報に適した解像度変換アルゴリズムを適用することができる。これら解像度変換処理のパラメータについては特に限定されない。また解像度変換処理を施さないデータについては、解像度変換部がなくてもよい。
【００４３】
各データに対する解像度変換処理が完了したら、Ｓ５２において、解像度変換後の文字画像プレーン、絵柄画像プレーン、選択データに対してそれぞれ圧縮部１２、圧縮部１４、圧縮部１６にて圧縮処理を施す。圧縮アルゴリズムについてはここでは触れないが、文字画像プレーンには文字画像に適した圧縮アルゴリズム、絵柄画像プレーンには写真・グラフィック画像に適した圧縮アルゴリズム、選択データには分離情報に適した圧縮アルゴリズムを適用することができる。これら圧縮処理のパラメータについては特に限定されない。また圧縮処理を施さないデータについては圧縮部がなくてもよい。
【００４４】
各データの圧縮処理が完了したら、Ｓ５３において、画像フォーマットラッピング部１７にて各データをまとめて１つの画像フォーマットに組み込む。画像フォーマットとしては、例えばＴＩＦＦ（Ｔａｇ Ｉｍａｇｅ Ｆｏｒｍａｔ）やＰＤＦ（Ｐｏｒｔａｂｌｅ Ｄｏｃｕｍｅｎｔ Ｆｏｒｍａｔ）など、現在広く普及しているものを使ってもよいし、あるいは別の画像フォーマットを使ってもよく、特にここでは限定しない。
【００４５】
所定の画像フォーマットに組み立てられた画像データは、Ｓ５４において例えばネットワークもしくは公衆回線などを介して他の受信機器に送信される。送信時に受信機器を指定する方法としては、サリュテーションマネージャー（ＳＬＭ）プロトコルを用いて複数の受信機器の中から特定の機器を指定したり、あるいは公衆回線を用いてＦＡＸとして使用するのであれば相手の電話番号を入力するなど、またそれ以外の方法によって受信機器を指定してもよく、方法は特に限定されない。また、送信されなくても、例えばハードディスクなどの蓄積装置に対して出力し、蓄積させてもよい。
【００４６】
以上述べたように、この第１の実施の形態によれば、ユーザが入力した原稿タイプ情報に基づいて選択データを生成する方式を選択できるので、原稿に適した高精度な分離処理を行うための選択データを生成することができる。したがって、高精度に分離した各属性のデータに対して、最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００４７】
図４は、本発明の第２の実施の形態を示すブロック構成図である。図中、図１と同様の部分には同じ符号を付して説明を省略する。２１は画像構造認識部である。この第２の実施の形態では、入力画像データの構造を、入力画像データそのものから認識し、最適な分離部を選択する例を示している。
【００４８】
画像構造認識部２１は、入力画像データを参照し、入力画像データがどのような属性を含んでいるかを検知する。制御部９は、画像構造認識部２１で検知した属性をもとに、選択データ生成部３における分離部５〜７のいずれかを選択するためのセレクタ部４を制御する制御信号を生成する。
【００４９】
図５は、本発明の第２の実施の形態における動作の一例を示すフローチャートである。まずＳ６１において、原稿画像を入力する。原稿画像の入力には、上述の第１の実施の形態と同様、スキャナやデジタルカメラ等の入力機器を用いた入力や、例えば予めＣＤ−ＲＯＭやその他の大容量記憶メディアに記憶された画像データあるいは予めハードディスクなどの蓄積装置に蓄積された画像データを入力してもよく、特に入力方法は限定されない。
【００５０】
入力画像データが入力されたら、Ｓ６２において、色空間変換部１にて所定の色空間に変換する。この処理により、入力画像データをデバイスに依存しない色空間で表現されたデータに変換する。もちろん、入力画像データがデバイスに依存しない色空間で表現されていれば、この色空間変換処理を行わなくてよい。
【００５１】
色空間変換が完了したら、Ｓ６３において、画像構造認識部２１にて入力画像データに含まれる属性を検知し、原稿タイプを識別する。原稿タイプを識別する方法としては、例えば８×８画素のブロック単位で輝度信号や色差信号を参照し、ブロック内に同じ濃度が必ず所定数以上連続する場合はグラフィック情報、必ず所定数以下しか連続しない場合は写真情報、それ以外は文字情報などのようにブロック単位で判定する。そしてグラフィック情報と判定されたブロックがページ内に所定数以上存在したらその原稿は“グラフィック情報あり”と判定し、写真情報と判定されたブロックがページ内に所定数以上存在したらその原稿は“写真情報あり”と判定し、文字情報と判定されたブロックがページ内に存在したらその原稿は“文字情報あり”と判定する。このようにして、入力画像データがどのような属性を含んでいるかを検知することができる。判定方式はこれ以外の方法であってもよく、特に本実施例に限定されるものではない。入力画像データに含まれる属性を検知したら、その検知結果を原稿識別情報として制御部９へ送る。
【００５２】
制御部９では、Ｓ６４において、画像構造認識部２１から送られてきた原稿識別情報に基づいて、分離部を切り替えるセレクタ部４の制御信号を生成する。制御部９で生成された制御信号はセレクタ部４へ送られる。Ｓ６５において、セレクタ部４は分離部５、分離部６、分離部７の中から１つの分離部を選択する。制御部９は、原稿識別情報と分離部５〜７を１：１に対応させてもよいし、あるいは複数の原稿識別情報について１つの分離部を対応させてもよく、特に限定されない。
【００５３】
Ｓ６６においてセレクタ部４による分離部の選択が完了したか否かを判定する。例えば、制御信号に基づいて分離部が正しく選択されたら、その旨を図示しないユーザインタフェース部を介してユーザに知らせる。さらに、その選択でよいか否かをユーザがユーザインタフェース部を介して指示するように構成してもよい。また、上述の第１の実施の形態と同様にユーザインタフェース部から原稿タイプ情報などが指示可能なように構成しておき、画像構造認識部２１における原稿タイプの検知結果に基づいた分離部の選択が正しくないとき、あるいは、ユーザが他の原稿タイプとして処理させたい場合、原稿タイプなどを変更可能に構成してもよい。制御部９は、変更された原稿タイプなどに基づいて改めて制御信号を生成し、セレクタ部４に送ればよい。
【００５４】
このようにして、制御信号に基づいて分離部が正しく選択された後、Ｓ６７において、Ｓ６１で入力され、Ｓ６２で色空間変換処理された入力画像データから輝度信号を輝度信号抽出部２にて抽出する。このＳ６７以降の処理は、上述の第１の実施の形態における図３のＳ４７以降の処理と同様である。
【００５５】
以上述べたように、この第２の実施の形態によれば、入力した原稿に含まれる属性を自動的に検知して原稿タイプを判別し、選択データを生成する方式を選択できるので、原稿に適した高精度な分離処理が可能な選択データを生成することができる。したがって、高精度に分離した各属性のデータに対して最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００５６】
図６は、本発明の第３の実施の形態を示すブロック構成図である。図中、図１と同様の部分には同じ符号を付して説明を省略する。２２はプレーン生成決定部である。この第３の実施の形態では、上述の第１の実施の形態と同様にユーザによって指定された原稿タイプなどに応じて選択データを生成する方式を切り換えるとともに、その指定に応じて生成する画像プレーンも決定する例を示している。このとき、選択された選択データの生成方式に応じて、生成する各画像プレーンの生成方式を変える処理も行っている。
【００５７】
プレーン生成決定部２２は、制御部９で生成された制御信号に基づいて、多層分離部１０で生成するプレーンや、生成するプレーンに格納するデータ内容を決定する。決定した内容は決定信号として多層分離部１０に送る。多層分離部１０は、プレーン生成決定部２２から決定信号を受け取り、その決定信号に基づいて選択データに従った分離処理を行う。
【００５８】
図７は、本発明の第３の実施の形態における分離後の各プレーンの別の具体例の説明図である。図７に示した例では、色文字のみからなる原稿画像の場合の分離例を示している。図７（Ａ）に示した原稿画像では、タイトル文字「ＡＢＣＤＥ」は赤色によって描かれ、下部の本文部分は青色によって描かれているものとする。図示の都合上、色は表現されておらず、また本文部分は各文字行を直線によって示している。
【００５９】
このような原稿画像を分離する場合、図７（Ｂ）に示すような文字の形状データと、図７（Ｃ）に示すような文字色データに分離することができる。ここで、文字の形状データは、選択データ生成部３から出力される選択データがその内容を有している。そのため、多層分離部１０は文字色データを有する１つの画像プレーンを生成すれば済む。このように、入力画像データによっては、選択データのみ、あるいは上述のように選択データと他の１つの画像プレーンのデータのみでよい場合がある。このように少ないデータ数とすることによって、さらにデータ量を削減することが可能となる。
【００６０】
また、図７（Ｃ）に示すように、文字画像プレーンには文字色情報が含まれていればよく、文字の形状情報は不要である。そのため、文字画像プレーンには同一色の文字領域について一面に文字色を配した画像構成でよい。このような画像構成とすることにより、圧縮を行う場合には圧縮率を向上させることができる。
【００６１】
多層分離部１０では、上述のように分離が必要とされる画像プレーンのみについて分離処理を行う。また、生成する画像プレーンの内容についても、その生成方式を変更する。これによって、画質を低下させずにさらなるデータ量の削減を図ることができる。
【００６２】
図８は、本発明の第３の実施の形態における動作の一例を示すフローチャートである。上述の第１の実施の形態と同様に、まずＳ８１において、ユーザがユーザインタフェース部８から原稿タイプ情報を入力する。Ｓ８２において、制御部９では、ユーザインタフェース部８から送られてきた原稿タイプ情報（あるいはモード情報）に基づき、分離手段５〜７のいずれかを切り替えるセレクタ部４の制御信号を生成する。制御部９で生成された制御信号はセレクタ部４に送られるとともに、プレーン生成決定部２２にも送られる。Ｓ８３において、セレクタ部４は制御部９から送られた制御信号に従って選択データ生成部３内に設けられている分離部５〜７から１つの分離部を選択する。
【００６３】
Ｓ８４において、プレーン生成決定部２２では、制御部９から送られた制御信号に基づき、多層分離部１０にていずれの画像プレーンを生成するか、また生成する画像プレーンのデータ内容をどのようにするかを決定する。そして決定した内容を決定信号として多層分離部１０へ送る。例えばユーザインタフェース部８で入力された原稿タイプが“文字・色文字原稿”であった場合、制御部９で生成される制御信号は、文字・色文字の分離に最適な選択データの生成方式を有する分離部、例えば分離部５を選択することを示している。このような制御信号を受け取った場合、プレーン生成決定部２２は、文字画像プレーンのみ生成し、絵柄画像プレーンは生成しない旨の決定信号を生成し、多層分離部１０へ送る。さらにこの場合には、文字画像プレーンには文字の形状情報を格納せず、文字色情報を格納するように、決定信号によって多層分離部１０に指示する。例えば図７（Ａ）に示す入力画像データが入力された場合に、図７（Ｃ）に示すような文字画像プレーンのみを生成するように、決定信号を生成して多層分離部１０に送る。
【００６４】
Ｓ８５において分離部５〜７のうちのいずれかをセレクタ部４で選択した後、Ｓ８６で入力画像データを取得し、Ｓ８７で色空間変換部１は色空間変換処理を入力画像データに対して施す。さらにＳ８８で輝度信号抽出部２は、色空間変換処理後の入力画像データから輝度信号を抽出し、セレクタ部４を介して選択されている分離部５〜７のいずれかに送る。選択されている分離部は、Ｓ８９において選択データを生成する。なお、Ｓ８５〜Ｓ９０の処理は、上述の第１の実施の形態と同様であり、詳細な説明は省略する。
【００６５】
Ｓ９０において選択データの生成が完了するか、あるいは選択データの生成と並行して、Ｓ９１において選択データをもとに、生成することが予めプレーン生成決定部２２で決定されたプレーンを多層分離部１０にて生成する。例えば図７に示した例では、図７（Ｃ）のような文字画像プレーンのみ生成し、絵柄画像プレーンは生成しない。これによって、選択データ生成部３で生成した図７（Ｂ）に示す選択データと、多層分離部１０で生成した図７（Ｃ）に示す文字画像プレーンの２つのデータが生成されることになる。ここで、文字の形状情報は選択データに含まれ、文字の色情報は文字画像プレーンに含まれ、結果として選択データと文字画像プレーンの２つによって画像が構成される。
【００６６】
Ｓ９２以降の処理は、上述の第１の実施の形態における図３のＳ５１以降の処理と同様である。ただし、Ｓ９２，Ｓ９３における解像度変換処理および圧縮処理は、存在する画像プレーンおよび選択データに対してのみ行われる。また、Ｓ９４における画像フォーマットラッピング処理も、存在する画像プレーンについて行われるとともに、存在しない画像プレーンに対する処理も行う。
【００６７】
なお、上述の説明においては、具体例として図７に示すように選択データと文字画像プレーンの２つのデータで構成する場合を示したが、本発明はこれに限らない。例えば黒文字だけであれば選択データのみとなるし、また写真画像のみであれば選択データも一様なデータとなるため、絵柄画像プレーンのみとすることもできる。また、４つ以上のデータとすることも可能である。さらに、この例では第１の実施の形態のようにユーザが原稿タイプなどを指定する例を示したが、第２の実施の形態で示したように入力画像データ中の属性を自動判定する用に構成することもできる。また、自動判定とユーザによる判定を組み合わせてもよい。
【００６８】
以上述べたように、この第３の実施の形態によれば、ユーザが入力した原稿タイプ情報に基づいて選択データを生成する方式を選択できるとともに、原稿に適したデータ数およびデータ内容で画像を構成することができる。したがって、高精度に分離した各属性のデータに対して、最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００６９】
図９は、本発明の画像処理装置および画像処理方法の応用例を示すシステム構成図である。図中、３１，３２は送信機器、３３〜３５は受信機器、３６はネットワークである。この例では、本発明の画像処理装置および画像処理方法を送信機器に組み込んで、ネットワークを介した画像通信に用いる例を示している。
【００７０】
送信機器３１，３２は、スキャナやデジタルカメラなどの入力装置で入力された画像や、グラフィック機能によって作成された画像、ネットワークを介して図示しないホストコンピータ等から受信した電子文書等を、ネットワーク３６を介して画像データを送信するものである。この送信機器３１，３２は、本発明の画像処理装置または画像処理方法を含んでいる。受信機器３３〜３５は、ネットワーク３６を介して送信機器３１もしくは送信機器３２から送信されてきた所定の画像フォーマットの画像データを受信し、蓄積装置に蓄積したり、ディスプレイ装置への表示や紙などの被記録媒体に記録して出力する。ネットワーク３６は、公衆回線やＬＡＮなどのネットワーク回線で構成されており、送信機器３１，３２および受信機器３３〜３５を相互に接続している。なお図９では、わかりやすくするために送信機器と受信機器の機能をそれぞれ独立させているが、それぞれが送信機能と受信機能を備えた複合機であってもよい。
【００７１】
例えば送信機器３１から画像を送信する場合、本発明の第１ないし第３の実施の形態で説明したようにして、送信すべき画像に適した分離処理によって１以上のデータを生成し、それぞれ所定の画像処理を施した後、圧縮し、画像フォーマットラッピング処理によって１つにまとめて送信する。分離された各データは、属性によって最適に分離されているため、各属性に最適な画像処理および圧縮処理がなされる。そのため、画像劣化を起こすことなくデータ量を削減し、高圧縮率により高速に送信することができる。
【００７２】
受信機器３３〜３５では、送信機器３１からネットワーク３６を介して送られてきた情報を受信し、文字画像プレーン、絵柄画像プレーン、選択データなどに分解する。もちろん上述の第３の実施の形態においては、いずれかのデータが送信されない場合もある。その場合には、受信情報から送られてこなかったデータを作成すればよい。そして、各データの解像度を合わせた後、画素ごとに、選択データに従って文字画像プレーンまたは絵柄画像プレーンのいずれかの画素を選択する。これによって元の画像を復元することができる。復元した画像は、例えば蓄積装置に蓄積したり、ディスプレイ装置で表示したり、あるいは記録装置によって紙などの被記録媒体に記録して出力することができる。
【００７３】
【発明の効果】
以上の説明から明らかなように、本発明によれば、入力画像データの構造に応じて選択データ生成方式を選択して選択データを生成するので、入力画像データを属性に応じた複数のデータに確実に分離することができる。そのため、各データに対して最適な処理を施すことができるとともに、その処理によって発生する画質の劣化をほとんどなくすことができる。例えば圧縮して送信する場合でも、画質劣化をほとんど起こさずに高圧縮率を実現でき、高速に伝送することができるという効果がある。
【図面の簡単な説明】
【図１】 本発明の第１の実施の形態を示すブロック構成図である。
【図２】 本発明の第１の実施の形態における分離処理後の各プレーンの具体例の説明図である。
【図３】 本発明の第１の実施の形態における動作の一例を示すフローチャートである。
【図４】 本発明の第２の実施の形態を示すブロック構成図である。
【図５】 本発明の第２の実施の形態における動作の一例を示すフローチャートである。
【図６】 本発明の第３の実施の形態を示すブロック構成図である。
【図７】 本発明の第３の実施の形態における分離後の各プレーンの別の具体例の説明図である。
【図８】 本発明の第３の実施の形態における動作の一例を示すフローチャートである。
【図９】 本発明の画像処理装置および画像処理方法の応用例を示すシステム構成図である。
【符号の説明】
１…色空間変換部、２…輝度信号抽出部、３…選択データ生成部、４…セレクタ部、５〜７…分離部、８…ユーザインタフェース部、９…制御部、１０…多層分離部、１１，１３，１５…解像度変換部、１２，１４，１６…圧縮部、１７…画像フォーマットラッピング部、２１…画像構造認識部、２２…プレーン生成決定部、３１，３２…送信機器、３３〜３５…受信機器、３６…ネットワーク。
【発明の属する技術分野】
本発明は、公衆回線やＬＡＮなどのネットワーク回線を介して異機種間で高品質に画像データを通信するための画像処理を行なう画像処理装置および画像処理方法に関するものである。
【０００２】
【従来の技術】
近年、公衆回線を用いたファクシミリ通信に加え、公衆回線やＬＡＮなどのネットワークを用いた画像通信が盛んに行なわれている。画像データを送受する機器もファクシミリのほか、パーソナルコンピュータや複合ディジタル複写機、ネットワークプリンタなど、各種の機器が用いられている。また最近はこれらの機器のカラー化も進み、カラーＦＡＸやカラープリンタも主流になりつつある。このようなネットワークシステムでは、例えば、解像度がそれぞれ異なる異機種装置間での相互接続や、カラー複写機と白黒複写機といったような色空間がそれぞれ異なる異機種装置間での相互接続が可能である。
【０００３】
このような異機種装置間で画像データをやりとりする場合、通常は入力した原稿画像を１枚のプレーン画像として扱う。つまり１枚のプレーン画像に対して、入力側機器で原稿タイプを判別して原稿に適した画像処理をプレーン画像全体に施して出力側機器へ送信する。このように原稿画像を１枚のプレーン画像として扱った場合、原稿画像が文字のみ、あるいは写真のみといった１種類の属性の画像データだけで構成されるのであれば特に問題はない。しかし、文字と写真が混在しているような複数の属性の画像データから構成されている場合には不都合が生じる。例えば文字と写真が混在している画像データを圧縮しようとした場合、１枚のプレーン画像に対して同じ圧縮処理を施すので、適用する圧縮手法によっては文字部あるいは写真部のいずれかの圧縮率が低下して通信時間が長くなったり、あるいはいずれかの画質が劣化してしまうという問題があった。
【０００４】
【発明が解決しようとする課題】
本発明は、上述した事情に鑑みてなされたもので、画質劣化がほとんどなく、より高画質かつ高圧縮率で画像情報を送信することのできる画像処理装置および画像処理方法を提供することを目的とするものである。
【０００５】
【課題を解決するための手段】
本発明では、入力画像データを第１画像データ、第２画像データ、および第１画像データまたは第２画像データのいずれかを選択する選択データとからなる画像フォーマットに変換する。例えば入力画像データのうち、文字線画部の色情報を第１画像データ、写真などの絵柄部を第２画像データに分離し、文字線画部の形状情報を選択データとすることができる。選択データは第１画像データまたは第２画像データのいずれかを選択するのみであるから、２値のデータとして扱うことができ、高い解像度で画質を維持したまま高圧縮率で圧縮して高速な通信を行なうことが可能である。
【０００６】
このように多層に分離することにより、高速、高画質の通信が可能になる。しかし、このように多層に分離する場合に、それぞれのデータに良好に分離できないと、それぞれのデータに分離して処理を行った利点が損なわれる。例えば写真などの絵柄部を有する第２画像データに文字などの線画部分が含まれていると、絵柄部に最適な処理を施すことによって線画部分の画質が劣化してしまう。そのため、各データに分離する際に的確に分離できることが性能向上につながる。
【０００７】
本発明では、入力画像データの構造に応じて制御情報を生成し、その制御情報にしたがって選択データ生成方式または分離手段を選択して選択データを生成し、選択データを用いて各画像データに分離する。これによって入力画像データは、選択データおよび第１，第２画像データに確実に分離することができる。そのため、各データに対して最適な処理を施すことができるとともに、その処理によって発生する画質の劣化をほとんどなくすことができる。
【０００８】
なお、入力画像データの構造は、ユーザが入力手段から入力してもよいし、また入力画像データから認識してもよい。また、第１画像データ、第２画像データは、いずれかのみ、あるいは両方とも出力されない場合もある。さらに、第１，第２画像データの生成方式は、選択データを生成する際の方式に従って切り換えることもできる。
【０００９】
【発明の実施の形態】
図１は、本発明の第１の実施の形態を示すブロック構成図である。図中、１は色空間変換部、２は輝度信号抽出部、３は選択データ生成部、４はセレクタ部、５〜７は分離部、８はユーザインタフェース部、９は制御部、１０は多層分離部、１１，１３，１５は解像度変換部、１２，１４，１６は圧縮部、１７は画像フォーマットラッピング部である。
【００１０】
色空間変換部１は、入力画像データを入力デバイスの色空間（例えばＲＧＢ色空間など）から所定の色空間（例えばＣＩＥ−Ｌ* ａ* ｂ* などデバイスに依存しない色空間）に変換する。なお、所定の色空間で表現されている入力画像データが入力される場合には、この色空間変換部１を設けずに構成してもよい。
【００１１】
輝度信号抽出部２は、色空間変換部１で色空間変換された入力画像データから輝度成分（例えばＣＩＥ−Ｌ* ａ* ｂ* 色空間であればＬ* 成分）だけを抽出する。
【００１２】
選択データ生成部３は、セレクタ部４および複数の分離部５〜７を有し、輝度信号抽出部２で抽出された輝度信号から選択データを生成する。セレクタ部４は、制御部９で生成した制御信号に従って分離部５〜７のうちの１つを選択し、選択した分離部に対して輝度信号抽出部２で抽出した輝度信号を送出する。分離部５〜７は、セレクタ部４から送出されてきた輝度信号を画像属性に応じて分離し、選択データを生成して出力する。分離部５〜７は、それぞれ異なる選択データ生成方式を備えている。ここでは３つの分離部を有しているので、３種類の選択データ生成方式を有していることになる。もちろん、２種類あるいは４種類以上の選択データ生成方式を具備した構成であってもよい。また、セレクタ部４が各分離部の後段に配置され、各分離部で生成された選択データをセレクトするように構成してもよい。
【００１３】
ユーザインタフェース部８は、ユーザが原稿タイプなどを指定するための入力手段などを提供している。もちろん、原稿タイプの他にも種々の機能設定が可能なように構成されていてよい。
【００１４】
制御部９は、ユーザインタフェース部８でユーザが指定した原稿タイプをもとに、選択データ生成部３において分離部５〜７のいずれを使用するかを指定するための制御信号を生成し、セレクタ部４に出力する。
【００１５】
多層分離部１０は、分離部５〜７の１つから送出される選択データによって、色空間変換部１で色空間変換された入力画像データを属性ごとに複数の画像データに分離する。ここでは、文字や線画などの画像データと、写真やグラフィックなどの画像データの２つの画像データに分離する例を示している。以下の説明では、文字や線画などの画像データを文字画像プレーン、写真やグラフィックなどの画像データを絵柄画像プレーンと呼ぶ。もちろん、多層分離部１０で分離する画像データは２つに限られるものではないし、また、例えば写真とグラフィックスを別の画像データとして分離するなど、分離する属性も文字と絵柄に限られるものではない。
【００１６】
解像度変換部１１は、文字画像プレーンに対して、文字画像に最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１２は、文字画像プレーンに対して、文字画像に最適な手法で圧縮処理を施す。
【００１７】
解像度変換部１３は、絵柄画像プレーンに対して、写真やグラフィック画像に最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１４は、絵柄画像プレーンに対して、写真やグラフィック画像に最適な手法で圧縮処理を施す。
【００１８】
解像度変換部１５は、選択データ生成部３で生成された選択データに対して、選択データに最適な手法で解像度変換処理を施す。もちろん、解像度変換処理が必要なければ設ける必要はない。圧縮部１６は、選択データに対して、選択データに最適な手法で圧縮処理を施す。
【００１９】
画像フォーマットラッピング部１７は、解像度変換処理や圧縮処理が施された文字画像プレーン、絵柄画像プレーン、選択データを所定の画像フォーマットに組み込んで出力する。出力されたデータは、例えば送信手段により送信したり、あるいは記憶装置などに格納することができる。
【００２０】
なお、この例では多層分離部１０において各画像プレーンに分離した後の処理として、解像度変換部１１，１３，１５による解像度変換処理と、圧縮部１２，１４，１６による圧縮処理を示しているが、これらの処理に限らず、種々の処理を行うことができる。特に、属性に応じて分離されたデータが処理対象であるので、属性に応じて異なる処理を施すことが望まれる処理を行うとよい。また、色空間変換部１における色空間変換処理以外にも、入力画像データに対して一律に行う種々の画像処理を行ってもよい。
【００２１】
図２は、本発明の第１の実施の形態における分離処理後の各プレーンの具体例の説明図である。この第１の実施の形態では、入力画像データから文字画像プレーンと絵柄画像プレーン、それに選択データを生成する。例えば図２（Ａ）に示したように文字「ＡＢＣＤＥ」と、絵柄部分（矩形で囲んだ部分）が同じ画像中に存在する場合、図２（Ｃ）に示すように文字「ＡＢＣＤＥ」のみからなる文字画像プレーンと、図２（Ｄ）に示すように文字部分を除いた絵柄部分からなる絵柄画像プレーンに多層分離部１０で分離する。
【００２２】
この多層分離部１０における分離の際に用いられるデータが、選択データ生成部３で生成された選択データである。ここでは、選択データは図２（Ｂ）に示すように文字部分のみ、特に文字の各線分を構成する塗りつぶし部分のみについて分離するデータにより構成される例を示している。この選択データによって、文字の各線分の部分は文字画像プレーンに分離され、他は絵柄画像プレーンに分離されることになる。
【００２３】
図２に示す例では、図２（Ｂ）に示す選択データと図２（Ｃ）に示す文字画像プレーンは同じデータのように示されている。しかし実際には、図２（Ｂ）に示す選択データは、入力画像データが分離されるプレーン数を識別できる情報があればよく、ここでは文字画像プレーンと絵柄画像プレーンの２つを識別する２値データで構成すればよい。また図２（Ｃ）に示す文字画像プレーンは、例えば文字に色彩が施されていれば、その色情報も保持することになる。
【００２４】
このように入力された画像を分離することによって、例えば文字画像プレーンには文字データに適した圧縮手法を、絵柄画像プレーンには写真データに適した圧縮手法を適用できるので、圧縮率も向上し、また画質劣化もそれほど目立たなくなる。さらに、これら各プレーンに対して最適な解像度変換処理手法を用いて解像度を変換することによって、それぞれ影響の少ない範囲でデータ量を削減することが可能となる。
【００２５】
このように入力画像データを文字画像プレーンや絵柄画像プレーンに分離する際には、選択データを用いている。そのため、選択データを生成する際の分離精度が問題となる。従来より画像中の属性を判定する手法が多数開発されているが、一般的にはそれぞれ特質を有している。
【００２６】
例えばある１つの手法を用いた場合、文字データとグラフィックデータと写真データが混在した原稿を多層分離部１０で分離した場合、選択データの生成方法によっては、文字データであるにもかかわらずグラフィックデータとして絵柄画像プレーンに分離されてしまう領域や、逆にグラフィックデータであるにもかかわらず文字データとして文字画像プレーンに分離されてしまう領域が発生してしまう場合がある。この場合、例えば文字データとグラフィックデータのみが混在した別の原稿について分離を行っても文字データとグラフィックデータ自体の分離精度は変わらないため、やはり文字データであるにもかかわらずグラフィックデータとして絵柄画像プレーンに分離されてしまう領域や、逆にグラフィックデータであるにもかかわらず文字データとして文字画像プレーンに分離されてしまう領域が発生してしまう。つまり原稿が単純になっても分離精度は変わらない。
【００２７】
このような誤った分離がなされると、例えば絵柄画像プレーンについて絵柄画像に最適な解像度変換処理や圧縮処理を施すと、写真などの絵柄でない領域において画質劣化を生じる。同様に例えば文字画像プレーンについて文字画像に最適な解像度変換処理や圧縮処理を施すと、文字でない領域において画質劣化を生じることになる。
【００２８】
このように１つの手法によって選択データを生成した場合、入力画像データによってはどうしても上述のような誤った分離がなされる場合があった。そのため本発明では、選択データを生成する方式の異なる複数の分離部を設け、入力画像データに応じて選択データを生成する方式を切り換えることができるように構成している。これによって、どのような入力画像データが入力されても、最適な属性判定を行うことができ、選択データの品質向上を図ることができる。
【００２９】
このような異なる選択データの生成方式を有する分離部５〜７の具体例として、分離部５は文字・色文字原稿に適した選択データ生成アルゴリズム、分離部６は文字・グラフィック混在原稿に適した選択データ生成アルゴリズム、分離部７は文字・写真混在原稿に適した選択データ生成アルゴリズムを有するように構成することができる。
【００３０】
分離部５で対象としている文字・色文字原稿には、淡濃度の文字はほとんど含まれないと仮定し、その選択データ生成アルゴリズムは輝度信号Ｌ* だけを用い、ある特定のしきい値で輝度信号Ｌ* を２値化して、文字・色文字領域と白領域（背景領域）を区別する。すなわち、入力画像データの輝度信号をＬ* （０≦Ｌ* ≦１００、Ｌ* ＝１００で黒）、しきい値をＫ（０≦Ｋ≦１００）としたとき、
Ｌ* ≧Ｋ → 文字領域
Ｌ* ＜Ｋ → 白領域（背景領域）
とする。しきい値Ｋについてはここでは特に限定しない。この方法により、文字・色文字原稿中の文字・色文字領域と白領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３１】
分離部６で対象としている文字・グラフィック混在原稿は、文字部の色は黒のみであると仮定し、その選択データ生成アルゴリズムは、輝度信号Ｌ* と色差信号ａ* 、ｂ* を用い、ある特定のしきい値でＬ* を２値化し、なおかつａ* 、ｂ* が０に近い領域（＝無彩色に近い領域）を文字領域と判定し、それ以外をグラフィック領域（背景領域）と判別する。すなわち、入力画像データの輝度信号をＬ* （０≦Ｌ* ≦１００、Ｌ* ＝１００で黒）、色差信号をａ* 、ｂ* （−１２８≦ａ* 、ｂ* ≦１２７）、しきい値をＫ（０≦Ｋ≦１００）、Ｍ（０≦Ｍ≦（−１２８）2 ＝１６３８４）としたとき、
Ｌ* ≧Ｋ かつ （ａ* ）2 ＋（ｂ* ）2 ≦Ｍ → 文字領域
Ｌ* ＜Ｋ あるいは （ａ* ）2 ＋（ｂ* ）2 ＞Ｍ → グラフィック領域（背景領域）
とする。しきい値Ｋ、Ｍについてはここでは特に限定しない。この方法により、文字・グラフィック混在原稿中の文字領域とグラフィック領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３２】
分離部７で対象としている文字・写真混在原稿は、文字部の色は黒のみであると仮定し、その選択データ生成アルゴリズムは、輝度信号Ｌ* のみを用い、８×８画素ブロック単位でエッジの有無を判定する。エッジありと判定されたブロックは文字領域、それ以外を写真領域（背景領域）と判定する。エッジの判定は例えばブロック内のヒストグラムを作成して階調の最大・最小・分散を算出し、階調が大きくちらばっているものはエッジ有りに、階調のちらばりがないものはエッジなしに判定する。すなわち、
階調のちらばり大 → 文字領域
階調のちらばり小 → 写真領域（背景領域）
とする。この方法により、文字・写真混在原稿中の文字・写真混在原稿中の文字領域と写真領域（背景領域）を高精度に分離できる選択データを生成することができる。
【００３３】
これら３つの分離部５〜７は、ユーザインタフェース部８で指定した原稿タイプ情報と１：１に対応させてもよいし、あるいは文字・色文字原稿と文字グラフィック混在原稿は分離部５で処理するなど、複数タイプの原稿を１つの分離部で処理してもよく、特に本方式に限定されない。また、従来より例えば特開平４−１０５１７８号公報に記載されている領域分離アルゴリズムなど、各種の領域分離アルゴリズムが提案されている。これら従来より開発されている方式を分離部に適用することも可能である。例えば文字・写真混在原稿に対する選択データの生成方式として、上述の特開平４−１０５１７８号公報に記載されている方式を用いて構成することも可能である。
【００３４】
図３は、本発明の第１の実施の形態における動作の一例を示すフローチャートである。まずＳ４１において、ユーザがユーザインタフェース部８から原稿タイプ情報を入力する。入力方法は例えばユーザインタフェース部がタッチパネルなどの場合、“文字原稿”、“文字・写真混在原稿”、“文字・グラフィック混在原稿”、“文字・写真・グラフィック混在原稿”などの選択肢の中から該当するタッチパネル部分に触れることにより原稿タイプを選択する。あるいは、“文字重視”、“グラフィック重視”などのモード選定により、画質を重視したい特定の属性を選択してもよい。なお、入力方法はタッチパネルに限らず、押しボタンなど、任意の方法でよい。ユーザが原稿タイプ情報（あるいはモード情報）を入力したら、その情報は制御部９へ送られる。
【００３５】
Ｓ４２において、制御部９では、ユーザインタフェース部８から送られてきた原稿タイプ情報（あるいはモード情報）に基づき、分離手段５〜７のいずれかを切り替えるセレクタ部４の制御信号を生成する。
【００３６】
制御部９で生成された制御信号はセレクタ部４に送られる。Ｓ４３において、セレクタ部４は制御信号に従って選択データ生成部３内に設けられている分離部５〜７から１つの分離部を選択する。
【００３７】
Ｓ４４においてセレクタ部４による分離部の選択が完了したか否かを判定する。例えば、制御信号に基づいて分離部が正しく選択されたら、その旨をユーザインタフェース部８を介してユーザに知らせる。さらに、その選択でよいか否かをユーザがユーザインタフェース部８を介して指示するように構成してもよい。
【００３８】
分離部を選択した後、Ｓ４５は原稿画像を入力する。原稿画像の入力は、例えばスキャナを用いてスキャン入力したり、あるいは、例えば予めＣＤ−ＲＯＭやその他の大容量記憶メデイアに記憶されている画像データを入力したり、ハードディスクなどの蓄積装置に蓄積されている画像データを入力してもよい。さらにはデジタルカメラで撮影した画像データを入力してもよく、特に入力方法は限定されない。
【００３９】
画像データを入力したら、Ｓ４６において、色空間変換部１で所定の色空間に変換する。例えば入力画像データが入力機器などのデバイスに依存した色空間（例えばＲＧＢ色空間など）の場合には、デバイスに依存しない色空間（例えばＣＩＥ−Ｌ* ａ* ｂ* 均等色空間など）に変換する。これによって、多様な出力機器に対して高品質な画像を提供できるようにしている。もちろん、入力画像データがデバイスに依存しない色空間で表現されている場合、この色空間変換処理を省略してよい。
【００４０】
色空間変換が完了したら、Ｓ４７において、色空間変換後の入力画像データから輝度信号を抽出する。これは後段の分離部５〜７が基本的に輝度信号をもとに選択データの生成処理を行っているためである。例えば色空間変換後の入力画像データがＣＩＥ−Ｌ* ａ* ｂ* 均等色空間で表現されていれば、Ｌ* 成分を輝度信号として抽出すればよい。また輝度信号以外の、例えば色差信号ａ* 、ｂ* なども使って選択データを生成する場合には、輝度信号抽出部２を介して色差信号も該当する分離部に供給すればよい。
【００４１】
輝度信号を抽出したら、Ｓ４８において、分離部５〜７のうち選択された分離部にて選択データの生成を開始する。Ｓ４９において選択データの生成が完了したか否かを判定する。例えば、１ページ分の入力原稿の像域分離処理が完了したら、Ｓ５０において、選択データをもとに、色空間変換後の入力画像データを多層分離部１０にて文字画像プレーンと絵柄画像プレーンの２つのプレーンに分離する。この多層分離部１０による分離処理までの一連の処理によって、例えば図２（Ａ）に示す入力画像データから、図２（Ｃ）に示す文字画像プレーンと図２（Ｄ）に示す絵柄画像プレーンの２つのプレーンと、図２（Ｂ）に示す選択データが生成されたことになる。なお、分離部５〜７における選択データの生成処理と多層分離部１０における分離処理を並行して行うことも可能である。この場合、分離部５〜７から出力される選択データの画素位置と、多層分離部１０で分離処理する入力画像データの画素位置を合わせるようにタイミング調整を行えばよい。
【００４２】
２つのプレーンへの分離処理が完了したら、Ｓ５１において、解像度変換部１１，解像度変換部１３，解像度変換部１５にて、文字画像プレーン、絵柄画像プレーン、選択データに対してそれぞれ解像度変換処理を施す。解像度変換アルゴリズムについてはここでは触れないが、文字画像プレーンには文字画像に適した解像度変換アルゴリズム、絵柄画像プレーンには写真・グラフィック画像に適した解像度変換アルゴリズム、選択データには分離情報に適した解像度変換アルゴリズムを適用することができる。これら解像度変換処理のパラメータについては特に限定されない。また解像度変換処理を施さないデータについては、解像度変換部がなくてもよい。
【００４３】
各データに対する解像度変換処理が完了したら、Ｓ５２において、解像度変換後の文字画像プレーン、絵柄画像プレーン、選択データに対してそれぞれ圧縮部１２、圧縮部１４、圧縮部１６にて圧縮処理を施す。圧縮アルゴリズムについてはここでは触れないが、文字画像プレーンには文字画像に適した圧縮アルゴリズム、絵柄画像プレーンには写真・グラフィック画像に適した圧縮アルゴリズム、選択データには分離情報に適した圧縮アルゴリズムを適用することができる。これら圧縮処理のパラメータについては特に限定されない。また圧縮処理を施さないデータについては圧縮部がなくてもよい。
【００４４】
各データの圧縮処理が完了したら、Ｓ５３において、画像フォーマットラッピング部１７にて各データをまとめて１つの画像フォーマットに組み込む。画像フォーマットとしては、例えばＴＩＦＦ（Ｔａｇ Ｉｍａｇｅ Ｆｏｒｍａｔ）やＰＤＦ（Ｐｏｒｔａｂｌｅ Ｄｏｃｕｍｅｎｔ Ｆｏｒｍａｔ）など、現在広く普及しているものを使ってもよいし、あるいは別の画像フォーマットを使ってもよく、特にここでは限定しない。
【００４５】
所定の画像フォーマットに組み立てられた画像データは、Ｓ５４において例えばネットワークもしくは公衆回線などを介して他の受信機器に送信される。送信時に受信機器を指定する方法としては、サリュテーションマネージャー（ＳＬＭ）プロトコルを用いて複数の受信機器の中から特定の機器を指定したり、あるいは公衆回線を用いてＦＡＸとして使用するのであれば相手の電話番号を入力するなど、またそれ以外の方法によって受信機器を指定してもよく、方法は特に限定されない。また、送信されなくても、例えばハードディスクなどの蓄積装置に対して出力し、蓄積させてもよい。
【００４６】
以上述べたように、この第１の実施の形態によれば、ユーザが入力した原稿タイプ情報に基づいて選択データを生成する方式を選択できるので、原稿に適した高精度な分離処理を行うための選択データを生成することができる。したがって、高精度に分離した各属性のデータに対して、最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００４７】
図４は、本発明の第２の実施の形態を示すブロック構成図である。図中、図１と同様の部分には同じ符号を付して説明を省略する。２１は画像構造認識部である。この第２の実施の形態では、入力画像データの構造を、入力画像データそのものから認識し、最適な分離部を選択する例を示している。
【００４８】
画像構造認識部２１は、入力画像データを参照し、入力画像データがどのような属性を含んでいるかを検知する。制御部９は、画像構造認識部２１で検知した属性をもとに、選択データ生成部３における分離部５〜７のいずれかを選択するためのセレクタ部４を制御する制御信号を生成する。
【００４９】
図５は、本発明の第２の実施の形態における動作の一例を示すフローチャートである。まずＳ６１において、原稿画像を入力する。原稿画像の入力には、上述の第１の実施の形態と同様、スキャナやデジタルカメラ等の入力機器を用いた入力や、例えば予めＣＤ−ＲＯＭやその他の大容量記憶メディアに記憶された画像データあるいは予めハードディスクなどの蓄積装置に蓄積された画像データを入力してもよく、特に入力方法は限定されない。
【００５０】
入力画像データが入力されたら、Ｓ６２において、色空間変換部１にて所定の色空間に変換する。この処理により、入力画像データをデバイスに依存しない色空間で表現されたデータに変換する。もちろん、入力画像データがデバイスに依存しない色空間で表現されていれば、この色空間変換処理を行わなくてよい。
【００５１】
色空間変換が完了したら、Ｓ６３において、画像構造認識部２１にて入力画像データに含まれる属性を検知し、原稿タイプを識別する。原稿タイプを識別する方法としては、例えば８×８画素のブロック単位で輝度信号や色差信号を参照し、ブロック内に同じ濃度が必ず所定数以上連続する場合はグラフィック情報、必ず所定数以下しか連続しない場合は写真情報、それ以外は文字情報などのようにブロック単位で判定する。そしてグラフィック情報と判定されたブロックがページ内に所定数以上存在したらその原稿は“グラフィック情報あり”と判定し、写真情報と判定されたブロックがページ内に所定数以上存在したらその原稿は“写真情報あり”と判定し、文字情報と判定されたブロックがページ内に存在したらその原稿は“文字情報あり”と判定する。このようにして、入力画像データがどのような属性を含んでいるかを検知することができる。判定方式はこれ以外の方法であってもよく、特に本実施例に限定されるものではない。入力画像データに含まれる属性を検知したら、その検知結果を原稿識別情報として制御部９へ送る。
【００５２】
制御部９では、Ｓ６４において、画像構造認識部２１から送られてきた原稿識別情報に基づいて、分離部を切り替えるセレクタ部４の制御信号を生成する。制御部９で生成された制御信号はセレクタ部４へ送られる。Ｓ６５において、セレクタ部４は分離部５、分離部６、分離部７の中から１つの分離部を選択する。制御部９は、原稿識別情報と分離部５〜７を１：１に対応させてもよいし、あるいは複数の原稿識別情報について１つの分離部を対応させてもよく、特に限定されない。
【００５３】
Ｓ６６においてセレクタ部４による分離部の選択が完了したか否かを判定する。例えば、制御信号に基づいて分離部が正しく選択されたら、その旨を図示しないユーザインタフェース部を介してユーザに知らせる。さらに、その選択でよいか否かをユーザがユーザインタフェース部を介して指示するように構成してもよい。また、上述の第１の実施の形態と同様にユーザインタフェース部から原稿タイプ情報などが指示可能なように構成しておき、画像構造認識部２１における原稿タイプの検知結果に基づいた分離部の選択が正しくないとき、あるいは、ユーザが他の原稿タイプとして処理させたい場合、原稿タイプなどを変更可能に構成してもよい。制御部９は、変更された原稿タイプなどに基づいて改めて制御信号を生成し、セレクタ部４に送ればよい。
【００５４】
このようにして、制御信号に基づいて分離部が正しく選択された後、Ｓ６７において、Ｓ６１で入力され、Ｓ６２で色空間変換処理された入力画像データから輝度信号を輝度信号抽出部２にて抽出する。このＳ６７以降の処理は、上述の第１の実施の形態における図３のＳ４７以降の処理と同様である。
【００５５】
以上述べたように、この第２の実施の形態によれば、入力した原稿に含まれる属性を自動的に検知して原稿タイプを判別し、選択データを生成する方式を選択できるので、原稿に適した高精度な分離処理が可能な選択データを生成することができる。したがって、高精度に分離した各属性のデータに対して最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００５６】
図６は、本発明の第３の実施の形態を示すブロック構成図である。図中、図１と同様の部分には同じ符号を付して説明を省略する。２２はプレーン生成決定部である。この第３の実施の形態では、上述の第１の実施の形態と同様にユーザによって指定された原稿タイプなどに応じて選択データを生成する方式を切り換えるとともに、その指定に応じて生成する画像プレーンも決定する例を示している。このとき、選択された選択データの生成方式に応じて、生成する各画像プレーンの生成方式を変える処理も行っている。
【００５７】
プレーン生成決定部２２は、制御部９で生成された制御信号に基づいて、多層分離部１０で生成するプレーンや、生成するプレーンに格納するデータ内容を決定する。決定した内容は決定信号として多層分離部１０に送る。多層分離部１０は、プレーン生成決定部２２から決定信号を受け取り、その決定信号に基づいて選択データに従った分離処理を行う。
【００５８】
図７は、本発明の第３の実施の形態における分離後の各プレーンの別の具体例の説明図である。図７に示した例では、色文字のみからなる原稿画像の場合の分離例を示している。図７（Ａ）に示した原稿画像では、タイトル文字「ＡＢＣＤＥ」は赤色によって描かれ、下部の本文部分は青色によって描かれているものとする。図示の都合上、色は表現されておらず、また本文部分は各文字行を直線によって示している。
【００５９】
このような原稿画像を分離する場合、図７（Ｂ）に示すような文字の形状データと、図７（Ｃ）に示すような文字色データに分離することができる。ここで、文字の形状データは、選択データ生成部３から出力される選択データがその内容を有している。そのため、多層分離部１０は文字色データを有する１つの画像プレーンを生成すれば済む。このように、入力画像データによっては、選択データのみ、あるいは上述のように選択データと他の１つの画像プレーンのデータのみでよい場合がある。このように少ないデータ数とすることによって、さらにデータ量を削減することが可能となる。
【００６０】
また、図７（Ｃ）に示すように、文字画像プレーンには文字色情報が含まれていればよく、文字の形状情報は不要である。そのため、文字画像プレーンには同一色の文字領域について一面に文字色を配した画像構成でよい。このような画像構成とすることにより、圧縮を行う場合には圧縮率を向上させることができる。
【００６１】
多層分離部１０では、上述のように分離が必要とされる画像プレーンのみについて分離処理を行う。また、生成する画像プレーンの内容についても、その生成方式を変更する。これによって、画質を低下させずにさらなるデータ量の削減を図ることができる。
【００６２】
図８は、本発明の第３の実施の形態における動作の一例を示すフローチャートである。上述の第１の実施の形態と同様に、まずＳ８１において、ユーザがユーザインタフェース部８から原稿タイプ情報を入力する。Ｓ８２において、制御部９では、ユーザインタフェース部８から送られてきた原稿タイプ情報（あるいはモード情報）に基づき、分離手段５〜７のいずれかを切り替えるセレクタ部４の制御信号を生成する。制御部９で生成された制御信号はセレクタ部４に送られるとともに、プレーン生成決定部２２にも送られる。Ｓ８３において、セレクタ部４は制御部９から送られた制御信号に従って選択データ生成部３内に設けられている分離部５〜７から１つの分離部を選択する。
【００６３】
Ｓ８４において、プレーン生成決定部２２では、制御部９から送られた制御信号に基づき、多層分離部１０にていずれの画像プレーンを生成するか、また生成する画像プレーンのデータ内容をどのようにするかを決定する。そして決定した内容を決定信号として多層分離部１０へ送る。例えばユーザインタフェース部８で入力された原稿タイプが“文字・色文字原稿”であった場合、制御部９で生成される制御信号は、文字・色文字の分離に最適な選択データの生成方式を有する分離部、例えば分離部５を選択することを示している。このような制御信号を受け取った場合、プレーン生成決定部２２は、文字画像プレーンのみ生成し、絵柄画像プレーンは生成しない旨の決定信号を生成し、多層分離部１０へ送る。さらにこの場合には、文字画像プレーンには文字の形状情報を格納せず、文字色情報を格納するように、決定信号によって多層分離部１０に指示する。例えば図７（Ａ）に示す入力画像データが入力された場合に、図７（Ｃ）に示すような文字画像プレーンのみを生成するように、決定信号を生成して多層分離部１０に送る。
【００６４】
Ｓ８５において分離部５〜７のうちのいずれかをセレクタ部４で選択した後、Ｓ８６で入力画像データを取得し、Ｓ８７で色空間変換部１は色空間変換処理を入力画像データに対して施す。さらにＳ８８で輝度信号抽出部２は、色空間変換処理後の入力画像データから輝度信号を抽出し、セレクタ部４を介して選択されている分離部５〜７のいずれかに送る。選択されている分離部は、Ｓ８９において選択データを生成する。なお、Ｓ８５〜Ｓ９０の処理は、上述の第１の実施の形態と同様であり、詳細な説明は省略する。
【００６５】
Ｓ９０において選択データの生成が完了するか、あるいは選択データの生成と並行して、Ｓ９１において選択データをもとに、生成することが予めプレーン生成決定部２２で決定されたプレーンを多層分離部１０にて生成する。例えば図７に示した例では、図７（Ｃ）のような文字画像プレーンのみ生成し、絵柄画像プレーンは生成しない。これによって、選択データ生成部３で生成した図７（Ｂ）に示す選択データと、多層分離部１０で生成した図７（Ｃ）に示す文字画像プレーンの２つのデータが生成されることになる。ここで、文字の形状情報は選択データに含まれ、文字の色情報は文字画像プレーンに含まれ、結果として選択データと文字画像プレーンの２つによって画像が構成される。
【００６６】
Ｓ９２以降の処理は、上述の第１の実施の形態における図３のＳ５１以降の処理と同様である。ただし、Ｓ９２，Ｓ９３における解像度変換処理および圧縮処理は、存在する画像プレーンおよび選択データに対してのみ行われる。また、Ｓ９４における画像フォーマットラッピング処理も、存在する画像プレーンについて行われるとともに、存在しない画像プレーンに対する処理も行う。
【００６７】
なお、上述の説明においては、具体例として図７に示すように選択データと文字画像プレーンの２つのデータで構成する場合を示したが、本発明はこれに限らない。例えば黒文字だけであれば選択データのみとなるし、また写真画像のみであれば選択データも一様なデータとなるため、絵柄画像プレーンのみとすることもできる。また、４つ以上のデータとすることも可能である。さらに、この例では第１の実施の形態のようにユーザが原稿タイプなどを指定する例を示したが、第２の実施の形態で示したように入力画像データ中の属性を自動判定する用に構成することもできる。また、自動判定とユーザによる判定を組み合わせてもよい。
【００６８】
以上述べたように、この第３の実施の形態によれば、ユーザが入力した原稿タイプ情報に基づいて選択データを生成する方式を選択できるとともに、原稿に適したデータ数およびデータ内容で画像を構成することができる。したがって、高精度に分離した各属性のデータに対して、最適な解像度変換処理や圧縮処理を施すことができ、１層で処理した場合に比べて高画質かつ高圧縮率を実現することができる。
【００６９】
図９は、本発明の画像処理装置および画像処理方法の応用例を示すシステム構成図である。図中、３１，３２は送信機器、３３〜３５は受信機器、３６はネットワークである。この例では、本発明の画像処理装置および画像処理方法を送信機器に組み込んで、ネットワークを介した画像通信に用いる例を示している。
【００７０】
送信機器３１，３２は、スキャナやデジタルカメラなどの入力装置で入力された画像や、グラフィック機能によって作成された画像、ネットワークを介して図示しないホストコンピータ等から受信した電子文書等を、ネットワーク３６を介して画像データを送信するものである。この送信機器３１，３２は、本発明の画像処理装置または画像処理方法を含んでいる。受信機器３３〜３５は、ネットワーク３６を介して送信機器３１もしくは送信機器３２から送信されてきた所定の画像フォーマットの画像データを受信し、蓄積装置に蓄積したり、ディスプレイ装置への表示や紙などの被記録媒体に記録して出力する。ネットワーク３６は、公衆回線やＬＡＮなどのネットワーク回線で構成されており、送信機器３１，３２および受信機器３３〜３５を相互に接続している。なお図９では、わかりやすくするために送信機器と受信機器の機能をそれぞれ独立させているが、それぞれが送信機能と受信機能を備えた複合機であってもよい。
【００７１】
例えば送信機器３１から画像を送信する場合、本発明の第１ないし第３の実施の形態で説明したようにして、送信すべき画像に適した分離処理によって１以上のデータを生成し、それぞれ所定の画像処理を施した後、圧縮し、画像フォーマットラッピング処理によって１つにまとめて送信する。分離された各データは、属性によって最適に分離されているため、各属性に最適な画像処理および圧縮処理がなされる。そのため、画像劣化を起こすことなくデータ量を削減し、高圧縮率により高速に送信することができる。
【００７２】
受信機器３３〜３５では、送信機器３１からネットワーク３６を介して送られてきた情報を受信し、文字画像プレーン、絵柄画像プレーン、選択データなどに分解する。もちろん上述の第３の実施の形態においては、いずれかのデータが送信されない場合もある。その場合には、受信情報から送られてこなかったデータを作成すればよい。そして、各データの解像度を合わせた後、画素ごとに、選択データに従って文字画像プレーンまたは絵柄画像プレーンのいずれかの画素を選択する。これによって元の画像を復元することができる。復元した画像は、例えば蓄積装置に蓄積したり、ディスプレイ装置で表示したり、あるいは記録装置によって紙などの被記録媒体に記録して出力することができる。
【００７３】
【発明の効果】
以上の説明から明らかなように、本発明によれば、入力画像データの構造に応じて選択データ生成方式を選択して選択データを生成するので、入力画像データを属性に応じた複数のデータに確実に分離することができる。そのため、各データに対して最適な処理を施すことができるとともに、その処理によって発生する画質の劣化をほとんどなくすことができる。例えば圧縮して送信する場合でも、画質劣化をほとんど起こさずに高圧縮率を実現でき、高速に伝送することができるという効果がある。
【図面の簡単な説明】
【図１】 本発明の第１の実施の形態を示すブロック構成図である。
【図２】 本発明の第１の実施の形態における分離処理後の各プレーンの具体例の説明図である。
【図３】 本発明の第１の実施の形態における動作の一例を示すフローチャートである。
【図４】 本発明の第２の実施の形態を示すブロック構成図である。
【図５】 本発明の第２の実施の形態における動作の一例を示すフローチャートである。
【図６】 本発明の第３の実施の形態を示すブロック構成図である。
【図７】 本発明の第３の実施の形態における分離後の各プレーンの別の具体例の説明図である。
【図８】 本発明の第３の実施の形態における動作の一例を示すフローチャートである。
【図９】 本発明の画像処理装置および画像処理方法の応用例を示すシステム構成図である。
【符号の説明】
１…色空間変換部、２…輝度信号抽出部、３…選択データ生成部、４…セレクタ部、５〜７…分離部、８…ユーザインタフェース部、９…制御部、１０…多層分離部、１１，１３，１５…解像度変換部、１２，１４，１６…圧縮部、１７…画像フォーマットラッピング部、２１…画像構造認識部、２２…プレーン生成決定部、３１，３２…送信機器、３３〜３５…受信機器、３６…ネットワーク。
Claims (18)
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、複数の異なる選択データ生成方式のいずれかを用いて前記入力画像データから前記選択データを生成する選択データ生成手段と、前記入力画像データの構造に応じて前記選択データ生成手段が用いる前記選択データ生成方式を選択する制御情報を生成する制御手段と、前記第１画像データおよび前記第２画像データのそれぞれについて当該画像データを生成するか否かを決定する決定手段と、前記選択データを用いて前記入力画像データを前記決定手段によって生成することが決定された画像データに分離する多層分離手段を有し、前記選択データと前記多層分離手段で分離された画像データを出力するものであり、前記選択データ生成手段は、前記制御手段が生成する制御情報にしたがって前記選択データ生成方式を選択し前記選択データを生成することを特徴とする画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、複数の異なる選択データ生成方式のいずれかを用いて前記入力画像データから前記選択データを生成する選択データ生成手段と、前記入力画像データの構造に応じて前記選択データ生成手段が用いる前記選択データ生成方式を選択する制御情報を生成する制御手段と、前記選択データ生成手段において生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離する多層分離手段を有し、前記選択データ生成手段は、前記制御手段が生成する制御情報にしたがって前記選択データ生成方式を選択し前記選択データを生成し、多層分離手段は、前記選択データ生成手段において用いられた前記選択データ生成方式に応じて前記第１画像データおよび前記第２画像データの分離方式を変えて前記第１画像データおよび前記第２画像データの少なくとも一方に分離するものであって、前記選択データ生成手段で生成した前記選択データと前記多層分離手段で分離された画像データを出力することを特徴とする画像処理装置。
- 前記入力画像データの構造に関する情報をユーザが入力する入力手段をさらに有し、前記制御手段は、前記入力手段によって入力された前記入力画像データの構造に関する情報に応じて前記制御情報を生成することを特徴とする請求項１または請求項２に記載の画像処理装置。
- 前記入力画像データから当該入力画像データの構造を認識する画像構造認識手段をさらに有し、前記制御手段は、前記画像構造認識手段によって認識された前記入力画像データの構造に応じて前記制御情報を生成することを特徴とする請求項１または請求項２に記載の画像処理装置。
- 前記多層分離手段から出力される前記第１画像データおよび前記第２画像データのうちの存在するデータと前記選択データ生成手段において生成された前記選択データに対してそれぞれのデータに応じた少なくとも圧縮処理を含む画像処理を行う処理手段と、該処理手段から出力されたデータを前記画像フォーマットにまとめる画像フォーマットラッピング手段を有することを特徴とする請求項１ないし請求項４のいずれか１項に記載の画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、属性に応じて前記入力画像データから前記選択データを生成する複数の分離手段と、前記入力画像データから当該入力画像データの属性を認識する画像構造認識手段と、前記画像構造認識手段で認識された前記入力画像データの属性に応じて前記分離手段を選択する制御情報を生成する制御手段と、前記制御情報に従って前記分離手段を選択する選択手段と、前記分離手段において生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離する多層分離手段を有し、前記選択手段で選択された前記分離手段で生成された前記選択データと前記多層分離手段で分離された画像データを出力することを特徴とする画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、属性に応じて前記入力画像データから前記選択データを生成する複数の分離手段と、前記入力画像データから当該入力画像データの属性をブロック単位で認識する画像構造認識手段と、前記画像構造認識手段で認識された前記入力画像データの属性に応じて前記分離手段を選択する制御情報を生成する制御手段と、前記制御情報に従って前記分離手段を選択する選択手段と、前記分離手段において生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離する多層分離手段を有し、前記選択手段で選択された前記分離手段で生成された前記選択データと前記多層分離手段で分離された画像データを出力することを特徴とする画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、属性に応じて前記入力画像データから前記選択データを生成する複数の分離手段と、前記入力画像データから当該入力画像データの属性の組み合わせを認識する画像構造認識手段と、前記画像構造認識手段で認識された前記入力画像データの属性の組み合わせに応じて前記分離手段を選択する制御情報を生成する制御手段と、前記制御情報に従って前記分離手段を選択する選択手段と、前記分離手段において生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離する多層分離手段を有し、前記選択手段で選択された前記分離手段で生成された前記選択データと前記多層分離手段で分離された画像データを出力することを特徴とする画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理装置であって、属性に応じて前記入力画像データから前記選択データを生成する複数の分離手段と、前記入力画像データからブロック単位で当該入力画像データの属性の組み合わせを認識する画像構造認識手段と、前記画像構造認識手段で認識された前記入力画像データの属性の組み合わせに応じて前記分離手段を選択する制御情報を生成する制御手段と、前記制御情報に従って前記分離手段を選択する選択手段と、前記分離手段において生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離する多層分離手段を有し、前記選択手段で選択された前記分離手段で生成された前記選択データと前記多層分離手段で分離された画像データを出力することを特徴とする画像処理装置。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理方法であって、前記入力画像データの構造に応じて複数の異なる選択データ生成方式のうちのいずれかを選択し、選択された選択データ生成方式を用いて前記入力画像データから前記選択データを生成し、前記第１画像データおよび前記第２画像データのそれぞれについて当該画像データを生成するか否かを決定し、前記選択データを用いて前記入力画像データを、生成することが決定された画像データに分離し、分離した画像データ及び前記選択データを出力することを特徴とする画像処理方法。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する画像処理方法であって、前記入力画像データの構造に応じて複数の異なる選択データ生成方式のうちのいずれかを選択し、選択された選択データ生成方式を用いて前記入力画像データから前記選択データを生成し、前記選択データを生成する際に用いた前記選択データ生成方式に応じて前記第１画像データおよび前記第２画像データの生成方式を変えて前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離し、分離した前記第１画像データおよび前記第２画像データの少なくとも一方と前記選択データを出力することを特徴とする画像処理方法。
- 前記入力画像データの構造に関する情報をユーザが入力し、入力された前記入力画像データの構造に関する情報に応じて前記複数の異なる選択データ生成方式のうちのいずれかを選択することを特徴とする請求項１０または請求項１１に記載の画像処理方法。
- 前記入力画像データの構造を認識し、認識された前記入力画像データの構造に応じて前記複数の異なる選択データ生成方式のうちのいずれかを選択することを特徴とする請求項１０または請求項１１に記載の画像処理方法。
- さらに、生成された前記第１画像データおよび前記第２画像データのうちの存在するデータおよび前記選択データに対してそれぞれのデータに応じた少なくとも圧縮処理を含む画像処理を施し、その後各データを前記画像フォーマットにまとめることを特徴とする請求項１０ないし請求項１３のいずれか１項に記載の画像処理方法。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する分離手段を複数有する画像処理装置における画像処理方法であって、前記入力画像データから当該入力画像データの属性を認識し、認識された前記入力画像データの属性に応じて前記分離手段を選択する制御情報を生成し、前記制御情報に従って選択された前記分離手段により前記選択データを生成し、生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離し、生成された前記選択データと分離された前記第１画像データおよび前記第２画像データの少なくとも一方を出力することを特徴とする画像処理方法。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する分離手段を複数有する画像処理装置における画像処理方法であって、前記入力画像データから当該入力画像データの属性をブロック単位で認識し、認識された前記入力画像データの属性に応じて前記分離手段を選択する制御情報を生成し、前記制御情報に従って選択された前記分離手段により前記選択データを生成し、生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離し、生成された前記選択データと分離された前記第１画像データおよび前記第２画像データの少なくとも一方を出力することを特徴とする画像処理方法。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する分離手段を複数有する画像処理装置における画像処理方法であって、前記入力画像データから当該入力画像データの属性の組み合わせを認識し、認識された前記入力画像データの属性の組み合わせに応じて前記分離手段を選択する制御情報を生成し、前記制御情報に従って選択された前記分離手段により前記選択データを生成し、生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離し、生成された前記選択データと分離された前記第１画像データおよび前記第２画像データの少なくとも一方を出力することを特徴とする画像処理方法。
- 入力画像データから第１画像データ、第２画像データ、および前記第１画像データまたは前記第２画像データのいずれかを選択する選択データからなる画像フォーマットにおける少なくとも前記選択データを生成する分離手段を複数有する画像処理装置における画像処理方法であって、前記入力画像データからブロック単位で当該入力画像データの属性の組み合わせを認識し、認識された前記入力画像データの属性の組み合わせに応じて前記分離手段を選択する制御情報を生成し、前記制御情報に従って選択された前記分離手段により前記選択データを生成し、生成された前記選択データを用いて前記入力画像データを前記第１画像データおよび前記第２画像データの少なくとも一方に分離し、生成された前記選択データと分離された前記第１画像データおよび前記第２画像データの少なくとも一方を出力することを特徴とする画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22718898A JP3794171B2 (ja) | 1998-08-11 | 1998-08-11 | 画像処理装置および画像処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22718898A JP3794171B2 (ja) | 1998-08-11 | 1998-08-11 | 画像処理装置および画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000059605A JP2000059605A (ja) | 2000-02-25 |
| JP3794171B2 true JP3794171B2 (ja) | 2006-07-05 |
Family
ID=16856879
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP22718898A Expired - Fee Related JP3794171B2 (ja) | 1998-08-11 | 1998-08-11 | 画像処理装置および画像処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3794171B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4012140B2 (ja) | 2003-11-20 | 2007-11-21 | キヤノン株式会社 | 画像処理装置、情報処理装置及びそれらの制御方法、プログラム |
-
1998
- 1998-08-11 JP JP22718898A patent/JP3794171B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000059605A (ja) | 2000-02-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3797669B2 (ja) | 画像形成装置および画像形成方法 | |
| JP5164368B2 (ja) | 画像処理装置、画像処理方法 | |
| JP5039736B2 (ja) | 画像処理装置、制御方法、及びプログラム | |
| EP1708479B1 (en) | Image processing apparatus and its method | |
| JP4966248B2 (ja) | 画像処理装置、画像形成装置、画像処理方法、及びコンピュータプログラム | |
| JPH11122479A (ja) | 画像処理装置および画像処理方法 | |
| JP2022147074A (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP3794171B2 (ja) | 画像処理装置および画像処理方法 | |
| JP2004363795A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
| JP2006180343A (ja) | 画像入出力装置 | |
| JP3826983B2 (ja) | 画像処理装置 | |
| JP2006270148A (ja) | 画像処理方法および画像処理装置並びに画像形成装置 | |
| JP2002142106A (ja) | 画像処理装置および画像処理方法 | |
| US8115963B2 (en) | Image processing apparatus, image processing method, and computer program product | |
| JP2004112140A (ja) | 画像処理装置 | |
| JP6560942B2 (ja) | 画像形成装置及びその制御方法、並びに制御プログラム | |
| JP2006166134A (ja) | 画像通信装置、その制御方法、プログラム、及び記憶媒体 | |
| JP2004128665A (ja) | 画像処理装置 | |
| JP2006287707A (ja) | 画像処理装置 | |
| JP4954835B2 (ja) | 画像処理装置及び画像形成装置 | |
| JP5413297B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
| JP2007030352A (ja) | 多色画像印刷装置 | |
| JP2009225042A (ja) | 画像処理装置 | |
| JP2007166072A (ja) | 画像処理装置および画像処理装置の制御方法 | |
| JP2004172744A (ja) | カラー画像入出力装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20041021 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041124 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050120 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050824 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051019 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060322 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060404 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100421 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110421 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120421 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |