JP2006050666A - 画像処理装置および画像処理方法 - Google Patents

Abstract

【課題】 画像中に禁止画像が含まれている場合でも、禁止画像以外の部分の再現を可能にした画像処理装置および画像処理方法を提供する。
【解決手段】 画像入力部１で入力された画像データは、画像処理部４で各種の画像処理が施された後、画像蓄積部５に蓄積される。一方、禁止画像認識部３は入力された画像データに対して禁止画像の認識処理を行い、認識結果が画像入力部１から画像蓄積部５に通知される。例えば画像蓄積部５において複数の画像データが合成した場合、禁止画像を含む画像データの領域のみに禁止画像を含む旨のタグ情報を付加して画像処理部４に出力する。そのため画像処理部４では、禁止画像を含む画像データの領域のみに禁止画像に対して行う所定の加工を施し、他の領域には所定の加工を行わない。そのため、禁止画像を含まない画像データの部分は画像出力部２で正常に画像が形成される。
【選択図】 図１

Description

本発明は、画像データに複写をすべきでない画像が含まれている場合に、画像データに対して所定の加工を行う画像処理装置および画像処理方法に関するものである。

近年、高性能のカラー画像複写装置が普及してきており、画像入出力機器の高画質化に伴ってさらに原稿画像を忠実に複写することが可能となってきている。しかし、このような高画質で複写できるカラー画像複写装置を悪用し、紙幣や有価証券等の偽造事件等も発生している。そのため、カラー画像複写装置において偽造を防止することが社会的に重要になってきている。

そこで、カラー原稿をデジタル的に読み取って複写する際に、読み取った原稿画像中の特定パターンを識別し、紙幣や有価証券などの複写が禁止されている画像（以下、禁止画像と呼ぶ）であると判定された場合には画像の再現を阻止する技術が各種提案されている。その一つとして、禁止画像が含まれた画像データを記録紙に出力する場合、記録紙に出力される画像全体に対し、所定の加工を施してオリジナルの画像とは明らかに異なる画像として出力している。例えば、出力される画像全体をシアンや黒などの色で塗りつぶし、オリジナルの画像が分からない状態で出力している。

一方、カラー画像複写装置の高機能化に伴い、各種の画像編集が可能になってきている。例えば、入力された複数の画像データを１枚の記録紙上に集約して記録するＮ−ｕｐ機能や、画像が形成された記録紙を折り畳むことによって小冊子が得られるように複数の画像を記録紙の両面に記録するシグニチャ機能などがある。

このように複数の画像データを１枚の記録紙上に記録する機能を利用するとき、画像データ中に上述のような禁止画像を含むものが存在する場合、従来はその禁止画像を含む画像データだけでなく、記録紙に記録する画像全体に対して所定の加工を施していた。そのため、禁止画像を含まない画像データについては正常に出力されることが期待されているにもかかわらず、この禁止画像を含まない画像データが記録される部分についても同様の加工が施されてしまうという問題があった。

このような問題は、複数の画像データを１枚の記録紙上に記録する機能を利用する場合に限らない。例えば１つの画像データ中に禁止画像とその他の画像が混在している場合、禁止画像については所定の加工を施す必要があるが、他の画像部分については所定の加工を施す必要はなく、忠実に再現すべきである。しかし従来は、記録紙上に記録する画像全体について所定の加工を行ってしまうため、禁止画像以外の部分についても所定の加工が施されてしまっていた。また、記録紙全体に所定の加工が施された画像が出力されることに対して、利用者側の不満もあった。

特開平２−７３２８３号公報

本発明は、上述した事情に鑑みてなされたもので、１枚の記録紙などに記録される画像について、禁止画像が含まれている場合でも全体に対して所定の加工を施すことなく、禁止画像以外の部分の再現を可能にした画像処理装置および画像処理方法を提供することを目的とするものである。

本発明は、画像処理装置および画像処理方法において、入力された画像データから所定の禁止画像を認識し、その認識結果に従って、所定の領域ごとに、禁止画像が含まれていると認識された領域に対して、予め登録された複数の加工処理の中からいずれか１つを選択し、選択された加工処理に基づいて加工を施すことを特徴とするものである。例えば所定の領域として、入力された画像データ単位とするとき、禁止画像を含む画像データとともに複数の画像データを１つの画像に合成しても、禁止画像を含む画像データに対して選択された加工処理を施すことができる。そのため、合成された画像において、禁止画像を含む画像データの部分以外の部分は所定の加工が施されずに再現される。同様に、所定の領域として１ないし複数画素ごとの画像領域を設定すれば、例えば禁止画像が存在する領域あるいはその領域を含むある程度の大きさの領域のみについて所定の加工を施し、他の部分についてはそのまま再現することができる。

このように、本発明の画像処理装置および画像処理方法では、１つの画像データあるいは複数の画像データで構成される画像において、禁止画像が含まれている場合でも全体に対して所定の加工を施すのではなく、禁止画像を含む一部にのみ所定の加工が施される。そのため、所定の加工が施されない部分については再現することが可能である。

本発明によれば、禁止画像の領域へは所定の加工を施して禁止画像の出力を阻止することができるとともに、禁止画像を含まない画像データあるいは禁止画像でない画像領域については正常に出力させることができるという効果がある。

図１は、本発明の画像処理装置および画像処理方法の実施の一形態を含むカラー画像複写装置の一例を示す概略構成図である。図中、１は画像入力部、２は画像出力部、３は禁止画像認識部、４は画像処理部、５は画像蓄積部、６は制御部である。

画像入力部１は、カラー画像を取得する。この例では原稿載置台、光源、ＣＣＤラインセンサなどからなる画像読取部や、画像読取部から出力される画像信号を処理するためのＡ／Ｄ変換器、シェーディング補正部などを有している。例えば１次元のＣＣＤラインセンサの並び（主走査方向）と直交する方向（副走査方向）に原稿を走査することによって、原稿の画像をレッド（Ｒ）、グリーン（Ｇ）、ブルー（Ｂ）の３原色に色分解した電気信号を生成する。各色ごとの信号をＡ／Ｄ変換し、シェーディング補正処理などを行い、処理後の画像データを画像処理部４に出力する。もちろん、他の機器から回線やネットワーク、ケーブルなどを介して送られてきた画像を受け取る構成であってもよい。

また画像入力部１は、出力するＲＧＢの画像データに対して、禁止画像認識部３で用いる色空間、例えばＬ^* ａ^* ｂ^* 色空間への色変換処理を行って、禁止画像認識部３へ変換後の画像データを送る。そして、禁止画像認識部３から少なくとも禁止画像が存在するか否かを示す認識結果を取得し、その認識結果を画像蓄積部５に伝える。禁止画像認識部３から認識結果として例えば禁止画像の有無を示す情報が渡される場合には、その情報をそのまま画像蓄積部５に伝える。また、例えば禁止画像らしさを示す確率の情報が渡される場合には、所定の閾値と比較して禁止画像の有無を判断して、判断結果を画像蓄積部５に伝えるようにすればよい。もちろん、認識結果として禁止画像の有無や確からしさのほかに、例えば禁止画像の位置などの情報も渡される場合には、それらの情報についても画像蓄積部５に伝えるように構成してもよい。

画像出力部２は、入力される画像データに従って、例えば記録紙などにカラー画像を形成する。ここでは画像処理部４から渡される画像データに従ってカラー画像を形成するが、例えば外部から与えられた画像データに従って画像を形成する機能を有していてもよい。以下の説明では、イエロー（Ｙ）、マゼンタ（Ｍ）、シアン（Ｇ）、ブラック（Ｋ）の４色のトナーを用い、フルカラー画像の形成を行うものとする。このとき、Ｙ→Ｍ→Ｃ→Ｋの順番で４回の画像形成動作により画像を形成してもよいし、各色の画像形成を並行して行ってもよい。なお、各色の画像形成を並行して行う場合、後述する画像処理部についても、それに対応する必要がある。

禁止画像認識部３は、例えば紙幣や有価証券などの複写を行ってはならない禁止画像が、画像入力部１に入力された画像データ中に含まれているか否かを認識する。そして認識結果を画像入力部１に伝える。認識方法は任意である。また、認識結果は、例えば禁止画像が含まれているであろう確率を出力したり、あるいは禁止画像の有無を出力してもよい。さらに、禁止画像が含まれている場合にはその位置情報など、種々の情報を出力してもよい。

画像処理部４は、画像入力部１に入力された画像データを受け取り、画像出力部２において原稿の画像が良好に再現されるような画像データを生成する。ここでは、画像入力部１からＲＧＢ色空間の画像データを受け取り、画像出力部２に対してＹＭＣＫ色空間の画像データを出力する。その過程において、各種の画像処理を行う。例えば、ＲＧＢ色空間からＹＭＣＫ色空間への色空間変換処理を行う。もちろん、中間で他の色空間、例えばＬ^* ａ^* ｂ^* 色空間等に変換してもよい。そのほか、階調補正処理や、必要に応じて拡大縮小処理、空間フィルタリング処理なども行うことができる。さらに、画像データ中の各領域の特性を認識し、認識結果に応じて各領域ごとに処理を行うこともできる。

画像処理部４は、このような各種の画像処理を行う過程において画像蓄積部５に画像データを格納しておくことができる。そして画像出力部２において必要となった画像データを画像蓄積部５から取り出して残りの画像処理を施し、画像出力部２に対して出力することができる。

また画像処理部４は、禁止画像認識部３における認識結果を画像入力部１または画像蓄積部５から受け取り、禁止画像が含まれている画像データの部分に対して所定の加工を行う画像加工手段としても機能する。例えば禁止画像認識部３から画像データ単位で認識結果が出力されている場合、例えば後述する画像蓄積部５で他の画像データとの合成が行われても、禁止画像を含むと判定された画像データの部分のみに対して所定の加工を行う。また、例えば禁止画像認識部３から禁止画像を含む領域に関する情報も出力されている場合には、画像データ中の禁止画像を含む領域のみについて所定の加工を行うことができる。

画像蓄積部５は、画像処理部４が出力する画像データを受けてページ単位に蓄積保持する。また、画像処理部４において画像データ中の各領域の特性を認識する場合、その認識結果を例えば属性情報（タグ情報）として保持することができる。さらに、画像入力部１から送られてくる、禁止画像が含まれているか否かを示す情報についても保持することができる。この禁止画像が含まれているか否かを示す情報は、例えばタグ情報の一部として保持することによって、画像データ中の各領域ごとの情報として保持することができる。例えば禁止画像認識部３から画像データ単位で認識結果が出力される場合には、画像データ全体のタグ情報として、認識結果に応じた情報を保持すればよい。また、禁止画像認識部３から禁止画像が存在する位置情報も出力される場合には、その禁止画像が存在する領域に対応するタグ情報について、禁止画像が存在する旨の情報を保持すればよい。

さらに画像蓄積部５は、画像データの出力順序の制御や画像回転・合成処理などを行い、付加機能を提供することができる。例えば、ソーティング、両面プリントや、連続する複数の画像データを１つの画像に合成して出力するＮ−ｕｐ機能、画像出力部２から排出された記録紙などを折ることによって小冊子が構成されるように、複数の画像データの順序を編集するとともに複数の画像データを合成するシグネチャ機能などの機能を提供することができる。これらの機能を実行する際に、画像蓄積部５がタグ情報を保持している場合には、そのタグ情報についても、もとの画像データの領域と不一致が発生しないように処理を行って出力する。

制御部６は、画像入力部１、画像出力部２、禁止画像認識部３、画像処理部４、画像蓄積部５の制御を行う。例えば画像入力部１における画像入力動作と、禁止画像認識部３、画像処理部４、画像蓄積部５との同期を取り、画像データおよびタグ情報などを画像蓄積部５に蓄積させる。また、画像出力部１における画像形成動作と同期するように、画像蓄積部５、画像処理部４における動作を行わせる。もちろん、画像入力部１及び画像出力部２の動作を同期して行うことができるように、禁止画像認識部３や画像処理部４を動作させることもできる。また制御部６は、利用者などから行われる編集指示に従ってタグ情報を生成し、画像処理部４に対して出力する。

上述の本発明の画像処理装置および画像処理方法の実施の一形態を含むカラー画像複写装置の一例における動作の概要を簡単に説明する。カラー複写対象となる原稿は、画像入力部１で読み取られてＲ、Ｇ、Ｂの３原色のデジタル信号が生成される。生成されたデジタル画像信号は画像処理部４に入力されるとともに、Ｌ^* ａ^* ｂ^* 信号に変換されて禁止画像認識部３に入力される。

画像処理部４では、ＲＧＢ色空間からＹＭＣＫ色空間への色空間の変換処理や色補正処理、階調補正、拡大縮小、空間フィルタリング、スクリーン処理など、各種の画像処理を行う。特に、画像データを画像蓄積部５に一旦格納する場合には、画像入力部１に対応する階調補正処理や、色変換処理、拡大縮小処理などの画像処理を行ってから格納する。この過程において、例えば画像データ中の各領域ごとの特性を判定する処理を行うこともでき、判定結果を含むタグ情報も画像蓄積部５に画像データと対応付けて格納する。

一方、禁止画像認識部３では、画像入力部１から渡された画像データ中に含まれる禁止画像を認識する。この処理には時間を要するため、画像処理部４における各種の画像処理と並行して行われる。禁止画像認識部３から認識結果が画像入力部１に返されると、画像入力部１において禁止画像が画像データ中に存在しているか否かを判定する。そして、この例では画像蓄積部５に対して直接、禁止画像が画像データ中に含まれているか否かを示す判定結果を送る。画像蓄積部５では、画像入力部１から送られてきた判定結果を、対応する画像データのタグ情報の一部として格納する。例えば判定結果が画像データ単位で送られてくる場合には、画像データに対応する各領域ごとのタグ情報すべてに対して、判定結果を書き込む。また、例えば判定結果が所定の領域単位で送られてくる場合には、対応する領域のタグ情報に対して判定結果を書き込む。

画像蓄積部５に蓄積保持された画像データ及びタグ情報は、画像蓄積部５内で所定の画像処理が行われた後、画像出力部２の画像形成動作に同期して画像処理部４へ出力される。このとき、タグ情報と画像の対応する領域とが分離しないように、タグ情報についても同様の処理を行うことがある。例えば画像の回転を行う場合には、タグ情報についても位置を回転させる必要がある。また、Ｎ−ｕｐやシグネチャ機能を利用する場合には、複数の画像データを１つに合成する。このとき、タグ情報についても画像データの位置関係と同様になるように合成される。これによって、禁止画像を含む画像データについては、その画像データの部分あるいはその画像データ中の禁止画像が存在する領域部分にのみ、禁止画像を含む旨のタグ情報が対応付けられる。

画像処理部４では、画像出力部２に応じた各種の画像処理、例えば階調補正処理やフィルタリング処理、スクリーン処理などを行って、画像出力部２に出力する。この各画像処理においては、例えばタグ情報を用いて画像データに最適な処理を行うことができる。また、禁止画像が存在すると判定されている旨のタグ情報が付加されている場合には、その領域について所定の加工を行う。例えば階調補正処理や色補正処理などにおいて、特定色で塗りつぶしたり、あるいは白く抜くなど、オリジナルの画像データとは大きく異なるように加工する。

このようにして画像処理部４で処理された画像データは画像出力部２に渡され、画像出力部２において例えば記録紙などにフルカラーの画像が形成される。

以上のような動作により、カラー原稿の複写が実現される。上述のように禁止画像が存在する旨のタグ情報が付加されている画像データあるいは画像データ中の部分領域のみに対して所定の加工が施される。そのため、例えば禁止画像を含む画像データと含まない画像データが合成された場合でも、従来のように全体に所定の加工が行われることはなく、禁止画像を含まない画像データの部分については正常に画像が形成される。また、画像データ中の禁止画像を含む部分領域に禁止画像が存在する旨のタグ情報が付加される場合には、画像データの中でも禁止画像を含む領域に対して所定の加工が行われるのみであり、他の部分については正常に画像が形成される。

なお、上述の説明では、画像入力部１から入力された画像データを、一旦、画像蓄積部５に蓄積してから画像出力部２に出力する場合を示したが、これに限らず、画像入力部１で入力された画像データを画像蓄積部５に蓄積せずに画像出力部２に出力することも可能である。この場合、禁止画像認識部３による認識結果に従って画像入力部１から送出される禁止画像の有無を示す情報をもとに、画像蓄積部５がタグ情報を生成して画像処理部４に渡せばよい。禁止画像認識部３における認識処理は時間がかかるため、画像処理部４から画像出力部２への画像データの出力が開始されることがある。しかし画像出力部２で必要とする色の画像データは、各色において時間差がある。この時間差の間に禁止画像の有無を示すタグ情報が画像処理部４に届けばよい。通常、画像出力部２ではＹ→Ｍ→Ｃ→Ｋの順で画像形成が行われるため、ＣあるいはＫの画像データの出力までに禁止画像を含む場合には所定の加工が行えるタイミングであればよい。

以下、図１に示した各部について、さらに詳細に説明する。図２は、画像処理部及び画像蓄積部の一例を示すブロック構成図である。図中、１１は階調補正部、１２は色空間変換部、１３は絵／文字分離部、１４は画像変倍部、１５はタグ変倍部、１６は原稿検知部、１７は色空間変換部、１８は空間補正部、１９は階調補正部、２０は中間調生成部、２１はタグ信号生成部、３１は符号化部、３２は復号化部、３３はデータ蓄積部、３４はバッファメモリ、３５はバスである。なお、図中の実線は画像信号を、破線はタグ情報を示している。

階調補正部１１は、画像入力部１から入力されるＲＧＢの３原色の信号に対し、画像入力部１の階調特性を補正する。色空間変換部１２は、階調補正部１１で階調補正処理を施されたＲＧＢ信号からＬ^* ａ^* ｂ^* 信号を生成する。このＬ^* ａ^* ｂ^* 信号は内部における画像処理とともに、原稿検知部１６，絵／文字分離部１３にも入力される。

絵／文字分離部１３は、各画素が絵柄を構成する画素であるのか、あるいは文字を構成する画素であるのかを識別し、その識別結果を示す信号（以下、分離タグと呼ぶ）を出力する。この絵／文字分離部１３は、抽出手段に対応するものである。また、識別結果を示す分離タグは、属性情報の一つである画素情報に対応するものである。

画像変倍部１４は、色空間変換部１２から出力されるＬ^* ａ^* ｂ^* 信号を受けて、主走査方向に対して１次元の拡大、縮小を行う。この画像変倍部１４における主走査方向の拡大、縮小と、画像入力部１における副走査方向の走査速度制御と合わせて、原稿画像の２次元の拡大、縮小が実現される。画像変倍部１４における拡大、縮小は、例えば公知の線形補間演算などを用いることができる。なお、ここでは画像変倍部１４における変倍処理を示したが、画像の変倍処理以外の処理を行ってもよい。

タグ変倍部１５は、画像変倍部１４にて行われる画像の拡大、縮小処理と同じ変倍率で、タグ情報に対して主走査方向の拡大、縮小処理を行う。拡大、縮小方法としては、例えば公知の単純変倍手法（零次ホールド法）などを用いて実現することができる。ここで、図２に示すエリアタグは、操作者が図示しないユーザインタフェースや編集用デジタイザを使用して原稿及び複写作業に対して行った設定を示すタグ情報である。後述するように、禁止画像認識部３における認識結果に従って画像入力部１から画像蓄積部５に渡される禁止画像の有無を示す情報も、このエリアタグとして含めることができる。

図３は、エリアタグの一例の説明図である。ここでは図３に示すように、２ビットの“カラーモード”、２ビットの“原稿タイプ”、４ビットの“マルチプライヤ”で構成されている。カラーモードとしては４色（ＹＭＣＫ）を使用した画像形成、３色（ＹＭＣ）を使用した画像形成、あるいは白黒画像の形成を指定することができる。また原稿タイプとしては、文字／写真混在原稿、文字原稿、写真原稿、地図原稿などを指定することができる。マルチプライヤは、例えば階調補正部１９において各色に対して施す変換のためのテーブルを選択する番号を示している。マルチプライヤが０のときは図３の右下にグラフで示すように変換を行わないことを示す。また、マルチプライヤが所定の値のとき、禁止画像に対する所定の加工が行われるように設定することができる。図３では、マルチプライヤが‘１１１１’のとき、図３の左下に示すようにどのような入力値に対しても所定の値を出力する例を示している。これにより塗りつぶしや白抜きなどを実現することができる。

タグ変倍部１５は、絵／文字分離部１３から出力される分離タグとともに、このエリアタグに対しても、画像変倍部１４と同じ変倍率で拡大、縮小処理を行うことにより、画像データとの対応を図っている。もちろん、画像データに対して他の変換処理を施して各画素の位置が変化する場合には、同様の変換処理をタグ情報に対しても行っておくとよい。

このような各種の画像処理がＬ^* ａ^* ｂ^* 信号に対して施された後、色空間変換部１７はＬ^* ａ^* ｂ^* 信号をＹＭＣＫ信号に変換する。このとき、絵／文字分離部１３において生成された分離タグに従って色空間変換処理を行うこともできる。ＹＭＣＫ信号は、そのまま空間補正部１８に入力されるか、あるいは、画像蓄積部５に一旦蓄積される。また、タグ変倍部１５等によって画像データと同様に変換処理などが施されたタグ情報も、そのままタグ信号生成部２１に入力されるか、あるいは画像蓄積部５に一旦蓄積される。

一方、原稿検知部１６は、原稿の大きさや位置を検知したり、白黒原稿かカラー原稿かを判定するなど、コピー動作に必要とされる情報を原稿画像から抽出する。例えば、原稿読み込み走査に先立って行われる予備走査時にそれらの情報を抽出し、制御部６へ必要な情報を送出することができる。制御部６は操作者が図示しない操作部より入力するコピー条件と、原稿検知部１６により原稿画像から抽出した情報に基づいて、倍率設定や白黒／カラー判別、用紙選択、トレイ選択などの自動機能を実現する。

空間補正部１８は、タグ信号生成部２１から出力されるタグ信号に従い、各色ごとの画像データに対して空間フィルタリング処理を行う。例えば畳み込み演算などによって各種の画像効果を得ることができる。

階調補正部１９は、各色ごとの画像データに対して階調補正処理を行う。例えば、１次元のテーブルを参照する公知のＬＵＴ（ルックアップテーブル）で実現することができる。ＬＵＴは複数登録しておくことができ、タグ信号生成部２１から出力されるタグ信号に従ってＬＵＴを選択し、画像データに対して適用することができる。例えば図３に示したエリアタグのうち、マルチプライヤのフィールドの値によってＬＵＴを選択することができる。通常は、原稿タイプやカラーなどによりタグ情報が生成されるので、これらの画質に応じた階調補正処理を行うことができる。また、例えばどのような画像データが入力されても最小値や最大値を出力するようなＬＵＴを用いることによって、禁止画像に対して所定の色による塗りつぶしや白抜きなどを実現することが可能である。

中間調生成部２０は、タグ信号生成部２１から出力されるタグ信号に従い、多値のＹＭＣＫ信号から、画像出力部２のＬＤ（レーザーダイオード）をＯＮ／ＯＦＦ制御する２値信号を生成するものである。例えばＹＭＣＫ信号の値をパルス幅などに変換する機構を有していればよい。

なお、この例では画像蓄積部５から画像データを読み出した後の画像処理として、空間補正部１８による空間フィルタリング処理、階調補正部１９による階調補正処理、および中間調生成部２０による中間調処理を行う例を示したが、これ以外の各種の画像処理を行うように構成してもよい。

タグ信号生成部２１は、蓄積部５から読み出されたタグ情報、すなわちエリアタグ及び分離タグから、空間補正部１８、階調補正部１９、及び中間調生成部２０での処理に必要とされる画素単位の各種のタグ信号を生成する。このタグ信号生成部２１は、例えば、予め定められたタグ信号生成論理をテーブル参照することにより実現することができる。

画像蓄積部５は、符号化部３１，復号化部３２，データ蓄積部３３，バッファメモリ３４等を有し、これらがバスで接続されている。画像蓄積部５は、画像処理部４の前半部分の処理が施された画像データ（ＹＭＣＫ信号）、およびエリアタグ、分離タグなどのタグ情報を蓄積保持し、画像出力部２で画像を形成する際にこれらの情報が読み出される。また、図示しない操作部より指定される、例えばスタック、丁合などのソート機能や、例えば回転、Ｎ−ｕｐ、シグネチャ、両面印字などのページ編集機能も、この画像蓄積部５によって実現される。さらに、画像入力部１から送られてくる、禁止画像の有無を示す情報を受け取り、例えば画像データに対応付けて保持する。画像データが読み出された際には、この禁止画像の有無を示す情報に従ってタグ情報を生成して付加あるいは書き換えを行う。また、この禁止画像の有無を示す情報を受け取ったときに、タグ情報に対する付加あるいは書き換え処理を行ってもよい。

画像蓄積部５に入力されてくるＹＭＣＫ信号は、符号化部３１へ入力される。符号化部３１では、例えばＪＰＥＧなどに代表される所定の画像圧縮方式で画像データ単位に、また各画像データにおいてＹ、Ｍ、Ｃ、Ｋの面単位に画像信号を符号化し、バス３５を経由してデータ蓄積部３３へ出力する。同様に入力されるタグ情報についても、符号化部３１で例えばランレングス符号化などの公知の可逆圧縮方式で符号化されて、バス３５を経由してデータ蓄積部３３に保存される。

データ蓄積部３３は、符号化部３１で符号化された画像データやタグ情報を画像データ（ページ）単位に記憶する。このデータ蓄積部３３は、符号化された画像データ及びタグ情報を複数記憶することが可能な大容量の記憶装置、例えばハードディスク装置などにより実現することができる。

復号化部３２は、データ蓄積部３３に蓄積されている画像データを読み出し、画像出力部２の印字動作に同期して所定の伸長方式によりＹＭＣＫ信号を復号し、画像処理部４へ出力する。同様に復号化部３２は、データ蓄積部３３に蓄積されているタグ情報を読み出し、画像出力部２の印字動作に同期して所定の伸長方式により復号し、画像処理部４へ出力する。

バッファメモリ３４は、回転処理やＮ−ｕｐ合成、シグネチャなどのページ編集を行う際に使用される編集手段である。

以下、画像蓄積部５を用いてページ編集を行う際に、禁止画像が含まれている場合の処理について説明を行う。まずＮ−ｕｐ合成処理の基本的な処理を説明する。図４は、Ｎ−ｕｐ機能の一例の説明図である。図中のＦＳ方向及びＳＳ方向とは、主走査方向及び副走査方向をそれぞれ示している。上述のようにＮ−ｕｐ機能は、複数の画像データを１つの画像に合成する処理である。図４（Ａ）は画像データを示し、ここでは４つの画像「Ａ」、「Ｂ」、「￥」（禁止画像）、「Ｄ」を含む画像データを示している。また、図４（Ｂ）、（Ｃ）は２ｕｐ編集、図４（Ｄ）は４ｕｐ編集をそれぞれ示している。このＮ−ｕｐ処理は、バッファメモリ３４を用いて実現することができる。

図４（Ｂ）に示すような２ｕｐ編集の場合には、まず１つ目及び２つ目（「Ａ」及び「Ｂ」）の画像データが画像入力部１から入力され、画像処理部４で所定の処理が施された後に画像蓄積部５に入力される。そして、それぞれの符号化された画像データ及びタグ情報が画像蓄積部５内のデータ蓄積部３３へ蓄積される。次に１つ目の画像データ（「Ａ」）及びタグ情報が読み出され、復号化部３２で復号化した後、図４（Ｂ）に示すような配置となるようにバッファメモリ３４内の所定のアドレスに格納する。続いて２つ目の画像データ（「Ｂ」）も同様の処理を経て、１つ目の画像データ（「Ａ」）と並んで配置されるようにバッファメモリ３４内の所定のアドレスに格納される。以上の様にバッファメモリ３４内に保持された１つ目及び２つ目の画像データ（「Ａ」及び「Ｂ」）及びタグ情報は、画像出力部２での画像形成動作に同期して１つの画像及びタグ情報のセットとして読み出され、画像処理部４へ送出される。そして画像処理部４で各種の画像処理が施された後、画像出力部２で「Ａ」と「Ｂ」が並んだ１つの画像として形成される。

３つ目及び４つ目の画像データ（「￥」及び「Ｄ」）に対しても同様の処理が行われる。しかし３つ目の画像データは禁止画像である。３つ目の画像データが画像入力部１に入力されると、この画像データが禁止画像を含むことが禁止画像認識部３で認識される。この禁止画像認識部３での認識結果を画像入力部１が判定して、禁止画像が存在することを示す情報が画像蓄積部５に伝えられる。そして、符号化された３つ目の画像データ（「￥」）とともに、タグ情報及び禁止画像が存在することを示す情報が画像蓄積部５に蓄積される。このとき、禁止画像が存在することを示す情報により、タグ情報を書き換えてから、書き換え後のタグ情報を蓄積してもよい。４つ目の画像データ（「Ｄ」）は、上述の１つ目、２つ目の画像データと同様にして、対応するタグ情報とともに画像蓄積部５に蓄積される。

次に３つ目の画像データ（「￥」）及びタグ情報が読み出され、復号化部３２で復号化した後、図４（Ｃ）に示すような配置となるようにバッファメモリ３４内の所定のアドレスに格納する。このとき、禁止画像が存在することを示す情報に従って、タグ情報中の斜線で示した領域には、禁止画像に対応する所定の加工が施されるように、タグ情報が書き換えられる。例えば図３に示したようなエリアタグ中のマルチプライヤの値を書き換える。もちろん、他のタグ情報で対応してもよい。

続いて４つ目の画像データ（「Ｄ」）については、上述の２つ目の画像データの場合と同様の処理により、３つ目の画像データ（「￥」）と並んで配置されるようにバッファメモリ３４内の所定のアドレスに格納される。この場合、４つ目の画像データは禁止画像を含んでいないので、４つ目の画像データが配置された領域に対応するタグ情報には、禁止画像に対応する所定の加工が施されるようなタグ情報の書き換えは行わない。

このようにしてバッファメモリ３４内に保持された３つ目及び４つ目の画像データ（「￥」及び「Ｄ」）及びタグ情報は、画像出力部２での画像形成動作に同期して１つの画像及びタグ情報のセットとして読み出され、画像処理部４へ送出される。そして画像処理部４で各種の画像処理が施される。このとき、３つ目の画像データに対応する領域には、禁止画像に対する所定の加工を行う旨を示すタグ情報が付加されているので、所定の加工、例えば所定の色で塗りつぶしたり、あるいは白く抜く等の加工を施す。このような所定の加工を３つ目の画像に対応する領域のみに施した後、画像出力部２で画像を形成する。これによって、３つ目の画像データ（「￥」）が配置された部分は、例えば所定の色により塗りつぶされ、あるいは白く抜け、４つ目の画像データ（「Ｄ」）は正常に形成される。このようにして、禁止画像を含む部分領域にのみ所定の加工が施され、禁止画像を含んでいない画像データについては、正常に画像を形成することができる。

図４（Ｄ）に示すように４ｕｐ編集の場合にも、上述の２ｕｐ編集と同様に実現できる。まず１〜４枚目全ての原稿（「Ａ」、「Ｂ」、「￥」、「Ｄ」）が読み込まれ、それぞれの符号化された画像データ及びタグ情報、および禁止画像の有無を示す情報が画像蓄積部５のデータ蓄積部３３へ蓄積される。次に１つ目の画像データ（「Ａ」）及びタグ情報が読み出され、復号化部３２で復号化された後、図４（Ｄ）に示すような方向及び配置となるように、バッファメモリ３４内の所定のアドレスに格納される。２つ目及び４つ目の画像データ（「Ｂ」、「Ｄ」）も同様の処理を経て、１つ目の画像データ（「Ａ」）と同様に所定の位置に所定の向きで配置されるように、バッファメモリ３４内に格納される。３つ目の画像データ（「￥」）についても、画像データは図４（Ｄ）に示すような方向及び配置となるようにバッファメモリ３４内の所定のアドレスに格納される。しかしタグ情報については、禁止画像が存在することを示す情報が画像入力部１から送られてきているので、３つ目の画像データに対応する領域（図４（Ｄ）中のタグ情報の斜線領域）のタグ情報は、所定の加工を行うように書き換えられる。

以上のようにしてバッファメモリ３４内に合成された４つの画像データ（「Ａ」、「Ｂ」、「￥」、「Ｄ」）とタグ情報は、画像出力部２での画像形成動作に同期して１つの画像及びタグ情報のセットとして読み出され、画像処理部４へ送出される。画像処理部４では、タグ情報に従って１つに合成された画像データを処理し、３つ目の画像データが配置された領域には所定の加工が施され、例えば所定色での塗りつぶしを行ったり、あるいは白抜きの処理を行う。

そして、画像出力部２で画像が形成される。形成された４ｕｐ処理による画像は、３つ目の画像データ（「￥」）の配置されるべき部分のみが所定の色で塗りつぶされたり、あるいは白く抜けるなど、所定の加工が施された画像として形成される。このようにして、禁止画像を含む部分領域にのみ所定の加工が施され、禁止画像を含んでいない画像データについては、正常に画像を形成することができる。

図５は、小冊子などを作成する際に有効な編集機能の一例の説明図である。例えば図５に示すように、複数ページからなる小冊子などを作成する編集機能を実現する場合にも、禁止画像が混在する場合に禁止画像を含む部分領域のみに対して所定の加工を行うことができる。図５（Ａ）は８つの画像データ（画像データの入力は「Ａ」、「Ｂ」、「Ｃ」、「Ｄ」、「Ｅ」、「Ｆ」、「￥」（禁止画像）、「Ｊ」の順に行われる）である。図５（Ｂ）、（Ｃ）、（Ｄ）は、各綴じ方向によって行われるページ編集の出力結果を示している。また、図５（Ｂ）、（Ｃ）、（Ｄ）においてハッチングを施したページは裏面ページであることを示し、黒丸（‘●’）の点列は、製本時に例えばステープラーや糊付けなどにより綴じるための綴じ代部分を表している。なお、両面印刷は、画像出力部２において、表面の画像形成後に用紙を反転し、裏面の画像形成を行う。用紙反転の際には、図５において各表面の右上と裏面の右下の折れのあるコーナーが一致するように反転が行われるものとする。

図５（Ｂ）は、２ページの画像データを順番に並べる２ｕｐコピーモードで、且つ両面印刷が指定された時の各画像データの配置を示し、画像データの１つ目及び２つ目（「Ａ」及び「Ｂ」）で構成される１ページ目の上端が綴じ代に設定されている。この場合には、画像蓄積部５は前述の２ｕｐと同様の処理を行うことにより、所望の出力を得ることができる。

まず、１つ目から８つ目までの全ての画像データ（「Ａ」、「Ｂ」、「Ｃ」、「Ｄ」、「Ｅ」、「Ｆ」、「￥」、「Ｊ」）が画像入力部１に入力されると、それぞれ禁止画像認識部３で禁止画像の有無が認識されるとともに、画像処理部４において各種の処理が行われ、タグ情報とともに画像蓄積部５へ出力される。また、禁止画像認識部３における認識結果に従い、禁止画像の有無を示す情報が画像入力部１から画像蓄積部５へ通知されて蓄積される。

画像蓄積部５では、入力されてくる画像データ及びタグ情報を符号化部３１でそれぞれ所定の圧縮方式で符号化した後、データ蓄積部３３に記憶保持する。次に、１つ目の画像データ（「Ａ」）及びタグ情報が読み出され、復号化部３２で復号化した後、図５（Ｂ）に示すような配置となるように、バッファメモリ３４内の所定のアドレスに格納する。続いて２つ目の画像データ（「Ｂ」）も同様の処理を経て、１つ目の画像データ（「Ａ」）と並んで配置されるようにバッファメモリ３４内の所定のアドレスに格納する。以上のようにバッファメモリ３４内に保持された１つ目及び２つ目の画像データ（「Ａ」及び「Ｂ」）とタグ情報は、１つの画像データ及びタグ情報として符号化部３１で再び符号化され、データ蓄積部３３に格納される。以下同様の処理を３つ目及び４つ目の画像データ（「Ｃ」、「Ｄ」）、５つ目及び６つ目の画像データ（「Ｅ」、「Ｆ」）に対して行い、データ蓄積部３３中に画像形成用の画像データとタグ情報として保持する。

７つ目及び８つ目の画像データ（「￥」、「Ｊ」）については、７つ目の画像データ中に禁止画像が含まれていることが禁止画像認識部３で認識され、禁止画像が存在することを示す情報が画像入力部１から画像蓄積部５に通知されている。そのため、２ｕｐと同様の処理を行う際に、７つ目の画像データが配置される領域に対応するタグ情報を、その領域に所定の加工が行われるように書き換える。そして、合成された画像形成用の画像データとタグ情報をデータ蓄積部３３に格納する。

全てのページ配置処理、符号化処理及びデータ蓄積部３３への蓄積処理が完了した後、画像出力部２での画像形成動作に同期して、画像データ「Ａ」及び画像データ「Ｂ」の画像から構成される１ページ目の画像データ及びタグ情報が読み出され、復号化部３２で復号処理が行われた後、画像処理部４へ送出される。そして各種の画像処理を行った後、画像出力部２において画像が形成される。

画像データ「Ａ」及び画像データ「Ｂ」の画像が形成された後、用紙が反転され、画像データ「Ｃ」及び画像データ「Ｄ」の画像から構成される２ページ目について同様に画像が形成されて用紙が排出される。

１ページ目と同様に、画像データ「Ｅ」及び画像データ「Ｆ」の画像から構成される３ページ目が画像形成された後、用紙が反転される。そして画像データ「￥」及び画像データ「Ｊ」の画像から構成される４ページ目が読み出され、画像処理部４へ送出される。このとき、画像データ「￥」は禁止画像を含んでおり、画像データ「￥」の領域に対応するタグ情報は所定の加工を行う旨の情報が付加されている。そのため、画像処理部４は、タグ情報に従って、画像データ「￥」の部分領域に対して所定の加工を施して画像出力部２に送る。これにより、画像データ「￥」が配置された領域は例えば所定の色で塗りつぶされたり、白く抜けるなど、所定の加工が施された画像として形成される。しかし、画像データ「Ｊ」の領域については、禁止画像が含まれていないので、正常に画像が形成される。

このようにして、図５（Ｂ）に示すようなページ編集が可能となる。この場合でも、禁止画像が含まれている画像データの領域については所定の加工が施され、また禁止画像が含まれていない画像データの領域については正常に画像形成される。

図５（Ｃ）は、図５（Ｂ）と同じく２ｕｐコピーモードでの両面印刷であるが、綴じ代が画像データの１つ目及び２つ目（「Ａ」及び「Ｂ」）で構成される１ページ目の左端に設定されている。このため、小冊子となった時の天地・左右が正常となるように、裏面印刷用の２ｕｐ編集時に図５（Ｃ）に示すように（表面印刷用の２ｕｐ編集時と比較して）２つの画像データの左右関係を逆に設定し、且つ両方のページの天地が反転するように１８０度の回転処理を施せばよい。それ以外の処理は、上述の図５（Ｂ）の場合と同様である。

この例の場合も、７つ目の画像データ（「￥」）について８つ目の画像データ（「Ｊ」）との２ｕｐ処理を行う際に、７つ目の画像データ（「￥」）が存在する領域に対応するタグ情報を、禁止画像に対する所定の加工が行われるように書き換える。そして画像形成時に画像処理部４において、タグ情報に従って７つ目の画像データ（「￥」）が存在する領域に対して所定の加工を行うことになる。しかし、合成される８つ目の画像データ（「Ｊ」）については禁止画像に対する所定の加工は行われず、正常に画像が形成される。

図５（Ｄ）は、出力画像の中央を綴じる製本の場合を示している。このようなページ編集は「シグネチャ編集」と呼ばれるものであり、画像データを読み込む順番と印字する順番が全く一致しないという点で、上述の図５（Ｂ）、（Ｃ）に示したページ編集と大きく異なる。シグネチャ編集においても合成する画像データが異なるだけで、２ｕｐ処理及び回転処理を組み合わせることにより実現できる。この例では、８つ目の画像データ（「Ｊ」）と１つ目の画像データ（「Ａ」）を合成処理して１つの画像データ及びタグ情報とし、また７つ目の画像データ（「￥」）と２つ目の画像データ（「Ｂ」）はそれぞれ１８０度回転させて合成して１つの画像データ及びタグ情報とする。このとき、７つ目の画像データ（「￥」）については禁止画像が存在することを示す情報が付加されているので、７つ目の画像データ（「￥」）に対応する領域のタグ情報を、所定の加工を行うように書き換えておく。

また、６つ目の画像データ（「Ｆ」）と３つ目の画像データ（「Ｃ」）についても２ｕｐ処理により合成し、また５つ目の画像データ（「Ｅ」）と４つ目の画像データ（「Ｄ」）についてもそれぞれ１８０度回転して合成処理し、画像形成用の画像データ及びタグ情報をデータ蓄積部３３に格納する。

そして、８つ目の画像データ（「Ｊ」）と１つ目の画像データ（「Ａ」）が合成された画像データ及びタグ情報が読み出され、画像処理部４で各種の処理が施された後、画像出力部２で画像形成される。用紙反転後、７つ目の画像データ（「￥」）と２つ目の画像データ（「Ｂ」）が合成された画像データ及びタグ情報が読み出され、画像処理部４で各種の処理が施される。このとき、７つ目の画像データ（「￥」）に対応した領域のタグ情報が、所定の加工を行うように指示しているので、画像処理部は７つ目の画像データ（「￥」）に対応した領域に対して所定の加工を施し、画像出力部２に渡す。画像出力部２で画像形成された画像は、７つ目の画像データ（「￥」）に対応する部分に所定の加工が施され、禁止画像を含まない２つ目の画像データに対応する部分は正常に形成される。両面の画像形成後、用紙が排出される。

さらに、６つ目の画像データ（「Ｆ」）と３つ目の画像データ（「Ｃ」）が合成された画像データ及びタグ情報が読み出され、画像処理部４で各種の処理が施された後、画像出力部２で画像形成される。用紙反転後、５つ目の画像データ（「Ｅ」）と４つ目の画像データ（「Ｄ」）が合成された画像データ及びタグ情報が読み出され、画像処理部４で各種の処理が施された後、画像出力部２で画像形成される。

このようにして画像処理部４から排出された用紙を重ねて中央で折ることによって小冊子状の記録物が出来上がる。このとき、禁止画像を含んでいた７つ目の画像データに対応するページは所定の加工が施されており、例えば所定の色で塗りつぶされていたり、あるいは白く抜けている。しかし並べて画像形成された２ページ目は正常に画像が形成されており、小冊子において禁止画像を含むページ以外は正常な画像を形成することができる。

図６は、本発明の画像処理装置および画像処理方法の別の実施の一形態を含むカラー画像複写装置の一例を示す概略構成図である。図中の符号は図１と同様である。この例では、禁止画像認識部３は画像処理部４における画像処理の過程において呼び出され、画像データ中の禁止画像を認識する。そして、認識結果として各画素ごとに禁止画像であるか否かを示す情報を画像処理部４に出力する。画像処理部４では、画像データに付加するタグ情報の一種として、禁止画像認識部３から出力される禁止画像であるか否かを示す情報を扱い、処理を行う。

このような構成では、画像データ中に禁止画像が存在するとき、その画像データ中の１ないし複数の画素単位で、禁止画像に対する所定の加工を施すことが可能になる。

図７は、画像処理部及び画像蓄積部の一例を示すブロック構成図である。図中、図２と同様の部分には同じ符号を付して説明を省略する。２２はタグ情報書き換え部である。この例では、図６に示す構成の一実現例として、絵／文字分離部１３及び原稿検知部１６へ入力する画像データを禁止画像認識部３にも入力し、禁止画像の認識を行わせている。もちろん、禁止画像認識部３へ渡す画像データとして、禁止画像認識用の画像処理を施した画像データを渡してもよい。

この例では、禁止画像認識部３から出力される禁止画像か否かを示す情報に従い、タグ情報書き換え部２２においてエリアタグを書き換える例を示している。例えばエリアタグの構成が図３に示すようなものであるとき、禁止画像認識部３から禁止画像の画素である旨の情報が出力された場合には禁止画像に対する所定の加工が行われるように、マルチプライヤのフィールドを書き換えることができる。もちろん、禁止画像であるか否かを示す情報を別途付加するなど、禁止画像であるか否かを示す情報の扱いは任意である。

このように禁止画像認識部３から画素ごとに出力される禁止画像であるか否かの情報を、タグ情報の一部としておくことにより、例えばこの例では画像データに対して変倍処理が施された場合でも、同様にタグ情報にも同様の変倍処理を施すことによって、画像データとタグ情報の位置の対応が保持される。そのため、禁止画像の位置も、画像データとの対応が保持されることになる。

例えば禁止画像が画像データ中に存在する場合、その禁止画像を構成する画素の領域について、禁止画像であることを示す情報が禁止画像認識部３から出力され、タグ情報に含められる。その後、画像データに対する変倍処理や回転処理などの変換処理が行われる場合でも、画像データとタグ情報の位置関係を保持するように、タグ情報に対しても同様の変換処理を施しておけば、画像データとタグ情報との位置的な対応付けは崩れない。

そしてタグ情報に従って画像処理を行うことによって、画像データ中の禁止画像が存在する領域あるいはその領域を含む部分領域のみに、禁止画像に対する所定の加工が施されることになる。

図８は、１つの画像データ中で部分領域のみに所定の加工を施す場合の一例の説明図である。図８（Ａ）に示すような画像データが画像入力部１で入力されたとする。この画像データの上部に「￥」と示した矩形領域に禁止画像が含まれている。このような画像データが画像入力部１から画像処理部４に渡されると、例えば図７に示す例では色空間変換部１２による色空間変換後の画像データが禁止画像認識部３に入力され、禁止画像の認識処理が行われる。そして１ないし複数画素ごとに、禁止画像であるか否かを示す情報が画像処理部４に返される。例えば図８（Ａ）に示す画像データでは、図８（Ｂ）にハッチングを施した領域に禁止画像が存在すると認識され、この領域について禁止画像であることを示す情報が禁止画像認識部３から出力され、画像処理部４に渡される。

禁止画像であるか否かを示す情報は、画像処理部４のタグ情報書き換え部２２においてタグ情報の一部として含められ、以後、タグ情報と同様に処理される。例えば画像処理部４の階調補正部１９などにおいて、タグ情報に従って例えば図８（Ｂ）にハッチングを施した領域については、禁止画像に対する所定の加工が行われる。そして、図８（Ｃ）に示すような画像が画像出力部２において形成される。このようにして形成された画像は、禁止画像の領域以外は正常に画像が形成されており、従来のように禁止画像以外の領域まで所定の加工が施されることはない。

本発明の画像処理装置および画像処理方法の実施の一形態を含むカラー画像複写装置の一例を示す概略構成図である。 画像処理部及び画像蓄積部の一例を示すブロック構成図である。 エリアタグの一例の説明図である。 Ｎ−ｕｐ機能の一例の説明図である。 小冊子などを作成する際に有効な編集機能の一例の説明図である。 本発明の画像処理装置および画像処理方法の別の実施の一形態を含むカラー画像複写装置の一例を示す概略構成図である。 画像処理部及び画像蓄積部の一例を示すブロック構成図である。 １つの画像データ中で部分領域のみに所定の加工を施す場合の一例の説明図である。

符号の説明

１…画像入力部、２…画像出力部、３…禁止画像認識部、４…画像処理部、５…画像蓄積部、６…制御部、１１…階調補正部、１２…色空間変換部、１３…絵／文字分離部、１４…画像変倍部、１５…タグ変倍部、１６…原稿検知部、１７…色空間変換部、１８…空間補正部、１９…階調補正部、２０…中間調生成部、２１…タグ信号生成部、２２…タグ情報書き換え部、３１…符号化部、３２…復号化部、３３…データ蓄積部、３４…バッファメモリ、３５…バス。

Claims (4)

1. 画像データが入力される画像入力手段と、前記画像データから所定の禁止画像を認識する認識手段と、前記認識手段による認識結果に従って所定の領域ごとに前記禁止画像が含まれていると認識された領域に対して予め登録された複数の加工処理の中からいずれか１つを選択する選択手段と、前記選択手段により選択された加工処理に基づいて加工を施す加工手段を有することを特徴とする画像処理装置。
2. 画像データが入力される画像入力手段と、前記画像データから所定の禁止画像を認識する認識手段と、複数の画像データを１つの画像に合成する画像処理手段と、合成された画像のうち前記認識手段で前記禁止画像を含むと認識された画像データの部分に対して予め登録された複数の加工処理の中からいずれか１つを選択する選択手段と、前記選択手段により選択された加工処理に基づいて加工を施す加工手段を有することを特徴とする画像処理装置。
3. 入力された画像データから所定の禁止画像を認識手段で認識し、該認識結果に従って所定の領域ごとに前記禁止画像が含まれていると認識された領域に対して、予め登録された複数の加工処理の中からいずれか１つを選択手段で選択して、選択された加工処理に基づいて加工手段で加工を施すことを特徴とする画像処理方法。
4. 入力された画像データごとに所定の禁止画像を認識手段で認識し、複数の画像データを１つの画像に画像処理手段で合成し、合成された画像のうち前記禁止画像を含むと認識された画像データの部分に対して、予め登録された複数の加工処理の中からいずれか１つを選択手段で選択して、選択された加工処理に基づいて加工手段で加工を施すことを特徴とする画像処理方法。

Images