JP4815311B2 - 画像処理装置および画像処理方法 - Google Patents

Description

この発明は、１画像出力（１ページ）中に複数の属性の画像データが含まれる出力対象画像、例えば表示、蓄積および印字出力等を、個々の画像データの属性に拘わりなく、高い再現性で画像出力装置に適した画像処理を可能とする画像処理方法および画像処理装置に関する現像剤を用いて画像を形成する画像形成装置に関し、特に、複数色の現像剤により画像形成するカラー画像形成装置に関する。

特許文献１には、デジタル複合機において、複写のためにスキャナで取り込んだスキャナ入力画像の画像処理および画像メモリヘの展開、（ファクシミリ機能において受信した）ＦＡＸ画像の画像処理および画像メモリヘの展開、ホストコンピュータからプリント指示（出力）された画像の画像処理および画像メモリヘの展開において、それぞれの画像データに「header（ヘッダ）情報」を付加することが開示されている。

上記公報では、それぞれの（互いに異なる）画像データに「header情報」を付加することにより、画像データが並行して入力された場合であっても効率的な処理が可能で、かつ装置構成を簡単にできる、との記載がある。

上記公報に示されたコピー、ＦＡＸ、プリンタ等の種別の異なる画像データを扱うことのできる画像処理装置および画像処理方法は、画像処理回路において、種別の異なる画像データのそれぞれに、画像データの種別に応じて適切な画像処理を施し、単一の画像形式に変換した後、画像メモリの別々の画像データ領域に格納し、画像メモリに格納された内容を、プリンタユニットへ出力している。
特開平１１−２１５２７２号公報

しかしながら、上記公報に記載された画像処理装置および画像処理方法では、画像メモリに格納された画像データの元画像の種別は反映されない（画像メモリ内では単一の画像形式で格納され、元画像の種別は区分されない）。

上記公報に記載された処理構成を用いて、画像メモリの同一ページ分の領域に異なる種別の画像を割付および／または編集する場合、画質を高める（画質を優先する、すなわち高画質を実現する）ために、画像データを、多値データとして取り扱うことを考える。この場合、共通の画像フォーマットとしては、プリンタユニットヘ直接出力が可能な非圧縮の画像データが要求される。しかしながら、その場合、ページ単位の画像データの編集に必要な画像メモリの容量は、膨大になることはいうまでもない。従って、装置が大規模となり、コストが増加する。

一方、画像メモリの容量を削減するため、画像を圧縮した場合、画像メモリ内では共通のフォーマットを用いる必要があるため、コピーやプリンタという画像の特性に適した異なる方式の圧縮方式を利用することができず、どちらかの一方の圧縮方式に統一する必要がある。仮に、いずれかに適した圧縮方式を用いないならば、折衷案的な、すなわち各画像データの属性に共通な圧縮方式を用いる必要が、画像メモリの容量は削減できるが、画質が低くなる問題がある。この場合、符号化方式の変換も必要であるから、そのための処理機構を新たに加える必要があり、装置が大規模となり、コストが増加する。

この発明の目的は、異なる属性の画像データを、画像メモリの同一ページ領域で割り付けおよび／または編集可能で、高画質の画像出力装置に適した画像処理を可能する画像処理装置および画像処理方法（および画像形成装置）を提供することにある。

より詳細には、画像メモリ上で画像の割り付けや編集を行い、印字出力として出力し、あるいは表示部に表示させ、もしくは外部記憶装置に画像データを格納させることのできる画像形成装置において、コピー画像、プリンタ画像、ＦＡＸ受信データ、もしくはスキャナ読み込みデータ等の特性（画像フォーマット）の異なる画像データを、それぞれの画像データの特性を維持しながら、同一ページに混在させて、表示、蓄積（storage（ストレージ））または印字出力可能な画像形成装置および画像処理方法を提供するものである。

この発明は、上記問題点に基づきなされたもので、第１画像データを入力する第１入力手段と、前記第１入力手段が入力する第１画像データとフォーマットが異なる第２画像データを入力する第２入力手段と、前記入力された第１画像データおよび第２画像データを、それぞれ複数ブロックに分割し、各ブロックに、それぞれの属性を表す属性データを付加する付加手段と、前記属性データのそれぞれ付加された第１画像データおよび第２画像データを記憶する記憶手段と、前記記憶手段に記憶され、前記属性データのそれぞれ付加された第１画像データおよび第２画像データを読み出す読み出し手段と、前記読み出し手段によって読み出された第１画像データおよび第２画像データの各属性データに基づいて前記第１画像データおよび前記第２画像データの各属性を解析する解析手段と、前記解析された各属性に応じて、前記付加手段が分割した各ブロックに、前記読み出し手段によって読み出された第１画像データに対して第１画像データのフォーマットに対応する第１画像処理を実行し、前記読み出し手段によって読み出された第２画像データに対して第２画像データのフォーマットに対応する第２画像処理を実行する画像処理手段と、を具備する画像処理装置、を提供するものである。

以上説明した通り、この発明の実施の形態においては、画像の特性を損なうことなく、同一ページ内に混在させた自由なレイアウト編集」）機能を用いることで、フォーマットの異なる画像データを、画像メモリ上に単位画像データ（ブロック単位データ）毎に、任意の位置に割り付けることが可能となる。この結果、それぞれのフォーマットに応じた画像処理が、ブロック単位の画像データ毎に、独立に処理可能となり、プリンタ部により出力される印字出力（print out）の品位が高められる。

以下、図面を用いて、この発明の実施の形態が適用される画像形成装置の一例を説明する。

以下、図面を参照して、本発明の実施の形態について説明する。

［全体構成の説明］
図１は、本発明の実施の形態に関わる画像処理装置の回路構成を示す。

図１に示されるように、デジタル複合機すなわち画像形成装置１０１は、システム全体を制御するシステム制御部１，原稿を光源により照射しながら原稿を走査して、原稿からの反射光をカラーＣＣＤセンサにより画像を読み取る画像入力部（スキャナ部）２，画像データに応じて、ＬＤ（レーザダイオード）から出射される光を変調して画像を印字出力するプリンタユニット４、使用者からの画像形成装置１０１への動作設定の指示、設定内容および動作状態の表示が可能で、使用者との間で対話的な操作を可能とする操作部５等を含む。

スキャナ部（画像入力部）２は、詳述しないが、画像読取部γ補正、色変換、主走査変倍、画像分離、加工、エリア処理、階調補正処理等のさまざまな処理が可能な画像処理部２１を有する。

プリンタ部（印字出力部）４は、詳述しないが、印字出力γ補正、印字出力色補正、画像合成、加工、階調補正処理等のさまざまな処理が可能な、プリンタ部画像処理部４１を有する。

操作部（指示入力／表示部）５は、詳述しないが、使用者による動作（オン／オフ）指示、モード選択（選択指示）、数値入力あるいは機能選択（選択入力）等に利用されるタッチパネルセンサ、タッチパネルセンサによる指示に対応する表示や選択入力に対する応答画面等を表示可能なグラフィカルディスプレイ、複写（印字）枚数等の数字の入力（置数）や、スタート／キャンセル等の高頻度で利用される専用ボタン（入力キー）、および状態表示ＬＥＤ等を含む。

スキャナ部２，プリンタ部４、操作部５は、それぞれ対応して設けられているインタフェースすなわちスキャナ／プリンタ通信Ｉ／Ｆ２０および操作部Ｉ／Ｆ１８を介してＰＣＩバス１３に接続されている。

ＰＣＩバス１３は、ＰＣＩバスブリッジ１２を経由して、ＣＰＵ（主制御部）１１と接続されている。ＣＰＵ１１は、ＣＰＵローカルバス１４に接続され、ＲＡＭ１５およびＲＯＭ１６と相互に接続されている。ＲＡＭ１５は、ＣＰＵ１１が処理を実行するためのプログラムメモリやデータ格納領域として使用される。ＲＯＭ１６は、システム起動に必要なブートプログムやＣＰＵ１１が各種機能を実現するためのプログラム、固定的なデータの記憶領域として使用される。ＲＯＭ１６上のプログラムやデータは、ＲＯＭ１６内に圧縮データとして保持され、その場合ＲＡＭ１５に展開して実行されるものであってもよい。

ＰＣＩバス１３はまた、ホストコンピュータＩ／Ｆ１７を介して外部装置である、例えばホストコンピュータ６が接続されている。また、ＰＣＩバス１３には、ＨＤＤ（ハードディスクドライブ）Ｉ／Ｆ１９を介して、大容量のデータが保持可能なＨＤＤ（ハードディスクドライブ）８が接続されている。さらに、ＰＣＩバス１３には、ＬＡＮ（local area network）コントローラ２１を介して、ネットワーク上に有る任意のコンピュータや他のＭＦＰ（Multi-Functional Peripherals）ｘ、ｙ、ｚと接続されている。

ホストコンピュータＩ／Ｆ１７は、例えばEthernet（登録商標）やＵＳＢ（Universal Serial Bus）、ＩＥＥＥ１２８４、ＩＥＥＥ１３９４等の周知のインタフェースであり、機器外部（外部装置）であるホストコンピュータ６と通信することができる。また、デジタル複合機１０１は、ＣＰＵローカルバス１４に接続されたＦＡＸユニット３０から公衆回線３１を通じて接続可能なＷＡＮあるいは電話網７を利用したＦＡＸ通信も可能である。なお、デジタル複合機１０１は、ＬＡＮコントローラ２１に接続された任意のコンピュータや他のＭＦＰとの間で通信が可能である。

［システム制御部１の説明］
システム制御部１の機能について、詳細に説明する。

システム制御部１は、スキャナ／プリンタ通信Ｉ／Ｆ２０を介して接続されたスキャナ２およびプリンタ４のそれぞれに対して制御信号を授受することにより、スキャナ２の動作を制御してカラーもしくは白黒の画像データを読み込み、プリンタ４を制御して、カラーもしくは白黒の画像データを印字出力する。

読み取った画像データは、画像メモリ１１０１に一旦格納することで、１回の原稿画像の読み取りのみで、必要な枚数の画像の繰り返し出力（複数枚出力）や、複数ページの画像を１枚の用紙上に縮小して配置する「Ｎ in １」出力、原稿画像の９０度単位の任意の丁合を可能とする「画像回転」や、読み取り画像に、帳票枠等を構成する「フォーム合成」、もしくは、「日付やロゴマーク（logo mark）および／またはすかし（water mark）等の合成」等、が可能である。

読み取った画像データは、必要に応じ、画像処理部２０１もしくは画像メモリ制御部１１００において符号化処理により圧縮される。これにより、ＨＤＤ８に保持されるデータ量が削減される。また、圧縮により、より多くの画像データをＨＤＤ８に蓄積可能となる。ＨＤＤ８に一旦蓄積した画像データを任意の順序、かつ任意の回数出力することで、電子ソートと呼ばれる要求された任意枚数（部数）のプリントアウト（print out）すなわち印字出力が可能である。

また、デジタル複合機（ＭＦＰ）１０１は、ＩＥＥＥ１２８４やＩＥＥＥ１３９４、ＵＳＢ等のローカル接続（ホストコンピュータＩ／Ｆ１７による接続）、ＬＡＮコントローラ２１を経由したＬＡＮ接続、ＦＡＸユニット（モデム）３０に接続された公衆回線３１を経由した電話網やＷＡＮ（Wide area network）７への接続等のさまざまな接続により接続された周辺（外部）機器から印刷命令を受けて印字出力のための画像データを生成して印字出力することができる。

従って、デジタル複合機１０１は、供給された印字出力のための画像データに対応する印字出力が可能なカラープリンタ、読み取った画像を接続された機器に転送するカラースキャナ、ＦＡＸとしての文字を含む画像データの送信／受信、画像を電子メールとして送信／受信することも可能である。

また、デジタル複合機１０１は、外部から供給される複数の印刷ジョブやスキャナ２より読み込んだ画像をＨＤＤ８に一旦蓄積する等により、複数の文書を、１つの文書として再構成し、印字出力することも可能である。

次に、システム制御部１の構成について、詳細に説明する。

ＣＰＵ１１は、システム全体を制御するコントローラであり、デジタル複合機（画像形成装置）１０１に要求される複写機能、プリンタ機能、スキャナ機能、ＦＡＸ送信／受信機能、Ｅ−ｍａｉｌ送信／受信機能等のアプリケーション処理、ＵＩ（User Interface）処理やローカルやネットワークに接続された機器との通信制御、画像データを入出力するための画像データフォーマット変換や、符号化等のデータ処理を制御する。

ＣＰＵローカルバス１４は、ＣＰＵ１１にＲＯＭ１６やＲＡＭ１５、その他の周辺機器を接続するためのバスである。

ＦＡＸユニット３０は、ＰＳＴＮやＩＳＤＮ等に代表される公衆回線３１を介して接続されるＷＡＮや電話網７を通じて入出力される通信データの変調／復調装置であり、ＦＡＸの送信／受信や電話回線によるリモート接続、ＩＳＰ接続によるインターネット網への接続を可能とする。

ＣＰＵ１１のホストバス１１１には、先に説明した通り、ＰＣＩバスブリッジ１３を介してＰＣＩバス１３が接続され、ＣＰＵ１１およびローカルバス１４上のデバイスとＰＣＩバス１３上のデバイスとの間のデータの転送が可能となる。なお、ＣＰＵの種別によりホストバスとローカルバスが同一の場合やＰＣＩバスブリッジがＣＰＵ内部に組み込まれている場合もある。

この実施の形態では、ＰＣＩバス１３を採用することにより、ＣＰＵの種別によらずに、高速のデータ転送を実現し、ＰＣＩバス規格に準拠した既存のデバイスを利用することができる。

画像メモリ制御部１１００は、非圧縮の画像や圧縮された画像の符号データが蓄積可能な大容量の画像メモリ１１０１を制御するもので、スキャナからの画像メモリヘの画像データの読み込みや、画像メモリからプリンタヘの画像データの印字出力を制御する。

なお、上述の画像メモリ制御部１１００は、様々なフォーマットの画像データのハンドリングに対応しており、２値画像ではモノクロ画像やカラー画像、多値画像ではコピー機能とネットワークプリンタ機能のモノクロとカラーのそれぞれの画像データに対応して、利用する機能に応じて最適な圧縮方式を選択することができる。

画像メモリ制御部１１００に接続されたヘッダ付加回路１１０２は、コピーやプリント等の様々なフォーマットの画像データを画像メモリ１１０１に展開する際に、画像を単位矩形にブロック化した画像データに対して、画像の属性を示すヘッダ情報を付加するために用いられる。

ヘッダ付加回路１１０２は、さらにヘッダを含むブロック画像データを、固定サイズのデータとして画像メモリ１１０１に展開することで、２次元的なページレイアウトを保った状態で、ブロック単位の割付や９０度単位の回転処理を容易に達成できる。

印字出力のためにページ編集された画像データは、画像メモリから、ブロック画像としてブロック毎に順次読み出される際に、ヘッダ解析回路４２０により、その（読み出されたブロック画像）の種別が特定される。

プリンタ画像処理部４００では、ヘッダ解析回路４２０の判定結果に基づいて圧縮画像の伸長処理や画像処理を実行し、プリンタ部４において要求される必要な共通の画像形式に変換し、プリンタビデオＩ／Ｆ４３０を経由して、プリンタ部４へ出力する。なお、プリンタ画像処理回路４００は、画像メモリ１１０１上の画像データを符号化し、あるいは復号可能である。この符号化／復号化には、可逆可変長符号化（規則）が利用される。

ＣＰＵ１１は、ＰＣＩバス１３を経由して、画像メモリ制御部１１００の制御および画像メモリ１１０１へのアクセスが可能である。同様に、ＰＣＩバス１３に接続された他のデバイスも、画像メモリ１１０１にアクセス可能である。これにより、ＨＤＤ８や、ホストコンピュータＩ／Ｆ１７およびＬＡＮコントローラ２１等の外部入出力Ｉ／Ｆとの間で、高速のデータ転送が可能である。

スキャナ２により読み込まれた画像データは、スキャナビデオＩ／Ｆ２２０を経由してスキャナ画像圧縮回路２００に入力され、スキャナ画像圧縮回路２００で圧縮された後、画像メモリ制御部１１００を通じて画像メモリ１１０１に格納される。

スキャナ／プリンタ通信Ｉ／Ｆ２０は、シリアル通信２１（スキャナ向け）、シリアル通信４１（プリンタ向け）により、スキャナ２およびプリンタ４のそれぞれとの間で、コマンドやステータス等の制御情報をやり取りする。これにより、装置の起動や動作状態、読み取った原稿サイズや種別の取得、用紙サイズの指定や、用紙あるいは消耗品（トナー等）の残量等の情報を、＜ＣＰＵ１１が＞取得することができる。

ＨＤＤＩ／Ｆ１９は、ＩＤＥやＳＣＳＩをＩ／Ｆとして、ＨＤＤ８を制御し、ＰＣＩバス１３を経由してＣＰＵローカルバス１４上のＲＡＭ１５やＰＣＩバス１３上の画像メモリ１１０１との間で、高速でデータの転送が可能である。

ホストコンピュータＩ／Ｆ１７は、例えばＰＣ（パーソナルコンピュータ）等を、ＵＳＢやＩＥＥＥ１２８４、ＩＥＥＥ１３９４等のローカル接続Ｉ／Ｆや、Ethernet（イーサネット（登録商標）またはエサーネットと発音される）等のネットワークＩ／Ｆにより、相互に接続するものである。

操作部Ｉ／Ｆ（インタフェース）１８は、操作部５を、ＰＣＩバス１３を経由してＣＰＵ１１から制御可能にする。すなわち、操作部５により使用者は、デジタル複合機１０１に対して、所定の動作の指示や数値入力（設定）が可能である。また、ＣＰＵ１１あるいは詳述しない表示制御部により、設定内容あるいは動作状態を表示可能とする。

［本発明の詳細説明］
次に、本発明の特徴であり、コピー画像やプリント画像等、フォーマットの異なる画像データを、画像の特性を損なうことなく同一ページ内に混在させた自由なレイアウト編集を可能とする画像処理方法および装置について詳細に説明する。なお、「フォーマットの異なる画像データを、画像の特性を損なうことなく同一ページ内に混在させた自由なレイアウト編集」を以下、ページ編集と呼称する。以下に説明する本発明のページ編集を用いることで、ページ編集に必要な画像メモリの容量を増大させることのない画像処理方法およびそれを実現可能な画像処理装置が得られる。

図２に、本発明の特徴であるページ編集においてプリンタヘ印字出力するまでの画像データの処理過程の一例を示す。

ページ編集の対象となる画像は、図２の例では、紙原稿（印刷物あるいは本）をスキャナから読み取ったコピー画像、ホストコンピュータのアプリケーションより印字指示のあったプリント画像、印字出力（印刷画像）に、日付や作成者名、もしくは印刷物に個別のｌＤ等の付加情報を、コピー画像またはプリント画像と同一のページに出力するためのバーコード画像とする。なお、プリント画像またはコピー画像のいずれかを、例えばＦＡＸユニット３０（図１参照）により受信したＦＡＸ画像とすることも可能であることはいうまでもない。

図２において、コピー画像５０１は、Ｃ（Cyan、シアン）、Ｍ（Magenta、マゼンタ、Ｙ（Yellow、イエロー）に分解されたフルカラー情報であり、例えば８×８画素を単位とするブロックに分解され、ブロック単位で（コピー画像５０１に有効な）適切な圧縮処理が施されている。

図２において、プリント画像６０１は、Ｃ、Ｍ，Ｙに、Ｋ（Black、ブラック（黒））を加えた印字色によって表現されたフルカラー情報であり、８×８画素を単位とするブロックに分解され、ブロック単位で（プリント画像６０１に有効な）適切な圧縮処理が施されている。

図２において、バーコード画像７０１は、２値のモノクロ画像で、８×８画素を単位とするブロックに分解されているのみで、多くの場合、圧縮処理は、実施されない（非圧縮データである）。

なお、ブロックの分割数は、コピー画像５０１，プリント画像６０１，バーコート画像７０１のそれぞれについて同数、かつ１つのブロック（単位ブロック）の大きさが同一であるならば、任意に規定できる。但し、分割数を多くすることで、ページ編集の自由度が向上されるが、印字出力を得るまでの画像処理に要求される時間が増大することがある。一方、分割数が少ない場合、個々のブロックに割り当てることのできる画像（コピー画像５０１，プリント画像６０１，バーコード画像７０１）の数が制限されるため、ページ編集の自由度が抑圧される。

上述した画像（コピー画像５０１，プリント画像６０１，バーコード画像７０１）は、多くの場合ＨＤＤ８（図１参照）に一旦保存されたうえで、ページ編集に利用される。このため、圧縮効率の高い可変長符号化により符号化されている。

それぞれのブロック画像（８×８、図２においてはＸ１〜Ｘｎ、Ｙ１〜Ｙｍ，ｎ＝ｍ＝８、「（ブロック名として）Ｘ１Ｙ１」〜「（ブロック名として）ＸｎＹｍ」）は、ヘッダ付加回路１１０２により、それぞれの画像種別が属性情報として付加され、（画像メモリ制御部１１００の制御により）画像メモリ１１０１上に、ブロック単位で、任意の位置、任意の順序で配置される。

個々のブロック画像は、データ形式が可変長データであったとしても、ヘッダ付加回路１１０２において無効データが付加されることによる固定長データ化、もしくは画像メモリ制御部１１００の制御に従って画像メモリ１１０１への保存開始位置がスキップされることにより、画像メモリ１１０１上においては、固定サイズで配置されている。もちろん、ＣＰＵ１１（図１参照）の制御により画像メモリ１１０１に、直接、属性情報の付加されたブロック画像データを書き込むことも可能である。

ページ編集が終了すると、画像メモリ１１０１上に所定の順に配列された個々のブロック画像は、画像メモリ制御部１１００によってブロック単位で順次読み出される。

読み出されたブロック画像データに付加されている属性データは、ヘッダ解析回路４２０によって、解析される。解析されたヘッダ情報すなわち属性データに従い、プリンタ画像処理回路４００において、入力されるブロック画像データの画像データに応じた伸長処理や画像処理が実行される。また、この際、プリンタ部４がプリント可能な共通の画像データに変換される。

なお、例えば図９に示すように、画像メモリ１１０１から個々のブロック画像データを読み出す順序を変更することで、画像メモリ１１０１に格納されている内容を、９０度単位に回転して出力することも可能である。例えば、非回転時には、Ｘ１Ｙ１，Ｘ２Ｙ１，・・・，ＸｎＹ１，Ｘ１Ｙ２，Ｘ２Ｙ２，・・・，ＸｎＹ２，・・・，Ｘ１Ｙｍ−１，Ｘ２Ｙｍ−１，・・・，ＸｎＹｍ−１，Ｘ１Ｙｍ，Ｘ２Ｙｍ，・・・，ＸｎＹｍ，の順に画像メモリ１１０１に保持されているブロック画像データが読み出される。例えば、右９０°回転時には、Ｘ１Ｙｍ，Ｘ１Ｙｍ−１，・・・，Ｘ１Ｙ１，Ｘ２Ｙｍ，Ｘ２Ｙｍ−１，・・・，Ｘ２Ｙ１，・・・，ＸｎＹｍ，ＸｎＹｍ−１，・・・，ＸｎＹ１の順に画像メモリ１１０１に保持されているブロック画像データが読み出される。同様に、１８０°回転時には、ＸｎＹｍ，Ｘｎ−１Ｙｍ，・・・，Ｘ１Ｙｍ，ＸｎＹｍ−１，・・・，Ｘ１Ｙｍ−１，・・・，ＸｎＹ２，・・・，Ｘ１Ｙ２，ＸｎＹ１，・・・，Ｘ１Ｙ１の順に、左９０°回転時には、ＸｎＹ１，ＸｎＹ２，・・・，ＸｎＹｍ−１，ＸｎＹｍ，Ｘｎ−１Ｙ１，・・・，Ｘｎ−１Ｙｍ，・・・，Ｘ１Ｙ１，Ｘ１Ｙ２，・・・，Ｘ１Ｙｍ−１，Ｘ１Ｙｍの順に、画像メモリ１１０１に保持されているブロック画像データが読み出される。

このように、所定個数に分割したブロック画像データのデータサイズを固定長とすることで、画像メモリ制御部１１００によりブロック画像データを読み出す際の読み出し順を規定することで、印字出力画像を（９０°単位の）任意の方向に回転させることができる。もちろん、印字出力画像が回転処理不要であれば、個々のブロック画像のデータサイズを可変長として１ページあたりの画像メモリサイズを動的に確保して、画像メモリ１１０１の利用効率を向上することも可能である。

図３は、画像メモリ上のブロック画像データの構造を示している。

画像メモリ１１０１（図１または２参照）に保持されているブロック画像データは、ヘッダ付加回路１１０２（図１または２参照）により付加されるブロックヘッダ３０１と元々の画像データであるデータ本体３００からなる。

ブロックヘッダ３０１は、ブロックサイズフィールド３１１と画像フォーマットフィールド３２１とを含む。ブロックサイズフィールド３１１は、ブロック画像データが可変長か否か、もしくは固定長である場合に、そのサイズを示すインデックス値が記述される。画像フォーマットフィールド３２１には、データ本体の画像のフォーマットが記述される。

図３に示す本発明の例では、回転印刷処理を可能とするため、ブロックサイズは６４バイト（byte）の固定長とし、画像フォーマットとして、コピー画像（カラー）、多値プリント画像（カラー）、バーコードの画像として、２値プリント画像（モノクロ）を利用する。

いずれのブロック画像データも、８×８画素の画像情報が６４（byte）に満たない場合は、特別な意味を持たないデータを追加または貼り付け（padding）して６４（byte）の固定長データとし、画像メモリ１１０１上に配置される。

図４は、図２を用いて先に説明したブロック単位でフォーマットが異なる画像データが混在しているページメモリ（画像メモリ）上のストリームを処理する工程の一例を模式的に説明する概略図である。

ページメモリ（画像メモリ）１１０１において、図２に示したように、ブロック単位でフォーマットが異なる画像データが混在して配列されている場合、それぞれの画像データ（ブロック画像データ）であるブロックデータストリームｘｙｚは、ブロックデータ中の画像属性情報（図３参照）に従って、その画像のフォーマットに対応する画像変換器（画像処理部）を特定するブロック属性検出部１１１１において、そのブロックデータの属性に対応する画像処理部が特定される。すなわち、ブロック属性検出部１１１１において、図３に示したブロックヘッダ３０１が識別され、そのブロックヘッダに記述された属性の画像データを処理可能な、コピー画像変換部１１２１，プリンタ画像変換部１１３１，ＦＡＸ画像変換部１１４１のいずれかに仕分けられる。

例えば、コピー画像変換部１１２１は、コピー画像向けの圧縮形式で圧縮された画像データを伸長し、（プリンタ部４が）印字出力としてプリントアウトを出力可能なフォーマット（ブロック画像）に変換する。なお、コピー画像変換部１１２１は、図１に示したＭＦＰ１０１においては、ＣＰＵ１１と画像メモリ制御部１１００の少なくとも一方が兼用できる。もちろん、（ＣＰＵ１１または画像メモリ制御部１１００の）いずれかのファームウエアであってもよい。また、制御プログラム（アプリケーション）とワーク（メモリ）領域は、ＲＡＭ１５、もしくはＨＤＤ８内に確保された領域が利用可能である。アプリケーションそのものは、例えばＨＤＤ８のアプリケーション記憶領域に格納され、任意のタイミングで書き換え（バージョンアップ）可能とすることもできる。

例えば、プリンタ画像変換部１１３１は、プリンタ画像向けの圧縮方式で圧縮された画像データを伸長し、（プリンタ部４が）印字出力としてプリントアウト出力可能なフォーマット（ブロック画像）に変換する。なお、プリンタ画像変換部１１３１は、図１に示したＭＦＰ１０１においては、ＣＰＵ１１と画像メモリ制御部１１００の少なくとも一方が兼用できる。もちろん、（ＣＰＵ１１または画像メモリ制御部１１００の）いずれかのファームウエアであってもよい。また、制御プログラム（アプリケーション）とワーク（メモリ）領域は、ＲＡＭ１５、もしくはＨＤＤ８内に確保された領域が利用可能である。アプリケーションそのものは、例えばＨＤＤ８のアプリケーション記憶領域に格納され、任意のタイミングで書き換え（バージョンアップ）可能とすることもできる。

例えば、ＦＡＸ画像変換部１１４１は、ＦＡＸ装置向けの非圧縮の画像データを、（プリンタ部４が）印字出力としてプリントアウトを出力可能なフォーマット（ブロック画像）に変換する。なお、ＦＡＸ画像変換部１１４１は、図１に示したＭＦＰ１０１においては、ＣＰＵ１１にローカルバス１４を介して接続されたＦＡＸユニット３０、ＦＡＸ画像スムージング部３２，プリンタ画像メモリ３３、プリンタ画像圧縮回路３４が対応される。

ブロック属性検出部１１１１において識別されたブロックヘッダ３０１の情報に基づいて、対応する属性の画像データを処理可能なコピー画像変換部１１２１またはプリンタ画像変換部１１３１により伸長されたブロック画像データおよびＦＡＸ画像変換部１１４１から出力されたブロック画像データは、プリンタ部４による印字出力のためのページメモリ（画像メモリ１１０１の一部が兼用可能）上でプリンタ部４によりプリントアウト可能に合成され、その後ラスタデータに展開され、印字開始が指示されるまで保持される（ブロック画像合成１１５１）。なお、合成された画像データは、プリンタ部４による印字出力に代えて、ＨＤＤ８へ格納されてもよく、あるいは詳述しないが、外部装置として用意される図示しない表示装置等に表示されてもよい。

図５は、図２および４により説明したブロック画像合成の概念を説明する概略図である。

図５に示されるように、出力（print out）１ページ分の画像データを、例えば固定長で６４（byte）のデータ長で、８×８画素を単位として複数（ブロック）に分割された画像データ（図２において、画像メモリ１１０１上の「Ｘ１Ｙ１，・・・，ＸｎＹｍ」に対応）は、それぞれブロックデータストリームとして、図４に示したブロック属性検出部１１１１に供給される。このデータの配列により、図４を用いて説明したように、ブロックヘッダに記述された属性の画像データを処理可能な、コピー画像変換部１１２１，プリンタ画像変換部１１３１，ＦＡＸ画像変換部１１４１のいずれかによる画像処理（選択的な伸長）が可能となる。なお、ブロックデータストリームの個々のストリームは、それぞれ図３に示したように、ブロックヘッダ３０１と画像データ３００を含むことはいうまでもない。

より詳細には、固定長データは、図３に一例を示した通り、非圧縮（圧縮の有無）、符号化種別、ブロック内の画素の向き（読み取り時の回転方向等）に代表されるさまざまな属性情報（ブロックヘッダ３０１）と、画像データ本体（データ領域３００）である。なお、画像データ本体は、その画像の特性に依存して、図６ないし８に示すように分類可能である。

ページメモリ（画像メモリ）内でのブロック画像の合成は、図２，４および９により説明したように、ブロック単位で、（例えば回転が必要な場合には、図９に示すように読み出し順が変更されて）、所定の順で読み出される。それぞれのブロック内の画像データ（ブロック画像データ）は、そのブロック毎に指定された属性に従って変換（画像処理）される。

プリンタ部４による出力（print out）１ページ分の合成された画像データは、プリンタ部４による印字出力（同一ページ内のフォーマット共通化）のために、必要に応じて、ブロック毎に、伸長および／またはデータ形式が変換される。例えば、ＣＭＹデータからＣＭＹＫデータに変換される。あるいは、１ビット（bit）データから２４ビット（bit（s））データに変換される。

この（ブロック毎の）一連の変換により、ブロック単位で、画像データが連結（合成）される。なお、ブロックの分割は、一回の印字出力により印字（print out）される１ページ分の画像を面積的に分割することであるから、ブロック分割時に規定した固定長データのサイズを変更する必要がない範囲で、より高い解像度の画像データ（例えば、モノクロ２値で１２００×１２００ｄｐｉ）を混在させることもできる。また、個々のブロックは正方形である必要はないが、例えば画像を回転させて出力する場合を考慮すると、（ブロックが正方形であることは、）データ構成を簡略化できる。同様の理由から、個々のブロックのデータサイズは等しいことが好ましい。

図６にコピー画像、図７にプリント画像、図８にバーコード画像のブロック画像データの記述例を示す（図６ないし８は、属性（フォーマット）の異なる画像データを、図３に示した「ブロックヘッダ」を付加した状態で示す）。

図６に示すコピー画像に対しては、ブロックヘッダ３０１のブロックサイズフィールド３１１に、「ブロックサイズが６３（byte）の固定長」であることが、画像フォーマットフィールド３２１に、「コピー画像（カラー）」であることが、それぞれ記述されている。なお、画像データ３００としては、例えば「８×８画素」、「ＣＭＹ、各８（bits）／画素」、「可変長圧縮」、等で規定された画像データ（スキャナ２により読み込んだ画像データ（図２のコピー画像５０１））である。

図７に示すプリント画像については、ブロックヘッダ３０１のブロックサイズフィールド３１１に、「ブロックサイズが６３（byte）の固定長」であることが、画像フォーマットフィールド３２１に、「プリント画像（カラー）」であることが、それぞれ記述されている。なお、画像データ３００としては、例えば「８×８画素」、「ＣＭＹＫ、各８（bits）／画素」、「可変長圧縮」、等で規定された画像データ（ＨＤＤ８または外部装置から供給された画像データ（図２のプリント画像６０１）である。

図８に示すバーコード画像については、ブロックヘッダ３０１のブロックサイズフィールド３１１に、「ブロックサイズが６３（byte）の固定長」であることが、画像フォーマットフィールド３２１に、「バーコード画像（モノクロ）」であることが、それぞれ記述されている。なお、画像データ３００としては、例えば「８×８画素」、「１（bit）／画素」、「Ｋ、８（byte）非圧縮」、等で規定された画像データ（ＨＤＤ８またはＲＡＭ１５から供給された画像データ（バーコード画像７０１）である。

図１０は、図２を用いて先に説明したプリンタ画像処理回路の構成の一例を示す。

プリンタ画像処理回路４００は、プリンタ部４のプリンタ部画像処理部４１を介して印字出力（print out）可能（最終的に、ＣＭＹＫの４色の多値データ）に、供給された画像データを復号する複数の画像処理部４０１ないし４０６を有する。

図３により既に説明したように、「ブロックヘッダ３０１」が付加された画像メモリ１１０１からの画像データは、それぞれの画像フォーマットに応じた画像処理部（複合化部）４０１〜４０６に入力される。

例えば、コピー画像で多値のカラー画像データは、カラーコピー画像復号化部４０１により伸長（復号化）され、ＣＹＭの多値データとして出力される。このカラーコピー画像複合化部４０１において復号化（伸長）された画像データは、ＣＭＹＫ色分解部４０７で、プリンタ部４による印字出力に利用可能なＣＭＹＫの４つの多値データに分解される。

例えば、コピー画像でモノクロの画像データ（多値）は、モノクロコピー画像復号化部４０２により伸長（復号化）され、Ｋ（Black）の多値データとして出力される。

同様に、プリント画像で多値のカラー画像データは、カラー多値プリント画像復号化部４０３により伸長（復号化）され、ＣＹＭＫの多値データとして出力される（もともとの画像データがＣＭＹＫであるから色分解部４０７に相当する装置は不要である）。

また、プリント画像で多値のカラー画像データは、モノクロ多値プリント画像復号化部４０４により伸長（復号化）され、Ｋ（Black）の多値データとして出力される。

一方、２値のカラープリント画像データ（例えば、ロゴマークおよび／または「すかし（water mark）」）は、カラー２値プリント画像復号化部４０５により、ＣＹＭＫにより規定される２値データとして出力される（もともとの画像データが非圧縮であるから伸長は必要ない）。

また、２値のモノクロプリント画像データ（例えば、バーコード画像等）は、モノクロ２値プリント画像復号化部４０６により、Ｋ（Black）の２値データとして出力される（もともとの画像データが非圧縮であるから伸長は必要ない）。

なお、カラー２値プリント画像復号化部４０５、またはモノクロ２値プリント画像復号化部４０６の出力は、ヘッダ解析回路４２０からのブロックヘッダ情報３０１（図３参照）に基づくセレクタ４０８の選択（動作）によって、該当する画像フォーマットが選択され、多値化スムージング回路４０９に入力される。

セレクタ４０８から出力された（２値の）画像データは、多値化スムージング回路４０９により、画像の特性に対応した連続的な多値画像に「スムージング処理」される。従って、多値化スムージング回路４０９により、２値の画像データの階調性が滑らかに変換される。

それぞれのフォーマット別に処理された画像データは、ヘッダ解析回路４２０からのブロックヘッダ情報３０１に基づくセレクタ４１０の選択により、最終的にプリンタ部４に転送されるべきＣＭＹＫ多値画像データが選択（特定）される。なお、セレクタ４１０においては、ブロック単位に生成される画像データをプリンタ部４が印字可能なラスタ順次の画像データヘの組み立て（すなわちラスタデータへの展開）処理も実行される。以下、セレクタ４１０から出力された画像データは、プリンタビデオＩ／Ｆ４３０（図２参照）からプリンタ部４の画像処理部４１へ入力され、プリンタ部４が印字出力可能に、印字出力γ補正、印字出力色補正、階調補正処理、画像合成、加工等が施される。

次に、図１，２および４に示した異なるフォーマットの混在する画像編集を利用したデジタル複合機の機能例について説明する。

図１１は、ホストコンピュータ（図１参照）から供給されるプリントデータと、紙原稿としてスキャナ（図１参照）により読み込まれた画像を、デジタル複合機（ＭＦＰ）内で連結（ページ編集）して所望のレイアウト、かつ付加情報を付加したうえで、任意部数の印字出力を得る動作の一例を示している。例えば、図１１に示す例では、ステイプル機能を有するＭＦＰにより、ステイプルされたｎ部の連結文書（印字出力）９０１が、ホストコンピュータ６からのプリントデータの入力とスキャナ部２により読み取ったコピー画像（データ）により得られることを、模式的に示している。

図１２は、ページ編集（連結印字）において、見開き（double-page spread）で、プリント画像とコピー画像とを割り付け、さらにそれぞれの画像データを１枚の用紙の左右に、中綴じ（真ん中の折り目を針金や糸で綴じる）印刷可能に出力する例を示している。例えば、図１２に示す例では、３枚の用紙に、中央で折り曲げることを前提として、反面ずつに、１ページ分のプリント画像６０１および／またはコピー画像５０１を配置し、さらに背面側についても同様に、プリント画像および／またはコピー画像を配置することができる。なお、図１２において“（ｎｍ）”とした数字は、背面側のページであることを示している。

図１３は、図１２に示した中綴じ向けの画像データの割り付けに加え、ページ情報以外の付加情報を付加する例を示している。

図１３の例では、多値プリント画像（６０１，図２参照）、コピー画像（５０１，図２参照）を半面ずつ割り付け、さらにモノクロの２値画像データ（７０１，図２参照）として、バーコード画像８０１，８０２，ページ番号画像８０３、８０４、カラーの２値画像データとして、例えば赤文字で「社外秘（secret mark）」等のマーク８０５、８０６が付加されている状態を示している。

付加情報は、２値の画像データであるため画像の生成に必要な多値のプリンタ画像の生成に比較して、処理性能（メモリ占有率および／または処理速度）等を、低く抑えることができる。

図１２および１３に示すように、一旦プリントデータやスキャナ入力データを、ＭＦＰ１０１のＨＤＤ８に取り込むことで、異なる画像フォーマットの複数のブロック画像データを含む複雑な印字出力のための、割り付けが可能である。

以上説明した通り、この発明の画像処理装置／画像処理方法（および画像形成装置）においては、
デジタル複合機で取り扱われるコピー、プリンタ、ＦＡＸ、バーコードやロゴマーク等の特性の異なる画像データを複数のブロックに分割し、ブロック単位に画像の種別を含む属性情報を付加することを特徴とする。

ブロック化された画像データは、それぞれの画像データに好適な圧縮方式や、画像フォーマット等、異なる形式で取り扱うことができるため、ページ編集後の画像データに基づいて印字出力を再構築（出力用の組み立て／展開）する際には、属性情報に従って、ブロック毎に最適な画像処理が可能である。

これにより、元々の画像の特性を損なうことなく、同一ページ内に異なる画像フォーとマットの画像データを混在させた自由なレイアウト編集が可能できる。

また、ページ編集に必要な画像メモリの容量を増大させることのない画像処理装置および画像処理方法を提供することができる。

すなわち、本発明のページ編集（「フォーマットの異なる画像データを、画像の特性を損なうことなく、同一ページ内に混在させた自由なレイアウト編集」）機能を用いることで、フォーマットの異なる画像データを、画像メモリ上に単位画像データ（ブロック単位データ）毎に、任意の位置に割り付けることが可能となる。この結果、それぞれのフォーマットに応じた画像処理が、ブロック単位の画像データ毎に、独立に処理可能となり、プリンタ部により出力される印字出力（print outの品位が高められる（画質の高い印字出力が得られる）。

本実施例は、出力装置として印字出力（print out）を代表例として説明したが、本発明は、印字出力にとどまることなく、表示、蓄積、ＦＡＸ送信および受信、メールとしての送信および受信等のさまざまな画像出力先に対して、フォーマットの異なるさまざまな画像を、それぞれの特性を損なうことなく、混在した状態で取り扱うことができる。また、さまざまな画像編集を可能とし、画像出力先に適した画像フォーマットへ変換する画像処理装置への適用が可能であることはいうまでもない。

本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

この発明が適用可能なデジタル複合機（画像形成装置）の一例を説明する概略ブロック図。 図１に示したデジタル複合機に適用される、異なる種別のフォーマットの画像データをページ編集し、画像出力（print out）する流れの一例を説明する概略図。 画像メモリ上のブロック画像データの構造の一例を説明する概略図。 図２に示した異なる種別のフォーマットの画像データをページ編集し、表示、蓄積（storage）または印字出力する際の画像出力装置に適した画像処理を行う流れの概念を説明する概略図。 図２および４に示した画像メモリ上のブロック画像データを再配列する概念を説明する概略図。 カラーコピー画像のブロック画像データの一例を説明する概略図。 カラー多値プリント画像のブロック画像データの一例を説明する概略図。 モノクロ２値プリント画像のブロック画像データの一例を説明する概略図。 画像メモリからブロック画像を呼び出す順序を変更させることで画像を回転させて出力画像を形成（印字）する印刷（print out）の流れの一例を説明する概略図。 ブロック画像データの属性情報に基づいて画像処理を選択する（行う）プリンタ画像処理（部）の構成の一例を説明する概略ブロック図。 デジタル複合機の文書連結機能により出力される画像出力の概念を説明する概略図。 デジタル複合機の中折り綴じ印刷機能により出力される画像出力の概念を説明する概略図。 中折り綴じ印刷機能により出力される画像出力に対して異なる画像フォーマットのページ割付を適用した画像出力の一例を示す概略図。

符号の説明

１０１…画像形成装置（デジタル複合機（ＭＦＰ））、１…システム制御部、２…画像入力部（スキャナ部）、４…プリンタユニット、５…操作部（指示入力／表示部）、６…ホストコンピュータ、２００…スキャナ画像圧縮回路、２０１…画像処理部、２２０…スキャナビデオＩ／Ｆ、４００…プリンタ画像処理回路、４２０…ヘッダ解析回路、４３０…プリンタビデオＩ／Ｆ、１１００…画像メモリ制御部、１１０１…画像メモリ、１１０２…ヘッダ付加回路。

Claims (8)

1. 第１画像データを入力する第１入力手段と、
   前記第１入力手段が入力する第１画像データとフォーマットが異なる第２画像データを入力する第２入力手段と、
   前記入力された第１画像データおよび第２画像データを、それぞれ複数ブロックに分割し、各ブロックに、それぞれの属性を表す属性データを付加する付加手段と、
   前記属性データのそれぞれ付加された第１画像データおよび第２画像データを記憶する記憶手段と、
   前記記憶手段に記憶され、前記属性データのそれぞれ付加された第１画像データおよび第２画像データを読み出す読み出し手段と、
   前記読み出し手段によって読み出された第１画像データおよび第２画像データの各属性データに基づいて前記第１画像データおよび前記第２画像データの各属性を解析する解析手段と、
   前記解析された各属性に応じて、前記付加手段が分割した各ブロックに、前記読み出し手段によって読み出された第１画像データに対して第１画像データのフォーマットに対応する第１画像処理を実行し、前記読み出し手段によって読み出された第２画像データに対して第２画像データのフォーマットに対応する第２画像処理を実行する画像処理手段と、
   を具備する画像処理装置。
2. 前記記憶手段に記憶され、前記ブロック単位に属性データのそれぞれ付加された第１画像データおよび第２画像データは、等しいデータ量である請求項１記載の画像処理装置。
3. 前記ブロックは、等しい画像面積に分割される請求項２記載の画像処理装置。
4. 前記画像処理手段は、
   さらに、ブロック単位に処理された第１画像処理の処理結果及び第２画像処理の処理結果から、ライン単位に連続したラスタデータの生成手段を具備する請求項１から３のいずれかに記載の画像処理装置。
5. 第１画像データを入力する第１入力工程と、
   前記第１入力工程にて入力される第１画像データとフォーマットが異なる第２画像データを入力する第２入力工程と、
   前記入力された第１画像データおよび第２画像データを、それぞれ複数ブロックに分割し、各ブロックに、それぞれの属性を表す属性データを付加する付加工程と、
   前記属性データのそれぞれ付加された第１画像データおよび第２画像データをそれぞれ定められた領域に記憶する記憶工程と、
   前記記憶工程により記憶された、前記属性データのそれぞれ付加された第１画像データおよび第２画像データを読み出す読み出し工程と、
   前記読み出し工程によって読み出された第１画像データおよび第２画像データの各属性データに基づいて前記第１画像データおよび前記第２画像データの各属性を解析する解析工程と、
   前記解析工程により解析された各属性に応じて、前記分割した各ブロックに、前記読み出し工程によって読み出された第１画像データに対して第１画像データのフォーマットに対応する第１画像処理を実行し、前記読み出し工程によって読み出された第２画像データに対して第２画像データのフォーマットに対応する第２画像処理を実行する画像処理工程
   を含む画像処理方法。
6. 前記記憶工程により記憶される属性データの付加されたブロックに分割された第１画像データおよび第２画像データは、ブロック毎のデータ量が等しい請求項５記載の画像処理方法。
7. 前記属性データの付加工程において、第１画像データおよび第２画像データを、それぞれ複数ブロックに分割する際に、等しい画像面積となるよう分割する請求項６記載の画像処理方法。
8. さらに、ブロック単位に処理された第１画像処理の処理結果及び第２画像処理の処理結果から、ライン単位に連続したラスタデータを生成する生成工程を具備する請求項５から７のいずれかに記載の画像処理方法。

Images