WO2006013956A1

WO2006013956A1 - 画像処理システム及び画像処理方法

Info

Publication number: WO2006013956A1
Application number: PCT/JP2005/014391
Authority: WO
Inventors: Yoichiro Maki; Hideyuki Narusawa; Goro Ishida; Shoji Kojima; Makoto Oyanagi; Masaya Kobayashi
Original assignee: Seiko Epson Corporation
Priority date: 2004-08-06
Filing date: 2005-08-05
Publication date: 2006-02-09
Also published as: EP1696658B1; EP1696658A4; EP1696658A1

Abstract

　手書きメッセージ等の画像を他の画像に合成表示できる画像処理システム及び画像処理方法を提供する　オーダーシート要求を受け付ける第一受付ユニットと、前記オーダーシート要求に応じて自由描画領域を示す領域表記を用紙に印刷部に印刷させる印刷制御ユニットと、スキャン要求を受け付ける第二受付ユニットと、前記スキャン要求に応じて前記自由描画領域に対象物が記録された前記用紙を撮像部に読み取らせる読み取り制御ユニットと、前記スキャン要求に応じて前記撮像部に読み取られた前記自由描画領域の画像と他の画像とを合成する合成ユニットと、を備えることを特徴とする画像処理システム。

Description

明細書

画像処理システム及び画像処理方法

技術分野

[0001] 本発明は画像処理システム及び画像処理方法に関し、特に手書き文字と記録媒体に格納されて、る画像との合成技術に関する。

背景技術

[0002] 従来、パーソナルコンピュータ (PC)等に接続することなぐリムーバブルメモリ等に保存されてヽる画像データを自ら読み込んで印刷する印刷システムが知られて、る。このような印刷システムで印刷対象の画像の選択、印刷枚数、レイアウト等の設定操作を小さな画面に表示されるメニューで受け付けようとすると、メニューの階層が深くなり操作が煩雑になるという問題がある。一方、大きな画面にメニューを表示しようとすると、製造コストが増大するという問題がある。

特開 2002— 51283号公報には、リムーバブルメモリ等に保存されている画像ファィルのサムネイル画像の一覧と選択可能な印刷条件とが印刷されたマークシートを印刷し、マークシートに書き込まれたマークを光学的に認識することによって、種々の印刷条件の設定操作を受け付ける画像処理システムが開示されている。

しかし、特開 2002— 51283号公報に開示された画像処理システムでダリーティングカード等を作成しょうとするとき、次のような問題が生ずる。一般にダリーティング力ードには、ディジタルカメラ等で記録した画像だけではなぐ送り主のメッセージ等が記入される。しかし、特開 2002— 51283号公報に開示された画像処理システムで画像だけが印刷されたカード毎に同一のメッセージを繰り返し手書きするのは手間がか、。

発明の開示

発明が解決しょうとする課題

[0003] 本発明の第一の目的は、手書きメッセージ等の画像を他の画像に合成表示できる画像処理システム及び画像処理方法を提供することである。

本発明の第二の目的は、手書き文字に合成される画像と手書き文字との位置関係をユーザに正確に把握させ、ユーザが記録した対象物の領域を正確に分割でき、画像と対象物との合成画像を印刷できる画像処理システムを提供することである。課題を解決するための手段

[0004] (1)上記第一の目的を達成するための画像処理システムは、オーダーシート要求を受け付ける第一受付ユニットと、前記オーダーシート要求に応じて自由描画領域を示す領域表記を用紙にプリントユニットに印刷させる印刷制御ユニットと、スキャン要求を受け付ける第二受付ユニットと、前記スキャン要求に応じて前記自由描画領域に対象物が記録された前記用紙をスキャンユニットに読み取らせる読み取り制御ュ-ットと、前記スキャン要求に応じて前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成する合成ユニットと、を備える。

本発明によると、領域表記を印刷させることにより、手書き文字等の対象物を記録すべき領域であり読み取り時にその領域を特定可能な領域である自由描画領域を、ユーザに認識させることができる。本発明によると、スキャン要求に応じて、自由描画領域の画像が読み取られ、自由描画領域の画像と他の画像とが合成される。すなわち本発明によると、予め決められた自由描画領域にユーザに手書き文字等の対象物を記録させることにより、その自由描画領域に記録された手書き文字等の対象物の画像と他の画像とを合成表示することを可能とする。

[0005] (2)前記印刷制御ユニットは、識別表記を前記用紙に前記プリントユニットに印刷させてもよい。前記合成ユニットは、前記スキャンユニットに読み取られた前記識別表記の画像に基づいて、前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成してもよ、。

本発明によると、領域表記とともに識別表記を用紙に印刷することにより、その用紙力も読み取られた画像に基づいて、予め決められた自由描画領域に応じて、自由描画領域の画像と他の画像とを合成することができる。すなわち本発明によると、識別表記力読み取られた画像に基づいて、例えば予め決められている自由描画領域を特定し、自由描画領域に記録された対象物を読み取ることができる。また本発明によると、識別表記力も読み取られた画像に基づいて、例えば自由描画領域に記録された対象物と他の画像について自由描画領域に応じて予め決められている合成条件を認識することができる。

[0006] (3)前記画像処理システムは、アクセス可能な画像の!/、ずれか 1つ以上を選択する支持を受け付ける画像選択指示受付ユニットをさらに備えてもょヽ。また前記他の画像は、選択された前記画像であってもよい。

本発明によると、ユーザはアクセス可能な領域に予め記憶された任意の画像を例えば操作パネルを用いて選択することにより、選択した画像と手書きメッセージ等を合成した画像を表示させることができる。

[0007] (4)前記印刷制御ユニットは、前記画像選択指示受付ユニットによって選択された前記画像を前記用紙に前記プリントユニットに印刷させてもよい。

本発明によると、アクセス可能な画像から選択された画像と自由描画領域を示す領域表記とを 1枚の用紙に印刷できる。そのためユーザは選択した画像を確認しながら、選択した画像に合成するための対象物を自由描画領域に記録することができる。つまりユーザは合成結果をイメージしながら手書き文字などの対象物を自由描画領域に記録することができる。

[0008] (5)前記選択された画像データを示す画像は、前記選択された画像データが表す画像と前記自由描画領域の画像のサンプル画像とを第一の合成条件で合成した合成結果を表す画像であってもよい。前記合成ユニットは、前記選択された画像データが表す画像と前記自由描画領域の画像とを前記第一の合成条件に対応する第二の合成条件で合成してもよい。

合成ユニットは、選択された画像データが表す画像と対象物を表す画像のサンプル画像とを、合成結果を表す画像の合成条件に対応する合成条件で合成する。つまり合成結果を表す画像は、合成ユニットにおける合成条件に対応する合成条件による合成結果を表している。そのためユーザは自由描画領域に手書き文字などの対象物を記録するときに、合成結果をイメージしゃすい。

[0009] (6)前記画像処理システムは、選択された前記画像と前記自由描画領域の画像とを合成するための互いに異なる複数の合成条件のいずれかを前記第一の合成条件として選択する指示を受け付ける合成条件指示受付ユニットをさらに備えてもよい。前記印刷制御ユニットは、前記合成条件指示受付ユニットで受け付け可能な互いに異なる合成条件で合成した複数の前記合成結果を表す複数の画像を前記用紙に前記プリントユニットに印刷させてもよい。

ユーザは、用紙に印刷された互いに異なる合成条件で合成した合成結果を表す複数の画像で、合成条件指示受付ユニットで受け付け可能な合成条件を認識することができる。またユーザは、合成結果を表す画像で実際に選択する合成条件で合成したときの合成結果をイメージしながら、対象物を自由描画領域に記録することができる。

[0010] (7)前記印刷制御ユニットは、アクセス可能な画像を表す画像表記を前記用紙に前記プリントユニットに印刷させてもよい。前記画像処理システムは、前記用紙に記録された画像選択指示に指示された前記画像表記が表す前記画像を、前記スキヤンユニットに読み取られた画像に基づいて認識する画像選択指示認識ユニットをさらに備えてもよい。前記他の画像は、前記画像選択指示に指示された前記画像表記が表す画像であってもよ、。

本発明によると、ユーザは、アクセス可能な領域に予め記憶された任意の画像データを指示する画像選択指示を用紙に記録することにより、合成対象の画像データを指定することができる。このため本発明によると、操作パネル等を用いた操作を簡素ィ匕することがでさる。

[0011] (8)前記画像選択指示認識ユニットは、前記画像選択指示に指示された複数の前記画像表記が表す前記画像を認識してもよい。前記合成ユニットは、前記対象物の画像と複数の前記他の画像とを合成してもよ、。

本発明によると、ユーザは手書きメッセージ等と合成される画像を 2以上選択できる

[0012] (9)前記読み取り制御ユニットは、前記スキャンユニットに前記画像選択指示を前記自由描画領域より低ヽ解像度で読み取らせてもよヽ。

本発明によると、合成画像の品質劣化を招くことなぐ合成画像を得るための処理量を低減することができる。

[0013] (10)前記印刷制御ユニットは、前記自由描画領域の画像と前記他の画像とを合成するための互いに異なる合成条件を表す複数の合成条件表記を前記用紙に前記プリントユニットに印刷させてもよい。前記画像処理システムは、前記用紙に印刷された合成条件指示に指示された前記合成条件表記が表す前記合成条件を前記スキャンユニットに読み取られた画像に基づいて認識する合成条件認識ユニットをさらに備えてもよい。前記合成ユニットは、前記合成条件指示に指示された前記合成条件表記が表す前記合成条件に応じて、前記スキャンユニットに読み取られた前記自由描画領域の画像と前記他の画像とを合成してもよ、。

本発明によると、ユーザは手書きメッセージ等とともに合成条件指示を用紙に記録することにより合成条件を設定できるため、合成表示のために必要な操作パネル等に対するユーザの操作が簡素化される。尚、合成条件とは、具体的には例えば各画像を差し込む領域の配置、大きさ及び形状や、各画像が差し込まれるレイヤの透過率などである。

[0014] (11)前記読み取り制御ユニットは、前記スキャンユニットに前記合成条件指示を第一解像度で読み取らせ、前記スキャンユニットに前記自由描画領域を前記第一解像度より高い第二解像度で読み取らせてもよい。

[0015] (12)前記対象物の画像と前記他の画像とを合成するための合成条件の指示を受け付ける合成条件指示受付ユニットをさらに備え、前記印刷制御ユニットは、指示された前記合成条件に応じた態様の前記自由描画領域を示す前記領域表記を前記用紙に前記プリントユニットに印刷させてもよい。前記合成ユニットは、指示された前記合成条件に応じて前記対象物の画像と前記他の画像とを合成してもよい。

本発明によると、領域表記が印刷される前に合成条件の指示が受け付けられ、その指示に応じた態様の自由描画領域を示す領域表記が印刷され、その自由描画領域に記録された画像が合成されるため、ユーザは自分が望む形態の自由描画領域に手書き文字等の対象物を記録して他の画像と合成することができる。

[0016] (13)前記合成条件は、重畳合成条件を含んでもよい。

[0017] (14)前記重畳合成条件は、重畳合成される 2つの画像の境界処理条件を含んでちょい。 [0018] (15)前記重畳合成条件は、重畳合成される 2つの画像の透明度を含んでもよい。

[0019] (16)前記印刷制御ユニットは、前記プリントユニットに前記用紙に基準マークを印刷させてもよい。前記読み取り制御ユニットは、前記基準マークに基づいて前記自由描画領域を認識してもよい。

本発明によると、用紙に印刷された基準マークに基づいて自由描画領域の位置が相対的に認識されるため、自由描画領域に記録された画像と他の画像とを正確に合成することができる。

[0020] (17)前記画像処理システムは、前記自由描画領域に記録された対象物の領域を前記スキャンユニットに読み取られた前記自由描画領域の画像から抽出する領域抽出ユニットをさらに備えてもよい。前記自由描画領域の画像は、前記対象物の領域の画像であってもよい。

本発明によると、例えば写真の上に直接メッセージを手書きしたデザインの合成画像を表示することが可能になる。

[0021] (18)前記画像処理システムは、アクセス可能な画像のいずれ力 1つ以上を選択する指示を受け付ける画像選択指示受付ユニットをさらに備えてもょ、。前記他の画像は、選択された前記画像であってもよい。前記印刷制御ユニットは、選択された前記画像を、前記領域抽出ユニットが前記対象物の領域を抽出可能な程度に薄ぐ前記自由描画領域に前記プリントユニットに印刷させてもよい。

本発明によると、他の画像と合成しょうとする手書き文字等を自由描画領域に記録しょうとするときに、合成対象の他の画像が薄く自由描画領域に印刷されているため、ユーザは合成結果を正確に把握しながら自由描画領域に手書き文字等の対象物を記録することができる。

[0022] (19)前記領域抽出ユニットは、前記スキャンユニットに読み取られた前記自由描画領域外の余白領域の画像に基づいて前記用紙の地色を認識し、前記用紙の地色に基づ、て前記対象物の領域を認識してもよ、。

本発明によると、自由描画領域外の余白領域に存在する用紙の地色に基づいて対象物の領域が認識されるため、自由描画領域の画像から手書き文字等の対象物の領域が精度よく抽出される。 [0023] (20)前記画像処理システムは、前記プリントユニットと前記スキャンユニットとをさらに備えてもよい。

[0024] (21)前記画像処理システムは、前記プリントユニットと前記スキャンユニットとが接続されるインタフェースをさらに備えてもょ、。

[0025] (22)上記目的を達成するための画像処理方法は、オーダーシート要求を受け付ける第一受付段階と、前記オーダーシート要求に応じて自由描画領域を示す領域表記を用紙にプリントユニットに印刷させる印刷制御段階と、スキャン要求を受け付ける第二受付段階と、前記スキャン要求に応じて前記自由描画領域に対象物が記録された前記用紙をスキャンユニットに読み取らせる読み取り制御段階と、前記スキャン要求に応じて前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成する合成段階と、を含む。

[0026] (23)上記第二の目的を達成する画像処理システムは、記録媒体に格納されたュ一ザ画像にアクセスするアクセスユニットと、前記ユーザ画像の色域を減縮し背景画像を形成する減色処理ユニットと、自由描画領域に前記背景画像が印刷されたォーダシートをプリントユニットに作成させるオーダシート印刷制御ユニットと、スキャンュニットに読み取られた前記自由描画領域の画像力ユーザが前記自由描画領域に記録した対象物の領域を前記背景画像の色域を基準に用いて分割し、前記ユーザ画像に前記対象物の領域を重畳して合成画像を形成する合成ユニットと、前記合成画像を前記プリントユニットに印刷させる合成印刷制御ユニットと、を備えることを特徴とする画像形成システム。

画像処理システムがユーザに手書き文字などの対象物を記録させる自由描画領域にユーザ画像の色域を減縮して形成された背景画像を印刷すると、ユーザは手書き文字に合成される画像と手書き文字等の対象物との位置関係を正確に把握しながら手書き文字等の対象物を自由描画領域に記録することができる。また画像処理システムがユーザ画像の色域を減縮して形成した背景画像を自由描画領域に印刷すると、画像処理システムは背景画像の色域外の色で自由描画領域に記録された対象物の領域を自由描画領域を読み取った画像力も正確に分割することができる。また、背景画像の色域を基準として手書き文字などの対象物の領域を分割しょうとする場合、画像処理システムは背景画像の色域を記憶しなければならない。フルカラーの背景画像の色域を記憶するためには大容量の記録媒体を画像処理システムに設ける必要がある。画像処理システムはユーザ画像の色域を減縮して背景画像を形成することにより、背景画像の色域を記憶するために必要な記憶容量を低減することができる。

[0027] (24)前記減色処理ユニットは、単一色相の前記背景画像を形成してもよい。

画像処理システムがユーザ画像の色域を減縮して形成した単一色相の背景画像を自由描画領域に印刷すると、ユーザは幅広い色相の手書き文字などの対象物を自由描画領域に記録することができる。

[0028] (25)前記減色処理ユニットは、多階調の前記背景画像を形成してもよい。

背景画像が多階調である場合、ユーザは背景画像の色相が単一であってもユーザ画像の空間構成を容易に理解することができるため、手書き文字などの対象物の配置をユーザ画像の空間構成と連関させて決めることができる。

[0029] (26)前記減色処理ユニットは、 1つのカラーチャネルだけが階調を有する 3つの力ラーチャネルを有する前記背景画像を形成してもよヽ。

背景画像力^つのカラーチャネルだけに階調を有し、背景画像の他の 2つのカラーチャネルが固定階調値になっている場合、背景画像を印刷して読み取ると、原理的には、読み取った背景画像の 1つのカラーチャネルだけが階調を有し、他の 2つの力ラーチャネルが固定値になる。読み取った背景画像がこのような階調特性を持つ場合、画像処理システムは、 1つのカラーチャネルの階調値と他の 2つのカラーチヤネルの固定値との組み合わせだけを記憶すればょ、ため、背景画像の色域を記憶するために必要な記憶容量はさらに減少する。

[0030] (27)前記減色処理ユニットは、淡色化された前記背景画像を形成してもよヽ。

画像処理システムがユーザ画像を淡色化して背景画像を形成することにより、背景画像の色域は狭くなり、その結果背景画像の色域を記憶するための記憶容量は小さくなる。また、背景画像が淡色化されていると、背景画像上に濃い色で記録された手書き文字などの対象物の領域を背景画像の領域と判別することができるため、ユーザは背景画像上に手書き文字などの対象物を濃い色で記録することができる。 [0031] (28)前記オーダシート印刷制御ユニットは、前記背景画像の色域に色域が一致する標本パッチを前記オーダシートに前記プリントユニットに印刷させてもよい。前記合成ユニットは、前記スキャンユニットに読み取られた前記標本パッチの画像の色域に色値が含まれな!/、前記自由描画領域内の領域を前記対象物の領域と判定してもよい。

画像処理システムが同一の色域の背景画像を印刷しても、用紙の紙質が異なれば用紙に印刷された背景画像の色域も異なる。したがって、オーダシートを作成するために用いられる用紙の種類が特定されて、な、場合、背景画像の色域に応じて予め決めた色域の範囲を、自由描画領域から背景画像の領域として分割される領域の色域の範囲として領域分割を実行すると、対象物の領域が背景画像の領域と誤認識されたり、背景画像の領域が対象物の領域と誤認識される。そこで、背景画像の色域に色域が一致する標本パッチを背景画像とともにオーダシートに印刷することにより、実際に使用された用紙に印刷された標本パッチの色域を基準として背景画像の色域を認識することができるため、自由描画領域内の背景画像の領域の判定精度を向上させることができる。

[0032] (29)前記画像処理システムは、階調を有する前記カラーチャネルの階調値に対応付けて他の 2つの前記カラーチャネルの階調範囲を記憶する記録媒体をさらに備えてもよい。前記合成ユニットは、前記自由描画領域の画素毎に、前記自由描画領域の画素の階調を有する前記カラーチャネルの階調値に対応付けられている他の 2つの前記カラーチャネルの階調範囲に前記自由描画領域の画素の他の 2つの前記力ラーチャネルの階調値が含まれな、と、前記対象物の領域を構成する画素と判定してもよい。

上述したように、背景画像力^つのカラーチャネルだけに階調を有し、背景画像の他の 2つのカラーチャネルが固定値になっている場合、背景画像を印刷して読み取ると、原理的には、読み取った背景画像の 1つのカラーチャネルだけが階調を有し、他の 2つのカラーチャネルが固定値になる。し力し現実には、印刷対象の背景画像がそのような階調特性を持っていたとしても、印刷前の分版処理や、ハーフトーン処理、スキャンユニットのデバイスカラーとプリントユニットのデバイスカラーとの違い等により、読み取った背景画像は、 1つのカラーチャネルだけが広い階調を有し、他の 2 つのカラーチャネルが狭い階調を有する結果になる。そこで画像処理システムは、階調を有するカラーチャネルの階調値に対応付けて他の 2つのカラーチャネルの狭い階調範囲を記憶することによって背景画像の色域を記憶し、階調を有するカラーチヤネルの階調値毎に記憶した他の 2つのカラーチャネルの階調範囲を基準にして自由描画領域内で背景画像の領域を判定することにより、背景画像の色域を記憶するための記憶容量をさらに低減することができる。

[0033] (30)前記減色処理ユニットは、前記ユーザ画像のエッジ成分を表す前記背景画像を形成してもよい。

背景画像がユーザ画像のエッジ成分を表す場合、ユーザは背景画像の色相が単一であってもユーザ画像の空間構成を容易に理解することができるため、手書き文字などの対象物の配置をユーザ画像の空間構成と連関させて決めることができる。

[0034] 尚、本発明に備わる複数のユニットの各機能は、構成自体で機能が特定されるハ一ドウエア資源、プログラムにより機能が特定されるハードウェア資源、又はそれらの組み合わせにより実現される。また、これら複数のユニットの各機能は、各々が物理的に互いに独立したノヽードウエア資源で実現されるものに限定されない。また、本発明は装置及び方法の発明として特定できるだけでなぐプログラムの発明としても、そのプログラムを記録した記録媒体の発明としても特定することができる。発明を実施するための最良の形態

[0035] 以下、複数の実施例に基づいて本発明の実施の形態を説明する。各実施例で対応する構成要素には同一の符号を用い、重複する説明は省略する。

(第一実施例）

図 2は、本発明の画像処理システムの第一実施例としての複合機 1の外観を示す正面図である。図 3は、本発明の第一実施例による複合機 1を示すブロック図である。複合機 1は、図示しないパーソナルコンピュータ (PC)に原稿から読み取った画像データを出力する機能と、原稿を複写する機能と、 PCから出力されるデータを印刷する機能と、リムーバブルメモリ 3から入力した画像データを印刷する機能とを有する [0036] 複合機 1のスキャンユニット 20は、イメージセンサ 21、光学系 22、センサ駆動部 23 、センサキャリッジ駆動部 24、 AFE (Analog Front End)部 25、ディジタル画像処理部 26等を備える。

センサ駆動部 23に駆動されるイメージセンサ 21は、 RGBの 3チャンネルの受光素子を備えるリニアイメージセンサであって、図示しない原稿台と平行に移動するセンサキャリッジ 27に搭載されている。イメージセンサ 21は、図示しないレンズ及びミラーで構成される光学系 22により受光面に結像される原稿台に載置された原稿の光学像の濃淡に相関する電気信号を出力する。

[0037] センサキャリッジ駆動部 24は、モータ、駆動ベルト、駆動回路などを備える。センサキャリッジ駆動部 24は、走査線に垂直に架設されたガイドロッドに沿ってセンサキヤリッジ 27を往復移動させる。イメージセンサ 21が走査線に垂直な方向に移動することにより二次元画像の走査が可能となる。

AFE部 25は、アナログ信号処理部、 AZD変換器等を備える。

ディジタル画像処理部 26は、 AFE部 25から出力された出力信号に対し、シエーデイング補正等の処理を行ってディジタル画像を生成する。

[0038] 複合機 1のプリントユニット 30は、インクジェット方式で用紙に画像を形成するための記録ヘッド 31、ヘッド駆動部 32、ヘッドキャリッジ駆動部 33、送紙部 34等を備える。尚、プリントユニット 30はレーザー方式等の他の印刷方式に対応する構成でもよい記録ヘッド 31は、図示しないインクカートリッジが搭載されるヘッドキャリッジ 37に設けられ、ノズル、ピエゾ素子、インク通路等を備える。

ヘッドキャリッジ駆動部 33は、図示しないモータ、駆動ベルト、駆動回路等を備える。ヘッドキャリッジ駆動部 33は、記録ヘッド 31を用紙の搬送方向と垂直に往復移動させる。

[0039] 送紙部 34は、図示しない用紙搬送用ローラ、モータ、駆動回路等を備える。送紙部 34は、用紙搬送ローラを回転させることにより用紙を記録ヘッド 31の移動方向軸線と垂直な方向に搬送する。

カード読み書き部 41は、リムーバブルメモリ 3を挿入するための図示しないカードスロット、メモリコントローラ等を備える。

[0040] 操作部 42は、メニューを表示するための LCD14と、メニューを操作するための決定ボタン 10、十字ボタン 12等の各種のボタンとを備える（図 2参照)。

制御部 50は、 CPU51、 ROM52及び RAM53を備える。 CPU51は ROM52に記憶された制御プログラムを実行して複合機 1の各部を制御する。 ROM52は制御プログラムを記憶している不揮発性メモリであり、 RAM53は、画像処理プログラム等のプログラムや画像データ等のデータを一時的に記憶する揮発性メモリである。制御プログラムは所定のサーバからネットワーク経由で ROM52に格納してもよいし、リムーバブルメモリ 3等のコンピュータ読み取り可能な記憶媒体力も読み出して ROM52に格糸内してちょい。

[0041] 図 4は、複合機 1の制御プログラムの構成を示す機能ブロック図である。

第一受付ユニット及び第二受付ユニットとしての合成指示受付モジュール 61は、ォ一ダーシート要求及びスキャン要求を受け付けるプログラム部品である。オーダーシート要求とは、手書き文字等を書き込むためのオーダーシートを印刷する処理をユーザが複合機 1に要求する指示である。スキャン要求とは、オーダーシートを読み取り、手書き文字等を写真画像に合成する一連の処理をユーザが複合機 1に要求する指示である。

[0042] 画像選択指示受付ユニットとしての画像選択指示受付モジュール 60は、アクセス可能な画像ファイルから任意の画像ファイルを選択する指示 (画像選択指示)を受け付けるプログラム部品である。アクセス可能な画像ファイルとは、具体的には例えばリムーバブルメモリ 3の所定フォルダに保存されている画像ファイルである。尚、画像選択指示受付モジュール 60は、内部メモリである ROM52及び RAM53や、複合機 1 に接続されるディジタルカメラ、カメラ機能付き携帯電話等の携帯用電子機器のメモリゃ、複合機 1に接続される PCのハードディスク装置や、通信回線を介して複合機 1 に接続されているファイルサーバなどに保存されている画像データをユーザに選択させてもよい。

[0043] 印刷制御ユニットとしての印刷制御モジュール 62は、オーダーシートを印刷するためのテンプレート（オーダーシートテンプレート） 103 (図 5参照）を ROM52から読み込み、オーダーシートテンプレート 113に基づいてオーダーシートをプリントユニット 3 0に印刷させるプログラム部品である。

図 5に示すオーダーシートテンプレート 113は、基準マーク 82、 107、検証マーク 8 1及び矩形枠 110を用紙に印刷するためのオブジェクト情報及びレイアウト情報で構成される。枠 112はオーダーシートテンプレート 113が定義している印刷用紙サイズを表している。オーダーシートテンプレート 113が定義する領域表記としての矩形枠 110は、オーダーシート 70 (図 6参照）の紙面上の自由描画領域 72の外縁を示す矩形の枠である。自由描画領域 72は、合成画像を印刷するための印刷用紙とは異なるアスペクト比の矩形枠でもよいし、円形枠などの矩形以外の枠でもよい。また領域表記は、例えば自由描画領域 72の四隅を示す 4つのマーク（十字形、 L字形等)であつてもよい。オーダーシートテンプレート 113が定義する基準マーク 82、 107は、ォーダーシート 70を読み取る際に自由描画領域 72及び検証マーク 81の位置を特定するためのマークである。オーダーシートテンプレート 113が定義する枠 108は、検証マーク 81が割り付けられる領域である。検証マーク 81は、オーダーシート 70を印刷する処理の実行中に複合機 1に接続されてヽるリムーバブルメモリ 3と、合成画像を印刷する処理の実行中に複合機 1に接続されてヽるリムーバブルメモリ 3との同一性を検証するためのマークである。具体的には例えば、検証マーク 81はリムーバブルメモリ 3の所定のフォルダに格納された所定のフォーマットの全ての画像ファイルのファィル名、ファイル数等に基づいて算出されるチェックサムを特定可能な情報を担持している。

[0044] 読み取り制御ユニットとしての読取制御モジュール 64は、次の機能を有するプログラム部品である。第一に、原稿台の全面（プレスキャン領域）をスキャンユニット 20に低解像度で読み取らせてプレスキャン画像を取得する。第二に、プレスキャン画像に基づいてオーダーシート 70の自由描画領域 72を特定する。第三に、プレスキャン画像に基づいて検証マーク 81を検証する。第四に、自由描画領域 72をスキャンュ-ット 20に高解像度で読み取らせ、高解像度のスキャン画像を取得する。

[0045] 合成ユニット及び領域抽出ユニットとしての合成モジュール 66は、スキャンユニット 20が読み取った自由描画領域 72の画像を取得し、自由描画領域 72の画像と写真画像とを合成するプログラム部品である。具体的には例えば、合成モジュール 66は、自由描画領域 72の画像力手書き文字等の対象物 116 (図 6参照）の領域を抽出し、後述する合成テンプレートに基づいて対象物 116の画像をユーザが選択する写真画像に合成する。

以上説明した合成指示受付モジュール 61、印刷制御モジュール 62、読取制御モジュール 64及び合成モジュール 66が実行されることによって実現される制御部 50の機能の一部は、 DSP、 ASIC (Application Specific Integrated Circuit)等の専用回路によって実現することもできる。

[0046] 図 7は合成テンプレートを説明するための模式図である。

合成テンプレート 120は、用紙 134に合成画像 132を印刷するために必要なレイァゥト情報で構成される。枠 131は、合成テンプレート 120が定義する印刷用紙サイズを表している。合成テンプレート 120が定義する枠 128は、自由描画領域 72の画像 122と写真画像 126が割り付けられる領域である。図に示した例では、自由描画領域 72の画像 122と写真画像 126が割り付けられる領域が一致しているが、勿論それぞれの画像を異なる枠に割り付けてもよい。合成テンプレート 120が定義する枠 128とオーダーシートテンプレート 113が定義する矩形枠 110とは互、のアスペクト比が一致している。アルファチャンネル 124は、自由描画領域 72の画像 122のレイヤの透過率を画素毎に定義する情報である。合成モジュール 66が自由描画領域 72の画像 122に対する領域分割処理によって手書き文字等の対象物 116の領域 130を特定し、対象物 116の領域 130の透過率を不透明に設定し、その他の領域を透明に設定する処理によって、アルファチャンネル 124は生成される。自由描画領域 72の画像 1 22と写真画像 126とを画素毎にアルファチャンネル 124で重み付けして加算することにより、合成画像 132が生成される。

[0047] 図 8は、本発明の第一実施例による画像処理方法を示すフローチャートである。図 8に示す処理は、制御部 50が上述の制御プログラムを実行することによって実行される。

はじめに、制御部 50はオーダーシート要求を受け付ける (ステップ S100)。具体的には例えば、合成指示受付モジュール 61は、図 9に示すメニュー画面 1000を LCD 14に表示させ、その後に十字ボタン 12の操作によりユーザが「手書き文字合成印刷」を選択し決定ボタン 10を押すことによって操作部 42から出力される信号をオーダーシート要求として受け付ける。図面では、 LCD14に表示されている項目のうち十字ボタン 12の操作により選択されている項目にハッチングを記している。

[0048] 制御部 50は、オーダーシート要求を受け付けると、オーダーシートテンプレート及び合成テンプレートを設定する (ステップ S103)。具体的には、合成指示受付モジュール 61は、 ROM52からオーダーシートテンプレート及び合成テンプレートを RAM 53に読み込む。この処理により、オーダーシート要求に応じたオーダーシート 70の自由描画領域 72が設定される。また、この処理により、自由描画領域 72の画像 122 及び写真画像 126について、オーダーシート要求に応じた配置、レイヤの上下関係、各レイヤの透過率、印刷用紙サイズ等が設定される。尚、制御部 50は、ステップ S1 00で互いに異なるオーダーシートテンプレートに対応するオーダーシート要求を択一的に受け付け、受け付けたオーダーシート要求に応じたオーダーシートテンプレートを設定してもよい。

[0049] ステップ S104では、複合機 1はユーザがアクセス可能な画像ファイル力も任意の画像ファイルを選択する指示を受け付ける。具体的には例えば、画像選択指示受付モジュール 60は、図 9に示す画像選択画面 1020を LCD 14に表示させ、その後にュ一ザが十字ボタン 12及び決定ボタン 10を押すことによって操作部 42から出力される信号に応じて、リムーバブルメモリ 3の所定のフォルダに格納されて、る所定のフォーマットの画像ファイルを選択する。

[0050] ステップ S106では、複合機 1はオーダーシート 70を印刷する。具体的には、印刷制御モジュール 62は、 RAM53に読み込まれているオーダーシートテンプレートに基づいて基準マーク 82、 107、検証マーク 81及び矩形枠 110が割り付けられたぺージのデータを生成する。次に印刷制御モジュール 62は、そのページのデータに二値化処理、インタレース処理等を施して印刷データを生成する。次に印刷制御モジユール 62は、プリントユニット 30に印刷データを出力し、オーダーシート 70をプリントュニット 30に印刷させる。このとき、印刷制御モジュール 62は、リムーバブルメモリ 3の所定のディレクトリに格納された画像ファイルに基づいてチェックサムを算出し、チェックサムに対応した検証マーク 81を表す画像を枠 108に割り付ける。また、プリントュ-ット 30がオーダーシート 70の印刷を完了するまでの期間、印刷制御モジュール 62は L CD 14に図 9に示す画面 1040を表示してもよ!/ヽ。

[0051] ユーザは、ステップ S106で印刷されたオーダーシート 70の自由描画領域 72に図 6に示すように手書き文字等の対象物 116を記録する。自由描画領域 72の外縁は矩形枠 110によって明示されている。自由描画領域 72には、手書き文字の他、雑誌の切り抜きを貼り付けたり、文字や画像を印刷したりすることができる。

ステップ S108では、制御部 50はスキャン要求を受け付ける。具体的には例えば、合成指示受付モジュール 61は、図 9に示すメニュー画面 1060を LCD 14に表示させ、その後にユーザが決定ボタン 10を押すことによって操作部 42から出力される信号をスキャン要求として受け付ける。尚、スキャン要求を受け付けた後、制御部 50は LCD 14に図 9に示す画面 1080を表示して進拔状況をユーザに案内してもょ、。

[0052] ステップ S109では、複合機 1はプレスキャン領域を読み取る。具体的には読取制御モジュール 64は、プレスキャン領域をスキャンユニット 20に読み取らせてプレスキヤン画像を取得する。

ステップ S110では、制御部 50はオーダーシート 70の自由描画領域 72を特定する。具体的には読取制御モジュール 64は、パターンマッチング等によってプレスキャン画像内で基準マーク 82、 107の位置を特定する。次に読取制御モジュール 64は、基準マーク 82、 107の位置に基づいて自由描画領域 72の範囲を特定する。このとき、読取制御モジュール 64は、ステップ S 102で設定されたオーダーシートテンプレート 113で定義されている基準マーク 82、 107及び矩形枠 110の相対的な位置関係に応じて自由描画領域 72の範囲を特定する。すなわち、オーダーシートテンプレート 1 13はオーダーシート要求が受け付けられるとそれに応じて設定されるものであるため、制御部 50はオーダーシート要求に応じて自由描画領域 72の範囲を特定するということである。

[0053] またステップ S110では、制御部 50はプレスキャン画像に基づいて検証マーク 81の範囲を特定し、検証マーク 81を認識し、検証マーク 81に対応するチェックサムと、リムーバブルメモリ 3の所定のフォルダに格納された所定のフォーマットの画像ファイルに基づいて算出するチェックサムとの同一性を検証する。その結果、 2つのチェックサムが一致していなければ制御部 50はエラー処理を実施する。尚、このようなエラー判定及びエラー処理は勿論省略してもよヽ。

[0054] ステップ S112では、複合機 1は自由描画領域 72を高解像度で読み取る。具体的には読取制御モジュール 64は、スキャンユニット 20に自由描画領域 72をプレスキヤン時よりも高解像度で読み取らせ自由描画領域 72の画像を RAM53に格納させる。ステップ S114では、制御部 50は、自由描画領域 72の画像 122 (図 7参照）から自由描画領域 72に記録された対象物 116に対応する領域 130を抽出する。具体的には、合成モジュール 66は、自由描画領域 72の画像 122に対して所定のしきい値を用いた領域分割処理を施して対象物 116に対応する領域 130を特定する。尚、合成モジュール 66は、プレスキャン画像を用 V、て対象物 116に対応する領域を特定してもよい。次に合成モジュール 66は、対象物 116に対応する領域 130を不透明に、その他の領域を透明に設定したアルファチャンネル 124を生成する。

[0055] ステップ S116では、制御部 50は、自由描画領域 72の画像 122 (図 7参照）と写真画像 126とを合成する。具体的には、合成モジュール 66は、合成テンプレート 120に基づいて、自由描画領域 72の画像 122と、ステップ S 104で選択された画像ファイルが表す画像 126とを画素毎にアルファチャンネル 124で重み付けして加算し、その結果得られる合成画像 132を枠 128に割り付ける。このとき用いられる合成テンプレート 120は、オーダーシート要求を受け付けたことによって制御部 50が ROM52から RAM53に読み込んだものである。すなわち、自由描画領域 72の画像 122と写真画像 126との合成は合成テンプレート 120に基づいて行われるため、制御部 50は自由描画領域 72の画像 122と写真画像 126とをオーダーシート要求に応じて合成するということである。

[0056] ステップ S118では、複合機 1は合成画像を印刷する。具体的には、制御部 50は合成テンプレート 120に基づいて合成画像 132が枠 128に割り付けられたページのデータを生成し、そのデータに二値ィ匕処理、インタレース処理等を施して印刷データを生成し、プリントユニット 30に印刷データを出力することによって、合成画像 132を用紙 134に印刷させる。 [0057] 以上説明した本発明の第一実施例によると、ユーザは自由描画領域 72に手書き文字等を書き込んだオーダーシート 70を複合機 1に読み取らせることによって、手書き文字等を写真画像に合成して得られる画像を複合機 1に印刷させることができる。したがって、そのようにして得られる合成画像を印刷した印刷物を容易に大量に作成できる。また、光沢紙に印刷した写真画像に手書き文字をきれいに上書きすることは紙とインクの性質上困難である力上述の実施例によれば、ユーザはあた力も光沢紙に印刷した写真画像に手書き文字をきれいに上書きしたような印刷物を容易に作成することができる。

[0058] (第二実施例）

本発明の第二実施例では、上述した検証マーク 81 (図 5参照）が請求項に記載の識別表記に相当し、合成テンプレートを特定するための情報を担持している。以下、具体的に説明する。

検証マーク 81のパターンは、合成テンプレートに応じて決まっている。尚、複合機 1 が検証マーク 81に基づ、て選択可能な合成テンプレートは 1つであってもよ、し、複数であってもよい。すなわち、少なくとも、手書き文字などを記録できるオーダーシートである力否かだけが検証マーク 81に基づ、て判定可能であればよ!/、。検証マーク 81からは、それぞれが異なる合成テンプレートに対応し手書き文字などを記録できる複数種類のオーダーシートのうちの、ずれである力までは判定不能でもよ、。また、検証マーク 81は、合成テンプレートに対応していると同時に、当然に、オーダーシートテンプレート 113にも対応している。合成テンプレートが定義する自由描画領域 72 の画像を割り付ける枠 128 (図 7参照）とオーダーシートテンプレート 113が定義する矩形枠 110とが対応しているからである。すなわち、検証マーク 81はオーダーシート自体を識別可能な情報を担持して、る。

[0059] 図 10は、本発明の第二実施例による画像処理方法を示すフローチャートである。

ステップ S 103では、制御部 50はオーダーシートテンプレートを設定する。このとき第一実施例とは異なり、合成テンプレートは設定されない。

ステップ S106では、複合機 1はオーダーシート 70を印刷する。このとき印刷制御モジュール 62は、オーダーシート要求に応じた合成テンプレートを特定するための情報を担持したパターンの検証マーク 81を ROM53から読み込んで枠 108 (図 5参照）に割り付ける。

[0060] ステップ S110では、制御部 50はオーダーシート 70の自由描画領域 72を特定する。このとき制御部 50は、検証マーク 81に基づいて自由描画領域 72を特定する。具体的には、読取制御モジュール 64は、パターンマッチング等によってプレスキャン画像内で基準マーク 82、 107の位置を特定する。次に読取制御モジュール 64は、基準マーク 82、 107の位置に基づいて検証マーク 81の範囲を特定し、プレスキャン画像によって表されている検証マーク 81を認識し、検証マーク 81に対応する自由描画領域 72の範囲を特定する。このとき、読取制御モジュール 64は、検証マーク 81に対応するオーダーシートテンプレート 113で定義されている基準マーク 82、 107及び矩形枠 110の相対的な位置関係に応じて自由描画領域 72の範囲を特定する。すなわち、制御部 50は、検証マーク 81の画像に基づいて自由描画領域 72の範囲を特定する。

[0061] ステップ S 111では、制御部 50は検証マーク 81に対応する合成テンプレートを設定する。具体的には、合成モジュール 66は、検証マーク 81に対応する合成テンプレートを ROM52から RAM53に読み込む。すなわち、第二実施例では、オーダーシート 70が読み取られるまで合成テンプレートが定まらない。

制御部 50は、第一実施例で説明したステップ S104の処理 (画像選択処理)を合成印刷指示の受け付け後、例えば合成処理 (S 116)の直前に実施する。

[0062] 以上説明した第二実施例では、合成印刷指示受け付け後に、合成テンプレートの設定と、画像の選択とが実行されるため、ステップ S108以後の処理と、ステップ S10 6以前の処理に連続性がなくてもよい。すなわち、ステップ S106とステップ S108の間に全く別の処理が行われてもよいし、複合機 1の電源がオフになってもよい。

尚、ステップ SI 11で検証マーク 81に基づ、て合成テンプレートを設定する処理に変えて、ステップ S108でスキャン要求を受け付ける際に合成テンプレートの選択指示をユーザ力も受け付け、ステップ S111では合成テンプレートの選択指示内容と、オーダーシート 70に対応する合成テンプレートとの整合性をチェックしてもよい。また、複合機 1が扱うオーダーシートが一種類のみである場合には、その整合性のチエツクを省略してちょい。

[0063] (第三実施例）

図 11は、本発明の第三実施例による複合機 1の機能ブロック図である。印刷制御モジュール 62は、上述のステップ S106において、画像選択指示受付モジュール 60によって選択された画像も図 12に示すオーダーシートテンプレート 113 に基づいてオーダーシートに印刷する。図 12に示すオーダーシートテンプレート 11 3が定義する枠 200は、画像選択指示受付モジュール 60によって選択されたフアイルを示す画像 202が割り付けられる枠である。オーダシートテンプレート 113は、図 7 に示した合成テンプレート 120に対応している。すなわち、ユーザによって選択される画像 202の割り付け位置及びサイズと自由描画領域 72から読み取られる画像 122 の割り付け位置及びサイズとは合成テンプレート 120で一致しているため、枠 200のアスペクト比と枠 110とのアスペクト比が一致している。枠 200、枠 100の外側に用紙の外縁を示す枠が印刷されるようにオーダーシートテンプレート 113を定義してもよい。そのようにすれば、ユーザは、選択したファイルの画像 126と自由描画領域 72から読み取られる画像 122 (図 7参照）とが印刷用紙にどのように配置されるかを印刷前に確認できる。尚、印刷制御モジュール 62は、ユーザによって選択された画像フアイルの画像 126に基づいて生成した縮小画像を枠 200に割り付けてもよい。また、選択された画像ファイルが Exifファイルなどのサムネイルデータを格納している画像フアイルであれば、印刷制御モジュール 62は、サムネイル画像を枠 200に割り付けてもよい。

[0064] 以上説明した本発明の第三実施例によると、複合機 1は、図 13に示すように、選択された画像データを示す画像 202と自由描画領域 72を示す矩形枠 110とを 1枚のォ一ダーシート 70に印刷する。そのためユーザは、選択した画像をオーダーシート 70 で確認しながら、選択した画像に合成するための手書き文字等の対象物 116を自由描画領域 72に記録することができる。つまりユーザは、合成結果を予想しながら自由描画領域 72に対象物を記録することができる。

[0065] (第四実施例）

本発明の第四実施例による複合機 1は、選択された画像ファイルが表す画像を淡く自由描画領域内に印刷する。

印刷制御モジュール 62は、上述のステップ S106において、画像選択指示受付モジュール 60によって選択された画像を図 14に示すオーダーシートテンプレート 113 に基づいてオーダーシートに印刷する。図 12に示すオーダーシートテンプレート 11 3が定義する枠 200は、画像選択指示受付モジュール 60によって選択されたフアイルを示す画像 202と自由描画領域を示す矩形枠 110が割り付けられる枠である。尚、自由描画領域の全体に画像 202が淡く印刷されることで自由描画領域の外縁を明示できるため、矩形枠 110は必ずしも印刷される必要はない。画像選択指示受付モジュール 60によって選択されたファイルを示す画像 202は、選択されたファイルの画像の輝度値に対して印刷制御モジュール 62が二値ィ匕処理を施したモノクロ画像である。ニ値ィ匕のしきい値は、ステップ S 114で対象物の領域を抽出する処理で選択されたファイルを示す画像 202が抽出されない程度に低く設定される。尚、自由描画領域 72に印刷される画像 200は、淡、カラー画像や淡!、モノトーン画像であってもよ!/ヽ。カラー画像を自由描画領域 72に印刷する場合、印刷制御モジュール 62は、選択されたファイルの画像の各チャネルに対し、二値化処理に変えて濃淡レベルの淡色化処理を施す。

以上説明した本発明の第四実施例によると、複合機 1は、図 15に示すように、選択された画像データを示す画像 202を自由描画領域 72内に印刷する。そのためユーザは、選択した画像に対する配置を正確に把握しながら、選択した画像に合成するための手書き文字等の対象物 116を自由描画領域 72に記録することができる。

(第五実施例）

本発明の第五実施例による複合機 1は、選択された画像ファイルが表す画像と手書き文字等の対象物の画像との合成結果の見本 111をオーダーシート 70に印刷する（図 16参照)。

本発明の第五実施例では、合成指示受付モジュール 61は、合成条件指示受付ュニットにも相当する。すなわち、合成指示受付モジュール 61は、自由描画領域 72に記録された対象物を表す画像 122と写真画像 126とを合成するための合成条件を選択する指示を受け付ける。合成条件とは、画像の配置、レイヤの上下関係、レイヤの透過率等であり、具体的には例えば合成テンプレートの内容である。合成指示受付モジュール 61は、合成条件を選択する指示に応じて合成テンプレート及びオーダーシートテンプレートを設定する。

[0067] 図 17は、オーダーシート 70を印刷するためのオーダーシートテンプレート 113を示す模式図である。図 18は、図 17に示すオーダーシートテンプレート 113に対応する合成テンプレートを説明するための模式図である。すなわち、図 17に示すオーダーシートテンプレート 113と図 18に示す合成テンプレート 120とは、同一の合成条件を選択する指示に応じて ROM52から読み込まれるテンプレートである。

オーダーシートテンプレート 113は、手書き文字等が記録された自由描画領域 72 の見本を表す画像 208が割り付けられる枠 206を定義して、る。画像選択指示受付モジュール 60によって選択されたファイルを示す画像 202が割り付けられる枠 200と枠 206とは、合成画像を印刷するための印刷用紙の外縁を表す矩形枠 204の内側に定義される。矩形枠 204のアスペクト比は合成画像を印刷するための印刷用紙のアスペクト比と一致している。尚、自由描画領域 72の見本を表す画像 208が割り付けられる枠 206と、画像選択指示受付モジュール 60によって選択されたファイルを示す画像 202が割り付けられる枠 200とが重なっている場合には、オーダーシートテンプレート 113は 2つの画像の透過率を設定するためのアルファチャンネルを定義する

[0068] 合成テンプレート 120が定義する枠 128aは、写真画像 126が割り付けられる領域である。写真画像 126は、画像選択指示受付モジュール 60によって選択されたファィルの画像である。合成テンプレート 120が定義する枠 128bは、自由描画領域 72 の画像 122が割り付けられる領域である。合成テンプレート 120が定義する印刷用紙サイズに対応する枠 131と、枠 128aと、枠 128bの相対的な大きさ及び相対的な位置の関係は、オーダーシートテンプレート 113が定義する矩形枠 204と、枠 200と、枠 206の相対的な大きさ及び相対的な位置の関係と等しい。すなわち、枠 128a、 12 8b、 131を 1つの図形とみなし、矩形枠 204、 200、 206を 1つの図形とみなすと、それら 2つの図形は互いに相似な関係にある。したがって、矩形枠 204、 200、 206に基づいてオーダーシート 70に印刷される見本 111 (図 16参照）によって、ユーザは合成結果を予測することができる。尚、オーダシートテンプレート 113の枠 200に割り付けられる画像 202は、ユーザによって選択された画像でもよいし、予め ROM52に格納されている見本画像でもよい。また、枠 204、画像 202及び画像 208を合成して合成結果の見本を表示する変わりに、合成結果の見本に相当する 1つの見本画像を ROM52に格納しておき、それを割り付けてもよい。

[0069] 図 19は、本発明の第五実施例による画像処理方法を示すフローチャートである。

ステップ S101では、複合機 1は、対象物の画像 122と写真画像 126とを合成するための互いに異なる合成条件の指示を受け付ける。具体的には、合成指示受付モジユール 61は、図 20に示すメニュー画面 1100を LCD14に表示させ、その後に十字ボタン 12の操作によりユーザがいずれかの合成条件を選択し決定ボタン 10を押すことによって操作部 42から出力される信号を合成条件指示として受け付ける。合成指示受付モジュール 61は、合成結果を具体的に示す見本 111を画面表示することにより選択可能な合成条件をユーザに案内してもよいし、「上下二段組」、「重ね合わせ」などの文字列を画面表示することにより選択可能な合成条件をユーザに案内してもよい。

[0070] ステップ S102では、合成指示受付モジュール 61は、ステップ S101で受け付けた合成条件指示に応じたオーダーシートテンプレート 113及び合成テンプレート 120を ROM52から RAM53に読み込む。この処理により、合成条件指示に応じたオーダ一シート 70の自由描画領域 72が設定され、自由描画領域 72の画像 122及び写真画像 126については、合成条件指示に応じた配置、レイヤの上下関係、各レイヤの透過率、印刷用紙サイズ等が設定される。

[0071] 以上説明した本発明の第五実施例によると、オーダーシート 70にはユーザが選択する画像と手書き文字等の対象物との合成結果の見本 111が印刷されるため、ユーザは合成結果を具体的に想像しながら自由描画領域 72に対象物を記録することができる。

[0072] (第六実施例）

図 21は、本発明の第六実施例による複合機 1によって印刷されるオーダーシート 7 0に対象物が記録された状態を示す模式図である。本発明の第六実施例による複合機 1では、オーダーシート 70に複数の見本 111を印刷し、各見本 111に付された識別子 136を介して合成条件指示を受け付ける。オーダーシート 70を印刷するためのテンプレートは、見本 111を印刷するための定義情報が複数になる点を除いては第五実施例と実質的に同一であるため、説明を省略する。

[0073] 図 22は、本発明の第六実施例による画像処理方法を示すフローチャートである。

複合機 1は、ステップ S 108でスキャン要求を受け付けた後にステップ S 101を実施して合成条件指示を受け付ける。具体的には、合成指示受付モジュール 61は、図 2 3に示すメニュー画面 1110を LCD14に表示させる。メニュー画面 1110では、十字ボタン 12及び決定ボタン 10を押すことによって、オーダーシート 70の各見本 111に付された識別子 136のいずれかを選択可能である。合成指示受付モジュール 61は、ユーザが十字ボタン 12及び決定ボタン 10を押すことによって操作部 42から出力される信号に応じて、 Vヽずれかの合成条件指示を受け付ける。

ステップ SI 11では、制御部 50はステップ S110で受け付けられた合成条件指示に応じて合成テンプレートを設定する。具体的には、合成モジュール 66は、ステップ S1 10でユーザが選択した識別子に応じた合成テンプレートを ROM52から RAM53に読み込む。

[0074] 以上説明した本発明の第六実施例によると、ユーザが選択しうる合成条件に応じた複数の見本 111がオーダーシート 70に印刷される。そのためユーザは、 LCD14の解像度が低く画面サイズが小さい場合であっても、選択可能な合成条件を具体的に認識することができる。

[0075] (第七実施例）

図 1は、本発明の第七実施例による複合機 1によって印刷されるオーダーシート 70 に対象物 116が記録された状態を示す模式図である。本発明の第七実施例による複合機 1では、オーダーシート 70に合成条件を選択するための複数のチェックボックス 88を印刷し、チェックボックス 88を塗りつぶした筆跡 88mを光学的に認識することによって合成条件を設定する。オーダーシート 70を印刷するためのテンプレートは、合成結果を表す複数の見本 111のそれぞれの直下にチェックボックス 88を配置している。見本 111は請求項に記載の合成条件表記に相当する。ユーザは、いずれかのチェックボックス 88を塗りつぶすことにより、そのチェックボックス 88の真上に配置されて、る見本 111に対応する合成条件を選択することができる。チェックボックス 88を塗りつぶした筆跡 88mが合成条件指示に相当する。

[0076] 図 24は、本発明の第七実施例による画像処理方法を示すフローチャートである。

ステップ SI 11では、制御部 50は塗りつぶされたチェックボックス 88に対応する合成テンプレートを設定する。具体的には、合成条件認識ユニットとしての合成モジュール 66は、いずれのチェックボックス 88が塗りつぶされているかをプレスキャン画像に基づいて判定し、塗りつぶされているチェックボックス 88に対応する合成テンプレートを ROM52から RAM53に読み込む。その結果、オーダーシート 70に記録された合成条件指示に指示された見本 111が表す合成条件が制御部 50に認識される。

[0077] 以上説明した本発明の第七実施例によると、ユーザは自由描画領域 72に手書き文字等を記録する前後にチェックボックス 88を塗りつぶすことにより、合成条件を指示できるため、合成条件を容易に設定することができる。

[0078] (第八実施例）

図 25は、本発明の第八実施例による複合機 1によって印刷されるオーダーシート 7 0を示す模式図である。本発明の第八実施例による複合機 1では、オーダーシート 7 0に印刷条件を選択するためのチェックボックス 91、 76を印刷し、チェックボックス 91 、 76を塗りつぶした筆跡 91m、 76mを光学的に認識することによって印刷条件を設定する。ユーザは、複数のチェックボックス 91のいずれか 1つを塗りつぶすことにより、複数種類の印刷用紙力もいずれ力 1つを選択することができる。またユーザは、複数のチェックボックス 76のいずれか 1つを塗りつぶすことにより、印刷枚数を選択することができる。

本発明の第八実施例によると、ユーザは自由描画領域 72に手書き文字等を記録する前後にチェックボックス 91、 76を塗りつぶすことにより、印刷条件を指示できるため、印刷条件を容易に設定することができる。

[0079] (第九実施例）

図 26は、本発明の第九実施例による複合機 1の機能ブロック図である。第三操作手段 304は、操作部 42、合成指示受付モジュールを実行する制御部 50 等で構成され、後述する画像選択領域 71で選択された画像と自由描画領域 72を表す画像とのレイアウトを選択する所定のボタン操作を受け付ける。

第一操作手段 300は、合成指示受付モジュールを実行する制御部 50、操作部 42 等で構成され、所定のボタン操作をオーダーシート要求として受け付ける。

[0080] 第一出力手段 310は、印刷制御モジュールを実行する制御部 50、カード読み書き部 41、プリントユニット 30等で構成される。第一出力手段 310は、第一操作手段 300 によりオーダーシート要求が受け付けられると、リムーバブルメモリ 3に記憶された画像データと ROM52に記憶されたテンプレートを読み込んで後述するオーダーシートを印刷する。

[0081] 第二操作手段 302は、合成指示受付モジュールを実行する制御部 50、操作部 42 等で構成され、所定のボタン操作を合成画像の印刷要求として受け付ける。

オーダー読み取り手段 306は、読み取り制御モジュール及び画像選択指示認識モジュールを実行する制御部 50、スキャンユニット 20等で構成され、第二操作手段 30 2により合成画像の印刷要求が受け付けられると、オーダーシート 70を読み取り、検証マーク 81、基準マーク 82、塗りつぶされたチェックボックス 74m、 76m、 79m、 86 m、及び 87mを光学的に認識し、また自由描画領域 72の画像を出力する。画像選択指示認識ユニットとしての画像選択指示認識モジュールは、チェックボックス 74を読み取った画像に基づ、て、ユーザが選択した画像ファイルを認識するプログラム部品である。

[0082] 第二出力手段 308は、合成モジュールを実行する制御部 50、プリントユニット 30等で構成され、画像選択領域 71で選択された画像と自由描画領域 72を表す画像との合成画像を印刷する。尚、後述するプレビューでは、第二出力手段 308は、合成画像を印刷せずに LCD14に表示する。

[0083] 図 27は、図 28に示すディレクトリ構造のリムーバブルメモリ 3が接続された状態で複合機 1によって印刷されるオーダーシート 70の一例を示す模式図である。オーダーシート 70のレイアウトは ROM52に記憶されたオーダーシートテンプレートによって定義されている。図 31は、必要事項がユーザによって記入されたオーダーシート 70の一例を示す模式図である。オーダーシート 70に表記される各要素の配置は、基準マーク 82を基準として設定されてヽる。

[0084] 基準マーク 82は、オーダーシート 70の上部左隅にレイアウトされて!/、る。オーダー読み取り手段 306が基準マーク 82の位置を認識することにより、オーダーシート 70 に表記されてヽる各要素の位置を相対的に認識できる。

画像選択領域 71には、リムーバブルメモリ 3の DCIMフォルダ 90に保存されている画像ファイル（例えば、木. jpgゝ顔. jpgゝ花. jpgゝ海. jpgゝもみじ. jpgゝ日の出. jpg 、山. jpg、人. jpg)に格納されているサムネイル画像 73とチェックボックス 74がレイァゥトされている。チェックボックス 74を塗りつぶすことにより、そのチェックボックス 74m の直上にレイアウトされているサムネイル画像 73m (例えば、日の出. jpgのサムネィル画像）に対応する画像ファイルの本画像を合成対象として選択できる。サムネイル画像 73は請求項に記載の画像表記に相当する。チェックボックス 74mを塗りつぶした筆跡が請求項に記載の画像選択指示に相当する。尚、リムーバブルメモリ 3の DCI Mフォルダ 90に保存されている画像ファイルは、本画像で表記してもよいし、フアイル名ゃ内部識別子を印刷して表記してもよい。

[0085] 自由描画領域 72は、手書き文字 (例えば、「賀正」）を描画したり、雑誌の切り抜きを貼付けたりするための空白領域であって矩形枠で囲まれている。自由描画領域 72 に手書きされる文字や図形の筆跡、自由描画領域 72に貼り付けられる印刷物、自由描画領域 72に印刷される文字や図形が請求項に記載の対象物に相当する。

[0086] 印刷枚数を選択する領域 75には、 0〜99枚までの印刷枚数の各桁の数字に対応するチェックボックス 76及びプレビューを選択するチェックボックス 84がレイアウトされている。左の列にレイアウトされているチェックボックス 76を塗りつぶすことにより印刷枚数の十の位の数字を選択し、右の列にレイアウトされているチェックボックス 76を塗りつぶすことにより印刷枚数の一の位の数字を選択できる。

[0087] レイアウト選択領域 77には、レイアウトを模式的に示す画像 78とチェックボックス 79 とがレイアウトされている。チェックボックス 79を塗りつぶすことにより、塗りつぶされたチェックボックス 79の直上にレイアウトされている画像 78に対応するレイアウトを選択できる。チェックボックス 79を塗りつぶした筆跡（79m:図 31参照）が請求項に記載の合成条件指示に相当する。 [0088] 重畳合成条件選択領域 85には、チェックボックス 86、チェックボックス 87が表示されている。チェックボックス 86を塗りつぶすことにより、画像選択領域 71で選択された画像に手書き文字を重畳合成するとき白縁取りを施すか否かの境界処理条件を選択することができる。また、チェックボックス 87を塗りつぶすことにより、手書き文字を表すレイヤの透明度 (例えば、 0%)を選択できる。尚、境界処理条件として白縁取りの幅を設定できてもよ!、し、重畳合成条件として他の透明度を選択できてもょ、。

[0089] 図 29は、本発明の第九実施例による複合機 1で合成画像を印刷する処理を示すフローチャートである。図 ₃₀は、 LCD14の画面遷移を示す模式図である。

複合機 1にリムーバブルメモリ 3を接続し、メニュー画面 100でユーザが十字ボタン 12により「オーダーシートを印刷する」を選択して決定ボタン 10を押すと、 LCD14にはオーダーシート 70のテンプレートを選択する画面 102が表示される。画面 102でユーザが十字ボタン 12でテンプレート (例えば、年賀状)を選択して決定ボタン 10を押すと、第一操作手段 300がオーダーシート要求を受け付ける。第一操作手段 300 がオーダーシート要求を受け付けると、ステップ S12に進む (ステップ S10)。

[0090] ステップ S12では、オーダーシート 70の印刷中であることを示す画面 104が LCD1 4に表示され、第一出力手段 310がオーダーシート 70を印刷する。

ステップ S14において、ユーザは印刷されたオーダーシート 70のチェックボックス 7 4、 76、 79、 86、 87を、設定しょうとする画像処理条件に応じて塗りつぶし、自由描画領域 72に手書き文字を描画する（図 31参照)。

[0091] 次に、ユーザがオーダーシート 70を図示しな!、原稿台の所定の位置に置き、メ-ュ一画面 100で十字ボタン 12により「合成画像を印刷する」を選択して決定ボタン 10を押すと、第二操作手段 302がスキャン要求を受け付ける。第二操作手段 302がスキヤン要求を受け付けるとステップ S 18に進む (ステップ S 16)。

[0092] ステップ S18では、合成画像の印刷中であることを示す画面 106が LCD14に表示され、第二出力手段 308が合成画像を印刷する。合成画像の印刷が完了すると、メニュー画面 100力 SLCD14に表示される。

図 32はオーダーシート 70を印刷する処理 (ステップ S12)の詳細を示すフローチヤートである。 [0093] 第一操作手段 300によりオーダーシート要求が受け付けられると、第一出力手段 3 10は、リムーバブルメモリ 3の DCIMフォルダ 90に保存されている画像ファイルに識別子を付与する（ステップ S200)。このとき、画像ファイルのファイル名のアスキーコード順に、各画像ファイルに識別子としての連続番号を付与する。

[0094] 次に、チェックサムを設定する（ステップ S 201)。チェックサムは、リムーバブルメモリ 3の DCIMフォルダ 90に保存されているデータの内容に応じて算出され、 RAM53 の所定の領域に保存される。

次に、ステップ S10で選択されたテンプレートを ROM52から RAM53に読み込み（ステップ S202)、第一出力手段 310は、当該テンプレートで定義されたレイアウト枠に画像ファイルのサムネイル画像及び検証マーク 81を割り付けてオーダーシート 70 を印刷する (ステップ S203)。

[0095] 図 33は合成画像を印刷する処理 (ステップ S18)の詳細を示すフローチャートである。

ステップ S300では、オーダー読み取り手段 306が低解像度のモノクロ 2値画像としてオーダーシート 70を読み取り、基準マーク 82に基づいて検証マーク 81とチェックボックス 74、 76、 79、 86、 87との位置を画像上で特定した上で、検証マーク 81と、塗りつぶされたチェックボックス（図 1参照）74m、 76m、 79m、 86m、及び 87mによつて選択された処理条件と、を光学的に認識する。

[0096] ステップ S302では、ステップ S300で認識された検証マーク 81に対応するチェックサムとステップ S201で設定したチェックサムとを比較し、オーダーシート 70に表記されて、る画像ファイルとリムーバブルメモリ 3に格納されて、る画像ファイルが一致しているか否かを判断する。一致していればステップ S304に進み、一致していなければオーダーシート 70に表記されている画像ファイルとリムーバブルメモリ 3に格納されて、る画像ファイルが異なる旨を警告する画面を LCD14に表示する (ステップ S306

) o

[0097] ステップ S304では、画像選択領域 71で 2つ以上の画像ファイルが選択されていないかを判別する。画像ファイルが 1つだけ選択されていればステップ S308に進み、 2 つ以上選択されて、ればその旨を警告する画面を LCD14に表示する (ステップ S3 10)。

次に、ステップ S300で認識された基準マーク 82に基づいて自由描画領域 72の範囲を認識する (ステップ S308)。基準マーク 82を利用して画像上で自由描画領域 72 の範囲を特定することにより、原稿台上で予め決められた位置にオーダーシート 70 が置かれていなくても自由描画領域 72の位置を正確に特定することができる。

[0098] 次に、オーダー読み取り手段 306が自由描画領域 72とその近傍の余白領域 83 ( 図 27参照）を高解像度で読み取る (ステップ S312)。

次に、自由描画領域 72を表す画像から手書き文字等の対象物の領域を抽出する（ステップ S314)。尚、ステップ S314を行わず、自由描画領域 72を表す画像をそのまま画像選択領域 71で選択された画像と合成すると、自由描画領域 72の余白を含む全体を表す画像を画像選択領域 71で選択された画像に合成した画像を作成することがでさる。

[0099] ステップ S316では、ステップ S314で抽出された領域の手書き文字等の対象物と画像選択領域 71で選択された合成対象の画像とを、レイアウト選択領域 77で選択されたレイアウトに応じて合成する。

次に、印刷枚数を選択する領域 75で選択された印刷枚数だけ合成画像が印刷されるまで合成画像の印刷を第二出力手段 308で繰り返す (ステップ S318、 320)。

[0100] 図 34は、自由描画領域 72を表す画像から手書き文字の領域を抽出し、抽出した領域を画像選択領域 71で選択された画像に重畳合成するための処理 (ステップ S 3 14)の詳細を示すフローチャートである。

ステップ S400では、オーダーシート 70の地色が表れている余白領域 83と手書き文字とを分けるしきい値を決定する。具体的にはまず始めに、余白領域 83の輝度ヒストグラムを作成する。この輝度ヒストグラムでは、図 35に示すように、オーダーシート 70の地色に対応する輝度値に分布が集中する。そこで次に、自由描画領域 72を表す画像力も対象物の領域を抽出するためのしきい値を、その分布が集中する範囲の近傍に設定する。これにより、オーダーシート 70に用いられた印刷用紙の地色に応じた適切な値に設定することができる。

[0101] ステップ S402では、特定したしきい値に基づいて、自由描画領域 72を表す画像から手書き文字の領域を抽出し、当該領域のアルファチャンネルの値を重畳合成条件選択領域 85のチェックボックス 87で選択された透明度に設定し、それ以外の領域のアルファチャンネルの値を完全な透明に設定する。アルファチャンネルとは、画素毎に当該画像のレイヤの透明度を表すチャンネルである。

[0102] ステップ S403では、手書き文字として抽出された領域に含まれているノイズを除去する。具体的には、抽出された領域のうち所定数以下の画素数で構成される島状の領域の透明度を完全な透明に設定する。ここで、図 36 (b)は、アルファチャンネルにおいてノイズに相当する領域の透明度を変更しない場合、すなわちノイズの除去を行わない場合の重畳合成処理を示す模式図であり、図 36 (c)は、アルファチャンネルにおいてノイズに相当する領域の透明度を完全に透明にした場合、すなわちノィズの除去を行った場合の重畳合成処理を示す模式図である。

[0103] 次に、重畳合成条件として白縁取りが選択されていれば、アルファチャンネルの不透明領域を膨張させる (ステップ S404)。この結果、ステップ S316では、手書き文字の周辺のオーダーシート 70の地色が画像選択領域 71で選択された画像の上に重畳合成されるため、手書き文字等に縁取りをして合成画像を形成することができる（図 36 (d)参照)。以上ステップ S314の処理を詳細に説明した。

[0104] 以上説明した本発明の第九実施例に係る複合機 1によると、ユーザはアクセス可能な画像データ、選択可能なレイアウト、印刷枚数、境界処理条件等の画像処理条件を容易に認識することができる。また、ユーザはアクセス可能な画像データからの合成対象となる画像の選択、画像処理条件の選択、及び合成対象となる画像と合成する手書きメッセージ等の入力を容易に行うことができる。したがって、 HMIを提供するハードウェアが簡素なシステムであっても、ユーザは、そのシステムに所望の画像と手書きメッセージ等を容易に合成表示することができる。

また、レイアウトを模式的に示す画像 78と合成対象の写真画像を表すサムネイル画像 73等の画像とが自由描画領域 72を囲む矩形枠とともに印刷されているため、ュ一ザは写真画像と手書き文字等がどのように合成される力を正確に予想しながら手書き文字等の対象物を自由描画領域 72に記録することができる。

[0105] さらに、オーダーシート 70が基準マーク 82を有しているので、手書きメッセージ等が表記された自由描画領域 72の位置を、オーダーシート 70を表す画像上で相対的に認識できるため、現実の自由描画領域 72を正確に認識することができる。

さらに、画像処理条件として重畳合成を選択することができるので、例えば写真の上に直接メッセージを手書きしたデザインの印刷物を作成することができる。

[0106] さらに、余白領域 83を読み取ってオーダーシート 70の地色を認識するため、自由描画領域 72を表す画像から手書き文字の領域を精度よく抽出することができる。さらに、オーダーシート 70を低解像度で読み取り、自由描画領域 72とその近傍の余白領域 83を高解像度で読み取ることにより、合成画像の画質を低下させることなくオーダーシート 70の読み取り時間を短縮することができる。

また、本発明の画像処理システムは、用紙搬送経路に設けられる紙位置検出用の光センサを備えるプリンタ単体で構成してもよい。すなわち、そのような紙位置検出用の光センサによってオーダーシートの塗りつぶされたチェックボックスを認識してもよい。

[0107] また、画像選択領域 71にはサムネイル画像 73をレイアウトする代わりに、識別子やファイル名をレイアウトしてもよい。この場合、 LCD14にサムネイル画像 73とそれに対応する識別子を表示できる構成であることが望ま U、。

(第十実施例）

第十実施例による複合機 1では、画像選択領域 71で 2つの画像ファイルを選択できるオーダーシート 70を用いる。

[0108] 図 37は、本発明の第十実施例に係る画面の遷移を示す模式図である。

メニュー画面 100が表示された状態において、ユーザが十字ボタン 12により「ォーダーシートを印刷する」を選択して決定ボタン 10を押すと、 LCD14にはレイアウトを選択する画面 2021が表示される。画面 2021〖こは、レイアウトを模式的に表すアイコン 203が表示される。画面 2021が表示された状態において、ユーザが十字ボタン 1 2でいずれか 1つのアイコンを選択して決定ボタン 10を押すと、当該アイコンの示すレイアウトが選択され、第一操作ユニット 300が選択されたレイアウトに応じたオーダ一シート 70の印刷要求を受け付ける（ステップ S10)。

[0109] 図 38は、本発明の第十実施例に係るオーダーシート 70の一例を示す模式図である。

画像選択領域 71には、サムネイル画像 73毎にチェックボックス 74a及び 74bが印刷されている。ユーザは、チェックボックス 74aのいずれ力 1つを塗りつぶし、チェックボックス 74bのいずれ力 1つを塗りつぶすことにより 2つの画像ファイルを選択することができる。

[0110] 自由描画領域 72には、画像選択領域 71で選択された画像ファイルが表す画像がレイアウトされる領域 89a及び 89bを示す矩形の枠が表記されている。ユーザは、領域 89a及び 89b外の自由描画領域 72に手書き文字を描画することができる。自由描画領域 72に対する枠 89aと枠 89bの位置及び大きさは、ユーザにより選択される 2つの画像の合成レイアウトにおける自由描画領域 72が読み取られた画像に対する位置及び大きさに一致して、る。

以上説明した本発明の第十実施例による画像処理システムでは、ユーザが選択したレイアウトに応じた態様のオーダーシート 70が出力されるため、ユーザは自由描画領域 72に手書きメッセージ等を表記するとき、合成対象となる画像との合成結果を容易にイメージすることができる。また、オーダーシート 70のチェックボックス 74a及び 7 4bを塗りつぶすだけで、 2つの合成対象となる画像を選択することができる。

[0111] (第十一実施例）

本発明の画像処理システムの第十一実施例としてのオーダーシート受付端末は、オーダーシートを読み取り、印刷の注文を受け付ける装置である。

[0112] 図 39は、本発明の第十一実施例によるオーダーシート受付端末を利用した印刷システムを表す模式図である。印刷システム 6は、オーダーシート受付端末 4と、オーダ一シート受付端末 4に接続されたプリンタ 212と、 PC210と、 PC210に接続されたプリンタ 211とで構成されて！、る。

オーダーシート受付端末 4は、例えばディジタル画像のプリントサービスを提供する店舗、コンビ-エンスストア等に設置されている。オーダーシート受付端末 4は、入力ユニット 213、操作ユニット 214、オーダー読み取りユニット 306、及び出力ユニット 2 15を備える。操作ユニット 214は、第九実施例の第二操作ユニットと機能が実質的に同一である。出力ユニット 215は、第九実施例の第二出力ユニットと機能が実質的に同一である。入力ユニット 213は、リムーバブルメモリ 3に記憶されたデータを入力するインタフェースである。

[0113] オーダーシート受付端末 4は、操作ユニット 214によって、ユーザによる所定のボタン操作をオーダーシート 70の読み取り要求として受け付け、出力ユニット 215によつて、オーダーシート受付端末 4に設けられた図示しない表示装置に合成画像の印刷結果のプレビューを表示する。合成画像は、入力ユニット 213によってリムーバブルメモリ 3から入力される画像に基づいて生成され、オーダーシート受付端末 4に接続されたプリンタ 212で印刷される。

[0114] 以上説明した本発明の第十一実施例による画像処理システムでは、ユーザは、高画質印刷の可能なプリンタを所有していなくても、手書き文字等をレイアウトした高画質の合成画像の印刷物を容易に入手できる。

(第十二実施例）

第十二実施例による画像処理システムでは、印刷枚数の設定をキー操作で受け付ける。

[0115] 図 40は、本発明の第十二実施例における LCD14の画面遷移を示す模式図、図 4

1は、本発明の第十二実施例おける画像処理システムで合成画像を印刷する処理を示すフローチャートである。

複合機 1は、合成画像を印刷する処理のステップ S330において、オーダーシート 7 0のプレビューを選択するチェックボックス 84が塗りつぶされていると認識するとプレビュー要求と判定しステップ S332に進み、プレビュー要求でな、と判定するとステツプ S318に進む。ステップ S332において、複合機 1は LCD14にテストモード画面 22 0を表示する。テストモード画面 220には、自由描画領域 72に記載された手書き文字と画像選択領域 71で選択された画像ファイルが表す画像の合成画像 228が表示される。また、テストモード画面 220には「印刷」ボタン 222と枚数設定ボックス 224が表示される。テストモード画面 220において、十字ボタン 12を上下に操作すること〖こよって枚数設定ボックス 224に所望の印刷枚数を設定することができる。十字ボタン 1 2が左右に操作されると「印刷」ボタン 222又は「戻る」ボタン 226が選択される。「印刷」ボタン 222が選択された状態で決定ボタン 10が押されると、設定されている印刷枚数分の印刷要求が受け付けられ、ステップ S318に進む (ステップ S334)。ステツプ S318と S320では、設定された印刷枚数だけ合成画像が印刷されるまで合成画像の印刷を第二出力ユニット 308で繰り返す。

[0116] 尚、ステップ S332において、テストモード画面 220に合成画像 228を画面表示した力第二出力ユニットにより合成画像 228を一枚印刷表示してもよい。

以上説明した本発明の第十二実施例による画像処理システムでは、オーダーシート 70において設定されたプレビュー要求に対し、合成画像を画面表示あるいは印刷表示した後、ユーザが所望の印刷枚数を設定するとき、印刷枚数を設定するためだけに再度オーダーシートを読み込む必要が無い。すなわち、ユーザは所望の印刷枚数を設定するとき、長時間を要するオーダーシートの読み込みを行う必要がなぐ簡単なボタン操作により印刷枚数の設定が行えるため、作業時間を短縮することができる。

[0117] (第十三実施例）

第十三実施例による画像処理システムでは、オーダーシート 70を低解像度で読み取ったときに得られる自由描画領域 72の画像と画像選択領域 71で選択された画像ファイルのサムネイル画像を画面に合成表示した後、ユーザの印刷要求を受け付けると、オーダーシート 70を高解像度で読み取ったときに得られる自由描画領域 72の画像と画像選択領域 71で選択された画像ファイルの本画像を合成印刷する。

[0118] 図 42は、本発明の第十三実施例における LCD14の画面遷移を示す模式図、図 4 3は、本発明の第十三実施例おける画像処理システムで合成画像を印刷する処理を示すフローチャートである。

複合機 1は、ステップ S340において、ステップ S300で低解像度で読み取った自由描画領域 72の画像と画像選択領域 71で選択された画像ファイルのサムネイル画像とをオーダーシート 70で設定された画像処理条件に基づいて合成した合成画像 23 8を、 LCD14のテストモード画面 230に表示する。テストモード画面 230に表示された「印刷」スィッチ 232が、十字ボタン 12の操作により選択され、決定ボタン 10が押されるとスキャン要求が受け付けられ (ステップ S342)、ステップ S312に進む。ステップ S312、 S314、 S316、 S318、 S320にお!/ヽて ίま、第九実施 ί列で説明したように、高解像度で自由描画領域 72を読み取り、画像選択領域 71で選択された画像ファイルの本画像と自由描画領域 72の高解像度画像とを合成し、設定された枚数分の印刷を行う。また、テストモード画面 230は、「戻る」スィッチ 236を備え、ユーザが十字ボタン 12により「戻る」スィッチ 236を選択し決定ボタン 10を押すと、印刷を行わず (ステツプ S342)、メニュー画面 1000を表示する。

[0119] 以上説明した本発明の第十三実施例による画像処理システムでは、オーダーシート 70を低解像度で読み取ったときに得られる自由描画領域 72の画像と画像選択領域 71で選択された画像ファイルのサムネイル画像を、オーダーシート 70で設定された画像処理条件に基づいて合成し、テストモード画面 230に表示する。このため、ュ一ザはおよその印刷結果を確認した後に印刷要求をすることができる。したがって、本発明の第十三実施例による画像処理システムでは、テスト印刷で消費される印刷用紙とインクを節減することができる。また、本発明の第十三実施例による画像処理システムでは、テストモード画面 230の合成画像 238を低解像度で読み取られた画像とサムネイル画像に基づ、て表示するため、印刷結果の確認に要する時間を短縮することができる。

[0120] (第十四実施例）

第十四実施例による画像処理システムでは、オーダーシート 70において、合成対象となる画像の選択と、画像処理条件であるレイアウトと印刷枚数と境界処理条件を設定可能とし、オーダー読み取りユニット 306においてオーダーシート 70を読み取つた後、手書きメッセージ等を別途読み込み、選択された画像と合成表示する。

[0121] 図 44は、本発明の第十四実施例に係るオーダーシート 70を示す模式図である。ォ一ダーシート 70は、画像選択領域 71と、印刷枚数を選択する領域 75と、レイアウト選択領域 77と、重畳合成条件選択領域 85を備える。

図 45は、本発明の第十四実施例に係る LCD14の画面遷移を示す模式図、図 46 は、本発明の第十四実施例に係る画像処理システムで合成画像を印刷する処理を示すフローチャート、図 47はユーザ原稿 260を示す模式図である。

[0122] 複合機 1は、ユーザがオーダーシート 70を図示しない原稿台に置き、メニュー画面 1000で十字ボタン 12により「合成画像を印刷する」を選択して決定ボタン 10を押すと、第二操作ユニット 302がスキャン要求を受け付け、合成画像を印刷する処理を開始する。複合機 1は、合成画像を印刷する処理のステップ S300において、低解像度のモノクロ 2値画像としてオーダーシート 70を読み取って合成対象となる画像と画像処理条件を認識し、ステップ S302及びステップ S304にお!/、て各種のエラーのチェックを行うと、 LCD14に原稿セット待機画面 240を表示する。次に、ユーザがユーザ原稿 260を図示しない原稿台に置き、決定ボタン 10を押すと、ユーザ原稿 260のセットが完了したと判定し (ステップ S350)、ステップ S352に進む。ここで、矩形のユーザ原稿 260は、原稿台の予め決められた位置に置かれる矩形の原稿でもよいし、原稿台の任意の位置に置かれる任意の形状の原稿でもよい。次に、複合機 1は、 LCD 14に合成画像の印刷中であることを示す画面 242を表示する。また、複合機 1は、低解像度のモノクロ 2値画像として原稿台全体の画像を読み取って、読み取った画像から原稿台の合成対象領域を特定する (ステップ S352)。このとき、ユーザ原稿 260 の全体を合成対象領域としてもよいし、ユーザ原稿 260の台紙に相当する領域を除外した領域を合成対象領域としてもよい。以後、合成対象領域を手書き文字等の対象物の領域として高解像度で読み取り、合成画像を生成し、印刷する処理については第一実施例と同様である。

[0123] 以上説明した本発明の第十四実施例による画像処理システムでは、合成する対象物を多様ィ匕することができる。

[0124] 以上説明した複数の実施例では、自由描画領域 72の画像と画像選択領域 71で選択された画像を合成した結果を印刷する例にっヽて説明した力画像処理システムは、自由描画領域 72の画像と画像選択領域 71で選択された画像を合成して得た画像を表すデータをリムーバブルメモリ、通信回線等に出力するだけでもよい。

また、本発明の画像処理システムは、複合機 1単体でなくても、 PCと PC〖こ接続されたプリンタとイメージスキャナとで構成してもよい。この場合、 PCとイメージスキャナとを接続するための USB (Universal Serial Bus)インタフェース、 PCとプリンタとを接続するための USBインタフェース等のインタフェースが特許請求の範囲に記載の「プリントユニットとスキャンユニットとが接続されるインタフェース」に相当する。

[0125] (オーダシートの構成一覧）図 48は、ここまでに説明したオーダシートに配置された構成要素の組み合わせをまとめた表である。オーダシートに配置される構成要素の組み合わせは、この表に限定されない。すなわち制御部 50がオーダシート要求を受け付ける時に、十字ボタン 12 や決定ボタン 10の操作によって選択されるべき、もしくはオーダシートテンプレートに予め設定されるべき、オーダシートに印刷すべき構成要素は、この表以外の組み合わせとしてもよい。また各種印刷条件を、十字ボタン 12や決定ボタン 10によるユーザ選択、もしくはオーダシートに提示される複数の選択肢力のユーザ選択のいずれにするかは、適宜変更可能である。

[0126] (第十五実施例）

1.画像処理システムの構成

図 50は、本発明による画像処理システムの第十五実施例としての複合機 1の外観を示す図である。図 51は、複合機 1を示すブロック図である。複合機 1は、リムーパブルメモリ 20や図示しな!、PC (Personal Computer)力入力される画像を印刷する機能と、複写機能とを有する。尚、画像処理システムは、画像の読み取り機能を有するスキャナと、印刷機能を有するプリンタと、スキャナとプリンタの制御機能を有する PC とで構成してもよい。

[0127] スキャンユニット 50は、主に上部ケース 14に収容され、照明部 52、イメージセンサ 5 4、 AFE (Analog Front End)部 56、センサ駆動部 74、センサキャリッジ駆動部 76等を備える。照明部 52は、主走査方向に長い蛍光管ランプ等で構成される。センサ駆動部 74に駆動されるイメージセンサ 54は、 RGBの 3チャネルの光電素子群を備えるカラー CCDリニアイメージセンサ等のリニアイメージセンサである。イメージセンサ 54 は、透明な原稿台 12と平行に移動する図示しないセンサキャリッジに搭載されている。イメージセンサ 54は、図示しないレンズ及びミラーにより受光面に結像される原稿の光学像の濃淡に相関する電気信号を出力する。センサキャリッジ駆動部 76は、図示しないモータ、駆動ベルト、駆動回路等を備える。センサキャリッジ駆動部 76は、主走査方向に垂直に架設された図示しないガイドロッドに沿ってセンサキャリッジを往復移動させる。イメージセンサ 54が主走査方向と垂直な方向に移動することにより二次元画像を読み取り可能となる。 AFE部 56は、増幅、ノイズ除去等のアナログ信号処理回路、 AZD変換器等を備える。

[0128] プリントユニット 86は、主に下部ケース 16に収容され、インクジェット方式で用紙に画像を形成するための印字ヘッド 84、ヘッドキャリッジ駆動部 78、送紙部 80、これらを制御する印刷制御部 82等を備える。尚、プリントユニット 86はレーザ方式等の他の印刷方式に対応する構成でもよい。印字ヘッド 84は、インクカートリッジが搭載される図示しないヘッドキャリッジに設けられ、ノズル、ピエゾ素子、ピエゾ素子に印加する駆動信号を出力するピエゾ駆動回路等を備える。ピエゾ駆動回路はピエゾ素子に印加する駆動信号の波形によって、ノズルから噴射されるインク滴を大中小の 3段階に制御することができる。ピエゾ駆動回路は、印刷制御部 82から出力される制御信号に応じて所定の波形の駆動信号をピエゾ素子に印加する。ヘッドキャリッジ駆動部 7 8は、図示しないモータ、駆動ベルト、モータ駆動回路等を備える。ヘッドキャリッジ駆動部 78は、用紙の搬送方向と垂直に印字ヘッド 84を往復移動させる。送紙部 80は、図示しない用紙搬送ローラ、モータ、モータ駆動回路等を備える。送紙部 80は、用紙搬送ローラを回転させることにより用紙を印字ヘッド 84の移動方向軸線と垂直な方向に搬送する。印刷制御部 82は、 RAM60から順次印字データが転送されるバッファメモリと、ノッファメモリに格納された印字データを印字ヘッド 84に出力するタイミングをヘッドキャリッジの位置に応じて制御する機能と、ヘッドキャリッジ駆動部 78を制御する機能と、送紙部 80を制御する機能とを備える ASICである。

[0129] アクセスユニットとして機能する外部メモリコントローラ 70は、カードスロット 18から揷入されたリムーバブルメモリ 20に接続される。リムーバブルメモリ 20に格納されたデータは外部メモリコントローラ 70によって読み出され、 RAM60に転送される。

操作部 68は、メニューを表示するための LCD24と、メニューを操作するための十字ボタン 22、 OKボタン 28、キャンセルボタン 21、印刷指示ボタン 30、テンキー 26等の各種の押しボタンを備える。尚、操作部 68をタツチパネル、ポインティングデバイス等で構成してもよい。

アクセスユニットとして機能する通信部 69は、制御部 58が PC等の外部のシステムと通信するための通信インタフェースである。通信部 69は、 LAN、インターネット、 U SB等を通じて外部のシステムと通信する。 [0130] 制御部 58は、 RAM60、 ROM62及び CPU64を備える。 CPU64は ROM62に格納されている制御プログラムを実行して複合機 1の各部を制御する。 ROM62は、制御プログラムを格納している不揮発性メモリである。記録媒体としての RAM60は、制御プログラムやスキャンユニット 50に読み取られた画像、背景画像の色域テーブル等の各種のデータが一時的に格納される揮発性メモリである。制御プログラムは遠隔地のサーバからネットワークを経由して ROM62に格納してもよいし、リムーバブルメモリ 20等のコンピュータ読み取り可能な記録媒体を経由して ROM62に格納してもよい。制御部 58は制御プログラムを実行することにより、減色処理ユニット、オーダシート印刷制御ユニット、合成ユニット及び合成印刷制御ユニットとして機能する。

ディジタル画像処理部 66は、 JEPG画像のデコード、解像度変換、アンシャープ処理、階調補正、二値化、分版処理等の画像処理を CPU64と協働して実行する DSP 等の専用回路である。

以上、複合機 1のハードウェア構成について説明した。次にオーダシートの印刷処理について説明する。

[0131] 2.オーダシートの印刷処理

図 52はオーダシートの印刷処理の流れを示すフローチャートである。図 52に示す処理は、モード選択メニューでオーダシート印刷モードが選択されると開始され、制御部 58が ROM62に格納された制御プログラムの所定のモジュールを実行することにより実行される。

はじめに制御部 58は合成対象の写真画像であるユーザ画像を設定する (ステップ S100)。具体的には例えば、制御部 58は、リムーバブルメモリ 20に格納されたユーザ画像を LCD24に表示し、十字ボタン 22、 OKボタン 28等の操作によるユーザ画像の選択指示を受け付けると、選択指示に応じたユーザ画像を合成対象として設定する。

[0132] ステップ S102、 104、 106、 108、 110で【ま、 ff¾御咅 58ίまディジタノレ画像処理咅 6と協働してユーザ画像力も背景画像を生成する。背景画像の元になるユーザ画像は、手書き文字等の対象物と合成される最高解像度の画像でもよいし、サムネイル画像でもよい。サムネイル画像に基づいて背景画像を形成することにより、処理時間を短縮することができる。 JPEGフォーマット等のユーザ画像はデコードされると RGBの 3つのカラーチャネルを有する。ユーザ画像の色域は、各チャネルの階調値が 1バイトで構成されると、 16777216 (256 X 256 X 256)の色値力ら構成される。ユーザ画像の色域が色空間の全体に拡がっている場合、印刷されたユーザ画像の上にカラ一ペンなどで書き込まれた文字の領域を光学的に認識することは極めて困難である。ユーザ画像の色域と文字の領域の色域が重なっていない場合、特定の色域内の画素を文字の領域と判定することができる。ユーザ画像の上に書き込むことのできる文字などの対象物の色域の範囲を広げるためには、すなわち、ユーザが利用可能な色を多くするためには、対象物の下に印刷されているユーザ画像の色域を狭くしなければならない。以下、ユーザ画像の色域を減縮するために複合機 1が実行する様々な画像処理につ、て説明する。

[0133] 図 53はユーザ画像の色域とオーダシートに印刷される背景画像の色域を示す模式図である。ユーザ画像が表す対象物は任意であるためユーザ画像の色域はフルカラー（例えば 16777216色）の色域である。背景画像の色域を狭くするため、始めに制御部 58はユーザ画像をグレートーン画像に変換する（ステップ S102)。

図 54はユーザ画像力も背景画像が生成されるまでの過程における階調特性の変化を示す図である。図 54 (A)に示す階調特性を有するユーザ画像がグレートーン画像に変換されると、グレートーン画像の階調特性は図 54 (B)に示すように RGBの各チャネルのヒストグラムが一致するようになる。制御部 58は、 RGBから明度を求め、明度と線形な関係を有する値に RGBの階調値を変換してグレートーン画像を生成してもよ、し、 Gチャネルの階調値に R及び Bチャネルの階調値を変換してグレートーン画像を生成してもよい。

[0134] 次に制御部 58は、グレートーン画像をシアンのモノトーン画像に変換する（ステップ S104)。具体的には例えば制御部 58は、シアンの補色である Rのチャネルの階調値だけをそのままにして G及び Bのチャネルの階調値を全て 1つの固定値 (例えば 256 Z256)に設定する。尚、モノトーン画像の色相は特にシアンに限定されるものではなぐ単一の色相であればよいが、シアン、マゼンタ、イェロー等のプリントユニット 86 のインク色の色相が望ましい。図 54 (B)に示す階調特性を有するグレートーン画像を、 G及び Bチャネルの階調値を全て最大値に変換してシアンのモノトーン画像に変換すると、モノトーン画像は図 54 (C)に示す階調特性になる。

次に制御部 58は、シアンのモノトーン画像の Rチャネルのヒストグラムを平坦ィ匕する

(ステップ S106)。具体的には例えば制御部 58は、 Rチャネルの階調値の頻度を最小値力も順に加算し、目標頻度に最も近い値になったら、それまでに頻度を加算した階調値 [r〜r ]の画素に平坦ィ匕後の最小階調値 Rを設定する。次に制御部 58は R

1 P 1

チャネルの階調値!：カゝら再び各階調値の頻度を順に加算していき、目標頻度に最

P+1

も近い値になったら、それまでに頻度を加算した階調値 [r 〜r ]の画素に平坦化後

P+1 Q

の階調値 Rを設定する。階調値を変換する際、制御部 58は周辺画素の平均階調値

2

などに応じて新たな階調値を設定してもよ、し、ランダムに新たな階調値を設定してもよい。シアンのモノトーン画像の Rチャネルのヒストグラムを平坦ィ匕すると、モノトーン画像は図 54 (D)に示す階調特性になる。

Rチャネルの階調値の標準偏差を減少させる方法としては、上述したヒストグラム平坦化以外に、例えばパラメトリック変換や線形変換を採用することができる。また、ュ一ザ画像の階調特性を解析し、ユーザ画像の階調特性に応じてこれらの変換方法を切り換えてもよ!/、し、ユーザ画像の階調特性力 ¾チャネルの階調値の標準偏差を減少させなくても背景画像で十分なコントラストを得られる特性である場合には、 Rチャネルの階調値の標準偏差を減少させるこれらの変換を実行しな、ようにしてもょヽノラメトリック変換で目標とするヒストグラム g (j = l, 2, · ' ·Μ)は次式（1)で与えられる。

[数 1]

^{S l} ) . . . ( i )

ノラメータは例えば p = 0. 5〜0. 7に設定する。このようなパラメータを設定することにより、ヒストグラム平坦ィ匕に比べて頻度の低い階調値のバンド (値域)のコントラストをそれほど低下させず、頻度の高い階調値のバンドのコントラストを改善することができる。尚、パラメトリック変換における変換後の Rチャネルの階調値を求めるァルゴリズムは上述したヒストグラム平坦ィ匕のアルゴリズムに準ずる。

線形変換はユーザ画像の Gチャネルの階調値が狭、バンドに分布して、る場合に有効である。 Rチャネルの階調値のバンド [r、 r ]をより広いバンド [R、 R ]に線形に

A B c d 引き延ばす変換式は、次式（2)のとおりである。

[数 2] r i ：変換前の階調値

R i ：変換後の階調値

[0137] 次に制御部 58は、シアンのモノトーン画像の階調値をノヽイライトバンドに圧縮して背景画像を形成する (ステップ S108)。この結果形成される背景画像は、 Rチャネルの階調値がハイライトバンドに集中しているため、元のユーザ画像に比べて淡い画像になる。具体的には例えば制御部 58は、シアンのモノトーン画像の Rチャネルのシャドーレベルが所定値 (例えば 200/255)まで上がるように Rチャネルの階調値を変換する。階調値の変換方法はヒストグラムの平坦ィ匕に準ずる。図 54 (D)に示すモノトーン画像の Rチャネルの階調値をハイライトバンドに圧縮して形成された背景画像は図 54 (E)に示す階調特性になる。

[0138] 階調値の分布を狭い幅に圧縮すると、元画像でコントラストが低いバンドでは階調が消滅する。すなわち、画像の空間構成に関する情報が消滅する。すると、ユーザは、オーダシートに印刷された背景画像の上に手書き文字等を書き込もうとするときに、手書き文字と背景画像に表されて、る対象物との位置関係を認識できなくなる。上述したように階調値を圧縮する前に階調値の標準偏差を減少させる、すなわち、階調値の分布をならすることにより、画像の空間構成に関する情報の減少を抑制することができる。もちろん、階調値の分布をならし階調値の分布を圧縮することにより、元のユーザ画像の階調特性は大きく変化する。しかし背景画像は、手書き文字をォーダシートに書き込む位置を決める目安でしかないため、階調特性が変化したとしてもユーザ画像のおおよその空間構成をユーザが把握できる画像であれば十分である。以上背景画像の形成処理について説明した。

[0139] 制御部 58は、背景画像を形成すると、オーダシート画像に背景画像を割り付ける（ステップ S110)。図 55はオーダシート画像の一例を示している。オーダシート画像は全体として 1つの画像又は画像部品の描画命令の組み合わせとして ROM62に格納されている。位置基準マーク 90、 98は、原稿台 12に載置されたオーダシートの位置及び傾きを制御部 58に認識させるためのマークである。ブロックコード 92は、オーダシートの種類を制御部 58に認識させるためのマークである。複数のチェックマーク 94 は印刷部数、手書き文字とユーザ画像の境界処理条件等の合成印刷条件を制御部 58に認識させるためのマークである。標本パッチ 96は、背景画像と色域が一致し、透明から背景画像の最大濃度まで一様に濃度が変換するチャートである。標本パッチ 96は、 1つでもよいし、互いに色域が異なる複数の領域で構成してもよい。背景画像は向かい合う頂点の座標が ROM62に記録されている矩形の自由描画領域 100 に割り付けられる。補助画像領域 102は、向かい合う頂点の座標カ¾^^62に記憶されており、ユーザ画像がそのままの階調特性で割り付けられる。補助画像領域 102 に割り付けられるユーザ画像は最高解像度の画像でもよ、し、サムネイル画像でもよ V、。図 56は背景画像が割り付けられたオーダシート画像の一例を示して、る。

[0140] ステップ S112では、制御部 58は背景画像が割り付けられたオーダシート画像をプリントユニット 86に印刷させる。尚、上述したオーダシートへの背景画像の割付処理と、オーダシートの印刷処理とは画像のバンド単位に実行される。具体的には制御部 5 8は、割付前のオーダシート画像の印刷処理をバンド単位に実行しながら、バンド内に背景画像やユーザ画像が割り付けられてヽる場合には、背景画像の解像度変換、ユーザ画像の画質補正、背景画像及びユーザ画像の割付等を行ってから印刷処理を実行する。

[0141] 図 57はオーダシートの印刷処理の流れを示すフローチャートである。図 57に示す処理は制御部 58が制御プログラムの所定のモジュールを実行することによって実行される。ステップ S120では、制御部 58は、ディジタル画像処理部 66と協働して背景画像又はユーザ画像の解像度を割付される領域の大きさに応じて変換する。またテンプレート画像全体を印刷解像度に変換する。

[0142] ステップ S122では、制御部 58は、補助画像領域 102に割り付けられるユーザ画像の画質をディジタル画像処理部 66と協働して調整する。具体的には例えば制御部 5 8はアンシャープ処理等を実行する。

ステップ S124では、制御部 58は、分版処理を実行する。具体的には例えば制御部 58は、オーダシート画像の階調値を RGB色空間の値カゝら CMY色空間 (K (黒)等の補助的なチャネルをもたせてもよい。）の値に変換する。この結果、原理的には、 G 及び Bチャネルが固定値で Rチャネルだけが階調を有するシアンのモノトーン画像である自由描画領域 100は C (シアン)チャネルだけに階調を有する階調特性になる。ただし実際には、 RGB値から CMY値への変換に用いる 3D— LUTのグリッド値の誤差や 3D— LUTのグリッド間の補間処理での誤差により、自由描画領域 100の M及び Kチャネルにも濃、バンドで狭、幅の階調が表れることが一般的である。

[0143] ステップ S126では、制御部 58はハーフトーン処理を実行する。ハーフトーン処理の基本は多階調の色値の配列をインク滴を噴射する力しないかの二値の配列に変換する処理である。大中小のインク滴を使い分ける場合には、噴射しない、小インク滴を噴射する、中インク滴を噴射する、大インク滴を噴射する、の 4値のいずれかの値に多階調の色値をチャネル毎に変換する。この場合、インク滴で表現できる階調は 4階調であるため、各画素の階調に誤差が発生する。この誤差を近傍画素に分散させることによって擬似的に多くの階調を表現することができる。このような誤差拡散処理を高速に実行するため、 CMYの階調毎に注目画素に割り当てる 4値とその傍画素に振り分ける誤差を記述したルックアップテーブルが ROM62に格納されている。印字ヘッド 84から噴射される単位面積当たりのインク滴群の噴射量は、図 58に示すように濃度が低、ほど小インク滴の構成比率が高くなり、濃度が高、ほど大インク滴の構成比率が高くなる。

[0144] ハーフトーン処理後、制御部 58はハーフトーン処理によって形成された 4値の噴射データを噴射順に並び替えるインタレース処理を実行する (ステップ S 128)。ステップ S130では、制御部 58は噴射順に噴射データを印刷制御部 82に出力し、印刷制御部 82は順次バッファメモリに格納される噴射データに基づ!/、て印字ヘッド 8 4を駆動する。

[0145] 図 59及び図 60は、用紙上に一様に濃度が変化する画像を複数サイズのインク滴で形成した場合にその画像の濃度がどのように読み取られるかを説明するための模式図である。 110、 112、 114、 116、 118、 120ίまスキャンユニット 50力読み取る 1画素を示してヽる。また 110と 112、 114と 116、 118と 120は、それぞれプリントユニット 86の同一の色値（デバイスカラー）に対応する画素の組である。スキャンユニット 50 が読み取る 1画素は極めて小さいため、同一の色値に対応する画素であっても、画素内のインク滴の構成は図 59及び図 60に示すように一様ではない。すなわち、同一の色値に対応する画素であっても画素内でインク滴が占める面積の割合は異なる。同一の色値に対応する画素内でインク滴が占める面積の割合のばらつきは、インク滴が大きくなるほど大きくなる。読み取った自由描画領域内で背景画像の領域を判定する場合、同一の色値に対応する画素内でインク滴が占める面積の割合のばらつきが小さいほど判定精度は高くなる。すなわち、背景画像の領域を判定する精度を向上させるためには、できるだけ小さなインク滴を使って背景画像及び標本パッチ 96 を印刷することが望ましい。

[0146] できるだけ小さなインク滴を使って背景画像を印刷する方法としては、例えば以下の方法がある。

(1)制御部 58がハーフトーン処理前、大インク滴及び中インク滴が噴射されない程度に淡ヽ背景画像を形成する。

(2)制御部 58又は印刷制御部 82がハーフトーン処理後、大インク滴及び中インク滴を噴射する値を噴射しなヽ値に変換する。

(3)制御部 58又は印刷制御部 82がハーフトーン処理後、大インク滴及び中インク滴を噴射する値を小インク滴を噴射する値に変換する。

(4)印刷制御部 82が大インク滴及び中インク滴を噴射する値に応じて小インク滴が噴射される波形の駆動信号をピエゾ駆動回路から出力させる。

(5)大インク滴及び中インク滴を噴射する値を持たな、ルックアップテーブルが通常モード用のルックアップテーブルとは別に ROM62に格納され、背景画像を印刷するモードでは、制御部 58が大インク滴及び中インク滴を噴射する値を持たな、ルツクアップテーブルを用いてハーフトーン処理を実行する。

[0147] 3.対象物のオーダシートへの記入

図 49は上述の処理によって印刷された後に手書き文字 126 (Hello！ )が記入されたオーダシートの一例を示す平面図である。自由描画領域 100には背景画像が印刷されている。補助画像領域 102にはユーザ画像がそのままの階調特性で印刷されている。ユーザは自由描画領域 100に印刷された背景画像の上に手書き文字 126 等の対象物を記録することができる。自由描画領域 100には雑誌の切り抜きゃシールなどを貼付してユーザ画像と合成される対象物を記録してもよヽ。またユーザは任意のチェックマーク 94を塗りつぶすことによって所望の印刷条件を設定することができる。

[0148] 背景画像の元画像であるユーザ画像と手書き文字 126等の対象物とは自由描画領域 100を割り付け位置の基準にして合成されるため、ユーザは多階調で印刷された背景画像の空間構成に基づいてユーザ画像の空間構成を認識しながら手書き文字 126等の対象物を自由描画領域 100内に記録することができる。すなわち、ユーザはユーザ画像のどの領域に手書き文字 126が割り付けられるのかを認識しながら自由描画領域 100内に手書き文字 126等の対象物を記録することができる。さらに、背景画像の Rチャネルのヒストグラムがハイライトバンドで平均化されて、るため、ュ一ザ画像の階調特性に関わらず、ユーザは淡い背景画像力ユーザ画像の空間構成を確実に認識することができる。さらに、補助画像領域 102にユーザ画像がそのままの階調特性で印刷されているため、ユーザは自由描画領域 100に印刷された背景画像と補助画像領域 102に印刷されたユーザ画像とに基づいてユーザ画像と手書き文字 126等の対象物との位置関係をより確実に認識することができる。

[0149] また背景画像は単一の色相（シアン)し力持たな、ため、ユーザはシアン以外の任意の色相で対象物を自由描画領域 100に記録することができる。また背景画像は淡色化されているため、背景画像と同じ色相であっても背景画像と明度や彩度が異なる色であればその色を用いて対象物を自由描画領域 100に記録することができる。すなわち、背景画像と異なる任意の色相で自由描画領域 100に記録された対象物の領域を複合機 1が光学的に認識でき、背景画像と同じ色相であっても明度や彩度が異なる色で記録された対象物であれば複合機 1が光学的にその領域を認識できるということである。

尚、背景画像はユーザ画像の色域を減縮したものであればよぐ必ずしも単一色相である必要はない。背景画像の最大色域が予め決まっていれば、背景画像の色域外の色の筆記具を仕様するようにユーザに案内すれば足りる。

[0150] 4.ユーザ画像と手書き文字との合成

図 61は複合機 1がオーダシートを読み取り、オーダシートに記録された手書き文字等の対象物とユーザ画像とを合成して印刷する処理の流れを示すフローチャートである。図 61に示す処理は、ユーザが手書き文字等を書き込んだオーダシートを複合機 1の原稿台 12に載置した状態で操作部 68を用いた所定の操作によりオーダシートの読み取りを複合機 1に指示することによって開始される。

[0151] ステップ S200では、複合機 1はオーダシートを二値で読み取る。具体的には、原稿台 12に載置された原稿がスキャンユニット 50によって読み取られ、読み取られた原稿の画像が RAM60に格納される。制御部 58は RAM60に格納された原稿の画像を所定のしき、値 (例えば 128Z256)で二値化する。

ステップ S202では、制御部 58は二値化された原稿の画像を OMR (Optical Mark Recognition)処理することにより、塗りつぶされたチェックマーク 94に応じた印刷条件を設定する。このとき、位置基準マーク 90、 98の位置を基準にしてオーダシート上に印刷されている画像部品 (背景画像、標本パッチ、チェックマーク等)の位置が特定される。

[0152] ステップ S204では、複合機 1は標本パッチ 96をフルカラーで読み取る。具体的には、標本パッチ 96の領域が位置基準マーク 90、 98の位置を基準にしてスキャンュ- ット 50によって読み取られ、読み取られた標本パッチ 96の画像が RAM60に格納される。

ステップ S206では、制御部 58は標本パッチ 96の画像に基づいて背景画像の色域テーブルを生成する。背景画像の色域テーブルは、背景画像の色域と一致する標本パッチ 96の色域が格納されるルックアップテーブルである。

[0153] 図 62は背景画像の色域テーブルに格納されるデータの一例を示すグラフである。

自由描画領域 100内で背景画像の領域を正確に認識するためには、制御部 58は背景画像と色域が一致する標本パッチの色域を完全に記憶しなければならな、。そこで、限られた RAM60の容量に標本パッチの色域を格納するためのモデル化が必要になる。標本パッチ及び背景画像はシアンの単一色相の画像であるため、標本パツチを読み取った画像は、理論的には Rチャネルのみが階調を有し、 B及び Gチヤネルは固定値 (例えば 256Z256)の階調特性になる。しかし、実際には分版精度、スキャンユニット 50とプリントユニット 86のデバイスカラーの違い等により、 B及び Gチヤネルにも階調が表れる。ただし、 B及び Gチャネルの階調は Rチャネルの階調と強い相関関係があり、ある狭い幅でのみ変化するという特徴がある。そこで、制御部 58は Rチャネルの階調に対して B及び Gチャネルの階調がどのように分布するかを記憶することにより、標本パッチ及び背景画像の色域を少な、容量で記憶することができる。具体的には、制御部 58は標本パッチの画像の RGB3チャネルの値を画素毎に調べ、任意の Rチャネルの値に対する G及び Bチャネルの最大値及び最小値を検出することにより、標本パッチの色域を記憶することができる。以下、フローチャートに基づいて詳細に説明する。

[0154] 図 63は背景画像の色域テーブルの生成処理の流れを示すフローチャートである。

制御部 58は G及び Bチャネルの最小値（Gmin, Bmin)及び最大値（Gmax, Bma x)をリセットした後 (ステップ S300)、以下の処理を標本パッチの画像の全画素について繰り返す (ステップ S302)。具体的には、制御部 58は全ての Rの値に対応する（ Gmax, Gmin, Bmax, Bmin)の値を（0, 255, 0, 255)に設定する。

[0155] ステップ S304及びステップ S306では、制御部 58は注目画素の Gチャネルの値が、注目画素の Rチャネルの値に対応付けて記憶されて、る Gチャネルの最大値（Gm ax)より大きヽか判定し、大きければ注目画素の Rチャネルの値に対応付けられて!/、る Gチャネルの最大値（Gmax)を注目画素の Gチャネルの値に更新する。

ステップ S312及びステップ S314では、制御部 58は注目画素の Gチャネルの値が、注目画素の Rチャネルの値に対応付けて記憶されて、る Gチャネルの最小値（Gm in)より小さ!/、か判定し、小さければ注目画素の Rチャネルの値に対応付けられて！/、る Gチャネルの最小値（Gmin)を注目画素の Gチャネルの値に更新する。

[0156] ステップ S308及びステップ S310では、制御部 58は注目画素の Bチャネルの値が、注目画素の Rチャネルの値に対応付けて記憶されて、る Bチャネルの最大値（Bm ax)より大きヽか判定し、大きければ注目画素の Rチャネルの値に対応付けられて!/、る Bチャネルの最大値（Bmax)を注目画素の Bチャネルの値に更新する。

ステップ S316及びステップ S318では、制御部 58は注目画素の Bチャネルの値が、注目画素の Rチャネルの値に対応付けて記憶されて、る Bチャネルの最小値（Bmi n)より小さヽか判定し、小さければ注目画素の Rチャネルの値に対応付けられて!/、る Bチャネルの最小値（Bmin)を注目画素の Bチャネルの値に更新する。

[0157] 以上の処理が全画素について終了すると、 Rチャネルの全ての値について B及び Gチャネルの最大値と最小値が記憶され、標本パッチ 96の色域が完全に記憶される。このように Rチャネルの値に関連付けて B及び Gチャネルの最大値と最小値を記憶する色域テーブルのデータサイズは、各チャネルの階調値が 1バイトの場合、わずか 1Kバイト（256 X 2 X 2バイト）である。以上、背景画像の色域テーブルの生成処理について説明した。

[0158] ステップ S208では、複合機 1は自由描画領域 100を読み取る。具体的には、印刷された背景画像の上に手書き文字などが書き込まれた自由描画領域 100が位置基準マーク 90、 98の位置を基準にしてスキャンユニット 50によって読み取られ、読み取られた自由描画領域 100の画像が RAM60に格納される。

ステップ S210では、制御部 58は自由描画領域 100の画像から手書き文字等の対象物の領域を分割する。具体的には、制御部 58は自由描画領域 100の画像に透明度を示すチャネル (アルファチャネル)を追加し、背景画像の領域を透明に設定する

[0159] 図 64は対象物領域の分割処理の流れを示すフローチャートである。

制御部 58は自由描画領域 100の全画素について以下の処理を繰り返す (ステップ S400)。

ステップ S402では、制御部 58は、注目画素の B及び Gチャネルの値が背景画像の色域テーブルに注目画素の Rチャネルの値と対応付けて記憶されて、る B及び G チャネルの値の範囲内である力否かを判定する。すなわち、制御部 58は、注目画素の Rチャネルの値に対応付けて記憶されて、る Gチャネルの最大値が注目画素の G チャネルの値以上で、かつ、注目画素の Rチャネルの値に対応付けて記憶されている Gチャネルの最小値が注目画素の Gチャネルの値以下で、かつ、注目画素の Rチャネルの値に対応付けて記憶されて、る Bチャネルの最大値が注目画素の Bチヤネルの値以上で、かつ、注目画素の Rチャネルの値に対応付けて記憶されている Bチャネルの最小値が注目画素の Bチャネルの値以下であるかを判定する。

[0160] 注目画素の B及び Gチャネルの値が背景画像の色域テーブルに注目画素の Rチヤネルの値と対応付けて記憶されて、る B及び Gチャネルの値の範囲内である場合、注目画素の色値は背景画像の色域内であるため、制御部 58は注目画素を透明画素に設定する（ステップ S404)。すなわち、注目画素のアルファチャネルは透明を示す値に設定される。

以上の処理が自由描画領域 100の全画素について終了すると、手書き文字等の対象物の領域は自由描画領域 100を読み取った値に設定され、背景画像の領域は透明に設定され、図 65に示すように、自由描画領域 100の画像 140から手書き文字等の対象物の画像 142が生成される。

[0161] ステップ S212では、制御部 58はユーザ画像に対象物の領域を重畳合成する。具体的には、制御部 58は対象物の画像 142のアルファチャネルを用いて対象物の画像 142の色値とユーザ画像 146の色値とを RGBのチャネル毎に加算することによつて合成画像 144を形成する。

ステップ S214では、複合機 1はユーザ画像に対象物の領域が重畳された合成画像 144を印刷する。具体的には、制御部 58及びプリントユニット 86は上述した図 57 に示す処理を実行し、合成画像 144を印刷する。このとき、プリントユニット 86は通常モードで作動し、大中小のインク滴を噴射して用紙に合成画像を形成する。

以上説明した一連の処理が終了すると、オーダシートに記録した手書き文字等の対象物が、ディジタルカメラ等で生成されリムーバブルメモリ 20に格納されてヽたュ一ザ画像に合成された印刷物が複合機 1によって作成される。 [0162] (第十六実施例）

背景画像は、ユーザ画像のエッジ成分を表す画像としてもよい。具体的には例えば、制御部 58は、リムーバブルメモリ 20から RAM60に格納されたユーザ画像に対してエッジ検出処理を行い、ユーザ画像の微分画像を形成する。微分画像は水平方向及び垂直方向に隣接画素間の色値の変化幅を計算し、変化幅を所定のしきい値でニ値ィ匕した値を画素毎に持つ画像である。このようなユーザ画像のエッジ成分を表す背景画像を複合機 1が自由描画領域 100に印刷しても、ユーザはユーザ画像の空間構成を認識することができる。また、エッジ成分を表す画像は二値画像であるため、色域は極めて狭い。したがって、ユーザは多くの色を使って自由描画領域 100 に手書き文字などの対象物を記録することができる。

(第十七実施例）

図 66は、本発明の第十七実施例に係るオーダシート画像の一例を示している。矩形枠 104は自由描画領域 100の外縁を示すマークである。矩形枠 104には背景画像の色域内の色が設定されている。十字マーク 106、 108、 110、 112は読み取り領域を制御部 58に認識させるためのマークである。十字マーク 106、 108、 110、 11 2は自由描画領域 100の近傍に配置されている。十字マーク 106の中心と十字マーク 110の中心とを結ぶ線と、十字マーク 112の中心と十字マーク 108の中心とを結ぶ線との交点が矩形の自由描画領域 100の外縁の対角線の交点に一致するように十字マーク 106、 108、 110、 112の位置力設定されて!ヽる。

図 67は背景画像が割り付けられたオーダシート画像の一例を示している。

[0163] 図 68は上述の処理によって印刷された後に吹き出し線 114と吹き出し文字 116 (H i！ )が記入されたオーダシートの一例を示す平面図である。自由描画領域 100には背景画像が印刷されている。補助画像領域 102にはユーザ画像がそのままの階調特性で印刷されている。ユーザは自由描画領域 100に印刷された背景画像の上に自由に手書き文字などを記録することができる。自由描画領域 100には雑誌の切り抜きやシールなどを貼付してユーザ画像と合成される対象物を記録してもよヽ。またユーザは任意のチェックマーク 94を塗りつぶすことによって所望の印刷条件を設定することができる。 [0164] 背景画像の元画像であるユーザ画像と吹き出し線 114と吹き出し文字 116とは自由描画領域 100を割り付け位置の基準にして合成されるため、ユーザは多階調で印刷された背景画像の空間構成に基づいてユーザ画像の空間構成を認識しながら吹き出し線 114と吹き出し文字 116を自由描画領域 100内に記録することができる。すなわち、ユーザはユーザ画像のどの領域に吹き出し線 114と吹き出し文字 116が割り付けられるのかを認識しながら自由描画領域 100内に吹き出し線 114と吹き出し文字 116を記録することができる。さらに、背景画像の Rチャネルのヒストグラムがハイライトバンドで平均化されているため、ユーザ画像の階調特性に関わらず、ユーザは淡い背景画像カゝらユーザ画像の空間構成を確実に認識することができる。さらに、補助画像領域 102にユーザ画像がそのままの階調特性で印刷されてヽるため、ユーザは自由描画領域 100に印刷された背景画像と補助画像領域 102に印刷されたユーザ画像とに基づいてユーザ画像と手書き文字 126等の対象物との位置関係をより確実に認識することができる。

[0165] 図 69は複合機 1がオーダシートを読み取り、オーダシートに記録された吹き出し線 114、吹き出し文字 116等の対象物とユーザ画像とを合成して印刷する処理の流れを示すフローチャートである。図 62に示す処理は、吹き出し線 114、吹き出し文字 11 6等を書き込んだオーダシートを複合機 1の原稿台 12に載置した状態で操作部 68を用いた所定の操作によりオーダシートの読み取りを複合機 1に指示することによって開始される。

[0166] ステップ S202では、制御部 58は二値化された原稿の画像を OMR (Optical Mark Recognition)処理することにより、塗りつぶされたチェックマーク 94に応じた印刷条件を設定する。このとき、位置基準マーク 90、 98の位置を基準にしてオーダシート上に印刷されている画像部品（標本パッチ、チェックマーク、十字マーク等）の位置が比較的低い精度で特定され、十字マーク 106、 108、 110、 112の位置に基づいて自由描画領域 100を読み取るための読み取り領域が高い精度で特定される。

[0167] 自由描画領域 100を読み取るための読み取り領域の特定処理について図 68を参照しながら具体的に説明する。はじめに制御部 58は二値化された原稿の画像の端部領域を解析して位置基準マーク 90、 98の外縁エッジを検出する。次に制御部 58 は検出した位置基準マーク 90、 98の外縁エッジを基準にして、オーダシートの傾きを特定するとともに、チェックマーク 94の位置と十字マーク 106、 108、 110、 112力 S 存在するであろう領域とを特定する。特定された十字マーク 106、 108、 110、 112が存在するであろう領域を解析して十字マーク 106、 108、 110、 112のエッジを検出し、十字マーク 106、 108、 110、 112の中心位置を特定する。次に制御部 58は十字マーク 106の中心と十字マーク 110の中心とを結ぶ線と、十字マーク 112の中心と十字マーク 108の中心とを結ぶ線との交点 118を求め、交点 118を基準として予め決められた幅と高さを持つ領域を自由描画領域 100及び標本パッチ 96を読み取るための領域として特定する。このとき、位置基準マーク 90、 98若しくは十字マーク 106 、 108、 110、 112の位置に基づいて、予め決められた自由描画領域 100及び標本ノツチ 96を読み取るための領域の大きさや傾きを補正してもよい。自由描画領域 10 0の近傍に印刷されている十字マーク 106、 108、 110、 112を基準として自由描画領域 100を読み取るための領域を特定することにより、正確に自由描画領域 100を読み取ることができる。

ステップ S204では、複合機 1は標本パッチ 96をフルカラーで読み取る。具体的には、上述したように特定した領域がスキャンユニット 50によって読み取られ、読み取られた標本パッチ 96の画像が RAM60に格納される。

[0168] ステップ S208では、複合機 1は自由描画領域 100を読み取る。具体的には、上述した処理によって特定された読み取り領域 120 (図 61参照）がステップ S202で特定した自由描画領域 100を基準にしてスキャンユニット 50によって読み取られ、読み取られた自由描画領域 100とその周囲とを含む領域 120の画像が RAM60に格納される。読み取り領域 120は自由描画領域 100に対して水平垂直の両方向に所定の幅だけ広く設定されている。

[0169] 図 70はユーザ画像力も合成画像が形成されるまでの一連の処理において生成される画像群を示す模式図である。 204は上述した減色処理によってユーザ画像 202 から形成された背景画像を表して、る。 206はテンプレート画像 200と背景画像 204 とを合成した画像を用紙に印刷した結果であるオーダシートを表して、る。垂直方向の破線は用紙の地色を表している。 208は吹き出し線及び吹き出し文字が記入されたオーダシートを表している。自由描画領域 100とその周囲とを含む領域 120の画像 210は、 21 OR, 210B、 210Gという RGB3つのカラーチャネルで構成されている。自由描画領域 100とその周囲が読み取られている画像 210には吹き出し線 114及び吹き出し文字 116が表れる。また画像 210は自由描画領域 100より広いため、画像 210には自由描画領域 100の外縁を示す矩形枠 104が表れる。

ステップ S210では、制御部 58は自由描画領域 100とその周囲とを含む領域 120 の画像とユーザ画像とに基づいて合成画像を形成する。

[0170] 図 71は合成画像の形成処理の流れを示すフローチャートである。

ステップ S500では、制御部 58は自由描画領域 100とその周囲とを含む領域 120 の画像 210について閉曲線の外側領域が透明になる αチャネル 216 aを生成する ( 図 49では、透明値の画素を白、不透明値の画素を黒で表すことにより αチャネル 21 6 αを表している。；)。具体的には制御部 58は、注目画素の Β及び Gチャネルの値が背景画像の色域テーブルに注目画素の Rチャネルの値と対応付けて記憶されて、る Β及び Gチャネルの値の範囲内であるか否かを判定し、範囲内の注目画素の領域を背景画像の領域と認識し、範囲外の注目画素の領域をユーザの筆跡の領域と認識しながら、他の閉曲線に包含されていない閉曲線を検出する。制御部 58はこのようにして検出した閉曲線を境にして閉曲線の外側領域を特定し、閉曲線の外側領域が透明値、閉曲線及びその内側領域が不透明値である αチャネルを生成する。自由描画領域 100の外側力も領域 120の画像をスキャンして閉曲線を検出することにより、閉曲線で囲まれた領域の大きさゃ閉曲線内の筆跡の構成と無関係に、他の閉曲線に包含されていない閉曲線、すなわち、吹き出し線 114を検出することができる。尚、自由描画領域 100の外縁を示す矩形枠 104の色は背景画像の色域内であるため、自由描画領域 100の外側力も領域 120の画像をスキャンして閉曲線を検出するとき、矩形枠 104が閉曲線として検出されることはない。

[0171] ステップ S502では、制御部 58は自由描画領域 100とその周囲とを含む領域 120 の画像 210の閉曲線内の背景画像領域を白などの特定色で塗りつぶす。具体的には aチャネル 216 aが不透明値である領域について、制御部 58は注目画素の B及び Gチャネルの値が背景画像の色域テーブルに注目画素の Rチャネルの値と対応付けて記憶されて、る B及び Gチャネルの値の範囲内である力否かを判定し、範囲外の注目画素を吹き出し文字 116と認識しながら、範囲内の注目画素を白（R= 255 、 G = 255、 B = 255)に変更する。このような処理の結果、自由描画領域 100とその周囲とを含む領域 120の画像 210から吹き出し画像 216が形成される。吹き出し画像 216は、 216R、 216G、 216Bの RGB3チヤネノレと αチヤネノレ 216 αの合計 4チヤネルで構成される。

[0172] ステップ S504では、制御部 58はユーザ画像 202と吹き出し画像 216とを合成する。具体的には制御部 58は、自由描画領域 100とその周囲とを含む領域 120の画像 2 10とユーザ画像 202とを αチャネル 216 aを用いて RGBのチャネル毎に加算することによって合成画像 218を形成する。このとき、吹き出し線 114に対応する領域では、 αチャネル 216 αに不透明値が設定されているため、吹き出し画像の 216R、 216 G、 216Bの各チャネルの値が設定されることによって、吹き出し線 114をスキャンュニット 50で読み取った値が設定される。すなわち、吹き出し線 114に対応する領域には吹き出し線 114が描画される。また吹き出し文字 116に対応する領域（閉曲線の内側領域)でも、 αチャネル 216 αに不透明値が設定されているため、吹き出し画像の 216R、 216G、 216Bの各チャネルの値が設定されることによって、吹き出し文字 11 6をスキャンユニット 50で読み取った値が設定される。すなわち吹き出し文字 116に対応する領域には吹き出し文字 116が描画される。また吹き出し線 114の内側の吹き出し文字 116でない領域（閉曲線内の筆跡外の領域)では、 αチャネル 216 αに不透明値が設定され吹き出し画像の 216R、 216G、 216Bの各チャネルに白に対応する値が設定されているため、吹き出し画像の 216R、 216G、 216Bの各チャネルの値が設定されること〖こよって、白の値が設定される。すなわち、吹き出し線 114の内側の吹き出し文字 116でな、領域には白が描画される。また吹き出し線 114の外側領域（閉曲線の外側領域)では、 aチャネル 216 aに透明値が設定されて、るため、ユーザ画像 202の値が設定されることによって、ユーザ画像 202が描画される。

[0173] 図 72は上述した各画像の位置の対応関係を示す模式図である。予め決められた自由描画領域 100を基準にして、オーダシートを印刷するための背景画像 204のレィアウトと、自由描画領域 100を読み取るための領域 120と、合成画像 218を形成するためのユーザ画像 202及び吹き出し画像 216のレイアウトとを設定しておくことにより、図 72に示す各画像の位置の対応関係を設定できる。具体的には、これらの設定は、レイアウト枠の座標の設定と、画像の拡大縮小率の設定と、読み取り領域の座標の設定によって行われる。

以上合成画像の形成について説明した。

[0174] ステップ S214 (図 69参照）では、複合機 1は合成画像 218を印刷する。具体的には、制御部 58及びプリントユニット 86は上述した図 57に示す処理を実行し、合成画像 218を印刷する。このとき、プリントユニット 86は通常モードで作動し、大中小のィンク滴を噴射して用紙に画像を形成する。用紙に対する合成画像 218のレイアウトは任意である力例えば図 73に示すように 1枚の用紙 222に複数の合成画像 218をレィアウトすることもできる。このようなレイアウトは 1枚の用紙 222に対応する、レイアウト枠 224が複数定義されたテンプレート 220を ROM62に格納しておくことによって実現できる。またテンプレート 220に破線画像とレイアウトを定義しておくことにより、 1枚の用紙 222で複数のカードを作成するための切取線 226を印刷することもできる。以上説明した一連の処理が終了すると、オーダシートに記入した吹き出し線 114と吹き出し文字 116とがディジタルカメラ等で撮像された被写体に上書きされ、さらに吹き出し線 114の内側の吹き出し文字 116でない領域が白で塗りつぶされた印刷物が複合機 1によって作成される。

尚、以上説明した各実施例で説明した各要素は、矛盾のない限り任意に組み合わせてもよい。

図面の簡単な説明

[0175] [図 1]本発明の第七実施例に係るオーダーシートを示す模式図。

[図 2]本発明の第一実施例に係る複合機の正面図。

[図 3]本発明の第一実施例に係る複合機のブロック図。

圆 4]本発明の第一実施例に係る複合機の機能ブロック図。

[図 5]本発明の第一実施例に係るオーダーシートテンプレートを示す模式図。

[図 6]本発明の第一実施例に係るオーダーシートを示す模式図。

[図 7] (A)は本発明の第一実施例に力かる合成テンプレートを示す模式図。 (B)は、合成結果を示す模式図。

圆 8]本発明の第一実施例に係るフローチャート。

圆 9]本発明の第一実施例に係る画面遷移を示す模式図。

[図 10]本発明の第二実施例に係るフローチャート。

圆 11]本発明の第二実施例に係る機能ブロック図。

圆 12]本発明の第三実施例に係るオーダーシートテンプレートを示す模式図。圆 13]本発明の第三実施例に係るオーダーシートを示す模式図。

圆 14]本発明の第四実施例に係るオーダーシートを示す模式図。

[図 15]本発明の第四実施例に係るオーダーシートテンプレートを示す模式図。圆 16]本発明の第五実施例に係るオーダーシートを示す模式図。

圆 17]本発明の第五実施例に係るオーダーシートテンプレートを示す模式図。圆 18]本発明の第五実施例にカゝかる合成テンプレートを示す模式図。

[図 19]本発明の第五実施例に係るフローチャート。

圆 20]本発明の第五実施例に係る画面遷移を示す模式図。

圆 21]本発明の第六実施例に係るオーダーシートを示す模式図。

圆 22]本発明の第六実施例に係るフローチャート。

圆 23]本発明の第六実施例に係る画面遷移を示す模式図。

[図 24]本発明の第七実施例に係るフローチャート。

圆 25]本発明の第八実施例に係るオーダーシートを示す模式図。

圆 26]本発明の第九実施例に係る機能ブロック図。

圆 27]本発明の第九実施例に係るオーダーシートを示す模式図。

圆 28]本発明の第九実施例に係るディレクトリ構造を示す模式図。

[図 29]本発明の第九実施例に係るフローチャート。

圆 30]本発明の第九実施例に係る画面遷移を示す模式図。

圆 31]本発明の第九実施例に係るオーダーシートを示す模式図。

圆 32]本発明の第九実施例に係るフローチャート。

圆 33]本発明の第九実施例に係るフローチャート。

[図 34]本発明の第九実施例に係るフローチャート。圆 35本発明の第九実施例に係る濃淡ヒストグラムを示す模式図。

[図 36:本発明の第九実施例に係る重畳合成処理を示す模式図。圆 37本発明の第十実施例に係る画面遷移を示す模式図。

[図 38:本発明の第十実施例に係るオーダーシートを示す模式図。

[図 39:発明の第十一実施例による画像処理システムを示す模式図。

[図 40:本発明の第十二実施例に係る画面遷移を示す模式図。

[図 41本発明の第十二実施例に係るフローチャート。

[図 42本発明の第十三実施例に係る画面遷移を示す模式図。

[図 43本発明の第十三実施例に係るフローチャート。

[図 44:本発明の第十四実施例に係るオーダーシートを示す模式図 _c [図 45本発明の第十四実施例に係る画面遷移を示す模式図。

[図 46:本発明の第十四実施例に係るフローチャート。

[図 47:本発明の第十四実施例に係るユーザ原稿を示す模式図。

[図 48:本発明の複数の実施例をまとめた表。

[図 49:本発明の-一実施例に -かかる平図。

[図 50:本発明の-一実施例にかかる斜視図。

圆 51本発明の-一実施例に .かかるブロック図。

圆 52本発明の-一実施例に -かかるフローチヤ一 -ト。

圆 53本発明の-一実施例にかかる模式図。

[図 54:本発明の-一実施例に —かかるヒストグラム。

圆 55本発明の-一実施例にかかる模式図。

[図 56:本発明の-一実施例にかかる模式図。

圆 57本発明の-一実施例に -かかるフローチヤ一 -ト。

圆 58本発明の-一実施例に -カ力ゝるグブフ。

圆 59本発明の-一実施例にかかる模式図。

圆 60本発明の-一実施例にかかる模式図。

圆 61本発明の-一実施例に -かかるフローチヤ一 -ト。

[図 62本発明の-一実施例にかかる模式図。 [図 63]本発明の-一実施例にかかるフローチヤ -ト。

[図 64]本発明の-一実施例にかかるフローチヤ -ト。

[図 65]本発明の-一実施例に力かる模式図。

[図 66]本発明の-一実施例に力かる模式図。

[図 67]本発明の-一実施例に力かる平面図。

[図 68]本発明の-一実施例に力かる平面図。

[図 69]本発明の-一実施例にかかるフローチヤ -ト。

[図 70]本発明の-一実施例に力かる模式図。

圆 71]本発明の-一実施例にかかるフローチヤ -ト。

[図 72]本発明の-一実施例に係る模式図。

[図 73]本発明の-一実施例に係る模式図。

符号の説明

1：複合機 (画像処理システム）、 20:リムーバブルメモリ（記録媒体）、 50:スキャンュニット、 70:外部メモリコントローラ（アクセスユニット）、 86:プリントユニット、 96:標本パッチ、 100:自由描画領域、 126:手書き文字 (対象物）、 140:自由描画領域の画像、 142:対象物の画像、 144:合成画像、 146:ユーザ画像

Claims

請求の範囲

[1] オーダーシート要求を受け付ける第一受付ユニットと、

前記オーダーシート要求に応じて自由描画領域を示す領域表記を用紙にプリントユニットに印刷させる印刷制御ユニットと、

スキャン要求を受け付ける第二受付ユニットと、

前記スキャン要求に応じて前記自由描画領域に対象物が記録された前記用紙をスキャンユニットに読み取らせる読み取り制御ユニットと、

前記スキャン要求に応じて前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成する合成ユニットと、

を備えることを特徴とする画像処理システム。

[2] 前記印刷制御ユニットは、識別表記を前記用紙に前記プリントユニットに印刷させ、前記合成ユニットは、前記スキャンユニットに読み取られた前記識別表記の画像に基づいて、前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成することを特徴とする請求項 1に記載の画像処理システム。

[3] アクセス可能な画像のいずれか 1つ以上を選択する指示を受け付ける画像選択指示受付ユニットをさらに備え、

前記他の画像は、選択された前記画像であることを特徴とする請求項 1に記載の画像処理システム。

[4] 前記印刷制御ユニットは、前記画像選択指示受付ユニットによって選択された前記画像を前記用紙に前記プリントユニットに印刷させることを特徴とする請求項 3に記載の画像処理システム。

[5] 前記印刷制御ユニットは、前記選択された画像と前記自由描画領域の画像のサンプル画像とを第一の合成条件で合成した合成結果を表す画像を前記用紙に前記プリントユニットに印刷させ、

前記合成ユニットは、前記選択された画像と前記自由描画領域の画像とを前記第一の合成条件に対応する第二の合成条件で合成することを特徴とする請求項 4に記載の画像処理システム。

[6] 選択された前記画像と前記自由描画領域の画像とを合成するための互いに異なる複数の合成条件のいずれかを前記第一の合成条件として選択する指示を受け付ける合成条件指示受付ユニットをさらに備え、

前記印刷制御ユニットは、前記合成条件指示受付ユニットで受け付け可能な互!ヽに異なる合成条件で合成した複数の前記合成結果を表す複数の画像を前記用紙に前記プリントユニットに印刷させることを特徴とする請求項 5に記載の画像処理システム。

[7] 前記印刷制御ユニットは、アクセス可能な画像を表す画像表記を前記用紙に前記プリントユニットに印刷させ、

前記用紙に記録された画像選択指示に指示された前記画像表記が表す前記画像を、前記スキャンユニットに読み取られた画像に基づヽて認識する画像選択指示認識ユニットをさらに備え、

前記他の画像は、前記画像選択指示に指示された前記画像表記が表す画像であることを特徴とする請求項 1に記載の画像処理システム。

[8] 前記画像選択指示認識ユニットは、前記画像選択指示に指示された複数の前記画像表記が表す複数の前記画像を認識し、

前記合成ユニットは、前記対象物の画像と複数の前記他の画像とを合成することを特徴とする請求項 7に記載の画像処理システム。

[9] 前記読み取り制御ユニットは、前記スキャンユニットに前記画像選択指示を前記自由描画領域より低い解像度で読み取らせることを特徴とする請求項 7又は 8に記載の画像処理システム。

[10] 前記印刷制御ユニットは、前記自由描画領域の画像と前記他の画像とを合成するための互いに異なる合成条件を表す複数の合成条件表記を前記用紙に前記プリントユニットに印刷させ、

前記用紙に記録された合成条件指示に指示された前記合成条件表記が表す前記合成条件を前記スキャンユニットに読み取られた画像に基づいて認識する合成条件認識ユニットをさらに備え、

前記合成ユニットは、前記合成条件指示に指示された前記合成条件表記が表す前記合成条件に応じて、前記スキャンユニットに読み取られた前記自由描画領域の画像と前記他の画像とを合成することを特徴とする請求項 1に記載の画像処理システム。

[11] 前記読み取り制御ユニットは、前記スキャンユニットに前記合成条件指示を第一解像度で読み取らせ、前記スキャンユニットに前記自由描画領域を前記第一解像度より高い第二解像度で読み取らせることを特徴とする請求項 10に記載の画像処理システム。

[12] 前記対象物の画像と前記他の画像とを合成するための合成条件の指示を受け付ける合成条件指示受付ユニットを更に備え、

前記印刷制御ユニットは、指示された前記合成条件に応じた態様の前記自由描画領域を示す前記領域表記を前記用紙に前記プリントユニットに印刷させ、

前記合成ユニットは、指示された前記合成条件に応じて前記対象物の画像と前記他の画像とを合成することを特徴とする請求項 1に記載の画像処理システム。

[13] 前記合成条件は、重畳合成条件を含むことを特徴とする請求項 10又は 12に記載の画像処理システム。

[14] 前記重畳合成条件は、重畳合成される 2つの画像の境界処理条件を含むことを特徴とする請求項 13に記載の画像処理システム。

[15] 前記重畳合成条件は、重畳合成される 2つの画像の透明度を含むことを特徴とする請求項 13に記載の画像処理システム。

[16] 前記印刷制御ユニットは、前記プリントユニットに前記用紙に基準マークを印刷させ前記読み取り制御ユニットは、前記基準マークに基づいて前記自由描画領域を認識することを特徴とする請求項 1に記載の画像処理システム。

[17] 前記自由描画領域に記録された対象物の領域を前記スキャンユニットに読み取られた前記自由描画領域の画像力抽出する領域抽出ユニットをさらに備え、前記自由描画領域の画像は、前記対象物の領域の画像であることを特徴とする請求項 1に記載の画像処理システム。

[18] アクセス可能な画像のいずれか 1つ以上を選択する指示を受け付ける画像選択指示受付ユニットをさらに備え、前記他の画像は、選択された前記画像であり、

前記印刷制御ユニットは、選択された前記画像を、前記領域抽出ユニットが前記対象物の領域を抽出可能な程度に薄ぐ前記自由描画領域に前記プリントユニットに印刷させることを特徴とする請求項 17に記載の画像処理システム。

[19] 前記領域抽出ユニットは、前記スキャンユニットに読み取られた前記自由描画領域外の余白領域の画像に基づいて前記用紙の地色を認識し、前記用紙の地色に基づいて前記対象物の領域を認識することを特徴とする請求項 17又は 18に記載の画像処理システム。

[20] 前記プリントユニットと前記スキャンユニットとをさらに備えることを特徴とする請求項

1に記載の画像処理システム。

[21] 前記プリントユニットと前記スキャンユニットとが接続されるインタフェースをさらに備えることを特徴とする請求項 1に記載の画像処理システム。

[22] オーダーシート要求を受け付ける第一受付段階と、

前記オーダーシート要求に応じて自由描画領域を示す領域表記を用紙にプリントユニットに印刷させる印刷制御段階と、

スキャン要求を受け付ける第二受付段階と、

前記スキャン要求に応じて前記自由描画領域に対象物が記録された前記用紙をスキャンユニットに読み取らせる読み取り制御段階と、

前記スキャン要求に応じて前記スキャンユニットに読み取られた前記自由描画領域の画像と他の画像とを合成する合成段階と、

を含むことを特徴とする画像処理方法。

[23] 記録媒体に格納されたユーザ画像にアクセスするアクセスユニットと、

前記ユーザ画像の色域を減縮し背景画像を形成する減色処理ユニットと、自由描画領域に前記背景画像が印刷されたオーダシートをプリントユニットに作成させるオーダシート印刷制御ユニットと、

スキャンユニットに読み取られた前記自由描画領域の画像力ユーザが前記自由描画領域に記録した対象物の領域を前記背景画像の色域を基準に用いて分割し、前記ユーザ画像に前記対象物の領域を重畳して合成画像を形成する合成ユニットと前記合成画像を前記プリントユニットに印刷させる合成印刷制御ユニットと、を備えることを特徴とする画像形成システム。

[24] 前記減色処理ユニットは、単一色相の前記背景画像を形成することを特徴とする請求項 23に記載の画像形成システム。

[25] 前記減色処理ユニットは、多階調の前記背景画像を形成することを特徴とする請求項 23又は 24に記載の画像形成システム。

[26] 前記減色処理ユニットは、 1つのカラーチャネルだけが階調を有する 3つのカラーチャネルを有する前記背景画像を形成することを特徴とする請求項 23に記載の画像形成システム。

[27] 前記減色処理ユニットは、淡色化された前記背景画像を形成することを特徴とする請求項 23に記載の画像形成システム。

[28] 前記オーダシート印刷制御ユニットは、前記背景画像の色域に色域が一致する標本パッチを前記オーダシートに前記プリントユニットに印刷させ、

前記合成ユニットは、前記スキャンユニットに読み取られた前記標本パッチの画像の色域に色値が含まれな、前記自由描画領域内の領域を前記対象物の領域と判定することを特徴とする請求項 23に記載の画像形成システム。

[29] 階調を有する前記カラーチャネルの階調値に対応付けて他の 2つの前記カラーチャネルの階調範囲を記憶する記憶媒体をさらに備え、

前記合成ユニットは、前記自由描画領域の画素毎に、前記自由描画領域の画素の階調を有する前記カラーチャネルの階調値に対応付けられている他の 2つの前記力ラーチャネルの階調範囲に前記自由描画領域の画素の他の 2つの前記カラーチヤネルの階調値が含まれな!/、と、前記対象物の領域を構成する画素と判定することを特徴とする請求項 28に記載の画像形成システム。

[30] 前記減色処理ユニットは、前記ユーザ画像のエッジ成分を表す前記背景画像を形成することを特徴とする請求項 23に記載の画像形成システム。