JPH0424878A - 画像処理装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は原稿の任意の領域の画像を抽出し、合成画像を
作成する画像処理装置に関するものである。

〔従来技術〕

従来、この種の分野の技術としては、特開昭５７−４１
７７０号公報に開示された画像処理装置がある。

上記画像処理装置は入力用紙上の２色の画像を別々に読
み取る２色読取装置と、この２色読取装置との出力から
入力用紙が領域指定、入力画像指定、出力画像指定のう
ちのいずれのためのものであるかを判定する種別マーク
検出器と、この種別マーク検出器により領域指定と判別
された入力用紙に対する上記２色読取装置の出力から該
入力用紙に第１の色で書かれた入力画像から抜き取るた
めの抜取領域を示す情報を検出する第１の検出器と、種
別マーク検出器により領域指定を判別された入力用紙に
対する上記２色読取装置との出力から該入力用紙に第２
の色で書かれた出力画像にはめ込むための挿入領域を示
す情報を検出する第２の検出器と、種別マーク検出器に
より領域指定と判別された入力用紙に対する２色読取装
置の出力から該入力用紙に書かれた上記抜取領域と挿入
領域との対応関係を示す情報を検出する第３の検出器と
、上記３つの検出器の出力が入力され種別マーク検出器
により入力画像指定と判別された入力用紙の画像のうち
第１の検出器の出力の抜取領域の画像を、種別マーク検
出器により出力画像の第２の検出器の出力の抜取領域と
対応関係にある挿入領域にはめ込み出力する画像入力装
置とを備え、合成画像を作成するものである。

〔発明が解決しようとする課題〕

しかしながら上記構成の画像処理装置においては下記の
ような問題点があった。

（１）異なる形式の原稿或いは同一の形式でも任意の領
域から画像を抽出して合成画像を作成する場合、合成画
像の形式が同一であっても、毎回、抜取（抽出）領域を
設定するための用紙を作成する必要があり、用紙の作成
及び登録のために多くの時間を要すると共に操作が繁雑
になる。

（２）抽出領域指定と挿入（合成）領域指定との対応付
けの線を領域指定の図形と分離して認識する必要があり
処理が複雑化する。

（３）抽出領域と合成領域を同一の用紙で指定している
ため抽出及び合成のための領域が複数の用紙となった場
合、合成画像を作成するだめの用紙を複数枚作成し、上
記構成の装置を複数回動作させる必要があり、用紙作成
及び登録に多くの時間を要するばかりでなく、操作が繁
雑で誤操作のおそれがある。

本発明は上述の点に鑑みてなされたもので、上記問題点
を除去し、使用環境やニーズの変化に対応できる操作性
の優れた画像処理装置を提供することを目的とする。

〔課題を解決するための手段〕

上記課題を解決するため本発明は、画像処理装置を下記
のように構成した。

用紙上に記載されている画像及び／又はマークの濃淡及
び色の一方又は双方に応じた情報を出力する画像入力部
と、 色特性学習モードと書式学習モードと原稿読取モードと
を切換えるモード切換部と、 モード切換部が色特性学習モードの場合には色特性学習
用紙上のマークの濃淡及び色の一方又は双方に応じた色
特性を学習し登録する色特性学習部と、 モード切換部が書式学習モードの場合には書式学習用紙
上のマークの濃淡又は色を色特性と照合し、照合できた
マークの色特性と位置座標を画像合成のための書式情報
として登録する書式学習部と、 モード切換部が原稿読取モードの場合には書式情報及び
／又は色特性学習部に登録されている色特性に基づいて
原稿上のマークを検出し、当該マーク内の画像を抽出す
る画像抽出部と、抽出した画像を前記書式情報の位置座
標に基ついて合成する画像合成部とを具備することを特
徴とする。

また、モード切換部は、色特性学習用紙、書式学習用紙
及び／又は原稿の所定の領域の画像の種類に基づいて切
換えるようにしたことを特徴とする。

〔作用〕 本発明は画像処理装置を上記の如く構成することにより
、画像入力部は用紙を走査し、該用紙上に記載されるマ
ーク及び／又は文書１図面等の画像の濃淡および色の一
方又は双方に応じた色情報をモード切換部に出力する。

モード切換部は色特性モードに設定している場合には画
像入力部の出力を色特性学習部に出力すると共に、色特
性学習起動信号を出力し、書式学習モードに設定してい
る場合には画像入力部の出力を書式学習部に出力すると
共に、書式学習起動信号を出力し、原稿読取モードに設
定した場合には、画像入力部の出力を画像抽出部に出力
すると共に、画像抽出起動信号を出力する。色特性学習
部は色特性学習起動信号によって処理が開始され、色特
性学習用紙のマークの濃淡又は色の一方又は双方に応じ
た色特性を学習し登録する。書式学習部は書式学習起動
信号によって処理が開始され、書式学習用紙上のマーク
の濃淡又は色を色特性と照合し、照合できたマークの色
特性と位置座標を画像合成のための書式情報として登録
する。画像抽出部はモード切換部からの画像抽出起動信
号によって動作を開始し、書式情報に登録されている色
特性に基づいて原稿上のマークを検出し、当該マーク領
域内の画像を抽出する。画像合成部は画像抽出部で抽出
した画像を書式情報に基づいて合成する。

即ち、本発明の画像処理装置は色特性学習用紙上のマー
クの−ａ淡または色を、画像合成の書式設定に使用する
マーク及び原稿の任意の領域の画像を抽出するためのマ
ークの色特性として学習し、書式学習用紙上のマークの
濃淡な又は色を色特性と照合し、照合できたマークの色
特性を位置座標を画像合成のための書式情報として登録
し、書式情報に登録されている色特性に基づいて、原稿
上のマークを検出し、当該マーク内ま画像を抽出し、抽
出した画像を書式情報に基づいて合成するから、使用環
境やニーズの変化にも柔軟に対応できる操作性の優れた
画像処理装置を提供することを目的とする。

〔実施例〕

以下、本発明の一実施例を図面に基づいて説明する。

第１図は本発明の実施例の画像処理装置の構成を示すブ
ロック図である。図示するように、画像処理装置は、画
像入力部１、モード切換部２、色特性学習部３、書式学
習部４、画像抽出部５及び画像合成部６を具備する構成
である。

画像入力部１は、第３図〜第５図に示すような用紙を、
主走査を水平方向（ＸＸ）、副走査を垂直方向（ＹＹ）
として走査し、用紙上に記載されるマーク及び／又は文
書１図面等の画像の濃淡及び色の一方又は双方に応じた
色情報、例えば濃度多値レベル信号又は、Ｒ（赤）、Ｇ
（緑）、Ｂ（青）の多値レベル信号を色情報として出力
する。モード切換部２は、図示しないスイッチ等によっ
て色特性学習モードと書式学習モードと原稿読取モード
とを切り換えるモード切換部であって、該モード切換部
２を色特性モードに設定している場合には、前記画像入
力部１の出力を色特性学習部３に出力すると共に、色特
性学習起動信号を出力する。

また、モード切換部２を書式学習モードに設定している
場合には、画像入力部１の出力を書式学習部４に出力す
ると共に、書式学習起動信号を出力する。

また、モード切換部２を原稿読取モードに設定した場合
には、画像入力部１の出力を画像抽出部５に出力すると
共に、画像抽出起動信号を出力する。

色特性学習部３は、前記モード切換部２からの色特性学
習起動信号によって処理が開始され、第３図に示すよう
な色特性学習用紙のマークの濃淡又は色の一方又は双方
に応じた色特性を学習し、登録する。

書式学習部４は、前記モード切換部２からの書式学習起
動信号によって処理が開始され、第４図に示すような書
式学習用紙上のマークの濃淡または色を前記色特性と照
合し、照合できたマークの色特性と位置座標を画像合成
のための書式情報として登録する。

画像抽出部５は、前記モード切換部２からの画像抽出起
動信号によって動作を開始し、前記書式情報に登録され
ている色特性に基づいて原稿上のマークを検出し、当該
マーク領域内の画像を抽出する。

画像合成部６は、前記画像抽出部５で抽出した画像を書
式情報に基づいて合成する。

この画像合成部６で合成された合成画像は、図示しない
ＣＲＴ、プリンタ、ＦＡＸ、ＱＣＲ１文書処理装置など
へ出力する。

第２図は原稿上のマークを色毎に分類するた灼の原理を
示す色特性の説明図で、同図（ａ）はマークの色度座標
の範囲の説明図、同図（ｂ）はマークの濃度範囲の説明
図である。

第２図（ａ）の原理を用いる場合、画像入力部１はたと
えばＲＧＢ系の濃度多値レベル信号を出力できるカラー
スキャナが必要である。第２図（ｂ）の原理を用いる場
合、画像入力部１は濃度多値レベル信号を出力できるモ
ノクロスキャナ又は上記カラースキャナが必要である。

第２図（ａ）の色度図は公知の方法により作成したもの
を概略的に示したものであって、ＲＧＢ系の濃度信号を
座標変換式（１）を用いてＸＹＺ系に変換し、 Ｘ＝２．７６８９Ｒ＋１．７５１７Ｇ＋１．１３０２Ｂ
Ｙ＝　　　　Ｒ＋４．５９０７Ｇ＋０．０６０１ＢＺ＝
　　　　　　　０．０５６５Ｇ＋５．５９４３Ｂ　　　
　　（１）求められたｘ、ｙ、ｚをもとに式（２）を用
いて色度座標ｘ　ｒ　３’を計算し、 ｘ＝Ｘ／（Ｘ＋Ｙ＋Ｚ） Ｖ＝Ｙ／（Ｘ＋Ｙ＋Ｚ）　　　　　　　　　（２＞求め
られた色度座標Ｘ　＋　３’による直交座標を用いたも
のである。ここでｘ、ｙは色相と彩度を表わすものであ
り、Ｙは明度を表わすものである。

上述のＲＧＢ系からＸＹＺ系への変換〔式（１）を用い
る〕及び色相と彩度を表わすｘ、ｙを求める計算〔式（
２）を用いる〕はそれぞれＲ，Ｇ、Ｂを入力し、ｘ、ｙ
、ｚを出力するＲＯＭを用いて、及びｘ、ｙ、ｚを入力
しｘ　＋　１を整数形式で出力するＲＯＭを用いて変換
することによって、計算時間が不要となり、処理の高速
化がはかれる。第２図（ｂ）の場合は、領域抽出対象の
文書９図面が白、黒で表現されたものであって、原稿上
のマークの濃度レベルが前記白、黒の濃度と重ならない
濃度レベルであって、前記マークの色が色毎（色１２色
２９色３）に互いに重ならない濃度レベルを持つ色を選
択することによって色の分類が可能となる。また、前記
明度Ｙを同様に表現してもよい。

第３図は色特性学習用紙の例を示す図であって、同図（
ａ）は色特性学習用紙のマークを記入するための記入枠
があらかじめ記載されたいる色特性学習用紙の例を示し
、同図（ｂ）は前記記入枠は存在しないが所定の記入条
件のもとに色特性学習用のマークを記入するための学習
用紙の例を示す。

第３図（ａ）において、ｍ　ｇ　Ｉ　＋　Ｉｎ　ｇ　２
　＋　”　ｇ８．・・・・・・・・は（横Δｘｘ、ＩＩ
ＪｃΔｙｙ）の大きさを持つ矩形の記入枠であって、学
習用紙の原点（０，０）から所定の距離（ＸＸ＋−３’
３’ｚ）に記入枠の頂点を持ち、ＶＴＲのピッチであら
かじめ黒で印刷されているものとする。

なお、前記記入枠の色、形状及び位置関係は第３図（ａ
）の例に限定されるものではない。

第３図（ｂ）における記入条件とは例えば次のようなも
のである。

■使用する用紙は画像抽出対象の原稿と類似した特性の
用紙を用いること。

■学習マークは絶対に接触しないように離して記入する
こと。

なお、前記学習用紙には読取に先行して、原稿の画像抽
出に用いるマークと同一の所望の色を記入しておく。

第３図の色特性学習用紙に記載したマークｇ１赤、ｇ２
は青、ｇ、は緑、ｇ４は黄、ｇ６は橙、ｇ６は紫とする
。

第２図（ａ）には前記マークの色度図上での位置を概略
的に示している。

第４図は書式学習用紙の説明図であって、記載されるマ
ークは文書９図面から抽出された画像を合成して、合成
画像を作成するための合成開始位置を示したものである
。同図における破線は文書図面の抽出領域との対応を明
確にするために付したものである。

第５図は第４図の書式学習用紙に対応した入力原稿の例
を示す図であって、文書の所望の抽出領域に追記マーク
を施したものである。第４図及び第５図におけるｍｇｌ
とｍ、は互に対応関係にあり、それぞれ同一の色のペン
で書かれる。図におけるマークの色は各々、ｍ　ｇ　、
　、　ｍ　、は赤、ｍｇ３２ｍ、は緑、ｍｇ、、ｍ３は
青、ｍ　ｇ　４１　！ｎ　４は黄、ｍ　ｇ　ｓ　＋　ｍ
　ｓは橙、”　ｇ　ｓ　ｒ　ｍｇは紫とする。

ここで、学習用紙及び原稿用紙の大きさ、枚数、学習用
紙及び原稿用紙に記載するマークの色、形状、数、位置
関係などは第３図、第４図、第５図に示すものに限定さ
れるものではない。

次に色特性学習部３の動作について、第２図及び第３図
を用いて説明する。ここで、使用する色特性学習用紙の
種類（第３図（ａ）又は（ｂ））及び色特性学習用紙の
記入枠の色、形状、数、位置関係及び規則はあらかじめ
色特性学習部３に設定されているものとする。また、学
習する色特性は公知の如何なる色特性を用いて学習して
もよいが、本発明では前述の第２図（ａ）の色度図を用
いて学習するものとし、前述の色度座標ｘ、ｙを整数化
、例えは１００倍した整数値Ｘｘ＋Ｖ％をアドレスとす
る２次元メモリ（カラーマツプ）で色度図を構成するも
のとする。

なお、以下の説明において、用紙平面の座標系は、色特
性を表わすｘ、ｙ、ｚとの混乱を避けるため、主走査或
いは水平方向をＸＸ、副走査或いは垂直方向をＹＹと表
現する。

用紙上の座標と走査時の座標は通常一致しない場合が多
いが、説明を簡単にするため、ここでは用紙上の左上端
を走査開始点〔原点（０，０））、右下端を走査終了点
（ｘ、。ｄ１３’。。６）とする座標系で走査していく
ものとする。

主走査を水平方向（ＸＸ）、副走査を垂直方向（ＹＹ）
として、第３図（ａ）に示す学習用紙を走査し、走査点
が記入枠内にあって（記入枠判定）、走査点の色特性が
有彩色の場合、モード切換部２を経由して画像入力部１
から入力されるＲＧＢ系の濃度信号を前述の式（１）　
、　（２）を用いて色度座標ｘ、ｙに変換し、更に整数
化してＸ％＋３’％をアドレスとするカラーマツプ上に
色特性番号を書き込む。ここでカラーマツプは学習に先
行して０に初期化きれているものとする。

なお、前記有彩色か否かの判定は公知の方法、例えばＲ
，Ｇ、Ｈの濃度信号レベルが各々異なっていることによ
って行なう。また、前記色特性番号は走査点の座標値と
あらかじめ設定されている記入枠の位置との比較によっ
て求める。

第３図（ｂ）に示す色特性学習用紙の場合、前記記入枠
判定の処理を削除し、前述と同一の動作で処理させるよ
うにする。但し、色特性番号ｉは前行の副走査線には有
彩色が存在し、現行の副走査線には有彩色が存在しない
時＋１計数するように構成してお・くことで実現する。

なお、領域出力順序番号は初期値は１である。

第２図（ａ）には前述の説明で学習、登録したマークの
色度座標の範囲と色特性番号を例示している。

次に、書式学習部４の処理について説明する。

主走査を水平方向（ＸＸ）、副走査を垂直方向（ＹＹ）
として、第４図に示す学習用紙を走査し、モード切換部
２を経由して画像入力部１から入力されるＲＧＢ系の多
値レベル信号を前述の式（１）　、　（２）を用いて色
度座標ｘ、ｙに変換し、更に整数化したＸＸｌ　ｙ％を
アドレスとするカラーマツプの出力（色特性）が１０」
以外の場合、走査点がマーク上にあると判定し、カラー
マツプの出力を当該マークの色特性とし、走査点の座標
（ＸＸ、ＹＹ）を合成位置とし、前記色特性と合成位置
を一対とするデータを画像合成のための書式情報として
、書式テーブルに登録する。更に走査を続行し、走査点
がマーク上にあると判定されると、該走査点が書式テー
ブルに登録されている書式情報と同一の色特性で連結し
ているか否かを判定し、連結していると判定した場合、
当該書式情報のＸＸ座標と走査点のＸ座標を比較し、小
さい方の値で書式情報のＸＸ座標を更新する。

連結していないと判定された場合には、異なるマークが
検出きれたとして、前述の手順で書式テーブルに格納す
る。

なお、書式情報を更新する時に、画素数を計数しておき
、同一の色特性で連結している画素が存在しないと判定
した時点で、前記画素数が少ない場合、該書式情報を除
去するように処理した方が良い。

前述の手順で色特性学習用紙全面を走査して、第４図に
おける全てのマークから書式情報を検出し登録する。第
４図において、（Ｘ　Ｘ　ｇ　ｔ　ｓ　ｐ　３’　３’
ｇ５．）が合成位置を示し、ｉが色特性を示す色特性番
号である。

なお、マーク画像が連結しているか否かの判定は公知の
技術、例えは特公昭６０−５５８６８号公報に詳述して
いるように、下式（３）を用いて行なう。

ＸＸ（ｉ−１）ｊｂ≦ＸＸｉｊｗ ＸＸ（ｉ−１）ｊｗ≧ＸＸ１ｊｂ　　　　　　（３）但
し、ＸＸ（ｉ−１）ｊｂ、ＸＸ（ｉ−１）ｊｗは各々走
査行ＹＹｉ行の前走査行ＹＹｉ−１の色特性「０ヨから
色特性ｒｋ、への変化点及び色特性ｒｋ」から色特性１
０」への変化点ペアのＸ座標を示し、ＸＸｉ　ｊ　ｂ　
、ＸＸｉ　ｊｗは各々走査行Ｙｉの色特性１０」から前
記色特性と同一の色特性ｒｋ」への変化点及び前記色特
性「ｋ、から色特性ｒＯ」への変化点ペアのＸ座標を示
す。

次に、画像抽出部５と画像合成部６の処理について第６
図を用いて説明する。

なお、画像抽出部５の処理開始時に書式学習部４の書式
テーブルを画像抽出部５に転記し、画像抽出部５及び画
像合成部６では、当該転記した書式テーブル（以下単に
１書式テーブル」という）を用いて画像の抽出と合成を
行なう。また、原稿の走査及び原稿上のマーク検出は書
式学習部４の処理と同じである。

第６図において、副走査ＹＹｉ行まではマーク画像は検
出されないがＹＹ２行では色特性ｉのマーク画像が検出
される。マーク画像が検出されると、当該色特性ｉと同
一の色特性の書式情報が書式テーブルに存在するか否か
を判定し、存在する場合、後続の走査において当該色特
性ｉのマーク画像と同一の色特性で連結する２つのマー
ク画像に挾まれた抽出領域が存在するか否かを判定する
。前記抽出領域が存在する場合、当該色特性を持つ書式
情報の合成位置座標に基づく位置に画像入力部１の走査
と同期して、前記合成位置座標を更新しながら、前記抽
出領域内の画像を合成して順次転送する。

第６図においては、ＹＹａ行のＸＸ３１ｗ−Ｘ３２ｂか
らＹＹｎ−２行のＸＸ（ｎ−２）　１ｗ　〜ＸＸ（ｎ−
２）２ｂの左斜め上りの破線で示す領域の画像が合成画
像となる。

前述の手順で書式テーブルの書式情報が終了するまで原
稿の枚数は１枚に限定きれない。

前述の説明から明らかなように、原稿上に同一の色特性
を持つマークが複数箇所存在する場合でも前述の更新さ
れた合成位置座標に基づいて順次、抽出合成することが
できる。

なお、マークの連結判定は前述の式（３）を用いた方法
による。

第７図は第５図（ａ）、（ｂ）に示す入力原稿から第３
図（ａ）、（ｂ）に示す学習用紙に基ついて作成した合
成画像を示す図である。

なお、画像抽出部５及び画像合成部６の前述の方法に限
定きれるものではない。

また、原稿か学習用紙かを判別できるマークを用紙上に
付加し、前記マークの有無を判別できる機能をモード切
換部２に付加しておくことによって、モード切換部２の
動作を自動化することができる。

なお、前記マークは例えば用紙の上辺に近い領域に所定
長、所定巾、所定数の黒の線分を記載したものである。

〔発明の効果〕

以上詳細に説明したように本発明によれば、色特性学習
用紙上のマークの濃淡または色を、画像合成の書式設定
に使用するマーク及び原稿の任意の領域の画像を抽出す
るためのマークの色特性として学習し、書式学習用紙上
のマークのａ淡又は色を前記色特性と照合し、照合でき
たマークの色特性を位置座標を画像合成のための書式情
報として登録し、書式情報に登録されている色特性に基
づいて、原稿上のマークを検出し、当該マーク内の画像
を抽出し、抽出した画像を前記書式情報に基づいて合成
するようにしたので、ＣＲＴ、プリンタ等の表示装置及
びＦＡＸ、ＱＣＲ，電子黒板１文書処理装置等、文書２
図面、伝票などの画像データを扱うあらゆる分野の装置
に適用でき、且つ使用環境やニーズの変化にも柔軟に対
応できる操作性の優れた画像処理装置を提供できる。

【図面の簡単な説明】

第１図は本発明の画像処理装置の構成を示すブロック図
、第２図は色特性の説明図で、同図（ａ）はマークの色
度座標の範囲の説明図、同図（ｂ）はマークの濃度範囲
の説明図、第３図は色特性学習用紙の例を示す図で、同
図（ａ）は記入枠付学習用紙の例を示す図、同図（ｂ）
は記入枠なし学習用紙の例を示す図、第４図は書式学習
用紙の説明図、第５図は入力原稿用紙例を示す図で、同
図（ａ）は１枚目の原稿を示す図、同図（ｂ）は２枚目
の原稿を示す図、第６図はマーク図 検出及びマーク内画像抽出の説明図、第７→は合成画像
の例を示す図である。 図中、１・・・・画像入力部、２・・・・モード切換部
、３・・・・色特性学習部、４・・・・書式学習部、６
・・・・画像合成部。 特許出願人　沖電気工業株式会社 代理人　弁理士　熊　谷　隆（外１名）−４吟／ｌＩめ
炙延日月品 第２図 −一一一−よＬ４ｋ（Ｘｘ） １：Ｎｆ＃用紙０説朝包 第４図 □主え（■Ｑ １−７オ更上る１ひぐ−７１ｊｌ劇ｆ１柚上哨捩朗ｌ第
６図 ｄノ １秋＠の厘槁 （Ｘａ−ｄ　、７シージ 第５図 ２久ｇ６Ｑ／？槁 Ｃｂ）

Claims (2)

【特許請求の範囲】
1. （１）原稿の任意の領域の画像を抽出し、合成画像を作
   成する画像処理装置において、 用紙上に記載されている画像及び／又はマークの濃淡及
   び色の一方又は双方に応じた情報を出力する画像入力部
   と、 色特性学習モードと書式学習モードと原稿読取モードと
   を切換えるモード切換部と、 前記モード切換部が色特性学習モードの場合には色特性
   学習用紙上のマークの濃淡及び色の一方又は双方に応じ
   た色特性を学習し登録する色特性学習部と、 前記モード切換部が書式学習モードの場合には書式学習
   用紙上のマークの濃淡又は色を前記色特性と照合し、照
   合できたマークの色特性と位置座標を画像合成のための
   書式情報として登録する書式学習部と、 前記モード切換部が原稿読取モードの場合には前記書式
   情報及び／又は前記色特性学習部に登録されている色特
   性に基づいて原稿上のマークを検出し、当該マーク内の
   画像を抽出する画像抽出部と、 前記抽出した画像を前記書式情報の位置座標に基づいて
   合成する画像合成部とを具備することを特徴とする画像
   処理装置。
2. （２）前記モード切換部は、前記色特性学習用紙、前記
   書式学習用紙及び／又は原稿の所定の領域の画像の種類
   に基づいて切換えるようにしたことを特徴とする請求項
   （１）記載の画像処理装置。