JP2896919B2

JP2896919B2 - 画像処理装置

Info

Publication number: JP2896919B2
Application number: JP2096989A
Authority: JP
Inventors: 雅久矢野; 義征山下
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 1990-04-12
Filing date: 1990-04-12
Publication date: 1999-05-31
Anticipated expiration: 2014-05-31
Also published as: JPH03294973A

Description

【発明の詳細な説明】〔産業上の利用分野〕本発明は文書／図面の所望の領域の画像を抽出する画
像処理装置に関するものである。

〔従来技術〕

従来、この種の分野の技術としては、特開昭57−4177
0号公報に開示された画像処理装置があった。

この画像処理装置は、入力用紙上の２色の画像を別々
に読み取る２色読取装置と、この２色読取装置の出力か
ら入力用紙が領域指定、入力画像指定、出力画像指定の
うちいずれかのためものであるかを判別する種別マーク
検出器と、この種別マーク検出器により領域指定と判別
された入力用紙に対する２色読取装置の出力から該入力
用紙に第１の色で書かれた入力画像から抜き取るための
抜取領域を示す情報を検出する第１の検出器と、種別マ
ーク検出器により領域指定と判別された入力用紙に対す
る上記２色読取装置の出力から該入力用紙に第２の色で
書かれた出力画像にはめ込むための挿入領域を示す情報
を検出する第２の検出器と、上記種別マーク検出器によ
り領域指定と判別された入力用紙に対する上記２色読取
装置の出力から該入力用紙に書かれた抜取領域と挿入領
域との対応関係を示す情報を検出する第３の検出器と、
上記３つの検出器の出力が入力された上記種別マーク検
出器により入力画像指定と判別された入力用紙の画像の
うち第１の検出器の出力の抜取領域の画像を、上記種別
マーク検出器により出力画像指定と判別された入力用紙
の画像の上記第２の検出器の出力の上記抜取領域と対応
関係にある挿入領域にはめ込み出力する画像入変え装置
を備えて画像を作成していた。

〔発明が解決しようとする課題〕

しかしながら、上記構成の画像処理装置では下記のよ
うな問題点があった。

（１）異なる形式の文書／図面から或いは同一の形式で
も異なる領域の画像を抽出する場合、毎回、抜取り（抽
出）領域を設定するための用紙を作成する必要があり、
用紙の作成及び登録のために多くの時間を要すると共に
操作が繁雑になる。

（２）複数枚の文書／図面の異なる領域からの画像を抽
出する場合、前記文書／図面毎に抽出領域を設定するた
めの用紙を作成し、上記構成の装置を複数回動作させる
必要があり、用紙作成及び登録時間に多くの時間を要す
るばかりでなく、操作が繁雑で誤操作の危険もある。

本発明は上述の点に鑑みてなされたもので、上述の問
題点を除去するために文書／図面に追記するマークの色
特性と領域出力順序を一対とする出力情報を記載した学
習用紙を学習し、出力情報として登録しておき、前記色
特性に基づいて文書／図面に追記したマークの領域内の
画像を抽出し、当該色特性と一対の出力情報である領域
出力順序に従って順次出力するようにし、使用環境やニ
ーズの変化に柔軟に対応できる操作性の優れた画像処理
装置を提供することを目的とする。

〔課題を解決するための手段〕

上記課題を解決するための本発明は文書／図面の所望
の領域の画像を抽出する処理装置において、学習用紙又は文書／図面上マーク及び／又は文字，図
形，背景などの画像の濃淡及び色の一方又は双方に応じ
情報を出力する画像入力部と、学習モードと原稿読取モ
ードとを切り換えるモード切換部と、該モード切換部が
学習モードの場合には学習用紙上のマークの色特性を学
習し、該学習用紙上のマーク位置に基づいて決定した領
域出力順序と前記色特性を一対とする出力情報を登録す
る学習部と、前記モード切換部が原稿読取モードの場合
前記出力情報の色特性と一致するマーク内の文書／図面
画像を抽出し、当該色特性と一対の領域出力順序に従っ
て順次出力する画像抽出部とを設けた。

また、前記モード切換部は学習用紙上及び文書／図面
の所定領域の画像の種類に基づいて切換えるようにし
た。

〔作用〕

本発明は上記の如く文書／画面に追記するマークの色
特性と領域出力順序とを一対とする出力情報を記載した
学習用紙を学習して出力情報として登録しておき、前記
色特性の基づいてマーク内の文書／図面画像を抽出し、
当該色特性と一対の出力情報である領域出力順序に従っ
て順次出力するようにしたもので、従来のように異なる
形式の文書／図面から或いは同一の形式でも任意の領域
から画像を抽出する場合、毎回、抽出領域を設定するた
めの用紙を作成する必要や、複数枚の文書／図面の異な
る領域からの画像を抽出する場合、文書／図面毎に抽出
領域を設定するための用紙を作成し、装置を複数回動動
作させる必要がなく、使用環境やニーズの変化に柔軟に
対応できる、操作性の優れた画像処理装置となる。

〔実施例〕

以下、本発明の実施例を図面に基づいて説明する。

第１図は本発明の実施例である画像処理装置の構成を
示すブロック図である。図示するように画像処理装置
は、画像入力部１、モード切換部２、学習部３、画像抽
出部４及び画像合成部５で構成される。

画像入力部１は第３図及び第４図に示すような学習用
紙又は原稿を、主走査を水平平行（XX）とし、副走査を
垂直方向（YY）とし走査し、学習用紙又は文書／図面上
のマーク及び／又は文字，図形，背景などの画像の濃淡
及び色の一方又は双方に応じた色情報、例えば濃度多値
レベル信号またはＲ（赤）,G（緑）,B（青）の多値レベ
ル信号を色情報としてモード切換部２へ出力する。

ここで、原稿とはマークの追記された文書／図面とい
う。

モード切換部２は図示しないスイッチなどによって、
学習モード或いは原稿読取モードを設定する。このモー
ド切換部２が学習モードに設定されている場合には、画
像入力部１の出力を学習部３に出力すると共に、学習起
動信号を出力する。モード切換部２が原稿読取りモード
に設定されている場合には、画像入力部１の出力を画像
抽出部４に出力すると共に画像抽出起動信号を出力す
る。学習部３は前記学習起動信号によって動作が開始さ
れ、第３図に示すような学習用紙のマークの色特性を学
習し、学習用紙上のマーク位置に基づいて決定した領域
出力順序信号と信号色特性を一対とする出力情報を登録
する。

画像抽出部４は前記画像抽出起動信号によって動作を
開始し、モード切換部２を経由して画像入力部１から出
力される原稿用紙の色情報を入力して、前記出力情報の
色特性と一致するマークの領域内の文書／図面画像を抽
出し、当該色特性と一対の出力情報である領域出力順序
に従って、画像合成部５へ出力する。

画像合成部５は前記画像抽出部４から出力されるマー
クの領域内の文書／図面画像を合成し、図示しないCRT
やプリンタ等へ表示する。

第２図は原稿上のマークを色毎に分類するための原理
を示す色特性の説明図であって、同図（ａ）はマークの
色度座標の範囲を示す色度図、同図（ｂ）はマークの濃
度範囲の説明図である。

第２図（ａ）の原理を用いる場合、画像入力部１は例
えばRGB系の濃度多値レベル信号を出力できるカラース
キャナが必要である。また、第２図（ｂ）の原理を用い
る場合、画像入力部１は濃度多値レベル信号を出力でき
るモノクロスキャナ又は上記カラースキャナが必要であ
る。

第２図（ａ）の色度図は公知の方法により作成したも
のを概略的に示したものであって、RGB系の濃度信号を
座標変換式（１）を用いて、XYZ系に変換し、Ｘ＝2.7689R＋1.7517G＋1.1302B Ｙ＝ R＋4.5907G＋0.0601B （１）Ｚ＝ 0.0565G＋5.5943B 求められた、X,Y,Zをもとに式（２）を用いて色度座標
x,yを計算し、ｘ＝X/（Ｘ＋Ｙ＋Ｚ）ｙ＝Y/（Ｘ＋Ｙ＋Ｚ）（２）求められた色度座標x,yによる直交座標を用いたもので
ある。

前記x,yは色相と彩度を表わすものであり、Ｙは明度
を表わすものである。

上述のRGB系からXYZ系への変換式〔式（１）〕及び色
相と彩度を表わすx,yを求める計算式〔式（２）〕はそ
れぞれR,G,Bを入力し、X,Y,Zを出力するROM及びX,Y,Zを
入力し、x,yを整数形式で出力するROMを用いて変換する
ことによって、計算時間が不要となり処理の高速化がは
かれる。

第２図（ｂ）の場合は領域抽出対象の文書／図面が
色，黒で表現されるものであって、原稿上のマークの濃
度レベルが前記白，黒の濃度と重ならない濃度レベルで
あって、前記マークの色が色毎に互いに重ならない濃度
レベルを持つ色を選択することによって色の分類が可能
となる。また、前記明度Ｙを同様に表現してもよい。

第３図は学習用紙の説明図であって、同図（ａ）は出
力順序があらかじめ決められた枠内に学習マークを記入
する例、同図（ｂ）は白紙の用紙に学習マークを記入す
る例である。

第３図（ａ）において、mg₁，mg₂，mg₃，……は（Δx
x,Δyy）の大きさを持つ矩形の記入枠であって、学習用
紙の原点（0,0）から所定の距離（xx₁，yy₁）に記入枠
の頂点を持ち、yy₂のピッチであらかじめ黒で印刷され
たものとする。また、図に示すように、前記記入枠m
g₁，mg₂，mg₃，……に対応して、出力順序を明示するた
めの記事（「出力順序１」，「出力順序２」，「出力順
序１」，……）が印刷される。

なお、前記記事及び記入枠mg₁，mg₂，mg₃，……の
色，形状，数及び位置関係は第３図（ａ）に限定される
ものではない。

第３図（ｂ）はあらかじめ定められた規則に従って、
学習マークを記入するための用紙である。前記規則と
は、例えば次のようなものがある。

使用する用紙は画像抽出対象の原稿と類似した特性の
用紙を用いること。

学習マークは絶対に接触しないように離して記入する
こと。

学習用紙に記載した色の順（上から下）に追記マーク
領域内の文書／図面画像が出力される。

なお、前学習用紙には読取に先行して、文書／図面に
追記するマークに合わせて所望の色を記載しておく。以
下の説明において、記載するマークg₁は赤，g₂は緑，g₃
は青とする。

第２図（ａ）に前記マークの色度図上での位置を概略
的に示した。

第４図は画像入力部１へ入力される原稿用紙の説明図
であって、特許広報を文書／図面の画像例とし、該文書
／図面上に学習用紙の領域出力順序に合わせてマークm
₁₁，m₁₂，m₂₁，m₂₂，m₃₁を追記した原稿である。図にお
いて、マークm₁₁，m₁₂は最初に出力する領域を示す色の
追記マークであって、第３画におけるマークg₁に対応す
る。マークm₂₁，m₂₂は２番目に出力する領域を示す色の
追記マークであって、第３図におけるマークg₂に対応す
るマークm₃₁は３番目に出力する領域を示す色の追記マ
ークであって、第３図におけるマークg₃に対応する。な
お、同一の色特性のマークが２つ以上存在する場合、該
マークの位置のYY座標、次のXX座標の昇順に該マーク領
域内の画像を出力するものとする。

次に学習部３の動作について、第２図及び第３図を用
いて説明する。ここで使用する学習用紙の記入枠の色，
形状，数，位置関係及び規則はあらかじめ学習部３に設
定されているものとする。

また、学習する色特性の公知の如何なる色特性を用い
て学習してもよいが、本発明では前述の第２図（ａ）の
色度図を用いて学習するものとし、前述の色度座標x,y
を整数化、例えば100倍した整数値ｘ％,y％をアドレス
とする２次元メモリ（カラーマップ）で色度図を構成す
るものとする。

なお、以下の説明において、用紙平面の座標系は色特
性を表わす、X,Y,Zとの混乱を避けるため主走査或いは
水平方向をXX、副走査或いは垂直方向をYYを表現する。

用紙上の座標と走査時の座標は通常一致しない場合が
多いが説明を簡単にするため、ここでは用紙の左上端を
走査開始点〔原点（0,0）〕、右下端を走査終了点（xen
d,yend）とする座標系で走査するものとする。

主走査を水平方向（XX）、副走査を垂直方向（YY）と
して、第３図（ａ）に示す学習用紙を走査し、走査点が
記入枠内にあって（記入枠判定）走査点のと色特性が有
彩色の場合には、モード切換部２を経由して画像入力部
１から入力されるRGB系の濃度信号を前述の式（１），
（２）を用いて色度座標x,yに変換し、更に整数化した
ｘ％,y％をアドレスとするカラーマップ上に領域出力順
序番号ｉを書き込む。ここで、カラーマップは学習に先
行して０に初期化されているものとする。なお、前記有
彩色か否かの判定は公知の方法、例えばR,G,Bの濃度信
号レベルが夫々異なっているか、全て同レベルかを判定
して行なう。また、前記領域出力順序番号は走査点の座
標値とあらかじめ設定されている記入枠の位置との比較
によって求める。第３図（ｂ）に示す学習用紙の場合に
は、前記記入枠判定の処理を削除し、前述と同一の動作
で処理させるようにする。但し、領域出力順序番号ｉ
は、前行の副走査線には有彩色が存在し、現行の副走査
線上には有彩色が存在しない時、＋１計数するように構
成しておくことで実現する。

なお、領域出力順序番号の初期値は１である。

第２図（ａ）に前述の説明で学習，登録したマークの
色度座標の範囲と出力順序（１），（２），（３）を例
示した。

次に、画像抽出部４のマーク識別処理、マーク領域内
の画像抽出処理について第２図及び第４図乃至第６図を
用いて説明する。

マーク識別処理は次のようにして行なう。画像入力部
１が第４図に示すような原稿を走査して出力されるRGb
の濃度信号を前述の式（１），（２）を用いて色度座標
x,yに変換し、更に整数化したｘ％,y％を求め、該ｘ％,
y％をアドレスとするカラーマップの出力が０以外の場
合走査点がマーク上にあると識別する。

マーク領域内の画像抽出処理について、第５図，第６
図を用いて説明する。

第５図において、副走査YY1行では出力情報に設定さ
れている色特性を持つ画素は検出されないが、YY2行で
は出力順序ｊを持つマーク画像が前述のマーク識別処理
によって識別され、更にYY3行では前記マーク画像に挟
まれた画像（X_WY３〜X_BY３の間の画像）が存在するた
め、当該挾まれた画像を抽出対象の画像とし、第６図
（ａ），（ｂ），（ｃ）に示すようなフレームバッファ
のうち出力順序ｊに対応するフレームバッファに順次蓄
積する。

前述の手順で順次マーク画像に挾された画像を抽出
し、蓄積していくが副走査がYYn−１行に達するとマー
ク画像に挾まれた画像の抽出は行なわれない。副走査が
YYnに達するとマーク画像も存在しなくなるため、出力
順序ｊに対応するマーク画像の抽出処理は終了する。

なお、１つのマークの領域の抽出処理終了時、該マー
クに対応するフレームバッファの最終アドレスのうち少
なくとも副走査方向のアドレス最終格納アドレスを保存
しておき、再度同一の出力順序を持つマーク領域内の画
像を抽出する場合、前記アドレスの次のアドレスから、
抽出した画像を蓄積する。

第６図（ａ），（ｂ），（ｃ）は第４図に示す原稿か
ら抽出した画像をフレームバッファに格納した例を示す
図である。

画像合成部５は抽出した領域数、抽出した画像を格納
したフレームバッファの最終格納アドレスを参照して、
出力順序１のフレームバッファから順次画像を抽出し、
出力用画像メモリ,CRT,プリンタ等に出力する。

第７図は１つのフレームバッファFBuと領域テーブルT
aを用いて、マーク領域内から抽出した画像を保存した
例を示す図である。

第７図に示すような格納形式とする場合、画像抽出部
４は原稿から抽出した画像を抽出順に順次フレームバッ
ファFBuに格納し、少なくとも抽出した領域毎にフレー
ムバッファFBuへ格納する時の先頭アドレスとマークの
出力順序を表わす番号を一対とするデータを領域テーブ
ルTaに格納する。

前述のように、領域テーブルTaによって画像の抽出順
序を示して抽出画像を出力するようにしてもよい。

画像合成部５は領域テーブルTaに格納されている出力
順序と先頭アドレスに基づいてフレームバッファFBuの
画像を抽出して出力する。

第８図は前述の処理によって第４図に示す原稿から抽
出した画像を合成して得られた合成画像例を示す図であ
る。

本発明の画像処理装置は、前述の説明から明らかなよ
うに、抽出領域を示すマークの色によって画像出力順序
が定義されているので、複数枚の原稿から必要な画像を
抽出し合成する場合にも対処することができる。

第９図（ｂ）は第４図に示す原稿を１枚目とし、第９
図（ａ）に示す原稿を２枚目とする複数枚の原稿から必
要領域を抽出し合成した合成画像を示す図である。

なお、画像抽出部４及び画像合成部５の処理は前述の
方法に限定されるものではない。

例えば、画像抽出部４の処理としては第10図に示すよ
うに、連絡マーク画像の外接枠を検出し、当該外接枠内
の画像を抽出する方法。又は、第11図に示すように画像
を水平及び垂直方向に走査し、両方向とマーク画像に挾
まれた領域を抽出する方法、或いはマーク画像の輪郭を
検出し連結画像の塗りつぶしの手法を用いてマーク内の
画像を抽出方法等々がある。

また、画像合成部５の処理方法としては、第１図に示
すように、出力順序1,2,3に対応してあらかじめ設定し
ている領域に抽出した画像を出力する方法等々がある。

また、前述の処理はマーク画像を閉ループについての
み説明したが、塗り潰しマーク等領域を表現できる形状
のマークに対応できるように画像抽出部４及び画像合成
部５を構成してもよい。

また、学習用紙か原稿かを判別できるマーク、例えば
用紙の上辺に近い領域に所定長、所定巾の黒の線分を記
載しておき、前記マークの有無を判別できる機能をモー
ド切換部２に付加しておくことによって、学習用紙読取
と原稿読取との切換を自動化することもできる。

〔発明の効果〕

以上説明したように本発明によれば、原稿上のマーク
の色特性と領域出力順序とを一対とする出力情報を記載
した学習用紙を学習して出力情報とし登録しておき、前
記色特性に基づいてマーク内の文書／図面画像を抽出
し、当該色特性と一対の出力情報である領域出力順序に
従って順次出力するようにしたので、使用環境やニーズ
の変化に柔軟に対応できる。操作性の優れた画像処理装
置を実現することがけいるという優れた効果が得られ
る。

【図面の簡単な説明】

第１図は本発明の実施例を示すブロック図、第２図は色
特性の説明で、同図（ａ）はマークの色度座標の範囲の
説明図、同図（ｂ）はマークの濃度範囲の説明図、第３
図（ａ），（ｂ），（ｃ）はそれぞれ学習用紙の説明
図、第４図は入力原稿の説明図、第５図は画像抽出の説
明図、第６図（ａ），（ｂ），（ｃ）はフレームバッフ
ァへの格納例を示す図、第７図はフレームバッファと領
域テーブルによる抽出画像例を示す図、第８図は合成画
像例を示す図、第９図は２枚の原稿による画像合成を説
明するための図で、同図（ａ）は２枚目の入力原稿を示
す図、同図（ｂ）は合成画像を示す図、第10図は画像抽
出部の他の処理の説明図、第11図は画像抽出部の他の処
理の説明図、第12図は画像合成部の他の処理の説明図で
ある。図中、１……画像入力部、２……モード切換部、３……
学習部、４……画像抽出部、５……画像合成部。

フロントページの続き (58)調査した分野(Int.Cl.⁶，ＤＢ名) G06T 1/00 - 1/60 H04N 1/387

Claims

(57)【特許請求の範囲】

【請求項１】文書／図面の所望の領域の画像を用いて合
成画像を作成する画像処理装置において、学習用紙又は文書／図面上マーク及び／又は文字，図
形，背景などの画像の濃淡及び色の一方又は双方に応じ
情報を出力する画像入力部と、学習モードと原稿読取モードとを切り換えるモード切換
部と、該モード切換部が学習モードの場合には学習用紙上のマ
ークの色特性を学習し、該学習用紙上のマーク位置に基
づいて決定した領域出力順序と前記色特性を一対とする
出力情報を登録する学習部と、前記モード切換部が原稿読取モードの場合には前記出力
情報の色特性と一致するマーク内の文書／図面画像を抽
出し、当該色特性と一対の領域出力順序に従って画像合
成部に順次出力する画像抽出部を設けたことを特徴とす
る画像処理装置。
【請求項２】前記モード切換部は学習用紙上及び文書／
図面の所定領域の画像の種類に基づいて切換えるように
したことを特徴とする請求項（１）記載の画像処理装
置。