JP2003179737A

JP2003179737A - 画像処理装置、画像形成装置、および画像処理方法

Info

Publication number: JP2003179737A
Application number: JP2001377124A
Authority: JP
Inventors: Makoto Otsu; 誠大津
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2001-12-11
Filing date: 2001-12-11
Publication date: 2003-06-27

Abstract

(57)【要約】【課題】画像入力装置３で入力した写真に添付された
日付等の上書き文字を消去し、ユーザーの所望の画像を
出力、あるいは形成する。【解決手段】画像処理装置２は、写真データから、前
記上書き文字に関する文字データを抽出する抽出手段
（領域分離処理部８）と、上書き文字の周辺に位置する
周辺写真データに基づいて上書き文字の下地画像を推測
し、前記文字データを前記下地画像に関する下地画像デ
ータに置き換える置換手段（文字消去部９）を備えてい
る。これにより、画像処理装置２によって、写真データ
に存在する上書き文字を消去し、元の写真画像を復元で
きる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、写真を読み込むこ
とで作成された写真データに画像処理を施す画像処理装
置、画像形成装置、および画像処理方法に関するもので
ある。

【０００２】

【従来の技術】フィルムスキャナ、スキャナ、デジタル
カメラ等のデジタルカラー画像入力装置では、カラー情
報の出力信号としてデジタル信号を生成するものであ
る。具体的には、一般に３色分解系の固体撮像素子（Ｃ
ＣＤ）によって得られる３刺激値色情報（Ｒ，Ｇ，Ｂ）
のアナログ画像をデジタル画像に変換し、出力信号とし
ている。

【０００３】この画像入力装置によって出力されたデジ
タル画像からユーザーの要求する画像を生成し、生成し
た画像を出力するといった場合がある。例えば、銀塩写
真方式のカメラは、フィルムに被写体を露光する時に、
撮影した日付等を付加情報（上書き文字）として焼き付
ける機能を有しているが、銀塩写真に画像処理を施し
て、その上書き文字を消去したい、という要求がある。

【０００４】しかし、一旦原稿内に埋め込まれた上書き
文字を前記画像入力装置で入力した場合は、画像として
扱うことしかできない。つまり、画像の中に存在する文
字は、一般にコンピュータ等で文字データとして扱われ
るキャラクター文字ではなく、画像の一部に過ぎない。

【０００５】一方、入力されたデジタル情報を用いてキ
ャラクター文字を得る方法としてＯＣＲが存在する。し
かし、ＯＣＲでは白紙の背景上に存在する文字の検出を
想定している。従って、写真に存在する不要な上書き文
字を消去するという要求に対して、単純に利用すること
はできない。したがって、いったんフィルムに直接焼き
付けた上書き文字は、その物理的な制約から、消去する
ことが容易ではない。

【０００６】しかし、今日では、いったん銀塩写真方式
で撮影した画像をデジタルデータとして保存し、管理す
るという場合が多く、銀塩写真方式の上書き文字を消去
するという要求は増えている。

【０００７】こういった要求に対して、特開平５−６８
１６１号公報では、ユーザーがペン入力のような補助入
力装置で、画像から必要部分だけを取り出して、任意の
位置に配置できるデジタル複写機（画像形成装置）が開
示されている。このデジタル複写機によれば、ユーザー
が前記補助入力装置で原稿画像の一部を取り出して、上
書き文字の部分に配置することにより上書き文字を消去
することができる。

【０００８】

【発明が解決しようとする課題】しかしながら、上記の
従来技術では、原稿画像ごとにユーザーが原稿画像の一
部および上書き文字の部分を指定しなければならない。
よって、数枚の画像の消去処理を行う場合は時間や手間
もそれほどかからないが、扱う画像の数が増えてきた場
合、指定する時間が長くなり、手間もかかるため、上書
き文字を消去するための操作が煩雑になるという問題が
生ずる。

【０００９】また、特にデジタルデータにおいては、画
像のプロパティ内に日付等の付加情報が含まれている場
合が多い。したがって、銀塩写真と異なり、画像内に日
付等の付加情報を埋め込む必要性はなく、むしろ、この
ような付加情報は画像から消去したい、という要求があ
る。

【００１０】こういった要求が生じた場合、上記従来技
術では、一且画像内に埋め込まれた付加情報を削除する
ために、前記補助入力装置を用いてユーザーが手動で補
正を行う必要がある。したがって、この補正を行うため
の操作が煩雑となり、多くの画像を補正することは容易
でない。

【００１１】本発明は、上記の問題点を解決するために
なされたものであって、その目的は、画像入力装置から
出力された写真画像に存在する上書き文字を消去し、ユ
ーザーの所望の画像を出力、あるいは形成できる画像処
理装置および画像形成装置、並びに画像処理方法を提供
することにある。

【００１２】

【課題を解決するための手段】本発明に係る画像処理装
置（本画像処理装置）は、上記の課題を解決するため
に、写真を読み込むことで作成された写真データに画像
処理を施す画像処理装置において、写真データから、写
真に添付された上書き文字に関する文字データを抽出す
る抽出手段と、上書き文字の周辺に位置する周辺写真デ
ータに基づいて上書き文字の下地画像を推測し、前記文
字データを前記下地画像に関する下地画像データに置き
換える置換手段を備えることを特徴とする。

【００１３】本画像処理装置は、スキャナ等の画像読取
装置（画像入力装置）から写真を読み込むことで作成さ
れた写真データ（原稿画像データ）に対し、所定の画像
処理を施す画像処理装置である。

【００１４】ここで、写真データとは、画像読取装置に
おいて読み込まれる原稿中にある写真に関する画像デー
タであり、例えば、画像読取装置において読み込まれる
銀塩写真に関する画像データである。なお、原稿の全て
が写真である必要はなく、原稿の一部が写真であればよ
い。また、画像データとは、画像読取装置で読み取った
原稿に関するデータであり、例えば、画像読取装置から
出力されるアナログデータまたはデジタルデータであ
る。

【００１５】本画像処理装置は、その写真データに添付
された上書き文字に関する文字データを抽出する抽出手
段を備えている。ここで、文字データとは、写真に付加
情報として添付された上書き文字に関する画像データで
ある。上書き文字とは、例えば銀塩写真中に付加される
日付である。

【００１６】そして、本画像処理装置は、上書き文字の
周辺に位置する写真データ（周辺写真データ）に基づい
て上書き文字の下地画像を推測し、前記文字データを前
記下地画像に関する下地画像データに置き換える置換手
段を備えている。ここで、下地画像とは、上書き文字に
よって隠されてしまった部分の画像である。

【００１７】すなわち、本画像処理装置によれば、入力
された写真データに添付された上書き文字を抽出し、そ
の上書き文字を消去し、上書き文字の周辺の写真データ
に基づいて、元の下地画像を復元できる。これにより、
消去したい上書き文字の指定や、上書き文字の部分に配
置する原稿画像の一部の指定を行う必要がないため、元
の写真画像を復元するための操作の煩雑さを解消でき
る。すなわち、ユーザーがいちいち補正を行う必要がな
く、元の写真画像を復元するための操作の煩雑さを解消
できる。

【００１８】例えば、日付等の付加情報（上書き文字）
が付随した銀塩写真の写真データを入力した際に、日付
等の付加情報が必要ではないという場合に本画像処理装
置は有効である。すなわち、本画像処理装置は、写真デ
ータに存在する不要な文字を消去し、元の写真画像を復
元できる。よって、ユーザーがいちいち補正を行う必要
がなく、元の写真画像を復元するための操作の煩雑さを
解消できる。

【００１９】また、前記置換手段は、上書き文字を構成
する各画素のそれぞれを中心とする所定範囲内にある周
辺写真データの画素から前記下地画像の各画素を推測
し、上書き文字を構成する各画素を、推測された下地画
像の各画素に置き換えることが好ましい。

【００２０】この場合、置換手段は、上書き文字に含ま
れる各画素をそれぞれ中心画素とし、その中心画素の一
定範囲に含まれる写真データの画素の値に基づいて、前
記下地画像を推測し、上書き文字に含まれる各画素の値
を、下地画像として推測した画素の値に置き換える。こ
れにより、下地画像を精度よく推測でき、より正確に元
の下地画像を復元できる。なお、その範囲は本画像処理
装置ごとに便宜設定される。

【００２１】また、前記置換手段では、上書き文字の周
辺に位置する周辺写真データに基づいて上書き文字の下
地画像を推測し、この下地画像に関する下地画像データ
に前記文字データを置き換えるために、モフォロジフィ
ルタが用いられていることが好ましい。

【００２２】ここで、モフォロジフィルタによる処理と
は、以下の（I）（II）の画像処理のことである。な
お、文字データの画素値が周辺写真データの画素値より
小さい場合には（I）の処理(クロージング処理)を、ま
た、文字データの画素値が周辺写真データの画素値より
大きい場合には（II）の処理（オープニング処理）を行
う。

【００２３】（I）まず、文字データを構成する１つの
画素に対して、その画素を中心とする、所定広さの領域
(第１領域)を設定する。そして、この第１領域に、さら
に小さな領域である分割領域を複数設定する。この設定
は、できるだけ多くの画素を分割領域の中心画素とする
ように行われる。従って、各分割領域は、その中心画素
を隣接させるように、互いに重複するように設定され
る。

【００２４】その後、各分割領域における最大の画素値
（最大画素値）を、全第１領域に渡って検出してゆく
（下地画像の検出（推測））。そして、各分割領域にお
ける中心画素の値を、検出した最大画素値（その中心画
素の属する分割領域の最大画素値）に置き換える。

【００２５】これにより、第１領域の中で比較的小さい
画素値を有する文字データを、最大画素値を有する周辺
写真データの画素（すなわち、下地画像データ）によっ
て置き換えることとなる。なお、ここまでの処理を、文
字データを構成する全画素に対して行う。

【００２６】次に、第１領域の画素のうち、上記の中心
画素となることのできた画素の集合からなる領域（第２
領域）を設定する。そして、第１領域に対して行った場
合と同様に、第２領域に対しても分割領域を設定する。

【００２７】その後、各分割領域における最小の画素値
（最小画素値）を、全第２領域に渡って検出してゆく。
そして、各分割領域における中心画素の値を、検出した
最小画素値（その中心画素の属する分割領域の最小画素
値）に置き換える。

【００２８】これにより、文字データと置き換えられた
下地画像データを、より正確となるように補正すること
が可能となる。

【００２９】すなわち、上記のような第１領域を用いた
文字データの置き換えを行うだけでは、下地画像が文字
の写真データ（文字を撮影して得られる写真データ；写
真内文字）の一部であった場合、その写真内文字を歪め
てしまう（例えば細くしてしまう）。そこで、上記のよ
うな第２領域を用いた処理を行うことで、写真内文字に
おける下地画像でない部分（文字データに隠されていな
い部分）の画素を利用して、下地画像部分を補正するこ
とが可能となる。

【００３０】（II）まず、文字データを構成する１つの
画素に対して、その画素を中心とする、所定広さの領域
(第１領域)を設定する。そして、この第１領域に、さら
に小さな領域である分割領域を複数設定する。この設定
は、できるだけ多くの画素を分割領域の中心画素とする
ように行われる。従って、各分割領域は、その中心画素
を隣接させるように、互いに重複するように設定され
る。

【００３１】その後、各分割領域における最小の画素値
（最小画素値）を、全第１領域に渡って検出してゆく
（下地画像の検出（推測））。そして、各分割領域にお
ける中心画素の値を、検出した最小画素値（その中心画
素の属する分割領域の最小画素値）に置き換える。

【００３２】これにより、第１領域の中で比較的大きい
画素値を有する文字データを、最小画素値を有する周辺
写真データの画素（すなわち、下地画像データ）によっ
て置き換えることとなる。なお、ここまでの処理を、文
字データを構成する全画素に対して行う。

【００３３】次に、第１領域の画素のうち、上記の中心
画素となることのできた画素の集合からなる領域（第２
領域）を設定する。そして、第１領域に対して行った場
合と同様に、第２領域に対しても分割領域を設定する。

【００３４】その後、各分割領域における最大の画素値
（最大画素値）を、全第２領域に渡って検出してゆく。
そして、各分割領域における中心画素の値を、検出した
最大画素値（その中心画素の属する分割領域の最大画素
値）に置き換える。

【００３５】これにより、文字データと置き換えられた
下地画像データを、より正確となるように補正すること
が可能となる。

【００３６】すなわち、上記のような第１領域を用いた
文字データの置き換えを行うだけでは、下地画像が文字
の写真データ（文字を撮影して得られる写真データ；写
真内文字）の一部であった場合、その写真内文字を歪め
てしまう（例えば細くしてしまう）。そこで、上記のよ
うな第２領域を用いた処理を行うことで、写真内文字に
おける下地画像でない部分（文字データに隠されていな
い部分）の画素を利用して、下地画像部分を補正するこ
とが可能となる。

【００３７】これにより、上書き文字の周辺の写真デー
タに基づいて前記下地画像を精度よく推測でき、より正
確に元の下地画像を復元できる。

【００３８】また、モフォロジフィルタを用いると、文
字が太く消去が完全に出来ないような画像では、一度最
大値（最小値）で置き換えた画像に対し、再度最小値
（最大値）で置き換えるため、文字が細くなるといった
問題が生じにくくなる。

【００３９】すなわち、モフォロジフィルタを用いない
場合、太い文字で完全に消去できないときに、領域（マ
スク）内最大値（最小値）で注目画素を普通に置き換え
ると文字周辺が細くなり明らかに不自然な画像が形成さ
れてしまう。

【００４０】これに対して、モフォロジフィルタを用い
ると、消去できないようなサイズの文字に対しては悪影
響を与えることなくマスクサイズに応じた文字のみを消
去することが可能になる。

【００４１】また、本画像処理装置は、前記抽出手段に
よって抽出された文字データをキャラクター文字として
変換する変換手段と、変換されたキャラクター文字を前
記写真データの画像内タグに付加する付加手段とを備え
ることが好ましい。

【００４２】この場合、前記文字データは、一般にコン
ピュータ等で文字として扱われるキャラクター文字に変
換され、変換されたキャラクター文字をその写真データ
の画像内タグ（プロパティ）に付加する。すなわち、写
真データ内に存在する日付等の付加情報をキャラクター
文字に変換し、その変換したキャラクター文字を、写真
データの画像内タグ（プロパティ）に付加する。

【００４３】これにより、キャラクター文字に基づいて
複数の写真データを管理することができ、さらに当該写
真データの検索を容易に行うことができる。

【００４４】一方、本発明に係る画像形成装置は、上記
の画像処理装置を備えていることを特徴とする。この場
合、写真上の不要な文字などを消去し、所望の画像を出
力し得る画像形成装置を提供できる。

【００４５】また、本発明に係る画像処理方法（本画像
処理方法）は、上記の課題を解決するために、写真を読
み込むことで作成された写真データに画像処理を施す画
像処理方法において、写真データから、写真に添付され
た上書き文字に関する文字データを抽出する抽出ステッ
プと、上書き文字の周辺に位置する周辺写真データに基
づいて上書き文字の下地画像を推測し、この下地画像に
関する下地画像データに前記文字データを置き換える置
換ステップを含むことを特徴とする。

【００４６】本画像処理方法は、上記の本画像処理装置
に用いられている画像処理方法である。この場合、入力
された写真データに添付された上書き文字を抽出し、そ
の上書き文字を消去し、上書き文字の周辺に位置する写
真データ（周辺写真データ）に基づいて、元の下地画像
を復元できる。例えば、日付等の付加情報（上書き文
字）が付随した銀塩写真の写真データを入力した際に、
日付等の付加情報が必要ではないという場合に本画像処
理方法は有効である。

【００４７】すなわち、消去したい上書き文字の指定
や、上書き文字の部分に配置する原稿画像の一部の指定
を行う必要がないため、元の写真画像を復元するための
操作の煩雑さを解消できる。

【００４８】

【発明の実施の形態】以下に、本発明の一実施形態につ
いて説明する。

【００４９】図１に、本発明の一実施形態に係る画像形
成装置１５のブロック図を示す。画像処理装置２はカラ
ー画像処理装置であり、これにカラー画像入力装置３お
よびカラー画像出力装置４が接続され、全体としてデジ
タルカラー複写機である画像形成装置１５が構成されて
いる。なお、画像形成装置１５は、操作パネル１を備え
ている。

【００５０】操作パネル１は、画像形成装置１５が備え
た各処理モードをユーザーが設定するためのものであ
る。操作パネル１は、詳細は図示していない、液晶ディ
スプレイ等からなる表示部、設定ボタン、およびテンキ
ー等より構成されている。

【００５１】カラー画像入力装置３（画像読取手段）
は、例えばＣＣＤ（Charge Coupled Device）を備えた
スキャナ部より構成され、原稿からの反射光像を、ＲＧ
Ｂ（Ｒ：赤、Ｇ：緑、Ｂ：青）のアナログ信号としてＣ
ＣＤにて読み取って、画像データとして画像処理装置２
に入力するものである。

【００５２】カラー画像出力装置４は、画像データを例
えば紙等の記録媒体上に出力するもので、例えば、電子
写真方式やインクジェット方式を用いたカラー画像出力
装置等を挙げることができるが特に限定されるものでは
ない。

【００５３】図１に示すように、画像処理装置２は、Ａ
／Ｄ変換部５、シェーディング補正部６、入力階調補正
部７、領域分離処理部８、文字消去部９、色補正部１
０、黒生成下色除去部１１、空間フィルタ処理部１２、
出力階調補正部１３、及び階調再現処理（中間調生成）
部１４から構成されている。

【００５４】カラー画像入力装置３にて読み取られたア
ナログ信号の画像データは、画像処理装置２内を、Ａ／
Ｄ変換部５、シェーディング補正部６、入力階調補正部
７、領域分離処理部８、文字消去部９、色補正部１０、
黒生成下色除去部１１、空間フィルタ処理部１２、出力
階調補正部１３、及び階調再現処理部１４の順で送ら
れ、ＣＭＹＫのデジタルカラー信号として、カラー画像
出力装置４へ出力される。

【００５５】Ａ／Ｄ（アナログ／デジタル）変換部５
は、ＲＧＢのアナログ信号をデジタル信号に変換するも
ので、シェーディング補正部６は、Ａ／Ｄ変換部５より
送られてきたデジタルのＲＧＢ信号に対して、カラー画
像入力装置３の照明系、結像系、撮像系で生じる各種の
歪みを取り除く処理を施すものである。

【００５６】入力階調補正部７は、シェーディング補正
部６にて各種の歪みが取り除かれたＲＧＢ信号（ＲＧＢ
の反射率信号）に対して、カラーバランスを整えると同
時に、濃度信号など画像処理装置２に採用されている画
像処理システムの扱い易い信号に変換する処理を施すも
のである。また、ＲＧＢの濃度信号は補色反転されて
Ｃ’Ｍ’Ｙ’信号に変換される。

【００５７】領域分離処理部８は、Ｃ’Ｍ’Ｙ’信号よ
り、入力画像中の各画素を文字領域、網点領域、及び写
真領域の何れかに分離するものである。領域分離処理部
８は、分離結果に基づき、画素がどの領域に属している
かを示す領域識別信号を、黒生成下色除去部１１、空間
フィルタ処理部１２、及び階調再現処理部１４へと出力
すると共に、入力階調補正部７より出力された入力信号
をそのまま後段の色補正部１０に出力する。

【００５８】文字消去部９は、領域分離処理部８によっ
て、写真領域内の文字（上書き文字）として検出された
文字に対し消去処理を施すものである。なお、領域分離
処理部８、文字消去部９における画像処理の詳細は後述
する。

【００５９】色補正部１０は、色再現の忠実化実現のた
めに、不要吸収成分を含むＣＭＹ（Ｃ：シアン・Ｍ：マ
ゼンタ・Ｙ：イエロー）色材の分光特性に基づいた色濁
りを取り除く処理を行うものである。

【００６０】黒生成下色除去部１１は、色補正後のＣＭ
Ｙの３色信号から黒（Ｋ）信号を生成する黒生成、元の
ＣＭＹ信号から黒生成で得たＫ信号を差し引いて新たな
ＣＭＹ信号を生成する処理を行うものであって、ＣＭＹ
の３色信号はＣＭＹＫの４色信号に変換される。

【００６１】黒生成処理の一例として、スケルトンブラ
ックによる黒生成を行う方法が一般的である。この方法
では、スケルトンカーブの入出力特性をｙ＝ｆ（ｘ）、
入力されるデータをＣ，Ｍ，Ｙ，出力されるデータを
Ｃ”，Ｍ”，Ｙ”，Ｋ’、ＵＣＲ（Under Color Remova
l）率をα（０＜α＜１）とすると、黒生成下色除去処
理は以下の式で表わされる。

【００６２】Ｋ’＝ｆ｛min（Ｃ，Ｍ，Ｙ）｝Ｃ”＝Ｃ−αＫ’ Ｍ”＝Ｍ−αＫ’ Ｙ”＝Ｙ−αＫ’ 空間フィルタ処理部１２は、黒生成下色除去部１１より
入力されるＣＭＹＫ信号の画像データに対して、前記領
域識別信号を基にデジタルフィルタによる空間フィルタ
処理を行い、空間周波数特性を補正することによって出
力画像のぼやけや粒状性劣化を防ぐように処理するもの
であって、階調再現処理部１４も、空間フィルタ処理部
１２と同様に、ＣＭＹＫ信号の画像データに対して、前
記領域識別信号を基に所定の処理を施すものである。

【００６３】例えば、領域分離処理部８にて文字に分離
された領域は、特に黒文字或いは色文字の再現性を高め
るために、空間フィルタ処理部１２による空間フィルタ
処理における鮮鋭強調処理で高周波数の強調量が大きく
される。同時に、階調再現処理部１４においては、高域
周波数の再現に適した高解像度のスクリーンでの二値化
または多値化処理が選択される。

【００６４】また、領域分離処理部８にて網点に分離さ
れた領域に関しては、空間フィルタ処理部１２におい
て、入力網点成分を除去するためのローパス・フィルタ
処理が施される。そして、出力階調補正部１３では、濃
度信号などの信号をカラー画像出力装置４の特性値であ
る網点面積率に変換する出力階調補正処理を行った後、
階調再現処理部１４で、最終的に画像を画素に分離して
それぞれの階調を再現できるように処理する階調再現処
理（中間調生成処理）が施される。領域分離処理部８に
て写真に分離された領域に関しては、階調再現性を重視
したスクリーンでの二値化または多値化処理が行われ
る。

【００６５】前述した各処理が施された画像データは、
一旦記憶手段（図示せず）に記憶され、所定のタイミン
グで読み出されてカラー画像出力装置４に入力される。

【００６６】次に領域分離処理部８の構成を説明する。
領域分離処理部８は、図２に示すように、マスク作成部
２７、網点領域判定部２１、写真領域判定部２２、文字
領域判定部２３、写真領域内文字検出部２４、ＯＣＲ２
５、および写真領域判定結果記憶部２６（以下、記憶部
２６と称する。）を備えている。

【００６７】マスク作成部２７は、入力階調補正部７よ
り入力された画像データによって、７×７の局所マスク
を作成（抽出）するものである。ここで、局所マスクと
は、前記画像データに含まれる各画素を中心として、一
定の範囲に位置する複数の画素からなる画素の集合であ
る。

【００６８】記憶部２６は、写真領域判定部２２におい
て判定された写真領域を記憶するためのものである。写
真領域内文字検出部２４は、写真領域内の文字領域を検
出するためのものである。ＯＣＲ（Optical Character
Reader：文字原稿読み取り認識装置）２５は、写真領域
中の文字領域をキャラクター文字に変換するものであ
る。

【００６９】網点領域判定部２１は、画像データの網点
領域を判定するものである。網点領域判定部２１の構成
としては、例えば、「画像電子学会研究会予稿９０−０
６−０４」に記載されている方法を用いることができ
る。この方法は、注目画素（中心画素）を中心としたＭ
×Ｎ（Ｍ、Ｎは自然数であり、本実施の形態ではＭ＝Ｎ
＝７）画素のブロック内でブロック内の画素に対して信
号レベルの平均値（Ｄave）を求め、その平均値を用い
てブロック内の各画素を２値化する。また、最大画素信
号レベル（Ｄmax）、最小画素信号レベル（Ｄmin）も同
時に求める。

【００７０】網点領域では、小領域における画像信号の
変動が大きいことや、背景に比べて濃度が高いことを利
用し、網点領域を識別する。２値化されたデータに対し
て主走査、副走査方向でそれぞれ０から１への変化点
数、１から０への変化点数を求めて、それぞれＫ_H、Ｋ_V
とし、閾値Ｔ_H、Ｔ_Vと比較して両者が共に閾値を上回っ
たら網点領域とする。また、背景との誤判定を防ぐため
に、先に求めたＤmax、Ｄmin、Ｄaveを閾値Ｂ₁，Ｂ₂と
比較する。すなわち、Ｄmax−Ｄave＞Ｂ₁、かつ、Ｄave−Ｄmin＞Ｂ₂、かつ、Ｋ_H＞Ｔ_H、かつ、Ｋ_V＞Ｔ_V の時、網点領域とする。

【００７１】あるいは、網点領域判定部２１を新たに設
けるのではなく、文字領域判定部２３を用い、網点では
文字よりランレングスが小さくなる特徴を利用して判定
するようにしてもよい。

【００７２】写真領域判定部２２は、画像データの写真
領域を判定するものであり、マスク内最大値算出部２
８、マスク内最小値算出部２９、近傍濃度変化量算出部
３０、マスク内最大差算出部３１、しきい値処理部３
２、および判定処理部３３を備えている。

【００７３】マスク内最大値算出部２８、マスク内最小
値算出部２９、近傍濃度変化量算出部３０、およびマス
ク内最大差算出部３１では、画像データの写真領域を判
定するためのパラメータである局所マスク領域内の最大
値、最小値、近傍濃度変化量、および最大濃度差をそれ
ぞれ算出する。しきい値処理部３２では上記の各部で算
出された値の閾値処理をそれぞれ行い、その値に基づい
て判定処理部３３では画像データの写真領域を判定す
る。なお、各値の算出方法については、後述する。

【００７４】一方、文字領域判定部２３は画像データの
文字領域を判定するものであり、マスク内最大差算出部
３４、エッジ量算出部３５、２値化処理部３６、上昇・
下降エッジ算出部３７、ランレングス算出部３８、ペア
ー検出部３９、しきい値処理部４０、および判定処理部
１６を備えている。

【００７５】マスク内最大差算出部３４およびエッジ量
算出部３５では、画像データの文字領域を判定するため
のパラメータである局所マスク領域内の最大濃度差およ
びエッジ量を算出する。ランレングス算出部３８では、
２値化処理部３６にて２値化処理を行った局所マスクに
対して、画像データの文字領域を判定するためのパラメ
ータであるランレングスを算出する。しきい値処理部４
０では上記の各部で算出された値の閾値処理をそれぞれ
行う。ペアー検出部３９では、上昇・下降エッジ算出部
３７にて算出された上昇エッジおよび下降エッジに基づ
いてペアー検出を行う。そして、判定処理部１６では、
各しきい処理部４０およびペアー検出部３９の算出結果
に基づいて、画像データの文字領域を判定する。なお、
各値の算出方法については、後述する。

【００７６】次に、画像処理装置１５の動作を説明す
る。画像処理装置１５は、写真内に添付された日付等の
上書き文字（写真領域内の文字領域）を消去することが
できる。写真内に添付された上書き文字を消去する場合
は、ユーザーがその処理モードを選択することにより行
う。なお、モードの選択は操作パネル１により行う。

【００７７】ここで、前記上書き文字を消去しない処理
モードを選択した場合、以下の工程で画像処理が行われ
る。このモードでは、画像処理装置２によって入力画像
（写真）を１回スキャンする。前記上書き文字を消去し
ない場合のスキャンでは、文字領域判定部２３、写真領
域判定部２２、および網点領域判定部２１を動作させ
る。そして、入力された画像データに対し通常の領域分
離処理が行われる。ここで、文字消去部９での処理はス
ルー、すなわち処理は行われない。

【００７８】一方、上書き文字を消去する処理モードを
選択した場合、以下の工程で画像処理が行われる。この
モードでは、画像処理装置２によって入力画像（写真）
を２回スキャン（プレスキャン、本スキャン）する。

【００７９】プレスキャンでは画像データ中にある写真
領域を判定し、本スキャンでは文字領域を判定する。そ
して、プレスキャン時に写真領域と判定され、かつ、本
スキャン時に文字領域と判定された領域に対して、文字
領域の消去処理および補正処理を施すものとする。

【００８０】具体的には、プレスキャンでは写真領域判
定部２２のみを動作させる。マスク作成部２７において
作成された各局所マスクごとに、写真領域とその他の領
域とに分離する領域分離処理を行う。処理結果はハード
ディスク等による記憶部２６に保持するものとする。

【００８１】次に、本スキャンでは、文字領域判定部２
３、写真領域内文字検出部２４、およびＯＣＲ２５を動
作させる。マスク作成部２７において作成された各局所
マスクごとに、文字領域とその他の領域とに分離する領
域分離処理を行う。

【００８２】そして、最終的に文字領域の消去処理を行
う領域の決定は、写真領域内文字検出部２４で行われ
る。具体的には、写真領域内文字検出部２４において、
前記のプレスキャン時の領域分離結果および本スキャン
時の領域分離結果を結合し、上書き文字の消去処理を行
う。

【００８３】このとき、プレスキャン時の領域分離結果
として写真領域と判定され、かつ、本スキャン時の領域
分離結果として文字領域（文字エッジ）と判定された領
域に対して、文字領域の消去処理および補正処理を施す
ものとする。すなわち、領域分離処理部８において写真
領域内の文字エッジとして検出された領域に対して、文
字消去部９において消去処理および補正処理を施すもの
とする。

【００８４】この消去処理および補正処理は、特に限定
されないが、モフォロジフィルタを用いることが好まし
い。具体的には、モフォロジフィルタのオープニング処
理あるいはクロージング処理を用いる。クロージング処
理は、写真領域中の文字領域の画素値が周辺の写真領域
の画素値より小さい場合に用い、オープニング処理は、
文字領域の画素値が周辺の写真領域の画素値より大きい
場合に用いる。

【００８５】具体的には、ＣＭＹベースの画像データに
おける画像処理では、写真領域中の文字領域は回りに比
べて濃度値が高くなるので、オープニング処理を施す。
一方、ＲＧＢベースの画像データにおける画像処理で
は、写真領域中の文字領域が回りに比べて濃度値が低く
なるため、クロージング処理を施す。

【００８６】したがって、画像処理装置２では、領域分
離処理部８に入力される画像データはＣＭＹベースのも
のであるからオープニング処理が施される。

【００８７】ここで、クロージング処理とは、以下の画
像処理（I）である。

【００８８】（I）まず、文字データ（写真領域内の文
字領域）を構成する１つの画素に対して、その画素を中
心とする、所定広さの領域(第１領域)を設定する。そし
て、この第１領域に、さらに小さな領域である分割領域
を複数設定する。この設定は、できるだけ多くの画素を
分割領域の中心画素とするように行われる。従って、各
分割領域は、その中心画素を隣接させるように、互いに
重複するように設定される。

【００８９】その後、各分割領域における最大の画素値
（最大画素値）を、全第１領域に渡って検出してゆく
（下地画像の検出（推測））。そして、各分割領域にお
ける中心画素の値を、検出した最大画素値（その中心画
素の属する分割領域の最大画素値）に置き換える。

【００９０】これにより、第１領域の中で比較的小さい
画素値を有する文字データを、最大画素値を有する周辺
写真データ（周辺の画像データ）の画素（すなわち、下
地画像データ）によって置き換えることとなる。なお、
ここまでの処理を、文字データを構成する全画素に対し
て行う。

【００９１】次に、第１領域の画素のうち、上記の中心
画素となることのできた画素の集合からなる領域（第２
領域）を設定する。そして、第１領域に対して行った場
合と同様に、第２領域に対しても分割領域を設定する。

【００９２】その後、各分割領域における最小の画素値
（最小画素値）を、全第２領域に渡って検出してゆく。
そして、各分割領域における中心画素の値を、検出した
最小画素値（その中心画素の属する分割領域の最小画素
値）に置き換える。

【００９３】これにより、文字データと置き換えられた
下地画像データを、より正確となるように補正すること
が可能となる。

【００９４】すなわち、上記のような第１領域を用いた
文字データの置き換えを行うだけでは、下地画像が文字
の写真データ（文字を撮影して得られる写真データ；写
真内文字）の一部であった場合、その写真内文字を歪め
てしまう（例えば細くしてしまう）。そこで、上記のよ
うな第２領域を用いた処理を行うことで、写真内文字に
おける下地画像でない部分（文字データに隠されていな
い部分）の画素を利用して、下地画像部分を補正するこ
とが可能となる。

【００９５】一方、オープニング処理とは、以下の画像
処理（II）である。

【００９６】（II）まず、文字データを構成する１つの
画素に対して、その画素を中心とする、所定広さの領域
(第１領域)を設定する。そして、この第１領域に、さら
に小さな領域である分割領域を複数設定する。この設定
は、できるだけ多くの画素を分割領域の中心画素とする
ように行われる。従って、各分割領域は、その中心画素
を隣接させるように、互いに重複するように設定され
る。

【００９７】その後、各分割領域における最小の画素値
（最小画素値）を、全第１領域に渡って検出してゆく
（下地画像の検出（推測））。そして、各分割領域にお
ける中心画素の値を、検出した最小画素値（その中心画
素の属する分割領域の最小画素値）に置き換える。

【００９８】これにより、第１領域の中で比較的大きい
画素値を有する文字データを、最小画素値を有する周辺
写真データの画素（すなわち、下地画像データ）によっ
て置き換えることとなる。なお、ここまでの処理を、文
字データを構成する全画素に対して行う。

【００９９】次に、第１領域の画素のうち、上記の中心
画素となることのできた画素の集合からなる領域（第２
領域）を設定する。そして、第１領域に対して行った場
合と同様に、第２領域に対しても分割領域を設定する。

【０１００】その後、各分割領域における最大の画素値
（最大画素値）を、全第２領域に渡って検出してゆく。
そして、各分割領域における中心画素の値を、検出した
最大画素値（その中心画素の属する分割領域の最大画素
値）に置き換える。

【０１０１】これにより、文字データと置き換えられた
下地画像データを、より正確となるように補正すること
が可能となる。

【０１０２】すなわち、上記のような第１領域を用いた
文字データの置き換えを行うだけでは、下地画像が文字
の写真データ（文字を撮影して得られる写真データ；写
真内文字）の一部であった場合、その写真内文字を歪め
てしまう（例えば細くしてしまう）。そこで、上記のよ
うな第２領域を用いた処理を行うことで、写真内文字に
おける下地画像でない部分（文字データに隠されていな
い部分）の画素を利用して、下地画像部分を補正するこ
とが可能となる。

【０１０３】クロージング処理の特徴は、はじめに領域
内最大値で画素値を置き換える処理を行っているため、
周辺の画素値よりも濃度の小さい領域を埋めて処理を行
う。すなわち、周辺の画素値よりも小さい画素値を示す
画素の画素値を消去する。一方、オープニング処理で
は、最初に最小値で置き換えを行うため、周辺よりも濃
度の高い突起部分を消去する作用が存在する。すなわ
ち、周辺の画素値よりも大きい画素値を示す画素の画素
値を消去する。従って、文字領域が周辺背景より濃度が
低い場合にはクロージング処理を、文字領域が周辺背景
より濃度が高い場合にはオープニング処理を施してやれ
ば文字領域を綺麗に消去することが可能である。

【０１０４】さらに、文字領域がオープニング処理を作
用させる領域よりも大きい場合、一且最小値を取った後
に最大値で置き換える処理（クロージング処理は反対の
過程）を行っているため、文字が大きすぎて削除しきれ
ないときは元の削減前のデータに戻るといった特徴があ
る。従って、文字の消去処理に失敗し、文字が細くなる
だけといった問題を回避することが可能である。

【０１０５】次に、領域分離処理部８、文字消去部９に
おける画像処理を詳細に説明する。前記消去処理および
補正処理を行うために、画像処理装置２は原稿の読み取
りを２段階に分けて実施する。すなわち、写真領域の検
出を目的とするプレスキャンを実施する第１の段階と、
実際の画像データの入力および局所的な文字領域の検出
を目的とする本スキャンを実施する第２の段階とから原
稿の読み取りが行われる。

【０１０６】プレスキャン時に行うデータの読み取りは
本スキャン時において行う読み取り解像度に比べ、読み
取り精度を求めるものではないため、プレスキャンにお
けるスキャンスピードは、通常行われるスキャンスピー
ドに対して、Ｎ倍速で行われる（Ｎ＝２、４など）。よ
って、プレスキャンによる、原稿に対する副走査方向で
得られる画素数が１／Ｎとなり、総画素数も１／Ｎとな
る。プレスキャン時に行う処理は写真領域の検出のみで
あるためそれほど解像度を必要とせず、読み取り速度を
上げることによってプレスキャン速度の短縮、あるいは
写真領域判定結果の保存量を削減できる。

【０１０７】次に、注目画素（中心画素）を中心とした
マスクを形成するわけであるが、入力画像データは原稿
全体をハードディスク装置等の画像記憶装置に記憶して
もよいが、メモリの容量、コスト、処理速度の観点から
原稿主走査方向サイズを記憶することが可能な複数のラ
インメモリを装備することによってリアルタイムに処理
を行うことが可能になる。このときのラインメモリの構
成を図３に示す。ラインメモリはFirst In First Out
（ＦＩＦＯ：先入れ先出し型メモリ）を想定しており、
カラー画像入力装置３から入力されたデータが入った順
番に出力されるメモリを利用する。現実的な観点から、
このラインメモリを各色６ラインメモリ（計３刺激値×
６ライン）保持するものとする。従って、副走査方向に
７ライン分画像を保持することができ、注目画素５１を
中心として７×７のマスク５２を形成するものとする。
注目画素５１を中心とした７×７のマスク５２は以下の
式によって与えられる。 Mask_i,j＝｛p｜p（ｍ，ｎ）∈（ｍ＝ｉ−３，…，i＋
３，ｎ＝ｊ−３，…，ｊ＋３）｝ただし、ここでは７×７のマスクサイズ例を示すが、必
ずしもマスクサイズを限定するものではなく、ＦＩＦＯ
の数が許せる限りどのようなマスクサイズを用いてもよ
い。また、このリアルタイム処理用に一時データを記憶
するステップは本スキャン時の領域分離処理において併
用するものとする。従って、プレスキャン時では本スキ
ャンに比べてＮ倍読み取り速度を上げるため、同じ数の
ラインメモリを有する一時データ記憶ステップにより、
解像度は低いがＮ倍広範囲の領域を利用できる。

【０１０８】形成されたマスク（７×７の画素）に対し
領域分離処理を施し、図７に示すフローチャートに基づ
いて写真領域を検出する。写真領域の検出には、局所マ
スク領域内の最大濃度差、最大値、最小値、近傍濃度変
化量を検出用パラメータとし、さらに、このパラメータ
を閾値処理することによって所望する写真領域を検出す
る。すなわち、注目画素（ｉ，ｊ）を中心とする７×７
（Ｍ×Ｎ）の局所マスクを算出（抽出）し（Ｓ１）、注
目画素（ｉ，ｊ）を中心とする局所マスク内の最大濃度
差をMaxDiff_i,j、最大値をMax_i,j、最小値をMin_i,j、近
傍濃度変化量をDiff_i,j、マスク内の座標位置（ｐ，
ｑ）の画素の濃度値をIn(p,q)とすると、それぞれ以下
の式を用いてMax_i,j、Min_i,j、およびMaxDiff_i,jを検出
し（Ｓ２、Ｓ３）、Diff_i,jを算出する（Ｓ４）。

【０１０９】

【数１】

【０１１０】ここで、In(p,q)は３刺激値Ｃ、Ｍ、Ｙの
いずれかの入力値に対応するものとする。従って以上の
算出パラメータは、Ｃ、Ｍ、Ｙそれぞれにおいて算出す
るものとする。なお、入力階調補正部７において入力画
像データとしてのＲＧＢ信号をＣＭＹ信号に補色反転し
ている。したがって、本実施の形態ではＣＭＹ信号を用
いて前記の各値を算出しているが、本発明はこれに限定
されるものではなく、無論、ＲＧＢ信号を用いても構わ
ない。

【０１１１】算出されたパラメータに対し、予め設定す
る閾値THA、THB、THC、THD、THEを用いて、閾値処理を
行うことで写真領域を検出する。閾値処理は以下の式で
与えられる。

【０１１２】MaxDiff_i,j＜THA Max_i,j＜THB Min_i,j＞THC THD＜Diff_i,j＜THE 以上の条件を全て満足した場合に写真領域であると判定
し（Ｓ５〜Ｓ９）、写真判定結果保存用のハードディス
ク（記憶部２６）に保持しておくものとする（Ｓ１
１）。写真領域であるか否かの結果のみを保存すれば十
分であるため、１ビット信号を保持しておくこととす
る。最終的な写真領域内の文字領域を判定する際には、
このプレスキャン時の写真判定結果を保存したハードデ
ィスクから読み出して利用するものとする。なお、以上
の条件を１つでも満足しない画像データは写真領域でな
いその他の領域として判定され（Ｓ１０）、記憶部２６
に保持される（Ｓ１１）。以上のＳ１〜Ｓ１１までの工
程が画像データ全体の処理が終了するまで行われる（Ｓ
１２）。

【０１１３】次に、プレスキャン時の写真領域判定処
理、写真判定結果保存処理の終了後、本スキャンを行う
が、その時の本スキャンは実際にデータを入力する処理
を含むためスキャン速度は等倍速の通常読み取り速度で
行うものとする。前記リアルタイム処理用の一時データ
記憶装置（ラインメモリ）を本スキャン処理時にも流用
し、７×７の注目画素を中心とする局所マスクを形成さ
せる。

【０１１４】このとき、マスクサイズは７×７に限定す
るものではないが、前記プレスキャンで用いたサイズと
同じにする必要がある。また、前述したように、スキャ
ン速度がプレスキャンと本スキャンで変更しているた
め、画素数が同じであっても実質の原稿に対する範囲は
１／Ｎのサイズになっている。つまり、プレスキャン時
の方が、スキャン速度が速いため、より広範囲のデータ
を見ることが可能になる。

【０１１５】前記プレスキャン時と同様に、注目画素を
中心とした７×７のマスクは以下の式によって与えられ
る。 Mask_i,j＝｛p｜p（ｍ，ｎ）∈（ｍ＝ｉ−３，…，i＋
３，ｎ＝ｊ−３，…，ｊ＋３）｝図８に示すフローチャートに基づいて、形成されたマス
クに対し領域分離処理を施し文字領域を検出する。文字
領域の検出には、局所マスク領域（７×７）内の最大濃
度差、エッジ量算出、２値化処理後ランレングス算出、
エッジの立ち上がり・立ち下りペアー検出からなる。さ
らに、このパラメータを閾値処理することによって所望
する文字領域を検出する。すなわち、注目画素（ｉ，
ｊ）を中心とする７×７（Ｍ×Ｎ）の局所マスクを算出
（抽出）し（Ｓ２１）、注目画素（ｉ，ｊ）を中心とす
る局所マスク内の最大濃度差MaxDiff_i,jおよびエッジ量
Edge_i, _jが、以下の式を用いて、検出（Ｓ２２）および
算出（Ｓ２３）される。

【０１１６】

【数２】

【０１１７】式中の（Ｘ）^*は畳み込み演算を示してい
る。このときエッジ量についてはゾーベルフィルタを用
いたが、いかなるエッジ量算出手段を用いてもよい。ま
た、In(p,q)は３刺激値Ｃ、Ｍ、Ｙのいずれかの入力値
に対応するものとする。以下同様に扱うものとする。

【０１１８】次に、２値化処理を前記算出局所マスクに
対して行う。入力濃度値In(p,q)に対してある閾値THin
（例えば、マスク内の平均値）で閾値処理を行い、２値
データを得るものとする。

【０１１９】

【数３】

【０１２０】２値化の手法はこの方法に限定するもので
はなく、既存のいかなる手法を用いてもよい。

【０１２１】次に、ランレングス（runlength）の算出
を行う（Ｓ２４）。ランレングスの算出方法は、前記算
出された２値データBinary_i,jの各行（主走査方向）、
あるいは各列（副走査方向）に対し、連続する１もしく
は０（予め設定）の最大数をそれぞれ各行のランレング
ス、各列のランレングスとする。次に、各行、各列のラ
ンレングスの中での最大値を、注目画素のランレングス
とする。従って、各行に対するランレングスをrun#row
(q)、各列に対応するランレングスをrun#col(p)とする
とランレングスrunlength_i,jは、下式で求めることがで
きる。

【０１２２】

【数４】

【０１２３】エッジの立ち上がり・立下りペアー検出は
局所マスク内で隣り合う画素間の濃度差を閾値処理する
ことによってエッジを検出した後、隣り合う画素間の濃
度差が正の場合が上昇エッジと、負の場合が下降エッジ
と仮定し、その組み合わせが水平方向もしくは垂直方向
に対し、ペアーが存在する場合をペアーありと定義す
る。エッジ検出は以下の式を用いて算出を行う（Ｓ２
５）。

【０１２４】

【数５】

【０１２５】以上の水平方向と、垂直方向の立ち上がり
・立下り結果により同一行内、あるいは同一列内、ある
いは斜め方向に上昇エッジ・下降エッジの両方が存在す
る場合にペアーありと判定する。

【０１２６】以上のパラメータを元に注目画素点での文
字判定を行う。

【０１２７】MaxDiff_i,j＞THG Edge_i,j＞THH runlength_i,j＞THI エッジペアあり以上の条件を全て満たした注目画素点を文字領域である
と判定する（Ｓ２６〜Ｓ３０）。なお、以上の条件を１
つでも満足しない画像データは文字領域でないその他の
領域として判定される（Ｓ３１）。

【０１２８】前記プレスキャン時の写真領域判定結果、
すなわち図７のＳ１１において記憶部２６に一時保持さ
れた写真領域判定結果（Ｓ３２）と、前記文字領域判定
結果（Ｓ３０）とを結合し、両者を満たしている場合
に、注目画素点を写真領域内の文字領域であると判定す
る（Ｓ３３）。この判定結果を元に、後述するモフォロ
ジフィルタリング処理（モフォロジフィルタ）によっ
て、写真領域内の文字領域を消去し、消去した領域の周
辺領域の情報に基づいて消去した領域の補正処理を行う
（Ｓ３４）。以上のＳ２１〜Ｓ３４までの工程が画像デ
ータ全体の処理が終了するまで行われる（Ｓ３５）。

【０１２９】次に、Ｓ３４のモフォロジフィルタリング
処理の詳細について説明する。Ｓ３３の判定結果を元
に、注目画素点が写真領域内文字と判定された場合、次
に、前記マスク内において、さらに小さな局所マスクを
設定する。本実施の形態では計算量の関係と前記確保し
てある７×７のマスクサイズに応じて３×３の局所マス
クを形成させる。従って、この小マスクは、 MaskB_p,q＝｛ｌ｜ｌ（ｍ，ｎ）∈（ｍ＝ｐ−１，…，ｐ
＋１，ｎ＝ｑ−１，…，ｑ＋１）｝で与えるものとする。つまり、前記算出の注目画素点を
中心とした局所マスクMask_i,jに属す各画素点（ｐ，
ｑ）の周りに形成する３×３のマスクである。前記局所
マスクと同様に、本小マスクもサイズを限定するもので
はなく、前記局所マスクのサイズに応じていかなるサイ
ズでも対応できる。

【０１３０】文字を消去する方法はモフォロジフィルタ
の前述したオープニング処理、もしくはクロージング処
理の何れかを用いることで達成することが可能である。
例えば、ＣＭＹべースの画像処理方法では、文字領域が
回りに比べて濃度値が高くなるため、オープニング処理
を施すことによって文字領域を精度良く消去することが
可能になる。一方、ＲＧＢベースの画像処理方法では、
文字領域が回りに比べて濃度値が低くなるため、クロー
ジング処理を施すことによって文字領域を精度良く消去
することが可能になる。画像処理装置２では、前述した
ように領域分離処理部８に入力される画像データはＣＭ
Ｙベースのものであるからオープニング処理が施され
る。

【０１３１】始めに、Ｃ、Ｍ、Ｙ入力を前提としたオー
プニング処理による文字消去および補正処理について、
図４（ａ）、図５および図９にて説明を行う。

【０１３２】注目画素（ｉ，ｊ）を中心とする７×７
（Ｍ×Ｎ）の局所マスク４１を算出（抽出）する（図９
のＳ４１）。算出された７×７の局所マスク４１内に形
成する３×３の最小値算出用の小マスク４２は、局所マ
スク４１の内周辺部において形成することのできない部
分を除いて５×５個（最小値算出後のマスク４３）存在
する。

【０１３３】従って、３×３マスクによって求まる最小
値は５×５個存在する（Ｓ４２〜Ｓ４５）。そして、小
マスク４２内の中心に位置する画素を各小マスク４２内
の最小値と置き換える（Ｓ４６）。これにより、周辺の
画素値よりも大きい画素値を示す画素の画素値を消去す
ることができる。

【０１３４】なお、局所マスク４１内において「○」印
の付された画素は、各小マスク４２の中心に位置できる
画素を示している。最終的には、図５（ａ）に示すよう
に、７×７のマスク（局所マスク４１）において「○」
印の付された５×５個の画素に、Ｓ４２〜Ｓ４６におけ
る３×３のマスク処理が施される。

【０１３５】次に、求められた５×５の最小値からなる
マスク４３に対し、さらに３×３の最大値算出用のマス
ク４４を形成する。この場合、５×５のマスク４３の内
周辺部を除いて、３×３の小マスク４４は３×３個存在
する（最小値算出後の最大値マスク４５）。従って、５
×５の最小値からなるマスク４３に対し３×３のマスク
内最大値は３×３個存在する（Ｓ４７〜Ｓ５０）。そし
て、最大値マスク４５内の中心に位置する画素を各小マ
スク４４内の最大値と置き換える（Ｓ５１）。これによ
り、消去した領域の周辺領域の情報に基づいて消去した
領域の補正処理を行える。

【０１３６】なお、最大値マスク４５内において「○」
印の付された画素は、マスク４３において各小マスク４
４の中心に位置できる画素を示している。最終的には、
図５（ｂ）に示すように、５×５のマスク（マスク４
３）において「○」印の付された３×３個の画素に、Ｓ
４７〜Ｓ５１における３×３のマスク処理が施される。

【０１３７】以上の図９で説明した工程により、最終的
に３×３の最小値・最大値（これは、最小値算出後最大
値で置き換える処理）マスクを形成することができ、こ
の中心の値で注目画素の値を置き換えるとモフォロジフ
ィルタを掛けた結果を得ることができる。

【０１３８】一方、Ｒ、Ｇ、Ｂ入力を前提としたクロー
ジング処理による文字消去および補正修理の場合も基本
的な流れは図９のフローチャートと同じである。ただ
し、Ｓ４４にて最大値を算出し、Ｓ４９で最小値を算出
する。

【０１３９】すなわち、図４（ｂ）に示すように、注目
画素（ｉ，ｊ）を中心とする７×７（Ｍ×Ｎ）の画素を
算出する。算出された７×７の局所マスク４６内に形成
する３×３の最大値算出用の小マスク４７は、局所マス
ク４６の内周辺部において形成することのできない部分
を除いて５×５個（最大値算出後のマスク４８）存在す
る。従って、３×３マスクによって求まる最大値は５×
５個存在する。そして、小マスク４７内の中心に位置す
る画素を各小マスク４７内の最大値と置き換える３×３
のマスク処理が行われる。これにより、周辺の画素値よ
りも小さい画素値を示す画素の画素値を消去することが
できる。

【０１４０】なお、局所マスク４６内において「○」印
の付された画素は、各小マスク４７の中心に位置できる
画素を示している。最終的には、図５（ａ）に示すよう
に、７×７のマスク（局所マスク４６）において「○」
印の付された５×５個の画素に、上記マスク処理が施さ
れる。

【０１４１】次に、求められた５×５の最大値からなる
マスク４８に対し、さらに３×３の最小値算出用のマス
ク４９を形成する。この場合、５×５のマスク４８の内
周辺部を除いて、３×３のマスク４９は３×３個存在す
る（最大値算出後の最小値マスク５０）。従って、５×
５の最大値からなるマスク４８に対し３×３のマスク内
最小値は３×３個存在する。そして、最小値マスク５０
内の中心に位置する画素を各小マスク４９内の最小値と
置き換える３×３のマスク処理が行われる。これによ
り、消去した領域の周辺領域の情報に基づいて消去した
領域の補正処理を行える。

【０１４２】なお、最小値マスク５０内において「○」
印の付された画素は、マスク４８において、各小マスク
４９の中心に位置できる画素を示している。最終的に
は、図５（ｂ）に示すように、５×５のマスク（マスク
４８）において「○」印の付された３×３個の画素に、
上記マスク処理が施される。

【０１４３】以上の工程により、最終的に３×３の最大
値・最小値（これは、最大値算出後最小値で置き換える
処理）マスクを形成することができ、この中心の値で注
目画素の値を置き換えるとモフォロジフィルタを掛けた
結果を得ることができる。

【０１４４】以上で説明した画像処理装置２は、以下の
ように表現することができる。

【０１４５】すなわち、画像処理装置２は、写真を読み
込むことで作成された写真データ（写真領域）に画像処
理を施すものであって、写真データから、写真に添付さ
れた上書き文字に関する文字データ（写真領域内の文字
領域）を抽出する抽出手段（領域分離処理部８）と、上
書き文字の周辺に位置する周辺写真データ（周辺の画像
データ）に基づいて上書き文字の下地画像を推測し、前
記文字データを前記下地画像に関する下地画像データに
置き換える置換手段（文字消去部９）を備える画像処理
装置である。

【０１４６】ここで、写真データとは、カラー画像入力
装置３（画像読取装置）において読み込まれる原稿中に
ある写真に関する画像データであり、例えば、カラー画
像入力装置３において読み込まれる銀塩写真に関する画
像データである。なお、原稿の全てが写真である必要は
なく、原稿の一部が写真であればよい。また、画像デー
タとは、画像読取装置で読み取った原稿に関するデータ
であり、例えば、画像読取装置から出力されるアナログ
データまたはデジタルデータである。

【０１４７】画像処理装置２は、その写真データに添付
された上書き文字に関する文字データを抽出する抽出手
段を備えている。ここで、文字データとは、写真に付加
情報として添付された上書き文字に関する画像データで
ある。上書き文字とは、例えば銀塩写真中に付加される
日付である。

【０１４８】そして、画像処理装置２は、上書き文字の
周辺に位置する写真データ（周辺写真データ）に基づい
て上書き文字の下地画像を推測し、前記文字データを前
記下地画像に関する下地画像データに置き換える置換手
段を備えている。ここで、下地画像とは、上書き文字に
よって隠されてしまった部分の画像である。

【０１４９】すなわち、画像処理装置２によれば、入力
された写真データに添付された上書き文字を抽出し、そ
の上書き文字を消去し、上書き文字の周辺の写真データ
に基づいて、元の下地画像を復元できる。これにより、
消去したい上書き文字の指定や、上書き文字の部分に配
置する原稿画像の一部の指定を行う必要がないため、元
の写真画像を復元するための操作の煩雑さを解消でき
る。すなわち、ユーザーがいちいち補正を行う必要がな
く、元の写真画像を復元するための操作の煩雑さを解消
できる。

【０１５０】例えば、日付等の付加情報（上書き文字）
が付随した銀塩写真の写真データを入力した際に、日付
等の付加情報が必要ではないという場合に画像処理装置
２は有効である。すなわち、画像処理装置２は、写真デ
ータに存在する不要な文字を消去し、元の写真画像を復
元できる。よって、ユーザーがいちいち補正を行う必要
がなく、元の写真画像を復元するための操作の煩雑さを
解消できる。

【０１５１】また、前記置換手段は、上書き文字を構成
する各画素のそれぞれを中心とする所定範囲内にある周
辺写真データの画素から前記下地画像の各画素を推測
し、上書き文字を構成する各画素を、推測された下地画
像の各画素に置き換えることが好ましい。

【０１５２】この場合、置換手段は、上書き文字に含ま
れる各画素をそれぞれ中心画素とし、その中心画素の一
定範囲に含まれる写真データの画素の値に基づいて、前
記下地画像を推測し、上書き文字に含まれる各画素の値
を、下地画像として推測した画素の値に置き換える。こ
れにより、下地画像を精度よく推測でき、より正確に元
の下地画像を復元できる。なお、その範囲は画像処理装
置２ごとに便宜設定される。

【０１５３】また、前記置換手段では、上書き文字の周
辺に位置する周辺写真データに基づいて上書き文字の下
地画像を推測し、この下地画像に関する下地画像データ
に前記文字データを置き換えるために、モフォロジフィ
ルタが用いられているが好ましい。

【０１５４】ここで、文字データの画素値が周辺写真デ
ータの画素値より大きい画像処理装置２では、以下のモ
フォロジフィルタのオープニング処理（II）が施される
（II）まず、文字データを構成する１つの画素に対し
て、その画素を中心とする、所定広さの領域(第１領域)
を設定する（図９のＳ４１）。そして、この第１領域
に、さらに小さな領域である分割領域を複数設定する
（Ｓ４２、Ｓ４３、Ｓ４５）。この設定は、できるだけ
多くの画素を分割領域の中心画素とするように行われ
る。従って、各分割領域は、その中心画素を隣接させる
ように、互いに重複するように設定される。

【０１５５】その後、各分割領域における最小の画素値
（最小画素値）を、全第１領域に渡って検出してゆく
（下地画像の検出（推測））（Ｓ４４）。そして、各分
割領域における中心画素の値を、検出した最小画素値
（その中心画素の属する分割領域の最小画素値）に置き
換える（Ｓ４６）。

【０１５６】これにより、第１領域の中で比較的大きい
画素値を有する文字データを、最小画素値を有する周辺
写真データの画素（すなわち、下地画像データ）によっ
て置き換えることとなる。なお、ここまでの処理を、文
字データを構成する全画素に対して行う。

【０１５７】次に、第１領域の画素のうち、上記の中心
画素となることのできた画素の集合からなる領域（第２
領域）を設定する。そして、第１領域に対して行った場
合と同様に、第２領域に対しても分割領域を設定する
（Ｓ４８）。

【０１５８】その後、各分割領域における最大の画素値
（最大画素値）を、全第２領域に渡って検出してゆく
（Ｓ４７、Ｓ４９、Ｓ５０）。そして、各分割領域にお
ける中心画素の値を、検出した最大画素値（その中心画
素の属する分割領域の最大画素値）に置き換える（Ｓ５
１）。

【０１５９】これにより、文字データと置き換えられた
下地画像データを、より正確となるように補正すること
が可能となる。

【０１６０】すなわち、上記のような第１領域を用いた
文字データの置き換えを行うだけでは、下地画像が文字
の写真データ（文字を撮影して得られる写真データ；写
真内文字）の一部であった場合、その写真内文字を歪め
てしまう（例えば細くしてしまう）。そこで、上記のよ
うな第２領域を用いた処理を行うことで、写真内文字に
おける下地画像でない部分（文字データに隠されていな
い部分）の画素を利用して、下地画像部分を補正するこ
とが可能となる。

【０１６１】これにより、上書き文字の周辺の写真デー
タに基づいて前記下地画像を精度よく推測でき、より正
確に元の下地画像を復元できる。

【０１６２】また、モフォロジフィルタを用いると、文
字が太く消去が完全に出来ないような画像では、一度最
小値で置き換えた画像に対し、再度最大値で置き換える
ため、文字が細くなるといった問題が生じにくくなる。

【０１６３】すなわち、モフォロジフィルタを用いない
場合、太い文字で完全に消去できないときに、マスク内
最小値で注目画素を普通に置き換えると文字周辺が細く
なり明らかに不自然な画像が形成されてしまう。

【０１６４】これに対して、モフォロジフィルタを用い
ると、消去できないようなサイズの文字に対しては悪影
響を与えることなくマスクサイズに応じた文字のみを消
去することが可能になる。

【０１６５】すなわち、図６（ｂ）に示すように、細文
字のオリジナル信号６１を有する画像データにおいてオ
ープニング処理を行う場合は、各マスク６０内の最小値
で一度置き換えられ、置き換えられた信号６２を有する
画像データに対し、再度マスク６０内の最大値で置き換
える(フィルタリング信号６３)。これにより、オリジナ
ル信号６１に示される不要な上書き文字は消去され補正
処理が行われる。すなわち、マスクサイズに応じて不要
な上書き文字と判断されたオリジナル信号６１に対して
は、消去処理および補正処理が行われる。

【０１６６】これに対して、図６（ａ）に示すように、
文字が太く消去が完全にできないようなオリジナル信号
６５を有する画像データにおいてオープニング処理を行
う場合は、各マスク６４内の最小値で一度置き換えら
れ、置き換えられた信号６６を有する画像データに対
し、再度マスク６４内の最大値で置き換える(フィルタ
リング信号６７)。これにより、オリジナル信号６５と
フィルタリング信号６７とはほぼ同一信号となる。した
がって、マスクサイズに応じて消去する必要のない文字
領域と判断されたオリジナル信号６５に対しては、文字
周辺が細くなるというような悪影響を与えることがな
い。

【０１６７】なお、以上の説明では、プレスキャン・本
スキャンを行うことにより写真領域中の文字領域を認識
し、文字を消去する方法について説明したが、必ずしも
プレスキャンを行う必要は無く、入力階調補正後の画像
データを画像メモリに格納し、前記の処理を行うように
してもよい。

【０１６８】すなわち、画像データの全ての領域が写真
である場合は、図７の各フローチャートに示す各ステッ
プを実行する必要はなく、図８のフローチャートを実行
すればよい。この場合は、Ｓ３２およびＳ３３のステッ
プは不要となり、Ｓ２６からＳ２９の各ステップが、入
力された画像データに存在する文字領域を判定するステ
ップとなる。

【０１６９】また、画像処理装置２は、前記抽出手段に
よって抽出された文字データをキャラクター文字として
変換する変換手段と、変換されたキャラクター文字を前
記写真データの画像内タグに付加する付加手段とを備え
ることが好ましい。

【０１７０】この場合、前記文字データは、一般にコン
ピュータ等で文字として扱われるキャラクター文字に変
換され、変換されたキャラクター文字をその写真データ
の画像内タグ（プロパティ）に付加する。すなわち、写
真データ内に存在する日付等の付加情報をキャラクター
文字に変換し、その変換したキャラクター文字を、写真
データの画像内タグ（プロパティ）に付加する。これに
より、キャラクター文字に基づいて複数の写真データを
管理することができ、さらに当該写真データの検索を容
易に行うことができる。

【０１７１】これは、例えば、画像処理装置２において
一般的に用いられるＯＣＲ２５（図２参照）によって、
達成することができる。すなわちＯＣＲ２５が前記変換
手段と付加手段とを兼ねた構成であってもよい。ＯＣＲ
は、例えばソフトウェアで処理するといった既存の方法
を活用するものとする。ＯＣＲは通常文字原稿に対して
のみ有効な識別方法であるが、写真領域内文字検出部２
４で検出した写真領域内の文字領域に適用するものとす
る。このＯＣＲ処理により、写真原稿内の文字画像信号
を精度良くキャラクター文字に変換できる。

【０１７２】そして、その変換したキャラクター文字
を、写真データの画像内タグ（プロパティ）に付加す
る。つまり、ＯＣＲに読み取ったキャラクター文字を、
前述した本スキャン時に読み取る実際の画像データにＴ
ａｇ情報として付加しておく。これにより、写真領域内
の文字領域を消去した画像データをいつでも取り出すこ
とが可能になる。すなわち、写真領域の画像データは、
一般的に公知であるＪｐｅｇ（Joint Picture Experts
Group）やＴｉｆｆ（Tagged Image File Format）によ
り圧縮される。なお、画像データに写真領域とは別に文
字領域が含まれる場合は、例えば、ハフマン符号化法を
用いて圧縮される。

【０１７３】前記Ｔａｇ情報は、Ｊｐｅｇや、Ｔｉｆｆ
フォーマット内のユーザーＴａｇとして埋め込まれる。
このようにして生成された画像データは、ハードディス
ク等の記憶装置に格納される。前述したように、写真領
域の画像データに消去した文字領域の画像データをＴａ
ｇ情報として付加することにより、このデータを画像保
存サーバなどに格納する場合、画像データを検索する際
にＴａｇ情報をキーワードとして用いることができる。

【０１７４】また、画像処理装置２が画像保存サーバを
兼ねていてもよい。あるいは、画像処理が施された画像
データをネットワークなどを介して送信するようにして
もよい。これにより、記憶装置に原稿を蓄積させながら
原稿に前記付加情報を追加することによって、画像保存
サーバとしての役割を保持するシステムにおいて、間を
空けて再度原稿を出力する際に検索が容易になる。ま
た、例えば写真とは別に説明を付加する場合のように、
画像を合成する際に、このＴａｇ情報を用いることも可
能である。

【０１７５】また、画像処理装置２では、写真に文字が
含まれる場合、文字を消去し補正して画像を出力しても
良く、画像データを圧縮し消去される文字領域をキャラ
クター文字として前記画像データに付加して格納してお
くようにしてもよい。

【０１７６】また、以上で説明した画像処理装置２を備
えた画像形成装置１５では、写真上の不要な文字などを
消去し、所望の画像を出力できる。

【０１７７】また、以上で説明した画像処理装置２の画
像処理方法は、以下のように表現できる。

【０１７８】すなわち、前記画像処理方法は、写真を読
み込むことで作成された写真データに画像処理を施す画
像処理方法であって、写真データから、写真に添付され
た上書き文字に関する文字データを抽出する抽出ステッ
プ（Ｓ３３）と、上書き文字の周辺の周辺写真データに
基づいて上書き文字の下地画像を推測し、この下地画像
に関する下地画像データに前記文字データを置き換える
置換ステップ（Ｓ３４）を含む方法である。

【０１７９】この場合、入力された写真データに添付さ
れた上書き文字を抽出し、その上書き文字を消去し、上
書き文字の周辺に位置する写真データ（周辺写真デー
タ）に基づいて、元の下地画像を復元できる。例えば、
日付等の付加情報（上書き文字）が付随した銀塩写真の
写真データを入力した際に、日付等の付加情報が必要で
はないという場合に画像処理装置２の画像処理方法は有
効である。すなわち、消去したい上書き文字の指定や、
上書き文字の部分に配置する原稿画像の一部の指定を行
う必要がないため、元の写真画像を復元するための操作
の煩雑さを解消できる。

【０１８０】なお、画像処理装置２は、前記画像処理方
法をＡＳＩＣ等の回路で構成し、本装置の内部に実装す
ることによって、以上で説明した画像処理方法を実現で
きる。

【０１８１】また、画像処理装置２を、ＤＳＰ（Digita
l Signal Processor）から構成するようにしてもよい。
この場合には、後述するようなソフトウェアをＤＳＰに
読み込ませることで、図７〜図９に示すような処理を行
うことが可能となる。

【０１８２】すなわち、本実施の形態では、画像形成装
置１５における画像処理を画像処理装置２の各処理部５
〜１４によって行うとしている。しかしながら、これに
限らず、画像処理を行うためのプログラムを記録媒体に
記録し、このプログラムを読み出すことができる情報処
理装置を、画像処理装置２に代えて用いるようにしても
よい。

【０１８３】この構成では、情報処理装置の演算装置
（ＤＳＰ、ＣＰＵ、ＭＰＵなど）が記録媒体に記録され
ているプログラムを読み出し、画像処理を実行する。従
って、このプログラム自体が、本発明の画像処理を実現
するといえる。

【０１８４】ここで、上記の情報処理装置としては、一
般的なコンピュータ（ワークステーションやパーソナル
コンピュータ）の他に、コンピュータに装着される、機
能拡張ボードや機能拡張ユニットを用いることができ
る。

【０１８５】また、上記のプログラムとは、画像処理を
実現するソフトウェアのプログラムコード（実行形式プ
ログラム、中間コードプログラム、ソースプログラム
等）のことである。このプログラムは、単体で使用され
るものでも、他のプログラム（ＯＳ等）と組み合わせて
用いられるものでもよい。また、このプログラムは、記
録媒体から読み出された後、装置内のメモリ（ＲＡＭ
等）にいったん記憶され、その後再び読み出されて実行
されるようなものでもよい。

【０１８６】また、プログラムを記録させる記録媒体
は、情報処理装置と容易に分離できるものでもよいし、
装置に固定（装着）されるものでもよい。さらに、外部
記憶機器として装置に接続するものでもよい。

【０１８７】このような記録媒体としては、ビデオテー
プやカセットテープなどの磁気テープ、フロッピー（登
録商標）ディスクやハードディスク等の磁気ディスク、
ＣＤ−ＲＯＭ、ＭＯ、ＭＤ、ＤＶＤ、ＣＤ−Ｒ等の光デ
ィスク（光磁気ディスク）、ＩＣカード、光カード等の
メモリカード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯ
Ｍ、フラッシュＲＯＭ等の半導体メモリなどを適用でき
る。

【０１８８】また、ネットワーク（イントラネット・イ
ンターネット等）を介して情報処理装置と接続されてい
る記録媒体を用いてもよい。この場合、情報処理装置は
ネットワークを介するダウンロードによりプログラムを
取得する。すなわち、上記のプログラムを、ネットワー
ク（有線回線あるいは無線回線に接続されたもの）等の
伝送媒体（流動的にプログラムを保持する媒体）を介し
て取得するようにしてもよい。なお、ダウンロードを行
うためのプログラムは、装置内にあらかじめ記憶されて
いることが好ましい。

【０１８９】さらに、本発明を、以下の第１〜３の画像
処理方法、第１の画像処理装置、および、第１の画像形
成装置として表現することもできる。

【０１９０】第１の画像処理方法は、写真領域内の文字
部分を消去し、不要な情報（銀塩写真の日付入りの写真
をフィルムスキャナで読み取った際にすでに必要のなく
なった日付等の文字情報）を消去し所望の写真原稿を生
成する画像処理方法である。

【０１９１】具体的には、第１の画像処理方法は、複数
の色成分を含む入力画像データを読み取って入力画像デ
ータに存在する不要部分を消去し、出力画像データを生
成する画像処理方法において、入力画像データを文字領
域・網点領域・写真領域を含む複数の領域に分離する領
域分離処理が備えられており、前記入力画像データに少
なくとも写真領域が含まれているか否かを判断する工程
と、写真領域が含まれると判断された時、写真領域検出
結果を保存しておく工程と、さらに前記写真領域に文字
領域が含まれるか否かを判定し、文字領域が含まれてい
ると判断された場合、文字領域を消去し、消去した領域
に対して周辺領域の情報に基づいて補正処理を行う方法
である。

【０１９２】日付等の付加情報が付随した画像データを
入力した際に、日付等の付加情報が必要ではないという
場合がある。特にデジタルデータにおいては、画像のプ
ロパティ内に情報が含まれている場合が多く、銀塩写真
に比べて画像内に埋め込む必要性がない場合が存在す
る。こういった要望が生じた場合、一且画像内に埋め込
まれた文字情報を削除するためには画像編集ソフトを用
いてユーザーが手動で補正を行う必要があった。しか
し、多くの画像を補正することは容易ではないため、上
記の方法で補正処理を行うことは有効である。

【０１９３】また、第２の画像処理方法は、第１の画像
処理方法において、写真領域に文字領域が含まれている
と判断された場合、文字領域を消去し、消去した領域に
対して周辺領域の情報に基づいて行う補正処理として、
モフォロジフィルタを用いる構成である。

【０１９４】この構成によれば、第１の画像処理方法の
効果を実現するためにモフォロジフィルタを利用し、精
度よく計算量を抑えたかたちで処理を行える。

【０１９５】また、第３の画像処理方法は、前記第１ま
たは第２の画像処理方法において、前記写真領域に対し
て圧縮処理を行うと共に前記文字領域として検出された
領域の画像データをキャラクターデータに変換し、前記
圧縮された画像データに前記変換されたキャラクターデ
ータを付加する構成である。

【０１９６】この第３の画像処理方法における一連の処
理を施すことによって、フィルムスキャナなどから読み
込んだ画像内に存在する日付などの付加情報を消去さ
せ、さらに付加情報を画像内タグに埋め込むことが可能
な画像処理方法を提供することが可能になる。これによ
って、記憶装置に原稿を蓄積させながら原稿に前記付加
情報を追加することによって、画像保存サーバとしての
役割を保持するシステムにおいて、間を空けて再度原稿
を出力する際に検索を容易にする（記憶装置に蓄積され
ている画像データの検索を容易に行うことができる）。

【０１９７】また、第１の画像処理装置は、写真領域内
の文字部分を消去し、銀塩写真の日付入りの写真をフィ
ルムスキャナで読み取った際にすでに必要のなくなった
日付等の文字情報などの不要な情報を消去し、所望の写
真原稿を生成する画像処理装置である。

【０１９８】具体的には、第１の画像処理装置は、複数
の色成分を含む入力画像データを読み取って、予め定め
られる処理を施して出力画像データとする画像処理装置
において、入力画像データを文字領域・網点領域・写真
領域を含む複数の領域に分離する領域分離手段（領域分
離処理部）が備えられており、領域分離手段は、前記入
力画像データに少なくとも写真領域が含まれているか否
かを判断し、写真領域が含まれると判断された時、検出
結果を保存して、前記写真領域に文字領域が含まれるか
否かを判定し、前記領域分離手段により、写真領域に文
字領域が含まれていると判断された場合、文字領域を消
去し、消去した領域に対して周辺領域の情報に基づいて
補正処理を行う文字領域消去手段（文字消去部）が備え
られている構成である。

【０１９９】日付等の付加情報が付随した画像データを
入力した際に、日付等の付加情報が必要ではないという
場合がある。特にデジタルデータにおいては、画像のプ
ロパティ内に情報が含まれている場合が多く、銀塩写真
に比べて画像内に埋め込む必要性がない場合が存在す
る。こういった要望が生じた場合、一且画像内に埋め込
まれた文字情報を削除するためには画像編集ソフトを用
いてユーザーが手動で補正を行う必要があった。しか
し、多くの画像を補正することは容易ではないため、上
記の構成で補正処理を行うことは有効である。

【０２００】また、第１の画像形成装置は、上記第１の
画像処理装置を備えた構成である。これにより、写真上
の不要な文字などを消去して、高速に所望の画像を出力
し得る画像形成装置を提供できる。

【０２０１】

【発明の効果】本発明に係る画像処理装置（本画像処理
装置）は、以上のように、写真を読み込むことで作成さ
れた写真データに画像処理を施す画像処理装置におい
て、写真データから、写真に添付された上書き文字に関
する文字データを抽出する抽出手段と、上書き文字の周
辺に位置する周辺写真データに基づいて上書き文字の下
地画像を推測し、前記文字データを前記下地画像に関す
る下地画像データに置き換える置換手段を備える構成で
ある。

【０２０２】それゆえ、入力された写真データに添付さ
れた上書き文字を抽出し、その上書き文字を消去し、周
辺写真データに基づいて、元の下地画像を復元できる。
これにより、消去したい上書き文字の指定や、上書き文
字の部分に配置する原稿画像の一部の指定を行う必要が
ないため、元の写真画像を復元するための操作の煩雑さ
を解消できるという効果を奏する。

【０２０３】また、前記置換手段は、上書き文字を構成
する各画素のそれぞれを中心とする所定範囲内にある周
辺写真データの画素から前記下地画像の各画素を推測
し、上書き文字を構成する各画素を、推測された下地画
像の各画素に置き換えることが好ましい。

【０２０４】それゆえ、置換手段は、上書き文字に含ま
れる各画素をそれぞれ中心画素とし、その中心画素の一
定範囲に含まれる写真データの画素の値に基づいて、前
記下地画像を推測し、上書き文字に含まれる各画素の値
を、下地画像として推測した画素の値に置き換える。こ
れにより、下地画像を精度よく推測でき、より正確に元
の下地画像を復元できるという効果を奏する。

【０２０５】また、前記置換手段では、上書き文字の周
辺に位置する周辺写真データに基づいて上書き文字の下
地画像を推測し、この下地画像に関する下地画像データ
に前記文字データを置き換えるために、モフォロジフィ
ルタが用いられていることが好ましい。

【０２０６】それゆえ、前記置換手段では、上書き文字
の周辺の写真データに基づいて前記下地画像を精度よく
推測でき、より正確に元の下地画像を復元できるという
効果を奏する。

【０２０７】また、モフォロジフィルタを用いると、消
去できないようなサイズの文字に対しては悪影響を与え
ることなくマスクサイズに応じた文字のみを消去できる
という効果を奏する。

【０２０８】本画像処理装置は、前記抽出手段によって
抽出された文字データをキャラクター文字として変換す
る変換手段と、変換されたキャラクター文字を前記写真
データの画像内タグに付加する付加手段とを備えること
が好ましい。

【０２０９】それゆえ、前記文字データは、一般にコン
ピュータ等で文字として扱われるキャラクター文字に変
換され、変換されたキャラクター文字をその写真データ
の画像内タグ（プロパティ）に付加する。これにより、
キャラクター文字に基づいて複数の写真データを管理で
きる。さらに、当該写真データの検索を容易にできると
いう効果を併せて奏する。

【０２１０】一方、本発明に係る画像形成装置は、上記
の画像処理装置を備えている構成である。それゆえ、写
真上の不要な文字などを消去し、所望の画像を出力でき
るという効果を奏する。

【０２１１】また、本発明に係る画像処理方法（本画像
処理方法）は、以上のように、写真を読み込むことで作
成された写真データに画像処理を施す画像処理方法にお
いて、写真データから、写真に添付された上書き文字に
関する文字データを抽出する抽出ステップと、上書き文
字の周辺に位置する周辺写真データに基づいて上書き文
字の下地画像を推測し、この下地画像に関する下地画像
データに前記文字データを置き換える置換ステップを含
む方法である。

【０２１２】本画像処理方法は、上記の本画像処理装置
に用いられている画像処理方法である。それゆえ、入力
された写真データに添付された上書き文字を抽出し、そ
の上書き文字を消去し、上書き文字の周辺に位置する写
真データ（周辺写真データ）に基づいて、元の下地画像
を復元できる。これにより、消去したい上書き文字の指
定や、上書き文字の部分に配置する原稿画像の一部の指
定を行う必要がないため、元の写真画像を復元するため
の操作の煩雑さを解消できるという効果を奏する。

【図面の簡単な説明】

【図１】本発明の一実施形態に係る画像形成装置の画像
処理工程を示すブロック図である。

【図２】上記画像形成装置の領域分離処理部の構成を示
すブロック図である。

【図３】本発明の一実施形態に係る画像処理方法のライ
ンメモリの構成を説明するための図である。

【図４】図４（ａ）および図４（ｂ）は上記画像処理方
法における文字領域の消去処理および補正処理を説明す
るための図であって、図４（ａ）はモフォロジフィルタ
のオープニング処理を用いて両処理がなされた場合を示
し、図４（ｂ）はモフォロジフィルタのクロージング処
理を用いて両処理がなされた場合を示すものである。

【図５】図５（ａ）は７×７のマスク内において３×３
のマスクの中心に位置できる画素を示し、図５（ｂ）は
５×５のマスク内において３×３のマスクの中心に位置
できる画素を示す図である。

【図６】図６（ａ）および図６（ｂ）は上記画像処理方
法における文字領域の消去処理および補正処理を説明す
るための図であって、図６（ａ）は上記オープニング処
理を用いて太い文字領域に両処理がなされた場合を示
し、図６（ｂ）は上記オープニング処理を用いて細い文
字領域に両処理がなされた場合を示すものである。

【図７】上記画像処理方法のプレスキャン時の領域分離
処理工程を示すフローチャートである。

【図８】上記画像処理方法の本スキャン時の領域分離処
理工程を示すフローチャートである。

【図９】上記画像処理方法のモフォロジフィルタの画像
処理工程を示すフローチャートである。

【符号の説明】

１操作パネル２画像処理装置３カラー画像入力装置（画像読取装置）４カラー画像出力装置５Ａ／Ｄ変換部６シェーディング補正部７入力階調補正部８領域分離処理部（抽出手段）９文字消去部（置換手段）１０色補正部１１黒生成下色除去部１２空間フィルタ処理部１３出力階調補正部１４階調再現処理部１５画像形成装置

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5B050 AA09 BA06 BA15 BA20 DA02 DA04 DA06 EA03 EA06 EA15 EA19 5B057 AA11 CA08 CA12 CA16 CB08 CB12 CB16 CC02 CE04 CE06 CE09 DA08 DB02 DB09 DC16 5C076 AA03 AA13 BA06 CA10 5L096 AA06 BA17 EA35 FA06 FA44 GA55 MA03

Claims

【特許請求の範囲】

【請求項１】写真を読み込むことで作成された写真デー
タに画像処理を施す画像処理装置において、写真データから、写真に添付された上書き文字に関する
文字データを抽出する抽出手段と、上書き文字の周辺に位置する周辺写真データに基づいて
上書き文字の下地画像を推測し、前記文字データを前記
下地画像に関する下地画像データに置き換える置換手段
を備えることを特徴とする画像処理装置。
【請求項２】前記置換手段は、上書き文字を構成する各
画素のそれぞれを中心とする所定範囲内にある周辺写真
データの画素から前記下地画像の各画素を推測し、上書
き文字を構成する各画素を、推測された下地画像の各画
素に置き換えることを特徴とする請求項１に記載の画像
処理装置。
【請求項３】前記置換手段では、上書き文字の周辺に位
置する周辺写真データに基づいて上書き文字の下地画像
を推測し、この下地画像に関する下地画像データに前記
文字データを置き換えるために、モフォロジフィルタが
用いられていることを特徴とする請求項２に記載の画像
処理装置。
【請求項４】前記抽出手段によって抽出された文字デー
タをキャラクター文字として変換する変換手段と、変換されたキャラクター文字を前記写真データの画像内
タグに付加する付加手段とを備えることを特徴とする請
求項１から３の何れか１項に記載の画像処理装置。
【請求項５】請求項１から４の何れか１項に記載の画像
処理装置を備えていることを特徴とする画像形成装置。
【請求項６】写真を読み込むことで作成された写真デー
タに画像処理を施す画像処理方法において、写真データから、写真に添付された上書き文字に関する
文字データを抽出する抽出ステップと、上書き文字の周辺に位置する周辺写真データに基づいて
上書き文字の下地画像を推測し、前記文字データを前記
下地画像に関する下地画像データに置き換える置換ステ
ップを含むことを特徴とする画像処理方法。