JP4056670B2 - 画像処理方法 - Google Patents
画像処理方法 Download PDFInfo
- Publication number
- JP4056670B2 JP4056670B2 JP2000022635A JP2000022635A JP4056670B2 JP 4056670 B2 JP4056670 B2 JP 4056670B2 JP 2000022635 A JP2000022635 A JP 2000022635A JP 2000022635 A JP2000022635 A JP 2000022635A JP 4056670 B2 JP4056670 B2 JP 4056670B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- processing
- defect
- film
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003672 processing method Methods 0.000 title claims description 20
- 238000012545 processing Methods 0.000 claims description 156
- 230000007547 defect Effects 0.000 claims description 78
- 238000000034 method Methods 0.000 claims description 51
- 238000007781 pre-processing Methods 0.000 claims description 45
- 230000008569 process Effects 0.000 claims description 36
- 238000011156 evaluation Methods 0.000 claims description 3
- 238000012937 correction Methods 0.000 description 32
- 239000000463 material Substances 0.000 description 22
- 239000000428 dust Substances 0.000 description 14
- 230000004075 alteration Effects 0.000 description 8
- 230000002950 deficient Effects 0.000 description 8
- 238000011161 development Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 238000009825 accumulation Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000009792 diffusion process Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 238000006748 scratching Methods 0.000 description 2
- 230000002393 scratching effect Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 238000003705 background correction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
- G06T5/75—Unsharp masking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/409—Edge or detail enhancement; Noise or error suppression
- H04N1/4097—Removing errors due external factors, e.g. dust, scratches
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Facsimiles In General (AREA)
- Facsimile Image Signal Circuits (AREA)
- Image Processing (AREA)
- Facsimile Scanning Arrangements (AREA)
Description
【発明の属する技術分野】
本発明は、フィルムの画像を光電的に読み取って実画像を得る際に、読み取られるコマのフィルム上の欠陥、例えばキズや塵等によって生じる実画像上のキズを効率よく短時間で補正することのできるキズ消しに関する画像処理方法の技術分野に属する。
【0002】
【従来の技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム(以下、フィルムとする)に撮影された画像の感光材料(印画紙)への焼き付けは、フィルムの画像を感光材料に投影して感光材料を露光する、いわゆる直接露光によって行われている。
【0003】
これに対し、近年では、デジタル露光を利用する焼付装置、すなわち、フィルムに記録された画像を光電的に読み取ってデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像(潜像)を記録し、プリントとするデジタルフォトプリンタが実用化された。
【0004】
デジタルフォトプリンタでは、フィルムを光電的に読み取り、画像(信号)処理によって階調補正等が行われて露光条件が決定される。そのため、画像処理による複数画像の合成や画像分割等のプリント画像の編集や、色/濃度調整、輪郭強調等の各種の画像処理も自由に行うことができ、用途に応じて自由に処理したプリントを出力できる。また、プリント画像の画像データをコンピュータ等に供給することができ、また、フロッピーディスク等の記録媒体に保存しておくこともできる。
さらに、デジタルフォトプリンタによれば、従来の直接露光によるプリントに比して、分解能、色/濃度再現性等に優れた、より画質の良好なプリントが出力可能である。
【0005】
このようなデジタルフォトプリンタは、基本的に、フィルムに記録された画像を光電的に読み取り画像データとするスキャナと、この画像データを処理(画像処理)して露光条件を決定すなわち記録用の画像データとする画像処理装置とからなる画像読取装置(入力機)、および記録用の画像データに応じて感光材料を走査露光して現像処理を施し、プリントとして出力するプリンタ(出力機)より構成される。
【0006】
スキャナでは、光源から射出された読取光をフィルムに入射して、フィルムに撮影された画像を担持する投影光を得て、この投影光を結像レンズによってCCDセンサ等のイメージセンサに結像して光電変換することにより画像を読み取り、必要に応じて各種の画像処理を施した後に、フィルムの画像データ(画像データ信号)として画像処理装置に送る。ここで、スキャナにおいては、スキャナに装着されたキャリアによってフィルムをコマ送りすることにより、フィルムに撮影された各コマの画像を1コマずつ順次読み取る。
【0007】
画像処理装置は、画像データに施す色バランス調整、コントラスト補正(階調処理)、明るさ補正や彩度補正等、さらに必要に応じて倍率色収差、歪曲収差や色ずれの各補正や電子変倍処理、またその後必要に応じて行うシャープネス処理や覆い焼き処理等を行うための画像処理条件を設定し、設定した条件に応じた画像処理を画像データに施し、処理済の記録用の画像データ(露光条件)としてプリンタに送る。
【0008】
プリンタでは、例えば、光ビーム走査露光を利用する装置であれば、画像処理装置から送られた画像データに応じて光ビームを変調して、この光ビームを主走査方向に偏向すると共に、主走査方向と直交する副走査方向に感光材料を搬送することにより、画像を担持する光ビームによって感光材料を露光(焼付け)して潜像を形成し、次いで、感光材料に応じた現像処理等を施して、フィルムに撮影された画像が再生されたプリント(写真)とする。
【0009】
【発明が解決しようとする課題】
ところで、このようにして得られるプリントでは、フィルム上のコマの欠陥、例えばキズや塵に起因して、読み取られた実画像に微小な画像のキズを含む場合がある。このキズは、光源から射出された読取光をフィルムに入射して、フィルムに撮影された画像を担持する投影光を得る際、例えばフィルムのコマ上のキズまたフィルムに付着する塵の像が、そのコマに撮影された画像とともに画像を担持する投影光に含まれ、実画像に形成されることによって発生する。
【0010】
このようなフィルムの欠陥、すなわちキズや塵等に基づく実画像のキズは、画像の品質を低下させるという問題がある。そのため、特許2559970号では、記録媒体、例えばフィルムの欠陥の影響を補正する方法として、赤外線および可視光線をフィルムに当て、フィルムを透過した赤外線および可視光線のフィルムの各位置に対応したエネルギー分布強度を求め、各位置での赤外線のエネルギー分布強度と可視光線のエネルギー分布強度とを用いて、フィルムの欠陥部分の補正を行う補正方法を提案している。この特許発明では、フィルム上の欠陥の程度を赤外線のエネルギー分布強度から判断し、キズの程度の軽い部分については、赤外線エネルギー分布強度を打ち消すレベルまで可視光線エネルギー分布強度を増強することによって、それ以外の部分については、可視光線エネルギー分布強度を周知の補間法を行うことによって補正するものである。
【0011】
この方法を利用して上述のデジタルフォトプリンタでフィルム上の塵やキズ等に基づく実画像上のキズを補正することができると考えられる。
しかし、実画像のキズの程度を判断して補正方法を定める赤外線エネルギー分布強度を画像データとする欠陥画像と、各画素位置での可視光線エネルギー分布強度を画像データとするR(赤)画像、G(緑)画像およびB(青)画像の実画像とが得られた後でなければ実画像でのキズ消し処理を行うことができない。特に、フィルム上の欠陥が空間周波数の高い、鋭いキズの場合、そのキズの範囲は狭くその位置を精度良く特定することが必要であり、欠陥画像に予めシャープネス強調等のエッジ強調処理を施されなければならない。しかも、この処理は比較的時間がかかるため、キズ消し処理が終了するまでに比較的長い時間を要する。
【0012】
そのため、フィルムに撮影された画像を短時間に大量に読み取って、画像処理を施してプリンタに出力するデジタルフォトプリンタでは、このエッジ強調処理に要する時間の間キズ消し処理を行えず、キズ消し処理の処理効率が低下するといった問題が発生する。
【0013】
そこで、上記問題点を解決すべく、本発明は、フィルムの実画像を光電的に読み取る際に、読み取られるコマのフィルム上の欠陥、例えばキズや塵等による欠陥に関する情報を有する欠陥画像を用いて、効率よく短時間に実画像のキズ消し処理を行うことのできるキズ消し画像処理方法を提供することを目的とする。
【0014】
【課題を解決するための手段】
上記目的を達成するために、本発明は、フィルムの画像を光電的に読み取り、キズ消し処理を施す画像処理方法であって、
フィルム上の欠陥に関する情報として欠陥画像を読み取り、
前記欠陥画像に対してキズ消し処理のための前処理を施し、
一方、前記画像を光電的に読み取って実画像を取得し、
前記前処理の施された欠陥画像に基づいて、前記実画像のキズに対してキズ消し処理を行うことを特徴とする画像処理方法を提供するものである。
【0015】
ここで、前記前処理は、前記実画像の取得の完了までに終了するのが好ましく、フィルムの実画像は、面順次で読み取られ、前記実画像の取得とともに前記前処理の施された前記欠陥画像を用いて実画像のキズ消し処理が行われるのが好ましい。
前記欠陥画像を評価し、評価結果に応じて前記前処理および前記キズ消し処理を中止するのが好ましい。また、前記前処理は、欠陥画像のエッジ強調処理、あるいは欠陥画像から画素単位の欠陥の有無の情報を与えるフラグ情報の作成であるのが望ましく、前記欠陥画像は、赤外線を用いて光電的に読み取られるのが望ましい。
【0016】
【発明の実施の形態】
以下、本発明のキズ消し画像処理方法について、添付の図面に示される好適実施例を基に詳細に説明する。
【0017】
図1に、本発明の画像処理方法を実施するデジタルフォトプリンタ10の一例のブロック図が示される。
図1に示されるデジタルフォトプリンタ(以下、フォトプリンタ10とする)は、基本的に、フィルムFに撮影された画像を光電的に読み取るスキャナ12と、スキャナ12が読み取った画像データ(画像情報)を画像処理して記録用の画像データとする画像処理装置14と、画像処理装置14で処理された画像データに応じて変調した光ビームで感光材料を露光し、現像処理してプリントとして出力するプリンタ16とを有して構成される。本発明の画像処理方法は、スキャナ12と画像処理装置14において実施される。
【0018】
また、画像処理装置14には、様々な条件の入力(設定)、処理の選択、例えば後述するような、キズ消し処理方法の処理の選択の指示等を入力するためのキーボード18aおよびマウス18bを有する操作系18と、スキャナ12で読み取られた画像、各種の操作指示、様々な条件の設定/登録画面等を表示するディスプレイ20とが接続される。
【0019】
スキャナ12は、フィルムF等に撮影された画像を1コマずつ光電的に読み取る装置で、光源22と、フィルムFに撮影された画像に応じて読取光量を調節するための可変絞り24と、画像をR(赤)、G(緑)およびB(青)の三原色に分解するためのR、GおよびBの3枚の色フィルタ、さらにはフィルムFのコマ上のキズや塵に関する欠陥の情報として欠陥画像を作成するための赤外線フィルタとを有し、回転して任意の色フィルタや赤外線フィルタを光路に作用するフィルタ板26と、フィルムFに入射する可視光線や赤外線の読取光をフィルムFの面方向で均一にする拡散ボックス28と、結像レンズユニット32と、フィルムの1コマの画像を読み取るエリアセンサであるCCDセンサ34と、アンプ(増幅器)36と、A/D変換器38とを有して構成される。
【0020】
図示例のフォトプリンタ10のスキャナ12には、新写真システム(Advanced Photo System)や135サイズのネガフィルム等のフィルムの種類やサイズ、ストリップスやスライド等のフィルムの形態、トリミング等の処理の種類等に応じて、スキャナ12の本体に装着自在な専用のキャリアが用意されており、キャリアを交換することにより、各種のフィルムや処理に対応することができる。
フィルムFは、キャリアによってコマ送りされ、各コマ(画像)が順次所定の読取位置に搬送される。スキャナ12においては、このようにして、フィルムFに撮影された各コマの画像を1コマずつ順次読み取る。
【0021】
スキャナ12における画像の読み取りは、プリントを出力するための画像読み取り(本スキャン)に先立ち、画像処理条件等を決定するために、画像を低解像度で読み取るプレスキャンを行ない画像処理条件を決定し、オペレータがモニタで確認し調整した後、高解像度で画像を読み取る本スキャンを行うため、プレスキャンと本スキャンの2回行われる。
【0022】
なお、本発明の特徴として、本スキャンによるR、GおよびB画像の実画像をCCDセンサ34を介して光電的に読み取る前に、フィルタ板26の赤外線フィルタを通過して得られる赤外線(赤外光)によって、撮影された画像のフィルムFのコマ上にある欠陥の像、例えばキズや塵や指紋や汚れの像を担持する投影光をCCDセンサ34の受光面に結像させ、CCDセンサ34によって光電的に読み取り、その出力信号をアンプ36で増幅してA/D変換し、画像処理装置14に送り、その後、本スキャンによるR、GおよびB画像の実画像をCCDセンサ34を介して光電的に読み取り、出力信号をアンプ36で増幅して、A/D変換器38でデジタル画像データにされ、画像処理装置14に送るように構成される。
【0023】
フィルムFを透過した赤外線はフィルムF上のキズや塵等の欠陥のみをそのまま担持し、フィルムFの撮影された画像の絵柄を担持しない。そのため、CCDセンサ34によって光電的に読み取られた画像には、フィルムFのコマの欠陥に関する情報、例えば欠陥の形や位置や欠陥の程度等の情報を有する欠陥画像が得られる。赤外線は、フィルムF上の絵柄によって吸収されず、一方、フィルムF上のキズや塵等の欠陥によって乱反射を受け、その部分の赤外線エネルギー分布強度が低下して、キズや塵等の欠陥の像を保持するからである。
なお、本発明では必ずしも赤外線フィルタによって赤外線を得る必要はなく、赤外線発光用の光源、たとえばハロゲン光源を別途設けてもよい。まお、赤外線は、R画像との重なりを避けるため、750nm以上の分光波長を持つことが好ましい。
また、本発明では赤外線に限られず、フィルムF上の絵柄の吸収の少ない特定の波長の光線であってもよい。
【0024】
前述のように、スキャナ12からの出力信号(画像データ)は、画像処理装置14に出力される。
図2に画像処理装置14の一実施例であるブロック図を示す。画像処理装置14は、データ処理部40、プレスキャン(フレーム)メモリ42、本スキャンメモリ44、プレスキャン画像処理部46、本スキャン画像処理部48、および条件設定部50を有して構成される。
なお、図2は、主に画像処理関連の部位を示すものであり、画像処理装置14には、これ以外にも、画像処理装置14を含むフォトプリンタ10全体の制御や管理を行うCPU、フォトプリンタ10の作動等に必要な情報を記憶するメモリ、本スキャンの際の可変絞り24の絞り値やCCDセンサ34の蓄積時間を決定する手段等が配置され、また、操作系18や検定用モニタ(画像表示装置)20は、このCPU等(CPUバス)を介して各部位に接続される。
【0025】
データ処理部40では、スキャナ12から出力されたR,GおよびBの各出力信号は、Log変換、DCオフセット補正、暗時補正、シェーディング補正等を行い、デジタルの入力画像データとされ、プレスキャン(画像)データはプレスキャンメモリ42に、本スキャン(画像)データは本スキャンメモリ44に、それぞれ記憶(格納)される。
【0026】
プレスキャンメモリ42および本スキャンメモリ44には、データ処理部40で処理された入力画像データが記憶されるメモリ部であって、必要に応じて、画像処理を施して出力するために、プレスキャン画像処理部46、または、本スキャン画像処理部48に呼び出される。
【0027】
プレスキャン画像処理部46は、色バランス調整、コントラスト補正、および明るさ補正の画像処理を行い、さらに必要に応じて倍率色収差の補正や歪曲収差の補正やスキャナの色ずれの補正が行われ、さらに、電子変倍処理を行い、必要に応じてシャープネス処理や覆い焼き処理等が行われた後。モニタ20の表示に対応する画像データに加工されて、モニタ20に表示される。
【0028】
本スキャン画像処理部48は、前処理部48aとキズ消し処理部48bと画像処理部48cとから構成される。
前処理部48aおよびキズ消し処理部48bは、本発明の特徴とする部分であって、その説明は後述する。
画像処理部48cは、本スキャンによる実画像データについて、プレスキャン画像データにおいて決定された画像処理条件下、色バランス調整、コントラスト補正(階調処理)、明るさ補正がLUT(ルックアップテーブル)による処理によって、また、彩度補正が行われ、さらに必要に応じて倍率色収差の補正や歪曲収差の補正や色ずれの補正を行い電子変倍処理を行い、その後必要に応じてシャープネス処理や覆い焼き処理等を行う。さらに、画像処理の施された画像データを、プリンタ16にプリント出力する画像データに加工し、プリンタ16に送る。
【0029】
条件設定部50は、プレスキャン画像データをプレスキャンメモリ42から読み出し、画像処理条件を決定するのに用いる。具体的には、プレスキャン画像データから、濃度ヒストグラムの作成や、平均濃度、LATD(大面積透過濃度)、ハイライト(最低濃度)、シャドー(最高濃度)等の画像特徴量の算出等を行い、加えて、必要に応じて行われるオペレータによる指示に応じて、グレイバランス調整等のテーブル(LUT)や彩度補正を行うマトリクス演算の作成等の画像処理条件を決定する。決定された画像処理条件は、さらに、オペレータによって条件が調整され、画像処理条件が再設定される。また、設定された処理条件は、本スキャン画像処理48において本スキャンによる実画像データに対しても用いられる。
【0030】
さて、前処理部48aは、本発明の特徴とする部分であって、キズ消し処理の前に行う前処理をキズ消し処理部48bから分離して別工程とし、フィルムFの画像を可視光線によって本スキャンする間に、またはそれ以前に前処理を施すように構成される。赤外線によって読み取られた欠陥画像は、結像レンズユニット32のレンズを用いて読み取られ画像のボケが生じ易く、欠陥部分のエッジを強調しその境界を際立たせ欠陥の位置を明確にするために、エッジ強調の処理を行う。
キズ消し処理の前に行う前処理はフィルムFの画像を可視光線によって本スキャンを行う間、あるいはそれ以前に施すように構成されるので、前処理にかかる時間が短縮され、本スキャン画像処理部48での処理時間が短くなる。
【0031】
なお、前処理部48aは、エッジ強調による前処理が施される前に、一定の閾値より小さい画像データが存在しないか評価し、この閾値に基づいてキズの有無を自動的に判断、評価する。また、欠陥画像がモニタ20に表示され、オペレータがこれを見てキズの有無を判断、評価してもよい。キズが無いと判断した場合、あるいは後述するキズ消し処理を行う程度のキズでないと判断した場合、前処理部48aで行う前処理やキズ消し処理部48bでのキズ消し処理を行わず、直接画像処理部48cに送られる。これによって、前処理やキズ消し処理の処理時間が短縮され処理効率が上がる。
【0032】
前処理部48aで行われるエッジ強調処理は、特に限定されるものではなく、ガウシアン型アンシャープマスク(Gaussian USM)やラプラシアン(Laplacian) 等公知のシャープネス強調処理方法であればいずれでもよい。
例えば、ガウシアン型アンシャープマスク法では、欠陥画像の画像データI(x,y)(x,yは、画像中の注目画素の位置を示す)から、注目画素x、yの回りの一定範囲のマスク内の画素を正規分布の形で重み係数を掛けてその平均値をとることによって平滑化画像データ<I(x,y)>を得、この平滑化画像データ<I(x,y)>を欠陥画像の画像データI(x,y)から引いてエッジ強調成分I(x,y)−<I(x,y)>を得、このエッジ強調成分I(x,y)−<I(x,y)>に、シャープネス強調の程度を調節する係数aを掛けて画像データI(x,y)に加算することにエッジの強調された画像データを得る。
また、ラプラシアン法は、画像データI(x,y)の二次微分(ラプラシアン)▽2 I(x,y)を画像データから引くことによって、シャープネス強調する方法で、これを計算することによってエッジの強調された画像データを得る。
【0033】
さらに、得られた欠陥部分のエッジの強調された画像データは、予め定められた閾値、またはオペレータの指示によって定められた閾値によって、0または1の2値化され、キズ消し処理の際欠陥部分を、0または1の値によって容易に識別することができる。また、2値化された画像データから欠陥部分の画素位置を数値として抽出し、キズ消し処理部48bに設けられたテーブル等に記録してもよい。
さらに、欠陥画像から画素単位の欠陥の有無の情報を与えるフラグ情報を作成し、実画像の画像データに付加してもよい。実画像データは10ビットの画像データであり、R画像、G画像およびB画像の画像データと合わせて30ビットになるが、画像処理を行うCPUバスは32ビットで構成されるので、残り2ビット、すなわち0〜3の値で実画像上のキズの有無の他、キズの程度等の欠陥情報を実画像データとともキズ消し処理時に取り扱うことができる。
【0034】
なお、本実施例では、前処理の例としてエッジ強調処理を挙げたが、これに限られず、欠陥画像での欠陥部の位置や程度を特定するための処理であればいずれでもよい。
【0035】
キズ消し処理部48bは、前処理部48aで前処理の施された欠陥画像の画像データの情報に基づいて、本スキャンで読み取られた実画像の画像データに対してキズ消し処理を行う部分であって、実画像の画像データが本スキャンメモリ44を介して、キズ消し処理部48bに送られるように構成される。送られた実画像の画像データはキズ消し処理が施される。キズ消し処理は、前処理部48aで前処理の施された2値化された欠陥画像に基づいて、キズの位置およびその境界を容易に知ることができ、キズ消し処理を短時間に行うことができる。キズ消し処理は、以下のような公知の方法によって行われるが、これに制限されない。
キズの程度が浅く実画像のR、GおよびBの画像データを用いて修復が可能な場合、たとえば、欠陥画像のキズの画素位置での画像データが所定の値よりも大きい、すなわち赤外線の強度が所定の値以下に低下していない場合、キズの画素位置の実画像データのR、GおよびBの値を均一に大きくしてキズ消し処理を行う。実画像データのR、GおよびBの値を均一に大きくするのは、フィルムF上の塵やキズは、絵柄のように特定の波長で色吸収されず、可視光線の波長全域にわたって吸収特性がほぼ平坦であるためである。また、キズの程度が深く実画像のR、GおよびBの画像データを用いて修復ができない場合、たとえば欠陥画像のキズの画素位置での画像データが所定の値よりも小さい、すなわち赤外線の強度が所定の値以下になっている場合、キズ部分の画像データを用いて上記キズ消し処理を行わず、その周囲の画像データから補間して画像データの補正を行う。
【0036】
また、前処理部48aで行われる前処理は、遅くとも本スキャンによる実画像の読み取りの際に行われる。
ここで、前処理部48aが、2値化された画像データから欠陥部分の画素位置を数値として抽出してキズ消し処理部48bのテーブルに記録する場合、スキャナ12の本スキャンによって得られた実画像の画像データがキズ消し処理部48bに送られる時(実画像の取得完了)までに、キズ消し処理部48bのテーブルにキズの画素位置が記録されるように構成されるのが好ましい。これによって、実画像のキズ消し処理の際、速やかにキズの画素位置を読み取って、上記キズ消し処理を実画像に施すことができる。
また、欠陥画像から画素単位の欠陥の有無の情報を与えるフラグ情報を作成する場合、本スキャンによって得られた実画像の画像データがキズ消し処理部48bに送られる時(実画像の取得完了)までに、フラグ情報を作成するように構成されるのが好ましい。上記キズ消し処理を行う際、フラグ情報を参照してキズの情報を得、これに基づいて速やかに上述のキズ消し処理を行うことができるからである。
【0037】
プリンタ16は、供給された画像データに応じて感光材料(印画紙)を露光して潜像を記録する記録装置(焼付装置)と、露光材の感光材料に所定の処理を施してプリントとして出力するプロセサ(現像装置)とから構成される。記録装置では、感光材料をプリントに応じた所定長に切断した後、感光材料の分光感度特性に応じたR露光、G露光、B露光の3種のビームを画像処理装置14から出力された画像データに応じて変調して主走査方向に偏向するとともに、主走査方向と直交する副走査方向に感光材料を搬送することにより、前記光ビームで感光材料を2次元的に走査露光して潜像を記録し、プロセサに供給する。感光材料を受け取ったプロセサは、発色現象、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥してプリントとしてフィルム1本分等の所定単位に仕分けして集積する。
【0038】
なお、図2は主に画像処理関連の部位を示すものであり、画像処理装置14には、これ以外にも、画像処理装置14を含むフォトプリンタ10全体の制御や管理を行うCPU、フォトプリンタ10の作動等に必要な情報を記憶するメモリ、本スキャンの際の可変絞り24の絞り値やCCDセンサ34の蓄積時間を決定する手段等が配置される。
【0039】
次に、本発明の画像処理方法について図1のデジタルフォトプリンタ10を基に説明する。
まず、スキャナ12によって、プレスキャンが行われ、光源22から射出され、可変絞り24によって光量調整され、フィルタ板26のR、GおよびBの色フィルタを通して調整され、拡散ボックス28で拡散された可視光線がフィルムFに入射して、透過することにより、フィルムFに撮影されたこのコマの画像を担持する投影光を得る。フィルムFの投影光は、結像レンズユニット32によってCCDセンサ34の受光面に結像され、CCDセンサ34によって光電的に読み取られ、その画像の信号がアンプ36で増幅され、A/D変換器38でA/D変換され、画像処理装置14に送られる。この処理は、フィルタ板26の色フィルタR、GおよびBの3つの色フィルタに対して行われ、赤外線フィルタについては行われない。
【0040】
プレスキャンメモリ42に記憶されたプレスキャン画像データは、条件設定部50から呼び出され、濃度ヒストグラムの作成や、平均濃度、LATD(大面積透過濃度)、ハイライト(最低濃度)、シャドー(最高濃度)等の画像特徴量の算出等を行い、加えて、必要に応じて行われるオペレータによる指示に応じて、グレイバランス調整等のテーブル(LUT)や彩度補正を行うマトリクス演算(MTX)の作成等の画像処理条件を決定する。決定された画像処理条件は、さらに、キー補正で条件が調整され、画像処理条件が再設定され、条件がすべて統合され、プレスキャン画像処理部46に送られる。
【0041】
プレスキャン画像処理部46では、色バランス調整、コントラスト補正、および明るさ補正の画像処理が行われ、さらに必要に応じて倍率色収差の補正や歪曲収差の補正やスキャナの色ずれの補正が行われ、さらに、電子変倍処理を行い、必要に応じてシャープネス処理や覆い焼き処理等が行われた後、モニタ20に対応する画像データに加工され、モニタ20に表示される。
このようなプレスキャンは、本スキャンを行う前に、フィルムFに撮影されているコマの画像すべてについて行う。
【0042】
オペレータは、モニタ20に表示されたプレスキャン画像の処理画像を見て検定確認した後、スキャナ12による本スキャンが行われる。
【0043】
本スキャンは、まず、フィルタ板26の赤外線フィルタを介した赤外線による欠陥画像の画像データを得ることから行われる。すなわち、光源22から射出され、可変絞り24によって光量調整され、フィルタ板26の赤外線フィルタを通過して調整され、拡散ボックス28で拡散された赤外線がフィルムFに入射して、透過することにより、フィルムFに撮影されたこのコマの画像上のキズや塵や指紋や汚れの像を担持する投影光を得る。
フィルムFの投影光は、結像レンズユニット32によってCCDセンサ34の受光面に結像され、CCDセンサ34によって光電的に読み取られ、その出力信号がアンプ36で増幅されて、画像処理装置14に送られる。
【0044】
このようにして得られた欠陥画像の画像データは本スキャンメモリ44を介して、前処理部48aに送られる。前処理部48aでは、エッジ強調による前処理が施される前に、一定の閾値より小さい画像データが存在しないか判断し、キズの有無を自動的に評価する。キズが無いと判断された場合、あるいはキズ消し処理を行う程度のキズでないと判断した場合、前処理部48aで前処理は行われず、キズ消し処理部48bでキズ消し処理は行われず、直接画像処理部48cに送られる。これによって、前処理やキズ消し処理の処理時間が短縮され処理効率が上がる。また、キズの有無を自動的に判断する替わりに、欠陥画像をモニタ20に表示し、オペレータがこれを見てキズの有無を判断してもよい。
キズ消し処理を行う場合、前処理部48aで、欠陥画像のエッジ強調が上述した方法等によって行われ、キズの位置および境界が明確にされ、予め定められた閾値、またはオペレータの指示によって定められた閾値によって、0または1の値に欠陥画像の画像データは2値化される。これによって、キズ消し処理の際欠陥部分を容易に識別することができる。また、2値化された画像データから欠陥部分の画素位置を数値化し、この数値をキズ消し処理部48bに設けられたテーブル等に記録してもよく、さらに、欠陥画像から画素単位の欠陥の有無の情報を与えるフラグ情報を作成し実画像の画像データに付加してもよい。どちらの方法であっても、キズ消し処理の際欠陥部分を容易に識別することができ、キズ消し処理を短時間で行うことができる。
【0045】
一方、このようなエッジ強調処理等の前処理とともに、スキャナ12では、フィルムF上の画像をR、GおよびBの3枚の色フィルタを用いて、実画像の本スキャンが行われ、CCDセンサ34によって光電的に読み取られ、その出力信号がアンプ36で増幅されて、画像処理装置14に送られる。特に、エッジ強調をはじめとする前処理は、実画像の本スキャンによる取得の完了、すなわち実画像の画像データがキズ消し処理48bに送られるまでに終了することが、キズ消し処理の処理効率を一層向上させる点から好ましい。そのため、前処理は、遅くとも本スキャン中に開始される。前処理は、本スキャンの開始以前に開始されてもよい。
【0046】
得られた実画像の画像データは、本スキャンメモリ44に蓄えられるとともに、キズ消し処理部48bに送られる。また、実画像の本スキャンの際に前処理部48aで前処理の施された2値化された欠陥画像もキズ消し処理部48bに送られ、実画像のキズ消し処理が、この2値化された欠陥画像を用いて行われる。
このように、比較的時間を要する前処理の処理が、遅くとも実画像の本スキャンの取り込み中に行われるので、従来のように実画像と欠陥画像が取り込まれから前処理およびキズ消し処理を行う場合に比べて、短時間に処理を行うことができる。
【0047】
キズ消し処理は、キズの程度が浅く実画像のR、GおよびBの画像データを用いて修復が可能な場合、たとえば、欠陥画像のキズの画素位置での画像データが所定の値よりも大きい、すなわち赤外線の強度が所定の値以下に低下していない場合、キズの画素位置の実画像データのR、GおよびBの値を均一に大きくしてキズ消し処理を行う。また、キズの程度が深く実画像のR、GおよびBの画像データを用いて修復ができない場合、たとえば欠陥画像のキズの画素位置での画像データが所定の値よりも小さい、すなわち赤外線の強度が所定の値以下になっている場合、周知の補間法によってキズ消し処理を行う。なお、キズ消し処理は、上記の方法に制限されず、公知の方法によって行ってもよい。
【0048】
キズ消し処理の施された画像は、画像処理部48cで、プレスキャン画像についてオペレータで調整され決定された画像処理条件に基づいて、グレイバランス調整等のテーブル(LUT)や彩度補正を行うマトリクス演算(MTX)によって各種の画像処理を行い、さらに必要に応じて倍率色収差の補正や歪曲収差の補正や色ずれ補正の処理を行い、さらに電子変倍処理を行う。その後、画像データはプリント出力画像として出力用データに加工され、プリンタ16に送られる。
【0049】
プリンタ16の記録装置では、感光材料をプリントに応じた所定長に切断した後、感光材料の分光感度特性に応じたR露光、G露光、B露光の3種のビームを画像処理装置14から出力された画像データに応じて変調して主走査方向に偏向するとともに、主走査方向と直交する副走査方向に感光材料を搬送することにより、前記光ビームで感光材料を2次元的に走査露光して潜像を記録し、プロセサに供給する。感光材料を受け取ったプロセサは、発色現象、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥してプリントとしてフィルム1本分等の所定単位に仕分けして集積する。このようにして、プリントを得ることができる。
【0050】
なお、上記実施例では、画像処理条件を予め設定するためのプレスキャンとプリントとして出力するための本スキャンとを設け、プレスキャンおよび本スキャンによる画像データの2系統の処理に分けた画像処理装置であったが、プレスキャンを行うことなく、本スキャンの画像データからデータを間引いて画像処理条件を決定する、プレスキャンのない画像処理装置であってもよい。
また、実施例では、スキャナ12は、エリアセンサであるCCDセンサ34を用い、CCDセンサ34の面上で面露光させ、画像を読み取っているが、これに限定されず、CCDセンサがフィルムFの長手方向と直交する方向にライン上に並んだラインセンサを用い、フィルムFの投影光を所定のスリット状に規制してラインセンサで読取るスリット走査型であってもよい。
【0051】
以上、本発明の画像処理方法について詳細に説明したが、本発明は上記実施例に限定されず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【0052】
【発明の効果】
以上、詳細に説明したように、本発明によれば、フィルム上の欠陥に関する情報として欠陥画像を読み取り、この欠陥画像に対してキズ消し処理のための前処理を施すとともに、一方において、画像を光電的に読み取って実画像を得るので、読み取られるコマのフィルム上の欠陥、例えばキズや塵等による欠陥に関する情報を有する欠陥画像を用いて、効率よく短時間に実画像上のキズのキズ消し処理を行うことができ、画像を大量に処理する際の処理効率が向上する。
特に、前処理を実画像の取得の完了までに済ませることによって、処理効率は一層向上する。
さらに、欠陥画像を評価し、評価結果に応じて前処理およびキズ消し処理を省くので、処理効率がより一層向上する。
【図面の簡単な説明】
【図1】 本発明の画像処理方法を実施するデジタルフォトプリンタの一実施例のブロック図である。
【図2】 本発明の画像処理方法を主に実施する画像処理装置の一実施例を示すブロック図である。
【符号の説明】
10 デジタルフォトプリンタ
12 スキャナ
14 画像処理装置
16 プリンタ
18 操作系
20 ディスプレイ
22 光源
24 可変絞り
26 フィルタ板
28 拡散ボックス
32 結像レンズユニット
34 CCDセンサ
36 アンプ
38 A/D変換器
40 データ処理部
42 プレスキャンメモリ
44 本スキャンメモリ
46 プレスキャン画像処理部
48 本スキャン画像処理部
50 条件設定部
Claims (6)
- フィルムの画像を光電的に読み取り、キズ消し処理を施す画像処理方法であって、
フィルム上の欠陥に関する情報として欠陥画像を読み取り、
前記欠陥画像に対してキズ消し処理のための前処理を施し、
一方、前記画像を光電的に読み取って実画像を取得し、
前記前処理の施された欠陥画像に基づいて、前記実画像のキズに対してキズ消し処理を行うことを特徴とする画像処理方法。 - 前記前処理は、前記実画像の取得の完了までに終了する請求項1に記載の画像処理方法。
- フィルムの画像は、面順次で読み取られ、前記実画像の取得とともに前記前処理の施された前記欠陥画像を用いて実画像のキズ消し処理が行われる請求項2に記載の画像処理方法。
- 前記欠陥画像を評価し、評価結果に応じて前記前処理および前記キズ消し処理を中止する請求項1〜3のいずれかに記載の画像処理方法。
- 前記前処理は、欠陥画像のエッジ強調処理、あるいは欠陥画像から画素単位の欠陥の有無の情報を与えるフラグ情報の作成である請求項1〜4のいずれかに記載の画像処理方法。
- 前記欠陥画像は、赤外線を用いて光電的に読み取られる請求項1〜5のいずれかに記載の画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000022635A JP4056670B2 (ja) | 2000-01-31 | 2000-01-31 | 画像処理方法 |
US09/774,013 US20010041018A1 (en) | 2000-01-31 | 2001-01-31 | Image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000022635A JP4056670B2 (ja) | 2000-01-31 | 2000-01-31 | 画像処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2001218057A JP2001218057A (ja) | 2001-08-10 |
JP2001218057A5 JP2001218057A5 (ja) | 2005-11-04 |
JP4056670B2 true JP4056670B2 (ja) | 2008-03-05 |
Family
ID=18548910
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000022635A Expired - Fee Related JP4056670B2 (ja) | 2000-01-31 | 2000-01-31 | 画像処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20010041018A1 (ja) |
JP (1) | JP4056670B2 (ja) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6463175B1 (en) * | 2000-12-15 | 2002-10-08 | Shih-Jong J. Lee | Structure-guided image processing and image feature enhancement |
US7342681B2 (en) * | 2001-07-13 | 2008-03-11 | Transpacific Ip, Ltd | High-speed calibration method and system for an image-capture apparatus |
US7433089B2 (en) * | 2001-09-27 | 2008-10-07 | Fujifilm Corporation | Image processor |
JP2003234985A (ja) | 2002-02-08 | 2003-08-22 | Fuji Photo Film Co Ltd | 画像保管方法およびシステム並びにプログラム |
JP4214457B2 (ja) * | 2003-01-09 | 2009-01-28 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
EP1494462A4 (en) * | 2003-01-09 | 2005-10-26 | Sony Corp | IMAGE PROCESSING APPARATUS AND METHOD |
US7590305B2 (en) * | 2003-09-30 | 2009-09-15 | Fotonation Vision Limited | Digital camera with built-in lens calibration table |
US8369650B2 (en) | 2003-09-30 | 2013-02-05 | DigitalOptics Corporation Europe Limited | Image defect map creation using batches of digital images |
US7206461B2 (en) * | 2003-09-30 | 2007-04-17 | Fotonation Vision Limited | Digital image acquisition and processing system |
US7295233B2 (en) | 2003-09-30 | 2007-11-13 | Fotonation Vision Limited | Detection and removal of blemishes in digital images utilizing original images of defocused scenes |
US7308156B2 (en) * | 2003-09-30 | 2007-12-11 | Fotonation Vision Limited | Automated statistical self-calibrating detection and removal of blemishes in digital images based on a dust map developed from actual image data |
US7310450B2 (en) * | 2003-09-30 | 2007-12-18 | Fotonation Vision Limited | Method of detecting and correcting dust in digital images based on aura and shadow region analysis |
US7369712B2 (en) | 2003-09-30 | 2008-05-06 | Fotonation Vision Limited | Automated statistical self-calibrating detection and removal of blemishes in digital images based on multiple occurrences of dust in images |
US7340109B2 (en) | 2003-09-30 | 2008-03-04 | Fotonation Vision Limited | Automated statistical self-calibrating detection and removal of blemishes in digital images dependent upon changes in extracted parameter values |
US7676110B2 (en) * | 2003-09-30 | 2010-03-09 | Fotonation Vision Limited | Determination of need to service a camera based on detection of blemishes in digital images |
US7315658B2 (en) * | 2003-09-30 | 2008-01-01 | Fotonation Vision Limited | Digital camera |
US7424170B2 (en) * | 2003-09-30 | 2008-09-09 | Fotonation Vision Limited | Automated statistical self-calibrating detection and removal of blemishes in digital images based on determining probabilities based on image analysis of single images |
JP2005151317A (ja) * | 2003-11-18 | 2005-06-09 | Tamron Co Ltd | 歪曲収差変更撮影装置 |
US8699055B2 (en) * | 2004-08-09 | 2014-04-15 | Marvell International Technology Ltd. | Image processing apparatus with symmetric processors |
US7889242B2 (en) * | 2006-10-26 | 2011-02-15 | Hewlett-Packard Development Company, L.P. | Blemish repair tool for digital photographs in a camera |
US8244057B2 (en) | 2007-06-06 | 2012-08-14 | Microsoft Corporation | Removal of image artifacts from sensor dust |
US8509569B2 (en) * | 2008-02-11 | 2013-08-13 | Apple Inc. | Optimization of image processing using multiple processing units |
DE102008040804B4 (de) * | 2008-07-28 | 2021-07-29 | Carl Zeiss Meditec Ag | Verfahren, Operationsmikroskop und Analysesystem zur quantitativen Darstellung des Blutflusses |
US8849057B2 (en) * | 2011-05-19 | 2014-09-30 | Foveon, Inc. | Methods for digital image sharpening with noise amplification avoidance |
US9031319B2 (en) * | 2012-05-31 | 2015-05-12 | Apple Inc. | Systems and methods for luma sharpening |
US9525802B2 (en) * | 2013-07-24 | 2016-12-20 | Georgetown University | Enhancing the legibility of images using monochromatic light sources |
EP3119080B1 (en) | 2014-03-12 | 2020-11-11 | SZ DJI Technology Co., Ltd. | Method and system for dead pixel correction of digital image |
JP7004145B2 (ja) * | 2017-11-15 | 2022-01-21 | オムロン株式会社 | 欠陥検査装置、欠陥検査方法、及びそのプログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5273747A (en) * | 1975-12-17 | 1977-06-21 | Hitachi Ltd | Image processing device |
US5266805A (en) * | 1992-05-05 | 1993-11-30 | International Business Machines Corporation | System and method for image recovery |
US5969372A (en) * | 1997-10-14 | 1999-10-19 | Hewlett-Packard Company | Film scanner with dust and scratch correction by use of dark-field illumination |
-
2000
- 2000-01-31 JP JP2000022635A patent/JP4056670B2/ja not_active Expired - Fee Related
-
2001
- 2001-01-31 US US09/774,013 patent/US20010041018A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2001218057A (ja) | 2001-08-10 |
US20010041018A1 (en) | 2001-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4056670B2 (ja) | 画像処理方法 | |
US7433089B2 (en) | Image processor | |
US7397969B2 (en) | Red eye compensation method, image processing apparatus and method for implementing the red eye compensation method, as well as printing method and printer | |
US20040027618A1 (en) | Image defect detecting method | |
JP4005277B2 (ja) | 画像処理装置、方法及び記録媒体 | |
US6646760B1 (en) | Image processing method and apparatus | |
JP3907816B2 (ja) | 画像処理方法 | |
US7200280B2 (en) | Image processing apparatus | |
US7164496B2 (en) | Image correction apparatus | |
US7113619B1 (en) | Image reading method, image reading apparatus and method of discriminating defect of image data | |
JP2004061500A (ja) | 画像欠陥検出方法 | |
JP3783817B2 (ja) | 画像処理方法および画像処理装置 | |
JP4143279B2 (ja) | 画像欠陥の検出方法および画像読取装置 | |
JP2000209396A (ja) | 画像読取方法および装置 | |
US6246494B1 (en) | Image reading apparatus | |
JP2001197289A (ja) | 画像処理方法および画像処理装置 | |
JP2003189169A (ja) | 画像処理装置 | |
JP2000341473A (ja) | 傷補正画像処理方法およびそのための装置 | |
JP2003179750A (ja) | 画像処理装置 | |
JP4731695B2 (ja) | 多点測距カメラを利用した画像処理システム | |
JP3576812B2 (ja) | 画像処理装置及び画像処理方法 | |
JPH11346313A (ja) | 画像読取方法および画像読取装置 | |
JP4121807B2 (ja) | 画像読取装置および画像読取方法 | |
JP2006253798A (ja) | 画像処理方法及び画像処理装置 | |
JP2003319183A (ja) | 画像処理方法、装置および画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050909 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050909 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061214 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070801 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20071204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071212 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101221 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101221 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111221 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |