JP2002230525A - 多点測距カメラを利用した画像処理システム - Google Patents

Abstract

(57)【要約】 【課題】スキャナの装置構成を増加させることなく、フ
ィルム面上のゴミや傷の検出及び修正を行い、各種画像
処理による画質の劣化を低減する。 【解決手段】多点測距カメラにより撮影された画像の測
距情報を入力する手段と、前記測距情報の連続性によ
り、撮影画面上での各被写体領域の境界を推定し、領域
分割を行う手段と、前記測距情報により、各被写体の撮
影距離及び向きを推定する手段と、撮影画面上で、該画
面上の各点の、前記各被写体領域の境界からの距離を算
出する手段と、前記各被写体の撮影距離または向きに応
じて、あるいは、各被写体領域の境界からの画面上での
距離に応じて、前記画像処理の内容または処理の強度を
変更する手段と、を有することを特徴とする多点測距カ
メラを利用した画像処理システムを提供する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像処理技術に係
り、特に、多点測距カメラによる測距情報を利用して高
品質な画像を得るための画像処理を行う画像処理システ
ムに関する。

【０００２】

【従来の技術】従来、ネガフィルムやリバーサルフィル
ム等の写真フィルム（以下、単にフィルムという。）に
撮影された画像の感光材料（印画紙）への焼き付けは、
フィルムの画像を感光材料に投影して感光材料を面露光
する、いわゆる直接露光（アナログ露光）が主流であっ
た。これに対し、近年では、デジタル露光を利用する焼
付装置、すなわち、フィルムに記録された画像を光電的
に読み取って、読み取った画像をデジタル信号とした
後、種々の画像処理を施して記録用の画像データとし、
この画像データに応じて変調した記録光によって感光材
料を走査露光して画像（潜像）を記録し、（仕上がり）
プリントとするデジタルフォトプリンタが実用化され
た。

【０００３】このデジタルフォトプリンタは、基本的に
フィルムに読取光を入射して、その投影光を読み取るこ
とによって、フィルムに記録された画像を光電的に読み
取るスキャナ（画像読取装置）と、スキャナによって読
み取られた画像データやデジタルカメラ等から供給され
た画像データに所定の処理を施し、画像記録のための画
像データ、すなわち露光条件とする画像処理装置と、画
像処理装置から出力された画像データに応じて、例えば
光ビーム走査によって感光材料を走査露光して潜像を記
録するプリンタ（画像記録装置）と、プリンタによって
露光された感光材料に現像処理を施して、画像が再生さ
れた（仕上がり）プリントとするプロセサ（現像装置）
とを有して構成される。このようなデジタルフォトプリ
ンタによれば、画像をデジタルの画像データとして、画
像処理（画像データ処理）を行うことによって画像を調
整することができるので、従来の直接露光では得られな
かった高品位なプリントを得ることができる。

【０００４】このような画像処理として主要なものに、
画素毎の濃度値の細かな変動をなくし、滑らかな画像と
することで、粒状等のノイズを抑制する平滑化処理や、
画像の濃度値の変化を強調することにより、輪郭をはっ
きりさせる鮮鋭化（シャープネス）処理がある。これら
平滑化処理、鮮鋭化処理については、例えば、「画像解
析ハンドブック」（東京大学出版会）に詳しく紹介され
ている。通常これらの画像処理を実行するにあたり、画
像中の所定領域のエッジの抽出が行われる。そして、例
えば、エッジに対しては、鮮鋭化処理を行い、エッジ以
外の部分に対しては、平滑化処理を行うようにして、ノ
イズを除去した高画質な画像を得るようにしている。

【０００５】しかし、上に述べたように、デジタルフォ
トプリンタにおいて、フィルムに撮影された画像をスキ
ャナで読み込む際、フィルム面にゴミや傷がある場合
に、これらのゴミや傷を画像として扱ってしまう場合が
ある。例えば、線状のゴミや傷を画像として読み込み、
これをエッジとして誤抽出して画像処理してしまうと、
仕上がり画像の画質が劣化してしまう。そこで、従来か
ら、フィルム面上のゴミや傷の検出／消去方法がいろい
ろ開発されている。例えば、赤外線を用いて読み取りを
行うフィルムスキャナ（例えば、ニコン社製等）が知ら
れている。

【０００６】

【発明が解決しようとする課題】しかしながら、上記画
像処理において、空間フィルタ手法や周波数領域での処
理手法は、被写体の区別なく処理をかけざるを得ないた
め、例えば以下のような弊害が発生するという問題があ
る。例えば、鮮鋭化処理においては、人物の背景に従来
のような白い縁取りが出て、主要被写体と背景との間に
違和感を与える場合があるという問題がある。また、平
滑化処理においては、本来のエッジとノイズの切りわけ
がないために、本来のエッジに平滑化処理を行い、エッ
ジがぼけてしまい、ねぼけた画像になってしまうという
問題がある。

【０００７】また、フィルム上のゴミや傷をエッジと見
なして、鮮鋭化処理を行い、逆にゴミや傷を強調してし
まうという問題もある。さらに、このゴミや傷の問題に
関しては、上記赤外線を用いたフィルムスキャナによる
ゴミ、傷の検出／除去方法では、装置構成が増大すると
いう問題があり、さらに、この方法では、かすかな傷に
ついては、除去しきれない場合もあるという問題もあ
る。

【０００８】本発明は、前記従来の問題に鑑みてなされ
たものであり、本来のエッジとノイズの切りわけを行
い、スキャナの装置構成を増加させることなく、フィル
ム面上のゴミや傷の検出及び修正を行い、各種画像処理
による画質の劣化を低減することのできる多点測距カメ
ラを利用した画像処理システムを提供することを課題と
する。

【０００９】

【課題を解決するための手段】前記課題を解決するため
に、本発明は、多点測距カメラによって撮影されたフィ
ルムの画像を光電的に読み取り、得られた画像データに
所定の画像処理を施し、出力用の画像データとする多点
測距カメラを利用した画像処理システムであって、前記
多点測距カメラにより撮影された画像の測距情報を入力
する手段と、前記測距情報の連続性により、撮影画面上
での各被写体領域の境界を推定し、領域分割を行う手段
と、前記測距情報により、各被写体の撮影距離及び向き
を推定する手段と、撮影画面上で、該画面上の各点の、
前記各被写体領域の境界からの距離を算出する手段と、
前記各被写体の撮影距離または向きに応じて、あるい
は、各被写体領域の境界からの画面上での距離に応じ
て、前記画像処理の内容または処理の強度を変更する手
段と、を有することを特徴とする多点測距カメラを利用
した画像処理システムを提供する。

【００１０】また、前記多点測距カメラを利用した画像
処理システムであって、さらに、前記撮影画面上におい
て、前記各被写体領域の境界に相当しない線をフィルム
上の傷として検出する傷検出手段と、前記フィルム上の
傷として検出された線に対して補正処理を行う補正手段
を有することが好ましい。

【００１１】また、前記傷検出手段は、前記測距情報に
より領域分割された領域で、撮影距離の異なる少なくと
も２以上の領域にまたがる線を、前記各被写体領域の境
界に相当しない線であるとして、前記フィルム上の傷と
して検出することが好ましい。

【００１２】また、前記多点測距カメラを利用した画像
処理システムであって、さらに、前記撮影画面上におい
て、前記各被写体の撮影距離と該被写体領域の境界のエ
ッジ強度の関係を用いて、該エッジ強度が所定の許容範
囲を越える前記被写体領域をノイズとして検出するノイ
ズ検出手段と、前記ノイズとして検出された被写体領域
に対して補正処理を行う補正手段を有することが好まし
い。

【００１３】

【発明の実施の形態】以下、本発明に係る多点測距カメ
ラを利用した画像処理システムについて、添付の図面に
示される好適実施形態を基に、詳細に説明する。

【００１４】図１は、本発明に係る多点測距カメラを利
用した画像処理システムの一実施形態としてのデジタル
フォトプリンタの概略構成を示すブロック図である。図
１に示されるデジタルフォトプリンタ（以下、フォトプ
リンタとする。）１０は、基本的に、フィルムＦに撮影
された画像を光電的に読み取るスキャナ（画像読取装
置）１２と、読み取られた画像データを処理して出力用
の画像データとし、また、フォトプリンタ１０全体の操
作および制御等を行う画像処理装置１４と、画像処理装
置１４から出力された画像データに応じて変調した光ビ
ームで感光材料（印画紙）を画像露光し、現像処理して
（仕上がり）プリントとして出力するプリンタ１６とを
有する。また、画像処理装置１４には、様々な条件の入
力や設定、処理の選択や指示、色／濃度補正等の指示等
を入力するためのキーボード１８ａおよびマウス１８ｂ
を有する操作系１８と、スキャナ１２で読み取られた画
像、各種の操作指示、条件の設定／登録画面等を表示す
るディスプレイ２０が接続される。なお、本実施形態の
画像処理装置１４には、さらに、多点測距カメラによる
測距情報が所定の記録媒体に記録されている場合に、該
記録媒体から測距情報を入力する測距情報入力手段４０
も接続される。

【００１５】スキャナ１２は、フィルムＦ等に撮影され
た画像を光電的に読み取る装置で、光源２２と、可変絞
り２４と、フィルムＦに入射する読取光をフィルムＦの
面方向で均一にする拡散ボックス２８と、結像レンズユ
ニット３２と、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の各画像
読取に対応するラインＣＣＤセンサを有するイメージセ
ンサ３４と、アンプ（増幅器）３６と、Ａ／Ｄ（アナロ
グ／デジタル）変換器３８とを有している。

【００１６】また、フォトプリンタ１０においては、新
写真システム(Advanced Photo System、以下単にＡＰＳ
とする。）や１３５サイズのネガ（あるいはリバーサ
ル）フィルム等のフィルムの種類やサイズ、ストリップ
スやスライド等のフィルムの形態等に応じて、スキャナ
１２の本体に装着自在な専用のキャリア３０が用意され
ており、キャリア３０を交換することにより、各種のフ
ィルムや処理に対応することができる。フィルムＦに撮
影され、プリント作成に供される画像（コマ）は、この
キャリア３０によって所定の読取位置に搬送される。こ
のような、スキャナ１２において、フィルムＦに撮影さ
れた画像を読み取る際には、光源２２から射出され、可
変絞り２４によって光量調整された読取光が、キャリア
３０によって所定の読取位置に位置されたフィルムＦに
入射して、透過することにより、フィルムＦに撮影され
た画像を担持する投影光を得る。

【００１７】キャリア３０は、フィルムＦを所定の読取
位置に搬送する搬送ローラ対と、フィルムＦの投影光を
ラインＣＣＤセンサと同方向（主走査方向）の所定のス
リット状に規制するスリットを有するマスクを有してい
る。フィルムＦは、このキャリア３０によって読取位置
に位置されて、主走査方向と直交する副走査方向にフィ
ルムＦの長手方向を一致して搬送されつつ、読取光を入
射される。これにより、結果的にフィルムＦが主走査方
向に延在するスリットによって２次元的にスリット走査
され、フィルムＦに撮影された各コマの画像が読み取ら
れる。

【００１８】ＡＰＳのフィルムには、磁気記録媒体が形
成されており、ＡＰＳのフィルム（カートリッジ）に対
応するキャリア３０には、この磁気記録媒体に情報の記
録／読取を行う磁気ヘッドが配置されている。フィルム
Ｆの磁気記録媒体に記録された情報は、この磁気ヘッド
で読み取られて画像処理装置１４等に送られ、また、画
像処理装置１４等からの情報がキャリア３０に転送さ
れ、磁気ヘッドによってフィルムＦの磁気記録媒体に記
録される。また、キャリア３０には、フィルムＦに光学
的に記録されるＤＸコード、拡張ＤＸコード、ＦＮＳコ
ード等のバーコードやフィルムＦに光学的に記録された
各種の情報を読み取るためのバーコードリーダが配置さ
れており、このバーコードリーダで読み取られた各種の
情報が画像処理装置１４に送られる。

【００１９】前述のように、読取光はキャリア３０に保
持されたフィルムＦを透過して画像を担持する投影光と
なり、この投影光は、結像レンズユニット３２によって
イメージセンサ３４の受光面に結像される。イメージセ
ンサ３４は、それぞれＲ画像、Ｇ画像及びＢ画像を読み
取る３つのラインＣＣＤセンサを有するいわゆる３ライ
ンのカラーＣＣＤセンサで、主走査方向に延在する。フ
ィルムＦの投影光は、イメージセンサ３４によって、
Ｒ、Ｇ、Ｂの３原色に分解されて光電的に読み取られ
る。イメージセンサ３４の出力信号は、アンプ３６で増
幅され、Ａ／Ｄ変換器３８でデジタル信号とされて、画
像処理装置１４に送られる。

【００２０】スキャナ１２においては、フィルムＦに撮
影された画像の読み取りを、低解像度で読み取るプレス
キャンと、出力画像の画像データを得るためのファイン
スキャンとの２回の画像読取で行う。プレスキャンは、
スキャナ１２が対象とする全てのフィルムの画像を、入
力画像としてイメージセンサ３４が飽和することなく読
み取れるように設定されたプレスキャンの読取条件で行
われる。一方、ファインスキャンは、プレスキャンデー
タから、その画像（コマ）の最低濃度よりも若干低い濃
度でイメージセンサ３４が飽和するように、各コマ毎に
設定されたファインスキャンの読取条件で行われる。従
って、プレスキャンとファインスキャンの出力信号は、
解像度と出力レベルが異なるのみである。

【００２１】なお、本発明において、スキャナ１２は、
このようなスリット走査によるものに限定はされず、１
コマの画像の全面を一度に読み取る、面露光を利用する
ものであってもよい。この場合には、例えばエリアＣＣ
Ｄセンサを用い、光源とフィルムＦとの間に、Ｒ、Ｇ及
びＢの各色フィルタを順次挿入してエリアＣＣＤセンサ
で画像を読み取ることにより、フィルムに撮影された画
像を３原色に分解して順次読み取ればよい。

【００２２】前述のように、スキャナ１２からの出力信
号（画像データ）は、画像処理装置１４に出力される。
なお、本発明のプリントシステム１０においては、画像
処理装置１４は、スキャナ１２によって読み取られたフ
ィルムＦの画像以外にも、反射原稿の画像を読み取る画
像読取装置、デジタルカメラやデジタルビデオカメラ等
の撮像デバイス、ＬＡＮ（Local Area Network) やコン
ピュータ通信ネットワーク等の通信手段、メモリカード
やＭＯ（光磁気記録媒体）やフォトＣＤ等のメディア
（記録媒体）等の各種の画像読取手段や撮像手段、画像
データの記憶手段等の、各種の画像データ供給源から画
像データを受け取り、以下に示すような処理をしてもよ
い。なお、この場合に、多点測距カメラによって撮影さ
れた画像データとともに、当該画像の測距情報も同時に
送られてくるものとする。

【００２３】図２に、本発明の一実施形態に係る画像処
理装置１４の概略構成を示すブロック図を示す。画像処
理装置１４は、データ処理部４２、プレスキャン（フレ
ーム）メモリ４４、ファインスキャン（フレーム）メモ
リ４６、プレスキャンデータ処理部４８、ファインスキ
ャンデータ処理部５０及び条件設定部５２から構成され
る。なお、図２は、主に、画像処理関連の部位を示すも
のであり、これ以外にも本画像処理装置１４を含むフォ
トプリンタ１０全体の制御や管理を行うＣＰＵ、フォト
プリンタ１０の作動等に必要な情報を記憶するメモリ等
が配置され、また、操作系１８やディスプレイ２０は、
このＣＰＵ等を介して各部位に接続される。

【００２４】スキャナ１２から画像処理装置１４に入力
されたＲ、Ｇ、Ｂの各出力信号は、データ処理部４２で
Ｌｏｇ変換、ＤＣオフセット補正、暗示補正、シェーデ
ィング補正等の処理が施されてデジタルの画像データと
してプレスキャンデータはプレスキャンメモリ４４に、
ファインスキャンデータはファインスキャンメモリ４６
に、それぞれ格納される。なお、プレスキャンデータと
ファインスキャンデータは、解像度と信号レベルが異な
る以外は基本的に同じデータである。

【００２５】プレスキャンメモリ４４に格納されたプレ
スキャンデータは、プレスキャンデータ処理部４８に読
み出される。プレスキャンデータ処理部４８は、（プレ
スキャン）データ処理部５４とデータ変換部５６とから
構成される。一方、ファインスキャンメモリ４６に格納
されたファインスキャンデータはファインスキャンデー
タ処理部５０に読み出される。ファインスキャンデータ
処理部５０は、（ファインスキャン）データ処理部５８
と補正手段６０とデータ変換部６２とから構成される。
補正手段６０は、画像中にフィルムの傷やゴミ等による
欠陥が検出された場合に、この欠陥を補正する処理を行
うものである。

【００２６】プレスキャンデータ処理部４８のデータ処
理部５４とファインスキャンデータ処理部５０のデータ
処理部５８は、スキャン１２によって読み取られた画像
（画像データ）に所定の画像処理を施す部位である。各
データ処理部５４、５８における処理は、解像度が異な
る以外は基本的に同じ処理である。ここで行われる処理
としては、例えば、色バランス調整、階調調整、濃度調
整、彩度調整、電子変倍処理、覆い焼き処理（濃度ダイ
ナミックレンジの圧縮／伸長）及び鮮鋭化（シャープネ
ス）処理、平滑化処理等がある。

【００２７】ファインスキャンデータ処理部５０の補正
手段６０は、後述する傷検出手段７８、ノイズ検出手段
８０によって検出されたフィルムＦの傷やノイズに対応
する画像の領域の画素（欠陥画素）を補正し、画像デー
タをフィルムＦの傷やノイズを補正した画像データとす
る部位である。欠陥画素の補正方法には、特に限定はな
く、公知の方法が利用可能である。例えば、欠陥画素の
周辺画素の画像データを用いて補正する方法が好適に例
示される。具体的には、欠陥画素の画像データを周辺画
素の画像データで置き換える方法や、欠陥画素の画像デ
ータを周辺画素の画像データを用いた補間演算で算出
し、この画像データを用いる方法等がある。

【００２８】プレスキャンデータ処理部４８のデータ変
換部５６は、データ処理部５４によって処理された画像
データを必要に応じて間引いて、３Ｄ−ＬＵＴ等を用い
て変換して、ディスプレイ２０による表示に対応する画
像データにしてディスプレイ２０に表示するものであ
る。

【００２９】条件設定部５２は、データ処理部５４及び
５８による各種の処理条件を設定し、また、ファインス
キャンの読取条件を設定するものである。条件設定部５
２は、画像処理条件設定部６４、キー補正部６６、パラ
メータ統合部６８から構成される。画像処理条件設定部
６４は、プレスキャンデータ等を用いて、画像処理部５
４、５８における画像処理条件を作成し、パラメータ統
合部６８に供給する。具体的には、画像処理条件設定部
６４は、プレスキャンメモリ４４からプレスキャンデー
タを読み出し、プレスキャンデータから濃度ヒストグラ
ムの作成や、平均濃度、ＬＡＴＤ、ハイライト、シャド
ー等の画像特徴量の算出を行い、これらとオペレータに
よる指示等に応じて、色バランス調整、階調調整等や鮮
鋭化（シャープネス）、平滑化等の画像処理条件を設定
する。

【００３０】キー補正部６６は、キーボード１８ａに設
定された濃度（明るさ）、色、コントラスト、シャープ
ネス、彩度等を調整するキーやマウス１８ｂで入力され
た各種の指示等に応じて、画像処理条件の調整量を算出
し、パラメータ統合部６８に供給する。パラメータ統合
部６８は、画像処理条件設定部６４が設定した画像処理
条件を受け取り、供給された画像処理条件をプレスキャ
ンデータ処理部４８のデータ処理部５４及びファインス
キャンデータ処理部５０のデータ処理部５８に設定す
る。さらに、パラメータ統合部６８は、キー補正部６６
で算出された調整量に応じて、前記設定された画像処理
条件を補正する。また、パラメータ統合部６８は、後述
する欠陥検出部７０からの指示に応じて設定された画像
処理条件（特に、鮮鋭化および平滑化の条件）を変更す
る。

【００３１】本実施形態の画像処理装置１４は、以上の
構成の他に、本フォトプリンタ１０に入力される画像デ
ータを撮影したカメラが多点測距カメラであり、撮影対
象の測距情報をも入力される場合に、この測距情報等を
用いてフィルム上の傷やゴミ等に起因する画像の欠陥を
検出する欠陥検出部７０を有している。欠陥検出部７０
は、領域分割手段７２、撮影距離及び向き推定手段７
４、処理内容／強度変更手段７６、傷検出手段７８及び
ノイズ検出手段８０とを有している。

【００３２】領域分割手段７２は、プレスキャンメモリ
４４からプレスキャンデータを受けとるとともに、測距
情報入力手段４０より、多点測距カメラがフィルムに画
像を撮影する際に取得した当該撮影画像の測距情報を受
け取り、撮影画面上での各被写体領域の境界を推定し、
これにより領域分割を行うものである。なお、測距情報
は、多点測距カメラが測距情報を所定の記録媒体に記録
する場合には、前記測距情報入力手段４０は、この記録
媒体から情報を読み出す手段であるが、特に限定される
ものではない。例えば、多点測距カメラがＡＰＳシステ
ムに対応しており、測距情報がＡＰＳフィルムに磁気情
報として記録される場合には、スキャナ１２の磁気情報
読み取り手段（磁気ヘッド）が測距情報入力手段とな
る。その他、測距情報は、フィルムやカートリッジにＩ
Ｃチップ等を貼り付けて、それに記録してもよいし、フ
ィルムに光学的に記録してもよい。それぞれの記録方法
に応じて、所定の測距情報入力手段４０（例えばバーコ
ードリーダ等）が用意される。

【００３３】領域分割手段７２は、公知の方法により被
写体のエッジ（境界の候補）を抽出し、これに測距情報
の連続性を加味して被写体の境界を推定する。抽出され
た線（エッジ）が、測距情報も連続しており確かにつな
がった１本の線である場合には、被写体の境界であると
する。被写体の境界が検出されると、その境界で囲まれ
た、あるいはある方向に区切られた領域を一つの被写体
領域として、各被写体領域が例えば主要被写体と背景と
に分割される。

【００３４】撮影距離及び向き推定手段７４は、分割さ
れた各被写体領域の撮影距離及び向きを推定する。例え
ば、ある被写体領域の各点が同じ撮影距離の場合には、
この被写体領域は、カメラの撮影光軸に対して垂直に面
していると推定される。また、被写体領域内の点によっ
て撮影距離が異なる場合には、その撮影距離の差によつ
て、その被写体領域の撮影光軸に対する向きが推定され
る。

【００３５】処理内容／強度変更手段７６は、推定され
た各被写体の撮影距離及び向きに応じて、あるいは各被
写体領域の境界からの画面上での距離に応じて、前記画
像処理条件設定部６４によって、パラメータ統合部６８
に設定された画像処理条件の内容または処理の強度を変
更する。具体的には、例えば、主要被写体と背景領域に
分割されている場合に、主要被写体のエッジを強調（鮮
鋭化）するとともに背景領域については覆い焼き処理を
行う等により、主要被写体の周囲に、いわゆる「後光」
状の画質不良が発生するのを防止するようにする。

【００３６】傷検出手段７８は、領域分割手段７２によ
る領域分割結果及び撮影距離及び向き推定手段７４によ
って算出された距離及び向きのデータを得て、撮影画面
上において、各被写体領域の境界に相当しない線をフィ
ルム上の傷として検出するものである。傷を検出した場
合には、傷検出信号が補正手段６０に送られ、補正手段
６０において、傷によって画像中に生じた欠陥画素を、
例えば周辺の画素を用いて補正する。なお、境界に相当
しない線を検出する方法としては、例えば、撮影距離の
異なる少なくとも２以上の領域にまたがる測距情報の連
続する線があった場合に、これは被写体領域の境界に相
当しない線であるとする方法が考えられる。

【００３７】ノイズ検出手段８０も、前記傷検出手段７
８と同様に領域分割手段７２と撮影距離及び向き推定手
段７４から所定のデータを得て、画面上のノイズを検出
するものであり、ノイズを検出した場合には、ノイズ検
出信号が補正手段６０に送られノイズによる画像の欠陥
が補正される。ノイズ検出手段８０は、各被写体の撮影
距離と該被写体領域の境界のエッジ強度の関係を用い
て、該エッジ強度が所定の許容範囲を越える場合には、
フィルム上のゴミあるいはノイズであるとして検出す
る。例えば、空を含む撮影画像において、空に白点があ
るときに、鳥や雲等のように実際に空に存在する被写体
の場合には距離が遠いため、エッジがそれほど強くはな
い。これに対し、もしフィルム上にゴミ等がある場合に
は、スキャナ１２でこれを読み取るとエッジが強くでる
ため、撮影距離が大であるにもかかわらず強いエッジ強
度であるから、ゴミであるとして検出することができ
る。

【００３８】以下、本実施形態の作用を説明する。ま
ず、被写体を多点測距カメラを用いて撮影する。撮影時
には、多点測距カメラにより、撮影画面上の各点の撮影
距離についての測距情報が取得され、所定の記録媒体に
記録される。この記録媒体は、例えばＡＰＳのフィルム
の磁気記録媒体でもよいし、フィルムとは別体の所定の
記録媒体でもよい。また、多点測距カメラの測距点数
は、特に限定はされないが、点数が多く、高密度の多点
測距機能を持つ方が精密な検出を行うことができて好ま
しい。

【００３９】多点測距カメラによって撮影されたフィル
ムが（及び測距情報を記録した記録媒体がフィルムと別
体の場合には当該記録媒体も一緒に）ラボに持ち込まれ
ると、オペレータはフィルムを、このフィルムに対応す
るキャリア３０にセットしてスキャナ１２によりプレス
キャンを行う。このとき、フィルムの磁気記録媒体に測
距情報が記録されている場合にはフィルムから、また測
距情報がフィルムとは別体の記録媒体に記録されている
場合にはこの記録媒体から、所定の読み取り装置（測距
情報入力手段４０）により測距情報を入力する。

【００４０】プレスキャンデータは、プレスキャンメモ
リ４４に格納され、条件設定部５２の画像処理条件設定
部６４がこれを読み出し、濃度ヒストグラムの作成や画
像特徴量の算出等を行い、ファインスキャンの読取条件
を設定し、さらに、各コマの画像処理条件を設定しパラ
メータ統合部６８に供給する。パラメータ統合部６８
は、これをデータ処理部５４、５８に設定する。

【００４１】一方、欠陥検出部７０においては、プレス
キャンデータ及び各撮影コマごとの測距情報とから各画
像の主要被写体と背景の境界を抽出する等して、画像処
理条件の補正（変更）情報をパラメータ統合部６８に供
給するとともに、欠陥の検出を行い、欠陥の補正を行う
ために、傷、ノイズ等の検出信号を補正手段６０に送
る。この画像処理条件の変更や欠陥画素の補正の方法に
は、以下その一例を示すように様々な内容が含まれる。

【００４２】領域分割手段７２は、プレスキャンメモリ
４４よりプレスキャンデータを受け取るとともに測距情
報入力手段４０より測距情報を受け取り、測距情報から
主要被写体と背景の境界を抽出する。そして、この境界
に絞って画素レベルの領域分割を、色、濃度の類似性を
利用して行い、各被写体領域と背景を抽出する。撮影距
離及び向き推定手段７４は、各被写体領域及び画像中の
所定の各点の撮影距離を測距情報から得て、各被写体の
カメラの撮影光軸に対する向きを推定し、被写体の３次
元構造を抽出する。このとき、例えば、各領域内の各点
の撮影距離を比較することにより、該領域のカメラ撮影
光軸に対する角度を算出する。

【００４３】処理内容／強度変更手段７６は、前記領域
分割、撮影距離及び向き等の情報を受け取り、これに応
じて画像処理の内容あるいは処理の強度の変更をパラメ
ータ統合部６８に対して指示する。具体的には、例え
ば、主要被写体（主に人物）の境界において、エッジ強
調やその周辺の背景部の覆い焼き処理の程度等を制御し
て、被写体の周囲に、いわゆる後光状の白い縁取りが発
生しないように画像処理内容あるいは処理の強度を変更
する。このような画像処理条件の内容や処理の強度の変
更はパラメータ統合部６８に送られる。

【００４４】傷検出部７８では、例えば、上で算出され
た画像のエッジと、被写体の３次元構造のエッジとの整
合性をチェックすることによりフィルムの傷を検出す
る。例えば、２つ以上の平面状の被写体領域の間にエッ
ジ（線）がある場合には、これは領域の境界であるが、
空間的配置の異なる２つ以上の平面を越えてエッジ
（線）が存在する場合には、このような線は本来被写体
中にはあり得ない線であり、傷であると推定される。傷
検出信号は補正手段６０に送られる。傷検出信号を受け
た補正手段６０は、例えば周辺画素を利用してフィルム
の傷に起因する画像の欠陥を修復する。

【００４５】また、ノイズ検出手段８０においては、上
で検出された領域の距離等の情報により、所定の許容範
囲を越えるエッジ強度を有するエリアについては、ノイ
ズと推定し、ノイズ検出信号を補正手段６０に送る。ノ
イズ検出信号を受けた補正手段６０では、ノイズによる
欠陥画素を傷の場合と同様にその周辺の画素を用いて修
復処理を行う。あるいは、ノイズを有する領域に対し
て、画像処理そのものを変更するようにノイズ検出手段
８０から処理内容／強度変更手段７６に信号を送るよう
にしてもよい。例えば、この場合、被写体の輪郭（境
界）に近い画素領域については、平滑化処理をオフ（処
理を行わない）としたり、またはその強度を弱くする。
また、被写体の輪郭以外の画素領域については、平滑化
を強くかけるようにしてノイズを除去するようにしても
よい。

【００４６】その他の画像処理の変更としては、例え
ば、上で算出された被写体領域の距離やカメラ光軸に対
する面の角度に応じて鮮鋭化あるいは平滑化の強度を変
更することが挙げられる。例えば、処理内容／強度変更
手段７６において、撮影距離及び向き推定手段７４から
受け取った被写体距離によりその距離が遠いと推定され
る被写体については、その被写体領域をぼかすようにし
たり、あるいは、被写体領域のカメラ光軸に対する面の
角度により、その被写体がカメラ光軸に対し平行に近い
向きにあると推定される場合には、その被写体領域につ
いては、その線密度が高くなるため、その被写体領域は
ぼかさないようにする等が考えられる。

【００４７】前述したように、条件設定部５２によって
設定されたファインスキャンの読取条件にしたがってフ
ァインスキャンが行われ、読み取られたファインスキャ
ンデータは、ファインスキャンメモリ４６に格納され、
ファインスキャンデータ処理部５０のデータ処理部５８
に読み出されて、条件設定部５２で設定され上で述べた
ように必要に応じて欠陥検出部７０によって変更された
画像処理条件によって、データ処理部５８において画像
処理が施される。その後、画像処理後のデータは、補正
手段６０において、所定の補正処理及び傷、ノイズ検出
信号に応じて、傷やノイズの修復処理が施される。処理
後のデータはデータ変換部６２において変換され、プリ
ンタ１６へ出力され、プリンタ１６より仕上がりプリン
トとして出力される。

【００４８】このように、本実施形態によれば、多点測
距カメラによる測距情報を利用することにより、被写体
の撮影距離や向き等に応じて、画像処理条件の内容やそ
の処理強度を変更し、また、上記情報を用いることによ
り、装置構成を増大させることなく、フィルムの傷やゴ
ミあるいはノイズを検出することにより画像欠陥を修復
することで、画質劣化を抑制し、高画質なプリントを得
ることができる。

【００４９】以上、本発明の多点測距カメラを利用した
画像処理システムについて詳細に説明したが、本発明
は、以上の例には限定されず、本発明の要旨を逸脱しな
い範囲において、各種の改良や変更を行ってもよいのは
もちろんである。

【００５０】

【発明の効果】以上説明した通り、本発明によれば、多
点測距カメラの測距情報を用いることにより、大がかり
な装置を必要とすることなく、画質劣化を抑制し、高画
質な画像を得ることが可能となった。

【図面の簡単な説明】

【図１】本発明に係る多点測距カメラを利用した画像処
理システムの一実施形態としてのデジタルフォトプリン
タの概略構成を示すブロック図である。

【図２】本発明の一実施形態に係る画像処理装置の概略
構成を示すブロック図である。

【符号の説明】

１０ デジタルフォトプリンタ（フォトプリンタ） １２ スキャナ １４ 画像処理装置 １６ プリンタ １８ 操作系 ２０ ディスプレイ ２２ 光源 ２４ 可変絞り ２８ 拡散ボックス ３０ キャリア ３２ 結像レンズユニット ３４ イメージセンサ ３６ アンプ ３８ Ａ／Ｄ変換器 ４０ 測距情報入力手段 ４２ データ処理部 ４４ プレスキャンメモリ ４６ ファインスキャンメモリ ４８ プレスキャンデータ処理部 ５０ ファインスキャンデータ処理部 ５２ 条件設定部 ５４ （プレスキャン）データ処理部 ５６、６２ データ変換部 ５８ （ファインスキャン）データ処理部 ６０ 補正手段 ７０ 欠陥検出部 ７２ 領域分割手段 ７４ 撮影距離及び向き推定手段 ７６ 処理内容／強度変更手段 ７８ 傷検出手段 ８０ ノイズ検出手段

Claims (4)

【特許請求の範囲】
1. 【請求項１】多点測距カメラによって撮影されたフィル
   ムの画像を光電的に読み取り、得られた画像データに所
   定の画像処理を施し、出力用の画像データとする多点測
   距カメラを利用した画像処理システムであって、 前記多点測距カメラにより撮影された画像の測距情報を
   入力する手段と、 前記測距情報の連続性により、撮影画面上での各被写体
   領域の境界を推定し、領域分割を行う手段と、 前記測距情報により、各被写体の撮影距離及び向きを推
   定する手段と、 撮影画面上で、該画面上の各点の、前記各被写体領域の
   境界からの距離を算出する手段と、 前記各被写体の撮影距離または向きに応じて、あるい
   は、各被写体領域の境界からの画面上での距離に応じ
   て、前記画像処理の内容または処理の強度を変更する手
   段と、を有することを特徴とする多点測距カメラを利用
   した画像処理システム。
2. 【請求項２】請求項１に記載の多点測距カメラを利用し
   た画像処理システムであって、さらに、前記撮影画面上
   において、前記各被写体領域の境界に相当しない線をフ
   ィルム上の傷として検出する傷検出手段と、前記フィル
   ム上の傷として検出された線に対して補正処理を行う補
   正手段を有する多点測距カメラを利用した画像処理シス
   テム。
3. 【請求項３】前記傷検出手段は、前記測距情報により領
   域分割された領域で、撮影距離の異なる少なくとも２以
   上の領域にまたがる線を、前記各被写体領域の境界に相
   当しない線であるとして、前記フィルム上の傷として検
   出する請求項２に記載の多点測距カメラを利用した画像
   処理システム。
4. 【請求項４】請求項１〜３のいずれかに記載の多点測距
   カメラを利用した画像処理システムであって、さらに、
   前記撮影画面上において、前記各被写体の撮影距離と該
   被写体領域の境界のエッジ強度の関係を用いて、該エッ
   ジ強度が所定の許容範囲を越える前記被写体領域をノイ
   ズとして検出するノイズ検出手段と、前記ノイズとして
   検出された被写体領域に対して補正処理を行う補正手段
   を有する多点測距カメラを利用した画像処理システム。