JPH08184925A - 露光量決定方法及び図形抽出方法 - Google Patents

露光量決定方法及び図形抽出方法

Info

Publication number
JPH08184925A
JPH08184925A JP25897795A JP25897795A JPH08184925A JP H08184925 A JPH08184925 A JP H08184925A JP 25897795 A JP25897795 A JP 25897795A JP 25897795 A JP25897795 A JP 25897795A JP H08184925 A JPH08184925 A JP H08184925A
Authority
JP
Japan
Prior art keywords
person
area
face
image
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP25897795A
Other languages
English (en)
Other versions
JP3576654B2 (ja
Inventor
Naoto Kaneshiro
金城  直人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP25897795A priority Critical patent/JP3576654B2/ja
Priority to US08/549,181 priority patent/US5629752A/en
Publication of JPH08184925A publication Critical patent/JPH08184925A/ja
Application granted granted Critical
Publication of JP3576654B2 publication Critical patent/JP3576654B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Control Of Exposure In Printing And Copying (AREA)

Abstract

(57)【要約】 【課題】 原画像中の人物の顔に相当する領域及びその
周辺の領域の色の影響を受けることなく人物の顔に相当
する領域のみを抽出する。 【解決手段】 画像データを取込み、2値化やその他手
法により画像を複数領域に分割し(100,102) た後に、複
数領域の輪郭より、人物の頭部の輪郭を表すパターン、
人物の顔の輪郭を表すパターン、人物の顔の内部構造を
表すパターン、人物の胴体の輪郭を表すパターンを各々
検出し、検出したパターンに応じて顔候補領域を設定
し、符号が正の重み係数を付与することを順次行い(104
〜110)、非人物領域を判定し該領域に符号が負の重み係
数を付与し(112) 、各処理で設定された顔候補領域及び
重み係数より、人物の顔に相当する領域である確度が最
も高い領域を抽出する(118) 。上記処理を画像分割の粗
密度を変更しながら複数回行い、最終的に判定した顔領
域のデータを判定結果として出力する(120〜126)。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は露光量決定方法及び
図形抽出方法に係り、特に、原画像中に存在する人物の
顔に相当する領域を判断し、判断した領域が適正な色に
焼付けされるように露光量を決定する露光量決定方法、
及び画像から抽出対象図形が存在する領域を抽出する図
形抽出方法に関する。
【0002】
【従来の技術及び発明が解決しようとする課題】人物写
真を観賞するときに最も注目される部位は人物の顔であ
り、例えばフィルム等に記録された原画像を印画紙等の
複写材料に焼付ける場合には、人物の顔の色が適正な色
に焼付けされるように露光量を決定する必要がある。
【0003】このため本出願人は、人物写真では人物が
画像の略中央部に位置している確率が高いとの経験則に
基づいて、フィルム画像を予め固定的に定められた複数
の領域に分割すると共に、画像の略中央部に位置してい
る領域の重みが重くなるように各領域を重み付けし、各
領域の3色の濃度の加重平均値を求め、該加重平均値に
基づいて露光量を決定する方法を既に提案している(特
開昭63-80242号公報参照)。しかし、上記では人物が実
際に画像の略中央部付近に位置していれば、該人物が適
正な色で焼付される露光量を得ることができるが、人物
が画像の中央部から大きく外れた位置に位置している場
合には適正な露光量を得ることができない、という問題
があった。
【0004】また本出願人は、カラー原画像を多数画素
に分割し各画素毎にR、G、Bの3色に分解して測光
し、測光データに基づいて色相値(及び彩度値)につい
てのヒストグラムを求め、求めたヒストグラムを山毎に
分割し、各画素が分割した山の何れに属するかを判断し
て各画素を分割した山に対応する群に分け、各群毎にカ
ラー原画像を複数の領域に分割し(所謂クラスタリン
グ)、該複数の領域のうち人物の顔に相当する領域を推
定し、推定した領域の測光データに基づいて露光量を決
定することを提案している(特開平4-346332号公報参
照)。
【0005】また、特開平6-160993号公報には、人物の
顔に相当する領域を抽出する確度を向上させるために、
画像の外縁に接している領域を背景領域と判断して除去
したり、抽出した領域を線図形化し、抽出した領域の周
辺に位置している近傍領域の形状及び抽出した領域の形
状に基づいて、抽出した領域が人物の顔に相当する領域
であるか否かを判断することも記載されている。
【0006】しかしながら、上記では、原画像に例えば
地面や木の幹等の肌色領域が存在しており、該肌色領域
の色相及び彩度が原画像中の人物の顔に相当する領域の
色相及び彩度と近似していた場合、この領域を人物の顔
に相当する領域と誤判定する可能性がある。また、この
肌色領域が人物の顔に相当する領域と隣接していた場
合、肌色領域と人物の顔に相当する領域とを分離でき
ず、原画像を適正な範囲の領域に分割できないことがあ
った。上記従来技術では、分割した領域の何れかが人物
の顔に相当する領域であることを前提として処理を行っ
ているため、原画像を適正な範囲の領域に分割できなか
った場合には、人物の顔に相当する領域を誤判定し、人
物の顔が適正に焼付けできる露光量を得ることができな
い、という問題があった。
【0007】また上述の、原画像を適正な範囲の領域に
分割できなかった場合には抽出すべき領域を誤判定す
る、という問題は、人物の顔に相当する領域の抽出に限
らず、画像から特定の図形が存在する領域を抽出する場
合にも共通する問題である。すなわち、抽出すべき特定
図形の色等が予め判明していたとしても、画像中に前記
特定図形の色相や彩度が近似している領域が存在してい
たり、該領域が前記特定図形に相当する領域に隣接して
いた等の場合には、特定図形が存在する領域を適正に抽
出することができない、という問題があった。
【0008】本発明は上記事実を考慮して成されたもの
で、原画像中の人物の顔に相当する領域及びその周辺の
領域の色の影響を受けることなく人物の顔に相当する領
域のみを抽出し、前記領域を適正に焼付けできるように
露光量を決定できる露光量決定方法を得ることが目的で
ある。
【0009】また本発明は、画像中に存在する抽出対象
図形を、抽出対象図形が存在する領域、及びその周辺の
領域の色の影響を受けることなく適正に抽出することが
できる図形抽出方法を得ることが目的である。
【0010】
【課題を解決するための手段】上記目的を達成するため
に請求項1記載の発明に係る露光量決定方法は、原画像
中に存在する人物の所定の部分に特有の形状パターンを
探索し、検出した形状パターンの大きさ、向き及び人物
の顔と前記所定の部分との位置関係に応じて人物の顔に
相当すると推定される領域を設定し、設定した領域に重
み係数を付与することを、人物の各部分に特有の複数種
類の形状パターンを探索対象として各々行い、人物の顔
に相当すると推定される領域として設定した複数の領域
の各々の範囲、及び前記複数の領域に各々付与した重み
係数に基づいて、原画像中の人物の顔に相当する確度が
最も高い領域を判断し、判断した領域の色又は濃度の少
なくとも一方に基づいて複写材料への露光量を決定す
る。
【0011】請求項2記載の発明は、請求項1記載の発
明において、人物の各部に特有の形状パターンが、人物
の頭部の輪郭を表す形状パターン、人物の顔の輪郭を表
す形状パターン、人物の顔の内部構造を表す形状パター
ン、及び人物の胴体の輪郭を表す形状パターンを含むこ
とを特徴としている。
【0012】請求項3記載の発明は、請求項1記載の発
明において、形状パターンの探索を、原画像を濃度又は
色が同一又は近似している複数の画素で構成される複数
の領域に分割し、該複数の領域の各々の輪郭を用いて行
うことを特徴としている。
【0013】請求項4記載の発明は、請求項1記載の発
明において、形状パターンの探索を、原画像中に存在す
るエッジを検出し、検出したエッジの中心線を求め、求
めた中心線を用いて行うことを特徴としている。
【0014】請求項5記載の発明は、請求項1記載の発
明において、設定した人物の顔に相当すると推定される
領域には符号が正の重み係数を付与すると共に、原画像
中の人物の顔に相当する確度の低い領域を判定し、判定
した領域には符号が負の重み係数を付与することを特徴
としている。
【0015】請求項6記載の発明に係る図形抽出方法
は、抽出対象図形を構成する特徴的な複数の部分形状に
基づいて複数の部分形状パターンを予め定めておき、画
像中に存在する部分形状パターンを探索し、検出した部
分形状パターンの大きさ、方向、及び前記抽出対象図形
における前記部分形状パターンが表す部分形状の位置に
応じて画像中の抽出対象図形の特定部分又は全体が存在
すると推定される候補領域を設定することを、前記複数
の部分形状パターンの各々について行い、設定した各候
補領域毎に、前記検出した各部分形状パターンとの関係
に基づいて抽出対象図形の特定部分又は全体が存在する
領域としての整合度を求め、各候補領域毎に求めた整合
度に基づいて、抽出対象図形の特定部分又は全体が存在
している確度が高い候補領域を判断し、抽出対象図形の
特定部分又は全体が存在している確度が高いと判断した
候補領域を抽出する。
【0016】請求項7記載の発明は、請求項6の発明に
おいて、画像上での前記抽出対象図形の状態を複数の状
態に予め分類しておくと共に、前記複数の部分形状パタ
ーンの各々に対し、部分形状パターンを探索する際の探
索条件を規定するパラメータとして、前記分類した複数
の状態に応じて複数種類のパラメータを予め定めてお
き、画像中に存在する部分形状パターンを探索し、前記
候補領域を設定することを前記複数の部分形状パターン
の各々について行い、設定した候補領域毎に整合度を求
め、抽出対象図形の特定部分又は全体が存在している確
度が高い候補領域を判断して抽出する処理を、前記複数
の状態に対応する複数種類のパラメータの各々を用いて
行うか、又は、前記複数の状態のうちの所定の状態に対
応するパラメータを用いて前記処理を行った結果、抽出
対象図形の特定部分又は全体が存在している確度が高い
と判断した候補領域が無かった場合は、前記所定の状態
と異なる状態に対応するパラメータを用いて前記処理を
行うことを繰り返し、抽出対象図形の特定部分又は全体
が存在している確度が高いと判断した候補領域が有った
場合に前記処理を終了することを特徴としている。
【0017】請求項8記載の発明は、請求項7の発明に
おいて、画像上での抽出対象図形の状態は、画像上での
抽出対象図形の大きさ、及び画像上での抽出対象図形の
向き、及び抽出対象図形が表す物体の向きの少なくとも
何れかを含むことを特徴としている。
【0018】請求項1記載の発明では、原画像中に存在
する人物の各部に特有の形状パターンを探索し、検出し
た形状パターンの大きさ、向き及び検出した形状パター
ンとの位置関係に応じて人物の顔に相当すると推定され
る領域を設定する。なお、人物の各部に特有の形状パタ
ーンとしては、例えば請求項2にも記載したように、人
物の頭部の輪郭を表す形状パターン、人物の顔の輪郭を
表す形状パターン、人物の顔の内部構造を表す形状パタ
ーン、及び人物の胴体の輪郭を表す形状パターン等を用
いることができる。
【0019】例えば人物の頭部(頭髪部)に対応する原
画像上の領域は、その輪郭に、人物の頭頂部に相当する
所定の円曲度の凸部と、該凸部の下方に人物の頭部と顔
との境界に相当する所定の円曲度の凹部と、が含まれて
いることが一般的である。このため、人物の頭部に対し
ては、頭部の輪郭を表す特有の形状パターンとして、例
えば所定の円曲度の凸部と所定の円曲度の凹部とを用い
ることができる。そして、原画像中に前述の形状パター
ンが検出された場合には、人物の顔に相当すると推定さ
れる領域を、例えば以下のようにして設定することがで
きる。
【0020】すなわち、人物の顔は、頭部に対し下方側
(前記形状パターンの凹部側)に隣接した位置に存在
し、かつその大きさが頭部の大きさに略比例し、更に向
きが頭部の向きに一致する。また、人物の顔の輪郭は略
楕円形状であることが一般的である。従って、原画像中
に前述した頭部の輪郭を表す形状パターンが検出された
場合には、検出された形状パターンの大きさ、向きに応
じた大きさ、向きで、かつ人物の頭部と顔との位置関係
に応じた位置に楕円形状の領域を設定し、該領域を人物
の顔に相当すると推定される領域とすることができる。
【0021】このように、請求項1の発明では、原画像
から検出した人物の各部に特有の形状パターンの大き
さ、向き、及び検出した形状パターンとの位置関係に応
じて人物の顔に相当すると推定される領域を設定するの
で、人物の顔に相当する領域及びその周辺の領域の色等
の影響を受けることなく、人物の顔に相当すると推定さ
れる領域を適正に設定することができる。また、逆に原
画像に人物の顔に相当する領域でないものの、顔領域に
似た輪郭の肌色領域が含まれていたとしても、これを人
物の顔に相当する領域と誤判定することを防止できる。
【0022】また、請求項1記載の発明では、人物の各
部に特有の複数種類の形状パターンの各々を探索対象と
し、検出した各形状パターンに基づいて設定した人物の
顔に相当すると推定される領域に重み係数を付与し、人
物の顔に相当すると推定される領域として設定した複数
の領域の各々の範囲、及び前記複数の領域に各々付与し
た重み係数に基づいて、原画像中の人物の顔に相当する
確度が最も高い領域を判断する。このように人物の各部
に特有の複数の形状パターンを各々探索対象として処理
を複数回行うことにより、原画像中の非人物領域で所定
の形状パターンが偶然検出されたとしても、偶然検出さ
れた形状パターンに基づいて設定した領域を、人物の顔
に相当する確度が最も高い領域として判断することはな
い。このようにして判断した領域の色又は濃度の少なく
とも一方に基づいて複写材料への露光量を決定するの
で、人物の顔に相当する領域を適正に焼付けできるよう
に露光量を決定することができる。
【0023】なお形状パターンの探索は、例えば請求項
3に記載したように、原画像を濃度又は色が同一又は近
似している複数の画素で構成される複数の領域に分割
し、該複数の領域の各々の輪郭を用いて行うことができ
る。画像を上記のように複数の領域に分割すると、例え
ば人物と背景との境界等のように人物の各部に特有の形
状パターンが輪郭等に含まれている確率の高い複数の領
域が得られる。従って、この複数の領域の輪郭から人物
の各部に特有の形状パターンを効率良く検出することが
できる。
【0024】原画像の分割は、例えば特開平4-346332号
のように、原画像の各画素毎の3色の測光データに基づ
いて色相値についての1次元ヒストグラム、又は色相値
及び彩度値についての2次元ヒストグラムを求め、求め
たヒストグラムを山毎に分割し、各画素が分割した山の
何れに属するかを判断して各画素を分割した山に対応す
る群に分け、各群毎に原画像を複数の領域に分割するこ
とができる。また、原画像を構成する各画素のうち隣接
する画素との濃度差或いは色差の大きな画素を領域の境
界とすることにより原画像を複数の領域に分割するよう
にしてもよい。また、2値化を行うことにより原画像を
複数の領域に分割したり、該2値化を各々値の異なる複
数のしきい値を用いて複数回行って分割するようにして
もよく、更に上記の組み合わせにより複数の領域に分割
するようにしてもよい。
【0025】本発明では、上記のようにして分割した領
域を人物の各部に特有の複数の形状パターンを検出する
ために用い、人物の顔に相当すると推定される領域の設
定は、先にも説明したように原画像から検出した形状パ
ターンの大きさ、向き及び検出した形状パターンとの位
置関係に応じて行う。従って、複数の領域の輪郭から複
数の形状パターンのうちの一部を検出できなかったとし
ても、人物の顔に相当すると推定される領域を設定でき
ると共に、従来のように、分割した複数の領域の何れか
が人物の顔に相当する領域と一致している必要はない。
【0026】また、形状パターンの探索は、請求項4に
記載したように、原画像中に存在するエッジを予め検出
し、検出したエッジの中心線を求め、求めた中心線を用
いて行うようにしてもよい。なお、エッジの検出は、例
えば各画素に対し濃度又は色について微分等を行うこと
により検出することができ、エッジの中心線は、例えば
周知の細線化や尾根検出等の処理により求めることがで
きる。画像中に存在するエッジについても、人物の各部
に特有の形状パターンが含まれている確率が高いので、
請求項3の発明と同様に、人物の各部に特有の形状パタ
ーンを効率良く検出することができる。
【0027】ところで、画像中には人物に相当する領域
である確率が低いと判断できる特徴を備えた領域が存在
していることがある。例えば、輪郭に含まれる直線部分
の比率が所定値以上の領域については、人工物を表して
いる領域である確率が高い。また人体は、人体の左右を
分割する仮想線に関して略線対称であるが、線対称度が
所定値以下の領域は人物に相当する領域である確率は低
い。また、凹凸数が所定値以上の領域についても人物に
相当する領域である確率は低いと判断できる。また、人
物は一般に画像の略中央部に位置している確率が高いこ
とから、画像外縁との接触率が所定値以上の領域につい
ても、画像の周縁部に位置していると判断でき、人物に
相当する領域である確率は低い。
【0028】また、領域内の濃度のコントラストが所定
値以下の場合には、表面が平滑、或いは凹凸の少ない物
体を表している領域である可能性が高く、人物の顔に相
当する領域である確率は低い。更に、領域内の濃度が所
定のパターンで変化していたり、領域内の濃度が所定の
変化パターンを繰り返している場合にも、人物に相当す
る領域である確率は低いと判断できる。従って、請求項
5にも記載したように、設定した人物の顔に相当すると
推定される領域には符号が正の重み係数を付与すると共
に、原画像中の人物の顔に相当する確度の低い領域を判
定し、判定した領域には符号が負の重み係数を付与すれ
ば、人物の顔に相当する確度が最も高い領域として人物
の顔に相当する領域が抽出される確率が更に向上する。
【0029】請求項6記載の発明では、画像中に存在す
る抽出対象図形を構成する特徴的な複数の部分形状に基
づいて複数の部分形状パターンを予め定める。なお、抽
出対象図形は人物を表す図形に限定されるものではな
く、人物でない物体、例えば人工物を表す図形等であっ
てもよいが、抽出対象図形として人物を表す図形を適用
した場合には、前記部分形状パターンとしては、請求項
2と同様に、人物の頭部の輪郭を表す形状パターン、人
物の顔の輪郭を表す形状パターン、人物の顔の内部構造
を表す形状パターン、人物の胴体の輪郭を表す形状パタ
ーン等を用いることができる。
【0030】請求項6の発明では、次に、画像中に存在
する部分形状パターンを探索し、検出した部分形状パタ
ーンの大きさ、方向、及び抽出対象図形における前記部
分形状パターンが表す部分形状の位置に応じて画像中の
抽出対象図形の特定部分又は全体が存在すると推定され
る候補領域を設定することを、複数の部分形状パターン
の各々について行う。これにより、請求項1と同様に、
抽出対象図形の特定部分又は全体が存在する領域及びそ
の周辺の領域の色等の影響を受けることなく、抽出対象
図形の特定部分又は全体が存在すると推定される候補領
域を適正に設定することができる。なお、抽出対象図形
の特定部分としては、例えば抽出対象図形として人物を
表す図形を適用した場合は、人物の顔に相当する部分を
適用することができる。
【0031】また請求項6の発明では、次に、設定した
各候補領域毎に、検出した各部分形状パターンとの関係
(例えば双方の大きさ、方向、位置関係等)に基づいて
抽出対象図形の特定部分又は全体が存在する領域として
の整合度を求め、各候補領域毎に求めた整合度に基づい
て、抽出対象図形の特定部分又は全体が存在している確
度が高い候補領域を判断し、抽出対象図形の特定部分又
は全体が存在している確度が高いと判断した候補領域を
抽出する。
【0032】このように、各候補領域毎に抽出対象図形
の特定部分又は全体が存在する領域としての整合度を求
めて、抽出対象図形の特定部分又は全体が存在している
確度が高い候補領域を判断するので、或る部分形状パタ
ーンの検出結果に基づいて設定した候補領域が抽出対象
図形の存在していない領域であったとしても、この領域
を抽出対象図形の特定部分又は全体が存在している確度
が高い領域として抽出することはなく、画像中に存在す
る抽出対象図形を、抽出対象図形が存在する領域、及び
その周辺の領域の色の影響を受けることなく適正に抽出
することができる。
【0033】ところで、画像上での抽出対象図形の部分
形状は、画像上での抽出対象図形の状態(例えば、画像
上での抽出対象図形の大きさや抽出対象図形が表す物体
の向き等)によって変化する。このため、画像上での抽
出対象図形の状態が不定の場合は、各種状態の抽出対象
図形の部分形状が部分形状パターンとして検出されるよ
うに、部分形状パターンを探索する際の探索条件を設定
する必要がある。しかし、部分形状パターンとして検出
すべき部分形状の範囲を広げると、部分形状パターンと
して多数のパターンが検出されると共に、実際には抽出
対象図形の部分形状ではないにも拘わらず部分形状パタ
ーンとして誤検出されるパターンの数も急増し、処理時
間が大幅に増加するという問題がある。
【0034】このため、請求項7に記載の発明では、画
像上での抽出対象図形の状態を複数の状態に予め分類し
ておくと共に、複数の部分形状パターンの各々に対し、
部分形状パターンを探索する際の探索条件を規定するパ
ラメータとして、前記分類した複数の状態に応じて複数
種類のパラメータを予め定めておく。なお、画像上での
抽出対象図形の状態としては、請求項8に記載したよう
に、画像上での抽出対象図形の大きさ、及び画像上での
抽出対象図形の向き、及び抽出対象図形が表す物体の向
き等が挙げられる。上記では、画像上での抽出対象図形
の種類毎に探索条件(を規定するパラメータ)を定めて
いるので、個々の探索条件において部分形状パターンと
して検出すべき部分形状の範囲が狭くなり、個々の探索
条件を用いて探索を行ったとすると特定の状態の抽出対
象図形の部分形状パターンが非常に短い時間で探索され
ることになる。
【0035】そして複数種類のパラメータを定めた後
は、例えば、部分形状パターンの探索、候補領域の設定
を複数の部分形状パターンの各々について行い、設定し
た候補領域毎に整合度を求め、抽出対象図形の特定部分
又は全体が存在している確度が高い候補領域を判断して
抽出する処理を行う処理部を複数設けた等の場合には、
各処理部において、各状態に対応する複数種類のパラメ
ータの何れかを用いて前記処理を並列で行わせることに
より、全体として、前記複数種類のパラメータの各々を
用いて前記処理を行うようにすることができる。これに
より、画像上での抽出対象図形の状態に拘わらず、抽出
対象図形の特定部分又は全体が存在している確度が高い
候補領域を非常に短い時間で抽出することができる。
【0036】また、複数の状態のうちの所定の状態に対
応するパラメータを用いて前記処理を行った結果、抽出
対象図形の特定部分又は全体が存在している確度が高い
と判断した候補領域が無かった場合は、前記所定の状態
と異なる状態に対応するパラメータを用いて前記処理を
行うことを繰り返し、抽出対象図形の特定部分又は全体
が存在している確度が高いと判断した候補領域が有った
場合に前記処理を終了するようにしてもよい。この場
合、各状態に対応する処理が直列に行われることになる
が、各状態に対応する全ての処理を行う前に抽出対象図
形の特定部分又は全体が存在している確度が高い候補領
域を抽出できる可能性は高い。従って、画像上での抽出
対象図形の状態に応じて探索条件のパラメータを複数種
類定めることを行わなかった場合と比較して、抽出対象
図形を短時間で抽出することができる。
【0037】また上記において、画像上での抽出対象図
形の出現頻度に応じて、出現頻度の高い状態に対応する
パラメータより順に用いて探索を行うようにすれば、抽
出対象図形を抽出する迄の時間を更に短縮することがで
きる。
【0038】
【発明の実施の形態】以下、図面を参照して本発明の実
施形態の一例を詳細に説明する。
【0039】〔第1実施形態〕図1には本発明を適用可
能な写真焼付装置10が示されている。写真焼付装置1
0はネガフィルム12を搬送する搬送ローラ14を備え
ている。ネガフィルム12の搬送路の下方には、光源1
6、調光フィルタ等の色補正フィルタ18、拡散ボック
ス20が順に配列されている。また、ネガフィルム12
の搬送路の上方には、ネガフィルム12を透過した光を
2方向に分配する分配用プリズム22が配置されてい
る。
【0040】分配用プリズム22によって2方向に分配
された光の一方の光路上には、投影光学系24、ブラッ
クシャッタ26、及び複写材料としてのカラーペーパ
(印画紙)28が順に配置されており、他方の光路上に
は投影光学系30、CCDイメージセンサ32が順に配
置されている。CCDイメージセンサ32はネガフィル
ム12に記録された画像(1コマ)全体を多数の画素
(例えば256×256画素)に分割し、各画素をR
(赤)、G(緑)、B(青)の3色に分解して測光す
る。
【0041】CCDイメージセンサ32の信号出力端に
は、CCDイメージセンサ32から出力された信号を増
幅する増幅器34、アナログ−デジタル(A/D)変換
器36、CCDイメージセンサ32の感度補正用の3×
3マトリクス回路38が順に接続されている。3×3マ
トリクス回路38は、マイクロプロセッシングユニット
(MPU)で構成され、ROMに後述する顔領域抽出処
理を実現するプログラムが予め記憶された顔領域抽出部
40、及び画像全体の平均濃度を演算する平均濃度演算
部42に各々接続されている。また、顔領域抽出部40
及び平均濃度演算部42は露光量演算部44に接続され
ている。露光量演算部44は、色補正フィルタ18を駆
動するドライバ46を介して色補正フィルタ18に接続
されている。
【0042】次に本第1実施形態の作用を説明する。光
源16から照射された光は、色補正フィルタ18、拡散
ボックス20及びネガフィルム12を透過し、分配用プ
リズム22によって分配され、投影光学系30を介して
CCDイメージセンサ32に入射される。なお、このと
きブラックシャッタ26は閉じられている。CCDイメ
ージセンサ32では、入射された光により、1画面全体
を多数の画素に分割し各画素をR、G、Bの3色に分解
して測光し、測光データ信号を出力する。測光データ信
号は増幅器34で増幅され、A/D変換器36でデジタ
ル信号に変換された後に、更に3×3マトリクス回路3
8でCCDイメージセンサ32の感度補正が行われて、
顔領域抽出部40及び平均濃度演算部42に画像データ
として各々入力される。
【0043】平均濃度演算部42では、1画面全体の平
均濃度を演算する。顔領域抽出部40では、後に詳述す
るようにして1画面中の人物の顔に相当する部分を推定
し、該部分のR、G、B3色の測光データを出力する。
露光量演算部44は人物領域演算部40から出力された
3色の測光データと、平均濃度演算部42から出力され
た平均濃度とを用いて露光量を演算し、演算した露光量
でネガフィルム12の画像がカラーペーパ28に焼付け
されるように、ドライバ46を介して色補正フィルタ1
8を移動させると共に、ブラックシャッタ26を開閉し
て画像の焼付けを行う。
【0044】なお、平均濃度演算部42で演算される画
面全体の平均濃度は、露光量演算部44による露光量演
算において必須の情報ではなく、平均濃度演算部42を
省略し、露光量演算部44では顔領域抽出部40から出
力された3色の測光データのみを用いて露光量を演算す
るようにしてもよい。
【0045】次に図2のフローチャートを参照し、顔領
域抽出部40の図示しないCPUで実行される顔領域抽
出処理を説明する。ステップ100では3×3マトリク
ス回路38からの画像データの取込みを行う。
【0046】ステップ102では、原画像を複数の領域
に分割する方法の一例として、画像データを所定のしき
い値で2値化する。以下、ポジ画像の例で説明する。こ
の2値化により、原画像は、しきい値よりも高い濃度の
画素で各々構成される領域(以下、この領域を「黒領
域」と称する)と、しきい値以下の濃度の画素で各々構
成される領域(以下、この領域を「白領域」と称する)
とに分割される。これにより、一例として図8(A)に
示す原画像では、図8(B)に示すように原画像中の人
物の頭髪部に相当する黒領域50を含む多数の黒領域が
抽出されることになる。更にステップ102では、分割
された複数の黒領域及び白領域の各々を識別するため
に、各領域に対してナンバリングを行う。
【0047】次のステップ104では頭部抽出による顔
候補領域設定処理を行う。この処理について、図3のフ
ローチャートを参照して説明する。ステップ172では
先に説明した2値化によって抽出された複数の黒領域の
うちの1つを取り出し、ステップ174では取り出した
黒領域の輪郭をトレースし、輪郭の曲率を演算する。例
えば図8(A)に示す原画像に対して2値化を行うこと
によって黒領域が多数抽出され、このうち図8(B)に
示すような黒領域50を取り出したとすると、輪郭のト
レースは図8(B)に示すように時計回りに行うことが
できる。また曲率の演算は、図8(C)に示すように、
所定長さで前記トレース方向に略沿った向きでかつ始点
及び終点が黒領域の輪郭に接しているベクトルを順に設
定し(図8(C)ではベクトルP1P0とベクトルP0
P2)、隣合うベクトルの内積により、曲率としてのθ
を演算することができる。また、θの向き(符号の正
負)はベクトルの外積より求めることができる。
【0048】このとき、トレースの進行方向に対し、黒
領域の輪郭が右にカーブしているときには負の値、左に
カーブしているときには正の値となるように、角度演算
式を設定するものとする。例えば図8(C)には黒領域
の輪郭のうち、トレースの進行方向に対して右にカーブ
している部分を示しており、θは負の値となる。
【0049】なお、ベクトルの長さは固定としてもよい
し、黒領域の輪郭の周囲長に応じて変更するようにして
もよい。また、曲率の演算を複数回行うと共に、各回に
おいて長さを段階的に変更するようにしてもよい。
【0050】次のステップ176では、上記で演算され
た黒領域の輪郭の曲率に基づいて、人物の頭部の輪郭を
表す形状パターン(請求項6に記載の部分形状パター
ン、但しこの場合の抽出対象図形は人物を表す図形であ
る)として、輪郭に、人物の頭部と顔との境界に相当す
ると推定される凹部、及び人物の頭頂部に相当すると推
定される凸部を備えた黒領域を抽出する。この凹部及び
凸部は、トレース方向と先に求めたθの向き(符号の正
負)に基づいて判断することができる。すなわち、θの
符号が反転している箇所が凹部と凸部との境界であり、
時計回りにトレースしたときにθの符号が正であれば凹
部、負であれば凸部であると判断できる。これにより、
一例として図8(D)に示すように、黒領域の輪郭にお
ける凹部及び凸部を抽出できる。
【0051】ステップ178では上記で抽出した凹部及
び凸部に対し、各々の特徴量を演算する。本実施形態で
は凹部及び凸部の特徴量として、以下のように演算した
円曲度を用いる。すなわち、図9(A)に示すように、
凹部又は凸部を構成する曲線の長さをL、凹部又は凸部
の両端点Q1、Q2間の距離をM、両端点Q1、Q2を
結ぶ直線に対する凹部又は凸部の高さをhとし、円曲度
としてL÷M及びh÷Mを演算する。また、凹部及び凸
部の開いた方向へ向かうベクトルとして、方向ベクトル
Vを求める。
【0052】ステップ180では上記で演算した特徴量
を用いて、黒領域を人物の頭部(頭髪部)と判断できる
か、すなわち人物の頭部である確度が高いか否か判定す
る。この判定は、黒領域の輪郭から各々所定範囲内の円
曲度をもつ凹部及び凸部が各々抽出され、黒領域の輪郭
の周囲長に対する凹部及び凸部の長さの比率が各々所定
範囲内にあり、更に位置及び方向より人物の頭部として
整合性評価が高い場合に肯定される。この整合性評価
は、一例として次のように行うことができる。まず凹
部、凸部の単位での整合性を以下の手順で評価する。
【0053】 凹部又は凸部の曲線上の任意の3点
(例えば両端点と曲線の中央の点、但し同一直線上にな
い3点)を選択し、選択した3点を各々通る円を仮定
し、該円の中心点を求める。
【0054】 凹部又は凸部の曲線を構成する全画素
と、前記円の中心点と、の距離を各々求め、距離のばら
つきが所定値以下の曲線を整合性があると評価する。な
お、ばらつきが所定値よりも大きい場合には評価対象か
ら除外するか、曲率が大きくなっている部分で前記曲線
を更に分割して再度処理を行う。
【0055】次に凹部と凸部とを含めての整合性を以下
のように評価する。 凹部及び凸部の各曲線毎に求めた前記円の中心点の
重心を用い、総合的な中心点及び総合的な中心エリア
(各曲線の長さの平均に応じて定めた半径の円形のエリ
ア、図9(B)に破線で示すエリア)を設定する。そし
て各曲線毎に求めた前記中心点が総合的な中心エリア内
に収まっているか、又は各曲線の中心軸(方向ベクトル
V又はその延長線)が前記中心エリア内に収束している
場合に、人物の頭部としての整合性が高いと評価する。
【0056】また、上記の評価に代えて、先のと同
様にして、凹部及び凸部の曲線を構成する全画素と、前
記円の中心点と、の距離のばらつきが各々所定値以下の
場合に、人物の頭部としての整合性が高いと評価する。
【0057】そして、ステップ180の判定が肯定され
た場合には、人物の頭髪部と顔との境界部分では、頭髪
部が凹の形状となっている人物が殆どであることから、
黒領域の輪郭の凹部の大きさ、及びその中心位置を基準
とし、凹部に内接する楕円形状の領域を顔候補領域(人
物の顔に相当すると推定される領域、請求項6に記載の
抽出対象図形の特定部分(人物の顔)が存在すると推定
される候補領域)として設定する。ステップ184で
は、上記で設定した顔候補領域に対し符号が正の重み係
数を付与する。この重み係数は、先に説明した黒領域に
対する人物の頭部としての評価結果に応じて、評価が高
くなるに従って重みが重くなるように値を設定すること
ができる。
【0058】ステップ184を実行した後はステップ1
86に移行する。また、ステップ180の判定が否定さ
れた場合には、何ら処理を行うことなくステップ186
へ移行する。ステップ186では、2値化によって抽出
された全ての黒領域について上記処理を行ったか否か判
定する。ステップ186の判定が否定された場合にはス
テップ172に戻り、ステップ172〜186を繰り返
す。ステップ186の判定が肯定されると頭部抽出によ
る顔候補領域設定処理を終了し、図2のフローチャート
のステップ106に移行する。
【0059】ステップ106では顔輪郭による顔候補領
域設定処理を行う。この処理について図4のフローチャ
ートを参照して説明する。ステップ189では、図2の
フローチャートのステップ102において2値化により
原画像を分割することによって得られた複数の黒領域及
び白領域の各々に対し、先に説明した図3のフローチャ
ートのステップ174、176と同様にして、各々の領
域の輪郭をトレースし、輪郭の曲率を演算して凹部及び
凸部を抽出する。これにより、一例として図10(A)
に示す原画像について、図10(B)に示すような凹部
及び凸部が抽出される。
【0060】また凹部及び凸部を抽出した後に、凹部又
は凸部として抽出した曲線のうち長さの長い曲線に優先
的に着目し、曲率(角度θ)が所定範囲内に収まるよう
に、或いは円曲度が所定値以下となるように、或いは曲
線の法線方向の角度の大まかな分類により、前記曲線を
更に分割するようにしてもよい。例えば図10(B)に
おいて曲線と曲線とが連続した曲線として抽出され
た場合、これらの円曲度が大であることから2本の曲線
に分割する。図10(B)では曲線も分割の対象とな
る。なお、以下では上記のようにして抽出された各領域
の輪郭を分割して得られた曲線を総称して「ライン」と
いう。
【0061】ステップ190では、人物の顔の輪郭を表
す形状パターン(請求項6に記載の部分形状パターン)
として、人物の顔の側部に対応すると推定されるライン
の対を抽出する。具体的には、上記で抽出されたライン
のうち、互いの方向ベクトルVが向きあっており、互い
の方向ベクトルV(又はその延長線)の交差角度の大き
さが所定値以内であり、かつ長さ及び円曲度の類似度が
所定値以上のラインの対を、顔輪郭の候補となり得るラ
インの対として全て抽出する。例えば、図10(B)に
示す〜のラインが抽出された場合には、顔輪郭の候
補となり得るライン対として、ラインとラインの
対、及びラインとラインの対が抽出される。なお、
V2、V4、V5、V7は各ラインの方向ベクトルであ
る。
【0062】次のステップ192では、上記で抽出した
ライン対の中から特定のライン対を取り出す。ステップ
194では図10(D)に示すようにライン対の間に線
対称軸を設定し、次のステップ196でライン対の線対
称性類似度を判定する。この線対称性類似度の判定は、
まず図10(D)に示すように、線対称軸に平行な方向
に沿った両ラインの長さをv、線対称軸に直交する方向
に沿った両ラインの間隔をhとし、縦横比v/hが人物
の顔の縦横比に対応する所定範囲内の値であるか判定す
る。次に図11(A)に示すように、各ラインにマッチ
ング用拡張エリアを設定し(ラインを中心に膨張させる
処理等)、ライン対の一方に対し、線対称軸に関して対
称な曲線エリアパターンを求め(図ではラインと対称
なライン’)、求めた曲線エリアパターンと他方のラ
イン拡張エリアパターンとの類似度を判定する。
【0063】類似度の判定方法としては、例えば、マッ
チングを行うエリアパターン同士の対応する位置に存在
する画素データ間の差分絶対値又は差分2乗値の累積値
を演算し、この累積値が小であるほどエリア間類似度を
大と判定することができる。また各画素のデータとして
は、画像データそのもの、2値化データ、画像データを
微分することにより得られたデータ等を用いることがで
きる。
【0064】ステップ198では、前記ライン対を人物
の顔の両側部に対応するラインであると仮定したとき
に、頭部との境界に対応する位置に、方向ベクトルが垂
直に近いラインが存在しているか探索する。例えば先に
説明したラインとラインの対に対しては、頭部との
境界に対応する位置として図11(B)に示す範囲52
Aを探索し、この範囲52A内に存在する方向ベクトル
が垂直に近いラインとしてラインが抽出されることに
なる。また、ラインとの対に対しては、頭部との境
界に対応する位置として図11(B)に示す範囲52B
を探索するので、頭部との境界に対応するラインは抽出
されない。
【0065】次のステップ200では前述の線対称性類
似度の判定結果に基づいて、ステップ192で取り出し
たライン対を顔輪郭に対応するライン対と判断できるか
否か判定する。ステップ200の判定が肯定された場合
には、ライン対を人物の顔の両側部に対応するラインで
あるとみなし、図11(C)にも示すように、ライン対
によって挟まれた領域に、ラインの長さv、両ラインの
間隔hに応じた大きさの楕円形状の顔候補領域(請求項
6に記載の抽出対象図形の特定部分が存在すると推定さ
れる候補領域)を設定する。
【0066】ステップ202では上記で設定した顔候補
領域に対し符号が正の重み係数を付与する。この重み係
数は、線対称性類似度が高くなるに従って値が高くな
り、頭部との境界に対応するラインが抽出された場合に
値が高くなるように設定することができる。ステップ2
02の処理を実行するとステップ206に移行する。ま
た、ステップ200の判定が否定された場合には、何ら
処理を行うことなくステップ206に移行する。
【0067】ステップ206では、ステップ190で抽
出した全てのライン対に対して上記処理を行ったか否か
判定する。ステップ206の判定が否定された場合には
ステップ192に戻り、ステップ192〜206を繰り
返す。ステップ206の判定が肯定されると、顔輪郭に
よる顔候補領域設定処理を終了し、図2のフローチャー
トのステップ108に移行する。
【0068】ステップ108では顔内部構造による顔候
補領域設定処理を行う。この処理について図5のフロー
チャートを参照して説明する。なお、本実施形態では、
人物の顔の内部構造を表す形状パターン(請求項6に記
載の部分形状パターン)として、顔の眼部対に対応する
と推定される黒領域の対を抽出する。すなわち、ステッ
プ210では先に説明した2値化によって得られた黒領
域のうち、眼部対候補となり得る黒領域対を抽出する。
この黒領域対の抽出は、まず各黒領域の中から、図12
(A)に示すように、長手方向(長軸方向)と幅方向
(短軸方向)の寸法比(長軸短軸比)が所定範囲内の楕
円形状の黒領域を複数探索する。次に探索した黒領域の
各々の1次慣性モーメントに基づいて長軸方向の角度を
求め、長軸方向の角度の差異が所定範囲内の黒領域の対
を、眼部対の候補となり得る黒領域対として抽出する。
【0069】ステップ212では上記で抽出した黒領域
対の中から特定の黒領域対を取り出し、次のステップ2
14では、図12(B)に示すように、双方の黒領域の
重心を結ぶ線に垂直な線対称軸を設定し、各黒領域を中
心にマッチング用拡張エリアを設定し、ステップ216
で黒領域対の線対称性類似度を判定する。次のステップ
218では、上記で判定した黒領域対の線対称性類似度
の判定結果に基づいて、ステップ212で取り出した黒
領域対を眼部対と判断できるか否か判定する。
【0070】ステップ218の判定が肯定された場合に
はステップ220へ移行し、黒領域の位置、各々の大き
さ及び線対称軸の方向に基づいて、図12(C)に示す
ように楕円形状の顔候補領域(請求項6に記載の抽出対
象図形の特定部分が存在すると推定される候補領域)を
設定する。次のステップ222では、上記で設定した顔
候補領域に対し符号が正の重み係数を付与する。この重
み係数は、線対称性類似度が高くなるに従って値が大き
くなるように設定することができる。ステップ222の
処理を実行するとステップ224に移行する。またステ
ップ218の判定が否定された場合には、何ら処理を行
うことなくステップ224に移行する。
【0071】ステップ224では、ステップ210で抽
出した全ての黒領域対に対して上記処理を行ったか否か
判定する。ステップ224の判定が否定された場合には
ステップ212に戻り、ステップ212〜224を繰り
返す。ステップ224の判定が肯定されると、顔内部構
造による顔候補領域設定処理を終了し、図2のフローチ
ャートのステップ110へ移行する。
【0072】ステップ110では胴体輪郭による顔候補
領域設定処理を行う。この処理について図6のフローチ
ャートを参照して説明する。なお、本実施形態では、胴
体の輪郭を表す形状パターン(請求項6に記載の部分形
状パターン)として、人物の首から肩、肩から腕部分又
は胴体下部にかけて連続する輪郭に相当すると推定され
るラインの対を抽出する。すなわち、ステップ230で
は先に説明した顔輪郭による顔候補領域設定処理によっ
て抽出されたラインから、胴体輪郭の片側候補となり得
るラインの組を抽出する。具体的には、双方のラインの
端点の距離が近く、かつ双方のラインの交差する角度が
所定範囲内のラインの対を、胴体輪郭の片側候補となり
得るラインの組として抽出することができる。例えば図
13(A)に示すようなラインが抽出されていた場合、
図13(B)に示すように、交差する角度が各々所定範
囲内(θ1及びθ2)のラインとの組、ラインと
の組が各々抽出されることになる。
【0073】次のステップ232では、上記で抽出され
たラインの組の各々に対して双方のラインを延長して連
結し、胴体輪郭の片側候補を生成する。更にステップ2
34では、上記で生成した胴体輪郭の片側候補に対し、
胴体輪郭の候補となり得る全ての胴体輪郭の片側候補の
対(例えば双方の胴体輪郭の片側候補の凹部が互いに向
き合っている対)を抽出する。
【0074】ステップ236では上記で抽出した胴体輪
郭の片側候補の対の中から特定の対を取り出し、ステッ
プ238では取り出した胴体輪郭の片側候補の対に対
し、図13(B)に示すように線対称軸を設定し、次の
ステップ240で胴体輪郭の片側候補の対の線対称性類
似度を判定する。また、人物の首から肩にかけての輪郭
に相当すると推定されるライン(例えば図13(B)の
ライン、)について、線対称軸となす角度(例えば
図13(B)のラインの場合のψ1)が所定範囲内か
否か判定する。ステップ242では上記で判定した線対
称性類似度に基づいて、胴体輪郭の片側候補の対を胴体
輪郭と判断できるか否か判定する。
【0075】ステップ242の判定が肯定された場合に
は、ステップ244で胴体輪郭候補を構成する双方の片
側候補の位置、大きさ、間隔及び線対称軸の方向に基づ
いて、図13(C)に示すように楕円形状の顔候補領域
(請求項6に記載の抽出対象図形の特定部分が存在する
と推定される候補領域)を設定する。また、ステップ2
50では上記で設定した顔候補領域に符号が正の重み係
数を付与する。この重み係数は、ステップ240で判定
した線対称性類似度が高くなるに従って値が大きくなる
ように設定することができる。ステップ240の処理が
終了するとステップ248へ移行する。またステップ2
42の判定が否定された場合には、何ら処理を行うこと
なくステップ248に移行する。
【0076】ステップ248では、ステップ234で抽
出した全ての胴体輪郭の片側候補の対に対して上記処理
を行ったか否か判定する。ステップ248の判定が否定
された場合にはステップ236に戻り、ステップ236
〜248を繰り返す。ステップ248の判定が肯定され
ると胴体輪郭による顔候補領域設定処理を終了し、図2
のフローチャートのステップ112へ移行する。
【0077】図2のフローチャートのステップ112で
は非人物領域判定処理を行う。この非人物領域判定処理
について図7のフローチャートを参照して説明する。ス
テップ130では、図2のフローチャートのステップ1
02で分割された各領域に対し、輪郭の直線部分を各々
検出し、ステップ132では、輪郭に占める直線部分の
比率を各領域毎に演算する。ステップ134では前記比
率が所定値以上の領域が有るか否か判定する。輪郭に占
める直線部分の比率が所定値以上の領域は、人工物を表
している領域である確率が高く、人物に相当する領域で
ある確率は低いと判断できる。このため、ステップ13
4の判定が肯定された場合には、ステップ136で直線
部分の比率が所定値以上の領域に対して符号が負の重み
係数を付与し、ステップ138へ移行する。
【0078】ステップ138では、各領域に対し、各領
域における画像左右方向中心部付近に、画像の上下方向
に沿って延びる線対称軸を設定し、ステップ140では
上記で設定した線対称軸に関する線対称度を各領域毎に
演算する。ステップ142では線対称度が所定値以下の
領域が有るか否か判定する。一般に人体は、人体の左右
を分割する仮想線に関して略線対称であり、線対称度が
所定値以下の領域は人物に相当する領域である確率は低
いと判断できる。このため、ステップ142の判定が肯
定された場合には、ステップ144で線対称度が所定値
以下の領域に対して符号が負の重み係数を付与し、ステ
ップ146へ移行する。
【0079】ステップ146では輪郭に占める画像外縁
との接触率を各領域毎に演算し、ステップ148では接
触率が所定値以上の領域が有るか否か判定する。前記接
触率が所定値以上の領域は画像の周縁部に位置している
と判断できるが、一般に人物は画像の略中央部に位置し
ている確率が高いので、接触率が所定値以上の領域が人
物に相当する領域である確率は低いと判断できる。この
ため、ステップ148の判定が肯定された場合には、ス
テップ150で画像外縁との接触率が所定値以上の領域
に対して符号が負の重み係数を付与し、ステップ152
へ移行する。
【0080】ステップ152では各領域の内部の濃度の
コントラスト(最大濃度値と最小濃度値との差)を演算
し、ステップ154で濃度コントラストが所定値以下の
領域が有るか否か判定する。領域内の濃度のコントラス
トが所定値以下の場合には、表面が平滑、或いは凹凸の
少ない物体を表している領域である可能性が高く、人物
に相当する領域である確率は低い。このため、ステップ
154の判定が肯定された場合には、ステップ156で
内部の濃度コントラストが所定値以下の領域に対して符
号が負の重み係数を付与し、ステップ158へ移行す
る。
【0081】ステップ158では、各領域の各画素毎の
濃度値を各々異なる複数の方向(例えば画像の左右方
向、上下方向、及び左右方向に対して±45°傾斜した方
向)に沿って微分し、ステップ160で複数の方向に沿
った微分値の少なくとも何れかが規則的に変化している
領域が有るか否か判定する。上記判定は、濃度が所定の
パターンで変化している領域や、濃度が所定の変化パタ
ーンを繰り返している領域に対して肯定される。このよ
うな領域は人物に相当する領域である確率は低いと判断
できるので、ステップ160の判定が肯定された場合に
は、ステップ162で微分値が規則的に変化している領
域に対し符号が負の重み係数を付与する。以上で非人物
領域判定処理を終了し、図2のフローチャートのステッ
プ118へ移行する。
【0082】ステップ118では顔領域の総合判定を行
う。すなわち、ステップ104〜110で各々顔候補領
域として設定された範囲、各顔候補領域に対して付与さ
れた正の重み係数を用い、更にステップ112で負の重
み係数が付与された領域があれば、該領域の範囲と付与
された負の重み係数に基づいて、画像中の各部分の総合
的な重み係数を演算する。詳しくは、画像中に複数の処
理で重み係数が付与された部分があれば、該部分範囲及
び総合的な重み係数(各処理で付与された重み係数を加
算或いは乗算することにより求める、この総合的な重み
係数は請求項6に記載の整合度に対応している)を求
め、画像を総合的な重み係数が同一の領域毎に分割す
る。そして、総合的な重み係数が最も高い領域を、人物
の顔領域に相当する領域である確度が最も高い領域とし
て判定する。
【0083】次のステップ120では、ステップ102
〜118の処理を所定回実行したか否か判定する。ステ
ップ120の判定が否定された場合には、ステップ12
2において、ステップ102の画像分割の粗密度を変更
するために各種制御パラメータを更新し、或いはステッ
プ102における2値化用のしきい値を更新し、ステッ
プ102以降の処理を再度実行する。ステップ102〜
118を所定回実行するとステップ120の判定が肯定
され、ステップ124へ移行する。
【0084】なお、上述したように画像分割の粗密度を
変更して処理を繰り返す理由は、原画像中に存在する人
物の顔に相当する領域の面積の大小(原画像中に存在す
る1人の人物に相当する領域の面積の大小)により、原
画像を複数の領域に分割する際の各領域の適正な大きさ
が異なるためである。
【0085】すなわち、原画像中に存在する人物の顔に
相当する領域の面積が大きい場合には、原画像を密に分
割(各領域の大きさを小さく)すると、本来の顔に相当
する領域が細かく分割され過ぎ、人物の各部に対応する
領域も細かく分割され過ぎるので、人物の各部に対応す
る領域が全体的に適正に分離されないが、原画像を粗く
分割(各領域の大きさを大きく)すると、前記顔に相当
する領域に対して一致度の高い分割領域を得ることがで
き、人物の各部に対応する領域を適正に分離することが
できる。
【0086】一方、原画像中に存在する人物の顔に相当
する領域の面積が小さい場合には、原画像を粗く分割す
ると、本来の顔に相当する領域が背景に相当する領域に
紛れてしまい、人物の顔や各部に相当する領域を各々適
正に分離することができないが、原画像を密に分割する
と、人物の顔や各部に相当する領域を各々適正に分離で
きる。従って、画像分割の粗密度を段階的に変更しなが
ら顔領域の抽出処理を複数回繰り返すことにより、原画
像中に存在する人物の顔に相当する領域の大きさに拘わ
らず、人物の顔に相当する領域を高い確度で抽出するこ
とができる。
【0087】なお、画像分割制御パラメータの変更は、
例えば原画像の分割を、1次元又は2次元のヒストグラ
ムを用いたクラスタリングにより行う場合は、ヒストグ
ラム作成時にデータを量子化する際のしきい値のステッ
プ幅を粗く(大きく)すると該ヒストグラムを用いて原
画像を分割した結果も粗く(分割された領域の大きさが
大きく)なり、前記しきい値のステップ幅を細かく(小
さく)すると該ヒストグラムを用いて原画像を分割した
結果も細かく(分割された領域の大きさが小さく)なる
ことから、画像分割制御パラメータとして量子化する際
のしきい値のステップ幅を用い、該しきい値のステップ
幅を変更することで画像分割の粗密度を変更することが
できる。
【0088】また、原画像の分割を、原画像を構成する
各画素のうち隣接する画素との濃度差或いは色差の大き
な画素を領域の境界とすることにより行う場合には、濃
度差或いは色差が大きいと判定するためのしきい値を大
きくすると原画像を分割した結果が粗く(分割領域の大
きさが大きく)なり、前記しきい値を小さくすると原画
像を分割した結果が細かく(分割領域の大きさが小さ
く)なることから、画像分割制御パラメータとして前記
しきい値を用いることができる。
【0089】また、原画像の分割では、その分割のしか
たに拘わらず、原画像の解像度を粗くすれば原画像を分
割した結果が粗くなり、解像度を細かくすれば原画像を
分割した結果が粗くなることから、画像分割制御パラメ
ータとして画像解像度を用いてもよい。画像解像度の変
更の一例として、画像解像度を低下させる場合には、各
々m×n個の画素から成る画素のブロック毎に、各ブロ
ックを構成する全画素の各々の濃度又は色の平均を各ブ
ロックの代表値とすることができる。なお、上記のよう
に画像解像度を変更することにより画像分割の粗密度を
変更する方式では、特に画像解像度を低下させると処理
対象データの数が少なくなるため、処理時間を短縮でき
るというメリットもある。また、画像解像度の変更に代
えて平滑化処理を行っても同様の効果が得られる。平滑
化処理では、平滑化の程度を大きくするほど周辺画素と
の濃度、色の平均化が進み、解像度を低下させた場合と
同様に原画像を分割した結果が粗くなる。
【0090】ところで、ステップ124では所定回の処
理で各々判定された顔領域及びそれらに各々付与されて
いる重み係数に基づいて、最終的に人物の顔領域に相当
する領域である確度が最も高い領域を先のステップ11
8と同様にして最終的に判定する。そして次のステップ
126で判定結果として、最終的に判定した領域のR、
G、Bの測光データを露光量演算部44へ出力し、顔領
域抽出処理を終了する。
【0091】上述した顔領域抽出処理では、人物の顔に
相当すると推定される顔候補領域を、該領域の濃度や色
に基づいて判断するものではない。従って、ネガフィル
ム12のフィルム種、光源の種類や逆光か否かの撮影条
件等に応じて前記領域の色バランスが変化したとして
も、顔領域抽出処理の結果がこの影響を受けて変化する
ことはない。また、上述した顔領域抽出処理は原画像が
モノクロ画像であっても適用可能である。更に、上述し
た顔領域抽出処理のうち、人物の各部に特有の形状パタ
ーンに基づいて顔候補領域を設定する処理(図2のフロ
ーチャートのステップ104〜110)は、基本的には
各々凹部及び凸部の抽出と、線対称性類似度の判定と、
で構成される。従って、これを利用してソフトウエア、
ハードウエアの共通化を図れば、ソフトウエアの簡素
化、ハードウエア構成の簡素化を実現することも可能と
なる。
【0092】一方、露光量演算部44では、顔領域抽出
部40で上記のようにして抽出されたR、G、Bの測光
データと、平均濃度演算部42で演算された1コマの画
面平均濃度Di (i=R、G、Bの何れか)と、を用い
て以下の式に従って適正露光量Ei を演算し、ドライバ
46に出力する。ドライバ46は適正露光量Ei に基づ
いて、適正露光量に対応する位置に色補正フィルタ18
を移動させる。
【0093】 logEi =LMi ・CSi ・(DNi −Di )+PBi +LBi +MBi +NBi +K1 +K2 …(1) 但し、各記号の意味は次の通りである。
【0094】LM:倍率スロープ係数。ネガフィルムの
種類とプリントサイズとで定まる引き伸ばし倍率に応じ
て予め設定されている。
【0095】CS:カラースロープ係数。ネガフィルム
の種類毎に用意されており、アンダ露光用とオーバ露光
用とがある。プリントすべき画像コマの平均濃度が標準
ネガ濃度値に対してアンダかオーバかを判定してアンダ
露光用とオーバ露光用の何れかを選択する。
【0096】DN:標準ネガ濃度値。 D :プリントすべき画像コマの濃度値。
【0097】PB:標準カラーペーパに対する補正バラ
ンス値。カラーペーパの種類に応じて決定される。
【0098】LB:標準焼付レンズに対する補正バラン
ス値。焼付けに用いるレンズの種類に応じて決定され
る。
【0099】MB:光源光量の変動やペーパ現像性能の
変化に対する補正値(マスタバランス値)。
【0100】NB:ネガフィルムの特性によって定まる
ネガバランス(カラーバランス)値。
【0101】K2 :カラー補正量。 K1 :以下の式で表される濃度補正量。
【0102】
【数1】
【0103】ここで、Ka、Kbは定数であり、FDは
顔領域平均濃度である。また、上記(8)式の濃度補正
量K1 をフィルム検定装置によって求められた補正値と
し、カラー補正量K2 を次のように顔領域平均濃度を用
いて表してもよい。
【0104】
【数2】
【0105】但し、Kcは定数である。更に、上記
(1)式の濃度補正量K1 、カラー補正量K2 をフィル
ム検定装置によって求められた補正量とし、(1)式の
プリントコマの平均濃度Di を顔領域の平均濃度FDi
に置き換えて露光量を求めてもよい。
【0106】また、顔領域抽出処理において顔領域と判
定された領域の各画素毎の濃度(又は色)に対し前記重
み係数に応じて重み付けを行って加重平均値を求め、該
加重平均値を用いて露光量Ei を演算することにより、
顔領域と判定された領域に対して付与された重み係数を
露光量Ei に反映させるようにしてもよい。
【0107】なお、上記では原画像の記録媒体としてネ
ガフィルム12を例に説明したが、ポジフィルム等の他
のフィルムや、紙等の各種記録媒体に記録された画像を
原画像として用いることが可能である。また、複写材料
としてカラーペーパを例に説明したが、紙等の他の材料
を適用してもよい。
【0108】また、上記では頭部抽出による顔候補領域
設定処理において、人物の頭部に特有の形状パターンと
して、人物の頭頂部に対応する凸部及び人物の頭部と顔
との境界に対応する凹部を用いていたが、これに限定さ
れるものではない。例えば、頭髪のない頭部、頭髪の濃
度の低い頭部を抽出するためには、2値化以外の方法に
よる領域分割、或いは画像のエッジの検出を行い、頭部
に特有の形状パターンとして凸部のみを用いて頭部を抽
出するようにしてもよい。
【0109】更に、上記では画像を複数の領域に分割す
る方法の一例として2値化を例に説明したが、これに限
定されるものではなく、特開平4-346332号公報に記載さ
れているようにヒストグラムを用いて分割してもよい。
また、画像の各画素毎の濃度値を各々異なる複数の方向
(例えば図14(A)に示すように、画像の左右方向
(0°)、上下方向(90°)、及び左右方向に対して±
45°傾斜した方向)に沿って微分することにより画像の
エッジを検出し、上記実施形態で説明したラインに代え
て、このエッジに対して周知の細線化処理を行って得ら
れたエッジの中心線を用いて処理を行うようにしてもよ
い。
【0110】なお、上記各方向に沿った微分は、図14
(B)に示す4種類の微分フィルタを各々用いることで
実現でき、画像のエッジの検出は、微分フィルタ出力の
大きさが所定のしきい値よりも大きいときに、着目画素
をエッジであるとみなすことができる。また、エッジ判
定用のしきい値を段階的に変更しながらエッジ抽出処理
を繰り返し実施するようにしてもよい。
【0111】また、上記では顔の内部構造を表す形状パ
ターンとして眼部対を用いた場合を例に説明したが、こ
れに限定されるものではなく、鼻、口、眉毛の対等を用
いたり、これらを組み合わせて総合的に顔候補領域を設
定するようにしてもよい。
【0112】更に、上記では胴体輪郭を表す形状パター
ンとして、人物の首から肩、肩から腕部分又は胴体下部
にかけて連続する輪郭に相当するラインの対を抽出する
例を説明したが、これに限定されるものではなく、人物
の首から肩にかけての輪郭に相当するラインの対、及び
人物の肩から腕部分にかけての輪郭に相当するラインの
対を各々別個に検出するようにしてもよい。
【0113】また、上記では人物の各部に特有の形状パ
ターンに基づく顔候補領域の設定処理及び非人物領域判
定処理(図2のフローチャートのステップ104〜11
2)を順次実行するようにしていたが、これらの処理
は、各々他の処理による処理結果の影響を受けないの
で、上記各処理を行う処理部を別個に設け、前処理とし
て複数領域への画像の分割又は画像のエッジの検出と、
凹部、凸部の抽出と、を行った後に、各処理部で並列に
処理するようにしてもよい。これにより、処理時間を大
幅に短縮することができる。
【0114】〔第2実施形態〕次に本発明の第2実施形
態について説明する。なお、本第2実施形態は第1実施
形態と同一の構成であるので、各部分に同一の符号を付
して構成の説明を省略し、以下では第2実施形態の作用
について説明する。
【0115】本第2実施形態では、画像上での人物を表
す図形(請求項6の抽出対象図形に相当)の状態を複数
の状態に予め分類している。なお、人物を表す図形の状
態としては、例えば画像上での前記図形の大きさ(又は
面積)、画像上での前記図形の向き(画像上において前
記図形が表す人物の上下方向が何れの方向を向いている
がか)、撮影時の視軸に対する被写体としての人物の角
度(前記図形が表す人物が該人物の左右方向に沿って何
れの方向を向いているか:この方向に応じて人物の顔の
向きが正面、斜め、横と変化する)等が挙げられる。
【0116】そして、例えば人物を表す図形の状態を、
画像上での前記図形の大きさL又は面積Sに応じて分類
する場合には、大きさLが大(L1 〜L2 )又は中(L
2 〜L3 )又は小(L3 〜L4 )で分類するか、画像上
での面積Sが大(S1 〜S2)又は中(S2 〜S3 )又
は小(S3 〜S4 )で分類することができる。また、画
像上での前記図形の向きに応じて分類する場合は、例え
ば前記向きを90°単位又は45°単位で分類することがで
きる。また、前記図形が表す人物の撮影時の視軸に対す
る角度に応じて分類する場合は、前記角度が正面か斜め
か横かで分類することができる。更に、上記の人物を表
す図形の大きさ、向き、前記図形が表す人物の撮影時の
視軸に対する角度を組み合わせて分類するようにしても
よい。これにより、画像上での人物を表す図形の状態
が、複数の状態に分類されることになる。
【0117】また本第2実施形態では、人物の頭部の輪
郭、顔の輪郭、顔の内部構造、胴体の輪郭等の人物を表
す図形を構成する形状パターン(請求項6の部分形状パ
ターンに対応)の各々に対し、各形状パターンを探索す
るための探索条件を規定する探索パラメータを、前記分
類した複数の状態に応じて複数種類定めている。
【0118】例として、画像上での人物を表す図形の状
態を前記図形の大きさ又は面積に応じて分類した場合
に、前記大きさ又は面積に応じて変更する探索パラメー
タとしては、画像解像度(又は画像分割の粗密度)、頭
部輪郭を表す形状パターンを探索する際に黒領域の輪郭
の曲率を演算するためのベクトルの長さ(図8(C)に
示したベクトルP1P0、ベクトルP0P2の長さ)、
頭部輪郭や顔輪郭や胴体輪郭として探索すべき輪郭の長
さの許容範囲、線対称性類似度の演算時に演算対象とす
る候補対間の距離の許容範囲等が挙げられる。
【0119】画像解像度については、先にも述べたよう
に、人物を表す図形の大きさ又は面積が小さい場合には
解像度を高くし、前記大きさ又は面積が大きい場合には
解像度を低く(粗く)すればよい。またベクトルの長さ
については、前記大きさ又は面積が小さい場合には短く
し、前記大きさ又は面積が大きい場合には長くすればよ
く、また輪郭長の許容範囲及び線対称性類似度の演算対
象とする候補対間距離の許容範囲についても、前記大き
さ又は面積が小さい場合には短くし、前記大きさ又は面
積が大きい場合には長くすればよい。
【0120】また、画像上での人物を表す図形の状態を
前記図形の向きに応じて分類した場合に、前記向きに応
じて変更する探索パラメータとしては、顔輪郭を表す形
状パターンの探索の際の線対象軸の方向(図10(D)
参照)、顔内部構造としての眼部対を表す形状パターン
の探索の際の線対象軸の方向(図12(B)参照)、胴
体輪郭を表す形状パターンの探索の際の線対象軸の方向
(図13(B)参照)等が挙げられる。前記向きに応じ
て上記パラメータを変更することにより、線対称性類似
度の演算対象としての候補対の組み合わせ数が絞り込ま
れる。
【0121】また、画像上での人物を表す図形の状態を
前記図形が表す人物の撮影時の視軸に対する角度に応じ
て分類した場合に、前記角度に応じて変更する探索パラ
メータとしては、眼部対を表す形状パターンの探索の際
の眼部候補領域間の距離(図12(B)参照)等が挙げ
られる。
【0122】次に図15のフローチャートを参照し、本
第2実施形態に係る顔領域抽出処理について、図2のフ
ローチャートと異なる部分のみ説明する。
【0123】本第2実施形態では、ステップ100で画
像データの取込みを行った後に、ステップ101では前
記分類した複数の状態のうち所定の状態に対応する探索
パラメータを取り込む。なお、この所定の状態は、分類
した複数の状態のうち、ネガフィルム12に記録された
画像における出現頻度の最も高い状態(例えば、人物を
表す図形の大きさ:中、前記図形の向き:人物の上下方
向が画像の長手方向と一致する方向、前記図形が表す撮
影時の視軸に対する人物の角度:正面)とされている。
【0124】次のステップ102〜112では、ステッ
プ101で取り込んだ探索パラメータに基づいて、第1
実施形態と同様にして顔候補領域の設定を行う。前述の
ように、このステップ102〜112の処理で用いる探
索パラメータは、先に分類した複数の状態のうち所定の
状態に対応する探索パラメータであるので、探索対象と
しての形状パターンの範囲が絞り込まれており、第1実
施形態と比較して短時間で処理が終了する。ステップ1
18では、第1実施形態と同様にして人物の顔領域に相
当する領域である確度が高い領域の判定を行う。なお、
ステップ118の処理は、請求項6に記載の、各候補領
域毎に整合度を求め、抽出対象図形の特定部分としての
人物の顔が存在している確度が高い候補領域を判断する
ことに対応している。
【0125】次のステップ119では、上記処理によ
り、人物の顔に相当する領域である確度が非常に高い領
域が抽出されたか否か判定する。この判定は、ステップ
118の顔領域総合判定により演算された総合的な重み
係数(請求項6の整合度)が所定値以上の顔候補領域が
あったか否かに基づいて判断することができる。上記判
定が肯定された場合にはステップ124へ移行し、抽出
された人物の顔に相当する領域である確度が非常に高い
領域を顔領域と判定し、ステップ126で判定結果を出
力して処理を終了する。
【0126】一方、ステップ119の判定が否定された
場合にはステップ121へ移行し、各状態に対応する全
ての探索パラメータを用いて処理を行ったか否か判定す
る。判定が否定された場合にはステップ123へ移行
し、処理未実行でかつ出現頻度の高い状態に対応する探
索パラメータを取込み、ステップ102へ戻る。これに
より、新たに取り込んだ探索パラメータに従ってステッ
プ102以降の処理が繰り返される。
【0127】このように、出現頻度の高い状態に対応す
る探索パラメータを順に用いて処理を繰り返すので、ス
テップ121の判定が肯定される前にステップ191の
判定が肯定される、すなわち分類した各状態に対応する
全ての探索パラメータが用いられる前に人物の顔に相当
する領域である確度が非常に高い領域が抽出される可能
性が高く、顔領域抽出処理の平均処理時間が短縮され
る。そしてステップ119又はステップ121の判定が
肯定されると、第1実施形態と同様にステップ124で
顔領域総合判定を行い、ステップ126で判定結果を出
力して処理を終了する。
【0128】なお、上記では撮影時の視軸に対する人物
の角度に応じて変更する探索パラメータの一例として眼
部候補領域間の距離を用いていたが、予め設定した顔候
補領域に対し、眼部対に対応すると推定される領域を探
索し、人物の顔としての整合性を判断する場合には、前
記角度に応じて変更する探索パラメータとして、顔候補
領域内における眼部候補領域の位置又は線対称軸の位置
の偏倚度合い、眼部候補領域対間距離の顔候補領域の幅
に対する比率等を適用し、前記角度に応じて前記各探索
パラメータの許容範囲を変更するようにしてもよい。
【0129】また、上記では複数種類の探索パラメータ
を順に用いて処理を行っていたが、これに限定されるも
のではなく、顔領域抽出部40に、図15のフローチャ
ートにおけるステップ102〜118の処理を各々行う
処理部を複数設け(図16参照)、各処理部において、
各状態に対応する複数種類の探索パラメータのうちの何
れかを各々用いて処理を並列に行わせるようにしてもよ
い。図16の例では、人物を表す図形の状態が状態1〜
状態nのn個に分類され、これに応じてn個の処理部6
1 〜60n を設けており、図15のフローチャートに
おけるステップ124の顔領域総合判定及びステップ1
26の判定結果出力は顔領域総合判定部62で行われ
る。上記のように構成した場合、各処理部601 〜60
n による処理が非常に短い時間で完了するので、人物を
表す図形の画像上での状態に拘わらず、顔領域抽出処理
の処理時間を大幅に短縮することができる。
【0130】更に、上記では抽出対象図形の特定部分と
して人物の顔に相当する領域を抽出する例を説明した
が、本発明はこれに限定されるものではなく、抽出対象
図形全体(上記の例では人物に相当する領域全体)を抽
出するようにしてもよい。
【0131】また、上記では、抽出対象図形として人物
を表す図形を適用していたが、これに限定されるもので
はなく、例えば抽出対象図形として人工物を表す図形を
適用してもよい。写真フィルムに記録される画像中に存
在している人工物は、一般に形状等が未知であるが、人
工物を表す図形の部分形状は、非人物領域判定処理(図
7)でも説明したように、直線や一定曲率の円弧等で構
成されていることが多いことが経験的に知られている。
このため、これらを部分形状パターンとして用いれば、
抽出対象図形としての人工物を表す図形を抽出すること
ができる。そして、写真フィルムに記録された画像を複
写材料に焼付ける場合には、例えば人工物を表す図形が
存在している確度が高いと判断した領域の重みが小さく
なるようにして複写材料への露光量を決定することがで
きる。
【0132】また、本発明を適用して図形を抽出する対
象としての画像は、写真フィルムに記録された画像に限
定されるものではない。一例として、部品や製品等の大
量生産において、生産された部品や製品等が順に搬送さ
れている状況を撮像すると共に、前記搬送されている状
況を表す画像を撮像信号から所定のタイミングで抽出
し、抽出した画像から、抽出対象図形としての前記部品
や製品等を表す図形を抽出することも可能である。この
場合、部品や製品等の形状は予め判明しているので、部
分形状パターンは容易に定めることができる。また、本
発明により抽出した抽出対象図形が存在する領域は、例
えば生産した部品や製品等を自動的に検査するために用
いることができる。
【0133】以上本発明の実施形態について説明した
が、上記実施形態は特許請求の範囲に記載した技術的事
項以外に、以下に記載するような技術的事項の実施態様
を含んでいる。
【0134】(1)人物の頭部の輪郭を表す形状パター
ンを探索対象とする場合には、請求項3記載の発明によ
り分割された領域の輪郭、又は請求項4記載の発明によ
り求められたエッジの中心線より凹部と凸部を検出し、
検出した1つ以上の凹部又は凸部の各々の特徴量(円曲
度、位置、大きさ、方向)に基づいて、前記凹部又は凸
部が人物の頭部の輪郭に対応しているか否かを判断する
ことで、前記形状パターンを探索することを特徴とする
露光量決定方法。
【0135】(2)人物の顔の輪郭を表す形状パターン
を探索対象とする場合には、請求項3記載の発明により
分割された領域の輪郭、又は請求項4記載の発明により
求められたエッジの中心線より凹部と凸部を検出し、検
出した2つ以上の凹部又は凸部の各々の特徴量(円曲
度、位置、大きさ、方向)の関係に基づいて、線対称の
度合いにより前記2つ以上の凹部又は凸部が人物の顔の
輪郭に対応しているか否かを判断することで、前記形状
パターンを探索することを特徴とする露光量決定方法。
【0136】(3)人物の顔構造を表す形状パターンの
うち眼部対を表す形状パターンを探索対象とする場合に
は、請求項3記載の発明により分割された領域、又は請
求項4記載の発明により求められたエッジの中心線によ
り分割される領域のうち楕円形状の領域を抽出し、抽出
された複数の楕円領域の各々の特徴量(形状、濃度)を
用いたマッチング処理により所定値以上の類似度の楕円
領域の対を検出し、検出した楕円領域の対の線対称の度
合いにより前記楕円領域の対が人物の顔の眼部対に対応
しているか否かを判断することで、前記形状パターンを
探索することを特徴とする露光量決定方法。
【0137】(4)人物の胴体の輪郭を表す形状パター
ンを探索対象とする場合には、請求項3記載の発明によ
り分割された領域の輪郭、又は請求項4記載の発明によ
り求められたエッジの中心線より凹部と凸部を検出し、
検出した2つ以上の凹部又は凸部の各々の特徴量(円曲
度、位置、大きさ、方向)の関係に基づいて、人物の首
から肩にかけての輪郭、及び肩から腕部分又は胴体下部
にかけての輪郭に相当する凹部又は凸部の組を複数検出
し、更にその組同士の線対称の度合いにより人物の胴体
の輪郭に対応しているかを判断することで、前記形状パ
ターンを探索することを特徴とする露光量決定方法。
【0138】(5)原画像中の人物の顔に相当する確度
の低い領域として、請求項3記載の発明により分割され
た領域、又は請求項4記載の発明により求められたエッ
ジの中心線により分割される領域のうち、領域の輪郭に
含まれる直線部分の比率が所定値以上の領域、又は線対
称度が所定値以下の領域、又は凹凸数が所定値以上の領
域、又は画像外縁との接触率が所定値以上の領域、又は
内部の濃度のコントラストが所定値以下の領域、又は内
部の濃度が所定のパターンで変化している、或いは所定
の変化パターンを繰り返している領域を判定することを
特徴とする露光量決定方法。
【0139】
【発明の効果】以上説明したように請求項1記載の発明
は、原画像中に存在する人物の所定の部分に特有の形状
パターンを探索し、検出した形状パターンの大きさ、向
き及び検出した形状パターンとの位置関係に応じて人物
の顔に相当すると推定される領域を設定し、設定した領
域に重み係数を付与することを、人物の各部に特有の形
状パターンの各々を探索対象として各々行い、人物の顔
に相当すると推定される領域として設定した複数の領域
の各々の範囲、及び複数の領域に各々付与した重み係数
に基づいて原画像中の人物の顔に相当する確度が最も高
い領域を判断し、判断した領域の色又は濃度の少なくと
も一方に基づいて露光量を決定するので、原画像中の人
物の顔に相当する領域及びその周辺の領域の色の影響を
受けることなく人物の顔に相当する領域のみを抽出し、
該領域を適正に焼付けできるように露光量を決定でき
る、という優れた効果を有する。
【0140】請求項3記載の発明は、原画像を濃度又は
色が同一又は近似している複数の画素で構成される複数
の領域に分割し、該複数の領域の各々の輪郭を用いて形
状パターンを探索するので、人物の各部に特有の形状パ
ターンを効率良く検出できる、という効果を有する。
【0141】請求項4記載の発明は、原画像中に存在す
るエッジを検出し、検出したエッジの中心線を求め、求
めた中心線を用いて形状パターンを探索するので、人物
の各部に特有の形状パターンを効率良く検出できる、と
いう効果を有する。
【0142】請求項5記載の発明は、人物の顔に相当す
ると推定される領域に符号が正の重み係数を付与すると
共に、原画像中の人物の顔に相当する確度の低い領域を
判定し、判定した領域に符号が負の重み係数を付与する
ようにしたので、人物の顔に相当する確度が最も高い領
域として人物の顔に相当する領域が抽出される確率が更
に向上する、という効果を有する。
【0143】請求項6記載の発明は、抽出対象図形を構
成する特徴的な複数の部分形状に基づいて複数の部分形
状パターンを予め定めておき、部分形状パターンを探索
し、検出した部分形状パターンの大きさ、方向、及び抽
出対象図形における前記部分形状パターンが表す部分形
状の位置に応じて画像中の抽出対象図形の特定部分又は
全体が存在すると推定される候補領域を設定すること
を、複数の部分形状パターンの各々について行い、各候
補領域毎に求めた整合度に基づいて抽出対象図形の特定
部分又は全体が存在している確度が高い候補領域を判断
するようにしたので、画像中に存在する抽出対象図形
を、抽出対象図形が存在する領域、及びその周辺の領域
の色の影響を受けることなく適正に抽出することができ
る、という優れた効果を有する。
【0144】請求項7記載の発明は、複数の部分形状パ
ターンの各々に対し探索条件を規定するパラメータとし
て、画像上での抽出対象図形の状態に応じて複数種類の
パラメータを予め定めておき、部分形状パターンを探索
し、候補領域を設定することを複数の部分形状パターン
の各々について行い、抽出対象図形が存在している確度
が高い候補領域を整合度に基づいて判断して抽出する処
理を、複数の状態に対応する複数種類のパラメータの各
々を用いて行うか、又は、所定の状態に対応するパラメ
ータを用いて前記処理を行った結果、抽出対象図形が存
在している確度が高いと判断した候補領域が無かった場
合は、所定の状態と異なる状態に対応するパラメータを
用いて前記処理を行うことを繰り返し、抽出対象図形が
存在している確度が高いと判断した候補領域が有った場
合に前記処理を終了するようにしたので、上記効果に加
え、処理時間を短縮することができる、という効果を有
する。
【図面の簡単な説明】
【図1】本実施形態に係る写真焼付装置の概略構成図で
ある。
【図2】第1実施形態に係る顔領域抽出部で実行される
顔領域抽出処理のメインルーチンを説明するフローチャ
ートである。
【図3】頭部抽出による顔候補領域設定処理を説明する
フローチャートである。
【図4】顔輪郭による顔候補領域設定処理を説明するフ
ローチャートである。
【図5】顔内部構造による顔候補領域設定処理を説明す
るフローチャートである。
【図6】胴体輪郭による顔候補領域設定処理を説明する
フローチャートである。
【図7】非人物領域判定処理を説明するフローチャート
である。
【図8】頭部抽出による顔候補領域設定処理の詳細とし
て、(A)は原画像、(B)は2値化により抽出された
黒領域の輪郭のトレース、(C)は輪郭の曲率の演算、
(D)は凹部及び凸部の抽出を各々説明するためのイメ
ージ図である。
【図9】頭部抽出による顔候補領域設定処理の詳細とし
て、(A)は凹部及び凸部の特徴量の演算、(B)は頭
部の判定、(C)は顔候補領域の設定を各々説明するた
めのイメージ図である。
【図10】顔輪郭による顔候補領域設定処理の詳細とし
て、(A)は原画像、(B)は凹部及び凸部の抽出・分
割、(C)は顔輪郭の候補となり得る対の抽出、(D)
は線対称性類似度の判定を各々説明するためのイメージ
図である。
【図11】顔輪郭による顔候補領域設定処理の詳細とし
て、(A)は線対称性類似度の判定、(B)は頭部との
境界の探索、(C)は顔候補領域の設定を各々説明する
ためのイメージ図である。
【図12】顔構造による顔候補領域設定処理の詳細とし
て、(A)は眼部の候補となり得る黒領域の抽出、
(B)は黒領域対の線対称類似度の判定、(C)は顔候
補領域の設定を各々説明するためのイメージ図である。
【図13】胴体輪郭による顔候補領域設定処理の詳細と
して、(A)は前処理で抽出されたライン、(B)は線
対称性類似度の判定、(C)は顔候補領域の設定を各々
説明するためのイメージ図である。
【図14】(A)はエッジ検出における微分方向の一例
を示す概念図、(B)は各方向への微分を行うための微
分フィルタの一例を示す概念図である。
【図15】第2実施形態に係る顔領域抽出処理を説明す
るフローチャートである。
【図16】顔領域抽出処理を並列に実行するための顔領
域抽出部の構成の一例を示す概略ブロック図である。
【符号の説明】
10 写真焼付装置 12 ネガフィルム 18 色補正フィルタ 28 カラーペーパ 32 CCDイメージセンサ 40 顔領域抽出部 44 露光量演算部

Claims (8)

    【特許請求の範囲】
  1. 【請求項1】 原画像中に存在する人物の所定の部分に
    特有の形状パターンを探索し、検出した形状パターンの
    大きさ、向き及び人物の顔と前記所定の部分との位置関
    係に応じて人物の顔に相当すると推定される領域を設定
    し、設定した領域に重み係数を付与することを、人物の
    各部分に特有の複数種類の形状パターンを探索対象とし
    て各々行い、 人物の顔に相当すると推定される領域として設定した複
    数の領域の各々の範囲、及び前記複数の領域に各々付与
    した重み係数に基づいて、原画像中の人物の顔に相当す
    る確度が最も高い領域を判断し、 判断した領域の色又は濃度の少なくとも一方に基づいて
    複写材料への露光量を決定する、 露光量決定方法。
  2. 【請求項2】 前記人物の各部に特有の形状パターン
    は、 人物の頭部の輪郭を表す形状パターン、人物の顔の輪郭
    を表す形状パターン、人物の顔の内部構造を表す形状パ
    ターン、及び人物の胴体の輪郭を表す形状パターンを含
    む、 ことを特徴とする請求項1記載の露光量決定方法。
  3. 【請求項3】 前記形状パターンの探索は、原画像を濃
    度又は色が同一又は近似している複数の画素で構成され
    る複数の領域に分割し、該複数の領域の各々の輪郭を用
    いて行う、 ことを特徴とする請求項1記載の露光量決定方法。
  4. 【請求項4】 前記形状パターンの探索は、原画像中に
    存在するエッジを検出し、検出したエッジの中心線を求
    め、求めた中心線を用いて行う、 ことを特徴とする請求項1記載の露光量決定方法。
  5. 【請求項5】 前記設定した人物の顔に相当すると推定
    される領域には符号が正の重み係数を付与すると共に、 原画像中の人物の顔に相当する確度の低い領域を判定
    し、判定した領域には符号が負の重み係数を付与する、 ことを特徴とする請求項1記載の露光量決定方法。
  6. 【請求項6】 抽出対象図形を構成する特徴的な複数の
    部分形状に基づいて複数の部分形状パターンを予め定め
    ておき、 画像中に存在する部分形状パターンを探索し、検出した
    部分形状パターンの大きさ、方向、及び前記抽出対象図
    形における前記部分形状パターンが表す部分形状の位置
    に応じて画像中の抽出対象図形の特定部分又は全体が存
    在すると推定される候補領域を設定することを、前記複
    数の部分形状パターンの各々について行い、 設定した各候補領域毎に、前記検出した各部分形状パタ
    ーンとの関係に基づいて抽出対象図形の特定部分又は全
    体が存在する領域としての整合度を求め、 各候補領域毎に求めた整合度に基づいて、抽出対象図形
    の特定部分又は全体が存在している確度が高い候補領域
    を判断し、 抽出対象図形の特定部分又は全体が存在している確度が
    高いと判断した候補領域を抽出する図形抽出方法。
  7. 【請求項7】 画像上での前記抽出対象図形の状態を複
    数の状態に予め分類しておくと共に、 前記複数の部分形状パターンの各々に対し、部分形状パ
    ターンを探索する際の探索条件を規定するパラメータと
    して、前記分類した複数の状態に応じて複数種類のパラ
    メータを予め定めておき、 画像中に存在する部分形状パターンを探索し、前記候補
    領域を設定することを前記複数の部分形状パターンの各
    々について行い、設定した候補領域毎に整合度を求め、
    抽出対象図形の特定部分又は全体が存在している確度が
    高い候補領域を判断して抽出する処理を、前記複数の状
    態に対応する複数種類のパラメータの各々を用いて行う
    か、 又は、前記複数の状態のうちの所定の状態に対応するパ
    ラメータを用いて前記処理を行った結果、抽出対象図形
    の特定部分又は全体が存在している確度が高いと判断し
    た候補領域が無かった場合は、前記所定の状態と異なる
    状態に対応するパラメータを用いて前記処理を行うこと
    を繰り返し、抽出対象図形の特定部分又は全体が存在し
    ている確度が高いと判断した候補領域が有った場合に前
    記処理を終了することを特徴とする請求項6記載の図形
    抽出方法。
  8. 【請求項8】 前記画像上での抽出対象図形の状態は、 画像上での抽出対象図形の大きさ、及び画像上での抽出
    対象図形の向き、及び抽出対象図形が表す物体の向きの
    少なくとも何れかを含むことを特徴とする請求項7記載
    の図形抽出方法。
JP25897795A 1994-10-28 1995-10-05 露光量決定方法、図形抽出方法及び顔領域判断方法 Expired - Fee Related JP3576654B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP25897795A JP3576654B2 (ja) 1994-10-31 1995-10-05 露光量決定方法、図形抽出方法及び顔領域判断方法
US08/549,181 US5629752A (en) 1994-10-28 1995-10-27 Method of determining an exposure amount using optical recognition of facial features

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP26659894 1994-10-31
JP6-266598 1994-10-31
JP25897795A JP3576654B2 (ja) 1994-10-31 1995-10-05 露光量決定方法、図形抽出方法及び顔領域判断方法

Publications (2)

Publication Number Publication Date
JPH08184925A true JPH08184925A (ja) 1996-07-16
JP3576654B2 JP3576654B2 (ja) 2004-10-13

Family

ID=26543910

Family Applications (1)

Application Number Title Priority Date Filing Date
JP25897795A Expired - Fee Related JP3576654B2 (ja) 1994-10-28 1995-10-05 露光量決定方法、図形抽出方法及び顔領域判断方法

Country Status (1)

Country Link
JP (1) JP3576654B2 (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5995194A (en) * 1996-12-26 1999-11-30 Fuji Photo Film Co., Ltd. Reproducing machine and a method of determining reproducing conditions
US6445819B1 (en) 1998-09-10 2002-09-03 Fuji Photo Film Co., Ltd. Image processing method, image processing device, and recording medium
US6529630B1 (en) 1998-03-02 2003-03-04 Fuji Photo Film Co., Ltd. Method and device for extracting principal image subjects
US6798921B2 (en) 1998-03-19 2004-09-28 Fuji Photo Film Co., Ltd. Method for image designating and modifying process
US6834127B1 (en) 1999-11-18 2004-12-21 Fuji Photo Film Co., Ltd. Method of adjusting output image areas
US7092569B1 (en) 1999-07-29 2006-08-15 Fuji Photo Film Co., Ltd. Method and device for extracting specified image subjects
US7106887B2 (en) 2000-04-13 2006-09-12 Fuji Photo Film Co., Ltd. Image processing method using conditions corresponding to an identified person
JP2009025869A (ja) * 2007-07-17 2009-02-05 Fuji Xerox Co Ltd 画像処理装置、画像処理システムおよび画像処理プログラム
US7515773B2 (en) 2004-08-27 2009-04-07 Aisin Seiki Kabushiki Kaisha Facial parts position detection device, method for detecting facial parts position, and program for detecting facial parts position
JP2009146033A (ja) * 2007-12-12 2009-07-02 Nikon Corp 部分画像抽出方法
US7613332B2 (en) 2004-03-31 2009-11-03 Fujifilm Corporation Particular-region detection method and apparatus, and program therefor
EP2757767A1 (en) 2000-10-20 2014-07-23 Samsung Electronics Co., Ltd Image processing system and ordering system

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5995194A (en) * 1996-12-26 1999-11-30 Fuji Photo Film Co., Ltd. Reproducing machine and a method of determining reproducing conditions
US6529630B1 (en) 1998-03-02 2003-03-04 Fuji Photo Film Co., Ltd. Method and device for extracting principal image subjects
US6798921B2 (en) 1998-03-19 2004-09-28 Fuji Photo Film Co., Ltd. Method for image designating and modifying process
US6445819B1 (en) 1998-09-10 2002-09-03 Fuji Photo Film Co., Ltd. Image processing method, image processing device, and recording medium
US7379591B2 (en) 1999-07-29 2008-05-27 Fujiflim Corporation Method and device for extracting specified image subject
US7092569B1 (en) 1999-07-29 2006-08-15 Fuji Photo Film Co., Ltd. Method and device for extracting specified image subjects
US6834127B1 (en) 1999-11-18 2004-12-21 Fuji Photo Film Co., Ltd. Method of adjusting output image areas
US7106887B2 (en) 2000-04-13 2006-09-12 Fuji Photo Film Co., Ltd. Image processing method using conditions corresponding to an identified person
US7577310B2 (en) 2000-04-13 2009-08-18 Fujifilm Corporation Image processing method
EP2757767A1 (en) 2000-10-20 2014-07-23 Samsung Electronics Co., Ltd Image processing system and ordering system
US7613332B2 (en) 2004-03-31 2009-11-03 Fujifilm Corporation Particular-region detection method and apparatus, and program therefor
US7515773B2 (en) 2004-08-27 2009-04-07 Aisin Seiki Kabushiki Kaisha Facial parts position detection device, method for detecting facial parts position, and program for detecting facial parts position
JP2009025869A (ja) * 2007-07-17 2009-02-05 Fuji Xerox Co Ltd 画像処理装置、画像処理システムおよび画像処理プログラム
JP2009146033A (ja) * 2007-12-12 2009-07-02 Nikon Corp 部分画像抽出方法

Also Published As

Publication number Publication date
JP3576654B2 (ja) 2004-10-13

Similar Documents

Publication Publication Date Title
US5629752A (en) Method of determining an exposure amount using optical recognition of facial features
JP3557659B2 (ja) 顔抽出方法
US5881171A (en) Method of extracting a selected configuration from an image according to a range search and direction search of portions of the image with respect to a reference point
US7333653B2 (en) Detecting and correcting redeye in an image
US8577099B2 (en) Method, apparatus, and program for detecting facial characteristic points
US7171044B2 (en) Red-eye detection based on red region detection with eye confirmation
JP3499305B2 (ja) 顔領域抽出方法及び露光量決定方法
JP2008004123A (ja) 特定形状領域の抽出装置及び方法、特定領域の抽出装置及び方法、複写条件決定装置及び方法
JP3576654B2 (ja) 露光量決定方法、図形抽出方法及び顔領域判断方法
KR101048582B1 (ko) 칼라 이미지에서 얼굴들을 검출하기 위한 방법 및 디바이스
JP3516786B2 (ja) 顔領域抽出方法及び複写条件決定方法
JP2004265431A (ja) 顔抽出方法
US20230316697A1 (en) Association method, association system, and non-transitory computer-readable storage medium
JPH08138024A (ja) 画像の向き判定方法
JP3636783B2 (ja) 顔領域判断方法、複写方法及び露光量決定方法
JP2638702B2 (ja) 特徴画像データの抽出方法
JP2638701B2 (ja) 特徴画像データの抽出方法
JPH0528254A (ja) 図画データの自動ベクトル化処理方法、及びそれに使用する装置
JP2004234689A (ja) 顔抽出方法
US5764788A (en) Strand orientation sensing
CN113537178B (zh) 基于船舶安防数据识别的人脸图片补偿识别方法
JP3449836B2 (ja) 画像切り抜き方法及び装置
JP2004206738A (ja) 顔抽出方法
JP2004234688A (ja) 顔抽出方法
JPH11298728A (ja) 画像属性判別方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040708

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080716

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080716

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090716

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090716

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100716

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110716

Year of fee payment: 7

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110716

Year of fee payment: 7

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 8

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 8

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130716

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees