JP3473832B2 - ディジタル画像の自動補正方法及びそのシステム - Google Patents
ディジタル画像の自動補正方法及びそのシステムInfo
- Publication number
- JP3473832B2 JP3473832B2 JP08357899A JP8357899A JP3473832B2 JP 3473832 B2 JP3473832 B2 JP 3473832B2 JP 08357899 A JP08357899 A JP 08357899A JP 8357899 A JP8357899 A JP 8357899A JP 3473832 B2 JP3473832 B2 JP 3473832B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- template
- eye
- pupil
- digital image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Editing Of Facsimile Originals (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
Description
自動補正方法及びそのシステムに関する。さらに詳しく
は、銀塩写真処理露光機へのディジタル画像出力におい
て、顔画像をディジタル画像に変換し、顔画像中の瞳を
検出し、自動的に最適な色に補正し、自然な顔画像を得
るディジタル画像の自動補正方法及びそのシステムに関
する。
暗いためフラッシュ等の閃光光源を用いると瞳孔部分が
赤く撮影されてしまうという、いわゆる赤目現象がしば
しば発生して不自然な画像となってしまうことがある。
これを避けるために撮影レンズの光軸とフラッシュの光
軸とを接近させない撮影方法が提案されている。
て補正を行う方法もある。即ち、画像を表示画面に表示
して赤目の箇所を1画素ずつマウス等で補正するという
ものである。
任意の部分を選択するとき、眼の色を選択するのに相当
の熟練を要し、手間と時間が必要であるという問題があ
る。そして、この場合、補正した部分と、もとの画像と
の境界にどうしても不自然な部分が生じてしまうという
品質上の問題もある。
題点に鑑みてなされたものであり、熟練を要することな
く、表示された画像のうち画像処理対象物を自動的に補
正できる自動補正方法及びそのシステムを提供し、特
に、表示された人物の顔画像のうちの瞳の色を自動的に
補正し、補正した部分と、補正しない部分との境界が自
然な補正となるディジタル画像の瞳色自動補正方法及び
そのシステムを提供することを課題とする。
く、本発明の請求項1に係わるディジタル画像の自動補
正方法は、顔のディジタル画像のうち目を含む領域に対
して該領域中の画素データを量子化し、予め作成した目
を含む画像の第1のテンプレートを用いて第1のテンプ
レートマッチングを行って前記目の位置を検索し、前記
領域中の画素データに基づいて前記目の中の瞳を認識
し、該瞳を含む画像の第2のテンプレートを作成して第
2のテンプレートマッチングを行って前記瞳を特定し、
特定した部分を画像処理することを特徴とする。
る瞳を自動で正確に特定でき、しかも、特定した領域で
ある瞳を自動で画像処理できる。
の自動補正方法は、(a)顔のディジタル画像のうち目を
含む領域に対して該領域中の画素データを量子化し、予
め作成した検索用のテンプレートを用いてテンプレート
マッチングを行って前記目の位置を検索し、前記領域中
の画素データに基づいて前記目の中の瞳を認識する工程
と、(b) 該瞳を含む画像の絞込用のテンプレートを作
成してテンプレートマッチングを行って前記瞳を絞込ん
で特定する工程と、(c)前記(b)工程を所定回数繰返す
工程と、(d)特定した部分を画像処理する工程とを含む
ことを特徴とする。
が目を含む任意の大きさであっても、その領域を絞り込
んで画像処理対象物である瞳を自動で正確に特定でき、
しかも、特定した領域である瞳を自動で画像処理でき
る。
の自動補正方法によれば、顔のディジタル画像のうち目
10を含む領域に対して該領域中の画素データを4値化
し、予め作成した目を含む画像の第1のテンプレート2
0を用いて第1のテンプレートマッチングを行って目1
0の位置を検索し、前記領域中の画素データに基づいて
瞳を認識し、該瞳を含む画像の第2のテンプレートを作
成して第2のテンプレートマッチングを行って瞳を特定
し、特定した部分を色補正することを特徴とする。
定し、しかも、適正な色の画像データを自動で形成でき
る。
の自動補正方法によれば、前記目10が、赤目現象を起
こした画像であるので、赤目を自動で正確に特定でき、
しかも、適正な色の画像データを自動で形成できる。
の自動補正方法によれば、前記画素データを、輝度によ
り3値化し、赤色データを含めて4値化するので、4値
化画像をメディアンフィルタ操作によりノイズを除去で
きる。
の自動補正方法によれば、前記目10を含む領域の大き
さに応じて前記第1のテンプレート20のサイズを変更
して検索するので、検索範囲の大まかな選択ができる。
の自動補正方法によれば、前記色補正した部分の周囲を
ボカシ処理するので、色補正した部分の周囲が自然に見
える。
の自動補正システムは、ディジタル画像を表示する表示
手段51と、ディジタル画像の画像データと、該画像デ
ータを記憶する記憶手段54と、画像中の任意の範囲を
指定して切り取る指定手段52と、瞳を含む目の画像の
テンプレートと、テンプレートマッチングのためディジ
タル画像の画像データを演算処理する演算手段53とを
具備し、目を含む領域に対して該領域中の画素データを
量子化し、予め作成した瞳を含むテンプレート20を用
いて所定回数のテンプレートマッチングを行って前記領
域中の画素データを検索して瞳を認識し、次いで瞳を特
定し、特定した瞳部分を画像処理することを特徴とす
る。
像処理対象物である瞳を正確に特定でき、しかも画像処
理できるシステムを、簡単なテンプレートと演算手段等
で構成できる。
の自動補正システムは、ディジタル画像を表示する表示
手段51と、ディジタル画像の画像データと、該画像デ
ータを記憶する記憶手段54と、画像中の任意の範囲を
指定して切り取る指定手段52と、瞳を含む目の画像の
テンプレート20と、テンプレートマッチングのためデ
ィジタル画像の画像データを演算処理する演算手段53
とを具備し、目を含む領域に対して該領域中の画素デー
タを4値化し、予め作成した瞳を含むテンプレート20
を用いて2段階のテンプレートマッチングを行って前記
領域中の画素データを検索して瞳を認識し、次いで瞳を
特定し、特定した瞳部分を色補正することを特徴とす
る。
を用いるだけで、特段の装置又は方法を要せず、自動且
つ高速で、自然な色の目となる画像データを形成して瞳
の色を補正できる。
像の自動補正システムによれば、前記目が赤目現象を起
こした画像であるので、赤目を自動で正確に特定し、し
かも適正な色の画像データを自動で形成できる。
像の自動補正システムによれば、前記テンプレート20
が、200画素×200画素範囲に正円の赤目21が配
置されてなるものであるので、1つのテンプレートで瞳
の色の自動補正に対応できる。
発明の実施の形態について説明する。
うち瞳を扱い、その色を補正する場合について説明す
る。尚、人物の目のうち、いわゆる瞳孔及び虹彩を合わ
せて瞳とする。また、瞳の色の補正として、従来技術の
項で説明した「赤目」の色を補正する場合について説明
する。図1は、本発明に係わるディジタル画像の自動補
正システムを有する写真処理装置の構成を概略的に示す
ブロック説明図である。
細に説明する画像処理部50を具備する他は、従来から
知られている写真処理装置と同様に、現像、定着、水洗
及び乾燥等の種々の化学的処理又は物理的処理を一連の
工程で自動的に行う処理装置61や、カラー画像の各画
素を近似的に青(B)、緑(G)、及び赤(R)の3原色に分
解測光するという色分解を行い、各画素ごとに青、緑、
及び赤の各光強度を色信号として色ごとに順番に読み出
すためのカラースキャナ装置62等からなる写真処理部
60や、制御部70を具備している。
したのち、後述するように画像処理を行ったうえで、画
像処理された画像データに基づいて写真感光材料に走査
露光し、通常の写真処理を行ってカラープリント等を得
る。前記処理装置61及びカラースキャナ装置62等に
ついては、その説明を省略し、以下、本実施の形態に係
わる瞳色の自動補正を行うシステム(以下、「瞳色自動
補正システム」という)を有する画像処理部50につい
て説明する。
表示する表示手段としての画像表示部51と、画像中の
任意の領域を指定して切り取る指定手段としてのマウス
52と、テンプレートマッチングを行うための演算処理
をおこなう演算手段である演算処理部53と、画像デー
タを記憶する記憶手段である記憶部54とによって構成
され、写真処理装置1全体として操作は制御部70によ
って制御される。
真感光材料等に記録された画像情報をカラースキャナ装
置62等によってディジタルデータとして読み取った画
像データを表示装置(図にハッチングで示した)に画像
表示するものであり、CRT又は液晶表示装置等によっ
て構成される。そして、画像表示部51に付随して、対
象とする画像に関する演算処理や画像処理に関する追加
的の指示や情報の入出力が可能なインターフェイス55
を設ける。
任意の点を指定する機能を有し、且つ、後述するように
テンプレートマッチングを行うためのテンプレートを発
生させるように演算処理部53及び画像表示部51に作
用する機能を有するものである。同様の機能を有するも
のであれば他の装置でもよく、いわゆるトラックボール
等を用いてもよい。本実施の形態においては、いわゆる
ドラッグ操作によって指定した部分を対角線とする長方
形を生成して「検索範囲」とし、この検索範囲内でテン
プレートマッチングを行うのであり、この操作が容易な
ようにマウスを用いている。
テンプレートマッチングを行うための演算処理や、特定
された赤目に対して色補正を行うための演算処理の他、
一般的に画像に対して行う拡大縮小や回転、反転、投
影、陰影付与、合成、分割等種々の画像処理を行うこと
もでき、種々の論理回路や演算回路、レジスタ等によっ
て構成される。
るテンプレートに関する所定のデータや、前記画像デー
タ等の演算処理途中のデータ、後述する瞳色補正のアル
ゴリズムによるプログラム等を記憶するものであり、R
AM及びROM等によって低廉な装置コストで構成され
る。
を記憶するので、通常の記憶手段等を用いて本実施の形
態に係わる瞳色自動補正を、低廉な装置コストで高速の
自動処理によって行うことができる。尚、前記プログラ
ムは記憶媒体に記憶させて保管する等して写真処理装置
とは別個に利用することもできる。
トを参照しつつ、本実施の形態に係わる画像処理部50
によって行う瞳色自動補正システムの実施要領について
説明する。以下の各段階の処理は、通常は全て瞳色自動
補正プログラムとして写真処理装置に格納されて自動的
に実行されるように構成されており、当該プログラム
は、写真処理装置の稼動開始とともに起動される。
テンプレートマッチングを行う赤目の検索段階と、検索
され特定された赤目の色を補正する色補正段階とから構
成されるので、はじめに、検索段階について説明し、次
に色補正段階について説明する。図2の(a)は、目を示
す説明図であり、(b)は、赤目を含むテンプレートを示
す説明図である。また、図3及び図4は、それぞれ本実
施の形態に係わる瞳色自動補正の工程を順に示すフロー
チャートである。
の中から検索範囲を指定する。検索範囲の指定について
は、全体の顔画像の中から瞳部分を検索するため、検索
を実行する検索範囲を選択して全体の顔画像から切り取
り、この検索範囲内で検索を実行する。具体的には、例
えば、マウスを顔画像上でドラッグして検索範囲を指定
する(工程101)等して実行する。
くとも1つの目を含む大きさに切り取るものとする。も
し、2つの目を含んだ検索範囲を指定した場合は、「よ
り赤い」方の目を検索することになる。尚、オペレータ
が、表示された画像に対して直接処理操作を行うのは、
この検索範囲指定のみである。
グための画素データ調べを行う。本実施の形態において
は、予め標準的な目の画像データに基づくテンプレート
を作製して記憶部54等に記憶させておき、プログラム
の起動とともにプログラム中に読込まれる(工程10
2)ものとする。
(a)に示したように、虹彩11の中央部分に瞳孔12が
位置し、周辺に白目13が位置している。前述した赤目
は、この虹彩11の部分に発生するので、白目の中に赤
目が存在するように撮影されているものである。
示したように、200画素×200画素の正方形中に、
背景色(例えば、黒)23に対して赤の正円21を配
し、その周囲22を同心の白目として描いたものを用い
る。赤の正円の半径の比率は、標準的な実際の目の大き
さから勘案して設定することができ、好ましい。そし
て、このテンプレート20は、後述する(工程108)
ように、検索する画像のサイズに応じてサイズを変更し
て使用する。このテンプレート20を用いることによっ
て、上下又は左右に傾いた目に対しても1つのテンプレ
ート20で対応できる。
(工程103)し、検索範囲の画素データの4値化と、
メディアンフィルタによるノイズ除去を行う。前述した
切り取られた画像中には髪の毛や皺等によるノイズが多
数含まれているため、これらのノイズを除去するため、
検索範囲中の画像データを輝度((R+G+B)/3)
によって3値化する(工程104)。実際には、全画素
について求めた輝度値に関して、最大値と最小値との間
を3つの領域に分割することによって行う。
比率の場合を赤と仮定し、赤を検出した場合の検出デー
タを保存するようにし、前述の3値とあわせて4値化す
る(工程105)。このとき、3値化したデータの境界
値近辺のデータや赤と認識した部分のデータが突発的に
ノイズとしてあらわれてしまうので、赤と認識した部分
以外の画素に対してメディアンフィルタをかけることに
より、このノイズを除去する(工程106)。
で、ノイズの大部分を除去することができる。ノイズと
認識されたデータの中には赤目のデータも含まれるの
で、赤と認識した画素は、その赤の検出データを保存し
て赤目の補正をしやすくする。このようにしてノイズを
除去するので、テンプレートマッチングの成功率を上げ
ることができる。
プレート20の初期使用サイズを決定する。まず、テン
プレート画像の黒目相当部分の画素数を計算(工程10
7)し、検索範囲における画素数との比較により、検索
範囲の画素数に最も近い画素数となるようにテンプレー
ト20のサイズを調節して設定する(工程108)。
分の1画像」、及び「16分の1画像」について順に行
い、後述する「適応度」を超えた時点で検索を終了す
る。本実施の形態においては、テンプレート20のサイ
ズを前述のように設定したが、他のサイズに設定するこ
ともできる。また、この比較処理の区分及び回数は、例
えば、後述するように変更できる。
を行うこととなり、常に、無駄な時間を要することにな
るので、この比較処理は、検索範囲の画像のサイズに応
じて、最初に使用するテンプレート20のサイズをオペ
レータが任意に選択できるものとする。
サイズの正円部分の画素数と、検索範囲の「元サイズ画
像」、「4分の1の画像」、及び「16分の1画像」の
それぞれに対して黒目及び赤目と認識できている部分の
画素数とを比較して、テンプレート20のサイズを、適
する画像のサイズに合わせて縮小する(工程109)。
分は、必ずしも目の部分とは限らないが、このようにテ
ンプレート20のサイズを決定するので、大まかな選択
をすることができる。
は、まず、テンプレート画像の白目領域の画素数を計算
し(工程110)、目の部分全体の画素数を計算してお
く。後述する「適応度」は、本発明者が便宜的に指標と
して設定するものである。そして、最低適応度は、「使
用するテンプレート画像のうち黒目領域及び赤目領域に
白目領域を加えた領域の総画素数の3分の1」とし、こ
れを赤目認識のための最低クリアすべき閾値とする。
グを行う。ここでいうテンプレートマッチングは、テン
プレート20と、検索範囲とを比較して「最低適応度以
上であり、最も適応度の高い部分の座標データを得る」
ことを目的としている。
定域内で:赤が検出されたらその赤のデータに+2、
:黒又は白ならそのデータにそれぞれ+1、:又
は以外なら白に−1、そして、白目判定域内で赤又は
黒が検出されたら、そのそれぞれに+1、:白なら白
に+2、:又は以外なら白に−1」というように
赤優先の計算方法を採用しており、それぞれの画素につ
いての各値の合計値を「適応度」としている。そして、
「適応度が最も大きく、赤が0でない」条件によりテン
プレートマッチングを行う。
112)。検索ステップとは、何画素ごとに検索するか
という、その画素数を意味する。即ち、「元サイズ画
像」又は「4分の1画像」を用いた場合は、縦横とも5
画素ごとに検索を行い、この結果求まった座標を中心に
して1画素ごとのテンプレートマッチングを行う。これ
に対し、「16分の1画像」を用いる場合は、5画素ご
との検索であると最適値の部分を見落とす危険性がある
ので、1画素ごとにテンプレートマッチングを行うので
ある。
し、最低適応度を計算する(工程113)。このように
して1段階目のテンプレートマッチング(工程114)
を行うが、設定された検索ステップの画素数に従って、
原点(0,0)から座標を移動しつつ画素ごとに検索を
行う(工程115)。そして、各画素ごとにテンプレー
トの目の部分だけと、検索範囲とによって適応度を計算
する(工程116)。
周辺部分を1箇所特定することができるので、最低適応
度を超え、且つ、適応度が最大となる部分の座標を検索
し(工程117)て決定し、その座標データを求める。
そして、決定した座標の周辺(「周辺部分」という)の
領域を、目が入る所定の大きさで検索範囲から切り離す
(工程118)。
前述のようにして特定した領域を除いて次に最も赤いと
される部分を探すことになる。従って、初めに特定した
領域を除いた部分であって、しかもテンプレート全域で
検索処理ができる範囲をあらたな検索範囲とし、この検
索範囲に対して再度テンプレートマッチングを行う(工
程119)。
118までを行うが、工程119でのテンプレートマッ
チングにおいては、処理時間を短縮するために縦横5画
素ずつ検索するものとし、前述した適応度を計算した際
の赤の値が前記最高値に次いで高い部分を探し、探し当
てた部分を中心に所定の範囲内で1画素ごとの検索を行
い、座標データを求め、周辺部分を決定する。以上のよ
うにして、1段階目のテンプレートマッチングが完了す
る。
る。2段階目のテンプレートマッチングは、瞳の色補正
を行うべき色補正範囲を決定するための処理であるた
め、黒目部分(赤目部分)だけをぴったり含むように正
円のテンプレートを作成する必要がある。もし、この2
段階目のテンプレートが余分な部分を含んでいると、そ
の余分な部分まで補正してしまうからである。
とされた目の周辺部分に含まれる黒目部分(赤目部分)
の画素数を計算して目にぴったり重なるように2段階目
のテンプレートを作成する(工程120)。
グを行う(工程121)。ここでも1段階目のテンプレ
ートマッチングと同様にテンプレートマッチングを行
う。このようにして2段階目のテンプレートマッチング
を両目に対して行うので、ほぼ完全に黒目(赤目)を選
択して正確なその座標データを決定することができ、従
って、正確に赤目を特定することができる。
段階目のテンプレートにぴったり重なり、且つ4値化画
像の黒部分と赤部分である領域(「補正部分」)に色補
正を行う。ここで行う色補正は、実際の目における標準
的な大きさの比率に合わせて、輝度データを利用し、所
定の比率で彩度を落とすことによって行う。
正部分のボカシ処理を行う。前段階では色補正の処理に
よって必ずしも自然な画像を得られるのではなく、2段
階目のテンプレートが正円であるため目の上下を含んで
しまい、目の周囲の部分との境界部分が不自然になった
りする。
の移動平均フィルタをかけて補正部分に対する、いわゆ
るボカシ処理を行う。このボカシ処理によって自然な画
像を得ることができ、カラープリント等の商品価値が向
上する効果を奏する。
周囲の部分との境界部分のボカシ処理を行った画像を、
補正部分として検索範囲から切り離したときの元の画像
に合成し(工程125)、さらに原画像に合成して(工
程126)瞳色自動補正の処理を終了する。
に検索範囲を指定するだけで特段の熟練を要する操作は
必要ではなく、瞳色自動補正システムにより、自動で赤
目を正確に特定でき、短時間で画像処理する領域が特定
され、色補正が自動で実行され自然な色の目となる画像
データを形成できる。
自動補正システムを写真処理装置に搭載して赤目となっ
た瞳の色を自動で補正してカラープリント等を作成する
ように構成したが、瞳の色の補正は、赤目を黒目に補正
するだけではなく、カラーコンタクトレンズを装着した
場合のような瞳の色に補正したり、いわゆる「キャッチ
ライト」のような画像を付加したりすることもできる。
さらに、同様に、赤目現象を生じてしまう他の画像記録
手段(例えば、カラー写真を利用する複写機等)の場合
にも本システムを搭載し、自動的に、短時間で画像処理
領域が特定され色補正を実行することもできる。
である場合について説明したが、本発明はこの構成に限
定されるものではなく、或る対象物のテンプレートが定
量的に得られて多段階のテンプレートマッチングにより
処理領域が特定され得るのであれば、対象画像が人物だ
けでなく、動植物等生物のみならず建築物や物品等無生
物に対しても、本発明を適用できる。以下、特に説明し
ない構成は、実施の形態1と同じである。
ル画像のうち画像処理対象物を含む領域を指定したの
ち、この領域中の画素データを量子化し、この量子化に
対応して予め作成した第1のテンプレートを用いて第1
のテンプレートマッチングを行う。画素データの量子化
に際しては、実施の形態1の場合のように、画素データ
を4値化してもよいが、3値化や5値化又は、これ以上
であってもよい。
対象物の位置を検索し、前記領域中の画素データに基づ
いて前記画像処理対象物を認識し、画像処理対象物を含
む画像の第2のテンプレートを作成して第2のテンプレ
ートマッチングを行って前記画像処理対象物を特定し、
特定した部分に対して種々の画像処理を行う。ここでの
画像処理は、色補正に止まらず、拡大縮小や陰影付与、
また、芸術的な装飾を付加する等の画像処理を行う。そ
して、熟練を要することなく、自動的に、短時間で画像
処理領域が特定され色補正等の画像処理を実行すること
ができる。
とし、いかなる大きさからでも、テンプレートマッチン
グを所定回数繰返して絞り込むようにしてテンプレート
マッチングの成功度を向上させて行うこともできる。こ
の場合、第2、第3のテンプレートマッチングの演算処
理のため、記憶手段の記憶容量を大きくしておくととも
に、テンプレートマッチングを繰返すことができるよう
に各装置手段の接続及び演算処理のアルゴリズムを変更
しておく。
正方法は、画像処理対象物を含む領域中の画素データを
量子化し、第1のテンプレートを用いて第1のテンプレ
ートマッチングを行い、前記画像処理対象物を認識し、
該画像処理対象物を含む画像の第2のテンプレートを作
成して第2のテンプレートマッチングを行い、特定した
部分を画像処理する構成により、自動で、画像処理対象
物を正確に特定でき、しかも特定した領域を画像処理で
きる。
つ高速で種々の画像処理が行える。
方法は、所定回数のテンプレートマッチングを繰返す構
成により、初めに指定する領域が任意の大きさであって
もその領域を絞り込んで、画像処理対象物を自動で正確
に特定でき、しかも、特定した領域を自動で画像処理で
きる。
を向上させて、特定した領域を画像処理できる。
方法によれば、顔のディジタル画像のうち目を含む領域
に対して該領域中の画素データを4値化し、第1のテン
プレートを用いて第1のテンプレートマッチングを行っ
て目の位置を検索し、瞳を含む画像の第2のテンプレー
トを作成して第2のテンプレートマッチングを行って瞳
を特定し、特定した部分を色補正する構成により、瞳を
自動で正確に特定し、しかも、適正な色の画像データを
自動で形成できる。
高速で瞳の色補正が行える。
方法によれば、前記目10が、赤目現象を起こした画像
とすることができるので、赤目を自動で正確に特定で
き、しかも、適正な色の画像データを自動で形成でき
る。
方法によれば、前記画素データを、輝度により3値化
し、赤色データを含めて4値化することができるので、
4値化画像をメディアンフィルタ操作によりノイズを除
去でき、テンプレートマッチングの成功度を向上でき
る。
方法によれば、前記目を含む領域の大きさに応じて前記
第1のテンプレートのサイズを変更して検索できるの
で、検索範囲の大まかな選択ができ、テンプレートマッ
チングの成功度を向上できる。
方法によれば、前記色補正した部分の周囲をボカシ処理
できるので、色補正した部分の周囲が自然に見え、カラ
ープリント等の商品価値が上がる。
システムは、画像処理対象物を含む画像のテンプレート
と、テンプレートマッチングのための演算手段とを具備
し、任意に指定した範囲中の画素データを量子化し、予
め作成したテンプレートを用いて所定回数のテンプレー
トマッチングを行って画像処理対象物を特定して画像処
理する構成により、自動且つ高速で、画像処理対象物を
正確に特定でき、しかも画像処理できるシステムを、簡
単なテンプレートと演算手段等で構成できる。
高速で種々の画像処理ができるシステムを低コストで提
供できる。
システムは、瞳を含む目の画像のテンプレートと、テン
プレートマッチングのための演算手段とを具備し、目を
含む領域に対して該領域中の画素データを4値化し、瞳
を含むテンプレートを用いて2段階のテンプレートマッ
チングを行って瞳を特定し、特定した瞳部分を色補正す
る構成により、簡単なテンプレートを用いるだけで、特
段の装置又は方法を要せず、自動且つ高速で、自然な色
の目となる画像データを形成して瞳の色を補正できる。
つ高速で瞳の色の補正が行える。
システムによれば、前記目が赤目現象を起こした画像と
することができるので、赤目を自動で正確に特定し、し
かも、適正な色の画像データを自動で形成でき、カラー
プリント等の商品価値が向上できる。
システムによれば、前記テンプレート20が、200画
素×200画素範囲に正円の赤目が配置されてなるもの
であるので、1つのテンプレートで瞳の色の自動補正に
対応でき、複雑なテンプレートを多数個記憶しておく必
要がない。
構成を概略的に示すブロック図。
テンプレートを示す説明図。
工程を示したフローチャート。
工程を示したフローチャート。
部、54…記憶部
Claims (11)
- 【請求項1】 顔のディジタル画像のうち目を含む領域
に対して該領域中の画素データを量子化し、予め作成し
た目を含む画像の第1のテンプレートを用いて第1のテ
ンプレートマッチングを行って前記目の位置を検索し、
前記領域中の画素データに基づいて前記目の中の瞳を認
識し、該瞳を含む画像の第2のテンプレートを作成して
第2のテンプレートマッチングを行って前記瞳を特定
し、特定した部分を画像処理することを特徴とするディ
ジタル画像の自動補正方法。 - 【請求項2】 (a)顔のディジタル画像のうち目を含む
領域に対して該領域中の画素データを量子化し、予め作
成した検索用のテンプレートを用いてテンプレートマッ
チングを行って前記目の位置を検索し、前記領域中の画
素データに基づいて前記目の中の瞳を認識する工程と、
(b) 該瞳を含む画像の絞込用のテンプレートを作成し
てテンプレートマッチングを行って前記瞳を絞込んで特
定する工程と、(c)前記(b)工程を所定回数繰返す工程
と、(d)特定した部分を画像処理する工程とを含むこと
を特徴とするディジタル画像の自動補正方法。 - 【請求項3】 顔のディジタル画像のうち目(10)を含
む領域に対して該領域中の画素データを4値化し、予め
作成した目を含む画像の第1のテンプレート(20)を用
いて第1のテンプレートマッチングを行って目(10)の
位置を検索し、前記領域中の画素データに基づいて瞳を
認識し、該瞳を含む画像の第2のテンプレートを作成し
て第2のテンプレートマッチングを行って瞳を特定し、
特定した部分を色補正することを特徴とするディジタル
画像の自動補正方法。 - 【請求項4】 前記目(10)が赤目現象を起こした画像
である請求項3記載のディジタル画像の自動補正方法。 - 【請求項5】 前記画素データを、輝度により3値化
し、赤色データを含めて4値化する請求項4記載のディ
ジタル画像の自動補正方法。 - 【請求項6】 前記目(10)を含む領域の大きさに応じ
て前記第1のテンプレート(20)のサイズを変更して検
索する請求項3記載のディジタル画像の自動補正方法。 - 【請求項7】 前記色補正した部分の周囲をボカシ処理
する請求項3記載のディジタル画像の自動補正方法。 - 【請求項8】 ディジタル画像を表示する表示手段(5
1)と、ディジタル画像の画像データと、該画像データ
を記憶する記憶手段(54)と、画像中の任意の範囲を指
定して切り取る指定手段(52)と、瞳を含む目の画像の
テンプレートと、テンプレートマッチングのためディジ
タル画像の画像データを演算処理する演算手段(53)と
を具備し、目を含む領域に対して該領域中の画素データ
を量子化し、予め作成した瞳を含むテンプレート(20)
を用いて所定回数のテンプレートマッチングを行って前
記領域中の画素データを検索して瞳を認識し、次いで瞳
を特定し、特定した瞳部分を画像処理することを特徴と
するディジタル画像の自動補正システム。 - 【請求項9】 ディジタル画像を表示する表示手段(5
1)と、ディジタル画像の画像データと、該画像データ
を記憶する記憶手段(54)と、画像中の任意の範囲を指
定して切り取る指定手段(52)と、瞳を含む目の画像の
テンプレート(20)と、テンプレートマッチングのため
ディジタル画像の画像データを演算処理する演算手段
(53)とを具備し、目を含む領域に対して該領域中の画
素データを4値化し、予め作成した瞳を含むテンプレー
ト(20)を用いて2段階のテンプレートマッチングを行
って前記領域中の画素データを検索して瞳を認識し、次
いで瞳を特定し、特定した瞳部分を色補正することを特
徴とするディジタル画像の自動補正システム。 - 【請求項10】 前記目が赤目現象を起こした画像であ
る請求項9記載のディジタル画像の自動補正システム。 - 【請求項11】 前記テンプレート(20)が、200画
素×200画素範囲に正円の赤目(21)が配置されてな
るものである請求項10記載のディジタル画像の自動補
正システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP08357899A JP3473832B2 (ja) | 1999-03-26 | 1999-03-26 | ディジタル画像の自動補正方法及びそのシステム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP08357899A JP3473832B2 (ja) | 1999-03-26 | 1999-03-26 | ディジタル画像の自動補正方法及びそのシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000278510A JP2000278510A (ja) | 2000-10-06 |
JP3473832B2 true JP3473832B2 (ja) | 2003-12-08 |
Family
ID=13806391
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP08357899A Expired - Fee Related JP3473832B2 (ja) | 1999-03-26 | 1999-03-26 | ディジタル画像の自動補正方法及びそのシステム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3473832B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004351427A (ja) * | 2003-05-27 | 2004-12-16 | Tamagawa Seiki Co Ltd | プレス機の上死点停止自動補正方法 |
JP4599110B2 (ja) | 2004-07-30 | 2010-12-15 | キヤノン株式会社 | 画像処理装置及びその方法、撮像装置、プログラム |
JP4901229B2 (ja) * | 2005-03-11 | 2012-03-21 | 富士フイルム株式会社 | 赤目検出方法および装置並びにプログラム |
CN111882627A (zh) * | 2020-07-20 | 2020-11-03 | 广州市百果园信息技术有限公司 | 图像处理方法、视频处理方法、装置、设备和存储介质 |
-
1999
- 1999-03-26 JP JP08357899A patent/JP3473832B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2000278510A (ja) | 2000-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4351911B2 (ja) | デジタルスチルカメラにおける取り込み画像の写真品質を評価する方法及び装置 | |
JP4747163B2 (ja) | 人物画像における赤目補正 | |
US7953251B1 (en) | Method and apparatus for detection and correction of flash-induced eye defects within digital images using preview or other reference images | |
US8520089B2 (en) | Eye beautification | |
US20070247474A1 (en) | Method, apparatus and recording medium for image processing | |
US20100026833A1 (en) | Automatic face and skin beautification using face detection | |
JP2002150284A (ja) | 画像内の主対象を強調するためのディジタル画像処理システム及び方法 | |
JPH11232442A (ja) | 赤目低減システム | |
JP2002245471A (ja) | 被写体内容に基づく修正を有する第2プリントを伴うダブルプリントの写真仕上げサービス | |
US20040184671A1 (en) | Image processing device, image processing method, storage medium, and program | |
JP2000050076A (ja) | シ―ンバランス、コントラスト正規化及び鮮明化のデジタル画像処理を含むデジタル写真仕上げシステム | |
JP2005303991A (ja) | 撮像装置、撮像方法、及び撮像プログラム | |
JP2002314817A (ja) | マスクを用いて写真画像の鮮鋭度を局部的に変更するための方法、装置、プログラムおよび記録媒体、並びに画像再生装置 | |
JP2002044473A (ja) | 画像処理方法、画像処理装置および画像処理方法を実行するプログラムを記録した記録媒体 | |
JP2001313844A (ja) | 局所的な色補正を実行する方法および装置 | |
JP2006011685A (ja) | 写真画像処理方法及びその装置 | |
US7212674B1 (en) | Method, apparatus and recording medium for face extraction | |
JP2001148780A (ja) | 赤目修正対象領域の設定方法および赤目修正方法 | |
JP2004240622A (ja) | 画像処理方法、画像処理装置及び画像処理プログラム | |
JP4655210B2 (ja) | 濃度補正曲線生成方法と濃度補正曲線生成モジュール | |
JP2004234069A (ja) | 画像処理方法、画像処理装置、及びプログラム | |
JP3473832B2 (ja) | ディジタル画像の自動補正方法及びそのシステム | |
JP4366634B2 (ja) | ノイズ画素マップ作成方法とその方法を実施する装置とプログラム及び写真プリント装置 | |
JP2001155174A (ja) | 画像処理方法および装置 | |
JP2004242068A (ja) | 画像処理方法、画像処理装置及び画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20030822 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090919 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100919 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 8 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 8 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120919 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120919 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130919 Year of fee payment: 10 |
|
LAPS | Cancellation because of no payment of annual fees |