JP2011193317A - 画像処理装置、画像処理プログラム - Google Patents

Abstract

【課題】
赤目現象が発生している領域を適切に特定することができる画像処理装置、画像処理プログラムを提供することにある。
【解決手段】
カラー画像における赤目現象の発生している赤目を含む赤目候補領域から赤目画素を特定する画像処理装置であって、赤目候補領域における赤目の周辺にある一定面積の肌領域における画素から特徴量として赤値及び赤度値を取得し、各赤値に対応する赤度値の分布に基づいて、赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する分離曲線生成手段と、赤目画素を特定する対象領域の各画素について、画素の赤度値が、分離曲線における前記画素の赤値に対応する赤度値より大きい場合に、画素を赤目画素として特定する赤目画素特定手段と、を有する。
【選択図】 図１４

Description

本発明は、画像処理装置、画像処理プログラムに関する。

フラッシュを使用して人物を撮影した場合、目の色が赤色や金色に撮影される赤目現象が発生する。デジタルカメラ、コンピューター、またはプリンター等の画像処理機能を有する装置には、この赤目現象が発生した画像を画像処理によって補正できるものがある（特許文献１参照）。

特開平１０−２３３９２９号

しかしながら、従来の方法では、赤目現象が発生している領域を精度よく特定することができず、その結果、赤目補正を適切に行うことができない場合があった。

本発明は、このような状況に鑑みてなされたものであり、赤目現象が発生している領域を適切に特定することができる画像処理装置、画像処理プログラムを提供することにある。

上記の目的を達成するために、本発明の第１の側面によれば、カラー画像における赤目現象の発生している赤目を含む赤目候補領域から赤目画素を特定する画像処理装置であって、前記赤目候補領域における前記赤目の周辺にある一定面積の肌領域における画素から特徴量として赤値及び赤度値を取得し、前記各赤値に対応する前記赤度値の分布に基づいて、前記赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する分離曲線生成手段と、前記赤目画素を特定する対象領域の各画素について、前記画素の前記赤度値が、前記分離曲線における前記画素の赤値に対応する前記赤度値より大きい場合に、前記画素を赤目画素として特定する赤目画素特定手段と、を有する。

これにより、画像処理装置は、赤目現象が発生している赤目画素を高精度に検出することができる。

上記の第１の側面において好ましい態様によれば、さらに、前記分離曲線生成手段は、前記赤目候補領域を等分割して区分領域を生成し、前記赤目を含む赤目区分領域の周辺にある肌画素を有する肌区分領域を前記一定面積まで複数検出し、当該検出された複数の肌区分領域の前記特徴量を取得する。

この態様によれば、画像処理装置は、赤目現象が発生している赤目画素を効率的に高精度に検出することができる。

上記の第１の側面において好ましい態様によれば、さらに、前記分離曲線生成手段は、前記赤目候補領域における各画素の赤度値の平均値と当該赤度値の標準偏差値と、前記区分領域における各画素の前記赤度値の平均値とを取得し、前記赤目候補領域の前記赤度値
の平均値と標準偏差値との加算値より大きい赤度値を平均値としてもつ前記区分領域を赤目区分領域として検出し、前記赤目区分領域を包括する領域に外接する前記区分領域群を検出対象領域として設定し、前記検出対象領域の前記区分領域のうち、前記赤目候補領域の前記赤度値の平均値から標準偏差値を減算した値以上であって、前記赤目候補領域の前記赤度値の平均値と標準偏差値との加算値以下である赤度値を平均値としてもつ前記区分領域を前記肌区分領域として検出し、前記肌区分領域の総数が所定数に達するまで、前記検出対象領域の外接する前記区分領域群を前記検出対象領域に設定し直して、当該検出対象領域から前記肌区分領域を検出する。

この態様によれば、画像処理装置は、赤目候補領域における赤目領域と肌領域とを効率的に高精度に検出することができる。

上記の第１の側面において好ましい態様によれば、前記分離曲線生成手段は、さらに、前記区分領域における各画素の前記赤度値の標準偏差値を取得し、前記検出対象領域の前記区分領域のうち、前記区分領域の前記標準偏差値が、前記赤目候補領域の前記標準偏差値に所定係数を乗じた値を超える場合、当該区分領域を前記肌区分領域として検出しない。

この態様によれば、画像処理装置は、さらに高精度に肌領域を検出することができる。

上記の第１の側面において好ましい態様によれば、さらに、前記分離曲線生成手段は、前記赤値を所定の区間に区分し、前記区間毎に、当該区間内の前記赤値に対応する前記肌領域の前記赤度値の分布に基づいて前記分離曲線を生成する。

この態様によれば、画像処理装置は、作業領域が少ない場合であっても、赤目画素を高精度に検出することができる。

上記の第１の側面において好ましい態様によれば、前記赤目画素特定手段は、さらに、前記各画素について、前記画素の前記赤度値と、前記分離曲線における前記画素の赤値に対応する前記赤度値との比に基づいて、前記画素の赤目補正の度合いを表す補正強度情報を生成する。

この態様によれば、画像処理装置は、赤目画素の補正度合い情報（補正強度情報）を取得することができる。

上記の第１の側面において好ましい態様によれば、前記画像処理装置は、さらに、前記赤目候補領域における前記赤目の周辺にある白領域を検出する白領域検出手段を有し、前記赤目画素特定手段は、前記白領域が検出されなかった場合、前記各画素について前記赤目補正の度合いを下げる調整を行う。

この態様によれば、赤目領域の周辺に白色の領域が存在しない場合に、赤目画素の補正度合いを抑えることができる。

上記の第１の側面において好ましい態様によれば、さらに、前記白領域検出手段は、前記区分領域の白度の平均値を取得し、前記検出対象領域の前記区分領域のうち、前記白度の平均値が所定の値以上である前記区分領域を白区分領域として検出する。

この態様によれば、画像処理装置は、赤目候補領域における赤目領域の周辺の白色の領域を効率的に高精度に検出することができる。

上記の目的を達成するために、本発明の第２の側面によれば、カラー画像における赤目現象の発生している赤目を含む赤目候補領域から赤目画素を特定する画像処理をコンピューターに実行させるコンピューター読み取り可能な画像処理プログラムにおいて、前記赤目候補領域における前記赤目の周辺にある一定面積の肌領域における画素から特徴量として赤値及び赤度値を取得し、前記各赤値に対応する前記赤度値の分布に基づいて、前記赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する分離曲線生成工程と、前記赤目画素を特定する対象領域の各画素について、前記画素の前記赤度値が、前記分離曲線における前記画素の赤値に対応する前記赤度値より大きい場合に、前記画素を赤目画素として特定する赤目画素特定工程と、を実行させる。

本発明の実施の形態に係るプリンター１の構成を示す斜視図である。 図１のプリンター１の機能構成例を示すブロック図である。 印刷処理対象画像ＴＩを模式的に示した図である。 赤目候補領域Ｐｅ１を表す図である。 赤目特定情報生成処理Ｚ１の流れを示すフローチャート図である。 肌領域検出処理を表す第１のフローチャート図である。 赤目候補領域Ｐｅ１における画素の赤度値の分布を表す図である。 赤目候補領域Ｐｅ１における赤目区分領域を表す図である。 １回目の検出処理における肌区分領域を表す図である。 肌領域検出処理を表す第２のフローチャート図である。 ２回目の検出処理における肌区分領域を表す図である。 ３回目の検出処理における肌区分領域を表す図である。 肌領域における画素の特徴量抽出処理を表すフローチャート図である。 赤値と赤度値を軸とする平面における赤目候補領域の画素分布を表す図である。 補正強度マップ生成処理の流れを示すフローチャート図である。 補正強度係数テーブルの例を示す図である。 補正処理Ｚ３の流れを示すフローチャート図である。

以下、図面にしたがって本発明の実施の形態について説明する。ただし、本発明の技術的範囲はこれらの実施の形態に限定されず、特許請求の範囲に記載された事項とその均等物まで及ぶものである。

本実施の形態例に係る画像処理装置は、赤目候補領域における赤目の周辺にある一定面積の肌領域の画素から特徴量を抽出し、当該特徴量に基づいて赤目画素とそれ以外の画素とを分離する分離曲線を生成し、赤目を特定する対象領域内の各画素について、当該画素の特徴量と分離曲線の値とを比較して赤目画素の特定を行うものである。

［プリンター１の構成の説明］
図１は、本発明の実施の形態としてのプリンター１のハードウェアの構成例を示すブロック図である。このプリンター１は、メモリーカード１８等から取得した画像データに基づき画像を印刷する、いわゆるダイレクトプリントに対応したカラーインクジェットプリンター、またはカラーレーザープリンターである。また、プリンター１は、印刷するカラー画像に対して、自動的に、赤目部分を検出し、その部分を自然な色（たとえば、黒色等）に補正する機能（以下、自動赤目補正機能と称する）を有している。

プリンター１は、ＣＰＵ１１、内部メモリー１２、操作部１３、表示部１４、プリンターエンジン１５、およびカードインターフェイス（カードＩ／Ｆ）１６を備えている。

ＣＰＵ（central processing unit）１１は、各部を制御して、内部メモリー１２に格納されているプログラムに応じて各種の処理等を実行する。

たとえばＣＰＵ１１は、自動赤目補正モードが設定されている場合、印刷に先立って、印刷されるカラー画像（以下、印刷処理対象画像ＴＩと称する）の中から、人物、犬などのペット等の目の画像を含む領域、またはユーザーが指定した点の周囲の領域等を検出する処理（以下、検出処理Ｚ０と称する）を実行する。また、ＣＰＵ１１は、検出した領域（以下、補正処理対象領域Ｐｅ１と称する）から、赤目画素を特定するための情報を生成する処理（以下、赤目特定情報生成処理Ｚ１と称する）を実行する。そして、ＣＰＵ１１は、各画素について、生成した情報に基づいて赤目画素を特定し（以下、赤目画素特定処理Ｚ２と称する）、特定された赤目画素の色を自然な色（たとえば、黒色等）に置き換える処理（以下、補正処理Ｚ３と称する）を実行する。

内部メモリー１２は、ＣＰＵ１１が実行する各種プログラムや各種データを格納しているＲＯＭ（Read Only Memory）、およびＣＰＵ１１が実行対象とするプログラムやデータを一時的に格納するＲＡＭ（Random Access Memory）によって構成されている。

操作部１３は、ボタンやタッチパネルの１つまたは複数により構成され、ユーザーによる操作内容をＣＰＵ１１に通知する。

表示部１４は、液晶ディスプレイ等により構成され、ＣＰＵ１１から供給された表示データに対応する画像を表示する。

プリンターエンジン１５は、ＣＰＵ１１から供給された印刷データに基づき印刷を行う印刷機構である。

カードインターフェイス（Ｉ／Ｆ）１６は、カードスロット１７に挿入されたメモリーカード１８との間でデータのやり取りを行うためのインターフェイスである。なお、この例では、メモリーカード１８にＲＧＢデータとしての画像データが格納されており、プリンター１は、カードインターフェイス１６を介してメモリーカード１８に格納された画像データの取得を行う。

プリンター１の各構成要素は、バス１９を介して互いに接続されている。

なおプリンター１は、さらに、他の機器（例えばデジタルスチルカメラやコンピューター）とのデータ通信を行うためのインターフェイスを備えていてもよい。

［プリンター１の機能構成例の説明］
図２は、検出処理Ｚ０、赤目特定情報生成処理Ｚ１、及び赤目画素特定処理Ｚ２、補正処理Ｚ３を実行するためのプリンター１の機能構成例を示すブロック図である。この機能は、ＣＰＵ１１が内部メモリー１２に記憶されている所定のプログラムを実行することより実現可能となる。

画像読取部２１は、印刷処理対象画像ＴＩを、たとえばメモリーカード１８から、カードＩ／Ｆ１６を介して読み取る。

図３は、印刷処理対象画像ＴＩを模式的に示した図である。ここではこの印刷処理対象画像ＴＩの中央の人物の左目部分３０に生じている赤目現象を処理対象とするものとする。

赤目候補領域取得部２２は、画像読取部２１により読み取られた印刷処理対象画像ＴＩのレプリカ（以下、単に、印刷処理対象画像ＴＩとも称する）に対して、検出処理Ｚ０を実行する。具体的には、たとえば人物の目の基本的な形状を表すテンプレートを利用したパターンマッチングによる方法（たとえば、特開２００６−２７９４６０号公報）といった公知の検出方法を用いて、目玉、白目、瞼、目頭、目尻等の部位を含む領域を取得する処理を実行する。赤目候補領域取得部２２は、さらに、公知の検出方法によって取得された領域から、赤みがかった瞳孔や虹彩を含む領域を検出する処理を実行して、左目部分を赤目候補領域Ｐｅ１として取得する。

図４は、赤目候補領域Ｐｅ１を表す図である。同図の赤目候補領域Ｐｅ１は、図３の印刷処理対象画像ＴＩにおける赤目現象が発生している瞳孔及び虹彩と、その周辺の白目、瞼、眉、目頭、目尻等の部位とを含む矩形領域である。

図２に戻り、赤目特定情報生成部２３は、赤目候補領域取得部２２によって取得された赤目候補領域Ｐｅ１に基づいて分離曲線を生成する。赤目特定情報生成部２３は、肌領域検出部３１、特徴量抽出部３２、及び分離曲線生成部３３によって構成される。

まず、赤目特定情報生成部２３の肌領域検出部３１は、赤目候補領域Ｐｅ１から赤目と推定される領域を検出し、当該領域周辺における一定面積の肌の領域を検出する。続いて、赤目特定情報生成部２３の特徴量抽出部３２は、肌領域検出部３１によって検出された肌領域の画素の画像データから特徴量として赤値と赤度値とを抽出する。そして、赤目特定情報生成部２３の分離曲線生成部３３は、抽出した各赤値に対応する赤度値の分布に基づいて、赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する。

処理の詳細については、赤目特定情報生成処理Ｚ１として後述する。

そして、赤目画素特定部２４は、赤目特定情報生成部２３によって生成された分離曲線に基づいて赤目画素を特定する赤目画素特定処理Ｚ２を行う。赤目画素特定部２４の補正強度マップ生成部４１は、赤目の特定対象領域の各画素について、画素の赤度値が分離曲線における当該画素の赤値に対応する赤度値（分離閾値）より大きい場合に、当該画素を赤目画素として特定する。具体的には、補正強度マップ生成部４１は、各画素について、画素の赤度値と前記分離閾値との比率に基づいて補正強度係数（補正強度情報）を決定し、補正強度マップＭａに格納する。補正強度係数は、赤目補正の度合いを表す値である。

補正部２５は、赤目画素特定部２４により生成された補正強度マップＭａに格納されている補正強度係数に応じた補正強度によって、印刷処理対象画像ＴＩの色を黒色等に置き換える（赤目を修正する）補正処理Ｚ３を実行し、印刷データを生成する。

図５は、自動赤目補正処理の流れを示すフローチャートである。ステップＳ１１において、赤目候補領域取得部２２は、画像読取部２１により読み取られた印刷処理対象画像ＴＩに対して検出処理Ｚ０を実行し、赤目候補領域Ｐｅ１を取得する。

赤目候補領域Ｐｅ１は、図４のように、赤目とその周辺の肌領域を含む領域である。ただし、赤目候補領域Ｐｅ１は、必ずしも、図４のように矩形領域である必要はなく、目全体を含んでいる必要もない。赤目候補領域Ｐｅ１は、赤目現象が発生している領域と、その周辺の肌領域を含んでいればよい。

続いて、ステップＳ１２〜１４において、赤目特定情報生成処理Ｚ１が行われる。

［赤目特定情報生成処理Ｚ１：肌領域検出処理の説明］
ステップＳ１２において、肌領域検出部３１は、赤目候補領域取得部２２によって取得された赤目候補領域Ｐｅ１を用いて、当該赤目候補領域Ｐｅ１が含む赤目周辺の一定面積の肌領域を検出する肌領域検出処理を実行する。

図６は、肌領域検出処置の詳細を示すフローチャート図である。肌領域検出部３１は、まず、赤目候補領域Ｐｅ１のサイズが適切なサイズであるか否かを判定する（Ｓ２０１）。具体的には、肌領域検出部３１は、赤目候補領域Ｐｅ１の縦、横の長さが共に、例えば各１０ピクセル以上であるか否かを判定する。

赤目候補領域Ｐｅ１の縦、横の長さが共に各１０ピクセルを超えない場合（Ｓ２０１のＮＯ）、肌領域検出部３１は、赤目候補領域Ｐｅ１のサイズが等分割するために十分でないと判定して、従来の方法によって分離曲線を生成する。一方、赤目候補領域Ｐｅ１の縦、横の長さが共に各１０ピクセル以上である場合（Ｓ２０１のＹＥＳ）、肌領域検出部３１は、赤目候補領域Ｐｅ１を等分割して区分領域を生成する（Ｓ２０２）。

次に、肌領域検出部３１は、赤目候補領域Ｐｅ１における各画素の赤度値の平均値と、赤度値の標準偏差値とを取得する（Ｓ２０３）。本実施の形態例における赤度値は、画素の赤色度合いを表す値である。画素の色成分がＲＧＢである場合、赤度値は、例えば、各画素の「Ｒ値／Ｇ値、また、Ｒ値／Ｂ値」、「Ｒ値−Ｂ値、また、Ｒ値−Ｇ値」、「Ｒ値×Ｒ値／Ｇ値×Ｂ値」、「２×Ｒ値−（Ｇ値＋Ｒ値）」等によって求められる。また、赤度値はＣＭＹＫやＨＳＶ等によって求められてもよい。

本実施の形態例における肌領域検出部３１は、赤度値として「Ｒ値／Ｇ値、また、Ｒ値／Ｂ値」を用いる。赤目現象には、瞳孔や虹彩が赤色になる場合以外に、瞳孔や虹彩が金色になる現象（いわゆる金目）がある。赤度値として「Ｒ値／Ｇ値、また、Ｒ値／Ｂ値」が用いられる場合、赤目画素の特定にはＲ値／Ｇ値が、金目画素の特定にはＲ値／Ｂ値が用いられる。

続いて、肌領域検出部３１は、区分領域における各画素の赤度値の平均値を算出して取得する（Ｓ２０４）。そして、次に、肌領域検出部３１は、赤目の画素を多く含む赤目区分領域を検出する（Ｓ２０５）。具体的には、肌領域検出部３１は、赤目候補領域Ｐｅ１の赤度値の「平均値＋標準偏差値」より大きい赤度値を平均値としてもつ区分領域を、赤目区分領域として検出する。この処理について、図７に基づいて説明する。

図７は、赤目候補領域Ｐｅ１における赤度値の分布を表す図である。同図において、横軸は赤度値（Ｒ値／Ｇ値）を、縦軸は赤目候補領域Ｐｅ１における画素数を表す。値７１は赤目候補領域Ｐｅ１における赤度値の平均値である。また、値７２は赤目候補領域Ｐｅ１における赤度値の「平均値＋標準偏差値」の値、値７３は「平均値−標準偏差値」の値であり、値７４は「平均値＋（標準偏差値×２）」の値、値７５は「平均値−（標準偏差値×２）」の値である。標準偏差値とは、赤度値の分布の分散度合いを表す値である。

赤目候補領域Ｐｅ１は、前述したとおり、赤目とその周辺の肌の画素を含んでいる。一般的に、赤目の画素の赤色度合い（赤度値）は高く、白目や睫、眉毛等の画素の赤色度合い（赤度値）は低い。そして、肌の画素の赤色度合い（赤度値）は、赤目の画素と、白目や睫、眉毛等の画素との間の値である。従って、図７における赤目候補領域Ｐｅ１の赤度値の平均値７１は、肌の画素の赤度値であると想定される。

また、一般的に、「平均値±標準偏差値」の値７５には全体の約２／３の要素が、「平
均値±（標準偏差値×２）」の値７６には全体の約１９／２０の要素が含まれる。そこで、肌領域検出部３１は、赤目画素が赤目候補領域Ｐｅ１の２／３よりも大きい赤度値を有する画素であると想定し、白目や睫、眉毛等の画素が赤目候補領域Ｐｅ１の２／３よりも小さい赤度値を有する画素であると想定する。つまり、肌領域検出部３１は、「平均値＋標準偏差値」より大きい赤度値７７を有する画素を赤目画素として、「平均値−標準偏差値」より小さい赤度値７８を有する画素を白目や睫、眉毛等の画素としてみなす。

従って、肌領域検出部３１は、赤目候補領域Ｐｅ１における赤度値の「平均値＋標準偏差値」より大きい値（図７の７７）を赤度値の平均値としてもつ区分領域を、赤目区分領域として検出する。

図８は、赤目補正領域Ｐｅ１における赤目区分領域を表す例図である。同図において、赤目候補領域Ｐｅ１は９×９の区分領域に等分割されている。同図において、赤目現象が発生している瞳孔及び虹彩の領域を含む４つの区分領域が赤目区分領域８２である。

なお、赤目候補領域Ｐｅ１の分割数は図８の例に限定されるものではなく、肌領域検出部３１は、赤目候補領域Ｐｅ１を例えば４×６のように等分割してもよい。さらに、肌領域検出部３１は、赤目候補領域Ｐｅ１を区分領域の数が所定の数範囲になるように等分割してもよいし、各区分領域の有する画素数が所定数以上になるように等分割してもよい。また、肌領域検出部３１は、赤目候補領域Ｐｅ１を画素数の都合上、等分割できない場合、赤目候補領域Ｐｅ１の画素数を等分割可能な画素数に調整してもよい。

また、区分領域の有する画素数は少数でないことが望ましい。というのも、後述する分離曲線生成処理において、分離曲線の元になる画素数が少ない場合、分離曲線の精度が低くなるためである。

図６のフローチャート図に戻り、続いて、肌領域検出部３１は、検出した赤目区分領域を包括する領域に外接する区分領域群を、検出対象領域として設定する（Ｓ２０６）。

図９は、検出対象領域９１を表す例図である。同図において、検出対象領域９１は破線で囲まれた領域であり、検出された赤目区分領域８２を包括する領域に外接する１２の区部領域群からなる。

図６のフローチャート図において、肌領域検出部３１は、続いて、検出対象領域（図９の９１）を設定した後、検出対象領域から肌の画素を多く含む肌区分領域を検出する（Ｓ２０７）。この処理について、図１０のフローチャート図に基づいて説明する。

図１０は、肌の区分領域を検出する処理の流れを示すフローチャート図である。まず、肌領域検出部３１は、検出対象領域から１つの区分領域を選択する（Ｓ２２１）。

続いて、肌領域検出部３１は、選択した区分領域の赤度値（Ｒ値／Ｇ値）の平均値と標準偏差値とが算出済みであるか否かを判別する（Ｓ２２２）。この処理は、選択した区分領域が赤目候補領域Ｐｅ１の外側にある場合に必要となる。肌領域検出部３１は、選択した区分領域の赤度値の平均値と標準偏差値とが未算出である場合（Ｓ２２２のＮＯ）、当該区分領域の赤度値の平均値と標準偏差値とを算出する（Ｓ２２３）。

次に、肌領域検出部３１は、選択した区分領域の赤度値の平均値と標準偏差値とに基づいて、当該区分領域が肌区分領域であるか否かを判定する（Ｓ２２４）。具体的には、肌領域検出部３１は、選択した区分領域の赤度値の平均値が、赤目候補領域Ｐｅ１の赤度値の「標準偏差値±平均値」範囲の値（図７の７５）である場合（Ｓ２２４のＹＥＳ）、当
該区分領域を肌区分領域と判定する。

図７で前述したとおり、赤目候補領域Ｐｅ１における赤度値の平均値７１は、肌の画素の赤度値であるといえる。そこで、肌領域検出部３１は、赤目候補領域Ｐｅ１における肌の画素は、平均値７１前後の値、即ち、「平均値±標準偏差値」範囲の値（図７の７５）を赤度値としてもつ画素であると想定する。従って、肌領域検出部３１は、赤目候補領域Ｐｅ１における赤度値の「平均値±標準偏差値」範囲の値（図７の７５）を、赤度値の平均値としてもつ区分領域を肌区分領域であるとみなす。

肌領域検出部３１は、ステップＳ２２４がＹＥＳであれば、選択した区分領域を肌区分領域として検出してもよいが、さらに、ステップＳ２２５の判定を行って肌区領域を絞り込んでもよい。というのも、選択した区分領域の赤度値の平均値が、赤目候補領域Ｐｅ１の赤度値の「平均値±標準偏差値」範囲の値（図７の７５）であっても（Ｓ２２４のＹＥＳ）、当該区分領域が肌区分領域ではないことがあるためである。以下、具体例を述べて説明する。

まず第１に、例えば、区分領域が赤目とその周辺の赤目現象が発生していない白目の画素を含む場合を挙げる。赤目の画素の赤度値は高いが、白目の画素の赤度値は低い。そのため、当該区分領域の赤度値の平均値はその間の値となり、当該区分領域の赤度値の平均値が赤目候補領域Ｐｅ１の赤度値の「平均値±標準偏差値」の値（図７の７５）に該当することがある。

また、第２に、例えば、区分領域が肌と眉毛や睫等の画素を含む場合を挙げる。眉毛や睫等は黒っぽい色であり、その画素の赤度値は低い。しかし、例えば、区分領域における眉毛や睫等が赤みがかっている場合等、第１の例と同様にして、当該区分領域の赤度値の平均値が、赤目候補領域Ｐｅ１の赤度値の「平均値±標準偏差値」の値（図７の７５）に該当することがある。

このように、肌区分領域ではない区分領域であっても、肌区分領域として検出されてしまうことがある。このため、肌領域検出部３１は、ステップＳ２２５において、区分領域と赤目候補領域Ｐｅ１との標準偏差値を比較して、さらに肌区領域を絞り込む。

肌区分領域における各画素の赤度値はほぼ一定であるため、肌区分領域における赤度値のばらつきは小さく標準偏差値は小さい。これに対して、前述した赤目と白目、または、眉毛と肌が含む区分領域は複数の部位を含むため、その赤度値は分散し標準偏差値が大きい。つまり、赤目候補領域Ｐｅ１の赤度値の標準偏差値を大きく超える値を赤度値の標準偏差値としてもつ区分領域は、肌区分領域である可能性が低いといえる。

そこで、肌領域検出部３１は、区分領域の赤度値の分散度合い（標準偏差値）が、赤目候補領域Ｐｅ１の赤度値の分散度合い（標準偏差値）を大きく超える場合、当該区分領域を肌区分領域から除外する。具体的には、肌領域検出部３１は、選択した区分領域の赤度値の標準偏差値が「赤目候補領域Ｐｅ１の標準偏差値×１．２」の値を超える場合（Ｓ２２５のＮＯ）、当該区分領域を肌区分領域として検出しない。肌領域検出部３１は、ステップＳ２２５の判定を重ねて行うことにより、さらに高精度に肌区分領域を検出することができる。

なお、上記の例において、肌領域検出部３１は、赤目候補領域Ｐｅ１の標準偏差値に係数１．２を乗じた値を区分領域の赤度値の標準偏差値と比較しているが、当該係数は１．２に限定されるものではない。肌領域検出部３１は、区分領域の赤度値の分散度合いが、赤目候補領域Ｐｅ１の赤度値の分散度合いを大きく超えるか否かを判定できればよい。

そして、「Ｓ２２４がＹＥＳ、かつ、Ｓ２２５がＹＥＳ」である場合、肌領域検出部３１は、選択した区分領域を肌区分領域として検出し、肌区分領域のカウント数を１増加させる。一方、「Ｓ２２４がＮＯ、または、Ｓ２２５がＮＯ」である場合、肌領域検出部３１は、当該区分領域が白区分領域であるか否かを判定する（Ｓ２２７）。

白区分領域は、白色の画素、つまり、白目の画素を多く含む区分領域である。ステップＳ２２７において、肌領域検出部３１は、選択した区分領域における各画素の白度値の平均値が所定の値以上であるか否かを判定して白区分領域を検出する。白度値とは、画素の白色度合いを示す値である。画素の色成分がＲＧＢである場合、白度値は、例えば、各画素の「Ｒ値＋Ｇ値＋Ｂ値（０〜７６８）」等によって求められる。そこで、肌領域検出部３１は、区分領域における各画素の白度値「Ｒ値＋Ｇ値＋Ｂ値」の平均値が例えば「６００」以上である場合、当該区分領域を白の画素を多く含む白区分領域として検出し、白区分領域のカウント数を１増加させる。

ただし、白領域の判定方法は、上記の例に限定されるものではない。白度値「Ｒ値＋Ｇ値＋Ｂ値」は６００以外の値と比較されてもよいし、白度値が画素の輝度や彩度等によって求められてもよい。肌領域検出部３１は、区分領域が白の画素を多く含むか否かを判定できればよい。

そして、肌領域検出部３１は、検出対象領域における全ての区分領域について、肌区分領域、及び、白区分領域の検出処理（Ｓ２２１〜Ｓ２２８）を終えると（Ｓ２２９のＹＥＳ）、図６のフローチャート図に戻る。

図６において、続いて、肌領域検出部３１は、検出対象領域から検出した肌領域が一定面積に達したか否かを判定する（Ｓ２０８）。例えば、本実施の形態例における肌領域検出部３１は、肌区分領域数が検出した赤目区分領域数の１０倍に達しているか否かを判定する。例えば、図９の場合、赤目区分領域数は４つである。そのため、肌領域検出部３１は、肌区分領域の数が４０（４×１０）に達しているか否かを判定する。

肌区分領域数が一定数に達していない場合（Ｓ２０８のＮＯ）、肌領域検出部３１は、肌領域の検出処理（Ｓ２０７、図１０）を５回（Ｌｏｏｐ）行ったか否かを判定する（Ｓ２０９）。この場合、まだ１回目（Ｌｏｏｐ＝１）の検出処理であるため（Ｓ２０９のＮＯ）、肌領域検出部３１は、検出対象領域に外接する区分領域群を検出対象領域に設定し直して（Ｓ２１０）、再度、肌領域の検出処理を行う（Ｓ２０７、図１０）。

一方、検出対象内の肌領域の検出処理（Ｓ２０７、図１０）が５回（Ｌｏｏｐ≧５）に達した場合（Ｓ２０９のＹＥＳ）、肌領域検出部３１は、検出対象領域を拡張しても赤目区分領域周辺における一定面積の肌区分領域を検出できなかったとして、補正強度を下げる調整フラグをＯＮに設定する（Ｓ２１２）。一定面積の肌領域を検出できない場合、後述する分離曲線の精度が低くなる。そのため、この場合、肌領域検出部３１は、補正強度を下げる調整フラグをＯＮに設定することにより、後述する赤目画素特定処理Ｚ２において各画素の補正強度係数を小さく調整させて赤目補正の度合いを抑える。

一方、肌区分領域数が一定数に達している場合（Ｓ２０８のＹＥＳ）、肌領域検出部３１は、さらに、前述した白区分領域数が１つ以上あるか否か判定する（Ｓ２１１）。白区分領域がない場合（Ｓ２１１のＮＯ）、赤目区分領域の周辺に白目の画素を多く含む区分領域が存在していないことを意味する。一般的に、赤目の周辺には白目の領域が存在することから、白区分領域がない場合（Ｓ２１１のＮＯ）、肌領域検出部３１は、そもそも赤目候補領域Ｐｅ１に目が含まれていない可能性があるものとみなし、補正強度を下げる調
整フラグをＯＮに設定する（Ｓ２１２）。この場合も、上記と同様に、補正強度係数が小さく調整され赤目補正の度合いが抑えられる。白領域数が１つ以上ある場合（Ｓ２１１のＹＥＳ）、補正強度の調整は行われない。

以上の処理が、肌領域検出処理である。以下、上記の処理を図９の赤目候補領域Ｐｅ１に基づいて説明する。

図９の赤目候補領域Ｐｅ１の例において、斜線で表されている区分領域が肌区分領域であり、横線で表されている区分領域９２が白区分領域である。肌領域検出部３１は、１回目（Ｌｏｏｐ＝１）の検出処理において、検出対象領域９１から、肌区分領域を「７」、白区分領域を「１」検出する。しかしながら、肌区分領域数「７」が「４０」（赤目区分領域数４×１０）に達していないため、肌領域検出部３１は、続いて、検出対象領域９１に外接する区分領域群を検出対象領域（図１１の１１１）に設定し直して、再度、肌領域の検出処理を行う。

図１１は、２回目（Ｌｏｏｐ＝２）の検出処理を表す図である。検出対象領域１１１は、破線で囲まれた領域であり、1回目の検出処理の検出対象領域（図９の９１）に外接する区分領域群である。そして、肌領域検出部３１は、２回目（Ｌｏｏｐ＝２）の検出処理において、検出対象領域１１１から、新たに、「１２」の区分領域を肌区分領域として検出する（肌区分領域数：１９）。同様にして、肌区分領域数「１９」が「４０」に達していないため、肌領域検出部３１は、続いて、検出対象領域１１１に外接する区分領域群を検出対象領域（図１２の１２１）に設定し直して、再度、肌領域の検出処理を行う。

図１２は、３回目（Ｌｏｏｐ＝３）の検出処理を表す図である。検出対象領域１２１は、破線で囲まれた領域であり、２回目の検出処理の検出対象領域（図１１の１１１）に外接する区分領域群である。そして、肌領域検出部３１は、３回目（Ｌｏｏｐ＝３）の検出処理において、検出対象領域１２１から、新たに、「２６」の区分領域を肌区分領域として検出する（肌区分領域数：４５）。肌区分領域数「４５」が「４０」に達したため、肌領域検出部３１は、肌領域検出処理を終了する。また、同図において、白領域が「１」存在するため、補正強度は調整されない。

このようにして、本実施の形態例における肌領域検出部３１は、赤目候補領域Ｐｅ１の赤度値の平均値と標準偏差値とに基づいて、赤目区分領域、及び肌区分領域の赤度値の平均値を想定する。これにより、肌領域検出部３１は、赤目区分領域、及び肌区分領域を高精度に効率的に検出する。

また、本実施の形態例における肌領域検出部３１は、赤目区分領域を包括する領域に外接する領域を検出対象領域としてまず設定し、さらに、当該検出対象領域を赤目区分領域の周辺に拡張しながら、一定面積の肌区分領域を検出する。これにより、肌領域検出部３１は、赤目周辺の一定面積の肌領域を効率的に検出することができる。

なお、本実施の形態例における肌領域検出部３１は、赤目区分領域数の１０倍の肌区分領域を検出しているが、この例に限定されるものではない。肌領域検出部３１は、赤目区分領域の面積に応じた、赤目区分領域の周辺一帯の肌区分領域を検出できればよい。従って、肌領域検出部３１は、検出する肌区分領域数を、例えば、赤目区分領域数の約５倍等に設定してもよい。

また、本実施の形態例における肌領域検出部３１は、区分領域の白度の平均値を所定の値と比較することによって、当該区分領域が白区分領域であることを判定する。これにより、肌領域検出部３１は、赤目周辺に白目の領域が存在するか否かを判定して、赤目候補
領域Ｐｅ１がそもそも目を含んでいるか否かを判定することができる。そして、肌領域検出部３１は、赤目候補領域Ｐｅ１が目を含んでいない可能性がある場合、赤目画素の補正度合いを抑えるように調整させることができる。

また、赤目区分領域、及び肌区分領域を検出する方法は、必ずしも、上記の例に限定されるものではない。肌領域検出部３１は、例えば、赤目の画素、及び、肌の画素の色範囲を予め想定しておき、当該色範囲の値を平均値として有する区分領域を各区分領域として検出してもよい。白区分領域についても、同様である。

以上のように、肌領域検出部３１は、図５のステップＳ１２において、赤目周辺の一定面積の肌領域を取得する。

［赤目特定情報生成処理Ｚ１：肌領域の特徴量抽出処理の説明］
続いて、図５のステップＳ１３において、赤目特定情報生成部２３の特徴量抽出部３２は、肌領域検出部３１によって取得された肌領域における画素の特徴量を抽出する特徴量抽出処理を行う。特徴量とは、画素の色の赤度値及び赤値である。本実施の形態例の特徴量抽出部３２は肌領域検出部３１と同じ赤度値「Ｒ値／Ｇ値、Ｒ値／Ｂ値」を用いるが、特徴量抽出部３２は、肌領域検出部３１と異なる算出方法による赤度値を用いてもよい。また、赤値は赤色成分の値であり、色成分がＲＧＢである場合、Ｒ成分値（Ｒ値）を示す。

図１３は、特徴量抽出処理の詳細を示すフローチャート図である。初めに、特徴量抽出部３２は、肌区分領域における各画素の赤値（Ｒ値）を取得する（Ｓ３１）。続いて、特徴量抽出部３２は、赤値（Ｒ値）の軸の範囲（０〜２５５）を１６等分して得られた区間（以下、赤成分区間Ｌｒと称する）毎に、その赤成分区間Ｌｒの赤値（Ｒ値）を有する画素の赤度値（Ｒ値／Ｇ値）の最大値をそれぞれ求める（Ｓ３２）。

抽出された特徴量は、適宜、内部メモリー１２に記憶される。

［赤目特定情報生成処理Ｚ１：分離曲線生成処理の説明］
続いて、図５のステップＳ１４において、赤目特定情報生成部２３の分離曲線生成部３３は、特徴量抽出部３２によって取得された特徴量に基づいて分離曲線を生成する。本実施の形態例における分離曲線生成部３３は、各赤成分区間ＬｒのＲ値／Ｇ値の分布に基づいて分離曲線を生成する。

図１４は、赤目候補領域Ｐｅ１の各画素を、Ｒ値とＲ値／Ｇ値を軸とする平面に、そのＲ値とＲ値／Ｇ値に対応する位置にプロットした図である。白抜きの四角印（□印）は、赤色の赤目現象が生じている画素（以下、赤色赤目画素と称する）を示し、黒塗りの四角印（◆印）は肌の画素を示す。また、灰色の丸印（●印）は、赤目及び肌以外の画素、例えば、白目や眉毛等の画素を示す。以下、赤色の赤目現象が生じていない画素（◆印、●印の画素）を、非赤色赤目画素と称する。

図１４において、赤色赤目画素は、肌の画素が集まっている領域の上方に分散して分布している。また、同図において、肌の画素分布の上方の境界線は、肌の画素と赤色赤目画素とを分離している。つまり、赤値と赤度値とを軸とする平面において、肌の画素の赤度値の最大値に基づく曲線１４１は、肌の画素と赤色赤目画素を分離する。従って、分離曲線生成部３３は、例えば、肌領域における赤成分区間Ｌｒ毎のＲ値／Ｇ値（赤度値）の最大値に基づいて曲線１４１を生成することによって、赤色赤目画素と非赤色赤目画素とを分離する分離曲線を生成することができる。

また、図１４において、赤成分区間Ｌｒ１４３、１４４は、肌の画素が分布していない。そのような赤成分区間Ｌｒ１４３、１４４のうち、Ｒ値（赤値）の小さい区間１４３には眉毛や睫の画素が、Ｒ値（赤値）の大きい区間１４４には白目の画素が分布している。そして、眉毛や睫、白目の画素の赤度値は低く、本実施の形態例における赤度値（Ｒ値／Ｇ値）の値が「１」より大きい値になる可能性は低い。そのため、分離曲線生成部３３は、肌の画素が分布していない赤成分区間Ｌｒについては、例えば、赤度値（Ｒ値／Ｇ値）が「１」、つまり、無彩色の赤度値に基づいて分離曲線を生成する。

なお、金色の赤目現象が発生している場合は、以下のように分離曲線を生成する。金色の赤目現象が生じている画素（以下、金色赤目画素と称する）は、黄色系の色であるため、Ｒ値とＲ値／Ｇ値を軸とする平面では、非赤色赤目画素の分布の中に含まれてしまう。それに対して、Ｒ値とＲ値／Ｂ値を軸とする平面では、金色赤目画素の分布は、Ｒ値とＲ値／Ｇ値を軸とする平面における赤色赤目画素と同様に、肌の画素が集まっている領域の上方に分散して分布する。

従って、分離曲線生成部３３は、金色赤目画素を特定する場合、肌領域における赤成分区間Ｌｒ毎のＲ値／Ｂ値（赤度値）の分布に基づいて分離曲線を生成する。これにより、分離曲線生成部３３は、金色赤目画素と非金色赤目画素とを分離する分離曲線を生成することができる。

また、分離曲線生成部３３は、次のように分離曲線を生成してもよい。分離曲線生成部３３は、赤成分区間Ｌｒの赤度値の最大値ではなく、赤成分区間Ｌｒにおける各赤値に対応するそれぞれの赤度値の最大値の平均値に基づいて分離曲線を生成してもよい。この場合、特徴量抽出部３２は、図１３のステップＳ３２において、特徴量として、赤成分区間Ｌｒ毎に、その赤成分区間Ｌｒの赤値を有する各画素のそれぞれの赤度値の最大値の平均値を求める。

さらに、分離曲線生成部３３は、例えば、各赤成分区間Ｌｒの赤度値の「平均値＋（標準偏差値×２）」の値に基づいて分離曲線を生成してもよい。前述したとおり、「平均値±標準偏差値×２」の値範囲には全体の１９／２０の要素が含まれる。これにより、肌区分領域が肌以外の赤度の高い画素を多少含んでいるような場合であっても、肌の画素の境界に沿った分離曲線が生成される。この場合、特徴量抽出部３２は、図１３のステップＳ３２において、特徴量として、赤成分区間Ｌｒ毎に、その赤成分区間Ｌｒの赤値を有する各画素の赤度値の平均値と標準偏差値を求める。

なお、図１４における破線の分離曲線１４２は、従来の画像処理装置における分離曲線である。従来の画像処理装置は、赤目候補領域Ｐｅ１の肌、赤目、及び白目、眉毛等の画素を含む全ての画素の特徴量の平均値に対して、当該平均値が肌の画素と赤目画素とを分離する値となるように調整を加え、分離曲線を生成していた。そのため、従来の分離曲線１４２は、肌の画素と赤目の画素とを正確に分離するものではなかった。その結果、従来の画像処理装置は、赤目画素を特定する精度が低かった。

それに対して、本実施の形態例における分離曲線１４１は、赤目周辺の一定面積の肌領域のみの画素の特徴量に基づいて生成される。つまり、分離曲線生成部３３は、肌以外の画素が除かれた、標準偏差値（分散度合い）の小さい肌の画素群の特徴量に基づいて分離曲線を生成する。そのため、分離曲線生成部３３は、分離曲線生成時に従来のような調整を行う必要がなく、肌の画素と赤目の画素とを高精度に分離する分離曲線１４１を生成することができる。これにより、分離曲線１４１は、非赤目画素と赤目画素とを正確に分離し、赤目画素を高精度に特定することができる。

また、本実施の形態例の分離曲線生成部３３は、Ｒ（赤値）＝０、Ｒ＝２２５、および各赤成分区間Ｌｒの中央値（１６点）に対応付けてＲ値／Ｇ値（赤度値）の分布に基づく値を、分離曲線の制御点として記憶し、その制御点の間は両隣の制御点に基づいて補完するものとする。このように制御点のみを記憶することで、画像処理装置の記憶容量が節約される。

以上のようにして、本実施の形態例のおける分離曲線生成部３３は、赤度値としてＲ値／Ｇ値を用いた赤目画素特定用の分離曲線と、赤度値としてＲ値／Ｂ値を用いた金目画素特定用の分離曲線を生成する。分離曲線生成部３３は、生成した分離曲線を内部メモリー１２に記憶する。

［赤目画素特定処理Ｚ２：補正強度マップ生成処理の説明］
分離曲線の生成後、赤目画素特定部２４は、図５のステップＳ１５において赤目画素特定処理Ｚ２を実行する。

なお、赤目画素特定部２４が赤目画素か否かを特定する対象の領域（以下、特定対象領域）は、赤目候補領域Ｐｅ１でなくてもよい。赤目画素特定部２４は、肌領域検出処理における検出対象領域（図９の９１、図１１の１１１、図１２の１２１）と赤目区分領域（図８の８２）とを含む領域を特定対象領域にしてもよいし、赤目区分領域（図８の８２）のみを特定対象領域にしてもよい。

また、本実施の形態例における赤目画素特定部２４は、赤目画素の特定結果を示す情報として補正強度マップＭａを生成する。補正強度マップＭａは、特定対象領域の各画素に対応する格納部を有する。格納部を画素であると仮定すると、補正強度マップＭａは、少なくとも、特定対象領域と同じ画素サイズを有している。本実施の形態例における赤目画素特定部２４は、特定対象領域における画素が赤目画素であると推定できる場合は１２８以上の値を、そうでない場合には１２８より小さい値を、対応する補正強度マップＭａの各格納部（すなわち各画素）に格納する。

図１５は、補正強度マップ生成処理の流れを示すフローチャート図である。まず、補正強度マップ生成部４１は、特定対象領域から注目する１つの画素（以下、注目画素と称する）を選択し（Ｓ５１）、注目画素のＲ値（赤値）、Ｒ値／Ｇ値、およびＲ値／Ｂ値（赤度値）を取得する（Ｓ５２）。

次に、補正強度マップ生成部４１は、注目画素のＲ値に対応する分離曲線の値（以下、分離閾値と称する）を取得する（Ｓ５３）。具体的には、注目画素のＲ値における分離閾値としてのＲ値／Ｇ値（以下、分離閾値Ｒ／Ｇと称する）、及び、分離閾値としてのＲ値／Ｂ値（以下、分離閾値Ｒ／Ｂと称する）が求められる。

続いて、補正強度マップ生成部４１は、ステップＳ５３で求められた分離閾値に応じた補正強度係数を求める（Ｓ５４）。たとえば、図１６に示す補正強度係数テーブルが参照されて、注目画素のＲ値／Ｇ値と分離閾値Ｒ／Ｇの比に対応する補正強度係数と、注目画素のＲ値／Ｂ値と分離閾値Ｒ／Ｂの比に対応する補正強度係数とが求められ、大きい方の補正強度係数が、その注目画素の補正強度係数とされる。そして補正強度マップ生成部４１は、求めた補正強度係数を、注目画素に対応する補正強度マップＭａの格納部に格納する。

注目画素のＲ値／Ｇ値と分離閾値Ｒ／Ｇの比が１以上となる画素は、Ｒ値とＲ値／Ｇ値を軸とする平面において（図１４）、分離曲線上またはそれより上方に存在する。また注目画素のＲ値／Ｂ値と分離閾値Ｒ／Ｂの比が１以上となる画素は、Ｒ値とＲ値／Ｂ値を軸
とする平面において、分離曲線上またはそれより上方に存在する。したがって注目画素のＲ値／Ｇ値と分離閾値Ｒ／Ｇの比、または注目画素のＲ値／Ｂ値と分離閾値Ｒ／Ｂの比が１以上になったときは、注目画素は、赤目画素の分布の中の画素、すなわち赤目画素として推定され、その画素には、１２８以上の値が割り当てられる。

一方、注目画素のＲ値／Ｇ値と分離閾値Ｒ／Ｇの比が１より小さい画素は、Ｒ値とＲ値／Ｇ値を軸とする平面において（図１４）、分離曲線より下方に存在する。また注目画素のＲ値／Ｂ値と分離閾値Ｒ／Ｂの比が１より小さい画素は、Ｒ値とＲ値／Ｂ値を軸とする平面において、分離曲線より下方に存在する。したがって注目画素のＲ値／Ｇ値と分離閾値Ｒ／Ｇの比、および注目画素のＲ値／Ｂ値と分離閾値Ｒ／Ｂの比がいずれも１より小さいときは、注目画素は、非赤目画素の分布の中の画素、すなわち非赤目画素として推定され、１２８より小さな値が割り当てられる。

なお、非赤目画素と推定された画素においても、Ｒ値／Ｇ値と分離閾値Ｒ／Ｇの比（またはＲ値／Ｂ値と分離閾値Ｒ／Ｂの比）が０．８以上である場合は（すなわち分離曲線から２割下側に分布する画素については）、ある大きさの補正強度係数が割り与えられる。その結果、その画素は、補正処理Ｚ３によりその補正強度係数に応じた補正強度で色補正される。これにより、瞳孔や虹彩でなくても赤目現象の影響を受けている画素にある程度の補正が行われる。

次に、補正強度マップ生成部４１は、特定対象領域内のすべての画素を注目画素として選択したか否かを判定する（Ｓ５５）。まだ注目画素として選択されていない画素が存在する場合（Ｓ５５のＮＯ）、補正強度マップ生成部４１は、ステップＳ５１に戻り、他の画素を注目画素として選択し、ステップＳ５２以降の処理を同様に実行する。

ステップＳ５５で、特定対象領域内のすべての画素が注目画素として選択されると（Ｓ５５のＹＥＳ）、補正強度マップＭａが生成される。補正強度マップＭａには、赤目画素であると推定された画素については１２８以上の値が、非赤目画素であると推定された画素については１２８より小さな値が格納される。

また、肌領域検出処理において前述した補正強度を下げる調整フラグがＯＮに設定されている場合（図６のＳ２１２）、補正強度マップ生成部４１は、特定対象領域の画素の補正強度係数を下げる。これにより、たとえ非赤目画素が誤って赤目画素として特定された場合であっても、後述する補正処理Ｚ３における赤目補正の度合いが小さく抑えられる。

以上のようにして、赤目画素特定部２４は、分離曲線に基づいて特定対象領域の各画素についての補正強度マップＭａを生成する。

なお、本実施の形態例にける赤目画素特定部２４は、特定対象領域の各画素について補正強度係数を取得しているが、必ずしも補正強度係数を取得する必要はない。赤目画素特定部２４は、特定対象領域の各画素について赤目画素であるか否かを特定するだけでもよい。

［補正処理Ｚ３の説明］
続いて、補正部２５は、図５のステップＳ１６において、補正強度マップＭａに基づいて補正処理Ｚ３を実行する。

図１７は、補正処理Ｚ３の流れを示すフローチャート図である。まず、補正部２５は、特定対象領域から注目する画素を選択し（Ｓ６１）、補正強度マップＭａから、注目画素に相当する格納部に格納されている補正強度係数を読み取る（Ｓ６２）。

続いて、補正部２５は、読み取った補正強度係数に応じて、注目画素の色を調整する（Ｓ６３）。たとえば補正強度係数の大きさに応じた濃さの黒色を選択し、注目画素の色を、その黒色に置き換える。

たとえば式（１）により、特定対象領域の注目画素ｉとその両隣の画素i-1，画素i+1のＲＧＢがブレンドされる。そして式（２）により、ブレンドされたＲＧＢ（式（１）中、Ｒ’，Ｇ’，Ｂ’）を用いて、ターゲットカラー（式（２）中、TargetColor）としてグレー色が求められる。

さらに式（３）により、注目画素の補正強度係数（式（３）中、Intensity）を用いて、ターゲットカラーと注目画素のＲＧＢがブレンドされて、置き換えられる色（式（３）中、Ｒnew、Ｇnew，Ｂnew）が決定される。そして注目画素の色が、ここで求められた色に置き換えられる。

続いて、補正部２５は、特定対象領域内のすべての画素を注目画素として選択したか否かを判定する（Ｓ６４）。まだ注目画素として選択されていない画素が存在する場合（Ｓ６４のＮＯ）、補正部２５は、ステップＳ６１に戻り、他の画素を注目画素として選択し、ステップＳ６２以降の処理を同様に実行する。

そして、補正部２５は、特定対象領域内のすべての画素を選択した場合（Ｓ６４のＹＥＳ）、補正処理を終了する。このように、補正部２５は、補正強度係数の大きさに応じた度合いで色補正を行う。

以上のようにして、本実施の形態例における画像処理装置は、赤目候補領域における赤目周辺の一定面積の肌領域を検出し、当該肌領域の画素から特徴量として赤度値、赤値を抽出し、赤値に対応する赤度値の分布に基づいて、赤色画素と非赤目画素とを分離する各赤値に対応する赤度値を有する分離曲線を生成する。そして、赤目画素を特定する対象領域の各画素について、画素の赤度値が、分離曲線における当該画素の赤値に対応する赤度値（分離閾値）より大きい場合に、前記画素を赤目画素として特定する。

このように、本実施の形態例における画像処理装置は、肌領域の画素のみの特徴量に基づいて分離曲線を生成することにより、肌の画素と赤目画素、即ち、非赤目画素と赤目画素とを高精度に分離する分離曲線を生成することができる。これにより、画像処理装置は、高精度に赤目画素を特定することができる。

また、本実施の形態例における画像処理装置は、赤目周辺の一定以上の面積の肌領域における画素の特徴量に基づいて分離曲線を生成することにより、十分な量の肌の画素の特徴量に基づいて分離曲線を生成することができる。これにより、画像処理装置は、例えば、サイズの大きい特定対象領域や、肌区分領域以外の肌の画素についても、赤目画素の判定を高精度に行うことができる。

また、赤目候補領域Ｐｅ１の赤目は、当該赤目候補領域Ｐｅ１の中心ではなく、端に位置している場合がある。その場合であっても、本実施の形態例における画像処理装置は、赤目を中心としてその周辺にある一定面積の肌領域を検出することにより、赤目周辺の肌の画素の特徴量に基づいて分離曲線を生成する。これにより、画像処理装置は、赤目周辺の領域の画素について、より高精度に赤目画素を特定することができる。

なお、本実施の形態例における画像処理装置は、赤目候補領域Ｐｅ１を等分割して区分領域を生成し、赤目区分領域の周辺にある一定面積の肌区分領域を検出し、当該肌区分領域の特徴量に基づいて分離曲線を生成する。これにより、画像処理装置は、各画素について、赤目画素、及び肌の画素であるか否かを判定する必要がないため、より効率的に肌領域に基づく分離曲線を生成し赤目画素の特定を行うことができる。

ただし、画像処理装置は、必ずしも、区分領域単位で肌領域を検出しなくてもよい。画像処理装置は、例えば、赤目候補領域Ｐｅ１のサイズが小さい場合等に（図６のステップＳ２０１のＮＯ）、赤目候補領域Ｐｅ１を等分割せずに、画素単位に赤目候補領域Ｐｅ１の赤目画素とその周辺の一定面積の肌画素を検出し、検出した肌画素の特徴量に基づいて分離曲線を生成してもよい。これにより、画像処理装置は、赤目候補領域Ｐｅ１を等分割しない場合であっても、赤目画素を高精度に特定することができる。

また、本実施の形態例における画像処理装置は、赤成分区間Ｌｒ毎に、赤成分区間Ｌｒの赤値に対応する赤度値の分布に基づいて分離曲線を生成することによって、肌領域の画素数が少ない場合であっても、肌領域の画素分布の境界に沿った分離曲線を生成することができる。画素数が少ない場合、赤値毎に、赤値に対応する赤度値に基づいて分離曲線を生成すると、凹凸の大きい分離曲線が生成されることがある。それに対し、本実施の形態例における画像処理装置は、赤成分区間Ｌｒ毎の赤値に対応する赤度値の分布に基づいて分離曲線を生成するため、分離曲線の凹凸のばらつきを抑えることができる。

これは、例えば、プリンター１の内部メモリー１２の作業領域が少ない場合、赤目候補
領域Ｐｅ１が印刷処理対象画像ＴＩの縮小画像から検出される場合等に有効である。

また、本実施の形態例の画像処理装置は、特定対象領域の各画素について、画素の赤度値と分離閾値との比較によって補正強度係数を設定する。これにより、画像処理装置は、特定対象の画素が赤目か否かを特定するだけでなく、赤目画素における補正度合い情報（補正強度情報）を取得することができる。

また、赤目画素特定部２４は、内部メモリー１２の作業領域が小さいため、赤目候補領域Ｐｅ１が例えば１ラインずつしか供給されず１ラインずつしか処理できない場合であっても、補正強度マップＭａを生成することができる。また、同様にして、補正部２５は、補正処理Ｚ３において、１ラインずつしか処理できない場合であっても、注目画素以外にその両隣の画素を参照するだけで足るため処理を行うことができる。

また、本実施の形態例における画像処理装置は、非赤目画素として推定された画素に対しても、赤度値と分離閾値との比が０．８以上である場合は（即ち、非赤目画素の分布側の画素であっても、当該画素の赤度値と分離閾値との比が所定の範囲内である場合は）、ある大きさの補正強度係数を付与する。これにより、画像処理装置は、赤目現象に関与している可能性がある画素についても補正することができ、より適切に赤目を補正することができる。

［変形例］
また以上においては、プリンター１を利用した場合を例として説明したが、コンピューター、デジタルビデオカメラ、またはデジタルスチルカメラ等の他の画像処理装置に適用することができる。すなわち画像処理装置にインストールされる赤目補正ソフトウェア等に実装することができる。この場合、補正強度マップＭａを生成する機能が画像処理装置に実装され、画像処理装置からプリンターや表示側に補正強度マップＭａが提供され、プリンターや表示側で色補正が実行されるようにすることもできる。

また、上述した機能は、コンピューター等によって実現される場合、上述した機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピューターで実行することにより、処理機能がコンピューター上で実現される。処理内容を記述したプログラムは、コンピューターで読み取り可能な記録媒体に記録しておくことができる。コンピューターで読み取り可能な記録媒体としては、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリーなどがある。磁気記録装置には、ハードディスク装置（ＨＤＤ）、フレキシブルディスク（ＦＤ）、磁気テープなどがある。光ディスクには、ＤＶＤ（Digital Versatile Disk）、ＤＶＤ−ＲＡＭ、ＣＤ−ＲＯＭ（Compact Disk ROM）、ＣＤ−Ｒ（Recordable）／ＲＷ（ReWritable）などがある。光磁気記録媒体には、ＭＯ（Magneto-Optical disk）などがある。

プログラムを流通させる場合には、たとえば、そのプログラムが記録されたＤＶＤ、ＣＤ−ＲＯＭなどの可搬型記録媒体が販売される。また、プログラムをサーバーコンピューターの記憶装置に格納しておき、ネットワークを介して、サーバーコンピューターから他のコンピューターにそのプログラムを転送することもできる。

プログラムを実行するコンピューターは、たとえば、可搬型記録媒体に記録されたプログラム若しくはサーバーコンピューターから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピューターは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピューターは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピューターは、サーバーコンピューターからプログラムが転送される毎に、逐次、受け取っ
たプログラムに従った処理を実行することもできる。

なお上記実施例において、ハードウェアによって実現されていた構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されていた構成の一部をハードウェアに置き換えるようにしてもよい。

またフローチャートにその流れを示した処理は、各ステップが、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくても、並列的あるいは個別に実行される処理を含むものである。また適宜処理を省略することもできる。

１ プリンター， １１ ＣＰＵ ， １２ 内部メモリー， １３ 操作部， １４
表示部， １５ プリンターエンジン， １６ カードＩ／Ｆ， １７ カードスロット， １８ メモリーカード， ２１ 画像読取部， ２２ 赤目候補領域取得部， ２３ 赤目特定情報生成部， ２４ 赤目画素特定部， ２５ 補正部， ３１ 肌領域検出部， ３２ 特徴量抽出部， ３３ 分離曲線生成部， ４１ 補正強度マップ生成部

Claims (9)

1. カラー画像における赤目現象の発生している赤目を含む赤目候補領域から赤目画素を特定する画像処理装置であって、
   前記赤目候補領域における前記赤目の周辺にある一定面積の肌領域における画素から特徴量として赤値及び赤度値を取得し、前記各赤値に対応する前記赤度値の分布に基づいて、前記赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する分離曲線生成手段と、
   前記赤目画素を特定する対象領域の各画素について、前記画素の前記赤度値が、前記分離曲線における前記画素の赤値に対応する前記赤度値より大きい場合に、前記画素を赤目画素として特定する赤目画素特定手段と、
   を有することを特徴とする画像処理装置。
2. 請求項１において、
   前記分離曲線生成手段は、前記赤目候補領域を等分割して区分領域を生成し、前記赤目を含む赤目区分領域の周辺にある肌画素を有する肌区分領域を前記一定面積まで複数検出し、当該検出された複数の肌区分領域の前記特徴量を取得することを特徴とする画像処理装置。
3. 請求項２において、
   前記分離曲線生成手段は、
   前記赤目候補領域における各画素の赤度値の平均値と当該赤度値の標準偏差値と、前記区分領域における各画素の前記赤度値の平均値とを取得し、
   前記赤目候補領域の前記赤度値の平均値と標準偏差値との加算値より大きい赤度値を平均値としてもつ前記区分領域を赤目区分領域として検出し、前記赤目区分領域を包括する領域に外接する前記区分領域群を検出対象領域として設定し、
   前記検出対象領域の前記区分領域のうち、前記赤目候補領域の前記赤度値の平均値から標準偏差値を減算した値以上であって、前記赤目候補領域の前記赤度値の平均値と標準偏差値との加算値以下である赤度値を平均値としてもつ前記区分領域を前記肌区分領域として検出し、
   前記肌区分領域の総数が所定数に達するまで、前記検出対象領域の外接する前記区分領域群を前記検出対象領域に設定し直して、当該検出対象領域から前記肌区分領域を検出することを特徴とする画像処理装置。
4. 請求項３において、
   前記分離曲線生成手段は、さらに、
   前記区分領域における各画素の前記赤度値の標準偏差値を取得し、
   前記検出対象領域の前記区分領域のうち、前記区分領域の前記標準偏差値が、前記赤目候補領域の前記標準偏差値に所定係数を乗じた値を超える場合、当該区分領域を前記肌区分領域として検出しないことを特徴とする画像処理装置。
5. 請求項１乃至４のいずれかにおいて、
   前記分離曲線生成手段は、前記赤値を所定の区間に区分し、前記区間毎に、当該区間内の前記赤値に対応する前記肌領域の前記赤度値の分布に基づいて前記分離曲線を生成することを特徴とする画像処理装置。
6. 請求項１乃至５のいずれかにおいて、
   前記赤目画素特定手段は、さらに、前記各画素について、前記画素の前記赤度値と、前記分離曲線における前記画素の赤値に対応する前記赤度値との比に基づいて、前記画素の赤目補正の度合いを表す補正強度情報を生成することを特徴とする画像処理装置。
7. 請求項６において、
   前記画像処理装置は、さらに、
   前記赤目候補領域における前記赤目の周辺にある白領域を検出する白領域検出手段を有し、
   前記赤目画素特定手段は、前記白領域が検出されなかった場合、前記各画素について前記赤目補正の度合いを下げる調整を行うことを特徴とする画像処理装置。
8. 請求項７において、
   前記白領域検出手段は、前記区分領域の白度の平均値を取得し、前記検出対象領域の前記区分領域のうち、前記白度の平均値が所定の値以上である前記区分領域を白区分領域として検出することを特徴とする画像処理装置。
9. カラー画像における赤目現象の発生している赤目を含む赤目候補領域から赤目画素を特定する画像処理をコンピューターに実行させるコンピューター読み取り可能な画像処理プログラムにおいて、
   前記赤目候補領域における前記赤目の周辺にある一定面積の肌領域における画素から特徴量として赤値及び赤度値を取得し、前記各赤値に対応する前記赤度値の分布に基づいて、前記赤目画素とそれ以外の画素とを分離する前記各赤値に対応する赤度値を有する分離曲線を生成する分離曲線生成工程と、
   前記赤目画素を特定する対象領域の各画素について、前記画素の前記赤度値が、前記分離曲線における前記画素の赤値に対応する前記赤度値より大きい場合に、前記画素を赤目画素として特定する赤目画素特定工程と、
   を実行させることを特徴とする画像処置プログラム。