^/8396 九、發明說明： 【發明所屬之技術領域】 本發明有關於從臉部影像自動檢測眼部、口部、鼻部之 臉部部位之位置之方法。 【先前技術】 臉部影像之眼部'口部、鼻部之臉部部位之位置檢測， 2形成化妝模擬影像之情況時為必要者，在受驗者之臉部 衫像之眼部、口部、鼻部，其他之臉部部位部分至該等之 周邊區域，使色影像等重疊。 另外，眼部之位置檢測，當使髮型之原型影像重疊在受 驗者臉部影像㈣成髮型模擬影像之情況時，用來進行影 像之大小之㈣和位置對準’另外，亦用在臉部影像之蒙 眼處理，臉部影像之框架處理，和個人認證用影像之生成 在先前技術♦，從臉部影像檢測眼部之位置之方法是使 籲用抽出膚色區域用來檢測臉部，和利用圖案匹配等用來檢 測眼部之方法等（非專利文獻1，專利文獻υ。 「=散f 1]謂5年第5次lshp料受獎論文 (日^高可靠度之臉部檢測之臉部候補檢測法」 [專利文獻1]曰本專利特開2004-949Π 【發明内容】 (發明所欲解決之問題） 疋膚色&域之抽出會受到昭明援ί立·» _a/ — 人!，、、、明％ i兄之影響。因此 312XP/發明說明書(補件)/96-03/95149419 „ 當以在各種之照明環境摄 為對象之定多數之臉部影像作 ,..± 罪度會成為問題。另外，圖案匹配之 手法會有使計算量成為很大H 之 與此相對地，本發明之目 部影像以高可μ地自論W Μ便之手法，從臉 (解決問題之手段又）檢觀部、口部和鼻部之位置。 灰人等發現：從臉部影像生成亮度逐漸變化之多個 讀衫像，當觀察從高亮度侧之淡出（fade咖：漸" 2像依m(fade in:漸顯）之影像之情況時在被 淡出之臉部區域最初出現之像素為眼珠區域者，在此種情 ，'眼珠區域之像素成對地出現，當集聚成對出現之像素 區域之涵蓋全灰㈣像之㈣度數時，則果 可以指定眼部之位置，該眼部之位置之指定方法 止影像亦可以適用在動影像，另外，於在觀察從淡出之影 像依順淡入之影像之情況時所獲得之像素之聚集區域之 中，選擇與眼部之位置具有特定之關係者，經由對該等相 互之位置關係附加條件，可以指定口部之位置和鼻部之位 置。 亦即’本發明提供一種眼部之位置檢測方法，係 從臉部影像生成亮度經逐漸變化之多個之灰階影像； 檢測隨者灰階影像從以南亮度淡出之狀態向低亮度淡 入，而逐漸出現在淡出之臉部區域之像素之聚集區域之方 法（以下稱為淡入法）， 在檢測到之像素之聚集區域中，選擇成對出現者作為眼 312XP/發明說明書(補件)/96·03/95149419 7 J378396 部之位置候補， 根據各個眼部彳☆ $ Υ 數，指定㈣之於整個灰階影像之出現度 段為可以對靜止種情況提供臉部影像之取得手 另扑士欲象像進行攝影之攝影機之態樣。 ’發明提供—軸料位之位置 對臉部影像進行淡入法，！担^,』力决係. 令之成對出…: 檢測到之像素之聚集區域 ’出見者作為眼部之位置候補 置:=整個灰階影像中之出現度數，指定眼部= 影檢測到之逐衡出現的像素已停止成長之 群組化各個縱向之位置重疊之影像聚集區域 2被群組化之像素之每—個聚集區域形斜接矩形 在形成在每—㈣縣之外接㈣t，則立在利用斑兩 ==之位置_制狀指定區域时，作為◎ 置候補， 指定橫向幅度最 #在作為口部之位置候補之外接矩形中 大者作為口部之位置。 另外，本發明提供-種臉部部位之位置檢測方法，係在 利用上述之方法指定口部之位置 ’、 之後在各個利用淡入法 檢測到之逐漸出現的像素已停止成長之影像聚集區域，形 成外接矩形，在形成於該像素之每—個聚集區域之外接矩 形中，以位在利用與兩個眼部之位置關係預測到之指定區 域内者，作為鼻部之位置候補， 將在作為鼻部之位置候補之外接矩形巾，其τ邊位於被 312ΧΡ/胃 明書(補件)/96_G3/95149419 最大之外接矩形指= 邊之上方’橫向幅度 為具備有 置檢測系 另外，本發明提供一種眼部之位置檢測系统 臉部影像之取得手段和演算手段的眼部之位 統’演算手段具備有之： ^臉部影像生成亮度逐漸變化之多個灰階 =測隨著讀料從Μ亮度淡出之狀㈣度 久 而逐漸出現在淡出之臉部區域之像素之聚隼£域. 部:之聚集區域中，選擇成對出現IS 。丨之位置候補的功能；和 根據各個眼部之位置候補於整個灰階影像中之 ί取=目;::之位置的功能’在此種情況，提供臉部影； 機之態Ϊ以對靜止影像或動影像進行攝影之攝影 另外，本發明提供一種臉部部位之位置檢測系統為且 鲁備有臉部影像之取得手段和演算手段的臉部部位之位置 檢測系統，係演算手段具備有： 攸臉部影像生成亮度逐漸變化之多個灰階影像的功能； 火檢測隨著灰階影像從以高亮度淡出之狀態朝向低亮度 /k入而逐漸出現在淡出之臉部區域之像素之聚集區域的 功能； ^ 在檢測到之像素之聚集區域中，選擇成對出現者作為眼 部之位置候補； 根據各眼部之位置候補於整個灰階影像之出現度數，指 312ΧΡ/胃 明書(補件)/96-03/95149419 9 1378396 定眼部之位置的功能； 在檢測到之逐漸出現的像素已停止成長者之影像聚集 區域中的.縱向之位置重疊之影像聚集區域群組化的功能^ 二在群組化之像素之每一個聚集區域形成外接矩形的功 能； 在形成於該每一個群組之外接矩形令，以位於利用與兩 個眼部之位置關係預測到之指定區域内者，作為口部之位 >置候補的功能； 在作為口部之位置候補之外接矩形中，指定橫向幅度最 大者作為口部之位置的功能； 在各個利用淡入法檢測到之逐漸出現的像素已停止成 長之景> 像聚集區域，形成外接矩形的功能； 在形成於该像素之每一個聚集區域之外接矩形中，以位 於利用與兩個眼部之位置關係預測到之指定區域内者，作 為鼻部之位置候補的功能；和 1將作為鼻部之位置候補之外接矩形中，其下邊位於被指 定作為口部之位置之外接矩形之上邊之上方，橫向幅度最 大之外接矩形指定為鼻部之位置的功能，在此種情況下， 提供臉部影像之取得手段為可以對靜止影像或動影像進 行攝影之攝影機之態樣。 (發明效果） 依照本發明之眼部之位置檢測方法或檢測系統時，從臉 部影像生成使亮度逐漸變化之多個之灰階影像，檢測隨著 灰階影像從以高亮度淡出之狀態朝向低亮度淡入，而逐漸 312XP/發明說明書(補件)/96-03/95149419 1 〇 :現在淡出之臉部區域的像素之聚 】候二根㈣之位置候補於整個灰階影像 受驗者之眼珠之色，臉部影像之 色， 以以-可罪度檢測眼部之位置，更進一 了 案匹配，所以利用高速演算處 …*要圖 因此，如使用眼部之位置作為二:：眼部…^ 送到任音之臉邻Μ夕f 各種之髮型影像饋 之位置；為Ait广莫擬影像之形成，或使用眼部 之臉邻旦臉部之部份影像饋送到任意 置擬影像等之形成等，當使用眼部之位 況時^用本來形成模擬影像之情 由接n 糸統檢測眼部之位置時，則經 像。：外“如：置之檢測精確度’可以形成自然之模擬影 •較佳二像處理之情況，亦可以 進行該等之影像處理= 進一步’因為可以高迷 ^ 所以不只是靜止影像，對於動影像 亦可以進行該等之影像處理。 I像 昭太2月之眼部之位置檢測方法或檢測系統同樣地，依 臉部部位之位置檢測方法或檢測系統，首先， 檢測利用淡入法獲得之像素之周圍區域作為 之出現产數候根據眼部之位置候補之涵蓋全灰階影像 之像素之聚集區域之使利用淡入法獲得 、漸出現之像素之停止成長者群組 312XP/發明說明書(補件)/96·03/95ΐ49419 ^ 1378396 化’在被群組化之俊夸 — 從形成在H 個聚集區域假想外接矩形， 、 個群組的外接矩形和眼部之位詈關在》 :接:形之橫向幅度指定。部之位置。進 聚集區域之外接矩形和眼部之位置關係，口象:::二固 係’以及外接矩形之橫向幅度指定鼻部 ：置： :::境，受驗者之膚色，受驗者之眼珠之色,= 象 呷鼻：方向等無關地，可以以高可靠度檢測眼部、口 j:鼻。Ρ之位置，進而因為不需要圖案匹配，所 兩速之演算處理檢測眼部、口部、鼻部之位置。 '鼻部' 口部之臉部部份或該 周邊區域之影像饋送到受驗者之臉部影像， 化妝模擬影像等時，使用演算裝置可以簡便地自成^ 然之模擬影像。 取目 •【實施方式】 下面參照圖式用來詳細地說明本發明。 圖1A是流程圖，用來表示本發明之眼部之位置之檢則 方法之-實施例，圖16是流程圖，用來表示以動影二 行本發明之眼部之位置檢查方法之_實施例，圖ic是流 程圖，用來表示依序檢測眼部、口部、鼻部之位置疋^ 之-實施例’圖2是實施該等之方法之系統之方塊了。法 該系統10由攝影裝置1和個人電腦本體2構成，在個 人電腦本體2連接有顯示器3,影像掃描器4， c 312XP/發明說明書(補件)/96-03/95149419 12 1378396 等。 攝影裝置1被設置作為受驗者之臉部影像之取得手 段，可以使用數位靜像攝影機，數位視訊攝影機，網路攝 影機等之市面販售之可以攝影靜止影像或動影像之攝影 機。當以動影像作為眼部之位置之檢測對象之情況時，依 照需要使視訊捕捉器連接在攝影裝置1和個人電腦本體2 之間。 個人電腦本體2具備有影像處理功能，用來生成使亮度 ®逐漸變化之多個灰階影像（例如，在256個深淡度之灰階 影像之階層中，像素值每次變化2〜3個深淡度者）。 灰階影像之生成手法是對於各個像素可以使用：（1)利 用R、G、B之各值之最大值和最小值之平均之方法，（2) 利用R、G、B之各值之平均之方法，（3)在R、G、B之各 值附加指定之權重系統（NTSC等）後，取得該等之平均之 方法等，但是在本發明中利用（3)之手法，例如利用下式 φ Y(輸出亮度）= 0. 298912xR + 0. 56881 1xG + 0. 1 14478xB ，最好使深淡度每次變化2〜3個深淡度。此種灰階化之影 像處理功能之獲得，例如可以經由將奥多比系統公司 (Adobe Systems Mcorporated)製之 Photoshop 等之市面 販售之影像處理軟體搭載在個人電腦本體2。 另外，個人電腦本體2所具之功能包含有：隨著亮度之 變化，變化對比之功能（依照亮度之提高使對比降低，又 依照亮度之變低使對比提高之功能）；依照亮度之變低或 變高之順序附加序列號碼藉以管理灰階影像之階層之功 312XP/發明說明書(補件)/96-03/95149419 13 丄 J/wyb 在灰階影像之階層中，隨著從亮度為高亮度且淡出狀 、向低冗度淡入，檢測在淡出之臉部區域逐漸出現之像 素之聚集區域之功能；在檢測到之像素之聚集區域中選 f成對出現者作為眼部之位置候補之功能,·和計數各個眼 =之位置候補之涵蓋全階層之灰階影像之出現度數，根據 /、值指定眼部之位置之功能。 =外，個人電腦本體2所具有：臉部影像之大小之調整 籲f此，在臉部影像設定眼部之位置之檢測對象區域之功 此’臉=影像之模糊功能；將檢測之像素之聚集區域之縱 σ彳知、方向之大小預先設定在指定之範圍内之功能；記 憶當從眼部之位置候補指定特定之眼部之位置時，作為眼 ，之位置條件之眼部之位置候補之相互之位置關係和眼 4之位置候補之幅度等之功能；和從眼部之位置候補選擇 足艮。卩之位置條件者，指定作為目艮部之位置之功能等。 另外，當動影像成為眼部之位置之檢測對象之情況時， _ =人電腦本體2具有：依照需要選擇以指定之框架率從攝 影裝置1轉送之框架之功能；在對某一個框架指定眼部之 位置之情況時，記憶其位置，以其位置之周邊作為下一個 框架之眼部之位置之檢測對象區域之功能等。 另外，除眼部之位置之檢測外，在亦進行臉部部位之檢 測之情況時，該個人電腦本體2除了上述之功能外更具 有根據於各個眼之位置候補之全灰階影像所涵蓋之出 現度數，指定眼部之位置之功能；又使檢測到之像素之聚 集區域之逐漸出現之像素之停止成長者中，使縱方向之位 312ΧΡ/發明說明書(補件)/96-03/95149419 14 1378396 置重疊者群組化之功能；在被群組化之像素之每一個聚集 區域形成外接矩形之功能；在形成於每-個群組之外接矩 形中’使與兩個眼部具有特定之位置關係者成為口部之位 =補之功能；在作為口部之位置候補之外接矩形中指 向幅度最大者作為口部之位置之功能；更具有在檢測 执之像素之每-個聚集區域形成外接矩形之功能；在形成 =料之每—個聚集區域之外接矩形中，使與兩個眼部 二特疋之位置關係者作為鼻部之位置候補之功能；和 成為鼻部之位置候補之外接矩形中，其下邊在被指定作為 ::之位置的外接矩形之上邊之上方，將橫向幅度最大者 才曰疋作為鼻部之位置的功能者。 在使用該系統1G之靜止影像之眼部之位置檢測方法 兔如圖1A之流程圖所示’首先’利用電腦本體驾得 成為眼部之位置之檢測對象之臉部影像。臉部景彡像之取得 ^如可以利用攝影裝置丨對㈣象者之臉部影像進行攝 =將其取人到個人電腦本體2，亦可以使用影像掃描写 象者之臉部照片’亦可以利用網際網路等之通; 其次，依照需要調整臉部影像之像素數為適合於眼部 ，置之檢測處理之大小。更具體而言，臉部影像之像素數 :多時，會對檢測處理施加過度之負擔，太少時眼部之位 之檢測精確度會降低，所以將影像大小變更成為 360〜320x240之程度。 另外，當臉部影像為清晰時，在後來之景彡像處理因為細 312XP/發明說明書(補件)/96-03/95149419 15 邊緣出現多個，而成A p 以依照需要對臉部影像^之位置候補之檢測之雜訊，所 之程度最好為弱〜中^行模糊處理。在此種情況，模糊 像素和其周圍之2二’=各個像素，對注目點之 過渡器進行模糊處理用象來V出使二附加卜5之權重之模糊 亦可以依照需要進行多次。1出70度之平均值。該模糊處理 另外’在本發明之眼邱 部影像不需要彩色f位置之檢測方法中，因為在臉 情況時，為著當取得之影像為彩色影像之 π马者减低後來之處理 其次，在取得之臉邻旦…η 成相白衫像。 •之檢測對象區域。例如::圖中3;好預先設定眼部之位置 .2〇,設定矩形框架2 =圖3所示，對於灰階臉部影像 ^ ^ .. '、 作為眼部之位置之檢測對象區域。 •:邊定方法是對於灰階臉部影像20，當使 , σ又… 成為Α之情況時，可以使縱向3Α，橫 2°0之中之區r域形成為其區域之中心0重疊在灰階臉部影像 的形態’在此處，灰階臉部影像20之中心 =標可以定為在灰階臉部影像2G之橫向幅度之中心線上 ^灰階臉部影像2G之上邊3 5A之位置。依照此種方 式，该定矩形框架21作為眼部之位置之檢測對象區域之 方法可以適用在印照有上半身之任意之影像。 &其次，如圖4所示，形成使亮度逐漸變化之多個之灰階 影像。亦即，例如在256個深淡度之灰階影像中，以3〇〜〗〇〇 階層程度生成從完全之淡出之像素值Q之影像使亮度逐 漸降低之淡入影像。在該30〜1〇〇階層之影像中，眼部之 312XP/發明說明書(補件)/96-03/95149419
結。另外，在PI C 偶，以外接矩:勺圖著易於明白像素之聚集區域之對 矩形包圍像素之聚集區域，但是在 之檢測時不—定西、, 疋任眼口P之位置 在成斜夕Μ要以外接矩形包圍像素之聚集區域。 者之停件最好2聚集區域中，選擇作為眼部之位置候補 條件取好預先以下列之（1)〜⑷設定。 定右—對之像素之聚㈣域之橫方向之距離在— 1定in左右—對之像素之聚集區域之縱方向之距離在— 隼ϋ^對之像素之聚集區域中之左側之像素之聚 红域，在臉部影像之矩形框架21之左半部之區域， 隼Si使左y右對之像素之區域巾之右側之像素之聚 集Q域，在臉部影像之矩形框冑21之右半部之區域。 其次’如圖7所示，使出現在每一個淡入影像之一對之 眼部之位置候補’集聚成涵蓋灰階影像之全階層，計數其 出現度數，按該計數數目為較多的順序生成等級列表。^ 該計數時，最初出現在亮度從淡出之臉部影像階段式下降 、凊況至最後卩& #又持續出現之眼珠區域之眼部之位置候 補:通常成為最大計數（等級第！位）。其中，原則上指定 該最大计數之眼部之位置候補之位置成為眼部之位置。 但疋，在滿足全部之下列之（a)〜（c)之條件之情況時， 或滿足（d)之條件之情況時，指定計數之數目第2多之眼 部之位置候補之位置作為眼部之位置。 (a)等級第2位之眼部之位置候補在等級第丨位之眼部 312XP/發明說明書(補件)/96-03/95149419 lg u/8396 之位置候補之上方之情況， —(b)等級第2位之眼部之位置候補之中心間距離化等級 第1位之眼部之位置候補之中心間距離長之情況， 。、）等級第2位之眼部之位置候補之左右之眼珠之對應 區域，均在等級第i位之眼部候補之左右之眼珠之對應位 置之外側之情況， (d)等級第1位之眼部之位置候補和等級第2位之眼部 位λ置候補之縱方向之距離，離開眼部和眉部之距離程 又，等級第1位之眼部之位置候補在等級第2位之眼部之 位置候補以上之情況， ^，（a)〜⑹是相對於等級第}位往往很少成為口部 區域，不將口部之位置誤判定為眼部之位置， ⑷是不會將眼部之周之眉等誤判定為眼部之位置 ▲ = ί述之方式，如圖8所示，在臉部影像(影像處理 可以正確地檢測眼部之位置(更正確者為 另外-方面，使用該系統10之動影像之眼 =法如㈣所示，首先，取得轉送自攝影裳置 衫像之框㈣為臉部料，制該㈣之眼部之 部之位置之檢财法本身，與靜止影像之 、 測同樣地，進行使灰階影像之亮度逐漸變化= 入影像之像素之聚集區域之檢測， U之位置候補(成為左右一對出現之像素之聚集區域） 312XP/發明說明書(補件)/96-03/95149419 19 I3?8396 二m灰㈣像之全階層之眼部之位置 =其出現度數之計數’利用最大計數對眼部之位置= 依二部之位置候補之位置，或眼部與眼部之中心 3距離的指疋之修正等。 但是，轉送自攝影裝置丄之最初框架中，眼部 nr限定為特定之區域，最好成為影像整體。 其次，判斷經被指定之眼部 篮 法是例如在像素值從〇到225之門==虽。遠判斷方 景“象之情況，當最大針數之個階層之淡入 :。另外，當利用此種方法判斷眼部之位置是 ^ =可以以淡人影像之階層數，和判斷眼部是否適當之= :十數之數目成為正比例之方式決定。因此，當在像素值 ::55間生成之淡入影像成為2〇。階層之情況在 大叶數之數目為10以下時判斷為非眼部。 在最 •到當判斷為適當地_ 位置 將其登錄作為該框架中之眼部之 架足攝影裝置1轉送之框架（以此作為框 檢二：1部之位置周邊作為眼部之位置之 、丨對象£域，與上述同樣地檢測眼部之位置。 N亦判斷為適當地檢測到有眼部之位 位、木 =其次之框架…最近登錄之眼部上::作 域。依照此種方式’經由限定眼部之位置之 、J對象&域，可以使處理速度加快。 3丨2XP/發明說明書(補件)/96-03/95149419 20 在此處當適當地檢測到眼部之位置之情況時，在下一個 框架成為眼部> # @ —β 位置之檢測對象區域的眼部之位置周邊 又疋=例如成為以眼部和眼部之中間點作為中心之矩 形在桜方向為眼部和眼部之中心間距離之1. 5 ，好為1. 8〜2. 2倍之範圍’在縱方向為眼部;' 間距離之。.5〜2倍，更好為〇.8〜丨.2倍之範圍。中 另=一方面，在最初框架當被指定之眼部之位 ^不適1之情;兄時，在該框架不更進—步檢測眼部^ 而刖進到下一個框架之眼部之位置之檢測。 ，在判斷上述之框架Ν所檢測到之眼部之位置是否 適田打，在判斷為不適當之情況，以該框架Ν之影像整體 作為檢測對象區域，檢測眼部之位置，在藉此判斷為 ^測到眼部之位置之情況時.，將其登錄，在下—個之^ 架Ν+1，以最近登錄之眼部之位置周邊作為檢測對象區域 檢測眼部之位置。#此相對地，即使在框架以以影像整體 作為檢測對象區域，當未適當檢測到眼部之位置之情況 時，在該框架Ν不更進一步檢測眼部之位置，而前進到下 一個之框架Ν+1之眼部之位置之檢測。 另外，未適當地檢測到眼部之位置之原因有：眼部 未存在於影像_，（i〇即使眼部有存在，但是眼部為^閉 合，（11 1 )眼部之位置以高速移動，所以眼部之影像會有 擺晃之情況等，在任一情況，於某一框架之眼部之位^未 被適當地檢測到之情況，在下一個框架檢測眼部之位置。 另外’在由於影像之大小或框架率，眼部之位置之檢測 312XP/發明說明書(補件)/96-03/95149419 21 眼 ^月匕追上框架之轉送之情況時’於每 部之位置之檢測。 【架數進仃 框當：到眼部之位置之框架，或由於在每指定之 ，進仃眼部之位置之檢測，未檢測到眼部二 木，亦可以依照影像之内容或眼部之位置之檢測目的： 完檢測到有眼部之位晋…… 之檢測目的’補 眼部之位置，另外，古飞 +丄 用术才日疋 框牟m 不使未檢測到有眼部之位置之 年[系顯不在顯禾器。 針ί發Γ之眼部之位置之檢測方法’與眼部之位置之檢測 2之臉部影像之被攝體之肌膚之色，眼珠之色，二= 方向’照明環境之變化無關地， 用簡便之演糞方沐AΑ 反灯之積確度，利 m肩异方去，向處理速度地檢測眼部之位置。 此，不論白人布里A 1 口 - 句可以從臉部影像檢測眼部之位置 以此方式檢測刭夕ap如 丨<1正直 位晉竹卩之位置可以制在使用眼部之 各料型影像料到 之髮型模擬影傻夕游_+、丄 w I ’5V 1豕 Μ "像之形成，使用眼部之位置作為基準之將化 擬与後少$ # 像饋送到任意之臉部影像之化妝模 擬衫像之形成，臉部影像碧 理，個人認證”部影像之框架處 種情況。 形成荨，而要眼部之位置檢測之各 在本發明中’除了眼部之位置外，在檢 臉部部位之位置之棒、.wI V σ| < , 、 月，時，如圖1C所示之流程圖所述， • i述方法檢測靜止影像或動影像之眼部之位置 後’順序地檢測口部之位署 。丨之位置和鼻部之位置。在此種情況， 312XP/發明說明書(補件)/96·03/95ΐ49419 22 1^/8396 於臉部影像成為如圖9A所示為傾斜之情 位置和鼻部之位置之檢測之前，如圖時，：口部之 個眼部之眼珠之連結直線成為 ：脍最好以兩 座標旋轉，用純正㈣f彡狀傾斜方式使臉部影像之 另外，在臉部影像令，最好預先設定 檢測對象區域的矩形框架。例如，如所;= : = 在縱向大小之1/8…情況，= 艮。IM乍為2個之頂點，在倒正三角形之上下方向分別且有 二幅度，在左右方向分別具有°.5A之幅度，以此方式 設定矩形框架21，。 久 在口部之位置之檢測時，纟眼部之位置檢測所使用之 P白之階層圖像，最好是在被設定之矩形框架21，内，使檢 測到之像素之聚集區域之逐漸出現之像素之停止成長 者’在每個縱方向之位置重疊者被群組化。例如，如圖 11所示，像素之聚集區域A、B被群組化成為一個之群組 C ° 另外，在使像素之聚集區域進行群組化時，群組化後之 最大區域在彳頁方向不超過兩個眼部之眼珠之距離之U 倍。在縱方向不超過兩個眼部之眼珠之距離之6倍。利 用此種方式，可以從用以檢測口部之位置之像素之聚集區 域之群組排除不需要之雜訊。 在被群組化之像素之每一個聚集區域形成外接矩形，形 成在每一個該群組之外接矩形中，與兩個眼部之位置具有 特定之關係者，更具體地如圖12所示，描繪以兩個眼部 312XP/發明說明書(補件)/96-03/9514941 23 1378396 之眼珠之位置作為左右之頂點的倒正三角形T，以該倒正 二角形Τ之下頂點作為中心，描繪直徑為該倒正三角形之 一邊長度之0. 65〜1· 〇倍之圓40，另外一方面，描繪以群 .組C之外接矩形30之中心作為圓之中心之内接在外接矩 .形30之圓41，當該圓41肖上述之圓4〇纟有重疊之情況 時，與具有該重疊之圓41對應之外接矩形3〇被作為口部 之位置候補。 另外，當作為口部之位置候補之外接矩形存在有多個之 情況時，指定橫向幅度最大之外接矩形作為口部之位置。 如此來在指定外接矩$ 3〇之後，以該被指定之外接 矩形之橫向幅度作為構成口部之像素之橫向幅度。 在此處之被選擇作為口部之位置之外接矩形之橫向幅 ^在使連結兩個眼部之眼珠之直線之2等分線 下頂點）之情況時，以該2等分線作為中心， 2被二擇作為口部之位置之外接矩形成為左右對稱的 使其外接矩形在橫方向伸長，以該伸長 口部之位置。 伯疋 在以上之處理當未存在有作為口部之 矩形者之情況時’利用淡入法指 ：卜： 之=置候補_ 置）用來重作口部之檢測。 疋σ 之位置後，檢測鼻部之位置。在 之檢測時，於眼部之位置之 π之位置 像’最好如圖u所示，在被設吏用之灰階之階層影 又疋之上述之矩形框架21， 312XP/發明說明書(補件)/96〇3/95149419 24 内，所$測到之像素之聚集區域不特別地群組^匕，在各個 象素之每一個聚集區域形成外接矩形31 '32、33、34。 另外，在所形成之外接矩形31、32 眼部之位晋且古杜〜 興兩個 置八有特疋之關係者，更具體而言，與口部之位 檢’則之恂況同樣地，如圖丨2所示，描繪以兩個眼部之 位置作為左右之頂點的倒正三角形τ，以該倒正三角形τ 之下頂點作為t心，描繪直徑為該倒正角形之一邊長之 _ = 5 〇· 7倍之圓42 ’另外一方面，以各個外接矩形3卜 、33、34之中心作為圓之中心，描繪内接在各個外 :形3卜32、33、34之圓，當該圓與上述之圓42具有重 且之清况時，以與具有該重疊之圓對應之外接矩形32、 33作為鼻部之位置候補。 而且，在作為鼻部之位置候補之外接矩形犯、Μ中， 其下邊位於被指定作為口部之位置之外接矩形3〇之上邊 之上方，以橫向幅度最大者作為鼻部之位置，更詳言之， 鲁利用被指定作為鼻之位置之外接矩形之下邊，指定鼻°部之 下端之位置和幅度。 此處’當被以作為鼻部之位置之外接矩形之橫向幅度 未跨越兩個眼部之眼珠之連結直線之2等分線（倒三角形 之下頂點）之情況時，以該2等分線作為中心以使選擇 作為鼻部之位置的外接矩形成為左右對稱之方式，使該外 接矩形在橫方向伸長，利用該伸長之矩形之下邊，指定鼻 部之下端之位置和幅度。 依照此種方式，當指定鼻部和口部之位置時，如圖Μ 312ΧΡ/發明說明書(補件)/96·〇3/95149419 1378396 斜之臉部影像成為如圖9B所示，在經較正傾 等：定眼部、鼻部、。部之位置後，使座標 、Λ荨之位置變換成為當初之傾斜之臉部影像中之 位置。 (產業上之可利用性） 本毛月在使用眼部之位置作為基準而將各種髮型影像 饋迗到任意之臉部影像之髮型模擬影像之形成，使用眼部 鲁j位置作為基準而將化妝後之臉部之部份影像饋送到任 意之臉部影像之化妝模擬影像之形成，臉部影像之蒙眼處 臉P〜像之柩架處理等，靜止影像或動影像之臉部影 像之影像處理中，於需要眼部之位置檢測之各種場面為有 用0 另外’本發明亦在需要眼部之位置，口部之位置，鼻部 之位置之檢測的化妝模擬影像之形成等中為有用。 【圖式簡單說明】 Φ 圖1A疋眼部之位置之檢測方法之流程圖。 圖1B是動影像之眼部之位置之檢測方法之流程圖。 圖1C疋臉部部位之位置之檢測方法之流程圖。 圖2是眼部之位置之檢測系統之方塊圖。 圖3是眼部之位置之檢測對象區域之說明圖。 圖4是使亮度逐漸變化之灰階影像。 圖5是使亮度逐漸變化之灰階影像之深淡度反轉影像。 圖6是淡入影像之像素之聚集區域之說明圖。 圖7是使眼部之位置候補涵蓋灰階影像之全階層之集 312XP/發明說明書(補件)/96-03/95149419 26 丄：） 聚之狀態之說明圖。 圖8疋表不檢測到之目p加^ , m 艾眼部之位置之原來影像。 圖9A是傾斜之臉部影像。 圖9B是校正傾斜後之臉部影像。
圖10是口部之仅署& A αα π 和ν。卩之位置之檢測對象區域之說 "是像素之♦集區域之外接矩形及其群組化之說明
12是成為 方法之說明圖。 口4或鼻部之位置候補之外接矩形之選擇 【主要元件符號說明】 1 攝影裝置 2 ,個人電腦本體 3 顯示器 4 影像掃描器 鲁5 列印機 10眼部之位置之檢測系統 20 灰階臉部影像 :1，（成為眼部之位置之檢測對象區域之)矩形框架 (成為口部之位置，鼻部之位置之檢測對象區域之） 矩形框架 =、（使像素之聚集區域之外接矩形群組化後之）外接矩形 32 ' 33 ' 34 (像素之聚集區域之）外接矩形 4〇、 41 '42 圓 312ΧΡ/發明說明書(補件)/%·03/95149419 27