JP2008228238A - 瞳色補正装置およびプログラム - Google Patents
瞳色補正装置およびプログラム Download PDFInfo
- Publication number
- JP2008228238A JP2008228238A JP2007067655A JP2007067655A JP2008228238A JP 2008228238 A JP2008228238 A JP 2008228238A JP 2007067655 A JP2007067655 A JP 2007067655A JP 2007067655 A JP2007067655 A JP 2007067655A JP 2008228238 A JP2008228238 A JP 2008228238A
- Authority
- JP
- Japan
- Prior art keywords
- color
- pupil
- correction
- skin
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 210000001747 pupil Anatomy 0.000 title claims abstract description 308
- 238000012937 correction Methods 0.000 title claims abstract description 198
- 238000004364 calculation method Methods 0.000 claims abstract description 29
- 230000005856 abnormality Effects 0.000 claims abstract description 20
- 239000003086 colorant Substances 0.000 claims abstract description 9
- 238000001514 detection method Methods 0.000 claims description 70
- 238000000034 method Methods 0.000 claims description 50
- 230000002093 peripheral effect Effects 0.000 claims description 29
- 210000001508 eye Anatomy 0.000 claims description 17
- 241000593989 Scardinius erythrophthalmus Species 0.000 abstract description 26
- 201000005111 ocular hyperemia Diseases 0.000 abstract description 26
- 230000000694 effects Effects 0.000 abstract description 5
- 238000012545 processing Methods 0.000 description 33
- 230000014509 gene expression Effects 0.000 description 14
- 241000534672 Hiodon alosoides Species 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 238000007781 pre-processing Methods 0.000 description 5
- 210000005252 bulbus oculi Anatomy 0.000 description 4
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 4
- 229910052737 gold Inorganic materials 0.000 description 4
- 239000010931 gold Substances 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000003702 image correction Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 210000000088 lip Anatomy 0.000 description 1
- 210000001331 nose Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- -1 silver halide Chemical class 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
- H04N1/622—Retouching, i.e. modification of isolated colours only or in isolated picture areas only with simulation on a subsidiary picture reproducer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
- H04N1/624—Red-eye correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30216—Redeye defect
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
Abstract
【解決手段】 入力された画像における被写体人物の肌の色を特定する肌の色特定部13と、肌の色特定部によって特定された肌の色に基づいて推定される人物の瞳の色である肌補正色を求める肌補正色算出部14と、人物の瞳の外周領域に含まれる画素の色からその外周領域の代表色である原瞳色を求める原瞳色算出部16と、それら求めた肌補正色と原瞳色とを取得し、いずれの色を補正する際の瞳補正基準色に決定する補正基準色決定部17と、補正基準色に基づき、被写体人物の瞳の色を補正する補正部19とを備えた。
【選択図】 図1
Description
画像の瞳部分に発生する異常とは、例えば赤目現象や金目現象などであり、瞳部分の一部又は全部の色について発生する異常である。
さらに、前記補正手段は、前記瞳検出手段によって検出された瞳領域の画素について、当該画素の明度を維持して補正を行なうようにしてもよい。
次に、例えば各色の変換関数が一次方程式で近似できると仮定する。すなわち、以下のような式(1)によって各色の変換関数が表されると仮定する。
赤味の評価は、以下の式に示すR成分割合(Rrate)によって判断する。
Rrate=R/(R+G+B)
但し:0≦R,G,B≦255
Y=0.299R+0.587G+0.114B
11 記憶部
12 顔検出部
13 肌の色特定部
14 肌補正色算出部
15 瞳検出部
16 原瞳色算出部
17 補正基準色決定部
18 判断部
19 補正部
Claims (6)
- 入力された画像における被写体人物の肌の色を特定する肌の色特定手段と、
前記肌の色特定手段によって特定された肌の色に基づいて、前記画像中に表されるべき当該人物の瞳の色である肌補正色を求める肌補正色算出手段と、
前記被写体人物の瞳の外周領域に含まれる画素の色からその外周領域の代表色である原瞳色を求める原瞳色算出手段と、
前記求めた肌補正色と原瞳色とを取得し、いずれかの色を補正する際の補正基準色に決定する補正基準色決定手段と、
前記補正基準色に基づき、前記被写体人物の瞳の色を補正する補正手段と、
を備えたことを特徴とする瞳色補正装置。 - 入力された画像における被写体人物の顔の一部又は全体を含む顔領域を検出する顔検出手段と、
前記顔検出手段によって検出された当該人物の瞳の一部又は全体を含む瞳領域を検出する瞳検出手段と、を備え、
前記肌の色特定手段は、前記顔検出手段で検出された顔領域に含まれる画素の色に基づいて肌の色を特定し、
前記原瞳色算出手段は、前記瞳検出手段で検出された瞳の外周領域に含まれる画素の色に基づいて原瞳色を求めるものであることを特徴とする請求項1に記載の瞳色補正装置。 - 前記補正基準色決定手段によって決定された補正基準色と前記瞳検出手段によって検出された瞳領域から特定される色とを比較することにより、前記画像における当該人物の瞳の色に異常が発生しているか否か判断する判断手段を備え、
前記補正手段は、判断手段にて異常と判定された場合に補正処理を実行することを特徴とする請求項2に記載の瞳色補正装置。 - 前記判断手段は、前記補正基準色決定手段によって決定された補正基準色における赤みと、前記瞳検出手段によって検出された瞳領域から特定される色における赤みとを比較することにより、前記画像における当該人物の瞳部分が赤目になっているか否か判断する請求項3に記載の瞳色補正装置。
- 前記補正手段は、前記瞳検出手段によって検出された瞳領域の画素について、当該画素の明度を維持して補正を行なうものであることを特徴とする請求項2から4のいずれか1項に記載の瞳色補正装置。
- コンピュータを、
入力された画像における被写体人物の肌の色を特定する肌の色特定手段、
前記肌の色特定手段によって特定された肌の色に基づいて、前記画像中に表されるべき当該人物の瞳の色である肌補正色を求める肌補正色算出手段、
前記被写体人物の瞳の外周領域に含まれる画素の色からその外周領域の代表色である原瞳色を求める原瞳色算出手段、
前記求めた肌補正色と原瞳色とを取得し、いずれかの色を補正する際の補正基準色に決定する補正基準色決定手段、
前記補正基準色に基づき、前記被写体人物の瞳の色を補正する補正手段、
として機能させるためのプログラム。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007067655A JP4175425B2 (ja) | 2007-03-15 | 2007-03-15 | 瞳色補正装置およびプログラム |
TW097107819A TWI368432B (en) | 2007-03-15 | 2008-03-06 | Device for correcting pupil color and recording medium |
CN2008800004683A CN101542522B (zh) | 2007-03-15 | 2008-03-12 | 眼睛颜色校正装置 |
GB0901416A GB2453891B (en) | 2007-03-15 | 2008-03-12 | Iris color correction device and program |
PCT/JP2008/054460 WO2008111605A1 (ja) | 2007-03-15 | 2008-03-12 | 瞳色補正装置およびプログラム |
KR1020087031420A KR100922653B1 (ko) | 2007-03-15 | 2008-03-12 | 눈동자색 보정 장치 및 기록 매체 |
US12/375,636 US7692697B2 (en) | 2007-03-15 | 2008-03-12 | Pupil color correction device and program |
DE112008000020.4T DE112008000020B4 (de) | 2007-03-15 | 2008-03-12 | Vorrichtung und Programm zur Korrektur der Irisfarbe |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007067655A JP4175425B2 (ja) | 2007-03-15 | 2007-03-15 | 瞳色補正装置およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008228238A true JP2008228238A (ja) | 2008-09-25 |
JP4175425B2 JP4175425B2 (ja) | 2008-11-05 |
Family
ID=39759539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007067655A Expired - Fee Related JP4175425B2 (ja) | 2007-03-15 | 2007-03-15 | 瞳色補正装置およびプログラム |
Country Status (8)
Country | Link |
---|---|
US (1) | US7692697B2 (ja) |
JP (1) | JP4175425B2 (ja) |
KR (1) | KR100922653B1 (ja) |
CN (1) | CN101542522B (ja) |
DE (1) | DE112008000020B4 (ja) |
GB (1) | GB2453891B (ja) |
TW (1) | TWI368432B (ja) |
WO (1) | WO2008111605A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7458281B2 (ja) | 2020-09-30 | 2024-03-29 | 日本放送協会 | 色調補正装置及びそのプログラム |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI455043B (zh) * | 2011-03-01 | 2014-10-01 | Hon Hai Prec Ind Co Ltd | 防紅眼人像拍攝系統及方法 |
CN103226691B (zh) * | 2012-01-30 | 2016-01-27 | 展讯通信(上海)有限公司 | 去除红眼的方法及装置 |
CN103871014B (zh) * | 2012-12-17 | 2018-06-01 | 联想(北京)有限公司 | 改变图像颜色的方法及装置 |
KR102541829B1 (ko) * | 2016-01-27 | 2023-06-09 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
CN106530361A (zh) * | 2016-11-16 | 2017-03-22 | 上海市东方医院 | 彩色人脸图像的颜色校正方法 |
CN107454339B (zh) * | 2017-07-17 | 2019-08-09 | Oppo广东移动通信有限公司 | 图像处理方法及相关产品 |
CN111832344B (zh) * | 2019-04-17 | 2023-10-24 | 深圳熙卓科技有限公司 | 一种动态瞳孔检测方法及装置 |
KR102170912B1 (ko) * | 2019-05-15 | 2020-10-28 | 한국과학기술원 | 얼굴 피부 컬러 판정을 위한 인물 영상 촬영 용 컬러 팔레트 및 그를 이용한 방법 및 장치 |
CN110648296B (zh) * | 2019-09-24 | 2022-10-11 | Oppo广东移动通信有限公司 | 一种瞳孔颜色修正方法、修正装置、终端设备及存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2634511B2 (ja) | 1991-07-15 | 1997-07-30 | 富士写真フイルム株式会社 | 写真プリントの赤目修正方法及びピクトリアルハードコピー装置 |
US7058209B2 (en) * | 2001-09-20 | 2006-06-06 | Eastman Kodak Company | Method and computer program product for locating facial features |
US7289664B2 (en) * | 2002-01-17 | 2007-10-30 | Fujifilm Corporation | Method of detecting and correcting the red eye |
US7920723B2 (en) * | 2005-11-18 | 2011-04-05 | Tessera Technologies Ireland Limited | Two stage detection for photographic eye artifacts |
US7536036B2 (en) * | 2004-10-28 | 2009-05-19 | Fotonation Vision Limited | Method and apparatus for red-eye detection in an acquired digital image |
CN1567377B (zh) * | 2003-07-02 | 2011-05-04 | 致伸科技股份有限公司 | 数字图像的红眼处理方法 |
US20050140801A1 (en) * | 2003-08-05 | 2005-06-30 | Yury Prilutsky | Optimized performance and performance for red-eye filter method and apparatus |
JP4345622B2 (ja) | 2003-11-05 | 2009-10-14 | オムロン株式会社 | 瞳色推定装置 |
JP4384897B2 (ja) | 2003-11-20 | 2009-12-16 | アールテック有限会社 | ファントム要素及び水ファントム |
JP4078334B2 (ja) * | 2004-06-14 | 2008-04-23 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP4537142B2 (ja) * | 2004-07-30 | 2010-09-01 | キヤノン株式会社 | 画像処理方法及びその装置、撮像装置、プログラム |
-
2007
- 2007-03-15 JP JP2007067655A patent/JP4175425B2/ja not_active Expired - Fee Related
-
2008
- 2008-03-06 TW TW097107819A patent/TWI368432B/zh active
- 2008-03-12 CN CN2008800004683A patent/CN101542522B/zh active Active
- 2008-03-12 WO PCT/JP2008/054460 patent/WO2008111605A1/ja active Application Filing
- 2008-03-12 KR KR1020087031420A patent/KR100922653B1/ko active IP Right Grant
- 2008-03-12 DE DE112008000020.4T patent/DE112008000020B4/de active Active
- 2008-03-12 GB GB0901416A patent/GB2453891B/en not_active Expired - Fee Related
- 2008-03-12 US US12/375,636 patent/US7692697B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7458281B2 (ja) | 2020-09-30 | 2024-03-29 | 日本放送協会 | 色調補正装置及びそのプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN101542522A (zh) | 2009-09-23 |
CN101542522B (zh) | 2012-07-04 |
TWI368432B (en) | 2012-07-11 |
KR100922653B1 (ko) | 2009-10-19 |
WO2008111605A1 (ja) | 2008-09-18 |
KR20090038857A (ko) | 2009-04-21 |
US7692697B2 (en) | 2010-04-06 |
DE112008000020T5 (de) | 2009-09-24 |
US20090290048A1 (en) | 2009-11-26 |
JP4175425B2 (ja) | 2008-11-05 |
TW200904144A (en) | 2009-01-16 |
DE112008000020B4 (de) | 2017-12-28 |
GB2453891A (en) | 2009-04-22 |
GB2453891B (en) | 2009-12-16 |
GB0901416D0 (en) | 2009-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4214420B2 (ja) | 瞳色補正装置およびプログラム | |
JP4175425B2 (ja) | 瞳色補正装置およびプログラム | |
JP4345622B2 (ja) | 瞳色推定装置 | |
US7539342B2 (en) | Image correction apparatus | |
US7565073B2 (en) | Photography apparatus, photography method, and photography program for obtaining an image of a subject | |
CN107945135B (zh) | 图像处理方法、装置、存储介质和电子设备 | |
US11082677B2 (en) | White balance processing method and apparatus | |
US7830418B2 (en) | Perceptually-derived red-eye correction | |
US9135726B2 (en) | Image generation apparatus, image generation method, and recording medium | |
EP2884414A1 (en) | Health state determining method and apparatus using facial image | |
US20180047186A1 (en) | Image processing method for correcting dark circle under human eye | |
US10984281B2 (en) | System and method for correcting color of digital image based on the human sclera and pupil | |
WO2021016896A1 (zh) | 图像处理方法、系统、设备、可移动平台和存储介质 | |
JP2012085083A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP6098133B2 (ja) | 顔構成部抽出装置、顔構成部抽出方法及びプログラム | |
JP2009038737A (ja) | 画像処理装置 | |
JP2005196385A (ja) | 画像処理装置、画像処理方法およびデジタルカメラ | |
US20190370942A1 (en) | Red-eye correction techniques | |
CN111259683A (zh) | 皮肤检测方法及图像处理装置 | |
US20200118304A1 (en) | Image processing apparatus, image processing method, and recording medium | |
JP2009059009A (ja) | 色補正画像画像の作成方法と色補正画像作成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080630 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080729 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080811 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4175425 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130829 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |