CN107125904B - 图像处理装置以及图像处理方法 - Google Patents

图像处理装置以及图像处理方法 Download PDF

Info

Publication number
CN107125904B
CN107125904B CN201710063507.5A CN201710063507A CN107125904B CN 107125904 B CN107125904 B CN 107125904B CN 201710063507 A CN201710063507 A CN 201710063507A CN 107125904 B CN107125904 B CN 107125904B
Authority
CN
China
Prior art keywords
color
region
image
skin
changing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710063507.5A
Other languages
English (en)
Other versions
CN107125904A (zh
Inventor
筿田雅世
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN107125904A publication Critical patent/CN107125904A/zh
Application granted granted Critical
Publication of CN107125904B publication Critical patent/CN107125904B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/002—Masks for cosmetic treatment of the face
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61K—PREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K8/00—Cosmetics or similar toiletry preparations
    • A61K8/02—Cosmetics or similar toiletry preparations characterised by special physical form
    • A61K8/0204—Specific forms not provided for by any of groups A61K8/0208 - A61K8/14
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61Q—SPECIFIC USE OF COSMETICS OR SIMILAR TOILETRY PREPARATIONS
    • A61Q1/00—Make-up preparations; Body powders; Preparations for removing make-up
    • A61Q1/02—Preparations containing skin colorants, e.g. pigments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J3/00—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed
    • B41J3/407—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed for marking on special material
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K15/00—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers
    • G06K15/02—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers using printers
    • G06K15/021—Adaptations for printing on specific media
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K15/00—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers
    • G06K15/02—Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers using printers
    • G06K15/18—Conditioning data for presenting it to the physical printing elements
    • G06K15/1867—Post-processing of the composed and rasterized print image
    • G06K15/1872—Image enhancement
    • G06K15/1878—Adjusting colours
    • G06K15/188—Adjusting colours with provisions for treating some of the print data differently
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00005—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to image data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00007—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
    • H04N1/00023—Colour systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026—Methods therefor
    • H04N1/00034—Measuring, i.e. determining a quantity by comparison with a standard
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026—Methods therefor
    • H04N1/00039—Analysis, i.e. separating and studying components of a greater whole
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00092—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to the original or to the reproducing medium, e.g. imperfections or dirt
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/628—Memory colours, e.g. skin or sky
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007—Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F13/00—Bandages or dressings; Absorbent pads
    • A61F2013/00089—Wound bandages
    • A61F2013/00153—Wound bandages coloured or with decoration pattern or printing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F13/00—Bandages or dressings; Absorbent pads
    • A61F2013/00361—Plasters
    • A61F2013/00365—Plasters use
    • A61F2013/0037—Plasters use for cosmesis
    • A61F2013/00378—Plasters use for cosmesis coloured as the skin
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61K—PREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K2800/00—Properties of cosmetic compositions or active ingredients thereof or formulation aids used therein and process related aspects
    • A61K2800/10—General cosmetic use
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61K—PREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K2800/00—Properties of cosmetic compositions or active ingredients thereof or formulation aids used therein and process related aspects
    • A61K2800/80—Process related aspects concerning the preparation of the cosmetic composition or the storage or application thereof
    • A61K2800/805—Corresponding aspects not provided for by any of codes A61K2800/81 - A61K2800/95
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61K—PREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K2800/00—Properties of cosmetic compositions or active ingredients thereof or formulation aids used therein and process related aspects
    • A61K2800/80—Process related aspects concerning the preparation of the cosmetic composition or the storage or application thereof
    • A61K2800/87—Application Devices; Containers; Packaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K2215/00—Arrangements for producing a permanent visual presentation of the output data
    • G06K2215/0082—Architecture adapted for a particular function
    • G06K2215/0094—Colour printing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K2215/00—Arrangements for producing a permanent visual presentation of the output data
    • G06K2215/0082—Architecture adapted for a particular function
    • G06K2215/0097—Printing on special media, e.g. labels, envelopes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image

Abstract

本公开涉及图像处理装置以及图像处理方法。图像处理装置(200)是生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据的装置。具有：图像取得部(220)，其取得拍摄皮肤而得到的皮肤图像；图像解析部(230)，其从皮肤图像中提取皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色，所述周边色是变色区域的周边的颜色；分组处理部(240)，其对多个变色区域进行分组，按区域组来决定包含该区域组的包含区域，所述区域组是成组的多个变色区域的集合、或未成组的一个变色区域；以及印刷控制部(250)，其生成对薄片中的与包含区域对应的区域印刷色素材料的内容的图像数据，所述色素材料是使包含区域接近周边色的材料。

Description

图像处理装置以及图像处理方法
技术领域
本公开涉及生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据的图像处理装置以及图像处理方法。
背景技术
以前存在用于使脸颊上的斑痕这样的皮肤的变色区域不显眼的技术(例如，参照专利文献1)。专利文献1所记载的技术(以下称为“现有技术”)中，从拍摄皮肤得到的图像中识别皮肤的变色区域，以与变色区域相同或比变色区域大的尺寸来生成能够粘贴于皮肤且印刷有非变色区域的颜色的薄片。根据这样的现有技术，通过将薄片粘贴于皮肤这样的简单工作，能够使皮肤的变色区域不显眼。
现有技术文献
专利文献1：日本特开2015-43836号公报
专利文献2：日本特开2014-140978号公报
专利文献3：日本特开平3-157313号公报
专利文献4：日本特开平9-302294号公报
专利文献5：日本特开2012-203425号公报
专利文献6：日本特开2003-44837号公报
发明内容
然而，在现有技术中，在皮肤有很多变色区域的情况下，薄片的生成和粘贴要花费时间和功夫。另一方面，特别是在面部的脸颊等部位，往往分布有斑痕、雀斑这样的很多小的变色区域。因此，希望有一种能够简单地使皮肤的多个变色区域不显眼的技术。
本公开的一个技术方案提供一种能够简单地使皮肤的多个变色区域不显眼的图像处理装置以及图像处理方法。
本公开的图像处理装置，是生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据的图像处理装置，所述图像处理装置具有：图像取得部，其取得拍摄所述皮肤得到的皮肤图像；图像解析部，其从所述皮肤图像中提取所述皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色，所述周边色是所述变色区域的周边的颜色；分组处理部，其对多个所述变色区域进行分组，按区域组来决定包含该区域组的包含区域，所述区域组是成组的多个所述变色区域的集合、或者未成组的一个所述变色区域；以及印刷控制部，其生成对所述薄片中的与所述包含区域对应的区域印刷色素材料的内容的所述图像数据，所述色素材料是使所述包含区域的颜色接近所述周边色的材料。
此外，这些总括性或具体的技术方案既可以通过系统、方法、集成电路、计算机程序或记录介质来实现，也可以通过系统、装置、方法、集成电路、计算机程序和记录介质的任意组合来实现。
根据本公开，能够简单地使皮肤的多个变色区域不显眼。
附图说明
图1是表示本公开涉及的化妆辅助系统的一例的概要的示意图。
图2是表示本公开中的皮肤的状况以及化妆薄片的一例的图。
图3是表示本公开中的化妆薄片的粘贴状态的第1例的图。
图4是表示本公开中的化妆薄片的粘贴状态的第2例的图。
图5是表示本公开中的化妆薄片的粘贴状态的第3例的图。
图6是表示本公开中的变色区域的分组的状况以及化妆薄片的一例的图。
图7是表示本公开涉及的图像处理装置的构成的一例的框图。
图8是表示本公开中的分组规则信息的一例的图。
图9是表示本公开中的组分离规则信息的一例的图。
图10是表示本公开中的包含区域设定规则信息的一例的图。
图11是表示本公开涉及的图像处理装置的工作的一例的流程图。
图12是表示本公开中的变色区域的转换的状况的一例的图。
图13是表示本公开中的分组的状况的一例的图。
图14是表示本公开中的包含区域的设定的状况的一例的图。
图15是表示本公开中的包含区域的设定方式的第1例的图。
图16是表示本公开中的包含区域的设定方式的第2例的图。
图17是表示本公开中的包含区域的设定方式的第3例的图。
图18是表示本公开中的包含区域的设定方式的第4例的图。
图19是表示本公开中的皮肤的状况的另一例的图。
图20是表示本公开中的包含区域的设定以及图像数据的生成的状况的一例的图。
标号的说明
100 化妆辅助系统
200 图像处理装置
201 照明部
202 摄像头
203 显示部
210 信息保存部
220 图像取得部
230 图像解析部
240 分组处理部
250 印刷控制部
300 印刷装置
具体实施方式
以下，参照附图对本公开的一个实施方式进行详细说明。
<系统构成>
首先，对包括本实施方式涉及的图像处理装置的化妆辅助系统的概要进行说明。
图1是表示化妆辅助系统的一例的概要的示意图。
在图1中，化妆辅助系统100包括具有照明部201、摄像头202以及带触摸面板的液晶显示器等显示部203的图像处理装置200、和与图像处理装置200以能够通信的方式连接的印刷装置300。图像处理装置200以及印刷装置300例如配置于工厂、化妆品销售商店、美容院、医疗机构、整理仪容的化妆室、事件会场以及个人住宅等。此外，图像处理装置200也可以是也可易于携带的便携式装置。
图像处理装置200通过配置在显示部203的附近的摄像头202，在由照明部201进行了照明的状态下对位于显示部203的正面的用户400的面部进行拍摄。并且，图像处理装置200使在左右方向上反转所拍摄到的图像而得到的图像(以下称为“面部图像”)500显示于显示部203。即，图像处理装置200构成为对用户400提供照镜子这样的感觉。
另外，图像处理装置200从所获得的面部图像500中(或者从反转前的图像中)提取皮肤图像510的变色区域511，决定包含一个或多个变色区域511的包含区域515。并且，图像处理装置200生成将变色区域511的周边513的颜色(以下称为“周边色”)的区域以包含区域515的形状以及大小来形成的图像的图像数据，并向印刷装置300输出。
印刷装置300基于从图像处理装置200输出的图像数据，对能够粘贴于皮肤531的薄片520印刷图像。例如，印刷装置300在化妆薄片520被粘贴于可剥离的支承体(衬纸)的状态下，进行对化妆薄片520的印刷。
更具体而言，印刷装置300通过将与周边色近似的颜色的色素材料(化妆料等)赋予给与包含区域515对应的区域，生成形成有覆盖区域(遮蔽层、肤色修正颜色层)521的化妆薄片520。印刷装置300例如不仅能够印刷色素材料，也能够对化妆薄片520的皮肤侧面的与包含区域515对应的区域印刷促进变色区域511改善的药剂。
化妆薄片520有与皮肤531紧密粘贴一侧的面(以下称为“皮肤侧面”)和相反一侧的面(以下称为“外侧面”)。印刷装置300对皮肤侧面和外侧面中的预先确定侧的面进行覆盖区域521的印刷。例如，化妆薄片520通过向皮肤531的紧贴，使印刷在皮肤侧面上的覆盖区域521临摹到皮肤531。或者，化妆薄片520通过保持与皮肤531紧贴的状态，将印刷在皮肤侧面或者外侧面上的覆盖区域521载置到皮肤531之上。
覆盖区域521如上述那样通过变色区域511的周边色来形成。因此，与包含区域515对应的皮肤的区域532被覆盖区域521覆盖，成为变色区域511不怎么显眼的状态。
即，化妆辅助系统100通过将化妆薄片520粘贴于皮肤531这样的简单且短时间的动作，能够进行使皮肤531的肤色均匀的化妆。
此外，化妆薄片520是即使粘贴于人的皮肤也不会有不适感且具有生物相容性的薄片。具体而言，化妆薄片520例如是具有包括聚乳酸、聚乙醇酸、聚己内酯或者它们的共聚合体、透明质酸、以及甲壳素等的生物相容性聚合物的层、且厚度为10nm～500nm的薄膜。关于能够用作化妆薄片520的薄膜，例如在专利文献2中已记载，因此在此省略详细说明。
另外，关于在印刷装置300中被用于印刷的材料(墨)以及各部的具体构成，例如在专利文献3～专利文献5中已记载，因此在此省略详细说明。
图像处理装置200还考虑皮肤531存在很多变色区域511的情况来决定成为覆盖区域521的基础的包含区域515。
图2是表示存在很多变色区域511的皮肤的状况和对该皮肤单纯地按每个变色区域511决定了包含区域515的情况下的化妆薄片520的一例的图。此外，该化妆薄片520的一例是根据不是图像处理装置200生成的图像数据的图像数据而生成的化妆薄片的例子。
如图2所示，在对存在很多变色区域511的皮肤图像510按每个变色区域511决定了包含区域515的情况下，在化妆薄片520上会配置与很多包含区域515对应的很多覆盖区域521。
然而，覆盖区域521的数量越多，则将化妆薄片520正确地粘贴于皮肤就越难。
图3是表示正确地粘贴了图2所示的化妆薄片520时的状态的一例的图。图4是表示以错误的角度粘贴了图2所示的化妆薄片520时的状态的一例的图。图5是表示以错误的位置粘贴了图2所示的化妆薄片520时的状态的一例的图。
如图3所示，在以正确的角度以及位置粘贴了化妆薄片520的情况下，变色区域511全部被覆盖区域521覆盖，变得不显眼。然而，如图4以及图5所示，在以错误的角度或者位置粘贴了化妆薄片520的情况下，变色区域511未完全被覆盖区域521覆盖而发生露出，变得显眼。
因此，图像处理装置200对多个变色区域511进行分组，决定包含区域515，该包含区域515包含成组的多个变色区域511的集合、或者未成组的一个变色区域511(以下称为“区域组”)。
图6是表示变色区域511的分组的状况以及通过该分组而生成的化妆薄片520的一例的图。
如图6所示，图像处理装置200例如使变色区域511中的距离近的变色区域彼此成组，设定区域组514。并且，图像处理装置200按每个区域组514，决定包含属于该区域组514的变色区域511的包含区域515。并且，生成将所述包含区域515设为覆盖区域521的图像数据，并输出给印刷装置300。
如果是如此生成的化妆薄片520，则即使粘贴的角度和/或位置发生些许偏离，也能够更切实地覆盖多个变色区域511。
此外，在本实施方式中成为提取对象的变色区域511中，包括其变色的原因不同的变色区域。即，变色区域511根据其变色的原因的种类(以下称为“原因种类”)被划分为色斑、肝斑、扁平痣、色素细胞痣、太田痣、后天性真皮黑素细胞增生、红斑、紫斑、白斑、蓝痣、黑痣、毛孔黑头、晒黑区域、痤疮(粉刺)、粉刺印、因摩擦或炎症引起的色素沈着、皱纹、雀斑、纹身、疣、疤痕等。并且，根据原因种类的不同，应该对变色区域511进行的对策不同。
在本实施方式中，不仅对化妆薄片520的包含区域515赋予使变色区域511的颜色不显眼的色素材料(化妆料)，还对化妆薄片520的皮肤侧面的对应部分赋予与原因种类相应的药剂(有效成分)，由此实现变色区域511的改善。
<装置的构成>
接着，对图像处理装置200的构成进行说明。
图7是表示图像处理装置200的构成的一例的框图。
在图7中，图像处理装置200具有信息保存部210、图像取得部220、图像解析部230、分组处理部240以及印刷控制部250。
信息保存部210预先保存图像解析部230的图像解析所需的各种信息、以及分组处理部240设定包含区域515所需的各种信息。
图像取得部220例如包括上述的摄像头202(参照图1)，进行拍摄，并将所拍摄到的图像输出给图像解析部230。在拍摄图像中可能会包含拍摄面部得到的面部图像以及拍摄皮肤得到的皮肤图像。
图像解析部230从拍摄面部得到的面部图像中提取面部器官，基于所提取出的面部器官在面部图像中的位置，从面部图像中提取皮肤区域的图像(皮肤图像)。进一步，图像解析部230从皮肤图像中提取该皮肤图像所包含的皮肤(皮肤图像)中的与周边之间的颜色差异为预定等级以上的变色区域511、和变色区域511的周边色。并且，图像解析部230将表示所提取出的面部器官的位置、变色区域511以及周边色的解析结果信息和面部图像输出给分组处理部240。
分组处理部240基于解析结果信息，对多个变色区域511进行分组来设定区域组，按所设定的区域组，决定包含该区域组的包含区域515。并且，分组处理部240将表示面部图像中的面部器官的位置以及包含区域515的位置的分组结果信息和面部图像输出给印刷控制部250。
此外，分组处理部240例如基于信息保存部210所保存的分组规则信息以及组分离规则信息来进行上述分组。另外，分组处理部240例如基于信息保存部210所保存的包含区域设定规则信息来进行上述包含区域515的决定。关于分组规则信息、组分离规则信息以及包含区域设定规则信息的详细内容，在后面叙述。
印刷控制部250生成对化妆薄片520中的与包含区域515对应的区域印刷使包含区域515的颜色接近周边色的色素材料的内容的图像数据。并且，印刷控制部250将所生成的图像数据通过无线通信和/或有线通信等方式发送给印刷装置300。
此外，印刷控制部250不一定需要直接向印刷装置300发送所生成的图像数据，也可以经由其他信息记录设备等间接地发送该图像数据。例如，印刷控制部250也可以将所生成的图像数据记录于便携式存储设备等的记录介质，或者，也可以发送到便携式设备(智能手机、平板、PC等)。该情况下，用户经由该记录介质或便携式设备向印刷装置300发送图像数据，根据用户的指示等适当地进行所需的印刷。
虽然未图示，但图像处理装置200例如具有CPU(Central Processing Unit，中央处理单元)、保存有控制程序的ROM(Read Only Memory，只读存储器)等存储介质、RAM(Random Access Memory，随机存取存储器)等工作用存储器、以及通信电路。该情况下，上述的各部的功能通过CPU执行控制程序来实现。
这样的图像处理装置200能够自动地提取面部的变色区域511，并使用印刷装置300生成具有统一覆盖多个变色区域511的覆盖区域521的化妆薄片520。
<各种信息的内容>
在此，对分组规则信息、组分离规则信息和包含区域设定规则信息各自的内容进行说明。分组规则信息是对多个变色区域511进行分组并定义是否设为一个区域组的判定基准的信息。组分离规则信息是定义是否使一旦成组后的多个区域组分离成多个区域组的判定基准的信息。包含区域设定规则信息是定义对区域组设定包含区域515的设定方式的信息。
图8是表示分组规则信息的一例的图。
如图8所示，分组规则信息610例如记述有第1以及第2分组规则。
第1分组规则例如是“使间隔为预定的阈值以下的多个变色区域成组”这一内容。在此，“间隔”例如是通过面部图像的像素距离、或者从摄像头202到用户400的面部为止(参照图1)的距离和像素距离而算出的面部表面上的变色区域511间的最小距离。从摄像头202到用户400的面部为止的距离例如能够根据由立体摄像头得到的面部器官的视差和/或拍摄图像上的面部的大小等进行推定。
第2分组规则例如是“使颜色的差异处于预定的范围内的多个变色区域成组”这一内容。颜色的差异例如是RGB等预定的颜色空间中的颜色坐标的距离。即，颜色的差异处于预定的范围内的多个变色区域511是颜色相似的多个变色区域511。
此外，分组规则信息610的内容不限于所述例子。例如，分组规则信息610也可以包括：使RGB的比率构成的差异处于预定的范围内的多个变色区域511成组这一规则；使原因种类相同的多个变色区域511成组这一规则。
图9是表示组分离规则信息的一例的图。
如图9所示，组分离规则信息620例如记述有第1～第3组分离规则。
第1组分离规则例如是“在颜色的差异超过预定的范围的情况下，基于颜色的类似性对区域组进行分离”这一内容。在此，“基于颜色的类似性进行分离”例如是指：以在预定的颜色空间中由直线分割的区域进行分离、即分割成颜色较相似的组。
第2组分离规则例如是“在包括原因种类不同的多个变色区域的情况下，基于原因种类对区域组进行分离”这一内容。在此，“基于原因种类进行分离”例如是指：对适当的处置(有效成分)不同的变色区域进行分离。
第3组分离规则例如是“在区域组的变色区域的个数为预定的阈值以上的情况下，基于位置、颜色或原因种类进行分离”这一内容。在此，“基于位置、颜色或原因种类进行分离”例如是指：通过将多个变色区域511所分布的区域以经过其中央的线进行分割来进行分离；以在预定的颜色空间中由直线分割的区域进行分离；以及对适当的处置(有效成分)不同的变色区域进行分离。
此外，组分离规则信息620的内容不限定于所述例子。例如，组分离规则信息620也可以包括如下内容：将属于RGB的比率构成的差异不处于预定的范围内的区域组的多个变色区域511分离到不同的区域组。
图10是表示包含区域设定规则信息的一例的图。
如图10所示，包含区域设定规则信息630例如记述有第1以及第2包含区域设定规则。
第1包含区域设定规则例如是“将与比各变色区域大一圈的区域外接的圆区域(椭圆区域)设定为包含区域”这一内容。在此，“比各变色区域大一圈的区域”例如是指：与变色区域511外接的圆、矩形或者五边形等预定形状的区域、或者将该区域向外侧扩展预定幅度而得到的区域。
第2包含区域设定规则例如是“将以最小面积包含各变色区域的椭圆区域设定为包含区域”这一内容。在此，“以最小面积包含的椭圆区域”例如是指：与各变色区域511以及由各变色区域511之间的区域形成的变色区域分布区域外接的椭圆中的、除变色区域511之外的区域的面积成为最小的椭圆的区域。
第3包含区域设定规则例如是“将以预定的面积比包含各变色区域的椭圆区域设定为包含区域”这一内容。在此，“以预定的面积比包含的椭圆区域”例如是指：对与各变色区域511以及由各变色区域511之间的区域形成的变色区域分布区域外接的椭圆进行缩小或放大以使得该变色区域511所占的面积之比成为预定的面积比的椭圆的区域。
此外，包含区域设定规则信息630的内容不限定于所述例子。例如，组分离规则信息620也可以包含如下内容：将上述的变色区域分布区域向外侧扩展预定幅度，将对其外形进行平滑化而得到的区域设定为包含区域515。
<装置的工作>
接着，对图像处理装置200的工作进行说明。
图11是表示图像处理装置200的工作的一例的流程图。
在步骤S1100中，图像取得部220取得面部图像(皮肤图像)。
在步骤S1200中，图像解析部230从面部图像中提取面部器官、变色区域511以及各变色区域511的周边色。
具体而言，例如，图像解析部230首先取得拍摄了预定的比色图表(color chart)而得到的图像，基于图像中的比色图表的颜色来决定与拍摄环境相应的颜色修正的修正值。然后，在通过所决定的修正值进行了颜色修正之后，图像解析部230通过模式匹配等已知的图像识别处理，从面部图像中检测面部器官的位置。关于从图像提取面部器官的提取方法，例如在专利文献6中已记载，因此在此省略详细说明。
进一步，图像解析部230从面部图像中的除去面部器官之外的区域中提取预先确定的颜色范围的区域来作为皮肤区域，通过以预定的像素值(例如亮度)作为边界将该皮肤区域划分为变色区域511和非变色区域，由此提取变色区域511。此外，此时，图像解析部230也可以将预定面积以下的变色区域511作为非变色区域来进行处理。然后，图像解析部230将变色区域511的附近的非变色区域的平均值提取为周边色。此外，图像解析部230也可以根据专利文献1所记载的方法来进行变色区域511以及周边色的提取。
另外，图像解析部230也可以根据变色区域511的配置、大小、颜色等来判定该变色区域的原因种类。
例如，肝斑具有在两颊、额头、鼻下、下颚等部位相对于面部的中心左右对称地出现这一特征。因此，图像解析部230根据各变色区域511相对于面部器官(例如两眼)的位置的相对位置等，判定变色区域511是否左右对称地出现，在左右对称地出现的情况下判定为是肝斑。
另外，例如，雀斑在鼻子位置作为1～2毫米左右大小的小斑点而大量分布。因此，图像解析部230将大量分布在鼻子位置的小斑点判定为雀斑。
另外，图像解析部230也可以取得用户的年龄信息、人种、地域、季节等各种信息，基于所取得的信息来判定各变色区域511的原因种类。
此外，实际的变色区域511的形状以及大小各种各样。因此，图像解析部230也可以将各变色区域511转换成较单纯的图形区域。
图12是表示变色区域511的转换的状况的一例的图。
如图12所示，图像解析部230从皮肤图像中提取不特定的形状以及大小的变色区域511a。然后，图像解析部230将所提取出的变色区域511a例如转换成面积与该变色区域511a大致相同且重心大致相同的多边形区域511b，将所得到的多边形区域511b决定为用于后续处理的变色区域511。变色区域511的位置例如由4个或者5个顶点的坐标来定义。
在步骤S1300中，分组处理部240基于分组规则信息610(参照图8)，对多个变色区域511进行分组，设定区域组。分组处理部240例如基于第1分组规则，进行以距离优先的变色区域511的分组。
此外，分组处理部240既可以仅基于分组规则信息610所记述的一部分规则进行分组，也可以基于全部规则进行分组。另外，分组处理部240也可以从用户受理关于基于哪种规则进行分组的设定。
图13是表示分组的状况的一例的图。
如图13所示，例如，设为存在第1～第3变色区域5111～5113。第1变色区域5111和第2变色区域5112之间的距离d1比预定的阈值小，第1以及第2变色区域5111、5112与第3变色区域5113之间的距离d2、d3比预定的阈值大。该情况下，分组处理部240将第1以及第2变色区域5111、5112设定为第1区域组5141，将第3变色区域5113设定为第2区域组5142。
在图11的步骤S1400中，分组处理部240判断是否存在符合组分离规则信息620(参照图9)所定义的预定条件的区域组。在存在符合预定条件的区域组的情况下(S1400：是)，分组处理部240使处理进入步骤S1500。另外，在不存在符合预定条件的区域组的情况下(S1400：否)，分组处理部240使处理进入后述的步骤S1600。
在步骤S1500中，分组处理部240按照组分离规则信息620，将属于区域组的多个变色区域511分离成多个区域组。
例如，在属于一个区域组的变色区域511的个数为预定的阈值以上的情况下，在步骤S1500中，分组处理部240将该区域组分割成多个区域组。另外，在属于一个区域组的变色区域511中存在原因种类不同的变色区域的情况下，分组处理部240对区域组进行分割，以使得按原因种类进行集合。
在步骤S1600中，印刷控制部250按照包含区域设定规则信息630(参照图10)，按区域组来决定包含区域515。
图14是表示包含区域515的设定的状况的一例的图。
如图14所示，印刷控制部250首先取得属于同一区域组514的一个或多个变色区域511的多边形区域511b的各顶点511c。然后，印刷控制部250针对由属于同一区域组514的所有的顶点511c构成的点的集合，将包含所述点的集合在内的椭圆中的、对点的集合的均方误差成为最小的椭圆计算为包含区域515的外形。
此外，印刷控制部250也可以在基于预定的规则决定了包含区域515之后，基于该包含区域515进行原来的区域组的分割，并进行包含区域515的重新决定。例如，印刷控制部250基于“在包含区域的非变色区域相对于变色区域的面积比为预定的阈值以上的情况下，对原来的区域组进行分割并再次设定包含区域”这一规则，进行包含区域515的重新决定。
另外，印刷控制部250也可以将算出的椭圆重叠于面部图像并显示于显示部203，从用户受理对该椭圆的形状、大小、方向等的修正操作。
通过进行这样的处理，能够一边吸收化妆薄片520的粘贴误差一边将包含区域515设定为尽可能小的面积。即，能够减少覆盖区域521的印刷所使用的色素材料(化妆材料等)的浪费，并且在含有药剂等有效成分的情况下，能够适当地赋予给皮肤的所需范围，能够提高其效果。
在图11的步骤S1700中，印刷控制部250根据面部器官的配置，决定薄片形状。具体而言，印刷控制部250将避开面部器官的位置(鼻孔、眼、口、眉毛等)并能够覆盖所提取出的一个或多个变色区域511(或者，在变色区域511的外侧具有预定宽度的区域)的闭合形状(例如，图2～图6所示的化妆薄片520那样的形状)决定为薄片形状。此外，由于面部具有立体形状、且薄片的基本形状是平面的，因此优选对薄片形状的大小设置5cm×5cm以下等限制。
另外，印刷控制部250也可以通过使用预先设有切口的化妆薄片520、或者通过决定加入了切口的薄片形状，从而使得不用限制薄片形状的大小而适合于面部的立体形状。例如，也可以在薄片的端部的多个地方设置从面部的中心向轮廓方向的切口。进一步，对于覆盖鼻子等面部的突起部分的部分，也可以在该突起部分的两侧设置切口，或者，也可以通过在多个地方设置点线状的切口(缝)来使薄片适合于面部的立体形状。
此外，印刷控制部250在存在多个区域组的情况下，也可以将该区域组显示于显示部203，从用户受理指定向一张化妆薄片520印刷的区域组的操作。在使一张化妆薄片520包含较多区域组的情况下，具有能够通过一次薄片粘贴工作来覆盖较多的变色区域511这样的优点。另外，在使多个区域组分散到较多的化妆薄片520的情况下，具有可抑制化妆薄片520的消耗量、易于处理粘贴位置这样的优点。
在步骤S1800中，印刷控制部250生成包含通过步骤S1700决定的薄片形状、且以在步骤S1200中提取出的周边色在包含区域515形成图像的内容的印刷的图像数据。图像数据例如是CMYK形式的数据。
此外，印刷控制部250优选生成使覆盖区域521的图像的点密度随着靠近覆盖区域521的外周而降低这样的图像数据、即对覆盖区域521的外周进行了模糊(添加了色调)的图像数据。或者，印刷控制部250也可以在覆盖区域521的外周的外侧进行这样的模糊。由此，印刷控制部250能够控制印刷装置300，以使得与非变色区域的颜色协调性良好且实现自然化妆的覆盖区域521被印刷于化妆薄片520。
另外，印刷控制部250生成对化妆薄片520的皮肤侧面的与包含区域515对应的区域印刷具有抗炎症成分和/或美白成分等的药剂的内容的图像数据。即，印刷控制部250将指定应该对化妆薄片520的各位置印刷何种药剂的信息包含在图像数据中。印刷控制部250例如参照预先保存在信息保存部210中的记述有原因种类与适当药剂的对应关系的信息来生成该图像数据。
例如，印刷控制部250决定对与被判定为肝斑的变色区域511对应的包含区域515除了印刷用于遮盖斑痕的色素材料之外还印刷对苯二酚类的药剂。另外，印刷控制部250决定对与被判定为雀斑的变色区域511对应的包含区域515除了印刷用于遮盖斑痕的色素材料之外还印刷UV吸收剂和/或UV反射剂等药剂。
在如此也进行药剂印刷的情况下，通过分组处理部240基于原因种类进行分组，能够正确地对皮肤提供药剂，不仅能抑制药剂的浪费，还能够提高其效果。
在步骤S1900中，印刷控制部250将所生成的图像数据输出给印刷装置300。
然后，在步骤S2000中，图像取得部220判断是否通过用户操作等指示了处理的结束。图像取得部220在未被指示处理的结束的情况下(S2000：否)，使处理返回到步骤S1100。另外，图像取得部220在被指示了处理的结束的情况下(S2000：是)，结束一系列的处理。
通过这样的工作，图像处理装置200能够自动地提取面部的变色区域511，并使用印刷装置300生成具有统一覆盖多个变色区域511的覆盖区域521的化妆薄片520。
此外，图像处理装置200在印刷多个化妆薄片520的情况下，也可以从用户受理指定是一张一张地依次印刷还是进行一次印刷的操作。
<分组以及包含区域的具体例子>
接着，列举几个多个变色区域511的分组以及包含区域515的具体例子。
图15～图18是表示包含区域515的设定方式的例子的图。
例如，设为应用了第1分组规则(参照图8)以及第1包含区域设定规则(参照图10)。该情况下，如图15所示，比变色区域511大一圈的区域(以下称为“扩展变色区域”)516中的距离近的多个扩展变色区域516成组，与该多个扩展变色区域516外接的圆区域被决定为包含区域515。
另外，例如，设为应用了第2分组规则(参照图8)以及第2包含区域设定规则(参照图10)。该情况下，如图16所示，以最小面积包含多个变色区域511的椭圆区域被决定为包含区域515。
另外，例如，设为应用了第1分组规则(参照图8)以及第3包含区域设定规则(参照图10)。该情况下，如图17所示，包含多个变色区域511、且使变色区域511所占面积之比成为预定值的椭圆区域被决定为包含区域515。
另外，例如，首先，设为应用了第1分组规则(参照图8)、第3组分离规则(参照图9)以及第3包含区域设定规则(参照图10)。该情况下，如图18所示，很多接近的多个变色区域511根据其配置被分割成2个区域组。然后，包含各个区域组、且使变色区域511所占面积之比成为预定值的2个椭圆区域被决定为包含区域5151、5152。
此外，如图18所示，图像处理装置200也可以暂且应用第1包含区域设定规则(参照图10)将与所有的多个变色区域511的扩展变色区域516外接的椭圆区域生成为包含区域5150。然后，图像处理装置200也可以将变色区域511所占面积之比比预定值小这一情况作为条件来进行区域组的分割。
图19是表示在淡的变色区域511的内部存在浓的变色区域511的皮肤的状况的一例的图。
如图19所示，设为在大且淡的变色区域511L的内部存在小且浓的变色区域511S。淡的变色区域511L例如是肝斑，浓的变色区域511S例如是老年色斑。换言之，淡的变色区域511L是与周边之间的颜色差异为第1等级以上的区域，浓的变色区域511S是在淡的变色区域511L的内部与淡的变色区域511L的周边之间的颜色差异为大于第1等级的第2等级以上的区域。
在这样的情况下，图像解析部230对淡的变色区域511L和浓的变色区域511S分层提取。即，图像解析部230将包含位于内侧的浓的变色区域511S的区域提取为淡的变色区域511L。即，在淡的变色区域511L中包含与浓的变色区域511S重叠的区域。此外，这样的变色区域511的分层，既可以基于各变色区域511的颜色来进行，也可以基于各变色区域511的原因种类来进行。
图20是表示针对图19所示的皮肤的、包含区域515的设定以及图像数据的生成的状况的一例的图。
如图20所示，例如，针对淡的变色区域511L以及浓的变色区域511S，决定大的包含区域515L以及小的包含区域515S。印刷控制部250对这些大的包含区域515L以及小的包含区域515S进行分层，生成2个图像数据517I、517O。
图像数据517I是指示在化妆薄片520的离皮肤较近一侧(下侧)印刷与大的包含区域515L对应的覆盖区域521L的数据。图像数据517O是指示在化妆薄片520的离皮肤较远一侧(上侧)印刷与小的包含区域515S对应的覆盖区域521S的数据。
印刷装置300在对化妆薄片520的外侧面进行印刷的情况下，首先印刷图像数据517I，接着重叠地印刷图像数据517O。印刷装置300在对化妆薄片520的皮肤侧面进行印刷的情况下，首先印刷图像数据517O，接着重叠地印刷图像数据517I。
如此，通过分层地决定包含区域515并生成图像数据517，能够高效地进行化妆薄片520的生成。另外，对于上述的例子而言，浓的变色区域511S虽然是老年色斑，但也是肝斑的一部分。因此，在印刷装置300中不仅印刷色素材料还印刷药剂的情况下，能够适当地进行药剂的赋予。
<本实施方式的效果>
如以上的说明，本实施方式涉及的图像处理装置200是生成用于向化妆薄片520印刷图像的图像数据的装置。图像处理装置200具有取得皮肤图像的图像取得部220和从皮肤图像中提取变色区域511及其周边色的图像解析部230。另外，图像处理装置200具有分组处理部240，该分组处理部240对多个变色区域511进行分组，按区域组来决定包含该区域组的包含区域515，所述区域组是成组的多个变色区域511的集合、或者未成组的一个变色区域511。并且，图像处理装置200具有印刷控制部300，该印刷控制部300生成对化妆薄片520中的与包含区域515对应的区域印刷使包含区域515的颜色接近周边色的色素材料的内容的图像数据。
由此，本实施方式涉及的图像处理装置200能够实现即使向皮肤粘贴时的角度和/或位置发生了些许偏离也可使得各变色区域511更适当地被色素材料覆盖的化妆薄片520。即，图像处理装置200能够使粘贴化妆薄片520时的角度调整和/或坐标对准具有较大的容许幅度，因此能够简单地使皮肤的多个变色区域511不显眼。
此外，也考虑生成不管变色区域511的配置如何都以尽可能大的面积使色素材料印刷到化妆薄片520这样的图像数据。然而，该情况下，会变成像是整体涂厚了粉底这样的状态。因此，本实施方式涉及的图像处理装置200能够在更自然地保持皮肤外观的同时使变色区域511不显眼。
<本实施方式的变形例>
此外，变色区域511的提取方法、原因种类的判断方法、变色区域511的分组方法、包含区域515的决定方法、要印刷的材料的决定方法、以及印刷方法不限定于上述的例子。例如，作为变色区域511的提取方法、原因种类的判断方法以及变色区域511的分组方法，可以采用已知的分类方法、模式识别方法、聚类(clustering)方法以及最佳化方法。
作为已知的分类方法，例如列举决策树分析、神经网络(包括深度学习)以及朴素贝叶斯(Naive Bayes)。作为已知的模式识别方法，例如列举神经网络(包括深度学习)以及支持向量机(support vector machine，SVM)。作为已知的聚类方法，例如列举k最近邻法(k-NN，k-Nearest Neighbor)、k-means以及阶段性的聚类。另外，作为已知的最佳化方法，例如列举遗传算法。
另外，薄片形状的决定方法不限定于上述的例子。例如，印刷控制部250也可以在化妆薄片520的覆盖区域521以外的部分形成用于保持化妆薄片520的载置部。
另外，图像数据的生成方法不限定于上述的例子。例如，图像处理装置200也可以在图像解析部230中取得眼角、嘴角这样的面部特征点，在印刷控制部25中决定扩展到与这些面部特征点接近的位置为止的化妆薄片形状。并且，印刷控制部250也可以生成对化妆薄片520印刷表示应该与所述面部特征点对准的位置的标记的内容的图像数据。此外，在采用保持粘贴于皮肤的状态的化妆薄片520的情况下，希望标记被印刷于支持体或者由因温度和/或干燥等而随着时间经过变得不会被察觉的材料构成。
另外，印刷控制部250也可以生成对覆盖区域521的颜色和/或亮度赋予色调的内容的图像数据。该情况下，图像解析部230或者印刷控制部250对包含区域515的周边的多个位置单独地提取周边色，基于所提取出的多个周边色，生成颜色或亮度顺畅变化的覆盖区域521的图像数据。
另外，图像处理装置200也可以对图像数据以外的各种信息进行输出(显示、声音输出、发送)。例如，也可以与用户的智能手机等外部的显示装置合作，对用户进行对于变色区域511的改善而言有效的内服药和/或食物菜单的建议。例如，在肝斑的情况下，图像处理装置200可以建议摄取氨甲环酸或维生素C。
另外，图像处理装置200设为处理对象的图像也可以是面部图像以外的图像，例如也可以是拍摄了手指甲或胳膊的皮肤而得到的图像。
另外，图像处理装置200的结构的一部分也可以与该装置的结构的其他部分在物理上隔离。该情况下，这些隔离开的多个部分需要分别具备用于进行互相通信的通信部。例如，图像处理装置200的功能的一部分也可以云化。另外，图像处理装置200和印刷装置300也可以构成为一体。另外，图像处理装置200和印刷装置300的配置不限定于上述的例子。例如，印刷装置300也可以配置在印刷工厂等远离图像处理装置200的场所，并经由互联网等通信网络来接收图像数据。
<本公开的总结>
本公开的图像处理装置，生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据，所述图像处理装置具有：图像取得部，其取得拍摄所述皮肤得到的皮肤图像；图像解析部，其从所述皮肤图像中提取所述皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色，所述周边色是所述变色区域的周边的颜色；分组处理部，其对多个所述变色区域进行分组，按区域组来决定包含该区域组的包含区域，所述区域组是成组的多个所述变色区域的集合、或者未成组的一个所述变色区域；以及印刷控制部，其生成对所述薄片中的与所述包含区域对应的区域印刷色素材料的内容的所述图像数据，所述色素材料是使所述包含区域的颜色接近所述周边色的材料。
此外，在上述图像处理装置中，也可以：在所述皮肤图像为拍摄面部得到的面部图像时，所述图像解析部从所述面部图像中提取面部器官，所述分组处理部基于所述面部器官的位置以及所述变色区域的位置，进行所述分组，并且决定所述包含区域。
另外，在上述图像处理装置中，也可以：所述印刷控制部基于所述面部器官的位置以及所述包含区域的位置，决定所述面部上的所述薄片的形状，输出包含以所决定的所述形状形成所述薄片之意的指示的所述图像数据。
另外，在上述图像处理装置中，也可以：所述分组处理部基于所述多个变色区域之间的距离，决定所述区域组。
另外，在上述图像处理装置中，也可以：所述分组处理部基于所述多个变色区域各自的颜色，决定所述区域组。
另外，在上述图像处理装置中，也可以：所述分组处理部基于属于所述区域组的一个或多个所述变色区域的配置，决定所述包含区域的形状。
另外，在上述图像处理装置中，也可以：所述分组处理部按所述变色区域来判定该变色区域的原因种类，基于所判定出的所述原因种类来决定所述区域组，所述印刷控制部生成对所述包含区域赋予与所述原因种类对应的药剂的内容的所述图像数据。
另外，在上述图像处理装置中，也可以：当在所述皮肤中存在第1变色区域和第2变色区域时，所述图像解析部从所述皮肤图像中提取所述第1变色区域以及所述第2变色区域，所述第1变色区域是与周边之间的颜色差异为第1等级以上的区域，所述第2变色区域是在第1变色区域内所述与周边之间的颜色差异为大于第1等级的第2等级以上的区域，所述分组处理部按所述第1变色区域和所述第2变色区域进行分离并进行所述分组，决定与所述第1变色区域对应的第1所述包含区域以及与所述第2变色区域对应的第2所述包含区域，所述印刷控制部生成第1所述图像数据和第2所述图像数据，该第1所述图像数据是对所述薄片中的与所述第1包含区域对应的区域印刷使所述第1包含区域的颜色接近所述周边色的色素材料的内容的图像数据，该第2所述图像数据是对所述薄片中的与所述第2包含区域对应的区域印刷使所述第2包含区域的颜色接近所述周边色的色素材料的内容的图像数据。
另外，在上述图像处理装置中，也可以：所述印刷控制部输出在进行向所述薄片的印刷的印刷部中使用的所述图像数据。
本公开的图像处理方法，是生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据的图像处理方法。包括：取得拍摄所述皮肤得到的皮肤图像的步骤；从所述皮肤图像中提取所述皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色的步骤，所述周边色是所述变色区域的周边的颜色；对多个所述变色区域进行分组，按区域组来决定包含该区域组的包含区域的步骤，所述区域组是成组的多个所述变色区域的集合、或者未成组的一个变色区域；以及生成对所述薄片中的与所述包含区域对应的区域印刷色素材料的内容的所述图像数据的步骤，所述色素材料是使所述包含区域的颜色接近所述周边色的材料。
产业上的可利用性
本公开涉及的图像显示装置以及图像处理方法，作为能够简单地使皮肤的多个变色区域不显眼的图像处理装置以及图像处理方法是有用的。

Claims (9)

1.一种图像处理装置，生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据，所述图像处理装置具有：
图像取得部，其取得拍摄所述皮肤得到的皮肤图像；
图像解析部，其从所述皮肤图像中提取所述皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色，所述周边色是所述变色区域的周边的颜色；
分组处理部，其对多个所述变色区域进行分组，按区域组来决定包含该区域组的包含区域，所述区域组是成组的多个所述变色区域的集合、或者未成组的一个所述变色区域；以及
印刷控制部，其生成对所述薄片中的与所述包含区域对应的区域印刷色素材料的内容的所述图像数据，所述色素材料是使所述包含区域的颜色接近所述周边色的材料，
所述分组处理部基于所述多个变色区域之间的距离，决定所述区域组。
2.根据权利要求1所述的图像处理装置，
在所述皮肤图像为拍摄面部得到的面部图像时，所述图像解析部从所述面部图像中提取面部器官，
所述分组处理部基于所述面部器官的位置以及所述变色区域的位置，进行所述分组，并且决定所述包含区域。
3.根据权利要求2所述的图像处理装置，
所述印刷控制部基于所述面部器官的位置以及所述包含区域的位置，决定所述面部上的所述薄片的形状，输出包含以所决定的所述形状形成所述薄片之意的指示的所述图像数据。
4.根据权利要求1所述的图像处理装置，
所述分组处理部基于所述多个变色区域各自的颜色，决定所述区域组。
5.根据权利要求1所述的图像处理装置，
所述分组处理部基于属于所述区域组的一个或多个所述变色区域的配置，决定所述包含区域的形状。
6.根据权利要求1所述的图像处理装置，
所述分组处理部按所述变色区域来判定该变色区域的原因种类，基于所判定出的所述原因种类来决定所述区域组，
所述印刷控制部生成对所述包含区域赋予与所述原因种类对应的药剂的内容的所述图像数据。
7.根据权利要求1所述的图像处理装置，
当在所述皮肤中存在第1变色区域和第2变色区域时，所述图像解析部从所述皮肤图像中提取所述第1变色区域以及所述第2变色区域，所述第1变色区域是与周边之间的颜色差异为第1等级以上的区域，所述第2变色区域是在第1变色区域内所述与周边之间的颜色差异为大于第1等级的第2等级以上的区域，
所述分组处理部按所述第1变色区域和所述第2变色区域进行分离并进行所述分组，决定与所述第1变色区域对应的第1所述包含区域以及与所述第2变色区域对应的第2所述包含区域，
所述印刷控制部生成第1所述图像数据和第2所述图像数据，该第1所述图像数据是对所述薄片中的与所述第1包含区域对应的区域印刷使所述第1包含区域的颜色接近所述周边色的色素材料的内容的图像数据，该第2所述图像数据是对所述薄片中的与所述第2包含区域对应的区域印刷使所述第2包含区域的颜色接近所述周边色的色素材料的内容的图像数据。
8.根据权利要求1所述的图像处理装置，
所述印刷控制部输出在进行向所述薄片的印刷的印刷部中使用的所述图像数据。
9.一种图像处理方法，生成用于向能够粘贴于皮肤的薄片印刷图像的图像数据，所述图像处理方法包括：
取得拍摄所述皮肤得到的皮肤图像的取得步骤；
从所述皮肤图像中提取所述皮肤中的与周边之间的颜色差异为预定等级以上的变色区域和周边色的提取步骤，所述周边色是所述变色区域的周边的颜色；
对多个所述变色区域进行分组，按区域组来决定包含该区域组的包含区域的决定步骤，所述区域组是成组的多个所述变色区域的集合、或者未成组的一个变色区域；以及
生成对所述薄片中的与所述包含区域对应的区域印刷色素材料的内容的所述图像数据的生成步骤，所述色素材料是使所述包含区域的颜色接近所述周边色的材料，
在所述决定步骤中，基于所述多个变色区域之间的距离，决定所述区域组。
CN201710063507.5A 2016-02-29 2017-02-03 图像处理装置以及图像处理方法 Active CN107125904B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016037336A JP6722866B2 (ja) 2016-02-29 2016-02-29 画像処理装置および画像処理方法
JP2016-037336 2016-02-29

Publications (2)

Publication Number Publication Date
CN107125904A CN107125904A (zh) 2017-09-05
CN107125904B true CN107125904B (zh) 2021-01-29

Family

ID=58094194

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710063507.5A Active CN107125904B (zh) 2016-02-29 2017-02-03 图像处理装置以及图像处理方法

Country Status (4)

Country Link
US (1) US10027854B2 (zh)
EP (1) EP3211566A1 (zh)
JP (1) JP6722866B2 (zh)
CN (1) CN107125904B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3015927A1 (fr) * 2013-12-27 2015-07-03 Oreal Procede de maquillage par transfert et dispositif associe.
WO2018003395A1 (ja) * 2016-06-29 2018-01-04 パナソニックＩｐマネジメント株式会社 画像処理装置および画像処理方法
CN109522839A (zh) * 2018-11-15 2019-03-26 北京达佳互联信息技术有限公司 一种人脸皮肤区域确定方法、装置、终端设备及存储介质
CN111814520A (zh) * 2019-04-12 2020-10-23 虹软科技股份有限公司 肤质检测方法、肤质等级分类方法及肤质检测装置
FR3129577B1 (fr) * 2021-12-01 2024-02-09 Oreal SYSTÈMES, dispositifs et PROCÉDÉS comportant des substrats À code couleur pour la correction ponctuelle d’imperfections, de l’ACNÉ et de PROBLÈMES de peau secondaires
WO2023028483A1 (en) * 2021-08-25 2023-03-02 L'oreal Systems, devices, and methods including color-coded substrates for spot-correction of blemishes, acne, and secondary skin concerns

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006142005A (ja) * 2004-10-22 2006-06-08 Shiseido Co Ltd 肌状態診断システムおよび美容のためのカウンセリングシステム
JP2009003842A (ja) * 2007-06-25 2009-01-08 Noritsu Koki Co Ltd 画像処理装置及び画像処理方法
CN102027505A (zh) * 2008-07-30 2011-04-20 泰塞拉技术爱尔兰公司 使用脸部检测的自动脸部和皮肤修饰
CN103649987A (zh) * 2011-07-07 2014-03-19 花王株式会社 脸印象分析方法、美容信息提供方法和脸图像生成方法
JP2014120122A (ja) * 2012-12-19 2014-06-30 Canon Inc 領域抽出装置、領域抽出方法、及びコンピュータプログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03157313A (ja) 1989-11-15 1991-07-05 Miyauchi Kako Kk カード型化粧品
JPH09302294A (ja) 1996-05-15 1997-11-25 Sanei Gen F F I Inc インクジェット印刷用可食性インキ
JP3779570B2 (ja) 2001-07-30 2006-05-31 デジタルファッション株式会社 化粧シミュレーション装置、化粧シミュレーション制御方法、化粧シミュレーションプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2008543450A (ja) * 2005-06-16 2008-12-04 バイオレーズ テクノロジー インコーポレイテッド カスタマイズされた組織画像を担持する組織被覆材
FR2944899B1 (fr) * 2009-04-23 2014-04-25 Lvmh Rech Procede et appareil de caracterisation des taches pigmentaires et procede d'appreciation de l'effet de traitement d'une tache pigmentaire par un produit cosmetique
FR2944898B1 (fr) * 2009-04-23 2018-03-16 Lvmh Recherche Procede et appareil de caracterisation des imperfections de la peau et procede d'appreciation de l'effet anti-vieillissement d'un produit cosmetique
JP2012203425A (ja) 2011-03-23 2012-10-22 Seiko Epson Corp 画像処理装置、画像処理方法、および印刷装置
JP5997068B2 (ja) 2013-01-22 2016-09-21 ナノシータ株式会社 シート状積層体およびシート状積層体の製造方法
WO2014132593A1 (ja) * 2013-03-01 2014-09-04 パナソニック株式会社 生体適合性を有する薄膜に機能性材料を印刷する装置および印刷する方法
CN104270997B (zh) * 2013-03-01 2018-03-02 松下知识产权经营株式会社 转印装置以及印刷装置
JP2015043836A (ja) 2013-08-27 2015-03-12 大日本印刷株式会社 画像処理装置、プログラム及び画像処理システム
JP6138745B2 (ja) * 2014-11-19 2017-05-31 株式会社 資生堂 シミ評価装置、及びシミ評価プログラム
JP6655789B2 (ja) * 2016-03-08 2020-02-26 パナソニックＩｐマネジメント株式会社 画像処理装置および画像処理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006142005A (ja) * 2004-10-22 2006-06-08 Shiseido Co Ltd 肌状態診断システムおよび美容のためのカウンセリングシステム
JP2009003842A (ja) * 2007-06-25 2009-01-08 Noritsu Koki Co Ltd 画像処理装置及び画像処理方法
CN102027505A (zh) * 2008-07-30 2011-04-20 泰塞拉技术爱尔兰公司 使用脸部检测的自动脸部和皮肤修饰
CN103649987A (zh) * 2011-07-07 2014-03-19 花王株式会社 脸印象分析方法、美容信息提供方法和脸图像生成方法
JP2014120122A (ja) * 2012-12-19 2014-06-30 Canon Inc 領域抽出装置、領域抽出方法、及びコンピュータプログラム

Also Published As

Publication number Publication date
CN107125904A (zh) 2017-09-05
US10027854B2 (en) 2018-07-17
JP6722866B2 (ja) 2020-07-15
JP2017153555A (ja) 2017-09-07
US20170251130A1 (en) 2017-08-31
EP3211566A1 (en) 2017-08-30

Similar Documents

Publication Publication Date Title
CN107125904B (zh) 图像处理装置以及图像处理方法
CN107160865B (zh) 图像处理装置、印刷装置及图像处理方法
US10413042B2 (en) Makeup support device, makeup support method, and makeup support program
CN109152464B (zh) 图像处理装置以及图像处理方法
US10567599B2 (en) Image processing apparatus and method for processing image
RU2385669C2 (ru) Система и способ для медицинского мониторинга и обработки посредством косметического мониторинга и обработки
KR20200003402A (ko) 겉보기 피부 나이를 결정하기 위한 시스템 및 방법
CN109688868B (zh) 薄膜和薄膜形成方法
JP7117541B2 (ja) シート
WO2022245784A1 (en) Skin contouring using photo-responsive materials
US20220370822A1 (en) Skin contouring using photo-responsive materials

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant