CN105209870B - 用于指定和配制定制的外用制剂的系统和方法 - Google Patents

用于指定和配制定制的外用制剂的系统和方法 Download PDF

Info

Publication number
CN105209870B
CN105209870B CN201480026371.5A CN201480026371A CN105209870B CN 105209870 B CN105209870 B CN 105209870B CN 201480026371 A CN201480026371 A CN 201480026371A CN 105209870 B CN105209870 B CN 105209870B
Authority
CN
China
Prior art keywords
user
image
skin
oapta
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480026371.5A
Other languages
English (en)
Other versions
CN105209870A (zh
Inventor
D·A·霍威尔
D·B·格罗斯
L·Y·哈维尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shiseido Co Ltd
Original Assignee
Matchco Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matchco Co filed Critical Matchco Co
Priority to CN201811228968.4A priority Critical patent/CN109527779A/zh
Publication of CN105209870A publication Critical patent/CN105209870A/zh
Application granted granted Critical
Publication of CN105209870B publication Critical patent/CN105209870B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/463Colour matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/162Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032Determining colour for diagnostic purposes

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Dermatology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Image Processing (AREA)
  • Tourism & Hospitality (AREA)
  • Human Resources & Organizations (AREA)
  • Child & Adolescent Psychology (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Studio Devices (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Cosmetics (AREA)
  • Image Analysis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

用于确定定制的化妆品配方的系统和方法。在一种方法中,引导用户利用已知的照明和颜色特性捕捉皮肤区域的图像,并且图像被处理,以提供经校准的皮肤颜色信息。基于经校准的皮肤颜色信息为用户自动确定定制的化妆品配方。在另一种方法中,交互式地引导用户通过利用具有图像传感器的设备对一个或多个皮肤区域图像的捕捉。皮肤区域图像被处理,以提供经校准的皮肤颜色信息,该信息与基础事实数据集进行比较,以识别基础事实数据集中一组最接近的已知值。基于该比较为用户自动确定定制的化妆品配方。

Description

用于指定和配制定制的外用制剂的系统和方法
对相关申请的交叉引用
本申请要求于2013年3月15日提交且标题为“System and Method forSpecifying and Formulating an Aesthetic and Protective Topical AgentOptimized for a Specific Use”的美国临时专利申请No.61/788,619的优先权和权益,并且要求于2013年8月15日提交且标题为“System and Method for Specifying andFormulating an Aesthetic and Protective Topical Agent Optimized for aSpecific Use”的美国临时专利申请No.61/866,245的优先权和权益,它们的全部内容通过引用被结合于此。
技术领域
本公开内容一般而言涉及图像分析和外用制剂配制,并且更具体而言涉及用于基于经颜色校准的皮肤图像确定定制的化妆品配方的系统和方法。
背景技术
涂抹霜或洗液形式的美观性和保护性化妆品外用制剂广泛地被用来保护不受UV辐射、提供保湿屏障、掩盖瑕疵和皮肤变色、减小或防止刺激,并且提供其它健康和美观好处。在所有可能的最好生活世界中,这些保护性外用制剂将由专家团队为具有具体需求的特定个人指定,并且为具体环境或用途指定。于是,外用制剂将以及时的方式配制并递送给个人。不幸的是,到目前为止,物流和成本限制了向给定用户提供这种具体的优化产品的实用性。
目前,存在几种方法来提供匹配特定需求的化妆品外用制剂。这些制剂可以基于来自皮肤学家的规格说明合成。它们可以在零售商店由有丰富知识的店员从一组成分组合。具有广泛的多种多样的属性的化妆品霜或洗液的系统或集合可以基于给定消费者的肤色、皮肤类型和具体需求来预先制造并选择。
这些外用制剂的定制制造和分销的一般解决方案的主要障碍是产品中特征的数量很多,并且需求变化性很大。以对给定需求和个人最优的粒度制造并库存每种配方在商业上是不可行的。于是,所需要的是利用例如高级图像分析技术基于个人具体需求的确定来提供有用的合成物、以及提供对该组需求最优的配方的方法。
捕捉具有中等镜面反射比以及主导的漫反射比的表面的反射谱的技术可以要求测量反射的颜色作为RGB三原色,或者要求利用通过处于已知距离的已知光源用探测器集成反射比的光学方法来测量表面的反射谱,其中探测器被设置为固定光圈、固定的集成光学器件、并且在固定的时间段进行测量。使用这些技术的设备是反射分光光度计和色度计。
一些移动设备具有色度计的许多特性。例如,它们具有带已知特性的光源、CCD探测器、处理器以及可以被用于集成的透镜系统。使用移动设备作为准确色度计的主要障碍是以下需求:(1)控制环境光;(2)设置到要采样的表面的距离;(3)控制用于样本测量的光圈;(4)控制用于样本测量的探测器灵敏度;(5)控制用于测量样本的时间;(6)控制用于测量样本的白平衡;及(7)控制用于测量样本的焦平面。
虽然在移动设备中使用的相机已经变成目前使用的最流行的手持式相机,但是它们缺乏手动设置光圈的能力,并且该最流行的设备不允许软件设置光圈、灵敏度或曝光时间。虽然移动设备的硬件和固件可以报告什么相机设置被用作嵌入在结果得到的数字图像文件中的数据,但是技术常常在固件中使用,以增强或改进图像并且调整白平衡。控制相机的固件已经被优化以产生质量快照,而不是对光和颜色进行可靠测量。
于是,进一步需要的是解决这些问题并且允许用户利用移动设备捕捉准确、可重复的颜色样本的系统和方法。
发明内容
给出了用于确定定制的化妆品配方并捕捉准确颜色信息的系统和方法。在一方面,确定定制的化妆品配方的方法包括引导用户利用已知的照明和颜色特性捕捉皮肤区域的图像;处理该图像,以提供经校准的皮肤颜色信息;并且基于经校准的皮肤颜色信息自动地确定用于该用户的定制的化妆品配方。皮肤区域图像可以从具有图像传感器的设备接收,并且用户可以被交互式地引导通过利用设备图像传感器的对多个皮肤区域图像(诸如面部区域)的捕捉。
在一种实现中,用户被交互式地引导通过利用设备图像传感器的对标记的图像的捕捉,并且皮肤区域图像至少部分地基于捕捉到的标记图像被处理。设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机或者游戏控制台。皮肤区域图像可以包括识别设备和图像传感器中的至少一个的属性的嵌入式数据,并且皮肤区域图像可以至少部分地基于该嵌入式数据被处理。
在另一种实现中,自动地确定定制的化妆品配方包括匹配经校准的皮肤颜色信息与参照用户,该参照用户具有与其关联的之前确定的化妆品配方。定制的化妆品配方的自动确定可以至少部分地基于用户对化妆品成分过敏的指示。基于定制的化妆品配方的外用制剂可以被合成并递送给用户。用户可以被允许购买基于定制的化妆品配方合成的外用制剂。
在另一方面,用于确定定制的化妆品配方的系统包括至少一个计算机,其本身包括用于存储计算机可执行指令的存储器和用于执行存储在存储器中的指令的处理单元。指令的执行将计算机配置为执行操作,操作包括:引导用户利用已知的照明和颜色特性捕捉皮肤区域的图像;处理该图像,以提供经校准的皮肤颜色信息;并且基于经校准的皮肤颜色信息自动地确定用于该用户的定制的化妆品配方。皮肤区域图像可以从具有图像传感器的设备接收,并且操作还可以包括交互式地引导用户通过利用设备图像传感器的对多个皮肤区域图像(诸如面部区域)的捕捉。
在一种实现中,操作还包括交互式地引导用户通过利用设备图像传感器的对标记的图像的捕捉,并且皮肤区域图像至少部分地基于捕捉到的标记图像被处理。设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机或者游戏控制台。皮肤区域图像可以包括识别设备和图像传感器中的至少一个的属性的嵌入式数据,并且皮肤区域图像可以至少部分地基于该嵌入式数据被处理。
在另一种实现中,自动地确定定制的化妆品配方包括匹配经校准的皮肤颜色信息与参照用户,该参照用户具有与其关联的之前确定的化妆品配方。定制的化妆品配方的自动确定可以至少部分地基于用户对化妆品成分过敏的指示。操作还可以包括允许用户购买基于定制的化妆品配方合成的外用制剂。
在一方面,确定定制的化妆品配方的方法包括交互式地引导用户通过利用具有图像传感器的设备的对一个或多个图像的捕捉,每个图像包括用户的皮肤区域;处理皮肤区域图像,以提供经校准的皮肤颜色信息;比较经校准的皮肤颜色信息与基础事实数据集,以识别基础事实数据集中的最接近的已知值集合;并且基于该比较自动地确定用于该用户的定制的化妆品配方。定制的化妆品配方包括以下中的至少一种:(i)基于经校准的皮肤颜色信息与最接近的已知值集合的相对接近性得出的独特合成物和(ii)现有化妆品产品。
在一种实现中,处理皮肤区域图像包括,对于皮肤区域图像中的至少一个:检测至少一个皮肤区域图像中的多个面部区域;基于肤色分割面部区域;并且基于肤色、阴影和镜面高光中的至少一个给每个面部区域分段分配颜色。
在另一种实现中,与皮肤区域图像中的至少一个关联的环境照明信息被接收,并且该至少一个皮肤区域图像至少部分地基于环境照明信息被处理。
在进一步实现中,该方法还包括交互式地引导用户通过利用设备图像传感器的对标记的图像的捕捉,并且皮肤区域图像至少部分地基于标记图像被处理。设备图像传感器的当前设置可以基于标记图像的成功捕捉来存储。设备图像传感器设置可以包括曝光、对焦和/或白平衡。皮肤区域图像可以基于存储的图像传感器设置被处理。处理皮肤区域图像可以包括补偿未知的光源。
在还有另一种实现中,皮肤区域是手腕、前额、左脸颊、右脸颊和/或整个面部。该方法还可以包括允许用户购买现有的化妆品产品。设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机和/或游戏控制台。
在另一方面,用于确定定制的化妆品配方的系统包括至少一个计算机,其本身包括用于存储计算机可执行指令的存储器和用于执行存储在存储器中的指令的处理单元。指令的执行将计算机配置为执行操作,操作包括交互式地引导用户通过利用具有图像传感器的设备的对一个或多个图像的捕捉,每个图像包括用户的皮肤区域;处理皮肤区域图像,以提供经校准的皮肤颜色信息;比较经校准的皮肤颜色信息与基础事实数据集,以识别基础事实数据集中的最接近的已知值集合;并且基于该比较自动地确定用于该用户的定制的化妆品配方。定制的化妆品配方包括以下中的至少一种:(i)基于经校准的皮肤颜色信息与最接近的已知值集合的相对接近性得出的独特合成物和(ii)现有化妆品产品。
在一种实现中,处理皮肤区域图像包括,对于皮肤区域图像中的至少一个:检测至少一个皮肤区域图像中的多个面部区域;基于肤色分割面部区域;并且基于肤色、阴影和镜面高光中的至少一个给每个面部区域分段分配颜色。
在另一种实现中,与皮肤区域图像中的至少一个关联的环境照明信息被接收,并且该至少一个皮肤区域图像至少部分地基于环境照明信息被处理。
在进一步实现中,操作还包括交互式地引导用户通过利用设备图像传感器的对标记的图像的捕捉,并且皮肤区域图像至少部分地基于标记图像被处理。设备图像传感器的当前设置可以基于标记图像的成功捕捉被存储。设备图像传感器设置可以包括曝光、对焦和/或白平衡。皮肤区域图像可以基于存储的图像传感器设置被处理。处理皮肤区域图像可以包括补偿未知的光源。
在还有另一种实现中,皮肤区域是手腕、前额、左脸颊、右脸颊和/或整个面部。操作还可以包括允许用户购买现有的化妆品产品。设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机和/或游戏控制台。
在一方面,利用具有图像传感器的设备捕捉对象的准确颜色的方法包括利用具有已知尺寸的标记来校准设备的多个设置;测量对象的多个表面中的每一个的颜色;基于测量出的颜色确定对象的表面反射比;并且基于经校准的设置、测量出的表面颜色和对象的表面反射比确定对象的表面颜色变化。多个表面可以包括皮肤的区域,并且设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机或游戏控制台。标记可以具有已知的反射比。
在一种实现中,对设备校准包括指引用户将标记放在基本白场上。对设备校准可以包括基于捕捉到的该基本白场的图像,设置设备的光圈、灵敏度、曝光时间和白平衡中的至少一个。对设备校准还可以包括将与设备图像传感器关联的灯设置为已知的亮度。另外,对设备校准可以包括交互式地引导用户在离标记的表面的特定距离处定位设备图像传感器。而且,对设备校准可以包括一经在离标记的表面的特定的距离处定位设备图像传感器,就锁定设备的至少一个设置。设备的设置可以是自动曝光、自动对焦和/或自动白平衡。被锁定的设备设置可以在测量对象的每个表面的颜色时应用。
在另一种实现中,测量对象的表面的颜色包括指引用户将标记接近对象的表面放置。测量对象的表面的颜色还可以包括交互式地引导用户将设备图像传感器与对象相对于彼此定位,以匹配校准目标。交互式引导可以包括语音指引。测量对象的表面的颜色还可以包括一经在离标记的特定的距离处定位设备图像传感器,就捕捉对象的表面的颜色。
在进一步实现中,确定对象的表面反射比包括将捕捉到的颜色变换成对象的表面反射比。
在另一方面,用于捕捉对象的准确颜色的系统包括至少一个计算机,其本身包括用于存储计算机可执行指令的存储器和用于执行存储在存储器中的指令的处理单元。指令的执行将计算机配置为执行操作,操作包括利用具有已知尺寸的标记来校准设备(其可以具有图像传感器)的多个设置;测量对象的多个表面中的每一个的颜色;基于测量出的颜色确定对象的表面反射比;并且基于经校准的设置、测量出的表面颜色和对象的表面反射比确定对象的表面颜色变化。多个表面可以包括皮肤的区域,并且设备可以是移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机或游戏控制台。标记可以具有已知的反射比。
在一种实现中,对设备校准包括指引用户将标记放在基本白场上。对设备校准可以包括基于捕捉到的该基本白场的图像,设置设备的光圈、灵敏度、曝光时间和白平衡中的至少一个。对设备校准还可以包括将与设备图像传感器关联的灯设置到已知的亮度。另外,对设备校准可以包括交互式地引导用户在离标记的表面的特定的距离处定位设备图像传感器。而且,对设备校准可以包括一经在离标记的表面的特定的距离处定位设备图像传感器,就锁定设备的至少一个设置。设备的设置可以是自动曝光、自动对焦和/或自动白平衡。被锁定的设备设置可以在测量对象的每个表面的颜色时应用。
在另一种实现中,测量对象的表面的颜色包括指引用户将标记接近对象的表面放置。测量对象的表面的颜色还可以包括交互式地引导用户将设备图像传感器与对象相对于彼此定位,以匹配校准目标。交互式引导可以包括语音指引。测量对象的表面的颜色还可以包括一经在离标记的特定的距离处定位设备图像传感器,就捕捉对象的表面的颜色。
在进一步实现中,确定对象的表面反射比包括将捕捉到的颜色变换成对象的表面反射比。
根据以下附图、具体描述和权利要求,本发明的其它方面和优点将变得明晰,所有这些附图、具体描述和权利要求都仅仅作为例子说明本发明的原理。
附图说明
本发明的更完整理解及其许多附带优点将很容易获得,因为通过在结合附图考虑时参考以下具体描述,这些将变得更好理解。在附图中,相同的标号一般而言贯穿不同的视图指相同的部分。另外,附图不一定是按比例的,相反,重点一般放在说明本发明的原理上。
图1是根据本发明的实现的用于向用户提供优化的外用制剂的示例方法的流程图。
图2是根据本发明的实现的用于向用户提供优化的外用制剂的示例系统的高级体系架构图。
图3A-3D是根据本发明的实现的用于利用具有图像传感器的设备捕捉皮肤颜色的示例方法的流程图。
图4A-4E是根据本发明的实现的用于分析包含面部区域的图像的示例方法的流程图。
具体实施方式
本文所描述的是用于利用例如应用到照片的图像分析技术来指定和配制对特定个体的特性被优化的外用制剂的系统和方法的各种实现,其中照片是利用移动电话、平板电脑、网络摄像头、数码相机、游戏控制台、电视机、智能眼镜以及其它具有图像传感器的消费者或专业设备拍摄的。
优化的美观保护性外用制剂
在一种实现中,提供了生成用于定制的外用制剂的规格说明的系统,其中定制的外用制剂在本文被称为“优化的美观保护性外用制剂”,缩写为“OAPTA”。OAPTA是为了具体个体客户的需求和特性而配制的,其中个体客户在本文被称为“用户”。OAPTA可以包括一组可能的成分。这个组可以足够大,以满足给定用户的大部分需求。在一些情况下,只有少量成分在用于用户的OAPTA的具体配方中被使用。OAPTA的成分(OAPTA成分集合)可以包括但不限于:
1.外用基本成分、水、乳剂、凝胶、胶质。
2.保湿制剂。
3.紫外线(UV)过滤制剂。
4.不透明(隐藏)制剂。
5.颜色控制制剂。
6.反射比(光泽、无光泽、乳光)控制制剂。
7.抗发炎制剂(例如,芦荟,等等)。
8.保护性制剂(例如,维他命E,等等)。
OAPTA服务
参考图1,在一种实现中,OAPTA利用以下高级别步骤提供给用户。为了简洁和清晰,向用户提供OAPTA的所有步骤的聚合将在本文被称为“服务”。在步骤102,利用例如提供对本系统的访问的用户名和密码来识别用户。在用户之前未使用该系统的情况下,用户可以前去注册,以设置新帐号(步骤104)。于是,用户的细节(例如,名字、地址等)可以存储在用户数据库150中。一旦用户被系统识别出(例如,登录),数据就可以被收集(步骤106),以确定用户的需求(例如,允许用户指示期望的化妆品、允许用户指定任何过敏、捕捉皮肤图像,等等)。数据收集步骤可以利用专业服务(诸如亲身专业咨询)来执行(步骤108),或者另选地,可以由用户自己通过利用消费者设备(例如,移动电话、平板电脑或其它设备)上的应用拍摄照片来执行(步骤110),接着,消费者设备上的应用将自动验证照片的颜色准确度、质量和其它属性(步骤112)。由专业服务和/或设备应用捕捉的信息可以存储在用户数据库150中,供随后参照和重用。
在数据收集之后(或者参考之前收集的数据),步骤114提供OAPTA规格说明,其中OAPTA的成分利用诸如以上所描述的那些成分被指定。在步骤116,基于OAPTA规格说明,生成配制和/或制造OAPTA的指令。如果用户在利用应用生成OAPTA,则该应用可以显示要创建的定制的产品(步骤118),并且允许用户将产品放在购物车中(步骤120)并购买它(步骤122)。接着,所生成的配制指令可以被用来合成OAPTA或者选择匹配该配方的预制OAPTA(步骤124)。接着,OAPTA可以被递送给用户(步骤126),并且可以可选地收集反馈,以确定是否满足用户的需求(步骤128)。
OAPTA系统
在一种实现中,向用户提供OAPTA的系统200由一组组件和服务构成。系统200可以包括共享OAPTA成分集合210,诸如以上所描述的那些,供系统200中的各种OAPTA服务使用。至少一个OAPTA参照服务220可以便于创建用于参照用途的集合的OAPTA以及组合OAPTA元数据230。OAPTA参照服务220以与OAPTA生产服务240相同的方式收集用户数据,并且可以收集附加的用户数据,以配制最优的OAPTA规格说明。
OAPTA元数据230是以允许从OAPTA生产服务240收集的用户数据映射到由OAPTA参照服务220生成的OAPTA规格说明的形式的从OAPTA参照服务220收集的用户数据的组合。至少一个OAPTA生产服务240利用由至少一个OAPTA参照服务220生成的OAPTA元数据230提供对OAPTA规格说明的创建。OAPTA系统反馈250提供来自至少一个OAPTA参照服务220和至少一个OAPTA生产服务240的OAPTA反馈的集合,以便修改或改变OAPTA成分集合210和/或修改OAPTA生产服务240的规格说明、配方和合成260。
共享的OAPTA成分集合
共享的OAPTA成分集合210可以如下所描述地指定;但是应当认识到,共享的OAPTA成分集合210可以以在本文所描述OAPTA系统中类似地起作用的各种合适的方式指定。由皮肤学家、美学家和化妆品配色师组成的组在本文被称为“OAPTA专家组”。在一种实现中,共享的OAPTA成分集合210由OAPTA专家组指定。共享的OAPTA成分集合210可以首先被指定为全集,接着被指定为指示可彼此一起使用的那些成分的连接的集合。例如,一组着色剂可以被指定为只可与特定的外用基本成分一起使用,或者一起工作以提供更不透明性的一组成分可以被指示为在一起使用时最有效。类似地,对具有某些过敏的用户最好的那些项的组可以被识别并标记。
成分的这种初始映射提供了用于OAPTA生产服务240的规格说明方法的数据,并且将在本文被称为“规格说明提示”。在一种实现中,规格说明提示表示为无向图,它被转换成一组最小生成树。应当认识到,遍历最小生成树来发现哪些成分可以一起使用比评估无向图更快。在这种转换之后,共享的OAPTA成分集合210中的单个项可以被组成规格说明提示的多个生成树参照。在初始创建之后,规格说明提示可以被OAPTA系统反馈250更新或发现,以及被OAPTA专家组修改。
OAPTA参照服务
OAPTA参照服务220可以在指定共享的OAPTA成分集合210之后构造。OAPTA参照服务220产生构造OAPTA生产服务240所需的OAPTA元数据230。在一种实现中,OAPTA参照服务220被配置为专业服务。在另一种实现中,OAPTA参照服务220被配置为在线业务和零售商店。OAPTA参照服务220作为专业服务的实现在以下描述中被用作例子。
参照用户身份
作为专业服务,OAPTA参照服务220可以使用最好的实践来管理用户身份。除此之外,它还可以实现私有策略和信息使用策略,该策略允许参照服务220以匿名和不识别用户的形式收集并存储用户数据,并且可以被用来建立OAPTA元数据230。基于一些考虑,可以对要被OAPTA系统200使用的数据做一些协定,使得系统200的生产部件的用户可以识别具有类似OAPTA产品需求的具体参照用户(诸如名人)。
参照用户数据集合
OAPTA参照服务220可以使用与OAPTA生产服务240相同的数据收集。此外,这种数据可以利用如由OAPTA专家组指定的收集方法来增强。
公共服务数据集合
在一种实现中,服务数据集合使用一组移动设备上的应用,这组移动设备具有类似的特征并且以具有类似的信息收集和媒体显示属性的方式被制造。移动应用可以使用户经过一系列步骤来收集数据。例如,应用可以问用户他或她是否具有特定需求或过敏。应用可以示出指示用户接下来执行什么步骤的视频,和/或可以使用移动游戏的上下文来获得并优化数据。移动设备可以被选择,并且应用可以被构造,以从每个集合提供一致的数据。一致的图像数据集合可以利用以下一种或多种方法来执行。
1.在一个例子中,使用具有已知特性的制造记号或标记(例如,新美元钞票的一部分、新二角五分硬币、或者被制造并发送到用户的标记)。移动设备应用可以指示用户单独拍摄标记的一部分的照片和/或挨着用户皮肤的标记。图像被发送到OAPTA系统,在那里,它可以基于所使用的标记被校准,并且从图像生成必要的数据。
2.在另一个例子中,参照颜色图投射到用户设备的屏幕上并且用户被指示在在镜子中拍摄照片,从而在同一帧中捕捉她的皮肤和参照颜色图。图像被发送到OAPTA系统,在那里,它可以基于所使用的标记被校准,并且从图像生成必要的数据。
3.在进一步的数据收集例子中,移动设备的内部闪光灯被用作光源,并且用户被指示以特定的方式拍摄她皮肤的图片。图像被发送到OAPTA系统,在那里,它基于来自设备的闪光灯和Exif数据(包括焦距)被校准,并且从图像生成必要的数据。
4.在另一个例子中,用来运送OAPTA产品的包装以如下方式被设计,即保持移动设备以提供光屏蔽并且定义离用户皮肤的特定距离。用户被指示以特定的方式拍摄她皮肤的图片。图像被发送到OAPTA数据收集系统,在那里,它基于来自设备的闪光灯和Exif数据(包括焦距)被校准,并且从图像生成必要的数据。
5.在还有另一个例子中,图像可以由移动设备上允许软件控制相机的应用来捕捉。在设备上运行的软件可以设置设备只使用存在于设备上的闪光灯或灯,和/或它还可以使用设备上的面部检测来确定拍摄图像的时间。图像可以在例如离用户面部的距离在已知距离之内和/或用户面部在中间并聚焦的时候被拍摄。在移动设备上运行的软件还可以使用实时视频捕捉来确定环境光的量(不使用闪光灯)并且可以使用语音或文字提示来交互式地向用户建议如何改变照明。在利用闪光灯拍摄数码照片之前关于在视频模式下检测到的环境照明的信息可以连同图像一起发送以供处理。此外,两个图像可以快速相继地拍摄,一个用环境光,一个用闪光灯。
现在将更详细地描述利用移动设备上的相机和灯来捕捉准确的皮肤颜色。应当认识到,虽然本技术主要是关于捕捉准确的皮肤颜色来描述的,但是其它应用也是可能的,尤其是在将使用色度计的条件下。图3A绘出了利用具有图像传感器的移动设备或其它设备捕捉皮肤颜色的过程的一种实现。在步骤310中,设备利用在白场或基本白场上的具有已知尺寸的标记被校准。在步骤330中,系统测量与标记相邻的对象表面(例如,皮肤区域)的颜色。在步骤350中,测量已知尺寸的对象的颜色,并且在步骤370中,系统基于在步骤330和/或步骤350中发现的亮度来测量对象表面的颜色变化。
现在参考图3B,更详细地示出了设备校准步骤310。在一些实现中,校准设备需要设置,在设置中具有已知尺寸和已知反射比的软件可检测对象(“标记”)被放在白场或基本白场上。这种设置可以被制造,并且可以是例如产品包装的一部分,或者包括在经包装的产品中,诸如皮肤护理产品。另选地,这种设置可以通过将常见对象或具有众所周知属性的对象(诸如硬币)放在具有已知属性的白场或基本白场(诸如两张复印/打印纸)上来创建。用于校准的距离可以被确定为离被测表面足够近,以减小环境光的影响。
在步骤312中,设备上的软件应用指引用户设置以放置或构造用于校准的设置。软件可以为设备上的相机设置特定的视频或图像捕捉模式,并且将与相机关联的灯设置为已知的亮度(步骤314)。设备上的软件可以交互式地示出场上的标记的所捕捉图像(步骤316),并且可以检测标记并且为用户加亮或勾勒标记的位置(步骤318)。在一些实现中,标记的位置被偏移,使得软件使用白场来设置设备的光圈、灵敏度、曝光时间和白平衡。
在步骤320中,软件示出或加亮标记的期望尺寸和位置,该期望尺寸和位置将导致设备的相机位于特定距离处。这种尺寸和位置在本文被称为“校准目标”。软件可以交互式地指引用户匹配加亮的标记与校准目标(步骤322)。当用户定位设备以匹配标记与校准目标时,软件可以使设备锁定自动曝光、自动聚焦和自动白平衡(步骤324)。这种锁定有效地将光圈、灵敏度、快门速度、对焦和白平衡校准到离具有已知反射比的表面的预定距离。设置的白点(和其它数据)可以被记录并用来校准后续会话(步骤326)。
现在参考图3C,更详细地示出了相邻表面颜色测量步骤330。在一种实现中,测量对象的颜色使得设置(或者至少已知)从设备的相机到对象表面的距离成为必需。如果对象尺寸不固定,则这可以通过与要测量的表面相邻地放置与校准步骤中所使用的相同标记来进行。
在步骤332中,设备上的软件指引用户与要测量的表面相邻地或者在其上放置标记。在步骤334中,软件维护或重建来自校准步骤310的锁定设置。软件可以交互式地示出捕捉到的与对象相邻的标记的图像(步骤336),包括示出被集成和测量的对象表面的区域(即,“样片”)的轮廓(步骤338)。在步骤340中,软件可以集成在样片中发现的颜色并且交互式地示出所发现的颜色。软件还可以检测标记并且交互式地为用户加亮或勾勒标记的位置(步骤342)。标记的位置可以被偏移,使得样片匹配被用来校准白点的捕捉图像的区域。
在步骤344中,软件交互式地指引用户匹配加亮的标记与校准目标。当用户定位设备以匹配标记与校准目标时,软件可以将样片的集成颜色记录为对象的原始颜色值(步骤346)。软件可以使用已知的技术来应用所发现的白平衡和所存储的关于设备特性的数据来将发现的对象的原始颜色值变换为对象的表面反射比(步骤348)。
现在参考图3D,更详细地示出了对象颜色测量步骤350。如果要测量的对象具有已知的尺寸、或者已知尺寸的特征,则这些特征的尺寸可以被用来确定设备的相机离要测量的对象的距离。例如,在测量皮肤颜色时,用户手腕的宽度、或者用户瞳孔之间的距离可以被用来检测设备的相机离用户皮肤的距离。
在步骤352中,设备上的软件指引用户将相机指向对象(例如,手腕、面部、脸颊、前额或其它皮肤区域),并且将对象保持在适当位置以匹配显示器上的轮廓。在步骤354中,软件维持或重建来自校准步骤310的锁定设置。软件可以交互式地示出捕捉到的手腕或其它对象的图像,并且加亮找出的手腕宽度(步骤356)。软件还可以示出被集成和测量的对象表面的区域(即,样片)的轮廓(步骤358)。在步骤360中,软件可以集成在样片中发现的颜色并且交互式地向用户示出所发现的颜色。
软件可以检测标记并且交互式地为用户加亮或勾勒手腕的位置(步骤362),并且还可以交互式地加亮或勾勒手腕的目标位置,用于匹配校准距离(步骤364)。软件还可以交互式地指引用户匹配加亮的标记与校准目标(步骤366)。当用户定位设备以匹配手腕与手腕的目标时,软件可以将样片的集成颜色记录为手腕的原始颜色值(步骤368)。在步骤370中,软件可以使用已知的技术应用所发现的白平衡和所存储的关于设备特性的数据来将找出的对象的原始颜色值变换为对象的表面反射比。
现在回头去参考图3A中的步骤370,当对象的整体反射比已知、设备已经校准并且对象的一部分的颜色已知时,对象的表面颜色变化可以被测量。例如,如果人的内手腕和外手腕的颜色已知,并且人的前额的颜色利用内瞳距(intra pupillary distance)被测量出,则肤色的变化可以通过定位设备使得集成的反射比匹配已知的值来测量。
面部区域检测
在一种实现中,本系统对包含用户面部或者用户面部一部分的图像执行处理,作为配制用于该用户的定制的外用制剂的一部分。如图4A中所示,面部区域检测在图像上执行(步骤400),并且提供经校准的颜色和反射比信息(步骤420)。颜色分割(步骤440)、面部区域颜色分配(步骤460)和最后的面部区域颜色校准(步骤480)也可以执行,如下面进一步描述的。
在一些实现中,一旦图像被OAPTA数据收集服务接收,它就被处理,以提供经校准的颜色和反射比信息。为了辅助校准过程,可以使用面部区域检测过程(步骤400)。例如,存在开源和其它技术来检测数码照片中面部、眼睛、嘴巴和鼻子的位置。为了参考,Haar级联分类器可以与为检测面部特征而构建的训练集合一起使用。一种可以被用来提供这种功能的软件包和关联的训练集合在OpenCV(opencv.org)找到。
利用由诸如以上所描述那些的合适过程确定的面部特征的位置,现有的开源和其它技术可以被用来检测数码照片中离散面部特征的位置。为了参考,可以使用利用大训练集合开发的活动形状模型。一种可以被用来证明这种功能的软件包和关联的数据是stasm库。
接着,以上确定的离散的面部特征点可以组合到一组多边形区域中。在一种实现中,面部包括77个识别出的特征点,但是特征点和区域的任何合适数量都可以被使用。识别出的区域可以包括但不限于:
·面部(包括所有区域)
·前额
·右脸颊
·左脸颊
·鼻子
·鼻梁
·嘴巴(包括双唇)
·下巴
·右眉毛
·左眉毛
·右眼
·左眼
·上嘴唇
·下嘴唇
颜色校准
图4B更详细地绘出了步骤420,即,利用捕捉到的图像提供经校准的颜色和反射比信息的方法的一种实现。在步骤422中,图像被校准,并且如果使用标记的话,则标记被识别和遮蔽。图像被转换到YUV颜色空间(步骤424)并且建立UV图像成分的2D柱状图(步骤426)。在接下来的步骤428中,2D分割对UV柱状图执行,以找出代表高光、体色和专色(spotcolor)的一组颜色。建立Y图像成分的亮度柱状图(步骤430),并且对该亮度柱状图执行1D分割,以找出代表体色的反射比、高光反射的振幅(光泽度)和阴影亮度的亮度集合(步骤432)。接着,在步骤434中,利用组合的UV和亮度集合建立经校准的n维向量。这个向量在下文中被称为“nColorVector”。应当指出的是,nColorVector可以包含代表皮肤光泽度和颜色变化(斑点)的数据。
在另一种实现中,数码照片可以至少部分地基于嵌在数码照片中的数据(诸如在JPEG压缩中发现的IFD标志或可交换图像文件格式(Exif)数据)来校准。被用来拍摄照片的设备的特性可以被用来预先校准颜色。从相机到用户面部的距离可以由通过面部特征检测(诸如本文所描述的)发现的两眼之间的距离来确定。嵌在数码照片中的拍摄(shot)数据(诸如亮度、闪光灯特性等)可以与离相机的距离结合,以调整图像的亮度。另外,由驻留在设备上的软件在拍摄时发送的附加数据(诸如环境照明信息或环境照明图像)可以被用来对环境照明进行颜色校正。
颜色分割
在一些实现中,作为数码照片处理的一部分来执行颜色分割。用于执行颜色分割(步骤440)的方法的一种实现在图4C中示出。在步骤442中,数码照片被重新采样到匹配用于识别肤色所需的分辨率的较小尺寸。尺寸可以由关键面部区域的维度确定;例如,该尺寸可以作为newSampleHeight=(Image.height*128)/sqrt(以像素为单位的面部区域的面积)来计算。这个重新采样的照片在下文中被称为“分割图像”。
分割图像可以利用例如3×3矩阵变换被转换到颜色空间,该变换将皮肤颜色从RGB表示变换为肤色主成分表示(步骤444)。这种肤色主成分空间在本文中将被称为“STPCA”。这种变换可以通过对来自由各个用户利用匹配的设备(例如,特定的移动电话)拍摄的数码照片的肤色的RGB颜色的大阵列执行主成分分析来找出。这种图像将被称为“PCA分割图像”。主成分分析是减小一组向量的维度的众所周知的方法。
PCA分割图像的主成分通道(通道0)是通过应用附加的滤波(诸如带通滤波器)(步骤446)为分割准备的。在步骤448中,分割可以通过利用众所周知的技术(诸如Watershed变换)来执行。结果产生的图像在本文被称为“分割标签图像”。接着,每个分割标签图像区域内的PCA分割图像通道0的最亮像素可以被用来将STPCA值分配给每个分割标签区域(步骤450)。
面部区域颜色分配
现在参考图4D,给定面部区域的描绘,用于为区域确定肤色(步骤460)的一种实现如下。在步骤462中,为面部区域生成区域掩模(mask),例如通过将该区域绘制为黑色背景上的白色多边形。通过上述颜色分割过程产生的分割标签图像被区域掩模遮蔽,以产生“面部区域标签图像”(步骤464)。接着,在步骤466中,面部区域标签图像中的分割标签区域按区域并且通过最大化标签区域的分配STPCA值与代表阴影和镜面高光的STPCA值的距离来分级。接着,用于具有最佳等级的分割标签区域的STPCA值被指定为“面部区域颜色”(步骤468)。
最后的面部区域颜色校准和附加数据
最后的面部区域颜色校准(步骤480)可以利用以下步骤执行,如图4E中所示。在步骤482中,用于眼睛的面部区域颜色被确定和分配,并且特别地,用于眼睛巩膜的灰度级被确定。在步骤484中,眼睛区域中镜面反射的分割可以被用来确定闪光灯是否发光以及是否存在其它点光源(见以下进一步的描述)。对于每个面部区域检测镜面反射子区域,并且基于每个面部区域相对于整个区域尺寸的尺寸来为每个面部区域确定“光泽度”值(步骤486)。用于眼睛的光泽度度量也可以被用来校准其它区域。
STPCA值、灰度级和光泽度值的最后变换可以直接变换成用于化妆品产品(而不是中间形式)制造的材料特性(步骤488)。另外,STPCA到RGB或LAB颜色空间的变换可以被执行用于对用户的可视化。这些可以利用原始PCA矩阵的通过灰度级和光泽度值被调整的修改版本执行。
如以上所提到的,面部区域颜色校准可以涉及基于眼睛区域中镜面反射的评估来确定照明源(除了诸如相机闪光灯的已知源之外)的存在和颜色。在一种实现中,这个过程包括以下步骤:
1.从数码照片减去红色通道。
2.对高频中的相对少量的像素(例如,大约两个像素)以及低频中的较高数量像素(例如,大约五或六个像素)采用带通滤波器,以去除细节。
3.对结果执行柱状图并且在柱状图所具有的像素群体的第百分之九十九处取得阈值,由此确定所有最亮的点。
4.扩大最亮的点大约二十个像素,以创建点的掩模。
5.以高频的大约十个像素和低频的大约二十个像素对结果图像应用另一带通滤波器,从而产生具有更宽特征的图像,包括抽出(pull out)眼睛的虹膜。
6.扩大眼睛的黑暗部分大约十个像素,从而产生虹膜的反转或者眼睛的黑暗部分与所发现的加亮的交集。
7.利用初始输入阈值化眼睛内的亮点(即,光的反射)。
8.使用结果产生的点来遮蔽输入图像的原始颜色并且确定是否存在之前未知的光源。
9.减去任何发现的未知光源并且颜色校准。
特定于参照服务的用户数据收集
公共服务数据收集可以通过辅助OAPTA专家组制定参照OAPTA规格说明的附加数据收集来增强。在一种实现中,这种数据包括以下一个或多个:
1.可见、IR和UV颜色光谱数据。
2.双向反射比数据。
3.特定面部皮肤地点的显微照片。
4.利用Raman分光光度计、质谱分光光度计或其它仪器对表面皮肤油或残留物的分析。
5.通过会面由公共服务数据收集提供的增强数据。
参照OAPTA规格说明
OAPTA专家组可以基于参照用户数据收集指定要在制作用于用户的定制OAPTA中使用的成分和量。规格说明和参照用户数据可以被编译,以创建OAPTA元数据230中的条目。
参照OAPTA配方
OAPTA专家组可以提供指定被用来组合成分以制作OAPTA产品的次序和方法的一组指令。这组指令可以被添加到OAPTA元数据230中的当前条目。
参照OAPTA合成
在一种实现中,OAPTA产品是基于OAPTA配方260手动合成的。在另一种实现中,配制指令和共享OAPTA成分集合210的审查被用来建立将基于配制指令自动合成OAPTA产品的设备。
参照OAPTA递送
在一种实现中,OAPTA产品在同一场所合成之后并且在用户使用系统期间现场交给用户。在另一种实现中,OAPTA产品在另一场所合成并运送给用户。
参照OAPTA收集
在一种实现中,收集是通过经由专业服务开账单来实现的。在另一种实现中,支付信息是作为公共服务数据收集的一部分来收集的,并且付款是在OAPTA递送时收集的。
参照OAPTA反馈
在一种实现中,用户反馈是通过在OAPTA产品被递送和测试之后的会面来收集的。在另一种实现中,反馈信息是通过用于公共服务数据收集的移动应用收集的。
OAPTA元数据
在一种实现中,OAPTA元数据230包括以下数据字段中的一个或多个:
1.CommonServiceData
a.用户ID
b.地理区域
c.性别
d.生日
e.日期
f.CombinedVector
i.紫外线辐射曝光
ii.过敏向量
iii.nColor向量
2.特定于参照的数据
a.皮肤颜色频谱
b.双向反射比数据
c.特殊面部皮肤地点的显微照片
d.皮肤表面油指数
3.参照规格说明
4.参照配制指令
5.用于在规格说明提示中发现的生成树的标记。
CombinedVector可以被看作n空间中的点。每个成分的量值被规格化到其意义系统范围。
在一些实现中,参照数据可以包括一个或多个基础事实数据集,该数据集包括关于例如皮肤颜色、反射比、过敏和/或本文引用的其它数据的定义值,对于这些可以准确地配制已知的OAPTA。换句话说,对于基础事实数据集中具体的值集合,可以有为那些值优化的预定义的外用制剂。预定义的外用制剂也可以与现有的产品(诸如竞争者的商业供给)类似或相同。因此,用于为用户确定最优OAPTA的一个过程可以是确定用户被捕捉的皮肤数据与基础事实数据集值的相对接近性,并且选择接近性最接近的数据集值。于是,对应于那些最接近的值的OAPTA或现有产品可以是为用户选择的独特合成物。
OAPTA生产服务
OAPTA生产服务240可以在足够数量的记录已被收集到OAPTA元数据230中并且参照服务OAPTA合成装置已经自动化之后被构造。
生产用户身份
当用户购买移动应用并且第一次启动该应用时,OAPTA生产服务240创建并开始管理用户身份。该服务创建数据存储来保持用户数据,并且基于用户身份提供数据的检索。用户身份还可以包含运送和开账单信息。
生产用户数据收集
OAPTA生产服务240可以使用之前对于OAPTA参照服务220描述的公共服务数据收集。用于给定会话的用户的公共服务数据与生产用户身份一起存储。
生产OAPTA规格说明和配方
OAPTA生产服务240使用由OAPTA参照服务220生成的OAPTA元数据230来合成规格说明。例如,基于如上面所描述的被收集和处理的面部图像数据,特定用户的脸色可以匹配到现有的参照脸色,对于该参照脸色已经定义了化妆品配方(例如,基于实际参照用户、基础事实数据集等)。用户特有的属性(诸如过敏)可以在确定特定配方是否将与用户兼容时被考虑。系统得出的新配方可以作为参照被保存,供将来使用。
在一种实现中,为了处理和订购OAPTA产品,系统获得链接到用户的生产用户身份的用户的当前公共服务数据,并且确定与OAPTA元数据230中的公共服务数据组合向量的最接近匹配。如果组合向量与最接近匹配之间的距离太远,则用户可以被询问他或她是否愿意被提升为参照用户并且结束当前订单。
接着,系统可以定位通过第一匹配的生成树标记而过滤的下一个最接近的匹配,并且可以使用几何代数或奇异值分解来找出描述超平面的第三经过滤的匹配点。如果组合向量与超平面的表面之间的距离太大,则用户可以被询问他或她是否愿意被提升为参照用户并且结束当前订单。对于每个找出的参照点,确定混和值,并且通过添加用于最接近匹配的每种公共成分的混合来建立规格说明。最后,来自最接近的匹配的OAPTA元数据的配方被选作适合用户的配方。
生产OAPTA合成
系统可以使用由本文所描述的OAPTA参照服务220的实现指定的自动合成方法。在一种实现中,这是共享的资源。在另一种实现中,存在具有类似自动化装备的多个场所,并且选择最接近用户的地理位置的场所。
OAPTA产品可以在用户前进通过本文所描述的允许确定定制的配方的步骤之后按需合成。此外或者另选地,OAPTA产品可以事先合成(例如,最常见的配方可以被合成并库存),以提供从配制到递送的更快周转时间。在一些实现中,由系统确定的配方被映射到来自其它供应商和品牌的现有产品。例如,基于其它产品的配方、成分、颜色和/或其它已知属性,系统可以比较用户的配方与其它产品并且确定最相似或者满足相似性阈值(例如,75%、80%、90%等)的那些。作为一个例子,系统可以确定用户的基础与Armani基础88%匹配并且与L'Oreal基础82%匹配。系统还可以向用户显示其它匹配的产品并且允许用户作为对用户定制的配方的附加或另选来购买它们。
生产OAPTA递送、收集和反馈
OAPTA产品可以从OAPTA产品可被合成和/或存储的自动化合成场所、仓库、零售企业或其它场所运送到用户。用户可以在运货时利用系统可用的生产用户身份信息被开账单。在一种实现中,用户能够利用服务于公共服务数据收集的移动应用提供反馈和其它数据。
OAPTA系统反馈
在一种实现中,OAPTA系统200被配置为便于生产OAPTA反馈250的审查,并且比较任何关键的反馈与OAPTA元数据230公共服务数据组合向量空间中的间隙。如果空间太稀疏,则系统200可以调整离解决方案的可允许的最大距离,并且将生产用户升级为参照用户,以填充模型中的间隙。
OAPTA系统200的实现可以使用适当的硬件或软件;例如,OAPTA系统200可以在能够运行操作系统的系统上执行,其中操作系统诸如Microsoft操作系统、Apple OS操作系统、Apple平台、Google AndroidTM平台、操作系统及操作系统的其它变体,等等。
所述描功能的一些或全部可以在用户设备上以软件和/或硬件实现。用户设备可以包括但不限于作为可以执行本文所描述功能的通用计算机或专用硬件设备操作的智能电话、智能手表、智能眼镜、平板电脑、便携式电脑、电视机、游戏设备、音乐播放器、移动电话、膝上型电脑、掌上型电脑、智能或哑终端、网络计算机、个人数字助理、无线设备、信息装置、工作站、微型计算机、大型机计算机或其它计算设备。例如,软件可以在形式为计算机的通用计算设备上实现,其中计算机包括处理单元、系统存储器以及将包括系统存储器在内的各种系统部件耦合到处理单元的系统总线。
此外或者另选地,所描述功能的一些或全部可以远程地在云中或者经由软件即服务来执行。例如,匹配功能可以在一个或多个远程服务器或如上面所描述的与用户设备通信的其它设备上执行。远程功能可以在具有足够存储器、数据存储和处理能力并且运行服务器类操作系统(例如, 操作系统系列)的服务器类计算机上执行。
系统可以包括存储在存储器中并且在处理器上执行的多个软件处理模块。作为说明,程序模块可以是一种或多种合适的编程语言的形式,编程语言被转换为机器语言或对象代码,以允许一个或多个处理器执行指令。软件可以是独立应用的形式,以合适的编程语言或框架实现。
本文所描述的技术的方法步骤可以由执行一个或多个计算机程序的一个或多个可编程处理器执行,以通过对输入数据操作并生成输出来执行功能。方法步骤还可以由专用逻辑电路执行,或者装置可以实现为专用逻辑电路,其中专用逻辑电路例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。模块可以指实现该功能的计算机程序和/或处理器/特殊电路的部分。
作为例子,适于计算机程序执行的处理器既包括通用微处理器又包括专用微处理器。一般而言,处理器将从只读存储器或随机存取存储器或者这二者接收指令和数据。计算机的基本元素是用于执行指令的处理器和用于存储指令和数据的一个或多个存储器设备。适于体现计算机程序指令和数据的信息载体包括所有形式的非易失性存储器,作为例子包括半导体存储器设备,例如EPROM、EEPROM和闪速存储器设备;磁盘,例如内部硬盘或可拆卸盘;磁-光盘;以及CD-ROM和DVD-ROM盘。一个或多个存储器可以存储媒体资产(例如,音频、视频、图形、接口元素和/或其它媒体文件)、配置文件和/或指令,当指令被处理器执行时,构成本文所描述的模块、引擎和其它部件并且执行与这些部件关联的功能。处理器和存储器可以由专用逻辑电路补充或者结合在专用逻辑电路中。
在各种实现中,用户设备包括便于本文所描述的功能的执行的web浏览器、本地应用或这二者。web浏览器允许设备通过网页请求来请求网页或其它可下载程序、小程序(applet)或文档(例如,从(一个或多个)服务器)。网页的一个例子是包括计算机可执行或可解释的信息、图形、声音、文字和/或视频(这些可以被显示、执行、播放、处理、流化和/或存储,并且可以包含到其它网页的链接或指针)的数据文件。在一种实现中,设备的用户手动地请求来自服务器的网页。另选地,设备自动地通过web浏览器做出请求。商用web浏览器软件的例子包括Internet
在一些实现中,用户设备包括客户端软件。客户端软件向设备提供用于提供本文所描述特征的实现和执行的功能。客户端软件可以以各种形式实现,例如,它可以是本地应用、网页、窗口小部件和/或被下载到设备并结合web浏览器运行的Java、JavaScript、.Net、Silverlight、Flash和/或其它小程序或插件的形式。客户端软件和web浏览器可以是单个客户端-服务器接口的一部分;例如,客户端软件可以被实现为web浏览器或另一框架或操作系统的插件。其它合适的客户端软件体系架构(包括但不限于窗口小部件框架和小程序技术)也可以与客户端软件一起采用。
通信网络可以将设备与一个或多个服务器连接和/或彼此连接。例如,通信可以经诸如像标准电话线、LAN或WAN链路(例如,T1、T3、56kb、X.25)、宽带连接(ISDN、帧中继、ATM)、无线链路(802.11(Wi-Fi)、Bluetooth、GSM、CDMA等)的介质发生。其它通信介质是可能的。网络可以携带TCP/IP协议通信和通过web浏览器所作的HTTP/HTTPS请求,并且客户端与服务器之间的连接可以经这种TCP/IP网络传送。其它通信协议是可能的。
系统还可以在分布式计算环境中实践,其中任务由通过通信网络链接的远程处理设备执行。在分布式计算环境中,程序模块可以位于包括存储器存储设备的本地和远程计算机存储介质中。依赖于设备的能力和所需数据处理能力的量,除本文所描述之外的其它类型的系统硬件和软件也可以被使用。系统还可以在执行诸如以上提到的那些虚拟化操作系统并且在具有诸如本文所描述那些硬件的一个或多个计算机上操作的一个或多个虚拟机上实现。
在一些情况下,关系或其它结构化数据库可以提供这种功能,例如,作为存储要处理的数据的数据库管理系统。数据库的例子包括由位于加州Redwood Shores的ORACLE公司提供的MySQL数据库服务器或者ORACLE数据库服务器、由位于加州Berkeley的PostgreSQLGlobal Development Group提供的PostgreSQL数据库服务器、或者由IBM提供的DB2数据库服务器。
还应当指出的是,系统和方法的实现可以作为体现在一个或多个制造品上或其中的一个或多个计算机可读程序提供。程序指令可以在人工生成的传播信号(例如机器生成的电、光或电磁信号)上编码,该信号的生成是为了编码信息,以便传输到合适的接收器装置,用于被数据处理装置执行。计算机存储介质可以是计算机可读存储设备、计算机可读存储基质、随机或串行存取存储器阵列或设备、或者它们中的一个或多个的组合,或者计算机存储介质可以包括在以上各项中。而且,虽然计算机存储介质不是传播信号,但是计算机存储介质可以是在人工生成的传播信号中编码的计算机程序指令的源或目的地。计算机存储介质还可以是一个或多个单独的物理部件或介质(例如,多个CD、盘或者其它存储设备),或者计算机存储介质可以包括在以上各项中。
以上描述了本发明的某些实现。但是,应当明确地指出,本发明不限于这些实现,而是对本文明确描述的内容的添加和修改也包括在本发明的范围之内。而且,应当理解,在不背离本发明的精神和范围的情况下,本文所描述的各种实现的特征不是相互排斥的并且可以以各种组合和排列存在,即使这种组合或排列没有在本文明确说明。实际上,在不背离本发明精神和范围的情况下,本文所描述内容的变化、修改和其它实现将是本领域普通技术人员可以想到的。照此,本发明不是只由前面的说明性描述来限定。

Claims (16)

1.一种确定定制的化妆品配方的方法,该方法包括:
交互式地引导用户通过使用具有图像传感器的设备捕捉标记的图像,其中所述标记包括具有已知特性的软件可检测对象;
交互式地引导用户通过使用所述设备捕捉该用户的第一皮肤区域的第一图像;
在捕捉第一图像之后,交互式地引导用户通过使用所述设备捕捉各自具有该用户的不同皮肤区域的一个或多个图像,皮肤区域的每一个捕捉图像包括已知的照明和颜色特性;
处理皮肤区域的捕捉图像,以提供经校准的皮肤颜色信息,皮肤区域的捕捉图像中的至少一个至少部分地基于所述标记的图像被处理;及
基于经校准的皮肤颜色信息自动地确定用于该用户的定制的化妆品配方。
2.如权利要求1所述的方法,其中所述设备选自由以下各项构成的组:移动电话、平板电脑、数码相机、网络摄像头、智能眼镜、电视机和游戏控制台。
3.如权利要求1所述的方法,其中皮肤区域的捕捉图像中的至少一个包括标识设备和图像传感器中的至少一个的属性的嵌入式数据,并且进一步其中,皮肤区域的捕捉图像中的至少一个至少部分地基于该嵌入式数据被处理。
4.如权利要求1所述的方法,其中自动地确定定制的化妆品配方包括匹配经校准的皮肤颜色信息与参照用户,该参照用户具有与其关联的之前确定的化妆品配方。
5.如权利要求1所述的方法,其中定制的化妆品配方的自动确定至少部分地基于用户的对化妆品成分过敏的指示。
6.如权利要求1所述的方法,还包括基于定制的化妆品配方合成外用制剂。
7.如权利要求1所述的方法,还包括允许用户购买基于定制的化妆品配方合成的外用制剂和现有化妆品产品中的至少一个。
8.如权利要求1所述的方法,其中自动地确定定制的化妆品配方包括:
比较经校准的皮肤颜色信息与基础事实数据集,以识别基础事实数据集中的最接近的已知值集合;及
基于该比较自动地确定用于该用户的定制的化妆品配方,其中定制的化妆品配方包括以下中的至少一个:
(i)基于经校准的皮肤颜色信息与最接近的已知值集合的相对接近性得出的独特合成物;及
(ii)现有化妆品产品。
9.如权利要求1所述的方法,其中处理皮肤区域的捕捉图像包括,对于皮肤区域的捕捉图像中的至少一个:
检测所述至少一个皮肤区域图像中的多个面部区域;
基于肤色分割面部区域;及
基于肤色、阴影和镜面高光中的至少一个给每个面部区域分段分配颜色。
10.如权利要求1所述的方法,其中处理皮肤区域的捕捉图像包括接收与皮肤区域的捕捉图像中的至少一个关联的环境照明信息,并且其中皮肤区域的所述至少一个捕捉图像至少部分地基于环境照明信息被处理。
11.如权利要求1所述的方法,还包括基于标记图像的成功捕捉来存储设备的图像传感器的当前设置。
12.如权利要求11所述的方法,其中设备的图像传感器设置包括曝光、对焦和白平衡中的至少一个。
13.如权利要求11所述的方法,其中皮肤区域的捕捉图像基于存储的图像传感器设置被处理。
14.如权利要求1所述的方法,其中处理皮肤区域的捕捉图像包括补偿未知的光源。
15.如权利要求1所述的方法,其中特定的皮肤区域选自由以下各项构成的组:手腕、前额、左脸颊、右脸颊和整个面部。
16.一种用于确定定制的化妆品配方的系统,该系统包括:至少一个计算机,其包括用于存储计算机可执行指令的存储器和用于执行存储在该存储器中的指令的处理单元,其中指令的执行将该计算机配置为执行操作,用以执行根据前述权利要求中任一项所述的方法。
CN201480026371.5A 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法 Active CN105209870B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811228968.4A CN109527779A (zh) 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361788619P 2013-03-15 2013-03-15
US61/788,619 2013-03-15
US201361866245P 2013-08-15 2013-08-15
US61/866,245 2013-08-15
PCT/US2014/028611 WO2014144275A2 (en) 2013-03-15 2014-03-14 Systems and methods for specifying and formulating customized topical agents

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201811228968.4A Division CN109527779A (zh) 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法

Publications (2)

Publication Number Publication Date
CN105209870A CN105209870A (zh) 2015-12-30
CN105209870B true CN105209870B (zh) 2018-11-20

Family

ID=50732287

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201480026371.5A Active CN105209870B (zh) 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法
CN201811228968.4A Pending CN109527779A (zh) 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201811228968.4A Pending CN109527779A (zh) 2013-03-15 2014-03-14 用于指定和配制定制的外用制剂的系统和方法

Country Status (5)

Country Link
US (5) US9122919B2 (zh)
EP (1) EP2972155B1 (zh)
JP (2) JP6960734B2 (zh)
CN (2) CN105209870B (zh)
WO (1) WO2014144275A2 (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2972155B1 (en) 2013-03-15 2023-08-23 Shiseido Company, Limited Systems and methods for specifying and formulating customized topical agents
US20160100789A1 (en) * 2014-10-13 2016-04-14 National Central University Computer-aided diagnosis system and computer-aided diagnosis method
US10219737B2 (en) 2014-12-11 2019-03-05 Skin Depth Inc. Topical product dispensing tool
FR3046360B1 (fr) * 2016-01-05 2018-02-16 Ac&B Procede et dispositif avec interface pour la fabrication d'un produit personnalise
JP6574074B2 (ja) 2016-02-08 2019-09-11 イクアリティ コスメティクス インコーポレイテッドEquality Cosmetics, Inc. 視覚的にカスタマイズされた化粧品を配合および分配するための装置および方法
CN115568818A (zh) * 2016-04-22 2023-01-06 菲特斯津公司 使用电子设备进行皮肤分析的系统和方法
CN106530361A (zh) * 2016-11-16 2017-03-22 上海市东方医院 彩色人脸图像的颜色校正方法
WO2018101572A1 (ko) * 2016-12-01 2018-06-07 주식회사 엘지생활건강 맞춤형 화장품 제공 시스템 및 그의 동작 방법
JP6720845B2 (ja) * 2016-12-02 2020-07-08 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
WO2018102829A1 (en) 2016-12-02 2018-06-07 Matchco. Systems, methods and apparatus for producing customized topical agents
DE102016225656A1 (de) * 2016-12-20 2018-06-21 Henkel Ag & Co. Kgaa Kamera zur Haaranalyse mit Kalibiervorrichtung
GB201702008D0 (en) 2017-02-07 2017-03-22 Anthropics Tech Ltd A method of matching colours
EP3592176A4 (en) * 2017-03-07 2020-08-26 Shiseido Americas Corporation SYSTEM AND METHOD FOR SETTING CUSTOM TOPICAL AGENTS
EP3631679B1 (en) * 2017-05-31 2023-09-13 The Procter & Gamble Company Systems and methods for determining apparent skin age
CN111066060B (zh) 2017-07-13 2024-08-02 资生堂株式会社 虚拟面部化妆去除和模拟、快速面部检测和地标跟踪
CN107248108A (zh) * 2017-07-14 2017-10-13 美酷伟业网络科技成都有限公司 一种o2o的连锁电子商务系统
US10627342B2 (en) * 2017-07-21 2020-04-21 Wisys Technology Foundation, Inc. Colorimeter attachment for smart phone
EP3661476A4 (en) 2017-07-25 2021-07-21 Blee. LLC SYSTEM AND DEVICE FOR CUSTOMIZATION OF COSMETICS
CN109508587A (zh) * 2017-09-15 2019-03-22 丽宝大数据股份有限公司 身体信息分析装置及其底妆分析方法
CN108230331A (zh) * 2017-09-30 2018-06-29 深圳市商汤科技有限公司 图像处理方法和装置、电子设备、计算机存储介质
CN108308833A (zh) * 2018-01-29 2018-07-24 上海康斐信息技术有限公司 一种智能卸妆仪的卸妆检测方法及系统
KR20200116129A (ko) * 2018-01-29 2020-10-08 애톨라 스킨 헬스, 인코포레이티드 개인화된 피부 관리 제품을 제형화하기 위한 시스템 및 방법
CN108460716B (zh) * 2018-01-30 2022-05-10 大连工业大学 专色印刷图像数字水印方法及系统
JP7477456B2 (ja) * 2018-03-28 2024-05-01 コーニンクレッカ フィリップス エヌ ヴェ 制御されていない環境において歯のシェードを評価する方法及びシステム
CN110570476A (zh) * 2018-06-06 2019-12-13 英属开曼群岛商玩美股份有限公司 执行于计算设备的系统、方法及存储媒体
US10719729B2 (en) * 2018-06-06 2020-07-21 Perfect Corp. Systems and methods for generating skin tone profiles
US10575623B2 (en) 2018-06-29 2020-03-03 Sephora USA, Inc. Color capture system and device
WO2020014695A1 (en) * 2018-07-13 2020-01-16 Shiseido Americas Corporation System and method for adjusting custom topical agents
US10715774B2 (en) 2018-07-23 2020-07-14 Microsoft Technology Licensing, Llc Color conversion for ambient-adaptive digital content
WO2020142212A1 (en) 2019-01-03 2020-07-09 The Procter & Gamble Company Personalized skin care system
CN113557716B (zh) * 2019-03-13 2023-11-10 莱雅公司 用于将包括毛发颜色变化的数字内容投影到用户的头部,面部或身体上的系统,设备和方法
JP7539917B2 (ja) 2019-04-09 2024-08-26 株式会社 資生堂 画像取り込みが改善された局所用剤を作成するためのシステムおよび方法
US11348334B1 (en) 2019-06-30 2022-05-31 George Douglas MacEwen Methods and systems for skin color matching using an imaging device and a controlled light source
US11250632B2 (en) 2019-11-22 2022-02-15 Google Llc High quality AR cosmetics simulation via image filtering techniques
DE102020203189A1 (de) 2020-03-12 2021-09-16 Beiersdorf Aktiengesellschaft Verfahren zur Produktempfehlung
FR3110737B1 (fr) * 2020-05-20 2023-06-02 Sagad Système intelligent permettant un test de peau puis une formulation et une fabrication de cosmétique sur mesure.
WO2022040392A1 (en) 2020-08-19 2022-02-24 Blee.LLC System and device for customization of cosmetics
US12033200B1 (en) * 2021-03-05 2024-07-09 AlpStories, Inc. System and process for mass customization and instant on-demand formulation and manufacturing
CN113655734A (zh) * 2021-08-17 2021-11-16 广州美思生物技术有限公司 基于定制控制设备的生活用品的定制控制方法及装置
TWI786956B (zh) * 2021-11-22 2022-12-11 視鏡科技股份有限公司 線上眼鏡試配的處理系統與方法
WO2023121779A2 (en) * 2021-12-22 2023-06-29 Alp Stories, Inc. Rapid product formulation and efficient mass-customization
WO2023160616A1 (en) * 2022-02-25 2023-08-31 Basf Se A hydrogel composition for preparing customized mask pack
FR3144914A1 (fr) * 2023-01-13 2024-07-19 Abbi procédé de formulation cosmétique personnalisée
CN117064346B (zh) * 2023-10-18 2023-12-29 深圳市宗匠科技有限公司 智能皮肤护理方法、设备和介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1572250A (zh) * 2003-06-17 2005-02-02 株式会社茉莉特斯 皮肤观察装置
CN101112304A (zh) * 2006-07-24 2008-01-30 许越 一种检测护肤品对皮肤刺激强度的方法与装置
CN101668451A (zh) * 2007-03-08 2010-03-10 惠普开发有限公司 用于基于从图像估计的皮肤色彩推荐产品的方法和系统

Family Cites Families (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS539588A (en) * 1976-07-15 1978-01-28 Dainippon Screen Mfg Method of discriminating color
US5249263A (en) 1989-06-16 1993-09-28 International Business Machines Corporation Color palette display interface for a computer-based image editor
US5315508A (en) 1992-09-03 1994-05-24 Monarch Marking System Label generating and data tracking system for processing purchase orders
US5903465A (en) 1993-08-23 1999-05-11 Elizabeth Arden Company Method and apparatus for customizing cosmetic products
US5648915A (en) * 1995-11-20 1997-07-15 Triangle Research & Development Corporation Soft tissue damage assessment system
US6177093B1 (en) 1999-03-17 2001-01-23 Color Access, Inc. Method and system for color customizing cosmetic mass products
US6510366B1 (en) 1999-04-23 2003-01-21 Elizabeth Arden Company, Division Of Conopco, Inc. Apparatus and method for customizing cosmetic products
TW511040B (en) 1999-07-07 2002-11-21 Fd Man Inc Color cosmetic selection system
US6516245B1 (en) 2000-05-31 2003-02-04 The Procter & Gamble Company Method for providing personalized cosmetics
US6666216B2 (en) 2000-07-24 2003-12-23 L'oreal S.A. Device for applying a product to a surface
US9064344B2 (en) 2009-03-01 2015-06-23 Facecake Technologies, Inc. Image transformation systems and methods
US7337127B1 (en) 2000-08-24 2008-02-26 Facecake Marketing Technologies, Inc. Targeted marketing system and method
US10755286B2 (en) 2000-08-24 2020-08-25 Facecake Marketing Technologies, Inc. Targeted marketing system and method
JP2002094868A (ja) * 2000-09-20 2002-03-29 Fuji Photo Optical Co Ltd リモコン雲台システム
US20020049643A1 (en) 2000-09-27 2002-04-25 Church Diana L. On-line ingredient exchange system and method
JP2002131135A (ja) 2000-10-20 2002-05-09 Kao Corp 基準色票およびメイクシミュレーション装置
FR2817745B1 (fr) 2000-12-08 2003-03-28 Oreal Nuancier et procede de fabrication
US20030215471A1 (en) * 2001-01-31 2003-11-20 Wilmott James M. Surfactant free topical compositions and method for rapid preparation thereof
US7437344B2 (en) 2001-10-01 2008-10-14 L'oreal S.A. Use of artificial intelligence in providing beauty advice
US7634103B2 (en) 2001-10-01 2009-12-15 L'oreal S.A. Analysis using a three-dimensional facial image
US7324668B2 (en) 2001-10-01 2008-01-29 L'oreal S.A. Feature extraction in beauty analysis
US6761697B2 (en) 2001-10-01 2004-07-13 L'oreal Sa Methods and systems for predicting and/or tracking changes in external body conditions
FR2840686B1 (fr) 2002-06-10 2008-11-14 Oreal Procede pour determiner l'aptitude a diffuser et/ou a absorber la lumiere d'un produit cosmetique
DE602005018380D1 (de) 2004-08-30 2010-01-28 Sigrid Heuer Kosmetische hautfarbenbestimmung und farbmischvorrichtung
JP2006106951A (ja) * 2004-10-01 2006-04-20 Dainippon Printing Co Ltd 化粧品管理システム
FR2877073B1 (fr) * 2004-10-22 2007-01-26 Oreal Dispositif permettant l'observation du visage
US20070253987A1 (en) 2004-11-01 2007-11-01 Wozniak Mark E Novel pigments for wrinkle-hiding cosmetic applications
US7624769B2 (en) 2004-11-08 2009-12-01 Cosmetic Technologies, L.L.C. Automated customized cosmetic dispenser
JP2006254309A (ja) 2005-03-14 2006-09-21 Fuji Photo Film Co Ltd 撮影システム
FR2883154B1 (fr) 2005-03-15 2008-02-08 Oreal Dispositif de mesure du teint
US7634108B2 (en) * 2006-02-14 2009-12-15 Microsoft Corp. Automated face enhancement
EP1993592A4 (en) * 2006-02-21 2011-11-16 Ventria Bioscience COMPOSITIONS WITH LACTOFERRIN AND METHOD FOR USE THAT TO AIM IN THE GROWTH OF SKIN CELLS
US8660319B2 (en) 2006-05-05 2014-02-25 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
US8620038B2 (en) 2006-05-05 2013-12-31 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
US8265351B2 (en) 2006-05-05 2012-09-11 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
US9183582B2 (en) 2007-10-26 2015-11-10 Zazzle Inc. Tiling process for digital image retrieval
US20090231356A1 (en) 2008-03-17 2009-09-17 Photometria, Inc. Graphical user interface for selection of options from option groups and methods relating to same
US8425477B2 (en) 2008-09-16 2013-04-23 Elc Management Llc Method and system for providing targeted and individualized delivery of cosmetic actives
FR2933581B1 (fr) 2008-07-10 2011-12-02 Oreal Procede de maquillage et dispositif pour la mise en oeuvre d'un tel procede
WO2010036732A1 (en) * 2008-09-25 2010-04-01 Zeltiq Aesthetics, Inc. Treatment planning systems and methods for body contouring applications
JP2010086036A (ja) * 2008-09-29 2010-04-15 Fujifilm Corp 診断装置及び診断方法
KR20100056280A (ko) 2008-11-19 2010-05-27 삼성전자주식회사 디지털 영상 처리장치 및 그 제어방법
US8725560B2 (en) 2009-02-02 2014-05-13 Modiface Inc. Method and system for simulated product evaluation via personalizing advertisements based on portrait images
FR2942401A1 (fr) * 2009-02-23 2010-08-27 Oreal Procede de traitement cosmetique comportant la projection d'une image sur la zone a traiter
US8823934B2 (en) * 2009-03-27 2014-09-02 Brightex Bio-Photonics Llc Methods and systems for imaging and modeling skin using polarized lighting
US8373859B2 (en) 2009-03-27 2013-02-12 Brightex Bio-Photonics Llc Methods and systems for imaging skin using polarized lighting
US8498456B2 (en) 2009-07-13 2013-07-30 Stylecaster, Inc. Method and system for applying cosmetic and/or accessorial enhancements to digital images
US9602793B2 (en) * 2009-12-09 2017-03-21 Imagination Technologies Limited Skin tone detection in a digital camera
GB0922603D0 (en) 2009-12-24 2010-02-10 Touch Emas Ltd Skin colour determining apparatus and method
US8550818B2 (en) 2010-05-21 2013-10-08 Photometria, Inc. System and method for providing and modifying a personalized face chart
EP2611413B1 (en) 2010-08-31 2022-04-06 Shiseido Company, Limited Skin compositions and methods of use thereof
US8933944B2 (en) 2010-10-13 2015-01-13 Boston Scientific Neuromodulation Corporation External controller for an implantable medical device with dual microcontrollers for improved graphics rendering
JP5656603B2 (ja) * 2010-12-14 2015-01-21 キヤノン株式会社 情報処理装置、情報処理方法、およびそのプログラム
CN106176361A (zh) * 2010-12-30 2016-12-07 玫琳凯有限公司 局部皮肤用组合物及其用途
FR2969915B1 (fr) 2011-01-04 2014-01-03 Ergylink Systeme et procede pour analyser au moins une caracteristique de la peau
US8791999B2 (en) * 2011-01-21 2014-07-29 Apple Inc. Systems and methods for display calibration
JP2012181688A (ja) 2011-03-01 2012-09-20 Sony Corp 情報処理装置、情報処理方法、情報処理システムおよびプログラム
EP2731072A4 (en) 2011-07-07 2015-03-25 Kao Corp FINGER-PRINTED PRINT ANALYSIS METHOD, COSMETIC CONSULTATION METHOD, AND FACE IMAGE GENERATION METHOD
US8593634B1 (en) 2012-06-15 2013-11-26 Larry Y Igarashi Custom cosmetic blending machine
US9007588B1 (en) 2011-08-25 2015-04-14 L'oreal Cosmetic blending machine for foundation, concealer, tinted moisturizer, primer, skin care products, nail polish, blush, hair dye, lipstick and other products
US8830468B2 (en) 2012-09-17 2014-09-09 Larry Y Igarashi Custom cosmetic blending machine with handheld colorimeter
US8564778B1 (en) 2011-08-25 2013-10-22 Larry Y Igarashi Custom cosmetic blending machine
US8804122B2 (en) * 2011-09-22 2014-08-12 Brightex Bio-Photonics Llc Systems and methods for determining a surface profile using a plurality of light sources
US8634648B2 (en) 2011-12-07 2014-01-21 Elwha Llc Reporting informational data indicative of a possible non-imaged portion of a skin
US9118876B2 (en) 2012-03-30 2015-08-25 Verizon Patent And Licensing Inc. Automatic skin tone calibration for camera images
US9449412B1 (en) 2012-05-22 2016-09-20 Image Metrics Limited Adaptive, calibrated simulation of cosmetic products on consumer devices
US9460462B1 (en) 2012-05-22 2016-10-04 Image Metrics Limited Monetization using video-based simulation of cosmetic products
US8693768B1 (en) 2012-07-10 2014-04-08 Lisa LaForgia Cosmetic base matching system
WO2014118842A1 (ja) 2013-02-01 2014-08-07 パナソニック株式会社 美容支援装置、美容支援システム、美容支援方法、並びに美容支援プログラム
EP2972155B1 (en) 2013-03-15 2023-08-23 Shiseido Company, Limited Systems and methods for specifying and formulating customized topical agents
US9064279B1 (en) 2013-05-22 2015-06-23 Sephora USA, Inc. System for cosmetics matching based on skin tone
WO2014208067A1 (ja) 2013-06-28 2014-12-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 肌の官能評価装置および肌の評価方法
JP6368919B2 (ja) 2013-08-30 2018-08-08 パナソニックIpマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
US9364071B2 (en) 2013-09-19 2016-06-14 Spectral Sensors Inc. Systems and methods for measuring spectra of skin and other objects and materials and making predictions based thereon
US20160239187A1 (en) 2013-10-13 2016-08-18 Inuitive Ltd. Hands on computerized emulation of make up
FR3014675A1 (fr) 2013-12-12 2015-06-19 Oreal Procede d'evaluation d'au moins un signe clinique du visage
FR3015872B1 (fr) 2013-12-27 2017-03-24 Oreal Dispositif de maquillage comportant une pluralite d'encres cosmetiques
US9760935B2 (en) 2014-05-20 2017-09-12 Modiface Inc. Method, system and computer program product for generating recommendations for products and treatments
US20160027087A1 (en) 2014-07-22 2016-01-28 Colormodules Inc. Methods for providing targeted notifications for color matched consumer products and devices thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1572250A (zh) * 2003-06-17 2005-02-02 株式会社茉莉特斯 皮肤观察装置
CN101112304A (zh) * 2006-07-24 2008-01-30 许越 一种检测护肤品对皮肤刺激强度的方法与装置
CN101668451A (zh) * 2007-03-08 2010-03-10 惠普开发有限公司 用于基于从图像估计的皮肤色彩推荐产品的方法和系统

Also Published As

Publication number Publication date
US8933994B2 (en) 2015-01-13
US20140267665A1 (en) 2014-09-18
JP2016523574A (ja) 2016-08-12
JP2019000680A (ja) 2019-01-10
JP7108501B2 (ja) 2022-07-28
EP2972155A2 (en) 2016-01-20
CN109527779A (zh) 2019-03-29
US9122919B2 (en) 2015-09-01
US9122918B2 (en) 2015-09-01
US20190350345A1 (en) 2019-11-21
US20140267783A1 (en) 2014-09-18
WO2014144275A2 (en) 2014-09-18
EP2972155B1 (en) 2023-08-23
US20160174690A1 (en) 2016-06-23
US10321748B2 (en) 2019-06-18
US20140267664A1 (en) 2014-09-18
CN105209870A (zh) 2015-12-30
WO2014144275A3 (en) 2014-11-20
US11445803B2 (en) 2022-09-20
JP6960734B2 (ja) 2021-11-05

Similar Documents

Publication Publication Date Title
CN105209870B (zh) 用于指定和配制定制的外用制剂的系统和方法
CN111031846B (zh) 用于调整定制外用剂的系统和方法
JP7453956B2 (ja) カスタム外用薬を調整するためのシステムおよび方法
Gevers et al. Color in computer vision: fundamentals and applications
KR101140533B1 (ko) 이미지로부터 추정된 피부색에 기초해서 제품을 추천하는 컴퓨터 구현된 방법
US12098956B2 (en) System and method for creation of topical agents with improved image capture
AU2018415972A1 (en) Information retrieval system and program
US10832088B2 (en) Information search system, information search method, and information search program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: American California

Applicant after: MATCHCO

Address before: American California

Applicant before: SKIN REPUBLIC, Inc.

COR Change of bibliographic data
CB02 Change of applicant information

Address after: American California

Applicant after: MATCHCO

Address before: American California

Applicant before: ALPHA fashion Lab Corp.

Address after: American California

Applicant after: ALPHA fashion Lab Corp.

Address before: American California

Applicant before: SKIN REPUBLIC, Inc.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190819

Address after: American New York

Patentee after: Shiseido Americas

Address before: American California

Patentee before: MATCHCO

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211011

Address after: Tokyo

Patentee after: SHISEIDO Co.,Ltd.

Address before: USA New York

Patentee before: Shiseido Americas