CN107645925B - 用于测量头发直径的系统和方法 - Google Patents
用于测量头发直径的系统和方法 Download PDFInfo
- Publication number
- CN107645925B CN107645925B CN201680029668.6A CN201680029668A CN107645925B CN 107645925 B CN107645925 B CN 107645925B CN 201680029668 A CN201680029668 A CN 201680029668A CN 107645925 B CN107645925 B CN 107645925B
- Authority
- CN
- China
- Prior art keywords
- hair
- image
- mobile device
- diameter
- card
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/448—Hair evaluation, e.g. for hair disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1072—Measuring physical dimensions, e.g. size of the entire body or parts thereof measuring distances on the body, e.g. measuring length, height or thickness
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/08—Measuring arrangements characterised by the use of optical techniques for measuring diameters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
- A61B2560/02—Operational features
- A61B2560/0223—Operational features of calibration, e.g. protocols for calibrating sensors
- A61B2560/0228—Operational features of calibration, e.g. protocols for calibrating sensors using calibration standards
- A61B2560/0233—Optical standards
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
- A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
- A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Physics & Mathematics (AREA)
- Dermatology (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明提供了一种用于测量人发(50)的直径的系统,该系统包括:移动设备(20);和包括头发附接机构(11a,11b)的参考卡(10);所述移动设备配置为使用参考卡自身的尺寸和/或参考卡的表面上作为尺寸参考的校准标记(12)的尺寸,将由所述附接机构附接到参考卡的人发的图像转换为人发的直径的测量值。
Description
技术领域
本发明涉及一种用于测量人发直径的系统和方法,更特别地,涉及一种包含移动设备和参考卡的系统。
背景技术
头发产品的消费者能够从大量的可用产品中进行选择,部分原因在于许多头发护理品牌具有越来越大的产品系列这一事实。
这些产品系列可能涵盖各种产品类别,包括:洗发水、调理剂、焗油膏(treatment)和造型产品。在每一产品类别中,一个品牌可能生产多个版本的产品,每一版本的成分选择为解决给定目标头发类型的特定需要。例如,给定的头发类型可能包括以下中的一者或多者:浓密的头发、卷曲的头发、稀疏的头发、颜色处理过的头发和受损的头发。
每一版本的产品都可以明确地针对其目标头发类型来销售。然而,消费者可能难以准确地识别他们实际属于的头发类型,因此大量的选择可能带来困惑。当消费者选择产品的版本时,他们的选择通常仅仅基于他们自身对其头发类型的感知,而这种感知可能并不准确,尤其是如果其基于的是外部因素如广告或与亲朋好友的相对比较时。另外,术语如“浓密的头发”或“稀疏的头发”可能容易被误解。例如,消费者可能有着许多根头发,但每一根头发可能比平均直径要细。
因此,在目前的市场中,消费者容易错误地将他们自身归属于某一特定的头发类型并选择特定版本的产品,所选产品的成分可能并不与其头发的实际特征最好地匹配。这种次于最佳产品版本的选择可能导致消费者满意度的低下。
因此,需要头发产品的消费者能够对什么版本的护发产品最适合他们作出更准确、更知情的选择。
发明内容
本发明目的在于通过提供一种用于测量人发直径的系统来解决上述问题,该系统包括:移动设备;和包括头发附接机构的参考卡;所述移动设备配置为使用参考卡自身的尺寸和/或参考卡的表面上作为尺寸参考的校准标记的尺寸,将由所述附接机构附接到参考卡的人发的图像转换为人发的直径的测量值(measurement)。
这样,所要求保护的系统提供了一种用于定量分析头发的机制,产品的选择可基于该机制进行。通过进行实际测量,消费者更可能为其头发选择最佳产品,因为可防止由对头发类型的定性描述产生的错误。消费者满意的可能性因此增大。
有利地,所述系统可由用户自己在家实施,而不需要任何复杂或昂贵的实验室装置。
现在将阐述本发明的任选特征。这些特征可单独地或与本发明的任何方面以任何组合应用。
将图像转换为直径测量值的移动设备的配置可呈计算机程序产品的形式,其有形地体现在非暂时性计算机可读介质中,所述计算机程序产品包含用于执行将数字成像设备所拍摄的图像变成直径测量值所需要的步骤的指令。
例如,计算机程序可以是可下载到移动设备上的应用程序。
移动设备可以是任何电子设备,如:移动电话/蜂窝电话、平板电脑、平板手机、膝上型电脑或数码相机。移动设备可包括用于捕获附接到参考卡的人发的图像的数字成像设备(例如,照相机)。这样,移动设备配置为捕获图像以及对其进行处理。
参考卡的表面可以是白色的以使得待测量的头发与卡表面之间的颜色对比度尽可能地大。对于深色头发(例如,棕色、黑色),白色表面将是特别优选的。对于亚麻色或灰色头发,可能优选引入深色表面以使颜色对比度反过来。单个参考卡可通过引入具有白色背景的表面和具有黑色背景的表面来配置为用于多种头发颜色。白色和黑色作为例子使用,但可用其他浅色或深色代替。
任选地,参考卡可含有关于其使用或关于应用用途的说明。
任选地,参考卡的表面包括粘合区域。这样的粘合区域将提供附加的附接机构以将头发附接到卡,这对于卷曲的头发的直径测量特别有利,因为卷曲的头发具有固有的回弹性,因此可能更难以使用狭缝或类似的机构附接到卡并且附接后可能不能保持在固定的位置。
任选地,参考卡具有无光表面。该表面的粗糙度可大于或等于无光打印纸的粗糙度。这可对应于低于35%的TAPPI 75光泽度值,甚至更优选地,这可对应于不高于10%的TAPPI 75光泽度值。
这样,卡所吸收的光的量增加。因此,从卡反射的光最小化,从而减少了因光源的反射而在图像中产生的光斑。当在人造光中拍摄图像时,这一点尤为重要。图像中的亮斑可能影响图像的处理,故参考卡的无光表面会产生可用于各种照明条件或变化的照明条件下的稳健系统。
当在光照良好的环境中记录图像时,特别理想的是在记录图像之前禁用移动设备上的任何闪光灯。在闪光灯可能有用的情况下(例如,在光照极差的环境中),无光表面将有助于最小化因闪光灯的反射而产生的亮斑效应。
头发附接机构采取呈在卡的一端处用于接收头发的一端的第一附接点和在卡的相对端处用于接收头发的另一端的第二附接点的形式。
这样,可将头发的一端放置在卡的一端处的附接点中,然后可在将头发的另一端附接到第二附接点之前将头发拉紧。如果头发在第一附接点和第二附接点之间保持为绷紧的线,则便于跨过其直径的测量,首先是因为头发保持不动;运动的减少将带来更可靠的直径测量。其次,因为头发将被保持在给定的位置,故其纵轴沿由第一附接点和第二附接点之间的最短可能距离限定的路径对齐。这样,通过将头发的纵轴设置在给定的位置,将便于在横跨该纵轴的方向上测量直径。
任选地,附接点中的一者或多者可为卡中的狭缝。
任选地,第一附接点和第二附接点二者均可呈参考卡的边缘中的狭缝的形式。
头发附接措施可采取其他形式,包括在每一端处的夹子、在每一端处的粘合点、在每一端处的可绕其缠绕头发的突起/杆。
移动设备可配置为在处理图像之前将由数字成像设备拍摄的图像呈现给用户以进行质量验证。这样,在计算直径测量值之前,将由用户检查数字图像的质量。这为消除因模糊而可能出现的错误测量值提供了一种快速机制。除了图像的模糊外,使用中的移动设备也可提示用户检查移动设备与卡的对齐情况和/或改变数字成像设备与参考卡之间的距离。在将图像呈现给用户进行验证时,移动设备可显示警告消息,该警告消息提示用户检查所拍摄图像中的一个或多个错误。这些错误可能包括:焦点问题(警告消息可能要求用户检查图像是否模糊);对齐问题(警告消息可能提示用户检查参考卡与移动设备之间的相对角度是否小于特定的阈值角度);由数字成像设备的镜头的至少一部分的障碍所导致的非完整图像;和/或参考卡放置得离数字成像设备太近或太远。
错误可能是卡与移动设备之间的角度(即,如果图片是以透视方式拍摄的)。可为相对角度设置阈值,使得移动设备将仅在相对角度低于阈值时捕获图像。这样,将减少由透视图像产生和可能导致测量不确定性的不希望的噪声。
用户可能会被提示重新拍摄照片。或者或另外,可在图像的处理过程中自动检测缺陷如模糊、对齐和距离相关的问题。
任选地,如果需要测量头发的某些性质,则必须提供校准方法。任选地,校准方法包括用于从用成像设备捕获的头发纤维的图像提取一个或多个校准标记的特征的算法。校准方法可还包括使用源自标记特征的信息对捕获的图像进行操作以对捕获的图像进行缩放和/或旋转和/或裁剪的算法,以有利地呈现捕获的图像中含头发纤维的部分供后续测量。
在一些实施方案中,为了比较的目的,与校准标记相关的附加数据可被独立地用于算法。例如,它们可以是内置于电话应用中的硬编码值,或者可有利地修改作为使用网络的应用升级机制的一部分。
在一些实施方案中,可例如使用快速响应码(QR码)或可通过已知的算法从原始图像提取的条形码在参考卡上独立地编码该数据。
在又一个实施方案中,QR或条形码可在单独的物体上,例如FMCG产品格式,并且作为先前的步骤使用标准算法由电话应用程序捕获和解码。
校准标记可呈沿卡的至少一部分延伸的标记的形式。其可呈在卡的边缘处或在距卡的边缘设定的距离处绕卡的周边延伸的标记的形式。
在一些实施方案中,标记可呈可包含额外信息的形状的形式,例如标识。
在一些实施方案中,可使用标记来指示头发附接点的位置并也可以是校准标记。
在一些实施方案中,可使用标记来结合卡上的区域,其中在附接时唯一的特征物体可以是头发本身。这些标记也可以是校准标记。
在一些实施方案中,代替校准标记或除校准标记之外,可使用参考卡本身的尺寸和/或形状作为校准方法的一部分。对参考卡的测量可包括参考卡的一部分的高度、长度或任何其他量度,如对角线上相对的角之间的距离。
可提供算法以从原始图像提取校准标记。该算法可具有两个阶段:从原始图像提取校准标记的像素的分割程序;以及为像素组分配身份作为特定标记的分类程序。该算法可利用如上所述的先验知识。分割程序指从背景分割校准标记。就该分割的目的而言,头发纤维本身形成背景的一部分。
在一个可能的实施方案中,可使用具体选择的校准标记的视觉颜色作为像素分割的基础,然后使用预先存储的数字模板(见上)来为像素分配标记身份并使用匹配方法确定模板上特定特征的位置。
校准标记的测量可用来定义可用来创建原始图像的校准版本的变换矩阵,该原始图像具有以现实世界物理值(例如,以微米)已知的像素大小。
在一个实施方案中,所述变换可布置为使得输出是相对于原件缩放、旋转和/或裁剪的校准图像,以便在校准图像中可见的唯一特征是头发纤维并使得头发纤维与图像像素阵列的网格垂直对齐。
任选地,头发纤维的直径测量可使用该校准图像作为输入进行。
任选地,为了生成直径测量值,将移动设备配置为:将由数字设备拍摄的数字图像记录在移动设备的存储器中;使用分割算法处理所记录的图像以提取一个或多个校准标记和/或参考卡的边界;使用所提取的校准数据来缩放所捕获的图像以创建与实际物理尺寸具有已知关系的校准图像;和从校准图像提取头发的直径。任选地,为了生成直径测量值,将移动设备进一步配置为旋转和/或裁剪所捕获的图像,使得头发纤维的校准图像的取向和/或尺寸被优化以便于后续的尺寸分析。任选地,将移动设备配置为访问包含头发产品列表的数据库,每一种头发产品被分配了该产品适合的一个或多个头发直径范围。
在进行了头发直径测量后,可将移动设备配置为访问数据库,并基于数据库中对所测得的直径列出的产品为用户生成推荐的头发产品的输出。
推荐的头发产品可为以下中的一者或多者:洗发水、调理剂、焗油膏、造型产品。
数据库可位于在直径测量后移动设备将访问的远程服务器上。或者,数据库可被下载并存储在移动设备的存储器中。
根据本发明的第二个方面,提供了一种与计算机程序一起使用以测量人发直径的参考卡,所述参考卡包括:将头发附接到参考卡的头发附接机构;和一个或多个校准标记。
参考卡可包含标识符,该标识符提供:可下载供与参考卡一起使用的计算机程序的网站地址;和/或与计算机程序组合使用该卡的指南。
参考卡可与头发产品组合提供,例如,可移除地附接到头发产品的包装。
根据第三个方面,提供了一种用于使用移动设备测量人发直径的计算机程序,所述计算机程序配置为执行以下步骤:获得在参考卡上的人发的图像,所述参考卡包括头发附接机构和一个或多个校准标记;和使用所述一个或多个校准标记作为尺寸参考,将头发的图像转换为头发的直径测量值。计算机程序可与参考卡组合提供。
计算机程序可以是可下载到移动设备上的应用程序。可提供一种用于使用移动设备测量人发直径的计算机程序产品,所述计算机程序产品有形地体现在非暂时性计算机可读介质中,所述计算机程序产品包含配置为使得数据处理装置进行以下操作的指令:
在参考卡上获得人发的图像,所述参考卡包括一个或多个校准标记;
使用所述一个或多个校准标记作为尺寸参考,将头发的图像转换为头发的直径测量值。
在参考卡上获得人发的图像可包括使用移动设备自身的数字成像设备捕获数字图像的步骤。
根据第四个方面,提供了一种测量人发的直径的方法,所述方法包括以下步骤:获得附接到参考卡的人发的图像,所述参考卡包括校准标记;和使用校准标记作为尺寸参考将头发的图像转换为头发的直径测量值。
所述方法可还包括以下步骤:提供附接人发的参考卡,所述参考卡包括:头发附接机构;和校准标记。
所述方法可还包括使用头发附接机构将人发附接到参考卡的步骤。
本发明的其他任选特征将在下文阐述。
附图说明
下面结合附图以举例的方式描述本发明的实施方案,在附图中:
图1示出了参考卡的示意图;
图2示出了移动设备的示意图;
图3示出了与网络通信的移动设备和参考卡的示意图;
图4示出了用于测量人发的直径的方法;
图5示出了参考卡的一个实例的示意图;
图6示出了移动设备上执行的各种步骤以处理进行头发直径的测量之前拍摄的图像;和
图7示出了识别最佳头发纤维边界的一个实例方法。
具体实施方式
下文结合图1至3描述用于测量人发50的直径的系统。
所述系统包含移动设备20和参考卡10,所述参考卡包含配置为将头发50固持到卡上的头发附接机构以及卡上的校准标记12,该校准标记12提供可对照其比较头发的尺寸参考。
图1中示出的参考卡为矩形形状并包括表面13,在进行测量之前,头发应贴靠表面13定位。在图13的实施方案中,该表面是浅色如白色的,以使其与放置于其上的深色头发(例如,棕色或黑色头发)之间的对比度最大化。图1中所示参考卡的头发附接机构为一对连接器,每一个连接器呈卡中的狭缝的形式,所述狭缝将置于其内的头发困住。第一连接器在卡的一端处形成附接点,第二连接器在卡的相对端处形成第二附接点。通过在两个附接点处同时困住单根头发20,头发50将沿参考卡的长度被拉紧。通过将两个附接点定位在细长参考卡的相对端处,头发被保持于其上的区域将最大化,如果沿着头发的长度进行平均直径测量,则这将是有利的。
除了相对之外,还对齐附接点,使得当在两个点之间拉紧头发时其将平行于参考卡的细长轴线。在参考卡被用于卷曲的头发的情况下,其可另外包括粘合区域(未示出),粘合区域位于两个附接点中间的表面13的顶部。粘合区域优选是无光的并且是透明或浅色的,以便保持表面与头发之间的颜色对比度。
图1中所示参考卡的校准标记12呈标记于参考卡的表面13上的线的形式,该线位于从卡的周边向内移位的设定距离处,并且在该实施方案中,围绕卡的整个周边延伸。应理解,校准标记可呈卡上具有特定厚度和/或特定长度和/或距卡的边缘特定距离的任何其他标记的形式。
图2示出了适于实施本发明的各种方面和实施方案的移动设备的一个示意性实施方案。移动设备可包括所有所示部件,但可含更多或更少部件。
移动设备20包括数字成像设备60(如数码相机)以记录数字照片。这些照片可然后存储在存储器22的数据存储部中。
所示移动设备20包括与存储器22通信的中央处理单元(CPU)21和各种其他部件。
所示移动设备20的这些其他部件包括电源23、网络接口24、显示器25、输入/输出接口26、音频接口27、闪光灯28和用户控制器29。
电源23提供移动接口所使用的电力,并且可呈可再充电电池和/或外部电源的形式。
网络接口24为移动设备提供与任何其他计算设备直接或间接通信的机制,并包括配置为与一个或多个通信协议和技术一起使用的电路,所述通信协议和技术包括但不限于:GPRS;GSM;TDMA;传输控制协议/互联网协议(TCP/IP);CDMA;WCDMA;Wi-Fi;3G、4G、蓝牙或任何其他无线通信协议。
显示器25可为LCD(液晶显示器)、等离子体显示器或任何其他合适的电子显示器并可以是触敏的,因为其可包括配置为接收来自人手指或触控笔的输入的屏幕。
输入/输出接口26可包括用于输出信息的一个或多个端口,例如,经由耳机输出音频信息,但也可为配置为接收信号的输入端口,所述信号包括遥控信号。
音频接口27通常包括允许移动设备输出信号的扬声器和允许移动设备接收包括用于控制应用的语音控制输入在内的音频信号的扩音器。
所示移动设备20包括闪光灯28,其可与数字成像设备结合使用以照亮拍摄照片的物体。用户控制器29可呈允许用户控制移动设备的各种功能的外部按钮或滑块的形式。
保存在设备上的应用程序可配置为与设备的各种部件相互作用,以便在接收到来自一个或多个用户控制器的输入时,数字成像设备被触发并拍摄物体(如参考卡上的头发)的数字照片。该图像然后可存储在存储器中,并且可使用一个或多个算法来处理存储的图像。
本文描述的计算机程序可呈存储于存储器22中的应用程序的形式。
移动设备20可配置为通过网络40与其他计算机交换信息。网络可包括互联网和/或一个或多个局域网(LAN)或广域网(WAN)。
如图3中所示,此信息交换可包括访问外部计算机30上的产品数据库33。产品数据库可包括合适的产品的列表和产品最适合的头发直径的指示。该指示可以是直径上限阈值、直径下限阈值或合适直径的范围。
这样,可将从参考卡10上的用户头发拍摄的图像提取的处理信息与产品数据库中的指示进行比较和匹配。然后可应用选择标准基于数值或标签为用户选择最合适的产品。
在其他实施方案中,产品数据库可存储在移动设备的存储器22内。
应理解,信息如所进行的测量和/或产品选择可通过网络40与外部服务器通信。例如,用户可通过在社交媒体网站上发布信息来与其他人分享该信息。
下文将结合图4描述一种测量人发的直径的方法,其中相同的附图标记对应于关于图1至3描述的特征。
参考卡10与移动设备20一起提供。将待测量的头发50附接(s1)到参考卡10,使得头发贴靠参考卡的表面13。在参考卡包括两个附接点的情况下,将头发附接到第一附接点(例如,卡中的狭缝)并在将其附接到第二附接点之前对头发施加拉力,使得头发以绷紧的(taught)形态在两个附接点之间保持静止。
相对的狭缝是简单且成本有效的附接点,不需要额外的部件并且需要的附加制造步骤非常少。另外,尽管相对的狭缝能够将头发贴靠参考卡10的表面13绷紧在固定的位置,但是它们不能对头发施加过度的力,过度的力将损坏头发并影响直径测量的可靠性。
剩余的步骤由移动设备执行,优选使用已下载到设备上的移动应用程序来执行。参考卡可包括用户可使用移动设备访问以下载应用程序的说明和/或网站链接。
使用移动设备的数字成像设备60拍摄(s3)卡上的头发的图像。图像必须包括校准标记的至少一部分,该部分足以成像所述校准标记的所有已知参数(例如,其宽度和/或长度)。
然后可在处理之前将图像存储在存储器22中。或者,可访问先前拍摄(使用移动设备拍摄并存储在存储器22中或使用单独的数字成像设备如独立的数码相机拍摄并保存到存储器22)的图像以便处理。
图像处理包括对图像应用阈值算法以将图像分割成前景和背景的步骤。
在进行图像处理之前,可增加验证步骤,其可包括将图像与警告消息一起显示给用户,以便用户可在进行处理之前自己进行图像的视觉质量检查。
将图像相对于校准标记或卡本身的尺寸(例如,其长度或宽度)校准(s4)。校准标记具有已知的尺寸和/或位置(例如,其宽度、其长度或从标记到参考卡的边缘的距离)。这意味着每一个像素的大小可根据该已知参数对应于多少个像素来计算。
然后从经处理的图像提取(s5)直径测量值。应用边缘检测算法(如Sobel运算)来横跨头发的纵轴测量头发的直径(厚度)。从该像素测量值,使用从校准步骤提取的每一个像素的大小来计算实际测量值。
可沿着头发的长度进行多次测量并取平均以得到更准确的结果。将大于或小于标准偏差的给定倍数(例如,标准偏差的1.2倍)的离群测量值在取平均之前去除,以进一步提高准确度。
在获得了直径的值后,将其与可能保存在移动设备本身的存储器内的产品数据库33进行比较,或者可将其托管在外部计算机或服务器上并通过网络访问。
在产品数据库位于外部的情况下,其可以更容易地维护和不断更新以去除旧产品、添加新产品等。
数据库中列出的每一个产品将被分配一个特定的直径范围。使该分配的范围与实际直径测量值(平均值或其他值)相匹配(s6)。移动设备将基于测得的头发直径与各个产品的直径范围之间最接近的匹配来提取推荐的产品。
可将产品分成产品类别,例如,洗发水、调理剂、焗油膏和造型产品,并且可从每一个类别推荐产品(s7)。从图像提取头发的直径(s5)可能需要对图像进行若干操作。图4a和4b中更详细地示出了头发测量值提取过程(s5)的实例。
检查图像的质量(s51),例如通过应用Laplacian滤波器来检查是否模糊。如果滤波器检测到模糊,则可生成指示用户重新拍摄照片的错误消息。
在已检查图像质量后,将图像裁剪(s52)到小于整个图像的尺寸的预定义窗口。这不仅有助于减少待处理的像素的数量,而且还去除外部区域,包括含有可能导致伪结果的校准标记的区域。
然后将图像转换为灰度图像(s53)。另外,可应用进一步的算法来增加对比度和/或减少存在的像素的噪声(s54)。然后对图像应用算法(500)以识别头发纤维边界,然后估计头发纤维直径-该算法由一系列步骤组成:向灰度图像应用1D梯度滤波器(s55)。如果头发纤维径直地(cutting across)垂直于(作为校准过程的结果)像素的行排列,则逐行应用1D梯度滤波器。或者,如果头发纤维沿着像素的行排列,则逐列应用1D梯度滤波器。
在一些实施方案中,基于相邻像素之间的强度差异,梯度滤波器可以是一阶导数的标准估算。
其他实施方案可包括梯度滤波器的替代实施方式。例如,Canny、Roberts、Prewitt和Sobel滤波器。取决于成像过程的质量和附随的噪声特性,可优选一种或其他方法。已发现Sobel算子有利地较不倾向于产生噪声。假定头发纤维垂直排列,则依次取经裁剪图像的每一行(s56),分析梯度滤波器输出。
在每一行中,识别梯度滤波图像的最小和最大值的位置(s57)并将这些点与它们的两个相邻点一起用于构造两条抛物线。这在图7中更详细地示出。
头发的左边界由左侧抛物线的最小点的位置给出。头发的右侧边界由右侧抛物线的最大点的位置给出(s58)。图7中可以看到左侧抛物线。
然后通过从右侧边界的位置减去左侧边界的位置来计算头发纤维的宽度(s59)。
然后可计算平均测量值。该平均测量值可以是对行的一个分段的平均值或者是对所有行计算的平均值。还可以计算进一步的统计数据,例如直径方差或标准偏差。上述方法的一个优点在于,它允许头发纤维边界的位置的子像素估计,并因此比在尝试测量之前试图直接分割出头发纤维的方法改善了对直径的估计,因为在后一情况下头发纤维直径只能估计到像素宽度的最接近的整数。
逐行方法假定在所拍摄的图像中,头发垂直地附接到参考卡,即每一行跨头发纤维而过。如果头发水平地附接,则可逐列分析图像,而不是逐行分析。
尽管图4示意了一个实例,但应理解,可省略一个或多个步骤,并且可以与所示出的顺序不同的顺序执行这些步骤。
整个测量过程可实时进行。图5中示出了替代的参考卡110的一个实例。在该实施方案中,参考卡是正方形的并包含三角形标记以及边界,边界的宽度为卡的总宽度的至少1/8。头发附接措施在图中不可见。
图6示出了在移动设备上执行的各种步骤,以处理在对头发的直径进行测量之前拍摄的图像。图6a示出了由移动设备拍摄的参考卡110上的头发的图像。图6b示出了图像在已被裁剪后的一个实例。图6c示出了经裁剪的图像在被转换为灰度图像后的一个实例。
图6d和6e分别示出了Sobel X和Sobel Y输出。在此实例中,Sobel X输出将然后被逐行分析,并且所得到的横截面中的转折点将被用来确定头发的宽度,例如使用上文描述的抛物线方法。
在本文描述的任何一个实施方案中,确定头发直径的方法可包括去除离群测量值、如比平均值大出至少一个标准偏差的那些值的附加步骤。这将有利地提高稳健性,防止由噪声引起的错误测量值。
除了对沿头发的长度上的不同点取平均之外,移动设备还可配置为在“一段时间”上捕获不止一个图像。然后可对在该段时间内的每次读数生成的宽度测量值取平均。直径测量值可被保存到设备和/或可被共享,例如通过电子邮件、短信息或社交媒体。在图像被保存的情况下,可与图像一道保存附加的数据。此数据可包含校准信息,如每一个像素的微米数。其也可包含更多关于实际直径的细节。例如,其可包含:测得的最小头发直径;测得的最大头发直径;测得的中值头发直径;测得的平均头发直径;标准偏差;方差;最小离群值计数;最大离群值计数;以及关于应用于图像的滤波器的详细信息。此信息还将包括标签/签条。
移动设备也可配置为生成过去的样品结果的概要。这些概要可被分配给一个或多个用户并因此可用来比较不同用户的头发直径,或同一用户随着时间推移的不同头发直径测量值。
虽然已结合上述示例性实施方案描述了本发明,但在本公开中给出时,许多等同的修改和变化对于本领域技术人员来说将是显而易见的。因此,上文阐述的本发明的示例性实施方案应视为说明性的而非限制性的。可对所描述的实施方案作各种改变而不偏离本发明的精神和范围。
上文提及的所有参考文献在此以引用方式并入本文。
Claims (12)
1.一种用于测量人发(50)的直径的系统,所述系统包括:
移动设备(20);和
包括头发附接机构(11a,11b)的参考卡(10);
所述移动设备配置为使用所述参考卡自身的尺寸和/或所述参考卡的表面上作为尺寸参考的校准标记(12)的尺寸,将由所述附接机构附接到所述参考卡的人发的图像转换为所述人发的直径的测量值。
2.根据权利要求1所述的系统,其中所述移动设备包括用于捕获附接到所述参考卡的人发的图像的数字成像设备。
3.根据权利要求1所述的系统,其中所述头发附接机构采取在所述卡的一端处用于接收头发的一端的第一附接点和在所述卡的相对端处用于接收所述头发的另一端的第二附接点的形式。
4.根据权利要求3所述的系统,其中所述附接点中的一者或多者为所述卡中的狭缝。
5.根据前述权利要求中任一项所述的系统,其中所述参考卡的表面包括粘合区域。
6.根据权利要求1至4中任一项所述的系统,其中所述参考卡具有无光表面。
7.根据权利要求2所述的系统,其中为了生成所述直径测量值,将所述移动设备配置为:
将由所述数字成像设备拍摄的数字图像记录在所述移动设备的存储器中;
使用分割算法处理所记录的图像以提取一个或多个校准标记和/或所述参考卡的边界;
使用所提取的校准数据来缩放所捕获的图像,以创建与实际物理尺寸具有已知关系的校准图像;和
从所述校准图像提取所述人发的直径。
8.根据权利要求7所述的系统,其中为了生成所述直径测量值,将所述移动设备进一步配置为旋转和/或裁剪所捕获的图像,使得头发纤维的校准图像的取向和/或尺寸被优化以便于后续的尺寸分析。
9.根据权利要求1至4中任一项所述的系统,其中将所述移动设备配置为访问包含头发产品列表的数据库,每一种头发产品被分配了所述产品适合的一个或多个头发直径范围。
10.根据权利要求9所述的系统,其中在进行头发直径测量后,将所述移动设备配置为访问所述数据库,并且基于所述数据库中对所测得的直径列出的产品为用户生成推荐的头发产品的输出。
11.根据权利要求2所述的系统,其中将所述移动设备配置为在处理所述图像之前,将由所述数字成像设备拍摄的图像呈现给用户以进行质量验证。
12.一种测量人发的直径的方法,所述方法包括以下步骤:
提供参考卡(10),所述参考卡包括头发附接机构以及一个或多个校准标记;
使用所述头发附接机构将所述人发附接到所述参考卡;
获得附接到参考卡的人发的图像;和
使用所述一个或多个校准标记作为尺寸参考,将所述人发的图像转换为所述人发的直径测量值。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP15169995 | 2015-05-29 | ||
EP15169995.6 | 2015-05-29 | ||
PCT/EP2016/061345 WO2016193018A1 (en) | 2015-05-29 | 2016-05-19 | System and method for measuring hair diameter |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107645925A CN107645925A (zh) | 2018-01-30 |
CN107645925B true CN107645925B (zh) | 2021-06-25 |
Family
ID=53396227
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680029668.6A Active CN107645925B (zh) | 2015-05-29 | 2016-05-19 | 用于测量头发直径的系统和方法 |
Country Status (9)
Country | Link |
---|---|
US (1) | US10660562B2 (zh) |
EP (1) | EP3303986B1 (zh) |
JP (1) | JP6900322B2 (zh) |
CN (1) | CN107645925B (zh) |
AR (1) | AR104756A1 (zh) |
BR (1) | BR112017025165B1 (zh) |
EA (1) | EA036032B1 (zh) |
WO (1) | WO2016193018A1 (zh) |
ZA (1) | ZA201707504B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102016225656A1 (de) | 2016-12-20 | 2018-06-21 | Henkel Ag & Co. Kgaa | Kamera zur Haaranalyse mit Kalibiervorrichtung |
JP6852525B2 (ja) * | 2017-04-05 | 2021-03-31 | 富士通株式会社 | 校正装置、校正方法、校正プログラム |
DE102017222747A1 (de) | 2017-12-14 | 2019-06-19 | Henkel Ag & Co. Kgaa | Beschädigungsfreies Ermitteln der Dicke von Haupthaar |
JP7140848B2 (ja) | 2018-05-17 | 2022-09-21 | ザ プロクター アンド ギャンブル カンパニー | 毛髪被覆率分析のためのシステム及び方法 |
US11172873B2 (en) | 2018-05-17 | 2021-11-16 | The Procter & Gamble Company | Systems and methods for hair analysis |
US11384357B2 (en) | 2018-06-29 | 2022-07-12 | The Procter And Gamble Company | Aptamers for personal care applications |
MX2021012433A (es) | 2019-04-16 | 2021-11-17 | Procter & Gamble | Aptameros para aplicaciones para el control de olor. |
CA3081034C (en) * | 2019-05-21 | 2024-05-21 | Sportlogiq Inc. | System and method for image registration and camera calibration using learned error functions |
US12039732B2 (en) | 2021-04-14 | 2024-07-16 | The Procter & Gamble Company | Digital imaging and learning systems and methods for analyzing pixel data of a scalp region of a users scalp to generate one or more user-specific scalp classifications |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102494616A (zh) * | 2011-11-22 | 2012-06-13 | 捷开通讯科技(上海)有限公司 | 基于移动终端的长度测量装置与方法 |
CN103608666A (zh) * | 2011-06-15 | 2014-02-26 | 宝洁公司 | 用于分析毛发纤维的装置和使用该装置的方法 |
Family Cites Families (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE8030534U1 (de) * | 1981-07-09 | Wittmann, Dieter, 8000 München | Gesundheitspaß | |
US5237520A (en) * | 1990-05-11 | 1993-08-17 | Foot Image Technology, Inc. | Foot measurement and footwear sizing system |
JPH0473052A (ja) * | 1990-07-16 | 1992-03-09 | Shiseido Co Ltd | 毛髪径測定方法と測定装置および測定用サンプル |
US5164793A (en) * | 1991-09-13 | 1992-11-17 | Brown Group, Inc. | Shoe size selection system and apparatus therefor |
US5689446A (en) * | 1995-11-03 | 1997-11-18 | Amfit, Inc. | Foot contour digitizer |
US6389150B1 (en) * | 1999-03-22 | 2002-05-14 | Somnuk Amornsiripanitch | Total quality of hair parameters measuring method |
US6546356B1 (en) * | 2000-05-01 | 2003-04-08 | Genovation Inc. | Body part imaging method |
US20020065452A1 (en) | 2000-11-29 | 2002-05-30 | Roland Bazin | Process for diagnosing conditions of external body portions and features of products applied thereto |
JP2002224086A (ja) * | 2001-02-01 | 2002-08-13 | Shiseido Co Ltd | 毛髪物性の評価方法 |
GB0128531D0 (en) | 2001-11-29 | 2002-01-23 | Rossi Chris | Hairdressing apparatus |
CN1156708C (zh) * | 2002-01-14 | 2004-07-07 | 清华大学 | 一种羊毛纤维细度测量方法及系统 |
US20040168329A1 (en) * | 2002-06-11 | 2004-09-02 | Hisayo Ishimaru | Shoe pattern design method, shoe pattern design device, foot measurer, and foot positioning device of foot measurer |
US20050097762A1 (en) * | 2002-06-12 | 2005-05-12 | Biesbrouck Gerardus M. | Device and method for examining a diabetic foot |
WO2004034832A2 (en) * | 2002-10-16 | 2004-04-29 | Jeffrey S. Brooks, Inc. | Foot scanning and measurement system and method |
CN1245606C (zh) * | 2003-09-08 | 2006-03-15 | 上海市计量测试技术研究院 | 一种根据有证标准物质校准电子显微镜测量物质长度的方法 |
FR2867678A1 (fr) * | 2004-03-16 | 2005-09-23 | Oreal | Produit comportant une composition capillaire et une information renseignant sur un parametre mesurable lie a la forme du cheveu |
US7131208B2 (en) * | 2004-04-16 | 2006-11-07 | Bernard Cohen Technology, Llc | Method, device and cartridge for measuring fluctuations in the cross-sectional area of hair in a pre-determined scalp area |
US20060134410A1 (en) * | 2004-12-20 | 2006-06-22 | Mackey Larry N | Polymeric structures comprising an unsubstituted hydroxyl polymer and processes for making same |
CN1795813A (zh) | 2004-12-28 | 2006-07-05 | 中田泰尊 | 皮肤分析系统和头皮头发分析系统 |
CN1821715A (zh) * | 2006-03-22 | 2006-08-23 | 东华大学 | 一种新型头发在线测量综合装置 |
JP4640619B2 (ja) * | 2007-03-23 | 2011-03-02 | 花王株式会社 | 毛髪繊維形状解析システム及び解析方法 |
US8848974B2 (en) * | 2008-09-29 | 2014-09-30 | Restoration Robotics, Inc. | Object-tracking systems and methods |
JP2010281631A (ja) * | 2009-06-03 | 2010-12-16 | Zenkoku Nama Concrete Kogyo Kumiai Rengokai | 品質検査方法および品質検査装置 |
CN102102978A (zh) * | 2009-12-16 | 2011-06-22 | Tcl集团股份有限公司 | 一种手持终端及其测量物体的方法和装置 |
US8908928B1 (en) * | 2010-05-31 | 2014-12-09 | Andrew S. Hansen | Body modeling and garment fitting using an electronic device |
BR112013010661A2 (pt) | 2010-11-05 | 2020-10-06 | Koninklijke Philips Electronics N.V. | controlador de cache para uso em um sistema, cliente de imagens, servidor de imagens, estação de trabalho, parelho de formação de iamgem, método de armazenamento e produto de progama de computador. |
CN201867174U (zh) * | 2010-11-26 | 2011-06-15 | 四川辉煌测控设备有限公司 | 细丝直径测量仪 |
JP5028540B1 (ja) * | 2011-11-30 | 2012-09-19 | 有限会社Bush | 毛髪の太さ、及び弾性を測定し、この測定した毛髪の太さ、及びこの弾性に基づいて、(a)第一ランクx〜(c)第三ランクzのいずれか一を選択し、この毛髪に最適な施術を行うパーマネントの処理方法 |
CN102519373A (zh) * | 2011-12-19 | 2012-06-27 | 苏州大学 | 一种实时测量生丝细度的方法及其装置 |
JP5267708B2 (ja) * | 2011-12-27 | 2013-08-21 | カシオ計算機株式会社 | 画像処理装置、撮像装置、画像生成方法、及びプログラム |
KR20140015780A (ko) | 2012-07-24 | 2014-02-07 | 노승철 | 헤어제품 홍보 어플리케이션을 이용한 헤어제품 홍보 및 그에 대한 비즈니스 모델 |
US9222836B2 (en) | 2012-11-01 | 2015-12-29 | Aaron James Conti | Hair colorant system and method |
CN103063617A (zh) * | 2013-01-11 | 2013-04-24 | 江南大学 | 一种测量离体头发光泽度的装置和方法 |
JP6461918B2 (ja) * | 2013-05-13 | 2019-01-30 | ユニリーバー・ナームローゼ・ベンノートシヤープ | 診断方法 |
US20150009312A1 (en) | 2013-07-02 | 2015-01-08 | Anthony Verna | Remote camera associatable with objects for wirelessly transmitting video to a handheld device |
KR20150018973A (ko) | 2013-08-12 | 2015-02-25 | 정하철 | 스마트폰을 이용한 의료용 화상시스템 |
US20150052008A1 (en) | 2013-08-16 | 2015-02-19 | iWeave International | Mobile Application For Hair Extensions |
CN103499303B (zh) | 2013-09-27 | 2016-08-24 | 中国人民解放军空军工程大学 | 一种羊毛细度自动测量方法 |
US20160286906A1 (en) * | 2013-11-09 | 2016-10-06 | Edgimago 2012 Ltd. | Method and system for measuring 3-dimensional objects |
US20150228084A1 (en) * | 2014-02-10 | 2015-08-13 | Netcoutoure, Inc. | Systems and methods for calculating foot size using image recognition |
CN103829928A (zh) * | 2014-02-20 | 2014-06-04 | 京东方科技集团股份有限公司 | 一种头发测量仪和头发测量系统 |
KR101506685B1 (ko) | 2015-02-06 | 2015-03-30 | 주식회사 지엠홀딩스 | 탈모치료를 위한 저출력 레이저와 mts 볼이 접목된 사물인터넷 기반 u헬스케어 닥터헤어빗 |
US20180035762A1 (en) * | 2015-02-09 | 2018-02-08 | C & J Clark International Limited | Measuring an object |
US20170169571A1 (en) * | 2015-12-11 | 2017-06-15 | Nesi Trading Co., Ltd. | Foot scanning system |
US20180160777A1 (en) * | 2016-12-14 | 2018-06-14 | Black Brass, Inc. | Foot measuring and sizing application |
FR3060735B1 (fr) * | 2016-12-15 | 2019-12-27 | IFP Energies Nouvelles | Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure |
-
2016
- 2016-05-19 WO PCT/EP2016/061345 patent/WO2016193018A1/en active Application Filing
- 2016-05-19 CN CN201680029668.6A patent/CN107645925B/zh active Active
- 2016-05-19 EA EA201792232A patent/EA036032B1/ru not_active IP Right Cessation
- 2016-05-19 JP JP2017561746A patent/JP6900322B2/ja active Active
- 2016-05-19 US US15/575,880 patent/US10660562B2/en active Active
- 2016-05-19 BR BR112017025165-5A patent/BR112017025165B1/pt active IP Right Grant
- 2016-05-19 EP EP16725092.7A patent/EP3303986B1/en active Active
- 2016-05-27 AR ARP160101527A patent/AR104756A1/es active IP Right Grant
-
2017
- 2017-11-06 ZA ZA2017/07504A patent/ZA201707504B/en unknown
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103608666A (zh) * | 2011-06-15 | 2014-02-26 | 宝洁公司 | 用于分析毛发纤维的装置和使用该装置的方法 |
CN102494616A (zh) * | 2011-11-22 | 2012-06-13 | 捷开通讯科技(上海)有限公司 | 基于移动终端的长度测量装置与方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3303986A1 (en) | 2018-04-11 |
WO2016193018A1 (en) | 2016-12-08 |
ZA201707504B (en) | 2019-06-26 |
US10660562B2 (en) | 2020-05-26 |
BR112017025165B1 (pt) | 2022-08-09 |
CN107645925A (zh) | 2018-01-30 |
EP3303986B1 (en) | 2020-02-26 |
EA036032B1 (ru) | 2020-09-16 |
JP2018522223A (ja) | 2018-08-09 |
JP6900322B2 (ja) | 2021-07-07 |
AR104756A1 (es) | 2017-08-09 |
EA201792232A1 (ru) | 2018-06-29 |
US20180116583A1 (en) | 2018-05-03 |
BR112017025165A2 (pt) | 2018-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107645925B (zh) | 用于测量头发直径的系统和方法 | |
US20240041390A1 (en) | Systems and method for skin analysis using electronic devices | |
JP6546605B2 (ja) | 液体キャニスタ内の血液成分量の推定方法 | |
KR101140533B1 (ko) | 이미지로부터 추정된 피부색에 기초해서 제품을 추천하는 컴퓨터 구현된 방법 | |
KR102603366B1 (ko) | 분석 측정을 수행하기 위한 방법들 및 디바이스들 | |
US11283987B2 (en) | Focus region display method and apparatus, and storage medium | |
CN108351970B (zh) | 毛发直径测量 | |
JP6957462B2 (ja) | 毛髪の縮れ測定 | |
JP5771647B2 (ja) | 肌解析装置、肌解析システム、肌解析方法および肌解析プログラム | |
CN108055532A (zh) | 自动化匹配测试卡的方法与装置 | |
AU2021273324A1 (en) | Assay reading method | |
US10891455B1 (en) | Produce identification methods and device | |
GB2601978A (en) | Assay reading method | |
CN118451462A (zh) | 瞳距估计方法 | |
CN112257563A (zh) | 瞳孔测距方法、装置及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20210804 Address after: Rotterdam Patentee after: Unilever Intellectual Property Holdings Ltd. Address before: Rotterdam Patentee before: Netherlands Unilever Co.,Ltd. |