JP2023052849A - 美容的皮膚属性を決定するための機器及び方法 - Google Patents

美容的皮膚属性を決定するための機器及び方法 Download PDF

Info

Publication number
JP2023052849A
JP2023052849A JP2023014549A JP2023014549A JP2023052849A JP 2023052849 A JP2023052849 A JP 2023052849A JP 2023014549 A JP2023014549 A JP 2023014549A JP 2023014549 A JP2023014549 A JP 2023014549A JP 2023052849 A JP2023052849 A JP 2023052849A
Authority
JP
Japan
Prior art keywords
skin
entropy
image
cosmetic
cosmetic skin
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2023014549A
Other languages
English (en)
Other versions
JP7553621B2 (ja
Inventor
ムディヤンセラゲ マハトマ バンダラ ディサーナーヤカ ディサーナーヤカ
Mudiyanselage Dissanayake Dissanayake
直喜 宮本
Naoki Miyamoto
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Procter and Gamble Co
Original Assignee
Procter and Gamble Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Procter and Gamble Co filed Critical Procter and Gamble Co
Publication of JP2023052849A publication Critical patent/JP2023052849A/ja
Application granted granted Critical
Publication of JP7553621B2 publication Critical patent/JP7553621B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032—Determining colour for diagnostic purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/445—Evaluating skin irritation or skin trauma, e.g. rash, eczema, wound, bed sore
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7253—Details of waveform analysis characterised by using transforms
    • A61B5/7257—Details of waveform analysis characterised by using transforms using Fourier transforms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7253—Details of waveform analysis characterised by using transforms
    • A61B5/726—Details of waveform analysis characterised by using transforms using Wavelet transforms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A61B5/748—Selection of a region of interest, e.g. using a graphics tablet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007—Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00—Evaluating a particular growth phase or type of persons or animals
    • A61B2503/12—Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Theoretical Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Dermatology (AREA)
  • Data Mining & Analysis (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Dentistry (AREA)
  • Fuzzy Systems (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

【課題】初期段階で先を見越したスキンケア処置を可能にするように、人の美容的皮膚属性を決定する。【解決手段】人の美容的皮膚属性を決定する方法であって、方法は、ａ）人の皮膚の少なくとも１つの部分を含む少なくとも１つのカラーチャネル画像を取得するステップと、ｂ）エントロピー統計値を使用して少なくとも１つのカラーチャネル画像を解析して、エントロピー値を取得するステップと、ｃ）エントロピー値に基づいて、人の皮膚の少なくとも１つの部分の美容的皮膚属性を決定するステップと、を含む。【選択図】図５

Description

本発明は、美容的皮膚属性を決定するための機器及び方法に関する。
皮膚撮像方法は、皮膚老化の異なる表現型を研究するために広く使用されてきた。しわ、斑点、及びたるみなどの老化表現型に特に着目した老化皮膚を特徴付けるために、数多くの画像解析技術及びアルゴリズムが文献に提案されている。皮膚老化関連表現型の外観は、経時的に連続的なプロセスであることが知られている。例えば、不均一な色素沈着は、最初に視覚的に知覚不能な斑点を生じさせる場合があり、これはやがて、経時的に視認可能となり得る。したがって、より若い消費者（例えば、３０歳未満）は一般に、古典的な視認可能な皮膚老化関連表現型を有さず、したがって、手遅れになるまで、そのような老化の視覚的に知覚不能な表現型を防止、遅延、及び／又は軽減する差し迫った必要がないという印象をもっている。
米国特許出願公開第２０１０／０２８４６１０（Ａ１）号（「‘６１０公開」）は、顔領域を含む入力画像から皮膚カラーを評価するための皮膚カラー評価方法に関する。‘６１０公開は、予め設定された少なくとも２５の領域の形成された第１の特徴点と、第１の特徴点を使用して設定される第２の特徴点とに従って、画像の顔領域を所定の領域に分割することを記載している。‘６１０公開は、更に、Ｌ*ａ*ｂ*カラーシステムのＬ*、ａ*、ｂ*、Ｃab *、及びｈab、ＸＹＺカラーシステムの三刺激値Ｘ、Ｙ、Ｚ、並びにＲＧＢ、色相Ｈ、明度Ｖ、彩度Ｃ、メラニン量、及びヘモグロビン量の値のうちの少なくとも１つを使用する平均値に基づいて皮膚カラー分布を生成し、続いて、分割された領域に対する測定結果に基づいて評価を行い、スクリーン上に測定結果又は評価結果を表示することによって皮膚カラー分布評価を行うことを記載している。しかしながら、‘６１０公開は、視認可能皮膚カラー分布に焦点を当て、皮膚老化に関連する表現型を記載しておらず、したがって、視覚的に知覚不能な皮膚老化関連表現型を評価するためのいずれの方法についても記載していない。
米国特許出願公開第２０１０／０２８４６１０（Ａ１）号
したがって、初期段階で先を見越したスキンケア処置を可能にするように、人の美容的皮膚属性を決定するための方法が必要とされている。
本発明は、人の美容的皮膚属性を決定する方法であって、
ａ）人の皮膚の少なくとも１つの部分を含む少なくとも１つのカラーチャネル画像を取得するステップと、
ｂ）エントロピー統計値を使用して少なくとも１つのカラーチャネル画像を解析して、エントロピー値を取得するステップと、
ｃ）エントロピー値に基づいて、人の皮膚の少なくとも１つの部分の美容的皮膚属性を決定するステップと、を含む、方法に関する。
本発明によるネットワークを介する美容的皮膚属性を決定するための例示的なシステムを示す図である。 本発明による美容的皮膚属性を決定するための代替の例示的なシステムを示す図である。 本発明による美容的皮膚属性を決定するための例示的な機器の構成要素を示すブロック図である。 本発明による美容的皮膚属性を決定するための方法を示すブロック図である。 本発明による美容的皮膚属性を決定するための方法を決定するための方法を示すフローチャートである。 本発明による美容的皮膚属性を決定するための方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚属性を決定するための方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚属性を決定するための方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚属性を決定するための方法を示すフローチャートである。 本発明によるデジタル画像内の対象の顔の少なくとも一部分の少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明によるデジタル画像内の対象の顔の少なくとも一部分の少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明によるデジタル画像内の対象の顔の少なくとも一部分の少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すフローチャートである。 本発明による美容的皮膚属性を決定する方法における第１のデジタル画像を取得するステップの詳細を示す一連のプロセスフロー図である。 本発明による美容的皮膚属性を決定する方法における第１のデジタル画像を取得するステップの詳細を示す一連のプロセスフロー図である。 本発明による美容的皮膚属性を決定する方法における第１のデジタル画像を取得するステップの詳細を示す一連のプロセスフロー図である。 第１のデジタル画像を取得するステップを示すフローチャートである。 本発明による美容的皮膚属性を決定する方法における複数のタイルを画定するステップを示す写真である。 複数のタイルを画定するステップを示すフローチャートである。 本発明による複数のタイルを表示するプロセスを示すプロセスフロー図である。 本発明による複数のタイルを表示するプロセスを示すプロセスフロー図である。 本発明による複数のタイルを表示するプロセスを示すプロセスフロー図である。 本発明による複数のタイルを表示するプロセスを示すフローチャートである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法を示すフローチャートである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化する代替的な方法を示すフローチャートである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性のエントロピー値を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性を可視化するための画像記述の一例としてのヒートマップを含む例示的なユーザインターフェースを示すスクリーンショットである。 図１９のユーザインターフェース内の少なくとも１つの美容的皮膚属性を可視化するための画像記述の代替的な変形例を示すスクリーンショットである。 本発明による少なくとも１つの美容的皮膚属性を可視化するための例示的なユーザインターフェースを示すスクリーンショットである。
皮膚がストレス（ＵＶ、老化、精神、環境因子によって引き起こされる）にさらされると、皮膚は、ＤＮＡレベル、細胞レベル、及び組織レベルを含む様々なレベルで損傷することが知られている。皮膚へのかかる損傷は、皮膚の欠陥をもたらす可能性がある。これらの皮膚の欠陥の存在は、以下の例に記載されるように、皮膚の光学に著しく影響を与える。
・角質層が乾燥（冬／空気状態）している場合、光は、表面（表面反射）からより多く反射して、皮膚上にしわをもたらす皮膚のマイクロテクスチャを強調する
・真皮が損傷（ＵＶ）した場合、真皮では光の散乱（真皮散乱としても知られる）が少なく、光は皮膚を透過する（下面反射が少ない）。デミス（demis）散乱が少ない場合、結果として皮膚はより暗く見える。
・皮膚が長期にわたってＵＶに曝露されると、皮膚は、より多くのメラニンを生成する。メラニンは光を吸収して、表面下の反射を低減し、したがって、皮膚はより暗く見える。
上記の皮膚の欠陥は、消費者の目には、皮膚の質の低い視覚的に知覚不能な信号として現れる。消費者は、潜在意識のレベルでの不純物としてこれらの欠陥を考慮することができるが、意識的な知識の欠如のために、欠陥を改善するための措置を講じることはできない。皮膚が長期にわたってストレスにさらされる及び／又は未処理にされる場合、これらの視覚的に知覚不能な不純物は、最終的に可視的な及び知覚可能な表現型（着色斑点、しわ、たるみ）につながる場合がある。
本発明は、対象の少なくとも１つの美容的皮膚属性を決定するための方法、機器、及びシステム及びグラフィカルユーザインターフェースに関する。本方法は、（ａ）人の皮膚の少なくとも１つの部分を含む少なくとも１つのカラーチャネル画像を取得するステップと、（ｂ）エントロピー統計値を使用して少なくとも１つのカラーチャネル画像を解析して、エントロピー値を取得するステップと、（ｃ）エントロピー値に基づいて、人の皮膚の少なくとも１つの部分の美容的皮膚属性を決定するステップと、を含む。
驚くべきことに、人の皮膚の少なくとも１つの部分を含むカラーチャネル画像を解析することによって取得されるエントロピー値を使用して、視覚的に知覚可能な美容的皮膚属性、並びに視覚的に知覚不能な美容的皮膚属性を決定することができることが見出された。
以下に説明するように、人の美容的皮膚属性が、エントロピー統計値を使用して、人の皮膚の少なくとも１つの部分を含むカラーチャネル画像を解析することによって取得されるエントロピー値に基づいて決定され得る場合、人が、美容的皮膚属性の状態を改善するために、先を見越したスキンケア処置を求めることができるように、有用な情報を推測することができる（例えば、美容的皮膚属性の状態）。具体的には、以下に記載されるように、人の皮膚の少なくとも１つの部分を有するカラーチャネル画像は、他の対象領域に対してより低いエントロピー値を有する皮膚の少なくとも１つの部分上に対象領域を有してもよい。対象領域におけるエントロピー値が低いほど、より良好な美容的皮膚属性の状態を示す、より低い強度変動を示す。したがって、他の対象領域におけるエントロピー値が高いほど、より大きい強度変化を示し、これは、より不良な美容的皮膚属性状態を示す。更なる利点は、先を見越したスキンケア処置が、特定の対象領域に対して標的化され得ることである。
本発明を詳細に説明する前に、以下の用語が定義され、定義されない用語は、当業者によって理解されるような通常の意味を与えられるべきである。
本明細書で使用するとき、「エントロピー」は、離散ランダム分布（ｐ（ｘ））のＳｈａｎｎｏｎエントロピー（Ｅ）を指し、以下の式によって定義され、
Figure 2023052849000002
 式中、Ｐ（ｘ）は、グレーレベルの分布である。
Ｅ（ｐ）は、デジタル画像のカラーチャネル画像への変換後のカラーシステム内のデジタル画像又はカラーチャネル画像における情報の量を表す。本明細書で使用するとき、「エントロピー統計値」は、デジタル画像又はカラーチャネル画像を解析するための記述統計としてエントロピーを使用する統計的方法を指す。デジタル画像がＲＧＢ画像である非限定的な例では、各Ｒ（赤色）、Ｇ（緑色）、及びＢ（青色）チャネルについてのエントロピー（エントロピー値）を別々に計算することができる。画像のエントロピー値は、各画素位置（ｉ，ｊ）において、（ｉ，ｊ）を中心とする２次元領域内の画素値のエントロピー値を計算することによって計算することができる。２次元領域は、カラーチャネル画像の一部であってもよい。Ｐｙｔｈｏｎなどのプログラミングソフトウェアパッケージを使用してエントロピー値を計算することができる。
本明細書で使用するとき、「美容的皮膚属性」は、人体の領域に視覚的／審美的効果を提供するか、又は皮膚の外観及び／又は感触に影響を与える全ての皮膚属性を含む。美容的皮膚属性のいくつかの非限定的な例としては、皮膚純度、皮膚年齢、皮膚トポグラフィ、皮膚色調、皮膚色素沈着、皮膚毛穴、皮膚炎症、皮膚水和、皮膚皮脂レベル、座瘡、ほくろ、皮膚つや、皮膚光沢、皮膚くすみ、不均一な色調、又は皮膚バリアを挙げることができる。上記美容的皮膚属性が標準用語であり、美容皮膚属性の対応する定義を、以下の公開された参照文献、すなわち、「Ｈａｎｄｂｏｏｋ ｏｆ ｃｏｓｍｅｔｉｃ ｓｃｉｅｎｃｅ ａｎｄ ｔｅｃｈｎｏｌｏｇｙ，３ｒｄ ｅｄｉｔｉｏｎ，ｅｄｉｔｏｒｓ Ａｎｄｒｅ Ｏ．Ｂａｒｅｌ，Ｍａｒｃ Ｐａｙｅ，Ｈｏｗａｒｄ Ｉ．Ｍａｉｂａｃｋ，ＣＲＣ Ｐｒｅｓｓ，２００９」、「Ｃｏｓｍｅｔｉｃ Ｓｃｉｅｎｃｅ ａｎｄ Ｔｅｃｈｎｏｌｏｇｙ－Ｔｈｅｏｒｅｔｉｃａｌ Ｐｒｉｎｃｉｐｌｅｓ ａｎｄ Ａｐｐｌｉｃａｔｉｏｎｓ，ｅｄｉｔｏｒｓ Ｋａｚｕｔａｍｉ Ｓａｋａｍｏｔｏ Ｒｏｂｅｒｔ Ｙ．Ｌｏｃｈｈｅａｄ，Ｈｏｗａｒｄ Ｉ．Ｍａｉｂａｃｈ，Ｙｕｊｉ Ｙａｍａｓｈｉｔａ，Ｅｌｓａｖｉｅｒ，２０１７」、「Ｃｏｓｍｅｔｉｃ Ｄｅｒｍａｔｏｌｏｇｙ：Ｐｒｏｄｕｃｔｓ ａｎｄ Ｐｒｏｃｅｄｕｒｅｓ，Ｅｄｉｔｏｒ（ｓ）：Ｚｏｅ Ｄｉａｎａ Ｄｒａｅｌｏｓ，Ｂｌａｃｋｗｅｌｌ Ｐｕｂｌｉｓｈｉｎｇ Ｌｔｄ，２０１０」に見出すことができることが、当業者によって理解されるだろう。美容的皮膚属性は、医学的状態又は根底にある医学的状態に関連する皮膚属性を含まない。
本明細書で使用するとき、「知覚不能な美容的皮膚属性」は、知覚者、すなわち、人、ユーザ、又は人間の対象によって知覚され得ないか、又は知覚不能である美容的皮膚属性を指す。知覚するとは、提示された情報又は環境を表し、理解するために、感覚情報の組織化、識別、及び解釈を指す「知覚」という語から派生している。全ての知覚は、神経系を通過する信号に関与し、これは次に感覚システムの物理的又は化学的刺激から生じる。例えば、視力は、眼の網膜に当たる光に関与し、匂いは臭気分子によって媒介され、聴覚は圧力波を関与する。知覚は、これらの信号の受動的受信だけでなく、受信者の学習、メモリ、期待、及び注意によっても形作られる。知覚は、２つのプロセス、すなわち、これらの低レベルの情報をより高レベルの情報（例えば、対象物認識のための形状を抽出する）に変換する、知覚入力を処理することに関連するプロセス（１）と、人の概念及び期待（又は知識）、及び知覚に影響を与える回復性及び選択的機構（注意など）と接続された処理に関連するプロセス（２）と、に分割され得る。例えば、知覚者は、プロセス（１）において対象を見ることができるが、プロセス（２）において対象物が何を表し／意味するかを知覚し、認識する知識を有していないため、対象が視覚的に知覚不能であるとみなされ得る。
本明細書で使用するとき、「視覚的に知覚不能な美容的皮膚属性」は、肉眼で検出可能ではない全ての美容的皮膚属性、又は消費者によって視覚的に検出可能であるが、消費者が美容的皮膚属性を理解しておらず、したがって、知覚不能な美容的皮膚属性とみなされる、美容的皮膚属性を含む。肉眼で視覚的に検出可能ではない視覚的に知覚不能な美容的皮膚属性のいくつかの非限定的な例としては、美容的皮膚炎症、皮膚皮脂レベル、又は任意の根底にある美容皮膚属性が挙げられる。
本明細書で使用するとき、「肉眼の」は、診断装置からの支援なしであることを意味する。
本明細書で使用するとき、「タイル」は、デジタル画像の一部を形成する、例えば画素などの単位を含み、したがって、「タイル」は、デジタル画像の全体を形成する。
本明細書で使用するとき、「デジタル画像データ」は、デジタルカメラ、写真スキャナ、デジタル画像を記憶することが可能なコンピュータ可読記憶媒体、及び撮影能力を含む任意の電子装置を含むがこれらに限定されない画像取得装置から取得される画像データを含む。デジタル画像データはまた、ＲＧＢ画像からカラーシステム内のカラーチャネル画像に変換されるカラーチャネル画像を含んでもよい。
本明細書で使用するとき、「インディシアム（indicium）の単一の度合い」は、グラフィック記号、数値、カラーコード、照明技術、及びこれらの組み合わせを含むがこれらに限定されない全ての電子的視覚表現を含む。
本明細書で使用するとき、「皮膚属性インデックス」は、数学的式又は統計的方法及びデータから導出されるモデル、又はルックアップテーブル（情報のアレイ）に基づいて計算することができるスコアを指す。皮膚属性インデックスは、定義された人々の集団に対する人の皮膚の少なくとも１つの部分の美容的皮膚属性の状態を示す確率値として生成されてもよく、好ましくは、皮膚属性インデックスは、Ｆ（エントロピー値）で定義されるエントロピー値の関数として生成され、関数は、トレーニングデータセットについて確立されたモデルによって決定され、トレーニングデータセットは、（ｉ）定義された人々の集団の複数のカラーチャネル画像であって、複数のカラーチャネル画像の各々が、定義された人々の集団内の人の顔の皮膚を含み、顔の皮膚が美容的皮膚属性を含む、複数のカラーチャネル画像と、（ｉｉ）美容的皮膚属性に基づく関連クラス定義と、を含む。
本明細書で使用するとき、「Ｌ*ａ*ｂ*」は、国際照明委員会（International Commission on Illumination、「ＣＩＥ」）によって定められた一般に認められている色空間を指す。３つの座標は、（ｉ）色の明るさ（すなわち、Ｌ*＝０で黒を生じ、Ｌ*＝１００は拡散白（diffuse white）を示す）、（ｉｉ）マゼンタと緑との間の色の位置（すなわち、負のａ*値は緑を示し、正のａ*の値はマゼンタを示す）、及び（ｉｉｉ）黄と青との間の色の位置（すなわち、負のｂ*値は青を示し、正のｂ*値は黄を示す）、を表している。
本明細書で使用するとき、「発色団マッピング」は、全体的な皮膚色調の指標として使用され得るメラニン又はヘモグロビン濃度をマッピング及び決定するメラニン及びヘモグロビンマッピングについての一般的に認識されている発色団空間を指す。メラニン又はヘモグロビンの平均値は、発色団マップデータから計算され得る。加えて、皮膚色調の均一性は、発色団マップデータから計算され得るメラニン又はヘモグロビン均一性（標準偏差）によって決定され得る。
本明細書で使用するとき、「皮膚純度」は、人の皮膚の少なくとも一部分における皮膚の欠陥の不在の外観。皮膚の欠陥としては、皮膚トポグラフィ形態の表面反射、及び／又はメラニン、ヘモグロビン及び／又はケラチノサイト及び線維芽細胞指向細胞代謝産物などの皮膚発色団のサブ表面反射から構成される不規則な又は不均一なスペクトル特性に影響を与える美容的皮膚属性が挙げられ、皮膚つや、皮膚色調が挙げられるが、これらに限定されない。
本明細書で使用するとき、「皮膚年齢」は、身体的外観、好ましくは人の顔、好ましくは人の顔の少なくとも一部分、より好ましくは、人の顔の少なくとも一部分の少なくとも１つの関心対象の領域（region of interest、ＲＯＩ）（更により好ましくは、少なくとも１つのＲＯＩは、目の周囲の皮膚領域（「眼領域」）、頬の周囲の皮膚領域（「頬領域」）、口の周囲の皮膚領域（「口領域」）、及びこれらの組み合わせからなる群から選択される）、に基づいて、基準年齢の皮膚外観と比較して、視覚的に評価又は知覚される人の皮膚の年齢を指す。
本明細書で使用するとき、「皮膚色調」は、一般に、基礎皮膚色又は色均一性の全体的な外観を指す。皮膚色調は一般に、皮膚の広い範囲にわたり特徴付けられる。その範囲は、１００ｍｍ２超であり得るが、顔の皮膚又はその他の身体の皮膚表面（例えば、腕、脚、背中、手、首）の全体などの、より大きい範囲も考えられる。
本明細書で使用するとき、「皮膚しわ」は、一般に、皮膚内の折り目、隆起部又は畳み目を指し、微細小じわ、超微細小じわ、微細しわ、超微細しわ、しわ、小じわを含むが、これらに限定されない。皮膚しわは、例えば、密度及び／又は長さに関して測定され得る。
本明細書で使用するとき、「皮膚つや」は、一般に、皮膚が反射する光量を指し、皮膚の光沢と呼ばれることがある。
本明細書で使用するとき、「皮膚きめ」は、一般に、皮膚表面のトポロジー又は粗さを指す。
本明細書で使用するとき、「皮膚はり」は、一般に、皮膚の堅さ又は弾力を指す。
本明細書で使用するとき、「皮膚皮脂レベル」は、一般に、皮膚中の皮脂腺によって分泌される油性又は蝋状物質である皮脂の量を指す。
本明細書で使用するとき、「皮膚斑点」は、一般に、皮膚の変色又は不均一な色素沈着（例えば、色素沈着過剰、斑）を指す。皮膚斑点は、例えば、密度、サイズ、及び／又は変色の程度に関して評価され得る。
本明細書で使用するとき、「スキンケア製品」は、スキンケア活性物質を含み、皮膚の状態を調節及び／又は改善する製品を意味する。
本明細書で使用するとき、「デジタル画像」は、標準的なＲＧＢなどを含むがこれらに限定されない撮像システム内の画素によって、並びに異なる照明条件及び／又はモードで得られる画像の下に形成されたデジタル画像を指す。デジタル画像の非限定的な例としては、カラー画像（ＲＧＢ）、モノクロ画像、ビデオ、マルチスペクトル画像、ハイパースペクトル画像などが挙げられる。非限定的な光条件としては、白色光、青色光、ＵＶ光、ＩＲ光、特定波長の光、例えば、１００～１０００ｎｍ、３００～７００ｎｍ、４００～７００ｎｍ、又は上記の上限及び下限の異なる組み合わせ、又は上記に列挙した範囲内の任意の整数の組み合わせの光を発する光源などが挙げられる。デジタル画像は、デジタルカメラ、写真スキャナ、デジタル画像を記憶することが可能なコンピュータ可読記憶媒体、及び写真撮影能力を含む任意の電子装置を含むがこれらに限定されない画像取得装置によって取得されてもよい。
以下の説明において、記載される方法は、美容的皮膚属性を決定するための方法である。したがって、記載される機器は、美容的皮膚属性を決定するための機器である。機器はまた、ディスプレイのために、ディスプレイ上に、対象の顔の少なくとも一部分のデジタル画像データのエントロピー統計値を生成するように構成されてもよく、記載されるグラフィカルユーザインターフェースは、対象の顔の少なくとも一部分のデジタル画像データのエントロピー統計値を表示するためのグラフィカルユーザインターフェースである。記載されるシステムは、美容的皮膚属性を決定するためのエントロピーベースのシステムである。例示的な実施形態では、システムは、美容及びスキンケア製品を解析及び推奨する目的で小売美容カウンタに位置する独立型撮像システム（図２に示される）である。しかしながら、システム及び方法は、例えば、図１に示すように、画像取得ユニット／装置及びディスプレイを含む電子携帯装置を介して、任意の場所で使用するように構成されてもよく、電子携帯装置は、ディスプレイ上での表示を生成するための機器、ネットワークを介して美容的皮膚属性のエントロピー値を可視化するためのグラフィカルユーザインターフェースに接続されている。
図１は、本発明による美容的皮膚属性を可視化するためのシステム１０を示す概略図である。システム１０は、ワイドエリアネットワーク（移動電話網、公衆交換電話網、衛星ネットワーク、インターネットなど）、ローカルエリアネットワーク（ワイヤレスフィディリティ、Ｗｉ－Ｍａｘ、ＺｉｇＢｅｅ（商標）、Ｂｌｕｅｔｏｏｔｈ（商標）等）、及び／又は他の形態のネットワーク機能として具体化され得るネットワーク１００を含んでもよい。ネットワーク１００には、携帯電子装置１２、及びディスプレイ上に表示を生成するための機器１４、美容的皮膚属性を可視化するためのグラフィカルユーザインターフェースが結合される。機器１４は、遠隔に位置し、ネットワーク１００を介して携帯電子装置に接続される。携帯電子装置１２は、デジタル写真などのデジタル画像を捕捉、記憶、及び／若しくは転送するように構成された携帯電話、タブレット、ラップトップ、携帯情報端末、並びに／又は他の計算装置であってもよい。したがって、携帯電子装置１２は、ユーザ入力を受信するための入力装置１２ａと、画像を取得するためのデジタルカメラなどの画像取得装置１８と、画像を表示するための出力装置１２ｂと、を含んでもよい。携帯電子装置１２はまた、ネットワーク１００を介して他の計算装置と通信するように構成されてもよい。携帯電子装置１２は、エントロピー統計値を使用して取得された少なくとも１つのカラーチャネル画像を解析してエントロピー値を取得し、エントロピー値に基づいて、人の皮膚の少なくとも１つの部分の美容的皮膚属性を決定するために、画像取得装置１８に結合された画像処理装置（図示せず）を更に含んでもよい。画像処理装置は、好ましくは、コンピュータ実行可能命令を有するプロセッサを含む。携帯電子装置１２は、決定された美容的皮膚属性を記述するコンテンツデータを表示するように、表示を生成するための表示生成ユニット（図示せず、電子ＬＥＤ／ＬＣＤディスプレイなど）を更に含んでもよい。
機器１４は、画像取得ロジック１４４ａ、画像解析ロジック１４４ａ及びグラフィカルユーザインターフェース（以下、「ＧＵＩ」）ロジック１４４ｃを記憶する、非一時的コンピュータ可読記憶媒体１４ａ（以下、「記憶媒体」）を含んでもよい。記憶媒体１４ａは、ランダムアクセスメモリ（ＳＲＡＭ、ＤＲＡＭなど）、読み出し専用メモリ（read only memory、ＲＯＭ）、レジスタ、及び／又は他の形態の計算記憶ハードウェアを含んでもよい。画像取得ロジック１４４ａ、画像解析ロジック１４４ｂ及びＧＵＩロジック１４４ｃは、コンピュータ実行可能命令を定義する。プロセッサ１４ｂは、記憶媒体１４ａに結合され、プロセッサ１４ｂは、図４のブロック図及び図５のフローチャートに関して以下に記載される本発明による対象の美容的皮膚属性を決定するための方法９０を実施するために、コンピュータ実行可能命令に基づいて構成される。美容的皮膚属性は、視覚的に知覚不能な美容的皮膚属性であってもよく、視覚的に知覚不能な美容的皮膚属性は、肉眼で検出可能ではない美容的皮膚属性であるか、又は消費者によって視覚的に検出可能であるが、消費者が美容的皮膚属性を理解していない美容的皮膚属性である。視覚的に知覚不能な美容的皮膚属性を決定する利点は、消費者が、視覚的に知覚不能な美容的皮膚属性の状態を改善するために、情報に基づいた決定を行い、先を見越した行動を取ることができることである。
決定方法
図４及び図５を参照すると、プロセッサ１４ｂが開始されると、プロセッサ１４ｂは、例えば、図６Ａ、図６Ｂ、図６Ｃ及び図７を参照して以下に説明するカラーシステムにおけるカラーチャネル画像へのデジタル画像の変換を介して、ステップ９１で取得されるべき人の皮膚の少なくとも１つの部分を含む少なくとも１つのカラーチャネル画像６０Ｌをもたらす。少なくとも１つのカラーチャネル画像６０Ｌは、エントロピー統計値を使用してステップ９２で解析されて、解析出力８０を取得し、解析出力８０はエントロピー値を含む。ステップ９３では、人の皮膚の少なくとも１つの部分の美容的皮膚属性は、エントロピー値に基づいて決定される。少なくとも１つのカラーチャネル画像は、Ｌ*ａ*ｂ*カラーシステム、ＲＧＢカラーシステム、ＨＳＬ／ＨＳＶカラーシステム、及びＣＭＹＫカラーシステムからなる群から選択されるカラーシステム内の画像であり得る。
以下の表１は、エントロピー値に基づいて決定される、対応するカラーチャネル画像及び対応する美容的皮膚属性を有する各エントロピー値を設定する。表１に記載のカラーチャネル画像は、Ｌチャネル画像、ａチャネル画像、ｂチャネル画像、ｃチャネル画像、及びこれらの組み合わせからなる群から選択されるＬ*ａ*ｂ*カラーシステム内の画像である。
Figure 2023052849000003
美容的皮膚属性を決定することは、定義された人々の集団に対する人の皮膚の少なくとも１つの部分の美容的皮膚属性の状態を示す確率値として皮膚属性インデックスを生成することを含んでもよい。具体的には、視覚的知覚試験では、消費者は、所定のスケールに基づいて、美容的皮膚属性について定義された人々の集団のデジタル画像（例えば、写真）をランク付けするように求められてもよい。ランク付けされたデジタル画像は、方法９０に従って解析されるようにデータベースとして記憶されて、美容的皮膚属性と最も高い相関性を有するエントロピー値を決定し得る。
あるいは、皮膚属性インデックスは、関数Ｆ（エントロピー値）で定義されるエントロピー値の関数として生成されてもよく、この関数は、訓練データセットについて確立されたモデルによって決定される。トレーニングデータセットは、（ｉ）定義された人々の集団の複数のカラーチャネル画像であって、複数のカラーチャネル画像の各々が、定義された人々の集団内の人の顔の皮膚を含み、顔の皮膚が、美容的皮膚属性を含む、複数のカラーチャネル画像と、（ｉｉ）美容的皮膚属性に基づく関連クラス定義と、を含み得る。トレーニングデータセットを構築するための技術は、画像処理方法の分野において当業者に既知であり、更に説明されない。
モデルは、回帰モデル又は分類モデル、好ましくは線形回帰モデル、より好ましくは機械学習線形回帰モデル、最も好ましくは機械学習サポートベクトル回帰（support vector regression、ＳＶＲ）モデルであり得る。ＳＶＲモデルは、サポートベクトルマシン（support vector machine、ＳＶＭ）モデルの具体例である。機械学習モデルはまた、サポートベクトル分類モデル又はランダムフォレスト回帰モデルであってもよい。
ＳＶＲモデルを使用することにより、携帯電子装置上のネイティブアプリケーションとして実装されたときに方法の性能における精度、再現性、速度の利点が可能である。具体的には、ＳＶＲモデルの重量により、ネイティブアプリケーションがより小さいハードウェアフットプリントを有することを可能にし、その結果、本発明による方法は、Ａｐｐｌｅ（商標）電話用のｉＯＳ又はＡｎｄｒｏｉｄ電話のＡｎｄｒｏｉｄ ＯＳを含むがこれらに限定されない携帯電話オペレーティングシステム（operating system、ＯＳ）などの携帯電子装置において容易に展開され得る。
分類モデルは、消費者を複数の群に分類するために使用されてもよく、各群は、皮膚属性インデックスの数値に基づいて関連するクラス定義を定義するように、同じ美容的皮膚属性の異なる状態の程度、好ましくは２つの群、より好ましくは３つの群を有する。例えば、方法は、群の各々に割り当てられた閾値に基づいて、皮膚の領域を、高レベルの美容的皮膚属性状態に分類するように構成されたヒートマップ、又は低レベルの美容的皮膚属性状態に分類するように構成されたヒートマップを表示してもよい。
少なくとも１つのカラーチャネル画像は、Ｌカラーチャネル画像、ａチャネル画像、ｂチャネル画像、及びＲＧＢカラーシステムからのｃチャネル画像、及びこれらの組み合わせからなる群から選択されるＬ*ａ*ｂ*カラーシステム内の画像であり、エントロピー値が、Ｌエントロピー値、ａエントロピー値、ｂエントロピー値、ｃエントロピー値、及びこれらの組み合わせからなる群から選択され、関数は、下記の式を有し、
皮膚属性インデックス＝Ａ＋Ｂ×（Ｌエントロピー値）＋Ｃ×（ａエントロピー値）＋Ｄ×（ｂエントロピー値）＋Ｅ×（ｃエントロピー）
式中、Ａ、Ｂ、Ｃ、Ｄ、及びＥは定数であり、Ｂ、Ｃ、Ｄ、及びＥのうちの少なくとも１つは、０ではない。
定数Ａ、Ｂ、Ｃ、Ｄ、及びＥは、トレーニングデータセットのサイズ及びコンテンツに基づいて変化してもよく、トレーニングデータセットに基づいてモデルによって生成される任意の数値であってもよいことが理解されるであろう。
具体的には、上記のエントロピー値の各エントロピー値は、単独で、又はエントロピー値のうちの別の１つと組み合わせて使用されてもよい。例えば、単一のエントロピー値を使用することにより、より高速な計算速度が得られ、これにより、非常に基本的なハードウェアを有する小型装置を使用することが可能になり、それによって、より効率的かつ費用効率の高い製品が得られる。
少なくとも１つのカラーチャネル画像は、Ｌチャネル画像であってもよく、エントロピー値は、Ｌエントロピー値であり、式中、Ｃ、Ｄ、Ｅは各々、０の値を有し、生成された皮膚属性インデックスは、皮膚純度、皮膚色調、又は皮膚つやを示す。
皮膚がストレス（ＵＶ、老化、精神、環境因子によって引き起こされる）にさらされると、皮膚は、ＤＮＡレベル、細胞レベル、及び組織レベルを含む様々なレベルで損傷することが知られている。皮膚へのかかる損傷は、皮膚の欠陥をもたらす可能性がある。これらの皮膚の欠陥の存在は、以下の例に記載されるように、皮膚の光学に著しく影響を与える。
・角質層が乾燥している（冬／空気状態）場合、光は、表面（表面反射）からより多く反射して、皮膚上にしわをもたらす皮膚のマイクロテクスチャを強調する。
・真皮が損傷した場合（ＵＶ）、真皮では光の散乱（真皮散乱としても知られる）が少なく、光は皮膚を透過する（下面反射が少ない）。デミス（demis）散乱が少ない場合、結果として皮膚はより暗く見える。
・皮膚が長期にわたってＵＶに曝露されると、皮膚は、より多くのメラニンを生成する。メラニンは光を吸収して、表面下の反射を低減し、したがって、皮膚はより暗く見える。
上記の皮膚の欠陥は、消費者の目には、皮膚の質の知覚不能な信号として現れる。消費者は、これらの欠陥を不純物として考慮することができるが、知識の欠如により、欠陥を改善するための措置を講じることはできない。皮膚が長期にわたってストレスにさらされる及び／又は未処理にされる場合、これらの知覚不能な不純物は、最終的に可視的な及び知覚可能な表現型（着色スポット、しわ、たるみ）につながる場合がある。
驚くべきことに、Ｌカラーチャネル画像のＬエントロピー値は、皮膚純度と最も高い相関性を有することが見出された。
Ｌエントロピー値を得るために、Ｌエントロピー値を取得し、本発明による方法によるＬエントロピー値に基づいて皮膚純度を決定する解析ステップのための少なくとも１つのカラーチャネル画像としてＬ－チャネル画像を選択する技術的効果は、Ｌエントロピー値が、カラーチャネル画像を解析することに基づいて、他のエントロピー値と比較して、皮膚の純度に対して最も高い相関性（ｒ＝０．８９）を有するためである。以下は、ピアソン相関係数（ｒ）を使用した統計解析を使用した視覚的知覚試験からの結果との相関性に基づいて生成されたデータである。相関性結果を以下の表２に示す。
Figure 2023052849000004
より高いピアソン相関係数（ｒ）は、エントロピー値が、視覚的知覚試験において調査される美容的皮膚属性の状態により寄与する因子であることを意味する。具体的には、視覚的知覚試験は、所定数のパネリスト＝３０２、パネリストの年齢＝２０～５０に基づいて行われる。パネリストは、１～５のスケールで、皮膚純度について（美容的皮膚属性の例として）の人々の写真のランクが求められる。視覚的知覚試験結果及び上記相関結果に基づいて、フィルタリングされた画像のＬチャネルエントロピー値（周波数フィルタによる）が皮膚純度属性と最も高い相関性を有することが見出された。したがって、デジタル画像内の人の皮膚の少なくとも一部分の皮膚純度を決定するためにＬチャネルのＬエントロピー値の使用が、複数の消費者に対する消費者に関連する方法で視覚的に知覚不能な美容的皮膚属性から説明可能な美容的皮膚属性に皮膚純度を変換するように使用され得る。
少なくとも１つのカラーチャネル画像は、ａチャネル画像であってもよく、エントロピー値は、ａエントロピー値であり、式中、Ｂ、Ｄ、Ｅは各々、０の値を有し、生成された皮膚属性インデックスは、皮膚炎症を示す。
少なくとも１つのカラーチャネル画像は、ｂチャネル画像であってもよく、エントロピー値は、ｂエントロピー値であり、式中、Ｂ、Ｃ、Ｅは各々、０の値を有し、生成された皮膚属性インデックスは、皮膚色素沈着又は皮膚くすみを示す。
少なくとも１つの色チャネル画像は、ｃチャネル画像であってもよく、エントロピー値は、ｃエントロピー値であり、式中、Ｂ、Ｃ、Ｄは各々、０の値を有し、生成された皮膚属性インデックスは、好ましくは、毛穴、小じわ、しわ、たるみ、皮膚弾力性、及びこれらの組み合わせからなる群から選択される皮膚トポグラフィを示す。
色チャネル画像の取得
カラーチャネル画像６０ａ、６０ｂ、６０ｃは、図５Ａ、図５Ｂ、図５Ｃ、及び図６を参照して以下に説明するように、デジタル画像５１から取得され得る。図１を参照すると、ネットワーク１００は、携帯電子装置１２からデジタル画像を取得し、デジタル画像を機器１４に送信して、本発明による美容的皮膚属性を決定するための方法２００で使用されるように使用され得る。入力装置１２ａは、プロセッサ１４ｂを開始するためのユーザ入力を受信するために携帯電子装置１２に結合されるか、又はそれと一体であってもよい。携帯電子装置１２は、各々が一意に割り当てられたインディシアムの単一の度合いを有する、複数のタイルを表示するための出力装置１２ｂを含んでもよい。入力装置１２ａは、マウス、タッチスクリーンディスプレイなどを含み得るが、これらに限定されない。
図１、図５Ａ及び図６を参照する。プロセッサ１４ｂが開始されるとき、プロセッサ１４ｂは、例えば、ステップ２０２で画像取得ロジック１４４ａを介して、対象の顔の少なくとも一部分のデジタル画像５１を取得させる。取得されたデジタル画像５１は、ＲＧＢ ＸＰデジタル画像又はＲＧＢ光沢デジタル画像であってもよい。ＲＧＢシステムのデジタル画像５１は、ＲＧＢ画像から、異なるカラーシステム内のカラーチャネル画像などのデジタル画像データに変換される。プロセッサ１４ｂは、更に、例えば、ステップ２０４において、画像解析ロジック１４４ｂを介して、取得されたデジタル画像５１から少なくとも１つのカラーチャネル画像６０ａ、６０ｂ、６０ｃを抽出させる。少なくとも１つのカラーチャネルは、例えば、０．１Ｒ＋０．２Ｇ＋０．７Ｂの式に基づいてＲＧＢカラーチャネルの更なる処理によって得られるカラーチャネル画像であってもよい。少なくとも１つのカラーチャネル画像６０ａ、６０ｂ、６０ｃは、カラーシステム内のカラーチャネル６０ａ、６０ｂ、６０ｃのいずれか１つから選択されてもよい。ステップ２０６では、抽出された少なくとも１つのカラーチャネル画像６０ａ、６０ｂ、６０ｃは、周波数フィルタを使用してフィルタリングされる。フィルタリングされた少なくとも１つのカラーチャネル画像６１ａ、６１ｂ、６１ｃを、ステップ２０８でエントロピー統計値を使用して解析して、人の美容的皮膚属性を決定する。ステップ２０６で周波数フィルタを使用することによって、抽出された少なくとも１つのカラーチャネル画像６０ａからノイズが除去され、これはステップ２０８における解析の感度を増大させ、それによって、非フィルタリングカラーチャネル画像を解析することに比べて、ステップ２０８からの解析出力においてより高い精度がもたらされる。しかしながら、非フィルタリングカラーチャネル画像を解析することは、本発明による方法を実装するために最小限のかつ基本的なハードウェアが利用可能な場合には、ハードウェアフットプリント、データ記憶スペース、又は処理能力の低減など、コンピューティングハードウェアの使用を低減するために有利であり得る。
任意選択的に、方法２００は、フィルタリングされたカラーチャネルを解析する前にフィルタリングされたカラーチャネル内のパラメータを最適化するために、フィルタリングされたカラーチャネルに画像補正係数を適用することを更に含んでもよい。パラメータとしては、照明補正、ぼやけ補正、回転補正などが挙げられ得る。
本発明による方法９０、２００を使用して少なくとも１つの皮膚属性を決定する技術的効果は、美容的皮膚属性の迅速かつ正確な解析を提供することである。以下の表３は、一般的に使用される撮像終了点との年齢相関性を記載しており、エントロピー統計値についての相関性は、他の撮像終了点と比較してより良好な相関性（０．８１）を有する。撮像終了点はまた、皮膚特徴を解析するための撮像方法として記載されてもよい。
Figure 2023052849000005
方法９０、２００は、５秒未満、好ましくは０．０１秒～５秒、より好ましくは０．５秒～１秒、又は上記の上限及び下限の異なる組み合わせ、又は上記に列挙した範囲内の任意の整数の組み合わせで実施されてもよい。方法９０、２００を１秒未満で実行することができるので、方法２００は、消費者のより広いネットワークへのスケーラビリティのために商業的に有利である携帯電話を含むがこれらに限定されない携帯型ハンドヘルド電子装置などの市販のハードウェアに実装され得る。
カラーシステムは、Ｌ*ａ*ｂカラーシステムであってもよく、少なくとも１つのカラーチャネル画像は、図５Ｂに示すようにテクスチャチャネルに対応する赤色のカラーチャネル６０ａ、黄色のカラーチャネル６０ｂ、又は青色のカラーチャネル６０ｃであってもよい。図５Ｃは、フィルタリングされたカラーチャネル画像６１ａ、６１ｂ、６１ｃを示し、各フィルタリングされたカラーチャネル画像を分析して、分析されたカラーチャネル画像を記述するエントロピー値を得ている。フィルタリングされた赤色のカラーチャネル６１ａのエントロピー値は、ａエントロピーとして定義されてもよく、フィルタリングされた黄色のカラーチャネル６１ｂのエントロピー値は、ｂエントロピーとして定義されてもよく、フィルタリングされた青色のカラーチャネル６１ｃのエントロピー値は、ｃエントロピーとして定義されてもよい。
カラーシステムは、上記の発色団マッピング空間であってもよく、少なくとも１つのカラーチャネル画像はヘモグロビンチャネル画像又はメラニンチャネル画像であってもよい。
周波数フィルタは、高速フーリエ変換フィルタ、ウェーブレット変換フィルタ、又はガウス差分（difference of gaussian、ＤｏＧ）フィルタであってもよい。より好ましくは、周波数フィルタはＤｏＧフィルタである。ＤｏＧフィルタは、ガウスフィルタ１及びガウスフィルタ２を有する。ガウスフィルタ１は、１～２００、５～５０、１０～２０、又は上記の上限及び下限の異なる組み合わせ、又は上記に列挙した範囲内の任意の整数の組み合わせでの標準偏差を含んでもよい。ガウスフィルタ２は、１～２００、５～１００、２０～６０、又は上記の上限及び下限の異なる組み合わせ、又は上記に列挙した範囲内の任意の整数の組み合わせでの標準偏差を含んでもよい。ＤｏＧフィルタのガウスフィルタ１及びガウスフィルタ２の組み合わせの非限定的な例を以下の表４に記載する。
Figure 2023052849000006
出力装置１２ｂは、タッチスクリーンディスプレイ、非タッチスクリーンディスプレイ、プリンタ、プロジェクタであって、例えば、図２に関して以下に記載されるミラーなどの表示面上に各々が一意に割り当てられた表示のインディシアムの単一の度合いを有する複数のタイルを投影する、プロジェクタを含み得るが、これらに限定されない。
図２は、少なくとも１つの美容的皮膚属性を可視化し、可視化された少なくとも１つの美容的皮膚属性に基づいて美容及びスキンケア製品を推奨する目的で、小売化粧品カウンタに位置する独立型撮像システムとして構成されたシステム１０の斜視図である。図３は、図２のシステム１０のブロック図である。図２及び図３を参照すると、システム１０は、少なくとも１つの美容的皮膚属性を可視化するための対象のデジタル画像を取得するための画像取得装置１８に接続された図１の機器１４のためのハウジング１１を含む。図２を参照すると、システム１０は、ミラー１６を含んでもよく、画像取得装置１８は、画像取得装置１８が視界から隠され得るように、ハウジング１１内のミラー１６の背後に取り付けられてもよい。画像取得装置１８は、デジタルカメラ、デジタル化回路に接続されたアナログカメラ、スキャナ、ビデオカメラなどであってもよい。システム１０は、ハウジング１１の周囲に配置されたＬＥＤ照明などの照明３０を含んで、対象のデジタル画像の生成を支援するためのＬＥＤ照明システムを形成し得る。システム１０は、ユーザ入力を受信するための入力装置１１２ａを有する。システム１０は、ミラー１６上に表示するために顔マップ３０を受信し、かつ投影するように構成されたプロジェクタなどの出力装置１１２ｂを更に含んでもよい。プロジェクタは、ハウジング１１とは別個であるが、機器１４に結合されてシステム１０を形成する周辺構成要素であり得るため、図２には示されていない。システム１０は、全体的な消費者体験を補完する及び／又は向上させるために、オーディオガイダンス出力を生成するための増幅器に任意選択的に結合された１つ以上のスピーカなどの第２の出力装置１１２ｃを更に含んでもよい。
好ましくは、少なくとも１つのカラーチャネルを得ることは、少なくとも２つの色チャネル、より好ましくは３つの色チャネルを得ることを含み得る。特に、赤色のカラーチャネル、黄色のカラーチャネル、及び青色のカラーチャネルについては、以下のように記載され得る。赤色のカラーチャネルがＬ*ａ*ｂ*カラーシステム内にあるとき、ａエントロピーは、フィルタリングされた赤色のカラーチャネルのエントロピー値である。黄色のカラーチャネルがＬ*ａ*ｂ*カラーシステム内にあるとき、ｂエントロピーは、フィルタリングされた黄色のカラーチャネルのエントロピー値である。青色のカラーチャネルがテクスチャチャネルに対応するとき、ｃエントロピーは、青色のカラーチャネルのエントロピー値である。
方法２００は、少なくとも１つの美容的属性を事前定義されたデータセットと比較して、インデックスを割り当てるステップを更に含んでもよい。インデックスは、解析された視覚的に知覚不能な消費者皮膚属性の皮膚属性インデックスとして記述され得、各タイルに表示のインディシアムの単一の度合いを一意に割り当てることは、割り当てられたインデックスに基づいている。各々一意に割り当てられたインデックスを有する複数のタイルは、比較するステップの後に、更なるステップで表示され得る。
エントロピー統計値を可視化する方法
本発明はまた、デジタル画像内の対象の顔の少なくとも一部分の、少なくとも１つの美容的皮膚属性のエントロピー統計値又はエントロピー値を可視化する方法にも関する。本方法は、エントロピー値がどのように可視化されるかを示す一連のプロセスフロー図である図８Ａ及び図８Ｂを参照して説明され、図９は、デジタル画像内の対象の顔の少なくとも一部分の少なくとも１つの美容的皮膚属性のエントロピー統計値又はエントロピー値を可視化する方法３００のフローチャートである。
顔の少なくとも一部分のデジタル画像５１が、図８Ａに示されている。デジタル画像５１は、境界線５２によって画定された顔１の少なくとも一部分の領域を含み、デジタル画像５１を横切って複数のタイル５４を含み、複数のタイル５４の各々は、エントロピー統計値を使用して解析された少なくとも１つの美容的皮膚属性を有する。外周５３は、第１のデジタル画像５１を取り囲む境界線５２を包囲する。第１のデジタル画像５１は、画素の総数によって形成され、例えば、第１のデジタル画像５１は、第１のデジタル画像５１の全体画像サイズを定義する多数の画素を有してもよい。例えば、タイルサイズが、４０×４０画素～７０×７０画素に設定される場合、したがって、第１のデジタル画像５１にわたって複数のタイル５４を形成するタイル５４の数は、全体画像サイズを指定されたタイルサイズで除算することによって得られる。タイル５４のサイズは、水平辺（タイル幅Ｗ）上の画素数、及び垂直辺（タイル高さＨ）上の画素数によって定義され得ることが理解されるであろう。各タイルは、１００×１００画素以下、１×１画素～１００×１００画素、２×２画素～１００×１００画素、５×５画素～９０画素×９０画素、４０×４０画素～７０×７０画素、又は上記の上限及び下限の異なる組み合わせ、上記に列挙した範囲内の任意の整数の組み合わせ又は上記範囲の任意の整数の組み合わせのタイルサイズを含んでもよい。上記範囲のタイルサイズを有する技術的効果は、画像データの解析のためのより短い処理時間を可能にし、したがって、ディスプレイが、より短い時間で少なくとも１つの美容的皮膚属性を可視化することを可能にすることである。
図９を参照すると、方法３００は、ステップ３０２でデジタル画像５１を受信することを含み、ステップ３０４では、解析された少なくとも１つの美容的皮膚属性に基づいて画定された複数のタイルの各タイル５４に表示４０のインディシアムの単一の度合いが一意に割り当てられる。図８Ｂに示される少なくとも１つの美容的皮膚属性のエントロピー値を可視化するために、各々が一意的に割り当てられたインディシアムの単一の度合いを有する複数のタイルのうちの少なくとも一部が、ステップ３０６で表示される。
システム１０及び方法９０、２００、３００が、本発明による少なくとも１つの美容的皮膚属性を決定及び可視化するように機能する方法を説明するためには、ステップ２０２において、対象の顔のデジタル画像がどのように得られるか、ステップ２０４において、取得されたデジタル画像からカラーチャネル画像がどのように抽出されるか、ステップ２０６において、抽出された少なくとも１つのカラーチャネル画像がどのようにフィルタリングされるか、ステップ３０４において、インディシアムの単一の度合いが各タイルにどのように一意に割り当てられるか、ステップ３０６において、タイルがどのように表示されるかを理解することが有用である。したがって、本発明による方法２００のステップ２０２、２０４、２０６、２０８及び方法３００のステップ３０２、３０４及び３０６は、以下、各ステップを実行するための個々のプロセスとして記載される。各プロセスはまた、サブルーチン、すなわち、本発明による方法２００、３００による対応するステップを実行するプログラム命令のシーケンスとして説明され得る。
デジタル画像の取得
本発明による方法２００によるデジタル画像を取得するステップ２０２について、デジタル画像データがデジタル画像からどのように取得されるかを示す一連のプロセスフロー図である、図１０Ａ、図１０Ｂ及び図１０Ｃを参照して記載され、図１１は、ステップ２０２に対応するデジタル画像データを取得するプロセス４００のフローチャートである。
顔１の入力画像５０ａを、図１０Ａに示す。入力画像５０ａは、例えば、図１１に示すように、プロセス４００のステップ４０２においてカメラ１８を使用して、ユーザによって捕捉されてもよい。図１０Ｂは、入力画像５０ａをトリミングして、顔の少なくとも一部分を含む編集済み画像データ５０ｂを取得するステップ４０４を示す。入力画像５０ａは、顔のアンカー特徴１ａを識別することによってトリミングされてもよく、これには、目、鼻、鼻孔、口の角などの顔の特徴、及びそれに応じたトリミングが含まれるが、これらに限定されない。図１０Ｂに示されるように、目がアンカー特徴１ａとして示されているが、これは単なる例であり、任意の顕著な又は検出可能な顔の特徴がアンカー特徴であってもよいことが理解されるであろう。編集済み画像データ５０ｂは、ステップ４０４で取得される第１のデジタル画像５１であってもよい。あるいは、図１０Ｃに示すように、編集済み画像データ５０ｂは、入力画像５０ａの１つ以上の不必要な部分を除去するためにトリミングによって更に処理され、それによって、ステップ４０８において境界線５２によって画定された顔１の少なくとも一部分を含む第１のデジタル画像データ５１を取得してもよい。取得された第１のデジタル画像５１は、境界線５２によって画定される顔１の少なくとも一部分の少なくとも１つの関心領域（ＲＯＩ）２を含んでもよい。ＲＯＩ２は、顔１の全体、好ましくは、顔の少なくとも一部分、より好ましくは、顔１の少なくとも一部分を画定する１つ以上の皮膚領域であってもよい。皮膚領域がどのように画定されるかの詳細は、図１４Ａ～図１４Ｃ及び図１５のフローチャートを参照して以下に記載される。
任意選択的に、プロセス４００は、ＲＯＩ ２が、目の周囲の皮膚領域（「眼領域２ａ」）、頬の周囲の皮膚領域（「頬領域２ｂ」）、口の周囲の皮膚領域（「口領域２ｃ」）、及びこれらの組み合わせからなる群から選択されてもよりステップ４０６を含んでもよく、好ましくは、ＲＯＩ ２は、対象の顔１の少なくとも一部分の一部であり、より好ましくは、取得された第１のデジタル画像データは、顔１の左側又は右側を画定する。ＲＯＩ ２は、取得された第１デジタル画像の少なくとも５％、１０％～１００％、２５％～９０％の領域を含んでもよい。
タイルの画定
図１２は、第１のデジタル画像データ５１上の複数のタイル５４を示す写真である。図１３は、第１のデジタル画像データ５１上の複数のタイル５４を画定するプロセス５００を示すフローチャートである。図１２を参照すると、第１のデジタル画像５１は、図１０Ｃを参照して上述したように、境界線５２によって画定された顔１の少なくとも一部分を含む。図１３を参照すると、プロセス５００は、取得された第１のデジタル画像を取り囲む境界線５２を包囲する外周５３を画定すること（ステップ５０２）を含む。取得された第１のデジタル画像５１は、画素の総数によって形成され、例えば、取得された第１のデジタル画像５１は、入力画像５０ａのトリミング後の画像サイズに応じて、ステップ４０４又はステップ４０６で決定される画素数を有してもよい。したがって、取得された第１のデジタル画像５１に基づく全体画像サイズは、ステップ５０４で画定されてもよい。例えば、タイルサイズが、４０×４０画素～７０×７０画素に設定される場合、ステップ５０６において、取得された第１のデジタル画像５１にわたって複数のタイル５４を形成するタイル５４の数は、全体の画像サイズを特定のタイルサイズで除算することによって得られる。
表示
本発明による方法は、美容的皮膚状態を可視化するために上述した生成された皮膚属性インデックスに対応する画像記述を生成するステップを更に含んでもよい。画像記述は、ヒートマップ（図８Ｂ、図２１に示されるような）、集計スコア（図１９Ｄにおける第４の領域１９４、図２２における特徴９３４に示される皮膚年齢）、及びこれらの組み合わせを含んでもよい。集計スコアは、上述した生成された皮膚属性インデックスに基づいて計算されてもよい。
図１４Ａ～図１４Ｃは、本発明の方法３００のステップ３０６による複数のタイルの表示プロセスの詳細を示すプロセスフロー図である。図１５は、複数のタイルを表示するプロセス６００を示すフローチャートである。図１４Ａは、第１のデジタル画像データ５１上に介在された第２のデジタル画像６０を示す写真である。第２のデジタル画像６０は、各々が一意的に割り当てられたインディシアムの単一の度合い４０を有する複数のタイル５４を表示した対象の顔の少なくとも一部分を含む。図１４Ｂは、各々が一意に割り当てられたインディシアムの単一の度合いを有する複数のタイル５４に基づいて、取得された第１のデジタル画像上に表示された第１のゾーン１１０、第２のゾーン１２０、第３のゾーン１３０を示す。各ゾーン１１０、１２０、１３０は、図９Ａ～図９Ｃ及び図１０を参照して上述した対象の顔１上のそれぞれの関心領域（ＲＯＩ）２を特定する。図１４Ｃは、境界線５２及び外周５３が図１４Ｂの第２のデジタル画像データ６０に表示されているが、図１４Ｃの第２のデジタル画像６０には表示されない点で、図１４Ｂとは異なる。第１ゾーン１１０は、第１ゾーンカラー１１０ａを有する第１ゾーンラインを含んでもよく、第２ゾーン１２０は第２ゾーンカラー１２０ａを有する第２ゾーンラインを含んでもよく、第３ゾーン１３０は第３ゾーンカラー１３０ａを有する第３ゾーンラインを含んでもよい。各ゾーンにおけるタイル５４の解析された画像データに基づいて、各ゾーンラインのカラーは、例えば、図１９Ｄの例示的なユーザインターフェースに示されるように、対象の他のゾーンに対して通常の、美しい、又は脆弱な状態であり得る美容的皮膚属性を可視化するタイルをより視覚的に区別するために異なっていてもよい。
図１５は、本発明による方法３００のステップ３０６において複数のタイルを表示するプロセス６００を示すフローチャートである。プロセス６００は、プロセッサが各タイル５４の解析された画像データを読み取り、タイル５４の解析された少なくとも１つの視覚的に美容的な皮膚属性に基づいて、複数のタイルの各タイル５４に対して一意にインディシアムの単一の度合いを割り当てる（ステップ６０４）ステップ６０２から開始してもよい。インディシアムの単一の度合いが照明であるとき、タイルの各々の解析された画像データは、ステップ６０６において各タイルでの照明の対応する明るさの程度を反映するように変換されてもよい。例示的な例では、ゾーン１１０は、ゾーン１２０内のタイルの各々での照明の程度に対して、ゾーン１１０内のタイルの各々においてより低い照明の程度を有してもよい。更に、ステップ６０８において、ゾーンは、第１のゾーン１１０が目ゾーンに対応し得、第２のゾーン１２０が頬ゾーンに対応し得、第３のゾーン１３０が口ゾーンに対応し得るように画定されてもよい。ゾーン内の表示された美容的皮膚属性を処置するためのゾーンに製品推奨項目を割り当てるように、各ゾーンのタイルの平均インデックスを計算して、それぞれのゾーンに従って表示された美容的皮膚属性に相関する皮膚状態の診断を生成してもよい。具体的には、方法３００は、表示された美容的皮膚属性を処置するための少なくとも１つの製品推奨項目を表示することを更に含んでもよい。
図１６Ａ～図１６Ｄは、本発明による少なくとも１つの美容的皮膚属性を可視化する方法を示すプロセスフロー図である。図１７は、本発明による少なくとも１つの美容的皮膚属性を可視化する方法７００を示すフローチャートである。図１６Ａは、図１７の方法７００のステップ７０２で表示される対象の顔の少なくとも一部分の第１のデジタル画像を示すカラー写真である。図１６Ｂは、対象の顔の少なくとも一部分の第２のデジタル画像、及び各々が一意に割り当てられたインディシアムの単一の度合いを有する複数のタイルを示すカラー画像であり、第２のデジタル画像が、ステップ７０４で第１のデジタル画像上に介在されている。任意選択的に、第１のデジタル画像は、図１６Ｃに示すようにグレースケールに変換されて、各々が一意に割り当てられたインディシアムの単一の度合い及び第１のデジタル画像を有する複数のタイルの間でより良好なコントラストを提供し得る。ステップ７０６では、各々が一意に割り当てられたインディシアムの単一の度合いを有する複数のタイルに基づいて、３つのゾーンが第２のデジタル画像上に表示される。
図１８は、図１７に示すような少なくとも１つの美容的皮膚属性を可視化する方法７００の変形例を示すフローチャートである。図１７の方法７００のステップ７０６に続いて、少なくとも１つの製品推奨項目が、ステップ７０８で表示される。ステップ７１０において、ユーザは、方法７００を終了するように選択するよう促され、方法７００は、ユーザがはいを選択した場合に、ステップ７１２で終了する。ユーザがいいえを選択した場合、図６の方法２００のステップが実行され、方法７００はステップ７０８に戻る。
ヒューマンマシンユーザインターフェース
本発明はまた、少なくとも１つの美容的皮膚属性を処置するための製品推奨を提供するためのヒューマンマシンユーザインターフェース（以下、「ユーザインターフェース」）にも関する。ユーザインターフェースは、タッチスクリーンディスプレイ／入力装置を有するディスプレイと、画像取得装置とを含む携帯電子機器上のグラフィカルユーザインターフェースであってもよい。ユーザインターフェースは、画像取得装置から取得された対象の顔の少なくとも一部分の第１のデジタル画像及び第１のデジタル画像上に介在された第２のデジタル画像を表示するタッチスクリーンディスプレイの第１の領域を含み得、第２のデジタル画像は、対象の顔の少なくとも一部分を有し、表示された複数のタイルは各々、一意に割り当てられたインディシアムの単一の度合いを有する。ユーザインターフェースは、第１の領域とは異なるタッチスクリーンディスプレイの第２の領域を更に含んでもよく、第２の領域は、ユーザ入力を受信するための選択可能なアイコンを表示し、表示された美容的皮膚属性を処置するための少なくとも１つの製品推奨アイテムの画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される。
図１９Ａ～図１９Ｅは、本発明による美容的皮膚属性を可視化するための、互いに協働する例示的なユーザインターフェースを各々が示すスクリーンショットである。図１９Ａ～図１９Ｅは、先行するユーザインターフェースに応答して連続的に提供される一連のユーザインターフェースとして記載され、図１９Ａ～図１９Ｅのユーザインターフェースは、上述されるように、本発明による方法による少なくとも１つの美容的皮膚属性を可視化するための全体的なユーザインターフェースを規定するために、複数の方法でプログラムされ得ることが理解されるであろう。好ましくは、図１９Ａ～図１９Ｅのユーザインターフェースの全てが、本発明による美容的皮膚属性を可視化するための例示的なユーザインターフェースを規定する。
図１９Ａは、第１のユーザ入力を受信するためのユーザインターフェース１６０を示し、好ましくは、第１のユーザ入力はユーザの年齢である。ユーザインターフェース１６０は、第１のユーザ入力を受信するための第１の領域１６２を含んでもよい。第１の領域１６２は、第１のユーザ入力を受信するための１つ以上のユーザ入力特徴１６４を含んでもよい。ユーザ入力特徴１６４は、例えば、図１９Ａに示されるようなユーザの年齢などの所定のユーザ特徴に対応する選択可能な入力アイコンなどであってもよい。ユーザインターフェース１６０は、第１のユーザ入力を提供するために、ユーザに対応する命令を含む第２の領域１６６を更に含んでもよい。第２の領域１６６は、より多くのユーザフレンドリーなインターフェースを提供するように、第１の領域１６２の上方に配置されてもよい。ユーザインターフェース１６０は、本発明による方法２００を開始するための開始オプションの一部であってもよい。
図１９Ｂは、第２のユーザ入力を受信するためのユーザインターフェース１７０を示し、好ましくは、第２のユーザ入力は、ユーザに懸念を与える美容的皮膚属性である。美容的皮膚属性は、ユーザの皮膚の懸念として記述され得る。ユーザインターフェース１７０は、図１９Ａのユーザ入力特徴１６４からの第１のユーザ入力の選択に応じて提供されてもよい。ユーザインターフェース１７０は、第２のユーザ入力を受信するための第１の領域１７２を含んでもよい。第１の領域１７２は、第２のユーザ入力を受信するための１つ以上のユーザ入力特徴１７４を含んでもよい。ユーザ入力特徴部１７４は、例えば、所定の皮膚の懸念に対応する選択可能な入力アイコンなどであってもよい。第１の領域１７２は、１つ以上の入力特徴１７４に対応する説明領域１７３を更に含んでもよく、説明領域１７３は、美容的皮膚属性又は皮膚の懸念の簡単な記述を含む。ユーザインターフェース１７０は、ユーザ入力を提供するためのユーザに対する対応する命令を含む第２の領域１７６を更に含んでもよい。第２の領域１７６は、より多くのユーザフレンドリーなインターフェースを提供するように、第１の領域１７２の上方に配置されてもよい。
図１９Ｃは、ユーザの入力画像を取得するためのユーザインターフェース１８０を示す。ユーザインターフェース１８０は、図１１に記載されるように、プロセス４００に従って第１のデジタル画像データを取得するためにアンカー特徴（目など）を整列させるための命令を有する第１の領域１８２を含んでもよい。ユーザインターフェース１８０は、図１９Ｂの１つ以上のユーザ入力特徴１７４を介して第２のユーザ入力の選択に応じて提供されてもよい。
図１９Ｄは、少なくとも１つの美容的皮膚属性を表示するためのユーザインターフェース１９０を示す。ユーザインターフェース１９０は、ユーザの入力画像が図１９Ｃのユーザインターフェース１８０内で取得された後に、提供されてもよい。図１９Ｄに示すように、人の皮膚の少なくとも１つの部分は、顔の皮膚であり、顔の皮膚が、好ましくは、頬領域／ゾーン、目領域／ゾーン、額領域／ゾーン、鼻領域／ゾーン、及びこれらの組み合わせからなる群から選択される少なくとも１つの関心領域（ＲＯＩ）を含み、画像記述は、少なくとも１つのＲＯＩにおける改善の必要性、又は第１のＲＯＩと第２のＲＯＩとの間の美容的皮膚属性の差分を可視化する。
ユーザインターフェース１９０は、本発明の方法に従って少なくとも１つの美容的皮膚属性を可視化するために、各々が一意に割り当てられたインディシアムの単一の度合いを有する複数のタイルを表示する第１の領域１９１を含んでもよい。第１の領域１９１は、図１８Ｄに示されるような類似の特徴を表示し得るが、複数のタイルを画定する線が消され、及び／又は不可視層として設定されてもよい点のみで異なっている。第１の領域１９１は、ユーザの顔の少なくとも一部分の目ゾーンに対応する第１のゾーン１１０と、ユーザの顔の少なくとも一部分の頬ゾーンに対応する第２のゾーン１２０と、ユーザの顔の少なくとも一部分の口ゾーンに対応する第３のゾーン１３０とを含んでもよい。図１９Ｄに示されるように、ゾーン結果は、第３の領域１９３内に表示されてもよく、それにより、ゾーン結果は、ユーザの顔の少なくとも一部分内のゾーンのインデックスの相対比較に基づいて、各ゾーンに対して生成され得るインデックスを含む。例示的な実施形態では、ゾーン結果に応じて、第１のゾーン１１０は、正常／美容／脆弱ゾーンとして記述されてもよく、第２ゾーン１２０は、正常／美容／脆弱ゾーンとして記述されてもよく、第３ゾーン１３０は、正常／美容／脆弱ゾーンとして記載されてもよい。好ましくは、各ゾーンは、ゾーン結果の相対的差に基づｋ異なる記述を有してもよい。ユーザインターフェース１９０はまた、第３のユーザ入力を受信するための第２の領域１９２を含む。第２の領域１９２は、第３のユーザ入力を受信するための１つ以上のユーザ入力特徴１９２１を含んでもよい。ユーザ入力特徴１９２１は、例えば、本発明による方法の次のステップに進むための選択可能な入力アイコンなどであってもよい。任意選択的に、ユーザインターフェース１９０は、ユーザの顔の少なくとも一部分の取得された第１のデジタル画像データに基づいて、複数のタイルの各タイルの解析された少なくとも１つの美容的皮膚属性に基づいて、ユーザの皮膚年齢を表示するための第４の領域１９４を含んでもよい。
図１９Ｅは、製品推奨項目２１０を表示するための第１の領域８０１を含むユーザインターフェース８００を示す。ユーザインターフェース８００は、図１９Ｄのユーザインターフェース１９０からのユーザ入力特徴１９２１の選択に応じて提供されてもよい。任意選択的に、ユーザインターフェース８００は、製品推奨項目２１０の詳細を提供するための第２の領域８０２を含んでもよい。好ましくは、ユーザインターフェース８００は、例えば、製品推奨項目２１０．の問い合わせ及び／又は購入のための製品コンサルタントからの支援の要求などの第４のユーザ入力を受信するための第３の領域８０３を含んでもよい。第３の領域８０３は、第４のユーザ入力を受信するための１つ以上のユーザ入力特徴２０３１を含んでもよい。ユーザ入力特徴２０３１は、例えば、本発明による方法の次のステップに進むための選択可能な入力アイコンなどであってもよい。
図２０は、本発明による少なくとも１つの美容的皮膚属性を可視化するためのデジタル画像５１上に重ね合わされた画像記述９０１を含む、例示的なユーザインターフェース９００の部分図を示す。画像記述９０２は、上記の方法９０から出力されたエントロピー値に基づいて生成されたヒートマップを含む。ヒートマップは、より良好な美容的皮膚属性条件に対応する低エントロピー値に基づく第１のヒートマップ部９０６を含む。ヒートマップ９０４は、より不良な美容皮膚属性条件に対応する高いエントロピー値に基づく第２のヒートマップ部９０８を更に含む。第１のヒートマップセクション９０６は、第２のヒートマップセクション９０８における第２の複数のタイルとは視覚的に異なる第１の複数のタイルから形成される。例えば、第１の複数のタイルは、第２の複数のタイルの色とは異なる色を表示するように変換される。表示されていないヒートマップセクション９１０（以下、「非表示ヒートマップセクション９１０」）は、高エントロピー値と低エントロピー値との間のエントロピー値に対応する。ヒートマップセクションは、以下の表５に概説されるように、美容的皮膚属性状態及び皮膚属性インデックスに関連するエントロピー情報を表示するように、下記のとおりに、構成されてもよい。
Figure 2023052849000007
図２１は、図１９のユーザインターフェース９００内の少なくとも１つの美容的皮膚属性を可視化するための画像記述９２０の代替的な変形例を示す。画像記述９２０は、画像記述９２０が表示された関心領域（ＲＯＩ）９２２を含み、表示されたＲＯＩ ９２２が、より良好な美容的皮膚属性状態に対応する他の非表示関心領域（ＲＯＩ）９２４に対して、より不良な美容的皮膚属性条件を示す色を表示するように変換されるという点で、図１９の画像記述９０２とは異なる。単一のヒートマップセクション（図２０を参照されたい）又はＲＯＩのみを表示する利点は、ユーザインターフェースを見る消費者が過度に多くの視覚情報で過負荷されないことである。
図２２は、少なくとも１つの美容的皮膚属性が皮膚純度である、本発明による少なくとも１つの美容的皮膚属性を可視化するための例示的なユーザインターフェース９３０を示すスクリーンショットである。ユーザインターフェース９３０は、ユーザインターフェース９３０が、生成された皮膚属性インデックスに基づいて、美容的皮膚属性及び集計スコア９３４を記述する代替のテキスト９３２を含むという点で、図１９のユーザインターフェース９０２とは異なる。ユーザインターフェース９３０は、メーター９３６と、メーター９３６に沿って０～１００のスケールで集計スコアを表すためのメーターマーカー９３８とを更に含んでもよい。メーター９３６は、集計スコア９３４を可視化する異なる方法であり、任意であってもよい。メーター９３６の色は、第１のヒートマップセクション９０４及び第２のヒートマップセクション９０６を表す色の勾配を示すように構成されてもよい。
上記の本発明による美容的皮膚状態を決定するための方法は、所定の期間にわたって美容的皮膚属性を追跡するステップを更に含んでもよい。例えば、図２１に示されるユーザインターフェース９３０は、選択時に、美容的皮膚属性ダイアリーを生成するカレンダー又はスケジュールを生成して、美容的皮膚属性の改善を追跡するために、命令がプロセッサによって受信され、ステップがプロセッサによって実行される第１の選択可能なアイコン９４０を含んでもよい。例えば、消費者が１日目に使用するとき、日付及び顔分析が記録され、メモリに保存される。続いて、消費者が、将来（所定期間、１週間、１ヶ月、６ヶ月後）に本発明による方法を使用する場合はいつでも、消費者の顔の皮膚を再び解析し、消費者は、１日目に対して所定期間後に彼／彼女の顔の皮膚がどのように見えるかを比較することができる。本発明による方法は、携帯電子装置又は消費者に特有のログインアカウントを介してアクセスすることができるウェブアプリケーション上のネイティブアプリケーションとして記憶されるダウンロード可能なソフトウェアアプリケーションであるように構成されてもよく、そのため、消費者は、本発明による方法に基づいて自己皮膚解析を実施することができ、ある期間にわたる改善（より不良な美容皮膚属性状態を有するＲＯＩの減少）を見る及び／又は監視することができる。
ユーザインターフェース９３０は、選択時に、本発明による美容的皮膚属性を決定するための方法が反復されるのを可能にする第２の選択可能なアイコン９４２を更に含んでもよい。例えば、上記の方法９０が繰り返され得る。
上述した本開示の代表的な実施形態が、以下に記載しているとおりに記載され得る。
Ａ．人の視覚的に知覚不能な美容的皮膚属性を決定する方法であって、
ａ）人のデジタル画像を取得するステップであって、デジタル画像がカラーチャネルを含む、取得するステップと、
ｂ）取得されたデジタル画像から少なくとも１つのカラーチャネルを抽出して、抽出されたカラーチャネル画像を提供するステップと、
ｃ）抽出されたカラーチャネル画像をフィルタリングするステップと、
ｄ）エントロピー統計値を使用してフィルタリングされたカラーチャネル画像を解析して、人の視覚的に知覚不能な美容的皮膚属性を決定するステップと、を含むことを特徴とする方法。
Ｂ．カラーチャネル画像が、周波数フィルタを使用してステップ（ｂ）でフィルタリングされ、好ましくは、周波数フィルタは、フーリエ変換フィルタ、ウェーブレット変換、ガウス差分（ＤｏＧ）フィルタからなる群から選択され、より好ましくは、周波数フィルタはＤｏＧフィルタであり、更により好ましくは、ＤｏＧフィルタは、１～２００、好ましくは５～５０、より好ましくは１０～２０の標準偏差を有するガウスフィルタ１と、１～２００、好ましくは５～１００、より好ましくは２０～６０の標準偏差を有するガウスフィルタ２と、を含むことを特徴とするパラグラフＡに記載の方法。
Ｃ．視覚的に知覚不能な美容的皮膚属性が、皮膚トポグラフィ、皮膚弾力性、皮膚色調、皮膚色素沈着、皮膚きめ、皮膚毛穴、美容的皮膚炎症、皮膚水和、皮膚皮脂レベル、座瘡、ほくろ、皮膚つや、皮膚光沢、皮膚くすみ、不均一色調、又は皮膚バリアからなる群から選択されることを特徴とするパラグラフＡ又はＢに記載の方法。
Ｄ．少なくとも１つのカラーチャネルが、赤色のカラーチャネル、黄色のカラーチャネル、及び青色のカラーチャネル、好ましくは少なくとも２つの色チャネル、より好ましくは３つのカラーチャネルのうちの１つであり、
赤色のカラーチャネルが、Ｌ*ａ*ｂ*色空間内にあり、ａエントロピーが、フィルタリングされた赤色のカラーチャネルのエントロピー値であり、
黄色の色チャネルが、Ｌ*ａ*ｂ*カラーシステム内にあり、ｂエントロピーが、フィルタリングされた黄色のカラーチャネルのエントロピー値であり、
青色のカラーチャネルが、テクスチャチャネルに対応し、ｃエントロピーが、青色のカラーチャネルのエントロピー値である、パラグラフＡ～Ｃのいずれか１つに記載の方法。
Ｅ．少なくとも１つのカラーチャネル画像が、赤色の色チャネルであり、好ましくは、視覚的に知覚不能な美容的皮膚属性が皮膚炎症であり、皮膚炎症に関連する皮膚属性インデックスが赤色のチャネルのａエントロピーに基づくことを特徴とするパラグラフＤに記載の方法。
Ｆ．少なくとも１つのカラーチャネルが黄色のカラーチャネルであり、好ましくは、視覚的に知覚不能な美容的皮膚属性が、皮膚色素沈着／くすみであり、皮膚色素沈着／くすみに関連する皮膚属性インデックスが、黄色のカラーチャネルのｂエントロピーに基づくことを特徴とするパラグラフＤに記載の方法。
Ｇ．少なくとも１つのカラーチャネルがテクスチャチャネルであり、
好ましくは、視覚的に知覚不能な美容的皮膚属性が、皮膚トポグラフィであり、より好ましくは、皮膚トポグラフィが、毛穴、小じわ、しわ、たるみ、皮膚弾力性からなる群から選択され、皮膚トポグラフィに関連する皮膚属性インデックスが、青色のカラーチャネルのｃエントロピーに基づくことを特徴とするパラグラフＤに記載の方法。
Ｈ．少なくとも１つのカラーチャネルが、メラニンチャネル又はヘモグロビンチャネル、好ましくは、少なくとも２つのカラーチャネルであり、
ヘモグロビンチャネルは、発色団マッピング空間内にあり、エントロピー値を有し、
メラニンチャネルは、発色団マッピング空間内にあり、エントロピー値を有することを特徴とするパラグラフＡ～Ｄのいずれか１つに記載の方法。
Ｉ．少なくとも１つのカラーチャネル画像がヘモグロビンチャネルであり、好ましくは、視覚的に知覚不能な属性美容的皮膚属性が皮膚炎症であり、皮膚炎症に関連する皮膚属性インデックスがヘモグロビンチャネルのエントロピーに基づくことを特徴とするパラグラフＨに記載の方法。
Ｊ．少なくとも１つのカラーチャネルがメラニンチャネルであり、好ましくは、視覚的に知覚不能な美容的皮膚属性が、皮膚色素沈着／くすみであり、皮膚色素沈着／くすみに関連する皮膚属性インデックスが、メラニンチャネルのエントロピーに基づくことを特徴とするパラグラフＨに記載の方法。
Ｋ．画像データを解析する前に、画像補正係数をフィルタリングされたカラーチャネル画像に適用することを更に含むことを特徴とするパラグラフＡ～Ｊのいずれか１つに記載の方法。
Ｌ．方法が、５秒未満、好ましくは０．０１秒～５秒、より好ましくは０．５秒～１秒で行われることを特徴とするパラグラフＡ～Ｋのいずれか１つに記載の方法。
Ｍ．取得された画像データが、対象の顔の少なくとも一部分の少なくとも１つの対象領域（ＲＯＩ）、好ましくは１つ～３つのＲＯＩ、より好ましくは取得された画像データ上に３つのＲＯＩを含み、各ＲＯＩは、取得された画像データ上に表示されるゾーン線を含むゾーンによって画定されることを特徴とするＡ～Ｌに記載の方法。
Ｎ．取得された画像データが３つのＲＯＩを含み、方法が、
ａ）３つのＲＯＩのうちの別の１つの第２のゾーンに対して、３つのＲＯＩのうちの１つの第１のゾーンにおいて、人の決定された視覚的に知覚不能な美容的皮膚属性の皮膚属性インデックスをスコアリングするステップと、
ｂ）皮膚属性インデックスをディスプレイに出力して、人の視覚的に知覚不能な美容的皮膚属性のエントロピー統計値を可視化するステップと、を更に含むことを特徴とするパラグラフМに記載の方法。
Ｏ．
ａ）定義された集団の視覚的に知覚不能な美容的皮膚属性に対して、人の決定された視覚的に知覚不能な美容的皮膚属性の皮膚属性インデックスをスコアリングするステップと、
ｂ）皮膚属性インデックスをディスプレイに出力して、人の視覚的に知覚不能な美容的皮膚属性のエントロピー統計値を可視化するステップと、を更に含むことを特徴とするパラグラフＡ～Ｎのいずれか１つに記載の方法。
Ｐ．人の平均年齢及び定義された人の集団が、１８～４０歳、好ましくは２０～４０歳、より好ましくは２５～３５歳、更により好ましくは２８～３２歳であることを特徴とするパラグラフＯに記載の方法。
Ｑ．少なくとも１つの製品推奨項目を表示することを更に含むことを特徴とするパラグラフＡ～Ｐのいずれか１つに記載の方法。
Ｒ．人の視覚的に知覚不能な美容的皮膚属性を決定するための機器であって、
人のデジタル画像を記憶するように構成された非一時的コンピュータ可読記憶媒体であって、デジタル画像が、カラーチャネル、及びコンピュータ実行可能命令を含む、非一時的コンピュータ可読記憶媒体と、
記憶媒体に連結されたプロセッサであって、プロセッサが、コンピュータ実行可能命令に基づいて、
ａ）デジタル画像を取得し、
ｂ）取得されたデジタル画像から少なくとも１つのカラーチャネルを抽出して、カラーチャネル画像が美容的皮膚属性を含むカラーチャネル画像を提供し、
ｃ）カラーチャネル画像をフィルタリングし、
ｄ）エントロピー統計値を使用してフィルタリングされたカラーチャネル画像を解析して、視覚的に知覚不能な美容的皮膚属性を決定するように構成されている、プロセッサと、を含むことを特徴とする機器。
Ｓ．プロセッサが、コンピュータ実行可能命令に基づいて、
所定のエントロピー値に対するフィルタリングされたカラーチャネル画像のエントロピー値に基づいて、視覚的に知覚不能な美容的皮膚属性の皮膚属性インデックスをスコアリングすることであって、所定のエントロピー値が人々の集団と関連付けられている、スコアリングすることと、
皮膚属性インデックスを出力することを行うように構成されていることを特徴とするパラグラフＲに記載の機器。
Ｔ．視覚的に知覚不能な美容的皮膚属性を決定するためのシステムであって、システムが、パラグラフＲ又はＳによる機器と、皮膚属性インデックスを含む人の顔画像を表示するためのディスプレイと、を含み、好ましくは、皮膚属性インデックスは、数字、図形記号、スケール、又はこれらの組み合わせのうちの１つとして表示されることを特徴とするシステム。
Ｕ．人の美容的皮膚属性を決定する方法であって、
ａ）ユーザ入力を受信するステップであって、ユーザ入力が美容的皮膚属性を含む、受信するステップと、
ｂ）人のデジタル画像を取得するステップであって、デジタル画像がカラーチャネルを含む、取得するステップと、
ｃ）取得されたデジタル画像から少なくとも１つのカラーチャネルを抽出して、抽出されたカラーチャネル画像を提供するステップと、
ｄ）抽出されたカラーチャネル画像をフィルタリングするステップと、
ｅ）エントロピー統計値を使用してフィルタリングされたカラーチャネル画像を解析して、人の美容的皮膚属性を決定するステップと、を含むことを特徴とする方法。
Ｖ．人の美容的皮膚属性を決定する方法であって、
ａ）顔認識を使用して、人の顔の少なくとも一部分を検出するステップと、
ｂ）人のデジタル画像を取得するステップであって、デジタル画像がカラーチャネルを含む、取得するステップと、
ｃ）取得されたデジタル画像から少なくとも１つのカラーチャネルを抽出して、抽出されたカラーチャネル画像を提供するステップと、
ｄ）抽出されたカラーチャネル画像をフィルタリングするステップと、
ｅ）エントロピー統計値を使用してフィルタリングされたカラーチャネル画像を解析して、人の美容的皮膚属性を決定するステップと、を含むことを特徴とする方法。
Ｗ．デジタル画像内の対象の顔の少なくとも一部分の少なくとも１つの美容的皮膚属性のエントロピー値を可視化する方法であって、
ａ）対象の顔の少なくとも一部分のデジタル画像データを受信することであって、デジタル画像データが複数のタイルを含み、複数のタイルの各々が、エントロピー統計値を使用して解析された少なくとも１つの美容的皮膚属性を有する、受信することと、
ｂ）解析された少なくとも１つの美容的皮膚属性に基づいて、複数のタイルの各タイルに対してインディシアムの単一の度合いを一意に割り当てることと、
ｃ）各々が一意に割り当てられたインディシアムの単一の度合いを有する複数のタイルの少なくとも一部を表示して、少なくとも１つの美容的皮膚属性のエントロピー値を可視化することと、を含むことを特徴とする方法。
Ｘ．少なくとも１つの視覚的に知覚不能な美容的皮膚属性を決定するためのグラフィカルユーザインターフェースであって、グラフィカルユーザインターフェースが、タッチスクリーンディスプレイ／入力装置を有するディスプレイと、画像取得装置とを含む携帯電子機器上にあり、グラフィカルユーザインターフェースが、
美容的皮膚属性を記述するコンテンツデータを表示するディスプレイの第１の領域と、 第１の領域とは異なるディスプレイの第２の領域であって、第２の領域が、ユーザ入力を受信するための選択可能なアイコンを表示し、パラグラフＡ～Ｗのうちのいずれか１つによる方法が、ユーザが選択可能なアイコンをアクティブ化する場合に、機器とデジタル通信するプロセッサによって開始される，第２の領域と、を含むことを特徴とするグラフィカルユーザインターフェース。
相互参照される又は関連する任意の特許又は特許出願、及び本願が優先権又はその利益を主張する任意の特許出願又は特許を含む、本明細書に引用される全ての文書は、除外又は限定することを明言しない限りにおいて、参照によりその全体が本明細書に組み込まれる。いかなる文献の引用も、本明細書中で開示又は特許請求される任意の発明に対する先行技術であるとはみなされず、あるいはそれを単独で又は他の任意の参考文献（単数又は複数）と組み合わせたときに、そのようないかなる発明も教示、示唆又は開示するとはみなされない。更に、本文書における用語の任意の意味又は定義が、参照により組み込まれた文書内の同じ用語の任意の意味又は定義と矛盾する場合、本文書においてその用語に与えられた意味又は定義が適用されるものとする。
本発明の特定の実施形態を例示及び説明してきたが、本発明の趣旨及び範囲から逸脱することなく様々な他の変更及び修正を行うことができる点は当業者には明白であろう。したがって、本発明の範囲内にある全てのそのような変更及び修正を添付の特許請求の範囲に網羅することが意図される。

Claims (1)

  1. 人の美容的皮膚属性を決定するためのグラフィカルユーザインターフェースであって、前記グラフィカルユーザインターフェースは、タッチスクリーンディスプレイ／入力装置を有するディスプレイと、前記人の皮膚の少なくとも一部分を含む少なくとも１つのカラーチャネル画像を取得するための画像取得装置と、を含む携帯電子機器上にあり、
    前記グラフィカルユーザインターフェースは、
    前記人の皮膚の前記少なくとも１つの部分の美容的皮膚属性を記述するコンテンツデータを表示する前記ディスプレイの第１の領域と、
    前記第１の領域とは異なる前記ディスプレイの第２の領域であって、前記第２の領域はユーザ入力を受信するための選択可能なアイコンを表示する、前記第２の領域と、
    前記機器をエントロピー解析ユニットにデジタル的に結合するネットワークインターフェースと、を含み、前記エントロピー解析ユニットは、前記エントロピー解析ユニットに記憶されているコンピュータ実行可能命令に基づいて、
    エントロピー統計値を使用して前記少なくとも１つのカラーチャネル画像を解析して、エントロピー値を取得し、
    前記ユーザが前記選択可能なアイコンをアクティブ化する場合に、前記エントロピー値に基づいて、前記人の皮膚の前記少なくとも１つの部分の前記美容的皮膚属性を決定するように、構成されたことを特徴とするグラフィカルユーザインターフェース。
JP2023014549A 2019-04-23 2023-02-02 美容的皮膚属性を決定するための機器及び方法 Active JP7553621B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962837207P 2019-04-23 2019-04-23
US62/837,207 2019-04-23
PCT/US2020/029423 WO2020219613A1 (en) 2019-04-23 2020-04-23 Apparatus and method for determining cosmetic skin attributes
JP2021561968A JP7248820B2 (ja) 2019-04-23 2020-04-23 美容的皮膚属性を決定するための機器及び方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021561968A Division JP7248820B2 (ja) 2019-04-23 2020-04-23 美容的皮膚属性を決定するための機器及び方法

Publications (2)

Publication Number Publication Date
JP2023052849A true JP2023052849A (ja) 2023-04-12
JP7553621B2 JP7553621B2 (ja) 2024-09-18

Family

ID=70614683

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021561968A Active JP7248820B2 (ja) 2019-04-23 2020-04-23 美容的皮膚属性を決定するための機器及び方法
JP2023014549A Active JP7553621B2 (ja) 2019-04-23 2023-02-02 美容的皮膚属性を決定するための機器及び方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021561968A Active JP7248820B2 (ja) 2019-04-23 2020-04-23 美容的皮膚属性を決定するための機器及び方法

Country Status (6)

Country Link
US (2) US11348366B2 (ja)
EP (1) EP3959651A1 (ja)
JP (2) JP7248820B2 (ja)
KR (1) KR102653079B1 (ja)
CN (1) CN113711277A (ja)
WO (1) WO2020219613A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD944402S1 (en) * 2019-04-23 2022-02-22 The Procter & Gamble Company Skin age identifier
WO2020219612A1 (en) 2019-04-23 2020-10-29 The Procter & Gamble Company Apparatus and method for visualizing cosmetic skin attributes
JP7248820B2 (ja) 2019-04-23 2023-03-29 ザ プロクター アンド ギャンブル カンパニー 美容的皮膚属性を決定するための機器及び方法
USD968441S1 (en) 2020-04-30 2022-11-01 The Procter & Gamble Company Display screen with graphical user interface
USD962256S1 (en) 2020-05-14 2022-08-30 The Procter & Gamble Company Display screen with graphical user interface
USD963178S1 (en) * 2021-03-18 2022-09-06 Shenzhen Moreme Smart Tech Co., Ltd Full face skin detector
US20240298960A1 (en) * 2021-04-30 2024-09-12 L'oreal Predicting aging treatment outcomes based on a skin ageotype
KR102436130B1 (ko) * 2022-04-25 2022-08-26 주식회사 룰루랩 피부 분석 영상에 대한 적합도를 판단하는 방법 및 장치
US11638553B1 (en) * 2022-04-29 2023-05-02 Lululab Inc. Skin condition analyzing and skin disease diagnosis device
FR3135556A1 (fr) * 2022-05-10 2023-11-17 L'oreal Détection et visualisation de signes cutanés au moyen d’une carte thermique

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5917929A (en) 1996-07-23 1999-06-29 R2 Technology, Inc. User interface for computer aided diagnosis system
AU5233099A (en) 1998-07-24 2000-02-14 Jarg Corporation Search system and method based on multiple ontologies
WO2000005663A2 (en) * 1998-07-24 2000-02-03 Jarg Corporation Distributed computer database system and method for performing object search
KR100408829B1 (ko) 1998-12-29 2004-01-24 주식회사 대우일렉트로닉스 모델 기반 부호화 시스템에서의 얼굴 영상 세그멘테이션 방법
US6571003B1 (en) 1999-06-14 2003-05-27 The Procter & Gamble Company Skin imaging and analysis systems and methods
JP2003024306A (ja) 2001-07-13 2003-01-28 Shiseido Co Ltd 皮膚のはり評価システム
US7039222B2 (en) * 2003-02-28 2006-05-02 Eastman Kodak Company Method and system for enhancing portrait images that are processed in a batch mode
EP1938274A2 (en) * 2005-09-12 2008-07-02 D.V.P. Technologies Ltd. Medical image processing
US7558416B2 (en) * 2006-10-02 2009-07-07 Johnson & Johnson Consumer Companies, Inc. Apparatus and method for measuring photodamage to skin
US20090245603A1 (en) * 2007-01-05 2009-10-01 Djuro Koruga System and method for analysis of light-matter interaction based on spectral convolution
US20100185064A1 (en) * 2007-01-05 2010-07-22 Jadran Bandic Skin analysis methods
EP2042095A1 (en) 2007-09-26 2009-04-01 Astron Clinica Limited Methods and apparatus for quantifying photo-damage
JP2009082338A (ja) 2007-09-28 2009-04-23 Masahiro Nakagawa エントロピーを用いた肌の鑑別方法
CA2711519A1 (en) 2008-01-07 2009-07-16 Myskin, Inc. System and method for analysis of light-matter interaction based on spectral convolution
JP5290585B2 (ja) 2008-01-17 2013-09-18 株式会社 資生堂 肌色評価方法、肌色評価装置、肌色評価プログラム、及び該プログラムが記録された記録媒体
US8837832B2 (en) * 2010-05-18 2014-09-16 Skin Of Mine Dot Com, Llc Systems and methods for monitoring the condition of the skin
JP4831259B1 (ja) 2011-03-10 2011-12-07 オムロン株式会社 画像処理装置、画像処理方法、および制御プログラム
FR2975804B1 (fr) * 2011-05-27 2022-06-17 Lvmh Rech Procede de caracterisation du teint de la peau ou des phaneres
JP2013212177A (ja) 2012-03-30 2013-10-17 Shiseido Co Ltd 画像解析方法、画像解析装置、及び画像解析プログラム
EP2781191A1 (en) 2013-03-19 2014-09-24 Schnidar, Harald Methods for assessing erythema
US20140378810A1 (en) * 2013-04-18 2014-12-25 Digimarc Corporation Physiologic data acquisition and analysis
JP6131732B2 (ja) 2013-06-18 2017-05-24 沖電気工業株式会社 人物属性提示装置及び人物属性提示方法
WO2014208067A1 (ja) 2013-06-28 2014-12-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 肌の官能評価装置および肌の評価方法
CA2921704A1 (en) 2013-09-25 2015-04-02 The Procter & Gamble Company Method and system for skin care consultation
US20150099947A1 (en) * 2013-10-04 2015-04-09 Access Business Group International Llc Skin youthfulness index, methods and applications thereof
CN104156947B (zh) 2014-07-23 2018-03-16 小米科技有限责任公司 图像分割方法、装置及设备
KR101701210B1 (ko) 2014-10-02 2017-02-01 주식회사 엘지유플러스 피부 분석 결과 출력 방법, 이를 위한 장치 및 어플리케이션
CN104299011A (zh) 2014-10-13 2015-01-21 吴亮 一种基于人脸图像识别的肤质与皮肤问题识别检测方法
CA2958003C (en) 2016-02-19 2022-04-05 Paul Stanley Addison System and methods for video-based monitoring of vital signs
CN108701323B (zh) 2016-03-21 2023-11-10 宝洁公司 用于提供定制的产品推荐的系统和方法
CN115568818A (zh) 2016-04-22 2023-01-06 菲特斯津公司 使用电子设备进行皮肤分析的系统和方法
US10531825B2 (en) 2016-10-14 2020-01-14 Stoecker & Associates, LLC Thresholding methods for lesion segmentation in dermoscopy images
EP3631679B1 (en) 2017-05-31 2023-09-13 The Procter & Gamble Company Systems and methods for determining apparent skin age
US10719729B2 (en) * 2018-06-06 2020-07-21 Perfect Corp. Systems and methods for generating skin tone profiles
CN114502061B (zh) * 2018-12-04 2024-05-28 巴黎欧莱雅 使用深度学习的基于图像的自动皮肤诊断
WO2020219612A1 (en) * 2019-04-23 2020-10-29 The Procter & Gamble Company Apparatus and method for visualizing cosmetic skin attributes
JP7248820B2 (ja) 2019-04-23 2023-03-29 ザ プロクター アンド ギャンブル カンパニー 美容的皮膚属性を決定するための機器及び方法

Also Published As

Publication number Publication date
EP3959651A1 (en) 2022-03-02
US20200342213A1 (en) 2020-10-29
JP7248820B2 (ja) 2023-03-29
US20220254189A1 (en) 2022-08-11
KR20210135580A (ko) 2021-11-15
KR102653079B1 (ko) 2024-04-01
JP7553621B2 (ja) 2024-09-18
CN113711277A (zh) 2021-11-26
WO2020219613A1 (en) 2020-10-29
JP2022529676A (ja) 2022-06-23
US11605243B2 (en) 2023-03-14
US11348366B2 (en) 2022-05-31

Similar Documents

Publication Publication Date Title
JP7248820B2 (ja) 美容的皮膚属性を決定するための機器及び方法
JP7235895B2 (ja) 美容的皮膚特性を視覚化するための装置及び方法
CA2751549C (en) Method and apparatus for simulation of facial skin aging and de-aging
US9445087B2 (en) Systems, devices, and methods for providing products and consultations
US20120044335A1 (en) Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program
CN108024719B (zh) 肌肤的光泽评价装置、光泽评价方法及记录介质
JP7108127B2 (ja) 毛穴の色を特定する方法
US20080304736A1 (en) Method of estimating a visual evaluation value of skin beauty
JP5426475B2 (ja) 肌の色ムラ解析装置、肌の色ムラ解析方法、及び肌の色ムラ解析プログラム
JP2007252891A (ja) 肌の美しさの目視評価値の推定方法
CN117440849A (zh) 护肤设备
US20240265433A1 (en) Interactive system and method for recommending one or more lifestyle products
JP5399874B2 (ja) 画像処理装置および画像処理方法
CN117480570A (zh) 护肤设备
CN117425516A (zh) 护肤设备
JP6730051B2 (ja) 肌状態評価方法
FR3135556A1 (fr) Détection et visualisation de signes cutanés au moyen d’une carte thermique
KR20230052341A (ko) 민감성 피부를 위한 맞춤형 화장품 제조 시스템 및 그 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240402

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240510

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240806

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240905

R150 Certificate of patent or registration of utility model

Ref document number: 7553621

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150