JP2023040229A - 美容的皮膚特性を視覚化するための装置及び方法 - Google Patents

美容的皮膚特性を視覚化するための装置及び方法 Download PDF

Info

Publication number
JP2023040229A
JP2023040229A JP2023003110A JP2023003110A JP2023040229A JP 2023040229 A JP2023040229 A JP 2023040229A JP 2023003110 A JP2023003110 A JP 2023003110A JP 2023003110 A JP2023003110 A JP 2023003110A JP 2023040229 A JP2023040229 A JP 2023040229A
Authority
JP
Japan
Prior art keywords
skin
cosmetic skin
cosmetic
tiles
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023003110A
Other languages
English (en)
Inventor
ムディヤンセラゲ マハトマ バンダラ ディサーナーヤカ ディサーナーヤカ
Mudiyanselage Dissanayake Dissanayake
直喜 宮本
Naoki Miyamoto
シュシャン リム リンダ
Shushan Lim Linda
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Procter and Gamble Co
Original Assignee
Procter and Gamble Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Procter and Gamble Co filed Critical Procter and Gamble Co
Publication of JP2023040229A publication Critical patent/JP2023040229A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Pathology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Quality & Reliability (AREA)
  • Dermatology (AREA)
  • Human Computer Interaction (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Image Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Image Analysis (AREA)

Abstract

【課題】消費者が自分の美容的皮膚特性を理解することを可能にする。【解決手段】ａ）顔部の一部の第１のデジタル画像を取得し、入力画像の１つの領域が選択される工程２０２と、ｂ）取得された第１のデジタル画像にわたって複数のタイルを定義する工程２０４と、ｃ）美容的皮膚特性について、定義された複数のタイルのそれぞれについて第１のデジタル画像を解析する工程２０６と、ｄ）タイルの分析された美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程２０８と、ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの幾つかを表示して、美容的皮膚特性を視覚化させる工程２１０と、を含む。表示された複数のタイルの幾つかは、タイルの分析された美容的皮膚特性に基づいて、非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。【選択図】図５

Description

本発明は、美容的皮膚特性を視覚化するためのシステム及び方法に関する。
消費者は、化粧品及びスキンケア処置を使用することによって、彼らの物理的外観を改善することを求めている。結果として、消費者が選択するために利用可能な製品の非常に広範な選択がある。多くの場合、個々の消費者は、個々の個人の皮膚の種類及び皮膚特性、並びに潜在的に異なる又は変化する皮膚特性を考慮した場合に、どの製品を適用してどのように最良の結果を達成するかを決定することが困難であることを見出している。個人の皮膚が経時的に変化する、及び／又は経時的に美容傾向が変化するために、この問題の度合が増す。小売化粧品カウンタにおける美容相談員は、多くの場合、処置を必要とするクライアントの皮膚特性を特定することを担う。皮膚特性（単数又は複数）が特定されると、相談員は説明のために、クライアントに皮膚特性（単数又は複数）の種類、量、及び場所を伝達する。最後に、特定された皮膚特性の外観を改善し、消費者に対する改善を実証することを目的とした、スキンケア製品及び塗布技術を推奨する。本アプローチの多くは、相談員の主観的判断及び／又は視力に依存する。
デジタル知識豊富な消費者の人口成長人口、特により若い人口統計学の人口では、データ処理機器を利用して互いに相互作用して、従来の美容相談員との相談を求める代わりに、皮膚及び美容ケア製品のオンライン購入決定を行う傾向がある。これらの消費者のうちの幾人かは、デジタルツールで達成することができ、このような、デジタルソースからの推奨が本消費者セグメントに対してより高い信頼性を有するという客観的事実のレベルが高い、と信じている。コンピュータモデリング／アルゴリズムを使用して自分自身のデジタル画像（例えば、「セルフィ（selfie）」）を解析することによって、このような消費者が個人の皮膚分析を行うことを可能にするために、多くの試みがなされてきた。次に、コンピュータモデルによって提供された結果を使用して、場所及び視覚的に知覚可能な皮膚特性の種類（例えば、目に見える斑、目に見える線、及びシワ）並びに後続の製品推奨／取り扱い説明を消費者に提供することができる。
これらの視覚的に知覚可能な皮膚特性を消費者に示す／マーキングする１つの方法は、その顔部及び皮膚特性（単数又は複数）を可視化するために「ヒートマップ」を介している。しかしながら、典型的には消費者が理解するための多くの情報が存在する。これは、消費者が視覚的に知覚可能な特性を基準点又はスキンケア処置の標的として使用することができるため、視覚的に知覚可能な皮膚特性との問題として課題となるものではない場合がある。しかしながら、皮膚特性が視覚的に知覚不可能である場合には、問題はかなり悪化する。これは、視覚的に知覚可能な特性を有さない、又は最小限の量の視覚的に知覚可能な特性を有し得る、消費者のより若い人口統計に特に当てはまる。したがって、特に、１つを超えるこのような視覚的に知覚不可能な特性が存在する場合には、典型的には多くの知覚可能な皮膚特性を欠いているより若い消費者の人口統計においてはなおさら、視覚的に知覚不可能な特性及び顔部上の場所を迅速かつ容易に特定する必要がある。
幾つかの視覚的に知覚不可能な皮膚特性が、視覚的に知覚可能なものになることを示唆する、まとまった数の研究の増加が存在する。本目的のために、消費者が、これらの視覚的に知覚不可能な皮膚特性を人生の早期に特定し、これらの特性に対する予防的な皮膚処置を行う場合、後の形成から、視覚的に知覚可能な望ましくない皮膚特性の発生を遅延させる及び／若しくは軽減する、並びに／又は発症を遅延させる可能性が増大する。
上記の皮膚特性に関する情報を提供するよう、デジタル年齢における消費者のニーズを満たすために種々の皮膚評価デジタルツールが開発されてきたが、消費者は全て、大量の情報による過負荷にさらされてきており、特に美容的皮膚特性状態、例えば、「既存の皮膚状態、及びそれを改善するために何ができるのか」ということの関係において、多くの消費者にとって困難な情報を短時間で理解するプロセスが生じる。しかしながら、消費者は、携帯電話などの携帯機器上の評価情報を見る傾向がある、又は評価情報を理解するための時間が限られている傾向がある。結果として、膨大な量の情報が表示されて「情報過負荷」をもたらす場合、消費者はすぐさま圧倒され得る。情報過負荷は、情報過多により、消費者が情報をもはや理解しないか、又は自分の皮膚の状態を改善するために何を行う必要があるのかをもはや評価できる立場にない、という状況をもたらし得る。このような状況では、消費者は、消費者にとって情報過負荷を発生させるデジタルツールの使用を停止する場合がある。
したがって、１つ以上の皮膚特性を特定する方法を消費者に提供し、消費者が自分の美容的皮膚特性を理解することを可能にするために、単純な方法で消費者の顔部上におけるこれらの特性の場所を表示し、かつ美容的皮膚特性の状態を改善するための目標及び有効な処置を得ることを可能にする、方法及びシステムが必要とされている。
本発明は、被験者の少なくとも１つの美容的皮膚特性を可視化する方法に関し、本方法は、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像を取得する工程であって、第１のデジタル画像は、顔部の入力画像の少なくとも１つの領域から選択される工程と、
ｂ）取得された第１のデジタル画像にわたって複数のタイルを定義する工程と、
ｃ）少なくとも１つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第１のデジタル画像を解析する工程と、
ｄ）タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも１つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
前述の一般的な説明及び以下の詳細な説明は両方とも、種々の実施形態を説明し、特許請求される発明の主題の本質及び特徴を理解するための概観又は骨組みを提供することが意図されることを理解されたい。添付の図面は、種々の実施形態の更なる理解を提供するために含められたものであり、本明細書の一部に組み込まれると共に本明細書の一部をなすものである。図面は、本明細書に記載される種々の実施形態を例示し、説明と共に、特許請求される発明の主題の原理及び動作を説明する役割を果たす。
本発明によるネットワーク上の少なくとも１つの美容的皮膚特性を可視化するための例示的なシステムを示す図である。 本発明による美容的皮膚特性を可視化するための代替的で例示的なシステムを示す図である。 本発明による美容的皮膚特性を可視化するための例示的なシステムの構成要素を示すブロック図である。 本発明による美容的皮膚特性を可視化する方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚特性を可視化する方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚特性を可視化する方法を示す一連のプロセスフロー図である。 本発明による美容的皮膚特性を可視化する方法を示すフローチャートである。 本発明による美容的皮膚特性を可視化する方法における第１のデジタル画像を取得する工程の詳細を示す、一連のプロセスフロー図である。 本発明による美容的皮膚特性を可視化する方法における第１のデジタル画像を取得する工程の詳細を示す、一連のプロセスフロー図である。 本発明による美容的皮膚特性を可視化する方法における第１のデジタル画像を取得する工程の詳細を示す、一連のプロセスフロー図である。 第１のデジタル画像を取得する工程を示すフローチャートである。 本発明による美容的皮膚特性を可視化する方法における複数のタイルを画定する工程を示す写真である。 複数のタイルを画定する工程を示すフローチャートである。 本発明による、定義された複数のタイルのそれぞれについて画像データを解析するプロセス５００を示すフローチャートである。 本発明による複数のタイルの表示プロセスを示すプロセスフロー図である。 本発明による複数のタイルの表示プロセスを示すプロセスフロー図である。 本発明による複数のタイルの表示プロセスを示すプロセスフロー図である。 本発明による複数のタイルを表示するプロセスを示すフローチャートである。 本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すプロセスフロー図である。 本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すフローチャートである。 本発明による少なくとも１つの美容的皮膚特性を可視化する代替的な方法を示すフローチャートである。 それぞれ、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを示すスクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを示すスクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを示すスクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを示すスクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを示すスクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための方法を繰り返すための追加の入力要求を提供するための例示的なユーザーインターフェースを示す、スクリーンショットである。 それぞれ、本発明による美容的皮膚特性を視覚化するための方法を繰り返すための追加の入力要求を提供するための例示的なユーザーインターフェースを示す、スクリーンショットである。 それぞれ、本発明による美容的皮膚特性を処置するための製品推奨の詳細を表示するための例示的なユーザーインターフェースを示す、スクリーンショットである。 それぞれ、本発明による美容的皮膚特性を処置するための製品推奨の詳細を表示するための例示的なユーザーインターフェースを示す、スクリーンショットである。 本発明による美容的皮膚特性を表示するための、図１６Ｄの例示的なユーザーインターフェースのスクリーンショットの変形形態である。 本発明による美容的皮膚特性を処置するための製品推奨の詳細を表示するための例示的なユーザーインターフェースを示す、スクリーンショットである。 本発明による美容的皮膚特性を可視化するための例示的なユーザーインターフェースである。 本発明による美容的皮膚特性を可視化するための例示的なユーザーインターフェースである。 本発明による少なくとも１つの美容的皮膚特性を可視化するための画像記述の一例としてのヒートマップを含む例示的なユーザーインターフェースを示す、スクリーンショットである。 図２３のユーザーインターフェース内の少なくとも１つの美容的皮膚特性を可視化するための画像記述の代替的な変形形態を示す、スクリーンショットである。 本発明による少なくとも１つの美容的皮膚特性を可視化するための例示的なユーザーインターフェースを示すスクリーンショットである。
皮膚が（ＵＶ、経時的老化、精神的ストレス、環境因子によって引き起こされる）ストレスにさらされた場合、皮膚は、ＤＮＡレベル、細胞レベル、及び組織レベルを含む種々のレベルで損傷し得ることが知られている。皮膚へのこのような損傷は、皮膚の欠陥をもたらす可能性がある。これらの皮膚の欠陥の存在は、以下の実施例に記載されるように、皮膚の視覚性に有意に影響を与える。
・角質層が乾燥している場合（冬／空気状態）、光が表面からより多く反射（表面反射）して、皮膚上の線を引き起こす皮膚の微細組織を促進させ得る。
・真皮が（ＵＶで）損傷した場合、真皮では光の散乱（真皮散乱としても知られる）がより少なく、光は、皮膚を透過し得る（表面下反射がより少ない）。真皮散乱が少ない場合、結果として皮膚は、より暗く見える。
・皮膚が慢性的なＵＶにさらされると、皮膚は、より多くのメラニンを生成する。メラニンは、光を吸収して表面下反射を減少させ、したがって皮膚はより暗く見える。
上記の皮膚の欠陥は、消費者の目にとって皮膚質が悪いという視覚的に知覚不可能な徴候として現れる。消費者は、意識下レベルの不純物としてこれらの欠陥を考慮し得るが、意識的な知識の欠如のために、欠陥を改善するための措置を講じることができない。皮膚が慢性的なストレス及び／又は未処理にさらされる場合、これらの視覚的に知覚不可能な不純物は、最終的に可視及び知覚可能な表現型（色素斑、シワ、たるみ）につながる場合がある。
本発明は、被験者の少なくとも１つの美容的皮膚特性を視覚化するための方法、装置、及びシステム、並びにグラフィカル・ユーザー・インターフェースに関する。美容的皮膚特性は、視覚的に知覚可能な美容的皮膚特性、又は視覚的に知覚不可能な美容的皮膚特性を含んでもよい。
本方法は、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像を取得する工程であって、第１のデジタル画像は、顔部の入力画像の少なくとも１つの領域から選択される工程と、
ｂ）取得された第１のデジタル画像にわたって複数のタイルを定義する工程と、
ｃ）少なくとも１つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第１のデジタル画像を解析する工程と、
ｄ）タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも１つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
驚くべきことに、複数のタイルの非表示タイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性状態を表示するタイルの幾つかのみを表示することにより、消費者は、美容的皮膚特性の状態を容易に理解することができ、したがって、美容的皮膚特性の状態を改善するための処置を求めるための十分な情報を得た上での決定を行うことができる、ということが見出された。
特に、非表示タイルを有する技術的効果は、単一のディスプレイ上、特に、例えば携帯電話などの小型のフォームファクタの電子携帯機器上に表示される「情報散乱」及び「情報過負荷」を最小化する。更なる技術的効果は、短時間でディスプレイを生成するために必要なデータ処理リソースを低減することができ、これにより、本発明を使用した場合に（例えば、携帯電話上のネイティブアプリケーションとして、又は携帯電話を通じてアクセスされるウェブアプリケーションを通じて）より良好なユーザ体験をもたらすことである。
本発明を詳細に説明する前に、以下の用語が定義され、定義されない用語は、当業者によって理解されるような通常の意味を与えられるべきである。
本明細書で使用する場合、「エントロピー」とは、離散ランダム分布（ｐ（ｘ））のシャノンエントロピー（Shannon entropy）（Ｅ）を意味し、以下の式によって定義される。
Figure 2023040229000002
 式中、ｐ（ｘ）は、グレーレベルの分布である。
Ｅ（ｐ）は、デジタル画像の色チャネル画像への変換後の色システム内のデジタル画像又は色チャネル画像における、情報の量を表す。
本明細書で使用する場合、「エントロピー統計」とは、デジタル画像又は色チャネル画像を解析するための記述統計としてエントロピーを使用する統計的方法を意味する。デジタル画像がＲＧＢ画像である非限定的な例では、Ｒ（赤）、Ｇ（緑色）、及びＢ（青）チャネルのそれぞれについてのエントロピーを別々に計算することができる。画像のエントロピー値は、各画素位置（ｉ，ｊ）において、（ｉ，ｊ）を中心とする二次元領域内の画素値のエントロピー値を計算することによって計算することができる。二次元領域は、色チャネル画像の一部であってもよい。Ｐｙｔｈｏｎなどのプログラミングソフトウェアパッケージを使用して、エントロピー値を計算することができる。
本明細書で使用する場合、「美容的皮膚特性」は、人体の領域に視覚的／審美的効果を提供する、又は皮膚の外観及び／若しくは感触に影響を与える全ての皮膚特性を含む。美容的皮膚特性の幾つかの非限定的な例としては、皮膚トポグラフィ、皮膚弾性、皮膚色調、皮膚色素沈着、皮膚のきめ、皮膚の毛穴、美容的皮膚炎症、皮膚の水和、皮膚皮脂レベル、座瘡、色素性母斑、皮膚のつや、皮膚光沢、皮膚のくすみ、不均一色調、又は皮膚バリアを挙げることができる。上記美容的皮膚特性が標準用語であり、美容的皮膚特性の対応する定義が、以下の公開された参照文献、すなわち「Ｈａｎｄｂｏｏｋ ｏｆ ｃｏｓｍｅｔｉｃ ｓｃｉｅｎｃｅ ａｎｄ ｔｅｃｈｎｏｌｏｇｙ，３rd ｅｄｉｔｉｏｎ，ｅｄｉｔｏｒｓ Ａｎｄｒｅ Ｏ．Ｂａｒｅｌ，Ｍａｒｃ Ｐａｙｅ，Ｈｏｗａｒｄ Ｉ．Ｍａｉｂａｃｋ，ＣＲＣ Ｐｒｅｓｓ，２００９」、「Ｃｏｓｍｅｔｉｃ Ｓｃｉｅｎｃｅ ａｎｄ Ｔｅｃｈｎｏｌｏｇｙ－Ｔｈｅｏｒｅｔｉｃａｌ Ｐｒｉｎｃｉｐｌｅｓ ａｎｄ Ａｐｐｌｉｃａｔｉｏｎｓ，ｅｄｉｔｏｒｓ Ｋａｚｕｔａｍｉ Ｓａｋａｍｏｔｏ Ｒｏｂｅｒｔ Ｙ．Ｌｏｃｈｈｅａｄ，Ｈｏｗａｒｄ Ｉ．Ｍａｉｂａｃｈ，Ｙｕｊｉ Ｙａｍａｓｈｉｔａ，Ｅｌｓａｖｉｅｒ，２０１７」、「Ｃｏｓｍｅｔｉｃ Ｄｅｒｍａｔｏｌｏｇｙ：Ｐｒｏｄｕｃｔｓ ａｎｄ Ｐｒｏｃｅｄｕｒｅｓ，Ｅｄｉｔｏｒ（ｓ）：Ｚｏｅ Ｄｉａｎａ Ｄｒａｅｌｏｓ，Ｂｌａｃｋｗｅｌｌ Ｐｕｂｌｉｓｈｉｎｇ Ｌｔｄ，２０１０」に見出され得ることが、当業者には理解されよう。美容的皮膚特性は、医学的状態又は根本的な病状に関連する皮膚特性を含まない。
本明細書で使用する場合、「知覚可能な美容的皮膚特性」とは、知覚者、即ち、人、ユーザ、又は被験者によって知覚されることができない、又は知覚不可能な美容的皮膚特性を意味する。認知は、提示された情報又は環境を表す及び理解するために、感覚情報の編成、特定、及び解釈を意味する「知覚」という語に由来する。全ての知覚は、神経系を通過する信号を含むが、これは次に、感覚システムの物理的又は化学的刺激から結果として生じる。例えば、視力は、眼の網膜を叩く光を伴い、匂いは臭気分子によって媒介され、聴覚は圧力波を伴う。知覚は、これらの信号の受動的受信だけでなく、受信者の学習、記憶、期待、及び注意によっても形作られる。知覚は、２つのプロセス、すなわち、これらの低レベル情報を（例えば、対象物認識のための形状を抽出する）より高レベルの情報に変換する、感覚入力を処理することに関するプロセス（１）と、知覚に影響を与える人の概念及び期待（又は知識）、修復機構及び選択的機構（注意など）と関係している処理に関連するプロセス（２）と、に分割できる。例えば、知覚者は、プロセス（１）の対象物を見ることができるが、プロセス（２）において対象物が何を表現／意味しているかを知覚して認識する知識を有していないため、対象物が視覚的に知覚不可能であることが考察される場合がある。
本明細書で使用する場合、「視覚的に知覚不可能な美容的皮膚特性」は、肉眼で検出可能ではない、又は消費者によって視覚的に検出可能な美容的皮膚特性ではあるが、消費者が美容的皮膚特性を理解しないために知覚不可能な美容的皮膚特性とみなされる、全ての美容的皮膚特性を含む。肉眼で視覚的に検出できない視覚的に知覚不可能な美容的皮膚特性の幾つかの非限定的例としては、美容的皮膚炎症、皮膚皮脂レベル、又はいずれかの根元的な美容的皮膚特性が挙げられる。
本明細書で使用する場合、「助力を受けない（Unaided）」とは、診断装置からの支援なしであることを意味する。
本明細書で使用する場合、「タイル」とは、デジタル画像の一部を形成する、例えば画素などの単位を含み、したがって、「タイル」は、デジタル画像の全体を形成する。
本明細書で使用する場合、「デジタル画像データ」は、デジタルカメラ、写真スキャナ、デジタル画像を記憶することが可能なコンピュータ可読記憶媒体、及び撮影能力を含む任意の電子機器を含むがこれらに限定されない画像取得機器から取得される画像データを含む。デジタル画像データはまた、ＲＧＢ画像からカラーシステム内の色チャネル画像に変換される色チャネル画像を含んでもよい。
本明細書で使用する場合、「単一度の印」は、グラフィック記号、数値、色コード、照明技術、及びこれらの組み合わせを含むが、これらに限定されない全ての電子的視覚表現を含む。
本明細書で使用する場合、「皮膚特性指数」とは、数学的式、又は統計的方法及びデータから導出されるモデル、又はルックアップテーブル（情報のアレイ）に基づいて計算することができるスコアを意味する。皮膚特性指数は、定義された人々の母集団に対する人の皮膚の少なくとも一部の美容的皮膚特性の状態を示す確率値として生成されてもよく、好ましくは、皮膚特性指数は、Ｆ（エントロピー値）によって定義されるエントロピー値の関数として生成され、関数は、訓練データセット上に確立されたモデルによって決定され、訓練データセットは、（ｉ）定義された人々の母集団の複数の色チャネル画像であって、複数の色チャネル画像のそれぞれが、定義された人々の母集団内の人の顔の皮膚を含み、顔の皮膚が美容的皮膚特性を含む、定義された人々の母集団の複数の色チャネル画像と、（ｉｉ）美容的皮膚特性に基づく関連クラス定義と、を含む。
本明細書で使用する場合、「Ｌ*ａ*ｂ*」は、国際照明委員会（International Commission on Illumination、「ＣＩＥ」）によって規定された一般に認識されている色空間を意味する。３つの座標は、（ｉ）色の明るさ（すなわち、Ｌ*＝０で黒を生じ、Ｌ*＝１００は白の拡散を示す）、（ｉｉ）マゼンタと緑との間の色の位置（すなわち、負のａ*値は緑を示し、正のａ*値はマゼンタを示す）、及び（ｉｉｉ）黄と青との間の色の位置（すなわち、負のｂ*値は青を示し、正のｂ*値は黄を示す）、を表している。
本明細書で使用する場合、「発色団マッピング」とは、メラニンマッピング及びヘモグロビンマッピングのための一般的に認識されている発色団空間を意味し、全体的な皮膚色調の指標として使用され得るメラニン濃度又はヘモグロビン濃度を決定する。発色団マップデータから平均メラニン又は平均ヘモグロビンを計算してもよい。加えて、皮膚色調の均一性はメラニン均一性又はヘモグロビン均一性から測定することができ（例えば、標準偏差）、これらはまた発色団マップデータから計算されてもよい。
本明細書で使用する場合、「皮膚純度」は、人の皮膚の少なくとも一部において皮膚欠陥が不在である外観である。皮膚欠陥としては、皮膚トポグラフィ形態の表面反射、並びに／又はメラニン、ヘモグロビン及び／若しくはケラチノサイトなどの皮膚発色団の表面下反射から構成される不規則な又は不均一なスペクトル特性に影響を与える美容的皮膚特性、並びに線維芽細胞指向細胞代謝産物、並びに皮膚のつや、皮膚色調などが挙げられるが、これらに限定されない。
本明細書で使用する場合、「皮膚年齢」とは、容貎、好ましくは人の顔部、好ましくは人の顔部の少なくとも一部、より好ましくは、人の顔部の少なくとも一部の対象領域（ＲＯＩ）の少なくとも一部、更により好ましくは、眼の周囲の皮膚領域（「眼部領域」）、頬の周囲の皮膚領域（「頬部領域」）、口の周囲の皮膚領域（「口部領域」）、及びこれらの組み合わせからなる群から選択される少なくとも１つのＲＯＩに基づいて、視覚的に推定又は知覚されて標準年齢の皮膚外見と比較される、人の皮膚年齢を指す外見上の年齢を意味する。
本明細書で使用する場合、「皮膚色調」とは、一般に、基礎皮膚色又は色均一性の全体的な外観を意味する。皮膚色調は一般に、皮膚の広い領域にわたり特徴付けられる。その領域は、１００ｍｍ２超であってよいが、顔部の皮膚又は他の身体の皮膚表面（例えば腕部、脚部、背中部、手部、首部）の全体などの、より大きい範囲も想定されている。
本明細書で使用する場合、「皮膚のシワ」とは、一般に、皮膚内の折り目、隆起部又は折れじわを意味し、小じわ、超微細じわ、微細シワ、超微細シワ、シワ、線を含むが、これらに限定されない。皮膚のシワは、例えば、密度及び／又は長さに関して測定されてもよい。
本明細書で使用する場合、「皮膚のつや」とは、一般に、皮膚が反射する光量を意味し、皮膚の光沢と呼ばれる場合がある。
本明細書で使用する場合、「皮膚のきめ」とは、一般に、皮膚表面のトポロジー又は粗さを意味する。
本明細書で使用する場合、「皮膚の張り」とは、一般に、皮膚の堅さ又は弾性を指す。
本明細書で使用する場合、「皮膚皮脂レベル」とは、一般に、皮膚中の皮脂腺によって分泌される油性又は蝋状物質である皮脂の量を意味する。
本明細書で使用する場合、「皮膚の班」とは、一般に、皮膚の変色又は不均一な色素沈着（例えば、色素沈着過剰、斑点性）を意味する。皮膚の斑は、例えば、密度、サイズ、及び／又は変色の程度に関して評価することができる。
本明細書で使用する場合、「スキンケア製品」とは、スキンケア活性物質を含み、皮膚の状態を調節及び／又は改善する製品を意味する。
本明細書で使用する場合、「デジタル画像」とは、標準的なＲＧＢなどを含むがこれらに限定されない画像システム内の画素によって、並びに異なる照明条件及び／又はモードで取得される画像の下に形成された、デジタル画像を意味する。デジタル画像の非限定的な例としては、カラー画像（ＲＧＢ）、モノクロ画像、ビデオ、マルチスペクトル画像、ハイパースペクトル画像などが挙げられる。非限定的な光条件としては、白色光、青色光、ＵＶ光、ＩＲ光、特定波長の光、例えば、１００～１０００ｎｍ、３００～７００ｎｍ、４００～７００ｎｍ、又は上記の上限及び下限の異なる組み合わせ、又は上記に列挙した範囲の任意の整数の組み合わせの光を発する光源などが挙げられる。デジタル画像は、デジタルカメラ、写真スキャナ、デジタル画像を記憶することが可能なコンピュータ可読記憶媒体、及び撮影能力を含む任意の電子機器を含むがこれらに限定されない画像取得機器から得られてもよい。
以下の説明では、記載されるシステムは、美容的皮膚特性を視覚化するためのシステムである。したがって、記載される装置は、美容的皮膚特性を視覚化するための装置であり、記載されるグラフィカル・ユーザー・インターフェースは、美容的皮膚特性を視覚化するためのグラフィカル・ユーザー・インターフェースである。グラフィカル・ユーザー・インターフェースは、少なくとも１つの美容的皮膚特性を処置するための製品推奨を提供するように更に構成されてもよい。
代表的実施形態では、システムは、化粧品及びスキンケア製品を分析及び推奨する目的で小売化粧品カウンタに位置する独立型撮像システム（図２に示す）である。しかしながら、システム及び方法は、例えば、図１に示すように、画像取得ユニット及びディスプレイを備える電子携帯機器を介して、任意の場所で使用するように構成されてもよい、と考えられており、電子携帯機器は、ディスプレイ上に表示を生成するための装置とネットワークを介して美容的皮膚特性を視覚化するためのグラフィカル・ユーザー・インターフェースとに接続されている。
システム
図１は、本発明による美容的皮膚特性を可視化するためのシステム１０を示す概略図である。システム１０は、ワイドエリアネットワーク（携帯電話網、公衆交換電話網、衛星ネットワーク、インターネットなど）、ローカルエリアネットワーク（ワイヤレスフィディリティ、Ｗｉ－Ｍａｘ、ＺｉｇＢｅｅ（商標）、Ｂｌｕｅｔｏｏｔｈ（商標）など）、及び／又は他の形態のネットワーク機能として具体化され得るネットワーク１００を含んでもよい。ネットワーク１００には、携帯電子機器１２、及びディスプレイ上に表示を生成するための装置１４、美容的皮膚特性を視覚化するためのグラフィカル・ユーザー・インターフェースが接続されている。装置１０４は遠隔に配置され、ネットワーク１００を介して携帯電子機器に接続されている。
携帯電子機器１２は、携帯電話、タブレット、ラップトップ、携帯情報端末、並びに／又はデジタル写真のようなデジタル画像を捕捉、記憶、及び／若しくは転送するように構成された他のデータ処理機器であってもよい。したがって、携帯電子機器１２は、ユーザ入力を受信するための入力装置１２ａと、画像を取得するためのデジタルカメラなどの画像取得機器１８と、画像を表示するための出力装置１２ｂと、を含んでもよい。携帯電子機器１２はまた、ネットワーク１００を介して他のデータ処理機器と通信するために構成されてもよい。携帯電子機器１２は、エントロピー統計値を使用して取得された少なくとも１つの色チャネル画像を解析してエントロピー値を取得し、かつエントロピー値に基づいて、人の皮膚の少なくとも一部の美容的皮膚特性を決定するための、画像取得機器１８と一体となった画像処理装置（図示せず）を更に含んでもよい。画像処理装置は、好ましくは、コンピュータ実行可能命令を有するプロセッサを備える。携帯電子機器１２は、決定された美容的皮膚特性を記述するコンテンツデータを表示するディスプレイを生成するためのディスプレイ生成ユニット（電子ＬＥＤ／ＬＣＤディスプレイなど、図示せず）を更に備えてもよい。装置１４は、画像取得論理１４４ａ、画像解析論理１４４ａ及びグラフィカル・ユーザー・インターフェース（以下、「ＧＵＩ」）論理１４４ｃを記憶する、非一時的コンピュータ可読記憶媒体１４ａ（以下、「記憶媒体」）を含んでもよい。記憶媒体１４ａは、ランダムアクセスメモリ（ＳＲＡＭ、ＤＲＡＭなど）、読み出し専用メモリ（ＲＯＭ）、レジスタ、及び／又は他の形態のデータ処理記憶ハードウェアを含んでもよい。画像取得論理１４４ａ、画像解析論理１４４ｂ及びＧＵＩ論理１４４ｃは、コンピュータ実行可能命令を定義する。プロセッサ１４ｂは、記憶媒体１４ａに連結され、プロセッサ１４ｂは、図４Ａ～図４Ｃのプロセスフロー図及び図５のフローチャートに関して後に本明細書に記載される本発明による被検者の美容的皮膚特性を可視化するための方法２００を実施するために、コンピュータ実行可能命令に基づいて構成されている。
方法
図４Ａ及び図５を参照すると、プロセッサ１４ｂが開始された場合に、プロセッサ１４ｂは、例えば工程２０２で画像取得論理１４４ａを介して、取得対象の顔部の少なくとも一部の第１のデジタル画像５１を生成する。プロセッサ１４ｂは、取得された画像データ２０にわたって複数のタイル５４を画定する（工程２０４）。複数のタイル５４は、図４Ｂに示すようにタイルマップ５５を画定するように隣接していてもよい。工程２０６では、プロセッサは、少なくとも１つの美容的皮膚特性について、定義された複数のタイル５４のそれぞれについて、画像データのそれぞれについて画像データを解析する。工程２０８では、分析された少なくとも１つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイル５４に対して一意的に単一度の印４０を割り当てる。それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも一部が、図４Ｃに示されるような少なくとも１つの美容的皮膚特性を可視化するように、工程２１０で表示される。ユーザ（消費者）によって提供される入力デジタル画像の画像データを解析することにより、単一のスクリーンショットにおいて、定義された複数のタイルのそれぞれについて解析された画像データを整理して表示することで、本発明による方法２００は、美容的皮膚特性を視覚化するために必要とされる異なる照明システムの下で、別個のウィンドウ内に情報を表示するユーザーインターフェースをナビゲートするという厄介なタスクを回避しながら、ユーザ／消費者が美容的皮膚特性を容易に特定することを可能にする。例えば、ＵＶ光などの特定の条件は、肉眼で知覚できない紫外線班を可視化するために必要とされる場合がある。
代表的実施形態では、各タイルについて一意的に割り当てられた単一度の印を有する第２のデジタル画像は、第１のデジタル画像５１に挿入されてもよい。タイル５４のサイズは、水平側（タイル幅、Ｗ）上の画素数、及び垂直側（タイル高さ、Ｈ）上の画素数によって定義されてもよいことが理解されるであろう。本発明による代表的な方法では、各タイルは、１００×１００画素以下、１×１画素～１００×１００画素、２×２画素～１００×１００画素、５×５画素～９０×９０画素、４０×４０画素～７０×７０画素、又は上記の上限及び下限の異なる組み合わせ、又は上記の範囲内の任意の整数の組み合わせのタイルサイズを含んでもよい。上記範囲のタイルサイズを有する技術的効果は、画像データの解析のためのより短い処理時間を可能にし、したがって、ディスプレイが、より短い時間で少なくとも１つの美容的皮膚特性を可視化することを可能にすることである。
図１を参照すると、ネットワーク１００は、携帯電子機器１２からデジタル画像を取得し、本発明による方法２００で使用される装置１４にデジタル画像を送信するために使用されてもよい。入力装置１２ａは、プロセッサ１４ｂを開始するためのユーザ入力を受信するために携帯電子機器１２に連結されてもよい、又はそれと一体であってもよい。携帯電子機器１２は、それぞれが一意的に割り当てられた単一度の印を有する、複数のタイルを表示するための出力装置１２ｂを備えてもよい。入力装置１２ａは、マウス、タッチスクリーンディスプレイなどを含むことができるが、これらに限定されない。出力装置１２ｂは、タッチスクリーンディスプレイ、非タッチスクリーンディスプレイ、プリンタ、顔部画像マップ３０をディスプレイ表面、例えば図２に関して以下に説明するミラーなどのディスプレイ表面上に投影するためのプロジェクタを含んでもよいが、これらに限定されない。
図２は、少なくとも１つの美容的皮膚特性を視覚化し、視覚化された少なくとも１つの美容的皮膚特性に基づいて化粧品及びスキンケア製品を推奨する目的で、小売化粧品カウンタに位置する独立型撮像システムとして構成されたシステム１０の斜視図である。図３は、図２のシステム１０のブロック図である。図２及び図３を参照すると、システム１０は、少なくとも１つの美容的皮膚特性を視覚化するための対象のデジタル画像を取得するための画像取得機器１８に接続された、図１の装置１４用のハウジング１１を備える。図２を参照すると、システム１０は、ミラー１６を含んでもよく、画像取得機器１８は、画像取得機器１８が視界から隠され得るように、ハウジング１１内のミラー１６の背後に取り付けられてもよい。画像取得機器１８は、デジタルカメラ、デジタル化回路に接続されたアナログカメラ、スキャナ、ビデオカメラなどであってもよい。システム１０は、ハウジング１１の周囲に配置されたＬＥＤライトなどの照明３０を含んで、被験者のデジタル画像の生成を支援するＬＥＤ照明システムを形成してもよい。システム１０は、ユーザ入力を受信するための入力装置１１２ａを有する。システム１０は、ミラー１６上に表示するために顔部マップ３０を受信して投影するように構成されたプロジェクタなどの出力装置１１２ｂを更に備えてもよい。プロジェクタは、ハウジング１１とは別個であるが、装置１４に連結されてシステム１０を形成する周辺部品であり得るため、図２には示されていない。システム１０は、全体的な消費者体験を補完する及び／又は向上させるために、オーディオガイダンス出力を生成するための増幅器に任意選択的に連結された１つ以上のスピーカなどの、第２の出力装置１１２ｃを更に備えてもよい。
システム１０及び方法２００が、本発明による少なくとも１つの美容的皮膚特性を可視化するように機能する方法を説明するために、工程２０２でどのように被験者の顔部のデジタル画像が取得されるか、工程２０４でどのようにタイルが定義されるか、工程２０６でどのように画像データが解析さるか、工程２０８でどのように単一度の印が各タイルに一意的に割り当てられるか、及び工程２１０でどのようにタイルが表示されるか、を理解することが有益である。したがって、本発明による方法２００の工程２０２、２０４、２０６、２０８、２１０について、各工程を実施するための個々のプロセスについて以下に説明する。各プロセスはまた、サブルーチン、すなわち、本発明による方法２００による対応する工程を実行するプログラム命令のシーケンスとして説明されてもよい。
デジタル画像を取得する
本発明による方法２００によるデジタル画像を取得する工程２０２について、図６Ａ、図６Ｂ及び図６Ｃを参照して説明するが、これは、第１のデジタル画像がどのように取得されるかを示す一連のプロセスフロー図であり、図７は、工程２０２に対応するデジタル画像を取得するプロセス３００のフローチャートである。
顔部１の入力画像５０ａを図６Ａに示す。入力画像５０ａは、例えば、図７に示すように、プロセス３００の工程３０２においてカメラ１８を使用して、ユーザーによって捕捉されてもよい。図６Ｂは、入力画像５０ａをトリミングして、顔部の少なくとも一部を含む編集済み画像データ５０ｂを取得する工程３０４を示す。入力画像５０ａは、顔部のアンカー特徴１ａを特定することによってトリミングされてもよく、これには、眼部、鼻部、鼻孔部、口の角部などの顔部の特徴を含むがこれらに限定されず、またそれに応じてトリミングされる。図６Ｂに示されるように、眼部がアンカー特徴１ａとして描かれているが、これは単なる例であり、任意の顕著な又は検出可能な顔部特徴（単数又は複数）は、アンカー特徴であってもよいことが理解されるであろう。編集済み画像データ５０ｂは、工程３０８で取得される第１のデジタル画像５１であってもよい。あるいは、図６Ｃに示すように、編集済み画像データ５０ｂは、入力画像５０ａの１つ以上の不必要な部分を除去するためにトリミングによって更に処理されてもよく、それにより、工程３０８で境界線５２によって画定された顔部１の少なくとも一部を含む第１のデジタル画像５１を取得することができる。取得された第１のデジタル画像５１は、境界線５２によって画定される顔部１の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）２を含んでもよい。ＲＯＩ２は、顔部１の全体、好ましくは顔部の少なくとも一部、より好ましくは、顔部１の少なくとも一部を画定する１つ以上の皮膚領域であってもよい。皮膚領域がどのように画定されるかの詳細は、図１０Ａ～図１０Ｃ、及び図１１のフローチャートを参照して以下に説明される。
所望により、プロセス３００は、ＲＯＩ２が、眼の周囲の皮膚領域（「眼部領域２ａ」）、頬の周囲の皮膚領域（「頬部領域２ｂ」）、口の周囲の皮膚領域（「口部領域２ｃ」）、及びこれらの組み合わせからなる群から選択さてもよく、好ましくは、ＲＯＩ２が対象の顔部１の少なくとも一部の一部分であり、より好ましくは、取得された第１のデジタル画像が顔部１の左側又は右側を画定する、工程３０６を含んでもよい。ＲＯＩ２は、取得された第１デジタル画像の少なくとも５％、１０％～１００％、２５％～９０％の領域を含んでもよい。
タイルを画定する
図８は、第１のデジタル画像データ５１上の複数のタイル５４を示す写真である。図９は、第１のデジタル画像データ５１上の複数のタイル５４を定義するプロセス４００を示すフローチャートである。図８を参照すると、第１のデジタル画像データ５１は、図６Ｃを参照して上述したように、境界線５２によって画定された顔部１の少なくとも一部を含む。プロセス４００は、取得された第１のデジタル画像を取り囲む境界線５２を包囲する外周５３を画定することを含む（工程４０２）。取得された第１のデジタル画像５１は、画素の総数によって形成され、例えば、取得された第１のデジタル画像５１は、入力画像５０ａのトリミング後の画像サイズに応じて、工程３０４又は工程３０６で決定される画素数を有してもよい。したがって、取得された第１のデジタル画像５１に基づく全体画像サイズは、工程４０４で定義されてもよい。例えば、タイルサイズが４０×４０画素～７０×７０画素に設定される場合、それに応じて、工程４０６において取得された第１のデジタル画像５１にわたって複数のタイル５４を形成するタイル５４の数は、特定のタイルサイズで全体画像サイズを分割することによって取得される。
画像データを解析する
図１０は、本発明による、定義された複数のタイルのそれぞれについて画像データを解析するプロセス５００を示すフローチャートである。取得された第１のデジタル画像から少なくとも１つの色チャネルを抽出して、解析のために抽出された色チャネル画像を提供することにより、工程５０２でプロセス５００を開始して、美容的皮膚特性を決定するためのエントロピー値を取得してもよい。以下の説明では、少なくとも１つの色チャネル画像は、ＲＧＢ色空間からのＬ色チャネル画像、ａ－チャネル画像、ｂ－チャネル画像、及びｃ－チャネル画像、及びこれらの組み合わせからなる群から選択されるＬ*ａ*ｂ*色システムの画像であり、エントロピー値が、Ｌ－エントロピー値、ａ－エントロピー値、ｂ－エントロピー値、ｃ－エントロピー値、及びこれらの組み合わせからなる群から選択され、関数は、以下の式を有する。
皮膚特性指数＝Ａ＋Ｂ×（Ｌ－エントロピー値）＋Ｃ×（ａ－エントロピー値）＋Ｄ×（ｂ－エントロピー値）＋Ｅ×（ｃ－エントロピー）であり、
式中、Ａ、Ｂ、Ｃ、Ｄ、及びＥは定数であり、Ｂ、Ｃ、Ｄ、及びＥのうちの少なくとも１つは、０ではない。
しかしながら、少なくとも１つの色チャネルは、発色団系であってもよく、少なくとも１つの色チャネルは、メラニンチャネル又はヘモグロビンチャネルであってもよいと理解されよう。カラーシステムはまた、ＨＳＬ／ＨＳＶカラーシステム、及びＣＭＹＫカラーシステムであってもよい。
抽出された色チャネルを工程５０４でフィルタリングし、フィルタリングされた色チャネルをエントロピー統計値を用いて解析して、工程５０６で少なくとも１つの美容的皮膚特性を決定するためのエントロピー値を生成してもよい。フィルタリングされた色チャネルはまた、標準偏差、平均などを含むがこれらに限定されない他の記述統計を使用して解析されてもよいと理解されよう。エントロピー統計値を使用する技術的効果は、他の記述統計と比較してより高い精度を有し、また本発明による方法のより迅速な処理時間を可能にすることである。
工程５０６では、人の皮膚の少なくとも１つの部分の美容的皮膚特性は、エントロピー値に基づいて決定される。
少なくとも１つの色チャネル画像は、Ｌ*ａ*ｂ*カラーシステム、ＲＧＢカラーシステム、ＨＳＬ／ＨＳＶカラーシステム、及びＣＭＹＫカラーシステムからなる群から選択されるカラーシステム内の画像であってもよい。
以下の表１は、エントロピー値に基づいて決定される、対応する色チャネル画像及び対応する美容的皮膚特性を有する各エントロピー値を設定する。表１に記載の色チャネル画像は、Ｌチャネル画像、ａ－チャネル画像、ｂ－チャネル画像、ｃ－チャネル画像、及びこれらの組み合わせからなる群から選択されるＬ*ａ*ｂ*カラーシステムの画像である。
Figure 2023040229000003
美容的皮膚特性を決定することは、定義された人々の母集団に対する、人の皮膚の少なくとも一部の美容的皮膚特性の状態を示す確率値として皮膚特性指数を生成することを含んでもよい。具体的には、視覚認知試験では、消費者は、所定のスケールに基づいて、美容的皮膚特性について定義された人々の母集団のデジタル画像（例えば写真）をランク付けするように求められてもよい。ランク付けされたデジタル画像は、方法５００に従って解析されるようにデータベースとして記憶されて、美容的皮膚特性と最も高い相関関係を有するエントロピー値を決定してもよい。
あるいは、皮膚特性指数は、関数Ｆ（エントロピー値）によって定義されるエントロピー値の関数として生成されてもよく、関数は、訓練データセット上に確立されたモデルによって決定される。訓練データセットは、（ｉ）定義された人々の母集団の複数の色チャネル画像であって、複数の色チャネル画像のそれぞれが、定義された人々の母集団内の人の顔部の皮膚を含み、顔部の皮膚は、美容的皮膚特性を含む、定義された人々の母集団の複数の色チャネル画像と、（ｉｉ）美容的皮膚特性に基づく関連クラス定義と、を含んでもよい。訓練データセットを構築するための技術は、画像処理方法の分野において当業者に既知であり、更に説明されない。
モデルは、回帰モデル又は分類モデル、好ましくは線形回帰モデル、より好ましくは機械学習線形回帰モデル、最も好ましくは機械学習支援ベクトル回帰（machine learning support vector regression、ＳＶＲ）モデルであってもよい。ＳＶＲモデルは、サポートベクトルマシン（Support Vector Machine、ＳＶＭ）モデルの具体例である。ＳＶＭモデルはまた、サポートベクトル分類モデルであってもよい。
ＳＶＲモデルを使用することにより、携帯電子機器上のネイティブアプリケーションとして実装された場合の方法の性能における、精度、再現性、速度の利点が可能になる。具体的には、ＳＶＲモデルの重量により、ネイティブアプリケーションがより小さいハードウェアフットプリントを有することを可能にし、その結果、本発明による方法は、Ａｐｐｌｅ（商標）電話用のｉＯＳ又はＡｎｄｒｏｉｄ電話用のＡｎｄｒｏｉｄ ＯＳを含むがこれらに限定されないオペレーティングシステム（ＯＳ）を有する携帯電話などの携帯電子機器において容易に展開することができる。
分類モデルは、消費者を複数の群、好ましくは２つの群、より好ましくは３つの群に分類するために使用されてもよく、皮膚特性指数の数値に基づいて関連するクラス定義を定義するように、各群は、同じ美容的皮膚特性の状態の異なる程度を有する。例えば、本方法は、皮膚領域を高レベルの美容的皮膚特性状態に分類するように構成されたヒートマップ、又は群のそれぞれに割り当てられた閾値に基づいて、低レベルの美容的皮膚特性状態に分類するように構成されたヒートマップを表示してもよい。
少なくとも１つの色チャネル画像は、ＲＧＢ色システムからのＬ色チャネル画像、ａ－チャネル画像、ｂ－チャネル画像、及びｃ－チャネル画像、及びこれらの組み合わせからなる群から選択されるＬ*ａ*ｂ*色システムの画像であり、エントロピー値が、Ｌ－エントロピー値、ａ－エントロピー値、ｂ－エントロピー値、ｃ－エントロピー値、及びこれらの組み合わせからなる群から選択され、関数は、以下の式を有する。
皮膚特性指数＝Ａ＋Ｂ×（Ｌ－エントロピー値）＋Ｃ×（ａ－エントロピー値）＋Ｄ×（ｂ－エントロピー値）＋Ｅ×（ｃ－エントロピー）であり、
式中、Ａ、Ｂ、Ｃ、Ｄ、及びＥは、定数であり、Ｂ、Ｃ、Ｄ、及びＥのうちの少なくとも１つは、０ではない。
定数Ａ、Ｂ、Ｃ、Ｄ、及びＥは、訓練データセットのサイズ及び内容に基づいて変化してもよく、訓練データセットに基づいてモデルによって生成される任意の数値であってもよいと理解されよう。
具体的には、上記のエントロピー値のそれぞれは、単独で、又はエントロピー値のうちの別の１つと組み合わせて使用されてもよい。例えば、単一のエントロピー値を使用することにより、より高速な計算速度が得ることができ、これにより、使用される非常に基本的なハードウェアを有する小型機器を可能にし、それによって、より効率的かつ費用効率の高い製品が得られる。
少なくとも１つの色チャネル画像は、Ｌチャネル画像であってもよく、エントロピー値は、Ｌ－エントロピー値であり、式中、Ｃ、Ｄ、Ｅはそれぞれ０の値を有し、生成された皮膚特性指数は、皮膚純度、皮膚色調、又は皮膚のつやを示す。
驚くべきことに、Ｌ色チャネル画像のＬ－エントロピー値は、皮膚純度と最も高い相関関係を有することが見出された。
Ｌ－エントロピー値を得るために解析工程のための少なくとも１つの色チャネル画像としてＬ－チャネル画像を選択し、本発明による方法に従ってＬ－エントロピー値に基づいて皮膚純度を決定することの技術的効果は、色チャネル画像の解析に基づいて、他のエントロピー値と比較してＬ－エントロピー値が皮膚純度に対して最も高い相関関係（ｒ＝０．８９）を有するためである。以下は、ピアソン相関係数（ｒ）を用いた統計解析を使用した視覚認知試験からの結果との相関関係に基づいて生成されるデータである。相関関係の結果を以下の下表２に示す。
Figure 2023040229000004
より高いピアソン相関係数（ｒ）は、エントロピー値が、視覚認知試験において試験される美容的皮膚特性の状態により寄与する因子であることを意味する。具体的には、視覚認知試験は、官能試験員の年齢＝２０－５０の所定の数の官能試験員＝３０２に基づいて実施される。官能試験員は、１～５のスケールで、（美容的皮膚特性の例として）皮膚純度についての人のランク写真を求めた。視覚認知試験結果及び上記相関関係結果に基づいて、（周波数フィルタによる）フィルタリングされた画像のＬチャネルエントロピー値は、皮膚純度特性と最も高い相関関係を有することが見出された。したがって、デジタル画像内の人の皮膚の少なくとも一部の皮膚純度を決定するためのＬチャネルのＬ－エントロピー値の使用により、消費者にとって適切な方法で、視覚的に知覚不可能な美容的皮膚特性から消費者にとって説明可能な美容的皮膚特性へと、皮膚純度を変換することができる。
少なくとも１つの色チャネル画像は、ａ－チャネル画像であってもよく、エントロピー値は、ａ－エントロピー値であり、式中、Ｂ、Ｄ、Ｅはそれぞれ０の値を有し、生成された皮膚特性指数は、皮膚炎症を示す。
少なくとも１つの色チャネル画像は、ｂ－チャネル画像であってもよく、エントロピー値は、ｂ－エントロピー値であり、式中、Ｂ、Ｃ、Ｅはそれぞれ０の値を有し、生成された皮膚特性指数は、皮膚色素沈着又は皮膚のくすみを示す。
少なくとも１つの色チャネル画像は、ｃ－チャネル画像であってもよく、エントロピー値は、ｃ－エントロピー値であり、式中、Ｂ、Ｃ、Ｄはそれぞれ０の値を有し、生成された皮膚特性指数は、好ましくは、毛穴、小じわ、シワ、たるみ、皮膚弾性、及びこれらの組み合わせからなる群から選択される、皮膚トポグラフィを示す。
好ましくは、被験者の年齢及び定義された人々の母集団の平均年齢は、それぞれ独立して、１８～６０歳、好ましくは２０～４０歳、より好ましくは２５～３５歳、更により好ましくは２８～３２歳であってもよい。
所望により、抽出された色チャネル画像をフィルタリングする工程は、周波数フィルタを使用することを含んでもよく、好ましくは、周波数フィルタは、ガウス差（ＤｏＧ）フィルタ、高速フーリエ変換（ＦＦＴ）フィルタ、ウェーブレット変換フィルタ（Wavelet transformation filter）、及びこれらの組み合わせからなる群から選択され、より好ましくは、フィルタはＤｏＧフィルタである。所望により、方法２００は、フィルタリングされた色チャネルを解析する前に、フィルタリングされた色チャネルに画像補正係数を適用することを更に含んでもよい。
図１０を参照すると、画像データを解析することは、少なくとも２つの色チャネル、より好ましくは３つの色チャネルを解析することを含んでもよい。特に、赤の色チャネル、黄の色チャネル、及び青の色チャネルは、以下のように説明することができる。赤の色チャネルがＬ*ａ*ｂ*色空間内にある場合、ａ－エントロピーは、フィルタリングされた赤の色チャネルのエントロピー値である。黄の色チャネルがＬ*ａ*ｂ*カラーシステム内にある場合、ｂ－エントロピーは、フィルタリングされた黄の色チャネルのエントロピー値である。青チャネルがテクスチャチャネルに対応する場合、ｃ－エントロピーは、青の色チャネルのエントロピー値である。
表示
本発明による方法は、美容的皮膚状態を可視化するために上述した生成された皮膚特性指標に対応する画像記述を生成する工程を更に含んでもよい。画像記述は、（図１６Ｄ、図２５に示すような）ヒートマップと、美容的皮膚特性、図１６Ｄの第４の領域１９４に示す皮膚年齢、図２５の特徴９３４に示す皮膚純度スコアなどの美容的皮膚特性条件の、凝集スコア表示と、を含んでもよい。凝集スコアは、上述した生成された皮膚特性指数に基づいて計算されてもよい。
図１１Ａ～図１１Ｃは、本発明の方法による複数のタイルを表示するプロセスの詳細を示すプロセスフロー図である。図１２は、複数のタイルを表示するプロセスを示すフローチャートである。図１１Ａは、第１のデジタル画像５１上に挿入された第２のデジタル画像６０を示す写真である。第２のデジタル画像６０は、それぞれが一意的に割り当てられた単一度の印４０を有する複数のタイル５４を表示した被験者の顔部の少なくとも一部を含む。図１１Ｂは、それぞれが一意的に割り当てられた単一度の印を有する複数のタイル５４に基づいて、取得された第１のデジタル画像上に表示された３つのゾーンである第１のゾーン１１０、第２のゾーン１２０、第３のゾーン１３０を示す。各ゾーン１１０、１２０、１３０は、図６Ａ～図６Ｃ及び図７を参照して上述した被験者の顔部１上のそれぞれの対象領域（ＲＯＩ）２を特定する。境界線５２及び外周５３は、図１１Ｂの第２のデジタル画像６０内に表示されるが、図１１Ｃの第２のデジタル画像６０内には表示されないという点で、図１１Ｃは図１１Ｂとは異なる。第１のゾーン１１０は、第１のゾーン色１１０ａを有する第１ゾーンラインを含んでもよく、第２のゾーン１２０は、第２のゾーン色１２０ａを有する第２のゾーンラインを含んでもよく、第３のゾーン１３０は、第３のゾーン色１３０ａを有する第３のゾーンラインを含んでもよい。各ゾーンにおけるタイル５４の解析された画像データに基づいて、各ゾーンラインの色は、例えば図１６Ｄの例示的なユーザーインターフェースに示されるように、被験者の他のゾーンに対して正常である、美しい、又は脆弱な状態であり得る美容的皮膚特性を視覚化するタイルをより良好に視覚的に区別するために、異なっていてもよい。
図１２は、本発明による複数のタイルを表示するプロセス６００を示すフローチャートである。プロセス６００は、プロセッサが各タイル５４の解析された画像データを読み取りる工程６０２で開始されてもよく、タイル５４の解析された少なくとも１つの視覚的美容的皮膚特性に基づいて、複数のタイルの各タイル５４に単一度の印を一意的に割り当てる（工程６０４）。単一度の印が照明された場合、各タイルの解析された画像データは、工程６０６で各タイルにおける対応する照明の輝度を反映するように変換されてもよい。代表的な例では、ゾーン１１０は、ゾーン１２０内のタイルのそれぞれにおける照明度に対して、ゾーン１１０内のタイルのそれぞれにおいてより低い照明度を有してもよい。更に、工程６０８において、ゾーンは、第１のゾーン１１０が眼部ゾーンに対応し得、第２のゾーン１２０が頬部ゾーンに対応し得、第３のゾーン１３０が口部ゾーンに対応し得るように画定されてもよい。ゾーン内の表示された美容的皮膚特性を処置するために、ゾーンに製品推奨項目を割り当てるよう、各ゾーンのタイルの平均指数を計算して、対応するゾーンに従って表示された美容的皮膚特性と相関関係がある皮膚状態の診断を生成してもよい。具体的には、方法２００は、表示された美容的皮膚特性を処置するために、少なくとも１つの製品推奨項目を表示することを更に含んでもよい。
図１３Ａ～１３Ｄは、本発明による少なくとも１つの美容的皮膚特性を可視化する方法を示すプロセスフロー図である。図１４は、本発明による少なくとも１つの美容的皮膚特性を可視化する方法７００を示すフローチャートである。図１３Ａは、図１４の方法７００の工程７０２で表示される被験者の顔部の少なくとも一部の第１のデジタル画像を示すカラー画像である。図１３Ｂは、被験者の顔部の少なくとも一部の第２のデジタル画像、及びそれぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを示すカラー画像であり、第２のデジタル画像は、工程７０４で第１のデジタル画像上に挿入される。所望により、第１のデジタル画像は、図１３Ｃに示すようにグレースケールに変換されて、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルと第１のデジタル画像との間で、より良好なコントラストを提供してもよい。工程７０６では、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、３つのゾーンが第２のデジタル画像上に表示される。
図１５は、図１４に示すような少なくとも１つの美容的皮膚特性を可視化する方法７００の変形形態を示すフローチャートである。図１４の方法７００の工程７０６に続いて、少なくとも１つの製品推奨項目が工程７０８に表示される。工程７１０では、ユーザは、方法７００を終了するように選択するよう促され、方法７００は、ユーザが「はい」を選択した場合に工程７１２で終了する。ユーザが「いいえ」を選択した場合、図５の方法２００の工程が実行され、方法７００は工程７０８に戻る。
ヒューマンマシンユーザーインターフェース
本発明はまた、少なくとも１つの美容的皮膚特性を処置するための製品推奨を提供するためのヒトマシンユーザーインターフェース（以下、「ユーザーインターフェース」）にも関する。ユーザーインターフェースは、入力装置及び画像取得機器を備えたタッチスクリーンディスプレイ／ディスプレイを含む携帯電子装置上のグラフィカル・ユーザー・インターフェースであってもよい。ユーザーインターフェースは、画像取得機器から取得された被験者の顔部の少なくとも一部の第１のデジタル画像を表示するタッチスクリーンディスプレイの第１の領域と、第１のデジタル画像上に挿入された第２のデジタル画像と、を含むことができ、第２のデジタル画像は、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する。ユーザーインターフェースは、第１の領域とは異なるタッチスクリーンディスプレイの第２の領域を更に含んでもよく、第２の領域は、ユーザ入力を受信するための選択可能なアイコンを表示し、表示された美容的皮膚特性を処置するための少なくとも１つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される。
図１６Ａ～１６Ｅは、それぞれ、本発明による美容的皮膚特性を視覚化するための、互いに協働する例示的なユーザーインターフェースをそれぞれ示す、スクリーンショットである。図１６Ａ～図１６Ｅであるが、先行するユーザーインターフェースに応答して連続的様式で提供される一連のユーザーインターフェースとして説明され、図１６Ａ～図１６Ｅのユーザーインターフェースは、上述したように、本発明による方法に従って少なくとも１つの美容的皮膚特性を可視化するための全体的なユーザーインターフェースを定義するために、複数の方法でプログラムすることができると理解されよう。好ましくは、図１６Ａ～１６Ｅの全てのユーザーインターフェースは、本発明による美容的皮膚特性を視覚化するための例示的なユーザーインターフェースを画定する。
図１６Ａは、第１のユーザ入力を受信するためのユーザーインターフェース１６０を示し、好ましくは、第１のユーザ入力はユーザの年齢である。ユーザーインターフェース１６０は、第１のユーザ入力を受信するための第１の領域１６２を含んでもよい。第１の領域１６２は、第１のユーザ入力を受信するための１つ以上のユーザ入力機構１６４を含んでもよい。ユーザ入力機構１６４は、例えば、図１６Ａに示されるようなユーザーの年齢などの所定のユーザ特徴に対応する選択可能な入力アイコンなどのものであってもよい。ユーザーインターフェース１６０は、第１のユーザ入力を提供するための、ユーザに対する対応する命令を含む、第２の領域１６６を更に含んでもよい。第２の領域１６６は、より多くのユーザーフレンドリーなインターフェースを提供するように、第１の領域１６２の上方に配置されてもよい。ユーザーインターフェース１６０は、本発明による方法２００を開始するための開始オプションの一部であってもよい。
図１６Ｂは、第２のユーザ入力を受信するためのユーザーインターフェース１７０を示し、好ましくは、第２のユーザ入力は、ユーザに懸念を与える美容的皮膚特性である。美容的皮膚特性は、ユーザの皮膚の懸念として説明することができる。ユーザーインターフェース１７０は、図１６Ａのユーザ入力機構１６４からの第１のユーザ入力の選択に応答して提供されてもよい。ユーザーインターフェース１７０は、第２のユーザ入力を受信するための第１の領域１７２を含んでもよい。第１の領域１７２は、第２のユーザ入力を受信するための１つ以上のユーザ入力機構１７４を含んでもよい。ユーザ入力機構１７４は、例えば、所定の皮膚の懸念に対応する選択可能な入力アイコンなどであってもよい。第１の領域１７２は、１つ以上の入力機構１７４に対応する説明領域１７３を更に含んでもよく、説明領域１７３は、美容的皮膚特性又は皮膚の懸念の簡単な説明を含む。ユーザーインターフェース１７０は、ユーザ入力を提供するための、ユーザに対する対応する命令を含む、第２の領域１７６を更に含んでもよい。第２の領域１７６は、より多くのユーザーフレンドリーなインターフェースを提供するように、第１の領域１７２の上方に配置されてもよい。
図１６Ｃは、ユーザの入力画像を取得するためのユーザーインターフェース１８０を示す。ユーザーインターフェース１８０は、図７に記載されるプロセスに従って第１のデジタル画像を取得するために、アンカー特徴（眼部など）を整列させるための命令を有する第１の領域１８２を含んでもよい。ユーザーインターフェース１８０は、図１６Ｂの１つ以上のユーザ入力機構１７４を介した第２のユーザ入力の選択に応じて提供されてもよい。
図１６Ｄは、少なくとも１つの美容的皮膚特性を表示するためのユーザーインターフェース１９０を示す。ユーザーインターフェース１９０は、ユーザの入力画像が図１６Ｃのユーザーインターフェース１８０内で取得された後に提供されてもよい。ユーザーインターフェース１９０は、本発明の方法に従って少なくとも１つの美容的皮膚特性を可視化するために、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示する、第１の領域１９１を含んでもよい。第１の領域１９１は、図１３Ｄに示されるような類似の特徴を表示することができるが、複数のタイルを画定する線のみが消灯される、及び／又は不可視層として設定されることが異なる。第１の領域１９１は、ユーザの顔部の少なくとも一部の眼部ゾーンに対応する第１のゾーン１１０と、ユーザの顔部の少なくとも一部の頬部ゾーンに対応する第２のゾーン１２０と、ユーザの顔部の少なくとも一部の口部ゾーンに対応する第３のゾーン１３０と、を含んでもよい。図１６Ｄに示されるように、ゾーン結果は、第３の領域１９３内に表示されてもよく、それにより、ゾーン結果は、ユーザの顔部の少なくとも一部内のゾーンの指標の相対比較に基づいて、各ゾーンに対して生成され得る指標を含む。代表的実施形態では、ゾーン結果に応じて、第１のゾーン１１０は、正常／美しい／脆弱ゾーンとして説明されてもよく、第２のゾーン１２０は、正常／美しい／脆弱ゾーンとして説明されてもよく、第３のゾーン１３０は、正常／美しい／脆弱ゾーンとして説明されてもよい。好ましくは、各ゾーンは、ゾーン結果の相対的差に基づいて異なる説明を有してもよい。ユーザーインターフェース１９０はまた、第３のユーザ入力を受信するための第２の領域１９２を含む。第２の領域１９２は、第３のユーザ入力を受信するための１つ以上のユーザ入力機構１９２１を含んでもよい。ユーザ入力機構１９２１は、例えば、本発明による方法の次の工程に進むための選択可能な入力アイコンなどであってもよい。所望により、ユーザーインターフェース１９０は、ユーザの顔部の少なくとも一部の取得された第１のデジタル画像に基づいて、複数のタイルの各タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、ユーザの皮膚年齢を表示するための第４の領域１９４を含んでもよい。
図１６Ｅは、製品推奨項目２１０を表示するための第１の領域２０１を含むユーザーインターフェース２００を示す。ユーザーインターフェース２００は、図１６Ｄのユーザーインターフェース１９０からのユーザー入力機能１９２１の選択に応じて提供されてもよい。所望により、ユーザーインターフェース２００は、製品推奨項目２１０の詳細を提供するための第２の領域２０２を含んでもよい。好ましくは、ユーザーインターフェース２００は、例えば、製品推奨項目２１０の問い合わせ及び／又は購入のための製品コンサルタントからの支援の要求など、第４のユーザ入力を受信するための第３の領域２０３を含んでもよい。第３の領域２０３は、第４のユーザ入力を受信するための１つ以上のユーザ入力機構２０３１を含んでもよい。ユーザ入力機構２０３１は、例えば、本発明による方法の次の工程に進むための選択可能な入力アイコンなどであってもよい。
図１７Ａは、図１５を参照して説明されるように、本発明による美容的皮膚特性を可視化するための方法７００の工程７１０による追加の追加の入力要求を提供するための、例示的なユーザーインターフェース３００を示すスクリーンショットである。ユーザーインターフェース３００は、図１６Ｄのユーザ入力機構１９２１の選択に応じて提供されてもよい、又は図１６Ｅのユーザーインターフェース２００の後にプロセッサによって自動的に生成されてもよい。
図１７Ａを参照すると、ユーザーインターフェース３００は、例えば、方法７００の工程７１２による方法を終了するための第５のユーザ入力を受信するための第１の領域３０１と、例えば、本発明の方法による次の工程を継続するための第６のユーザ入力を受信するための第２の領域３０２と、を含んでもよい。第１の領域３０１及び第２の領域３０２は、第４のユーザ入力を受信するための１つ以上のユーザ入力機構３０１１、３０２１を含んでもよい。ユーザ入力機構３０１１、３０２１は、例えば、本発明による方法の次の工程に進むための選択可能な入力アイコンなどであってもよい。所望により、ユーザーインターフェース３００は、ユーザが第５又は第６のユーザ入力を提供するための期間を設定するためのタイマー機構を含む第３の領域３０３を含んでもよい。図１７Ｂは、方法７００の工程７１２を表示するための例示的なユーザーインターフェース４００を示すスクリーンショットである。ユーザーインターフェース４００は、方法７００の終了をユーザに確認するためのコンテンツを示すための第１の領域４０１を含んでもよい。
図１８Ａ及び１８Ｂはスクリーンショットであり、それぞれは、製品推奨項目の詳細を表示するための例示的なユーザーインターフェース５００、６００、及び製品推奨項目がどのように本発明による美容的皮膚特性を処置するように機能するか、を示す。
代表的実施形態では、本発明は、少なくとも１つの美容的皮膚特性を処置するための製品推奨を提供するためのユーザーインターフェースに関するものであり、ユーザーインターフェースは、ディスプレイ及び画像取得機器を含む携帯電子装置上にある。ユーザーインターフェースは、画像取得機器から取得された被験者の顔部の少なくとも一部の第１のデジタル画像、及び第１のデジタル画像上に挿入された第２のデジタル画像を表示する、ディスプレイの第１の領域であって、第２のデジタル画像は、被験者の顔部の少なくとも一部を有し、当該表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第１の領域と、第１の領域とは異なるディスプレイの第２の領域であって、ユーザ入力を受信するための音声入力構成要素を表示し、表示された美容的皮膚特性を処理するための少なくとも１つの製品推奨項目の画像が、ユーザが音声入力構成要素をアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、第２の領域と、第１の領域とは異なるディスプレイの第３の領域であって、表示された美容的皮膚特性を処理するための少なくとも１つの製品推奨項目の画像を表示する、第３の領域と、を含んでもよい。
図１９は、本発明による美容的皮膚特性を表示するための図１６Ｄの例示的なユーザーインターフェース７００の変形形態を示すスクリーンショットである。具体的には、図１９のユーザーインターフェース７００は、図１６Ｄのユーザーインターフェース１９０と実質的に同じ特徴を有し、以下の、少なくとも１つの製品推奨項目２１０を表示するための第５の領域１９５、例えば更なる製品推奨項目を追加するためなどの、本発明の方法による次の工程を継続することなどの、ユーザ入力を受信するための第６の領域１９６、及び、例えば本発明の方法を終了するための、ユーザ入力を受信するための第７の領域１９７を含む、追加の特徴において異なる。第５の領域１９５及び第６の領域１９６は、それぞれのユーザ入力を受信するための１つ以上のユーザ入力機能を含んでもよい。ユーザ入力機構は、例えば、本発明による方法の次の工程に進むための選択可能な入力アイコンなどであってもよい。
図２０は、本発明による１つ以上の製品推奨項目を表示するための例示的なユーザーインターフェース８００を示すスクリーンショットである。ユーザーインターフェース８００は、第６の領域１９６内のユーザ入力機能を選択することに応じて提供されてもよい。ユーザーインターフェース８００は、ユーザーインターフェース７００と実質的に同じ特徴を有し、ユーザーインターフェース８００が複数の製品推奨項目２１０を表示するという点で異なる。
本発明による方法は、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、対象の少なくとも１つの領域（ＲＯＩ）、好ましくは１～３つのＲＯＩ、より好ましくは３つのＲＯＩを表示することを含んでもよい。好ましくは、３つのＲＯＩのうちの表示された１つは、タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、３つのＲＯＩのうちの他の１つの美容的皮膚特性状態と比較してより良好である美容的皮膚特性状態を表示する。
図２１は、美容的皮膚特性を表示するための例示的なユーザーインターフェース８１０のスクリーンショットである。具体的には、ユーザーインターフェース８１０は、図１６Ｄのユーザーインターフェースと実質的に同じ特徴を有し、複数のタイルが表示されていない点で異なる。具体的には、ユーザーインターフェース８１０は、それぞれが対応するＲＯＩを画定する境界線を有する３つのＲＯＩを含む。具体的には、３つのＲＯＩは、眼部領域を画定する第１のＲＯＩ ８１２、頬部領域を画定する第２のＲＯＩ ８１４、及び口部領域を画定する第３のＲＯＩ ８１６を含む。美容的皮膚特性は、乾燥皮膚／皮膚のきめであり、したがって、美容的皮膚特性の状態を説明する画像記述８１８、８２０、８２２は、３つのＲＯＩ ８１２、８１４、８１６のそれぞれの隣に配置される。例えば、第３のＲＯＩ ８１６は、表示されていないタイルの分析された美容的皮膚特性に基づいて、第３のＲＯＩ ８１６が顔部上の美しいゾーンであることを示す画像記述８２２を有してもよい。
図２２は、美容的皮膚特性を表示するための例示的なユーザーインターフェース８３０のスクリーンショットである。具体的には、ユーザーインターフェース８３０は、図２１のユーザーインターフェース８２０と実質的に同じ特徴を有し、３つのＲＯＩ ８１２、８１４、８１６のそれぞれのタイル５４が表示される点で異なる。タイル５４は、例えばＲＯＩ ８１６のみを表示するなど、単一のＲＯＩに表示されるように構成されてもよく、ＲＯＩ ８１６は、画像記述８２２に基づいて美しいゾーンを示すと理解されよう。
図２３は、本発明による少なくとも１つの美容的皮膚特性を視覚化するためのデジタル画像５１上に重ね合わされた画像記述９０１を含む、例示的なユーザーインターフェース９００の部分図を示す。画像記述９０２は、上記の方法５００から出力されたエントロピー値に基づいて生成されたヒートマップを含む。ヒートマップは、より良好な美容的皮膚特性状態に対応する低エントロピー値に基づく第１のヒートマップ区分９０６を含む。ヒートマップ９０４は、高いエントロピー値に基づく第２のヒートマップ区分９０８を更に含み、より乏しい美容的皮膚特性状態に対応する。第１のヒートマップ区分９０６は、第２のヒートマップ区分９０８における第２の複数のタイルとは視覚的に異なる第１の複数のタイルから形成される。例えば、第１の複数のタイルは、第２の複数のタイルの色とは異なる色を表示するように変換される。表示されていないヒートマップ区分９１０（以下、「非表示ヒートマップ区分９１０」）は、高エントロピー値と低エントロピー値との間のエントロピー値に対応する。ヒートマップ区分は、以下の表５に概説されるように、美容的皮膚特性状態及び皮膚特性指標に関連するエントロピー情報を表示するように、以下の通り構成されてもよい。
Figure 2023040229000005
図２４は、図２３のユーザーインターフェース９００内の少なくとも１つの美容的皮膚特性を可視化するための画像記述９０２の代替的な変形形態を示す。画像記述９２０は、画像記述９２０が表示された対象領域（ＲＯＩ）９２２を含み、表示されたＲＯＩ ９２２が、より良好な美容的皮膚特性状態に対応する他の非表示対象領域（ＲＯＩ）９２４に対して、より乏しい美容的皮膚特性状態を示すために色を表示するように変換されるという点で、図１９の画像記述９０２とは異なる。単一のヒートマップ区分（図２０を参照）又はＲＯＩを表示するだけの利点は、ユーザーインターフェースを見る消費者が過度に多くの視覚情報で過負荷されていないことである。
図２５は、少なくとも１つの美容的皮膚特性が皮膚純度である、本発明による少なくとも１つの美容的皮膚特性を可視化するための例示的なユーザーインターフェース９３０を示すスクリーンショットである。ユーザーインターフェース９３０は、ユーザーインターフェース９３０が、生成された皮膚特性指標に基づいて、美容的皮膚特性及び凝集スコア９３４を記述する代替のテキスト９３２を含むという点で、図１９のユーザーインターフェース９０２とは異なる。ユーザーインターフェース９３０は、計測器９３６と、計測器９３６に沿って０～１００のスケールで集計スコアを表す計測器マーカ９３８と、を更に備えてもよい。計測器９３６は、凝集スコア９３４を視覚化する異なる方法であり、任意であってもよい。計測器９３６の色は、第１のヒートマップ区分９０４及び第２のヒートマップ区部９０６を表す色の勾配を示すように構成されてもよい。
本明細書に記載される本発明による美容皮膚状態を決定するための方法は、所定の期間にわたって美容的皮膚特性を追跡する工程を更に含んでもよい。例えば、図２１に示されるようなユーザーインターフェース９３０は、選択された際に、プロセッサによって受信される命令及び実行される工程を引き起こして、カレンダー又はスケジュールを発生させ、美容的皮膚特性の改善を追跡するための美容的皮膚特性日記を作成する、第１の選択可能なアイコン９４０を備えてもよい。例えば、消費者が１日目に使用する場合、日付及び顔分析が記録され、メモリに保存される。続いて、消費者が将来（所定期間、１週間、１ヶ月、６ヶ月後）に本発明による方法を使用する場合はいつでも、消費者の顔部の皮膚を再び分析し、消費者は、１日目に対して所定期間後に、彼らの顔部の皮膚がどのように見えるかを比較することができる。本発明による方法は、消費者に特定のログインアカウントを介してアクセスすることができる、携帯電子機器又はウェブアプリケーション上にネイティブアプリケーションとして記憶されるダウンロード可能なソフトウェアアプリケーションであるように構成されてもよく、これにより、消費者は、本発明による方法に基づいて自己皮膚分析を実施することができ、ある期間にわたって改善（乏しい美容的皮膚特性状態を有するＲＯＩの減少）を観察及び／又は監視することができる。
ユーザーインターフェース９３０は、選択された際に、反復される本発明による美容的皮膚特性を決定するための方法を可能にする、第２の選択可能なアイコン９４２を更に含んでもよい。例えば、上記の方法５００を繰り返してもよい。
上述した本開示の代表的な実施形態を、以下の段落に列挙して説明することができる。
Ａ．被験者の少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を可視化する方法であって、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像データを取得する工程と、 ｂ）取得された画像データにわたって複数のタイルを定義する工程と、
ｃ）少なくとも１つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
ｄ）タイルの分析された少なくとも１つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を視覚化させる工程と、を含む、方法。
Ｂ．取得された第１のデジタル画像データが、被験者の顔部の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）を含み、ＲＯＩは、眼の周囲の皮膚領域（「眼部領域」）、頬の周囲の皮膚領域（「頬部領域」）、口の周囲の皮膚領域（「口部領域」）、及びこれらの組み合わせからなる群から選択され、好ましくは、ＲＯＩは、被験者の顔部の少なくとも一部の部分であり、より好ましくは、取得された第１のデジタル画像データは顔部の左側又は右側を画定する、段落Ａに記載の方法。
Ｃ．各タイルが、１００×１００画素以下、好ましくは１×１画素～１００×１００画素、より好ましくは２×２画素～１００×１００画素、より好ましくは５×５画素～９０×９０画素のタイルサイズを含み、更により好ましくはタイルサイズが４０×４０画素～７０×７０画素である、段落Ａ又はＢに記載の方法。
Ｄ．工程（ｃ）における分析が、複数のタイルの全表面積の少なくとも５％、好ましくは１０％～１００％、より好ましくは２５％～９０％を分析することを含む、段落Ａ、Ｂ、又はＣのいずれか一項に記載の方法。
Ｅ．定義された複数のタイルの各タイルについての単一度の印と、人々の母集団に関連付けられた所定の値との間の比較を表示することを更に含む、段落Ａ～Ｄのいずれか一項に記載の方法。
Ｆ．被験者の顔部の少なくとも一部の第２のデジタル画像データと、それぞれが一意的に割り当てられた単一度の印を有する当該表示された複数のタイルとを介在させることを更に含む、段落Ａ～Ｅのいずれか一項に記載の方法。
Ｇ．視覚的に知覚不可能な美容的皮膚特性が、皮膚トポグラフィ、皮膚弾性、皮膚色調、皮膚色素沈着、皮膚のきめ、皮膚の毛穴、美容的皮膚炎症、皮膚の水和、皮膚皮脂レベル、座瘡、色素性母斑、皮膚のつや、皮膚光沢、皮膚のくすみ、不均一色調、又は皮膚バリアからなる群から選択される、段落Ａ～Ｆのいずれか一項に記載の方法。
Ｈ．単一度の印が、図形記号、数値、カラーコード、照明、及びこれらの組み合わせからなる群から選択される、段落Ａ～Ｇのいずれか一項に記載の方法。
Ｉ．工程（ｅ）で表示することが、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、取得された第１のデジタル画像データ上で、少なくとも１つの対象領域（ＲＯＩ）、好ましくは１～３つのＲＯＩ、より好ましくは３つのＲＯＩを定義することを含む、段落Ａ～Ｈのいずれか一項に記載の方法。
Ｊ．表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも１つの製品推奨項目を表示することを更に含む、段落Ａ～Ｉのいずれか一項に記載の方法。
Ｋ．画像データを解析することが、
ｉ）取得されたデジタル画像から少なくとも１つの色チャネルを抽出して、抽出された色チャネル画像を提供することと、
ｉｉ）抽出された色チャネル画像をフィルタリングすることと、
ｉｉｉ）エントロピー統計を使用してフィルタリングされた色チャネル画像を解析して、少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を決定することと、を含む、段落Ａ～Ｊのいずれか一項に記載の方法。
Ｌ．工程（ｉｉ）の抽出された色チャネル画像をフィルタリングすることが、周波数フィルタを使用することを含み、好ましくは、周波数フィルタは、ガウス差（ＤｏＧ）フィルタ、高速フーリエ変換（ＦＦＴ）フィルタ、ウェーブレット変換フィルタ、及びこれらの組み合わせからなる群から選択され、より好ましくは、フィルタはＤｏＧフィルタである、段落Ｋに記載の方法。
Ｍ．少なくとも１つの色チャネルが、赤の色チャネル、黄の色チャネル、及び青の色チャネルから選択されてもよく、好ましくは、本方法は、少なくとも２つの色チャネル、より好ましくは３つの色チャネルを含み、ここで、
赤の色チャネルはＬ*ａ*ｂ*色空間内にあり、ここで、ａ－エントロピーは、フィルタリングされた赤の色チャネルのエントロピー値であり、
黄の色チャネルはＬ*ａ*ｂ*カラーシステム内にあり、ここで、ｂ－エントロピーは、フィルタリングされた黄の色チャネルのエントロピー値であり、
青の色チャネルはテクスチャチャネルに対応し、ここで、ｃ－エントロピーは、青の色チャネルのエントロピー値である。
Ｎ．少なくとも１つの視覚的に知覚不可能な美容的特性を事前定義されたデータセットと比較して指標を割り当てる工程を更に含む方法であって、
各タイルに一意的に単一度の印を割り当てることが、割り当てられた指標に基づいており、
それぞれ一意的に割り当てられた指標を有する複数のタイルを表示する、段落Ｋ、Ｌ、又はＭのいずれか一項に記載の方法。
Ｏ．指標が、視覚的に知覚不可能な美容的皮膚特性のａ－エントロピー値、ｂ－エントロピー値、ｃ－エントロピー値のうちの少なくとも１つに基づいて計算され、事前定義されたデータセットは、定義された母集団の同じ視覚的に知覚不可能な美容的皮膚特性の所定のａ－エントロピー値、ｂ－エントロピー値、ｃ－エントロピー値を含む、段落Ｎに記載の方法。
Ｐ．被験者の年齢及び定義された人々の母集団の平均年齢が、それぞれ独立して、１８～４０歳、好ましくは２０～４０歳、より好ましくは２５～３５歳、更により好ましくは２８～３２歳である、段落Ｏに記載の方法。
Ｑ．少なくとも１つの色チャネル画像が赤の色チャネルであり、
好ましくは、視覚的に知覚不可能な特性の美容的皮膚特性が、皮膚炎症である、段落Ｋ、Ｌ、Ｍ、Ｎ、Ｏ又はＰのいずれか一項に記載の方法。
Ｒ．少なくとも１つの色チャネルが黄の色チャネルであり、
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚色素沈着／くすみである、段落Ｋ、Ｌ、Ｍ、Ｎ、Ｏ、Ｐ又はＱのいずれか一項に記載の方法。
Ｓ．少なくとも１つの色チャネルがテクスチャチャネルであり、
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚トポグラフィ、より好ましくは毛穴、小じわ、微細シワ、たるみ、皮膚弾性である、段落Ｋ、Ｌ、Ｍ、Ｎ、Ｏ、Ｐ、Ｑ又はＲのいずれか１つに記載の方法。
Ｔ．画像データを解析する前に、画像補正係数をフィルタリングされた色に適用することを更に含む、段落Ｋ、Ｌ、Ｍ、Ｎ、Ｏ、Ｐ、Ｑ、Ｒ、又はＳのいずれか一項に記載の方法。
Ｕ．少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を処置するための製品推奨を提供するためのグラフィカル・ユーザー・インターフェースであって、グラフィカル・ユーザー・インターフェースは、入力装置及び画像取得機器を有するタッチスクリーンディスプレイ／ディスプレイを含む携帯電子装置上にあり、グラフィカル・ユーザー・インターフェースは、
画像取得機器から取得された被験者の顔部の少なくとも一部の第１のデジタル画像データと、第１のデジタル画像データ上に挿入された第２のデジタル画像データと、を表示するタッチスクリーンディスプレイの第１の領域であって、第２のデジタル画像データは、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第１の領域と、
第１の領域とは異なるタッチスクリーンディスプレイの第２の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第２の領域と、を含み、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも１つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。
Ｖ．少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を処置するための製品推奨を提供するためのヒューマンマシンインターフェースであって、ヒューマンユーザーインターフェースは、ディスプレイ及び画像取得機器を含む携帯電子装置上にあり、グラフィカル・ユーザー・インターフェースが、
画像取得機器から取得された被験者の顔部の少なくとも一部の第１のデジタル画像データと、第１のデジタル画像データ上に挿入された第２のデジタル画像データと、を表示するディスプレイの第１の領域であって、第２のデジタル画像データは、被験者の顔部の少なくとも一部を有し、当該表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第１の領域と、
第１の領域とは異なるディスプレイの第２の領域であって、ユーザ入力を受信するための音声入力構成要素を表示し、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも１つの製品推奨項目の画像が、ユーザが音声入力構成要素をアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、第２の領域と、
第１の領域とは異なるタッチスクリーンディスプレイの第３の領域であって、表示された視覚的に知覚不可能な美容的皮膚特性を処理するための少なくとも１つの製品推奨項目の画像を表示する、第３の領域と、を含む、ヒューマンマシンインターフェース。
Ｗ．被験者の少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を可視化するための装置であって、人のデジタル画像及びコンピュータ実行可能命令を記憶するように構成された、非一時的コンピュータ可読記憶媒体と、
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像データを取得し、
ｂ）取得された画像データにわたって複数のタイルを定義し、
ｃ）少なくとも１つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析し、
ｄ）タイルの分析された少なくとも１つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当て、
ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を視覚化させるように構成されたプロセッサと、を備える、装置。
Ｘ．段落Ｗに記載の装置と、装置に動作可能に接続されたタッチスクリーンディスプレイと、を備えるシステム。
Ｙ．被験者の少なくとも１つの美容的皮膚特性を可視化する方法であって、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像データを取得する工程であって、第１のデジタル画像データは、少なくとも顔部の入力画像領域から選択される工程と、
ｂ）取得された第１のデジタル画像データにわたって複数のタイルを定義する工程と、
ｃ）少なくとも１つの美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
ｄ）タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
ｅ）それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも１つの美容的皮膚特性を視覚化させる工程と、を含み、 ｆ）表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも１つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する、方法。
Ｚ．取得された画像データが、被験者の顔部の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）を含み、ＲＯＩが、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、主張Ｙに記載の方法。
ＡＡ．被験者の少なくとも１つの美容的皮膚特性を可視化する方法であって、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像を表示する工程と、
ｂ）被験者の顔部の少なくとも一部の第２のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させる工程と、
ｃ）第２のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）を表示することであって、ＲＯＩは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、第２のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）を表示する工程を含む、方法。
ＢＢ．少なくとも１つのＲＯＩが、色を有する境界線によって画定される、段落ＡＡに記載の方法。
ＣＣ．表示する工程が、２つ又は３つのＲＯＩを表示することを含み、２つ又は３つのＲＯＩのうちの１つは、２つ又は３つのＲＯＩのうちの他のＲＯＩのそれぞれとは異なる境界線色を有する、段落ＡＡ又はＢＢに記載の方法。
ＤＤ．被験者の少なくとも１つの視覚的に知覚不可能な美容的皮膚特性を可視化するための装置であって、人のデジタル画像及びコンピュータ実行可能命令を記憶するように構成された、非一時的コンピュータ可読記憶媒体と、
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
ａ）被験者の顔部の少なくとも一部の第１のデジタル画像を表示し、
ｂ）被験者の顔部の少なくとも一部の第２のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させ、
ｃ）第２のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも１つの対象領域（ＲＯＩ）を表示することであって、ＲＯＩは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、表示するように構成された、プロセッサと、を備える、装置。
相互参照される又は関連する任意の特許又は特許出願、及び本願が優先権又はその利益を主張する任意の特許出願又は特許を含む、本明細書に引用される全ての文書は、除外又は限定することを明言しない限りにおいて、その全体が本明細書に参照として組み込まれる。いかなる文献の引用も、本明細書中で開示又は特許請求される任意の発明に対する先行技術であるとはみなされず、あるいはそれを単独で又は他の任意の参考文献（単数又は複数）と組み合わせたときに、そのようないかなる発明も教示、示唆又は開示するとはみなされない。更に、本文書における用語の任意の意味又は定義が、参照により組み込まれた文書内の同じ用語の任意の意味又は定義と矛盾する場合、本文書においてその用語に与えられた意味又は定義が適用されるものとする。
本発明の特定の実施形態を例示及び説明してきたが、本発明の趣旨及び範囲から逸脱することなく種々のその他の変更及び修正を行うことができる点が当業者には明白であろう。したがって、本発明の範囲内にある全てのそのような変更及び修正を添付の特許請求の範囲に網羅することが意図される。

Claims (2)

  1. 少なくとも１つの美容的皮膚特性を処置するための製品推奨を提供するためのグラフィカル・ユーザー・インターフェースであって、前記グラフィカル・ユーザー・インターフェースは、入力装置及び画像取得機器を有するタッチスクリーンディスプレイ／ディスプレイを含む携帯電子装置上にあり、前記グラフィカル・ユーザー・インターフェースは、 前記画像取得機器から取得された前記被験者の顔部の少なくとも一部の第１のデジタル画像と、前記第１のデジタル画像上に挿入された第２のデジタル画像と、を表示するタッチスクリーンディスプレイの第１の領域であって、前記第２のデジタル画像は、前記被験者の顔部の前記少なくとも一部を有し、複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第１の領域と、
    前記第１の領域とは異なる前記タッチスクリーンディスプレイの第２の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第２の領域と、を含み、前記表示された美容的皮膚特性を処置するための少なくとも１つの製品推奨項目の画像が、前記ユーザが前記選択可能なアイコンをアクティブ化した場合に前記タッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。
  2. 前記少なくとも１つの美容的皮膚特性が、視覚的に知覚不可能な美容的皮膚特性であり、前記視覚的に知覚不可能な美容的皮膚特性は、肉眼で検出可能ではない美容的皮膚特性である、又は消費者によって視覚的に検出可能な美容的皮膚特性であるが、前記消費者が前記美容的皮膚特性を理解しない、請求項２に記載のグラフィカル・ユーザー・インターフェース。
JP2023003110A 2019-04-23 2023-01-12 美容的皮膚特性を視覚化するための装置及び方法 Pending JP2023040229A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962837208P 2019-04-23 2019-04-23
US62/837,208 2019-04-23
PCT/US2020/029422 WO2020219612A1 (en) 2019-04-23 2020-04-23 Apparatus and method for visualizing cosmetic skin attributes
JP2021561969A JP7235895B2 (ja) 2019-04-23 2020-04-23 美容的皮膚特性を視覚化するための装置及び方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021561969A Division JP7235895B2 (ja) 2019-04-23 2020-04-23 美容的皮膚特性を視覚化するための装置及び方法

Publications (1)

Publication Number Publication Date
JP2023040229A true JP2023040229A (ja) 2023-03-22

Family

ID=70614682

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021561969A Active JP7235895B2 (ja) 2019-04-23 2020-04-23 美容的皮膚特性を視覚化するための装置及び方法
JP2023003110A Pending JP2023040229A (ja) 2019-04-23 2023-01-12 美容的皮膚特性を視覚化するための装置及び方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021561969A Active JP7235895B2 (ja) 2019-04-23 2020-04-23 美容的皮膚特性を視覚化するための装置及び方法

Country Status (6)

Country Link
US (1) US11416988B2 (ja)
EP (1) EP3959724A1 (ja)
JP (2) JP7235895B2 (ja)
KR (1) KR20210139309A (ja)
CN (1) CN113767439A (ja)
WO (1) WO2020219612A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD944402S1 (en) * 2019-04-23 2022-02-22 The Procter & Gamble Company Skin age identifier
USD923043S1 (en) * 2019-04-23 2021-06-22 The Procter & Gamble Company Display panel with graphical user interface for skin age determination
WO2020219613A1 (en) 2019-04-23 2020-10-29 The Procter & Gamble Company Apparatus and method for determining cosmetic skin attributes
USD968441S1 (en) * 2020-04-30 2022-11-01 The Procter & Gamble Company Display screen with graphical user interface
USD962256S1 (en) 2020-05-14 2022-08-30 The Procter & Gamble Company Display screen with graphical user interface
KR102396376B1 (ko) * 2020-07-16 2022-05-10 (주) 코코리색채연구소 멜라닌 지수 및 헤모글로빈 지수를 기초로 한 화장품 추천 방법 및 그 디바이스
US20220249397A1 (en) * 2021-02-07 2022-08-11 Function Better Inc. Automated Dosing Protocol for Use of Cannabinoids or Other Psychoactive Substances
CN113191985B (zh) * 2021-05-24 2024-05-28 北京美医医学技术研究院有限公司 一种基于红外激光的智能祛斑系统
CN113450340B (zh) * 2021-07-13 2024-03-19 北京美医医学技术研究院有限公司 一种皮肤纹理检测系统
US20230196553A1 (en) * 2021-12-16 2023-06-22 The Gillette Company Llc Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin dryness
US20230196816A1 (en) * 2021-12-16 2023-06-22 The Gillett Company LLC Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin hyperpigmentation

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000005663A2 (en) 1998-07-24 2000-02-03 Jarg Corporation Distributed computer database system and method for performing object search
AU5233099A (en) 1998-07-24 2000-02-14 Jarg Corporation Search system and method based on multiple ontologies
KR100408829B1 (ko) 1998-12-29 2004-01-24 주식회사 대우일렉트로닉스 모델 기반 부호화 시스템에서의 얼굴 영상 세그멘테이션 방법
US6571003B1 (en) * 1999-06-14 2003-05-27 The Procter & Gamble Company Skin imaging and analysis systems and methods
US7039222B2 (en) 2003-02-28 2006-05-02 Eastman Kodak Company Method and system for enhancing portrait images that are processed in a batch mode
WO2007031946A2 (en) 2005-09-12 2007-03-22 Dvp Technologies Ltd. Medical image processing
US7558416B2 (en) 2006-10-02 2009-07-07 Johnson & Johnson Consumer Companies, Inc. Apparatus and method for measuring photodamage to skin
EP2042095A1 (en) 2007-09-26 2009-04-01 Astron Clinica Limited Methods and apparatus for quantifying photo-damage
JP2009082338A (ja) 2007-09-28 2009-04-23 Masahiro Nakagawa エントロピーを用いた肌の鑑別方法
JP5290585B2 (ja) 2008-01-17 2013-09-18 株式会社 資生堂 肌色評価方法、肌色評価装置、肌色評価プログラム、及び該プログラムが記録された記録媒体
US8837832B2 (en) 2010-05-18 2014-09-16 Skin Of Mine Dot Com, Llc Systems and methods for monitoring the condition of the skin
JP4831259B1 (ja) 2011-03-10 2011-12-07 オムロン株式会社 画像処理装置、画像処理方法、および制御プログラム
JP2013212177A (ja) * 2012-03-30 2013-10-17 Shiseido Co Ltd 画像解析方法、画像解析装置、及び画像解析プログラム
JP6131732B2 (ja) * 2013-06-18 2017-05-24 沖電気工業株式会社 人物属性提示装置及び人物属性提示方法
US10667744B2 (en) * 2013-06-28 2020-06-02 Panasonic Intellectual Property Corporation Of America Skin function evaluation device and skin evaluation method
WO2015048222A1 (en) 2013-09-25 2015-04-02 The Procter & Gamble Company Method and system for skin care consultation
CN104156947B (zh) 2014-07-23 2018-03-16 小米科技有限责任公司 图像分割方法、装置及设备
KR101701210B1 (ko) 2014-10-02 2017-02-01 주식회사 엘지유플러스 피부 분석 결과 출력 방법, 이를 위한 장치 및 어플리케이션
CN104299011A (zh) 2014-10-13 2015-01-21 吴亮 一种基于人脸图像识别的肤质与皮肤问题识别检测方法
KR20170062676A (ko) * 2015-11-30 2017-06-08 (주)아모레퍼시픽 피부 특성 시각화 방법
US10667723B2 (en) * 2016-02-19 2020-06-02 Covidien Lp Systems and methods for video-based monitoring of vital signs
CN108701323B (zh) 2016-03-21 2023-11-10 宝洁公司 用于提供定制的产品推荐的系统和方法
CN110709856B (zh) 2017-05-31 2023-11-28 宝洁公司 用于确定表观皮肤年龄的系统和方法
CN109064438A (zh) * 2017-06-09 2018-12-21 丽宝大数据股份有限公司 皮肤状态检测方法、电子装置与皮肤状态检测系统
US10719729B2 (en) * 2018-06-06 2020-07-21 Perfect Corp. Systems and methods for generating skin tone profiles
CN114502061B (zh) * 2018-12-04 2024-05-28 巴黎欧莱雅 使用深度学习的基于图像的自动皮肤诊断
WO2020219613A1 (en) 2019-04-23 2020-10-29 The Procter & Gamble Company Apparatus and method for determining cosmetic skin attributes

Also Published As

Publication number Publication date
KR20210139309A (ko) 2021-11-22
JP2022529677A (ja) 2022-06-23
JP7235895B2 (ja) 2023-03-08
US11416988B2 (en) 2022-08-16
EP3959724A1 (en) 2022-03-02
CN113767439A (zh) 2021-12-07
US20200342594A1 (en) 2020-10-29
WO2020219612A1 (en) 2020-10-29

Similar Documents

Publication Publication Date Title
JP7235895B2 (ja) 美容的皮膚特性を視覚化するための装置及び方法
JP7248820B2 (ja) 美容的皮膚属性を決定するための機器及び方法
CA2751549C (en) Method and apparatus for simulation of facial skin aging and de-aging
EP1189536B1 (en) Skin imaging and analysis methods
US20120044335A1 (en) Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program
JP6868847B2 (ja) 画像処理装置および画像処理方法
CN108024719B (zh) 肌肤的光泽评价装置、光泽评价方法及记录介质
JP2004321793A (ja) 皮膚画像のコンピュータ解析のための方法およびシステム
WO2013036612A2 (en) Systems, devices, and methods for providing products and consultations
US20080304736A1 (en) Method of estimating a visual evaluation value of skin beauty
JP7108127B2 (ja) 毛穴の色を特定する方法
JP2017113140A (ja) 肌状態評価方法
JP6124295B2 (ja) 素肌または化粧肌の質感評価方法
JP5399874B2 (ja) 画像処理装置および画像処理方法
KR20220156034A (ko) 수지상 기공을 식별하는 방법
JP6730051B2 (ja) 肌状態評価方法
CN117440849A (zh) 护肤设备
KR20230052341A (ko) 민감성 피부를 위한 맞춤형 화장품 제조 시스템 및 그 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240402

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240510