JP2022529677A - 美容的皮膚特性を視覚化するための装置及び方法 - Google Patents
美容的皮膚特性を視覚化するための装置及び方法 Download PDFInfo
- Publication number
- JP2022529677A JP2022529677A JP2021561969A JP2021561969A JP2022529677A JP 2022529677 A JP2022529677 A JP 2022529677A JP 2021561969 A JP2021561969 A JP 2021561969A JP 2021561969 A JP2021561969 A JP 2021561969A JP 2022529677 A JP2022529677 A JP 2022529677A
- Authority
- JP
- Japan
- Prior art keywords
- skin
- tiles
- cosmetic
- cosmetic skin
- digital image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/7435—Displaying user selection data, e.g. icons in a graphical user interface
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Pathology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- Dermatology (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Child & Adolescent Psychology (AREA)
- Psychiatry (AREA)
- Hospice & Palliative Care (AREA)
- Developmental Disabilities (AREA)
- Image Processing (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Image Analysis (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
a)被験者の顔部の少なくとも一部の第1のデジタル画像を取得する工程であって、第1のデジタル画像は、顔部の入力画像の少なくとも1つの領域から選択される工程と、
b)取得された第1のデジタル画像にわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第1のデジタル画像を解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
・角質層が乾燥している場合(冬/空気状態)、光が表面からより多く反射(表面反射)して、皮膚上の線を引き起こす皮膚の微細組織を促進させ得る。
・真皮が(UVで)損傷した場合、真皮では光の散乱(真皮散乱としても知られる)がより少なく、光は、皮膚を透過し得る(表面下反射がより少ない)。真皮散乱が少ない場合、結果として皮膚は、より暗く見える。
・皮膚が慢性的なUVにさらされると、皮膚は、より多くのメラニンを生成する。メラニンは、光を吸収して表面下反射を減少させ、したがって皮膚はより暗く見える。
a)被験者の顔部の少なくとも一部の第1のデジタル画像を取得する工程であって、第1のデジタル画像は、顔部の入力画像の少なくとも1つの領域から選択される工程と、
b)取得された第1のデジタル画像にわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについて第1のデジタル画像を解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
ここで、表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する。
図1は、本発明による美容的皮膚特性を可視化するためのシステム10を示す概略図である。システム10は、ワイドエリアネットワーク(携帯電話網、公衆交換電話網、衛星ネットワーク、インターネットなど)、ローカルエリアネットワーク(ワイヤレスフィディリティ、Wi-Max、ZigBee(商標)、Bluetooth(商標)など)、及び/又は他の形態のネットワーク機能として具体化され得るネットワーク100を含んでもよい。ネットワーク100には、携帯電子機器12、及びディスプレイ上に表示を生成するための装置14、美容的皮膚特性を視覚化するためのグラフィカル・ユーザー・インターフェースが接続されている。装置104は遠隔に配置され、ネットワーク100を介して携帯電子機器に接続されている。
図4A及び図5を参照すると、プロセッサ14bが開始された場合に、プロセッサ14bは、例えば工程202で画像取得論理144aを介して、取得対象の顔部の少なくとも一部の第1のデジタル画像51を生成する。プロセッサ14bは、取得された画像データ20にわたって複数のタイル54を画定する(工程204)。複数のタイル54は、図4Bに示すようにタイルマップ55を画定するように隣接していてもよい。工程206では、プロセッサは、少なくとも1つの美容的皮膚特性について、定義された複数のタイル54のそれぞれについて、画像データのそれぞれについて画像データを解析する。工程208では、分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイル54に対して一意的に単一度の印40を割り当てる。それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも一部が、図4Cに示されるような少なくとも1つの美容的皮膚特性を可視化するように、工程210で表示される。ユーザ(消費者)によって提供される入力デジタル画像の画像データを解析することにより、単一のスクリーンショットにおいて、定義された複数のタイルのそれぞれについて解析された画像データを整理して表示することで、本発明による方法200は、美容的皮膚特性を視覚化するために必要とされる異なる照明システムの下で、別個のウィンドウ内に情報を表示するユーザーインターフェースをナビゲートするという厄介なタスクを回避しながら、ユーザ/消費者が美容的皮膚特性を容易に特定することを可能にする。例えば、UV光などの特定の条件は、肉眼で知覚できない紫外線班を可視化するために必要とされる場合がある。
本発明による方法200によるデジタル画像を取得する工程202について、図6A、図6B及び図6Cを参照して説明するが、これは、第1のデジタル画像がどのように取得されるかを示す一連のプロセスフロー図であり、図7は、工程202に対応するデジタル画像を取得するプロセス300のフローチャートである。
図8は、第1のデジタル画像データ51上の複数のタイル54を示す写真である。図9は、第1のデジタル画像データ51上の複数のタイル54を定義するプロセス400を示すフローチャートである。図8を参照すると、第1のデジタル画像データ51は、図6Cを参照して上述したように、境界線52によって画定された顔部1の少なくとも一部を含む。プロセス400は、取得された第1のデジタル画像を取り囲む境界線52を包囲する外周53を画定することを含む(工程402)。取得された第1のデジタル画像51は、画素の総数によって形成され、例えば、取得された第1のデジタル画像51は、入力画像50aのトリミング後の画像サイズに応じて、工程304又は工程306で決定される画素数を有してもよい。したがって、取得された第1のデジタル画像51に基づく全体画像サイズは、工程404で定義されてもよい。例えば、タイルサイズが40×40画素~70×70画素に設定される場合、それに応じて、工程406において取得された第1のデジタル画像51にわたって複数のタイル54を形成するタイル54の数は、特定のタイルサイズで全体画像サイズを分割することによって取得される。
図10は、本発明による、定義された複数のタイルのそれぞれについて画像データを解析するプロセス500を示すフローチャートである。取得された第1のデジタル画像から少なくとも1つの色チャネルを抽出して、解析のために抽出された色チャネル画像を提供することにより、工程502でプロセス500を開始して、美容的皮膚特性を決定するためのエントロピー値を取得してもよい。以下の説明では、少なくとも1つの色チャネル画像は、RGB色空間からのL色チャネル画像、a-チャネル画像、b-チャネル画像、及びc-チャネル画像、及びこれらの組み合わせからなる群から選択されるL*a*b*色システムの画像であり、エントロピー値が、L-エントロピー値、a-エントロピー値、b-エントロピー値、c-エントロピー値、及びこれらの組み合わせからなる群から選択され、関数は、以下の式を有する。
皮膚特性指数=A+B×(L-エントロピー値)+C×(a-エントロピー値)+D×(b-エントロピー値)+E×(c-エントロピー)であり、
式中、A、B、C、D、及びEは定数であり、B、C、D、及びEのうちの少なくとも1つは、0ではない。
皮膚特性指数=A+B×(L-エントロピー値)+C×(a-エントロピー値)+D×(b-エントロピー値)+E×(c-エントロピー)であり、
式中、A、B、C、D、及びEは、定数であり、B、C、D、及びEのうちの少なくとも1つは、0ではない。
本発明による方法は、美容的皮膚状態を可視化するために上述した生成された皮膚特性指標に対応する画像記述を生成する工程を更に含んでもよい。画像記述は、(図16D、図25に示すような)ヒートマップと、美容的皮膚特性、図16Dの第4の領域194に示す皮膚年齢、図25の特徴934に示す皮膚純度スコアなどの美容的皮膚特性条件の、凝集スコア表示と、を含んでもよい。凝集スコアは、上述した生成された皮膚特性指数に基づいて計算されてもよい。
本発明はまた、少なくとも1つの美容的皮膚特性を処置するための製品推奨を提供するためのヒトマシンユーザーインターフェース(以下、「ユーザーインターフェース」)にも関する。ユーザーインターフェースは、入力装置及び画像取得機器を備えたタッチスクリーンディスプレイ/ディスプレイを含む携帯電子装置上のグラフィカル・ユーザー・インターフェースであってもよい。ユーザーインターフェースは、画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像を表示するタッチスクリーンディスプレイの第1の領域と、第1のデジタル画像上に挿入された第2のデジタル画像と、を含むことができ、第2のデジタル画像は、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する。ユーザーインターフェースは、第1の領域とは異なるタッチスクリーンディスプレイの第2の領域を更に含んでもよく、第2の領域は、ユーザ入力を受信するための選択可能なアイコンを表示し、表示された美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される。
A.被験者の少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を可視化する方法であって、
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得する工程と、
b)取得された画像データにわたって複数のタイルを定義する工程と、
c)少なくとも1つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
d)タイルの分析された少なくとも1つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を視覚化させる工程と、を含む、方法。
i)取得されたデジタル画像から少なくとも1つの色チャネルを抽出して、抽出された色チャネル画像を提供することと、
ii)抽出された色チャネル画像をフィルタリングすることと、
iii)エントロピー統計を使用してフィルタリングされた色チャネル画像を解析して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を決定することと、を含む、段落A~Jのいずれか一項に記載の方法。
赤の色チャネルはL*a*b*色空間内にあり、ここで、a-エントロピーは、フィルタリングされた赤の色チャネルのエントロピー値であり、
黄の色チャネルはL*a*b*カラーシステム内にあり、ここで、b-エントロピーは、フィルタリングされた黄の色チャネルのエントロピー値であり、
青の色チャネルはテクスチャチャネルに対応し、ここで、c-エントロピーは、青の色チャネルのエントロピー値である。
各タイルに一意的に単一度の印を割り当てることが、割り当てられた指標に基づいており、
それぞれ一意的に割り当てられた指標を有する複数のタイルを表示する、段落K、L、又はMのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な特性の美容的皮膚特性が、皮膚炎症である、段落K、L、M、N、O又はPのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚色素沈着/くすみである、段落K、L、M、N、O、P又はQのいずれか一項に記載の方法。
好ましくは、視覚的に知覚不可能な美容的皮膚特性が、皮膚トポグラフィ、より好ましくは毛穴、小じわ、微細シワ、たるみ、皮膚弾性である、段落K、L、M、N、O、P、Q又はRのいずれか1つに記載の方法。
画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像データと、第1のデジタル画像データ上に挿入された第2のデジタル画像データと、を表示するタッチスクリーンディスプレイの第1の領域であって、第2のデジタル画像データは、被験者の顔部の少なくとも一部を有し、表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第1の領域と、
第1の領域とは異なるタッチスクリーンディスプレイの第2の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第2の領域と、を含み、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが選択可能なアイコンをアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。
画像取得機器から取得された被験者の顔部の少なくとも一部の第1のデジタル画像データと、第1のデジタル画像データ上に挿入された第2のデジタル画像データと、を表示するディスプレイの第1の領域であって、第2のデジタル画像データは、被験者の顔部の少なくとも一部を有し、当該表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第1の領域と、
第1の領域とは異なるディスプレイの第2の領域であって、ユーザ入力を受信するための音声入力構成要素を表示し、表示された視覚的に知覚不可能な美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、ユーザが音声入力構成要素をアクティブ化した場合にタッチスクリーンディスプレイ上に表示される、第2の領域と、
第1の領域とは異なるタッチスクリーンディスプレイの第3の領域であって、表示された視覚的に知覚不可能な美容的皮膚特性を処理するための少なくとも1つの製品推奨項目の画像を表示する、第3の領域と、を含む、ヒューマンマシンインターフェース。
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得し、
b)取得された画像データにわたって複数のタイルを定義し、
c)少なくとも1つの視覚的に知覚不可能な美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析し、
d)タイルの分析された少なくとも1つの視覚的に知覚不可能な美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当て、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルを表示して、少なくとも1つの視覚的に知覚不可能な美容的皮膚特性を視覚化させるように構成されたプロセッサと、を備える、装置。
a)被験者の顔部の少なくとも一部の第1のデジタル画像データを取得する工程であって、第1のデジタル画像データは、少なくとも顔部の入力画像領域から選択される工程と、
b)取得された第1のデジタル画像データにわたって複数のタイルを定義する工程と、
c)少なくとも1つの美容的皮膚特性について、定義された複数のタイルのそれぞれについての画像データを解析する工程と、
d)タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、定義された複数のタイルのそれぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
f)表示された複数のタイルの少なくとも幾つかは、タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する、方法。
a)被験者の顔部の少なくとも一部の第1のデジタル画像を表示する工程と、
b)被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させる工程と、
c)第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示することであって、ROIは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示する工程を含む、方法。
記憶媒体に連結されたプロセッサであって、コンピュータ実行可能命令に基づいて、
a)被験者の顔部の少なくとも一部の第1のデジタル画像を表示し、
b)被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させ、
c)第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示することであって、ROIは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、表示するように構成された、プロセッサと、を備える、装置。
Claims (15)
- 被験者の少なくとも1つの美容的皮膚特性を可視化する方法であって、
a)前記被験者の顔部の少なくとも一部の第1のデジタル画像を取得する工程であって、前記第1のデジタル画像は、前記顔部の入力画像の少なくとも1つの領域から選択される工程と、
b)前記取得された第1のデジタル画像にわたって複数のタイルを定義する工程と、
c)前記少なくとも1つの美容的皮膚特性について、前記定義された複数のタイルのそれぞれについて前記第1のデジタル画像を解析する工程と、
d)前記タイルの分析された少なくとも1つの美容的皮膚特性に基づいて、前記定義された複数のタイルの、それぞれのタイルに対して一意的に単一度の印を割り当てる工程と、
e)それぞれが一意的に割り当てられた単一度の印を有する前記複数のタイルの少なくとも幾つかを表示して、少なくとも1つの美容的皮膚特性を視覚化させる工程と、を含み、
前記表示された複数のタイルの少なくとも幾つかは、前記タイルの前記分析された少なくとも1つの美容的皮膚特性に基づいて、前記複数のタイルの非表示のタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性を表示する、方法。 - 前記複数のタイルの前記表示された少なくとも幾つかは、第1の表示されたタイルと第2の表示されたタイルとを含み、前記第1の表示されたタイルと前記第2の表示されたタイルとの間に視覚的差異が存在し、前記第1の表示されたタイルは、前記タイルの前記分析された少なくとも1つの美容的皮膚特性に基づいて、前記第2の表示されたタイルの美容的皮膚特性状態と比較してより良好である美容的皮膚特性状態を表示する、請求項1に記載の方法。
- 前記取得された第1のデジタル画像が、前記被験者の顔部の前記少なくとも一部の少なくとも1つの対象領域(ROI)を含み、前記少なくとも1つのROIは、眼の周囲の皮膚領域(「眼部領域」)、頬の周囲の皮膚領域(「頬部領域」)、口の周囲の皮膚領域(「口部領域」)、及びこれらの組み合わせからなる群から選択され、好ましくは、前記少なくとも1つのROIは、前記被験者の前記顔部の前記少なくとも一部の部分であり、より好ましくは、前記取得された第1のデジタル画像は、前記顔部の左側又は前記顔部の右側を画定する、請求項1に記載の方法。
- 工程(e)で表示することが、それぞれが一意的に割り当てられた単一度の印を有する前記複数のタイルに基づいて、前記少なくとも1つの対象領域(ROI)、好ましくは1~3つのROI、より好ましくは3つのROIを表示することを含み、好ましくは、前記3つのROIのうちの前記表示された1つは、前記タイルの前記分析された少なくとも1つの美容的皮膚特性に基づいて、前記3つのROIのうちの他の美容的皮膚特性状態と比較してより良好である美容的皮膚特性状態を表示する、請求項3に記載の方法。
- 前記定義された複数のタイルの各タイルについての前記単一度の印と、定義された人々の母集団に関連付けられた所定の値との間の比較を表示することを更に含む、請求項1に記載の方法。
- 工程(e)で表示することが、前記被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する前記表示された複数のタイルとを介在させることを含む、請求項1に記載の方法。
- 前記美容的皮膚特性が、皮膚純度、皮膚年齢、皮膚トポグラフィ、皮膚色調、皮膚色素沈着、皮膚の毛穴、皮膚炎症、皮膚の水和、皮膚皮脂レベル、座瘡、色素性母斑、皮膚のつや、皮膚光沢、皮膚のくすみ、及び皮膚バリアからなる群から選択される、請求項1に記載の方法。
- 前記美容的皮膚特性が、視覚的に知覚不可能な美容的皮膚特性であり、前記視覚的に知覚不可能な美容的皮膚特性は、肉眼で検出可能ではない美容的皮膚特性である、又は消費者によって視覚的に検出可能な美容的皮膚特性であるが、前記消費者が前記美容的皮膚特性を理解しない、請求項1に記載の方法。
- 前記単一度の印が、図形記号、数値、カラーコード、照明、及びこれらの組み合わせからなる群から選択される、請求項1に記載の方法。
- 前記表示された美容的皮膚特性を処置するために、少なくとも1つの製品推奨項目を表示することを更に含む、請求項1に記載の方法。
- 解析工程(c)で、皮膚特性指数が、定義された人々の母集団に対する前記被験者の皮膚の前記少なくとも一部の前記美容的皮膚特性の状態を示す確率値として生成され、好ましくは、前記皮膚特性指数は、F(エントロピー値)によって定義されるエントロピー値の関数として生成され、前記関数は、訓練データセット上に確立されたモデルによって決定され、前記訓練データセットは、(i)前記定義された人々の母集団の複数の色チャネル画像であって、前記複数の色チャネル画像のそれぞれが、前記定義された人々の母集団内の人の顔の皮膚を含み、前記顔の皮膚が、前記美容的皮膚特性を含む、前記定義された人々の母集団の複数の色チャネル画像と、(ii)前記美容的皮膚特性に基づく関連クラス定義と、を含む、請求項1に記載の方法。
- 前記被験者の年齢及び前記定義された人々の母集団の平均年齢が、それぞれ独立して、18~60歳、好ましくは20~40歳、より好ましくは25~35歳、更により好ましくは28~32歳である、請求項11に記載の方法。
- 被験者の少なくとも1つの美容的皮膚特性を可視化する方法であって、
a)前記被験者の顔部の少なくとも一部の第1のデジタル画像を表示する工程と、
b)前記被験者の顔部の少なくとも一部の第2のデジタル画像と、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルとを介在させる工程と、
c)前記第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する前記複数のタイルに基づいて、前記被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示する工程であって、前記少なくとも1つのROIは、眼の周囲の皮膚領域、頬の周囲の皮膚領域、口の周囲の皮膚領域、及びこれらの組み合わせからなる群から選択される、第2のデジタル画像データ上に、それぞれが一意的に割り当てられた単一度の印を有する複数のタイルに基づいて、被験者の顔部の少なくとも一部の少なくとも1つの対象領域(ROI)を表示する工程と、を含み、表示する工程が、2つ又は3つのROIを表示することを含み、前記2つ又は3つのROIのうちの1つが、前記2つ又は3つのROIのうちの他のROIのそれぞれとは異なる境界線を有し、前記3つのROIのうちの前記少なくとも1つの前記表示された境界線が、前記2つ又は3つのROIのうちの前記他のROIのそれぞれの美容的皮膚特性状態と比較して、より良好である美容的皮膚特性状態を有する前記2つ又は3つのROIのうちの前記1つを示す、請求項1に記載の方法。 - 少なくとも1つの美容的皮膚特性を処置するための製品推奨を提供するためのグラフィカル・ユーザー・インターフェースであって、前記グラフィカル・ユーザー・インターフェースは、入力装置及び画像取得機器を有するタッチスクリーンディスプレイ/ディスプレイを含む携帯電子装置上にあり、前記グラフィカル・ユーザー・インターフェースは、
前記画像取得機器から取得された前記被験者の顔部の少なくとも一部の第1のデジタル画像と、前記第1のデジタル画像上に挿入された第2のデジタル画像と、を表示するタッチスクリーンディスプレイの第1の領域であって、前記第2のデジタル画像は、前記被験者の顔部の前記少なくとも一部を有し、前記表示された複数のタイルは、それぞれが一意的に割り当てられた単一度の印を有する、第1の領域と、
前記第1の領域とは異なる前記タッチスクリーンディスプレイの第2の領域であって、ユーザ入力を受信するための選択可能なアイコンを表示する、第2の領域と、を含み、前記表示された美容的皮膚特性を処置するための少なくとも1つの製品推奨項目の画像が、前記ユーザが前記選択可能なアイコンをアクティブ化した場合に前記タッチスクリーンディスプレイ上に表示される、グラフィカル・ユーザー・インターフェース。 - 前記少なくとも1つの美容的皮膚特性が、視覚的に知覚不可能な美容的皮膚特性であり、前記視覚的に知覚不可能な美容的皮膚特性は、肉眼で検出可能ではない美容的皮膚特性である、又は消費者によって視覚的に検出可能な美容的皮膚特性であるが、前記消費者が前記美容的皮膚特性を理解しない、請求項14に記載のグラフィカル・ユーザー・インターフェース。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023003110A JP2023040229A (ja) | 2019-04-23 | 2023-01-12 | 美容的皮膚特性を視覚化するための装置及び方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962837208P | 2019-04-23 | 2019-04-23 | |
US62/837,208 | 2019-04-23 | ||
PCT/US2020/029422 WO2020219612A1 (en) | 2019-04-23 | 2020-04-23 | Apparatus and method for visualizing cosmetic skin attributes |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023003110A Division JP2023040229A (ja) | 2019-04-23 | 2023-01-12 | 美容的皮膚特性を視覚化するための装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022529677A true JP2022529677A (ja) | 2022-06-23 |
JP7235895B2 JP7235895B2 (ja) | 2023-03-08 |
Family
ID=70614682
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021561969A Active JP7235895B2 (ja) | 2019-04-23 | 2020-04-23 | 美容的皮膚特性を視覚化するための装置及び方法 |
JP2023003110A Pending JP2023040229A (ja) | 2019-04-23 | 2023-01-12 | 美容的皮膚特性を視覚化するための装置及び方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023003110A Pending JP2023040229A (ja) | 2019-04-23 | 2023-01-12 | 美容的皮膚特性を視覚化するための装置及び方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11416988B2 (ja) |
EP (1) | EP3959724A1 (ja) |
JP (2) | JP7235895B2 (ja) |
KR (1) | KR20210139309A (ja) |
CN (1) | CN113767439A (ja) |
WO (1) | WO2020219612A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7248820B2 (ja) | 2019-04-23 | 2023-03-29 | ザ プロクター アンド ギャンブル カンパニー | 美容的皮膚属性を決定するための機器及び方法 |
USD944402S1 (en) * | 2019-04-23 | 2022-02-22 | The Procter & Gamble Company | Skin age identifier |
USD923043S1 (en) * | 2019-04-23 | 2021-06-22 | The Procter & Gamble Company | Display panel with graphical user interface for skin age determination |
USD968441S1 (en) * | 2020-04-30 | 2022-11-01 | The Procter & Gamble Company | Display screen with graphical user interface |
USD962256S1 (en) | 2020-05-14 | 2022-08-30 | The Procter & Gamble Company | Display screen with graphical user interface |
KR102396376B1 (ko) * | 2020-07-16 | 2022-05-10 | (주) 코코리색채연구소 | 멜라닌 지수 및 헤모글로빈 지수를 기초로 한 화장품 추천 방법 및 그 디바이스 |
US20220249397A1 (en) * | 2021-02-07 | 2022-08-11 | Function Better Inc. | Automated Dosing Protocol for Use of Cannabinoids or Other Psychoactive Substances |
CN113191985B (zh) * | 2021-05-24 | 2024-05-28 | 北京美医医学技术研究院有限公司 | 一种基于红外激光的智能祛斑系统 |
CN113450340B (zh) * | 2021-07-13 | 2024-03-19 | 北京美医医学技术研究院有限公司 | 一种皮肤纹理检测系统 |
US20230196553A1 (en) * | 2021-12-16 | 2023-06-22 | The Gillette Company Llc | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin dryness |
US20230196816A1 (en) * | 2021-12-16 | 2023-06-22 | The Gillett Company LLC | Digital imaging systems and methods of analyzing pixel data of an image of a skin area of a user for determining skin hyperpigmentation |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001000419A (ja) * | 1999-06-14 | 2001-01-09 | Procter & Gamble Co:The | 肌のイメージング及び分析システムとその方法 |
JP2013212177A (ja) * | 2012-03-30 | 2013-10-17 | Shiseido Co Ltd | 画像解析方法、画像解析装置、及び画像解析プログラム |
WO2014208067A1 (ja) * | 2013-06-28 | 2014-12-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 肌の官能評価装置および肌の評価方法 |
JP2015001921A (ja) * | 2013-06-18 | 2015-01-05 | 沖電気工業株式会社 | 人物属性提示装置及び人物属性提示方法 |
US20170238805A1 (en) * | 2016-02-19 | 2017-08-24 | Covidien Lp | Systems and methods for video-based monitoring of vital signs |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002521752A (ja) | 1998-07-24 | 2002-07-16 | ジャーグ コーポレーション | オブジェクト検索を実行するための分散コンピュータ・データベースシステム及びその方法 |
WO2000005664A1 (en) | 1998-07-24 | 2000-02-03 | Jarg Corporation | Search system and method based on multiple ontologies |
KR100408829B1 (ko) | 1998-12-29 | 2004-01-24 | 주식회사 대우일렉트로닉스 | 모델 기반 부호화 시스템에서의 얼굴 영상 세그멘테이션 방법 |
US7039222B2 (en) | 2003-02-28 | 2006-05-02 | Eastman Kodak Company | Method and system for enhancing portrait images that are processed in a batch mode |
US8472682B2 (en) | 2005-09-12 | 2013-06-25 | Dvp Technologies Ltd. | Medical image processing |
US7558416B2 (en) | 2006-10-02 | 2009-07-07 | Johnson & Johnson Consumer Companies, Inc. | Apparatus and method for measuring photodamage to skin |
EP2042095A1 (en) | 2007-09-26 | 2009-04-01 | Astron Clinica Limited | Methods and apparatus for quantifying photo-damage |
JP2009082338A (ja) | 2007-09-28 | 2009-04-23 | Masahiro Nakagawa | エントロピーを用いた肌の鑑別方法 |
JP5290585B2 (ja) | 2008-01-17 | 2013-09-18 | 株式会社 資生堂 | 肌色評価方法、肌色評価装置、肌色評価プログラム、及び該プログラムが記録された記録媒体 |
US8837832B2 (en) | 2010-05-18 | 2014-09-16 | Skin Of Mine Dot Com, Llc | Systems and methods for monitoring the condition of the skin |
JP4831259B1 (ja) | 2011-03-10 | 2011-12-07 | オムロン株式会社 | 画像処理装置、画像処理方法、および制御プログラム |
WO2015048222A1 (en) | 2013-09-25 | 2015-04-02 | The Procter & Gamble Company | Method and system for skin care consultation |
CN104156947B (zh) | 2014-07-23 | 2018-03-16 | 小米科技有限责任公司 | 图像分割方法、装置及设备 |
KR101701210B1 (ko) | 2014-10-02 | 2017-02-01 | 주식회사 엘지유플러스 | 피부 분석 결과 출력 방법, 이를 위한 장치 및 어플리케이션 |
CN104299011A (zh) | 2014-10-13 | 2015-01-21 | 吴亮 | 一种基于人脸图像识别的肤质与皮肤问题识别检测方法 |
KR20170062676A (ko) * | 2015-11-30 | 2017-06-08 | (주)아모레퍼시픽 | 피부 특성 시각화 방법 |
US11055762B2 (en) | 2016-03-21 | 2021-07-06 | The Procter & Gamble Company | Systems and methods for providing customized product recommendations |
US10818007B2 (en) | 2017-05-31 | 2020-10-27 | The Procter & Gamble Company | Systems and methods for determining apparent skin age |
CN109064438A (zh) * | 2017-06-09 | 2018-12-21 | 丽宝大数据股份有限公司 | 皮肤状态检测方法、电子装置与皮肤状态检测系统 |
US10719729B2 (en) * | 2018-06-06 | 2020-07-21 | Perfect Corp. | Systems and methods for generating skin tone profiles |
JP7395604B2 (ja) * | 2018-12-04 | 2023-12-11 | ジャン・ルオウェイ | 深層学習を用いた自動的な画像ベースの皮膚診断 |
JP7248820B2 (ja) | 2019-04-23 | 2023-03-29 | ザ プロクター アンド ギャンブル カンパニー | 美容的皮膚属性を決定するための機器及び方法 |
-
2020
- 2020-04-23 EP EP20724712.3A patent/EP3959724A1/en active Pending
- 2020-04-23 WO PCT/US2020/029422 patent/WO2020219612A1/en unknown
- 2020-04-23 US US16/856,305 patent/US11416988B2/en active Active
- 2020-04-23 JP JP2021561969A patent/JP7235895B2/ja active Active
- 2020-04-23 CN CN202080029868.8A patent/CN113767439A/zh active Pending
- 2020-04-23 KR KR1020217031975A patent/KR20210139309A/ko unknown
-
2023
- 2023-01-12 JP JP2023003110A patent/JP2023040229A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001000419A (ja) * | 1999-06-14 | 2001-01-09 | Procter & Gamble Co:The | 肌のイメージング及び分析システムとその方法 |
JP2013212177A (ja) * | 2012-03-30 | 2013-10-17 | Shiseido Co Ltd | 画像解析方法、画像解析装置、及び画像解析プログラム |
JP2015001921A (ja) * | 2013-06-18 | 2015-01-05 | 沖電気工業株式会社 | 人物属性提示装置及び人物属性提示方法 |
WO2014208067A1 (ja) * | 2013-06-28 | 2014-12-31 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 肌の官能評価装置および肌の評価方法 |
US20170238805A1 (en) * | 2016-02-19 | 2017-08-24 | Covidien Lp | Systems and methods for video-based monitoring of vital signs |
Also Published As
Publication number | Publication date |
---|---|
US11416988B2 (en) | 2022-08-16 |
KR20210139309A (ko) | 2021-11-22 |
US20200342594A1 (en) | 2020-10-29 |
JP7235895B2 (ja) | 2023-03-08 |
EP3959724A1 (en) | 2022-03-02 |
JP2023040229A (ja) | 2023-03-22 |
CN113767439A (zh) | 2021-12-07 |
WO2020219612A1 (en) | 2020-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7235895B2 (ja) | 美容的皮膚特性を視覚化するための装置及び方法 | |
JP7248820B2 (ja) | 美容的皮膚属性を決定するための機器及び方法 | |
TWI585711B (zh) | 獲得保養信息的方法、分享保養信息的方法及其電子裝置 | |
US9445087B2 (en) | Systems, devices, and methods for providing products and consultations | |
US9256963B2 (en) | Skin diagnostic and image processing systems, apparatus and articles | |
EP1189536B1 (en) | Skin imaging and analysis methods | |
US8290257B2 (en) | Method and apparatus for simulation of facial skin aging and de-aging | |
JP6243008B2 (ja) | 肌診断及び画像処理方法 | |
US20120044335A1 (en) | Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program | |
JP5261586B2 (ja) | メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム | |
US20080304736A1 (en) | Method of estimating a visual evaluation value of skin beauty | |
FR3135556A1 (fr) | Détection et visualisation de signes cutanés au moyen d’une carte thermique | |
CN117440849A (zh) | 护肤设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211018 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230224 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7235895 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |