JP2004038918A - 顔面の3次元画像を使用した分析 - Google Patents

顔面の3次元画像を使用した分析 Download PDF

Info

Publication number
JP2004038918A
JP2004038918A JP2002288305A JP2002288305A JP2004038918A JP 2004038918 A JP2004038918 A JP 2004038918A JP 2002288305 A JP2002288305 A JP 2002288305A JP 2002288305 A JP2002288305 A JP 2002288305A JP 2004038918 A JP2004038918 A JP 2004038918A
Authority
JP
Japan
Prior art keywords
image
subject
face
dimensional image
beauty
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002288305A
Other languages
English (en)
Inventor
Gilles Rubinstenn
ジル ルビンステン
Daniela Giacchetti
ダニエラ ジャケッティ
Francis Pruche
フランシス プリュシュ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LOreal SA
Original Assignee
LOreal SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=26698660&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2004038918(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by LOreal SA filed Critical LOreal SA
Publication of JP2004038918A publication Critical patent/JP2004038918A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032Determining colour for diagnostic purposes
    • A61B5/1034Determining colour for diagnostic purposes by means of colour cards
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/41Detecting, measuring or recording for evaluating the immune or lymphatic systems
    • A61B5/411Detecting or monitoring allergy or intolerance reactions to an allergenic agent or substance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/444Evaluating skin marks, e.g. mole, nevi, tumour, scar
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/445Evaluating skin irritation or skin trauma, e.g. rash, eczema, wound, bed sore
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/446Scalp evaluation or scalp disorder diagnosis, e.g. dandruff
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475User input or interface means, e.g. keyboard, pointing device, joystick
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/52Measurement of colour; Colour measuring devices, e.g. colorimeters using colour charts
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/52Measurement of colour; Colour measuring devices, e.g. colorimeters using colour charts
    • G01J3/524Calibration of colorimeters
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/45For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4519Muscles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/463Colour matching

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Dermatology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Vascular Medicine (AREA)
  • Epidemiology (AREA)
  • Theoretical Computer Science (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Immunology (AREA)
  • Primary Health Care (AREA)
  • Data Mining & Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Cosmetics (AREA)
  • Image Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)

Abstract

【課題】顔面の画像に関連する方法、作成、装置及びシステムににおいて美的特徴の美容分析及び/またはシミュレーションを容易にする。
【解決手段】当該方法の1つは、少なくとも対象者の顔面の取得画像を使用して、顔面の3次元画像の作成を容易化することを伴うというものである。当該方法は、さらに、顔面の3次元画像上に美的特徴の使用をシミュレーションすること、および/または、美容分析を可能にするための3次元画像を処理することの容易化を伴うというものである。
【選択図】   図1A

Description

【0001】
【発明が属する技術分野】
本発明は、1以上の顔面の画像に関連する方法、作成、装置およびシステムに関わるものである。別の観点から言えば、本発明は顔面の画像を使用した美容分析に関するものであってもよい。
【0002】
百貨店の化粧品売り場のような店頭では、多くの美容製品消費者に対し製品を評価する理想的な機構を提供している。この環境で消費者は様々な製品を試したり、製品の組み合わせを吟味したり、どの製品および製品の組み合わせが最も美的満足感を与えるかを判断することができる。結果的に、化粧品売り場での経験は消費者に対してだけではなく、売上を達成する機構としても強力な道具となる。
【0003】
しかし、従来の化粧品売り場での経験には欠点がある。該欠点とは、美容コンサルタントと一対一の面談が必要となることが多い点にある。そして、消費者が自由に行動できる場合でも、化粧品などの美容製品を塗布し、あるいは使用する過程には比較的時間がかかる。結果的に、先を急ぐ消費者は化粧品売り場を敬遠してしまうことになる。
【0004】
電子取引の出現により、多くのウェブポータルが販売用美容製品を提供している。このことにより、消費者は従来小売店が閉店されている時間帯でも便利に買い物をすることができる。しかし、製品および製品の組み合わせを物理的に検査する能力がないので、中には、気の進まないままオンラインで化粧品を購入してしまう消費者もいる。
【0005】
欧州特許公開公報第1134701号は、顔面の3次元メークアップシミュレーション用顧客サーバシステムを開示している。該サーバシステムは、店側の顧客から取得して伝達された3次元形式データに基づいてメークアップシミュレーションを実行できるメークアップシミュレーションユニットを具備する。
【0006】
該3次元形式データは複数のカメラから取得される。複数のカメラを使用するので、大規模なシステムの実施は困難となり得る。
【0007】
【従来の技術】
【特許文献1】
US5,751,829号公報
【特許文献2】
US6,091,836号公報
【特許文献3】
US6,260,024号公報
【特許文献4】
US6,293,284号公報
【特許文献5】
US2001/0011818号公報
【特許文献6】
US2001/0014868号公報
【特許文献7】
US2002/0024528号公報
【特許文献8】
US2002/0054714号公報
【特許文献9】
EP0226959号公報
【特許文献10】
EP1030267号公報
【特許文献11】
EP1134701号公報
【特許文献12】
EP1169964号公報
【特許文献13】
WO01/04840号公報
【特許文献14】
WO01/04838号公報
【特許文献15】
WO01/18674号公報
【特許文献16】
WO01/20517号公報
【特許文献17】
WO01/57771号公報
【特許文献18】
WO99/23609号公報
【特許文献19】
WO00/33271号公報
【特許文献20】
WO00/76398公報
【特許文献21】
WO01/77976号公報
【特許文献22】
WO01/80122号公報
【特許文献23】
WO01/87245号公報
【特許文献24】
WO01/91600号公報
【特許文献25】
WO01/91601号公報
【特許文献26】
WO02/03232号公報
【特許文献27】
WO02/05249号公報
【特許文献28】
EP1030267号公報
【特許文献29】
EP1134701号公報
【特許文献30】
WO98/20458号公報
【特許文献31】
WO00/43956号公報
【特許文献32】
WO01/46906号公報
【非特許文献1】
Yin WU, et al., ”A PLASTIC−VISCO−ELASTIC MODEL FOR WRINKLES INFACIAL ANIMATION AND SKIN AGING”, MIRALab, 1998.
【非特許文献2】
Catherine PELACHAUD, et al., ”Final Report to NSF of the Standards for Facial Animation Workshop”, The Institute for Research in Cognitive Science, University of Pennsylvania, IRCS Report 94−21, Nov. 1994, pp. 1−62.
【非特許文献3】
A. A. Bukharaev et al., ”AFM investigation of selective etching mechanism of nanostructured silica”, 19th European Conference on Surface Science, Madrid, Spain, Vol. 485, pt. 2, Sept. 5−8, 2000, pp. 1319−1324.
【0008】
本発明は、特に、美的特徴の美容分析および/またはシミュレーションを容易にすることを目的とする。
【0009】
本発明によって、複数のカメラを使用せずに単一の画像取得装置を使用して顔面の3次元画像を作成することができる。
【0010】
1つの特徴として、本発明は、化粧品売り場での経験の少なくとも何らかのシミュレーションを提供することができ、消費者が顔面の画像に美容製品を仮想的に適用することができる。これは、本発明が実施される方法に応じて、美容製品を選択する過程を効率よくし、消費者は、例えば従来型の店舗が閉店されている時間帯に様々な場所から買い物をすることができる。あるいは(または、さらに)、美容製品を仮想的に適用することで迅速に製品を検査する能力を与えることができ、および/または、特定の美容製品が個人の使用後の外観にどのような影響を与えるかについて何らかの指標を提供することができる。
【0011】
本発明の特定の特徴は、美容製品および/または美容分析と関連させて説明しているが、本発明はそれに限定されるものではなく、本発明の特徴のいくつかは他の分野でも使用することもできると解されたい。
【0012】
本発明の1つの特徴として、顔面の画像で美的特徴の使用をシミュレーションすることを可能にする方法がある。当該方法は、個人が顔面の作成用コンピュータプログラムを使用してシミュレーション顔面画像の作成を可能にすることを含む。該顔面の作成用コンピュータプログラムは、頭、目、鼻、唇、耳および/または眉を個人が選択することを可能にする。該方法は、表示装置上でのシミュレーション顔面画像の表示を可能にすること、および個人が美的特徴を選択することを可能にすることも含み得る。該方法はさらに、個人が、選択した美的特徴の使用を顔面のシミュレーション画像でシミュレーションすることを可能にすること、およびシミュレーションされた美的特徴を有するシミュレーション顔面画像の変更修正結果を表示装置上で視認することを可能にすることも含み得る。
【0013】
別の特徴として、顔面の3次元画像を使用して分析を可能にする方法がある。該方法は、対象者の顔が取得された少なくとも1つの画像を使用して顔面の3次元画像の作成を容易にすることを含む。該方法は、さらに、顔面の3次元画像での美容特徴の使用のシミュレーションを容易にすること、および/または3次元画像を処理して美容分析を可能にすることを含む。
【0014】
さらに別の特徴として、美容分析を可能にする方法がある。該方法は、表示装置における複数のテンプレートの表示を容易化することを含む。本明細書で使用される「テンプレート」という表現は、顔面の画像に組み込むことができる素材を反映した画像などの表示を指す。少なくともいくつかのテンプレートは、美容製品の使用をシミュレーションしている顔面部分を示すものである。該方法は、1つ以上の表示テンプレートの選択を可能にすることも含む。当該方法は、さらに、顔面のシミュレーション画像の表示装置上での表示を容易化することを含み、該顔面のシミュレーション画像には美容製品の使用をシミュレーションしている顔面の少なくとも一部分が表示される。ここで、該表示されたシミュレーションしている顔面部分は、選択されたテンプレートに相当する。
【0015】
本発明の別の特徴によれば、1つの方法は、推奨/選択された製品を補足する美容製品を少なくとも1つ推奨することを伴うものであってもよい。このような方法では、対象者に少なくとも1つの質問を提示し、前記質問に対する対象者の返答に基づいて第1美容製品を選択してもよい。該方法は、さらに、代表的な顔面の画像に第1美容製品の使用のシミュレーションを表示装置において表示可能にすること、および対象者から第1美容製品が満足するものであるかどうかについての示唆を受けることも含み得る。もし満足するものであれば、該方法は第1美容製品と補足的な第2美容製品のうち少なくとも1つを選択するものであってもよい。
【0016】
本発明による別の特徴は、美容製品の使用のシミュレーション時に自己像の色較正を可能にする方法を含むものであってもよい。こういった方法は画像取得装置を使用して対象者の身体部位(body region)の画像を取得するように対象者にプロンプトしたり、表示される画像の色を対象者の身体部位の実際の色と比較するように対象者にプロンプトすることを含み得る。対象者が相違を認識した場合、当該方法は、さらに、画像の色較正を可能にすることを伴うものであってもよい。
【0017】
本発明の別の特徴によれば、美容分析を可能にする方法は、対象者の顔面の画像の少なくとも1つを記録する方法に関して対象者に指示するものであってもよい。当該方法は、美容分析時および/または1つ以上の美容製品の使用のシミュレーション時に3−D表示を使用できるように、少なくとも1つの画像の、対象者の顔面の3次元画像への変換を容易化することを伴うものであってもよい。
【0018】
別の特徴としては、方法についての指令を保存するコンピュータで読取可能な媒体がある。
【0019】
別の特徴としては、方法を実行するように構成されたプロセッサを具備するシステムがある。
【0020】
前述の説明は、本発明の特徴のいくつかについての非常に簡潔な説明を読者に提供することを目的とするものであり、本明細書に記載および請求された多面的な発明の技術的思想を制限することを目的とするものではない。
【0021】
当該明細書に取り込まれ、その一部を構成する添付の図面は、本発明の特定の特徴を例示するものであり、明細書と共に本発明の原理を説明する役割をするものである。
【0022】
ここより、添付の図面に図示した、本発明の例示的な実施形態を詳細に参照する。同一または類似の部分には全添付図において同一の参照番号が付されている。
【0023】
本発明の1つの特徴は、顔面のシミュレーション画像に美的特徴の使用をシミュレーションすることができる方法およびシステムを伴うものであり得る。以下で詳述するように、当該方法およびシステムは、例えば、1つ以上の顔面の特徴を選択できる顔面作成用プログラムの使用による顔面のシミュレーション画像の作成を伴うものであってよい。
【0024】
図1Aは本発明による方法の一例を示すフローチャートである。以下に詳述するように、当該方法は、個人が頭部、目、鼻、唇、耳および眉のうち少なくとも1つを選択することができる顔面の作成用コンピュータプログラムを使用して、個人が顔面のシミュレーション画像を作成することを可能にし(S.10)、顔面のシミュレーション画像を表示装置上で表示することを可能にし(S.20)、個人が美的特徴を選択することを可能にし(S.30)、個人が、選択した美的特徴の使用を顔面のシミュレーション画像でシミュレーションし、シミュレーションされた美的特徴を有する顔面のシミュレーション画像の変更修正結果を表示装置上で視認することを可能にすること(S.40)を伴うものであってもよい。
【0025】
本明細書で使用される「顔面作成用コンピュータプログラム」という表現は、顔面部分および/または顔面の特徴を選択して顔面の画像を作成するために使用できる任意のコンピュータプログラムを示す。この表現は、警察、他の法執行機関、諜報関連機関およびセキュリティサービスなどで使用されるようなプログラムを含み、スケッチ画家が容疑者の似顔絵を作成する要領で、顔面の画像をシミュレーションするために、特定の顔面部分および/または特徴を選択して顔面の画像を作成する。顔面の画像作成用コンピュータプログラムはクライムラボソフトウェアと呼ばれるプログラムを含むが、そのようなソフトウェアに限定されるわけではない。
【0026】
同様に、本明細書で使用される「美的特徴」という表現は、美容製品、宝石類、眼鏡、ボディピアス(イアリング、鼻輪および他の形態のピアス)、刺青、および/または、対象者が実施を決断する場合に自身の顔面の外観を変更修正する可能性のある他のいかなる品目、物質、サービスまたは行為も示す。「美容製品」という表現は、個人が美容目的で使用するいかなる製品も示す。メークアップ用美容製品の例は、それに限定されないが、マスカラ、アイシャドウ、アイライナー、ファンデーション、コンシーラー、ブラシ、リップライナー、リップスティック、リップグロス、ヘアカラーリング、および対象者の容姿向上のために使用することができるいかなる物質も含む。
【0027】
前述したように、図1Aに示した方法は、個人が頭部、目、鼻、唇、耳および眉のうち少なくとも1つを選択することができる顔面の作成用コンピュータプログラムを使用して、個人が顔面のシミュレーション画像を作成することを可能にする(S.10)ことを含む。個人が顔面のシミュレーション画像を作成することを「可能にする」とは、直接的な行為を伴うものでも、間接的な行為を伴うものであってもよい。例えば、「可能にする」とは、ネットワークを介した、またはクーリエシステムのような他の経路による、顔面の作成用コンピュータプログラムへのアクセスを提供することを伴ってよい。顔面の作成用コンピュータプログラムの受信に用いられるネットワークの例として、インターネット等の公衆のネットワーク、電話ネットワーク、私設ネットワーク、仮想私設ネットワーク、ローカルエリアネットワーク、メトロポリタンエリアネットワーク、ワイドエリアネットワーク、アドホックネットワーク、または接続が有線か無線かにかかわらず遠隔なサイト間通信が可能ないかなる機構をも含む。より広い意味で、ネットワークとは、2以上のノードあるいは遠在する場所間の通信を可能にする機構を含む。クーリエシステムの例として、UPS, フェデックス等の郵便サービスまたは民間クーリエ、あるいは、顔面作成用コンピュータプログラムを物理的に送受する他のいかなる機構も含む。
【0028】
物理的な送付には、顔面の作成用コンピュータプログラムを格納するデータ格納装置を個人に送る場合がある。顔面の作成用コンピュータプログラムを送るために用いられるデータ格納装置は例えば、それに限定されないが、フロッピー(登録商標)ディスクのような磁気的な格納装置、コンパクトディスクおよびディジタルビデオディスクのような光学的な格納装置、有機的格納装置、DRAM、SDRAM、フラッシュメモリおよびメモリスティックといったランダムアクセスメモリ、または情報を格納可能な他のいかなる機構も含む。
【0029】
図2に例示したインターフェースを使用して、個人は、例えば
(1)頭部(例:無表情な)画像を選択し(U.10)、
(2)選択した頭部上に表示された一対の目を選択し(U.20)、
(3)選択した頭部上に表示された鼻を選択し(U.30)、
(4)同じく選択した頭部上に表示された唇を選択する(U.40)
ことができる。選択を可能にするために、顔面の作成用コンピュータプログラムは、例えば(図示されていない)複数の異なる頭部、複数の異なる目(U.50)、複数の異なる眉(U.60)、複数の異なる鼻(U.70)、複数の異なる唇(U.80)、および複数の異なる耳(U.90)を表示装置上に表示することができ、当該プログラムによって、ユーザは各表示された複数の顔面部分から対象物を選択することができる。図2Aの実施例に示したように、各異なる顔面部分についての選択可能なテンプレートが存在し得る。マウス、トラックボール、カーソル操作、ジョイスティック、タッチパッド、またはユーザにより操作される他の任意の要素などのポインティングデバイスを使用して、顔面の画像作成の際に顔面部分のテンプレートを選択することができる。あるいは、他のいかなる公知の選択技術が使用されてもよい。
【0030】
図2Aの実施例に示したように、当該プログラムは、顔面の各部分が選択されると、それが連続的に顔面の画像上に表示されるように設定することができる。あるいは(さらに)、当該プログラムは、複数の(または、全ての)選択が行われた後にだけ前記顔面の各部分が表示されるように設定してもよい。
【0031】
図3に示していないが、顔面作成用コンピュータプログラムによって、個人は、頭、目、鼻、唇、耳および/または眉の大きさおよび/または形状、および/または、顔面のシミュレーション画像の少なくとも一部の大きさおよび/または形状などの他のパラメータを選択することができる。まずユーザが顔面の画像タイプの生成されたカテゴリーを選択すると、選択すべき同様の選択肢が表示される。
【0032】
上述し、および図1Aに図示したように、当該方法はさらに、画像を表示装置上で表示することを可能にすることを含み得る(S.20)。画像の表示は、1以上の様々な直接的かつ間接的な方法で達成することができ、表示装置上に直接画像を表示すること、表示を容易化するソフトウェアへのアクセスを提供すること、ユーザ制御装置上での画像表示を可能にするネットワークアクセスを提供すること、専用の使用装置を提供すること、または、画像を直接表示する存在あるいはユーザが画像表示するのを助ける存在と協力することを含む。
【0033】
本発明による方法は、
(1) 顔面のシミュレーション画像に色合いを適用すること(加えること)、
(2) 顔面のシミュレーション画像に毛髪を選択すること、および/または、
(3) 顔面のシミュレーション画像に目の色を選択すること、
を含み得る。これらの各行為は、例えば図2に示されたユーザインターフェースと同様のユーザインターフェースを使用して個人によって達成されてもよい。あるいは、上記「表示を可能にする」の定義と同様に、本出願書類の至る所で用いられる「適用する」および「選択する」という表現も、例えば、ソフトウェアへのアクセスを提供すること、ネットワークサイトへのアクセスを提供すること、ユーザを助ける第三者と協力すること、またはユーザが適用および選択するのを助ける行為に何らかの方法で参加することなど、直接的かつ間接的な行為を含むものとして解されたい。
【0034】
顔面のシミュレーション画像に次元および照明効果を追加するために公知の自動または半自動技術を使用することができる。例えば、仮想的な光源をスクリーン右上などの画像内のどこかに規定することができる。色は一様に適用することができ、そのとき、仮想的な光源の位置に基づいて色相、濃淡および陰影を修正してよい。Unix(登録商標)対応のプログラム、Povrayは、例えば光を考慮して3次元画像に次元的な特徴を加える。こういった技術あるいは公知技術を使用すれば、選択可能な顔面部分を2次元または3次元の形式のどちらかで表示しながら、顔面のシミュレーション画像を3次元画像とすることができる。また、顔面のシミュレーション画像は2次元画像としてもよく、選択可能な顔面部分は2Dまたは3Dのどちらかとしてもよい。
【0035】
当該方法が顔面部分のテンプレート(唇、目など)を伴う場合、前記テンプレートは作成時にセグメント化されてもよい。各テンプレートは、顔面部分の相対的な次元が予め規定され、色が非均一となり次元と共に変化するように、顔面部分の次元的な特徴を具現化する形態学的レクリエーションであってもよい。
【0036】
当該方法は、個人が複数の身体外部の状態のうち少なくとも1つを選択するのを可能にすることと、顔面のシミュレーション画像上での選択された身体外部の状態のシミュレーションを可能にすることを伴ってよい。図2Bは、顔面のシミュレーション画像U.40などにおいて外観に現れる皺の数またはその他の肌の状態が増減するように移動可能な可動制御要素U.92を有するユーザインターフェースを例示している。図2Cは、身体外部の状態を表示する形式のテンプレート(様々な外観の皺U.95、U.96、U.97、U.98など)を選択し、該選択されたテンプレートの身体外部の状態が顔面のシミュレーション画像U.40上に現れるようにすることができるユーザインターフェースを例示している。図2Aの実施例で示されたように顔面部分のテンプレートを用いて顔面のシミュレーション画像U.40を作成する際に、複数の顔面部分のテンプレートのうちの1つを、選択された身体状態のテンプレートに対応する身体状態にさらに重ねて表示することができる。
【0037】
例えば、最初に個人が特定形状の額を表示する額のテンプレートを選択し、次に皺を有するテンプレートを選択し、額のテンプレート上に重ね合せてもよい。対象者が身体外部の状態に相当するテンプレートの選択肢を有するので、個人の視点から顔面のシミュレーション画像を作成することができ、個人が自己の顔面の画像をシミュレーションすると、自己の身体外部の状態の実際の状態をより適切に表現し得る。このような情報は、個人に推奨すべき美容製品を決定するなど、美容分析を行うために顔面のシミュレーション画像を用いる際に役立つ。
【0038】
データベースは各テンプレートを保存してもよい。テンプレートは、皺のような肌の状態、肌の色、均質性、肌の色調、マイクロリリーフ、あるいは、他の何らかの肌の状態など、様々な異なる身体外部の状態のためにつくることができる。
【0039】
さらに、図1Aに示された方法は、個人が実際の肌の色調および実際の毛髪の色のうち少なくとも1つをシミュレーションするために顔面のシミュレーション画像に色合いを適用可能にすることをさらに含んでもよい。このステップの一部として、複数の異なる色を表示し、個人が複数の表示色から少なくとも1つを選択することができるユーザインターフェースを使用してもよい。本明細書全体で使用される、可能にするとは、本明細書で説明される直接的かつ間接的な行為を含む。
【0040】
同様に、上述し、また図1Aに図示したように、本発明による方法は、さらに、個人が1つ以上の美的特徴を選択可能にすることを含むことができる(S.30)。個人はコンピュータと人間の対話式技術を使用して美的特徴を選択してもよい。このような技術は、それらに限定されるわけではないが、プルダウン式のメニュー、リスト、ボタン、スクロールバーなど、ポインティング装置を使用したものか、あるいは他のいかなるユーザインターフェース構成要素を含むものであってもよい。例えば、個人が美的特徴を選択することを可能にするとは、複数の美的特徴を表示装置上に表示可能にし、個人がその表示のうち1つを選択可能にすることを含むものであってもよい。これは、以前に説明したように、直接的または間接的に行われてもよい。したがって、個人にソフトウェアへのアクセスを提供することは、美的特徴の選択を可能にするという意味の範囲内にある。
【0041】
さらに、個人が美的特徴を選択することを可能にするとは、個人が美的特徴のための色を選択することを可能にすることを含んでもよい。このような選択は、例えば、上述のいかなるユーザインターフェース構成要素を用いて行われてもよい。
【0042】
本発明による方法は、さらに、個人が顔面の画像上で選択された美的特徴の使用をシミュレーションし、シミュレーションされる美的特徴を有する顔面のシミュレーション画像の変更修正を表示装置上で視認することを可能にすることを含むものであってもよい(図1AのS.40)。これは、ホログラフィ、光画像化、モーフィング、および/または他の画像処理機構など公知の画像処理技術を利用して、単に顔面の画像上に美的特徴を提示することを含むものであってもよい。処理前と処理後の例がそれぞれ図3Aと図3Bに示されている。図3Aに示したように、個人は、上述の顔面の作成用コンピュータプログラムを使用して作成した最初の顔面のシミュレーション画像(U.100)から開始してもよい。個人がメークアップ(リップスティック、アイシャドウなど)のような1つ以上の美的特徴を選択すると、顔面の画像に美的特徴の使用をシミュレーションすることができ、(図3BのU.110に示されたような)シミュレーションされた美的特徴を有する顔面のシミュレーション画像の変更修正を表示装置上で視認することができる。各美的特徴は、各特徴の選択とほぼ同時に表示されるかあるいは時間的な遅延が起こり得る。
【0043】
さらに、個人が顔面の画像上に選択した美的特徴の使用をシミュレーションすることを可能にすることは、個人がシミュレーションされる美的特徴を用いて変更修正するべき顔面の画像の一部分を選択可能にすることを含んでもよい。
【0044】
本発明の実施形態は、個人が選択肢を再度呼び出すために、顔面のシミュレーション画像と修正された顔面の画像の格納を可能にすることを含むものであってもよい。こういった画像は本明細書で説明される格納装置のいずれに格納されてもよい。
【0045】
個人が、自己の顔面の自己評価に基づいて顔面のシミュレーション画像を変更修正できるようにしてもよい。例えば、ある例で、最初の顔面の画像の作成には、主な顔面の特徴の形状および配置の規定を行うものであってもよいが、肌の色調および肌目などの極め細かい細部を省略してもよい。よって、個人は、実際の顔面の自画像を自己評価するように促す少なくとも1つの質問事項を提示される場合がある。例えば、個人は、自己の肌が滑らかあるいは荒れているかを問われる。こういった質問は、それに限定されないが、肌の色調、肌の色、毛髪の色、目の色、あるいは、他のいかなる個人の可視的な特徴に関連するものであってもよい。前記質問に応答することにより、顔面のシミュレーション画像が自動修正されてもよい。また、ユーザは、図2Bと2Cと関連して説明した、画像に適用する特徴を選ぶこともできる。例えば、ユーザには複数の肌の色調の選択肢が提供されてもよいし、あるいは、グラデーションバーから適切な肌の色調を選べるものであってもよい。
【0046】
美的特徴が化粧品であるとき、選択した化粧品の使用のシミュレーションは、顔面のシミュレーション画像に化粧品を適用する行程のシミュレーションを含むものであってもよい。これには、ユーザが化粧品をどのように適用すべきかを更によく理解できるように、例えば、化粧品アプリケータのシミュレーション動作を含んでもよい。例えば、図3Bはメークアップを施すために使用される化粧品アプリケータを図示している。このようなシミュレーションは、例えば、公知のアニメーション技術を用いて達成されてもよいし、マスカラブラシ、アイライナー、リップスティック、リップグロス、リップライナー、および対象者に化粧品を適用する際に使用する他の何らかの物理的な装置など、公知のアプリケータのシミュレーションを含むものであってもよい。
【0047】
図1の方法は、顔面のシミュレーション画像を人間の少なくとも一部分のシミュレーション画像に表示させることを含んでもよい。例えば、顔面のシミュレーション画像は、全身のシミュレーション像あるいは上半身のみのシミュレーション画像に表示させてもよい。別の例では、当該方法は、一品以上の衣料品の選択を可能にすることと、選択した衣料品を人のシミュレーション像に表示することを可能にすることを含むものであってもよい。また、(または、さらに、)当該方法は、宝石類またはファッションアクセサリーなど他のアイテムの選択および表示を行うことができる。人体の画像に顔面の画像を配置し、および/または、衣料の選択を可能にする商業的に市販されているタイプのソフトウェアの例には、My Virtual Model and Mayaがある。
【0048】
図1Bは、図1Aに類似した、しかし今度はユーザの視点に立った方法の、例示的なフローチャートである。当該方法は、顔面の作成用コンピュータプログラムを使用して顔面のシミュレーション画像を作成するものであり、顔面の作成用コンピュータプログラムを使用した顔面のシミュレーション画像の作成は、頭部、目、鼻、唇、耳および眉のうち少なくとも1つを選択する(S.60)ことと、表示装置上で画像を視認する(S.70)ことと、美的特徴を選択する(S.80)ことと、顔面の画像上に選択した美的特徴の使用をシミュレーションする(S.90)ことと、シミュレーションされる美的特徴を有する顔面のシミュレーション画像の修正を表示装置上で視認する(S.100)こととを含む。
【0049】
当業者には、図1Bの当該方法が図1Aに示された方法に対応することは自明であるので説明は省く。同様の対応関係が、以下に説明する図4Aと図4B、図6Aと図6B、および図10Aと図10Bにもある。
【0050】
図4Aは、本発明の例示的な特徴により、少なくとも1つの補足的な美容製品を推奨する方法のフローチャートである。以下に詳述するように、このような方法は、少なくとも1つの質問を対象者に提示し(S.120)、前記質問に対する対象者の返答に基づいて第1美容製品を選択し(S.130)、代表的な顔面の画像への第1美容製品のシミュレーションを表示装置上に表示可能にし(S.140)、第1美容製品が満足のゆくものであるかを対象者が示すことを可能にすること(S.150)を伴うものであってもよい。第1製品が満足のゆくものであると示されると、当該方法は、第1美容製品に補足的な第2美容製品を少なくとも1つ選択すること(S.160)と、顔面の画像への第1および第2美容製品のシミュレーションを表示装置上に表示可能にすること(S.170)とをさらに含むものであってもよい。
【0051】
本明細書で使用される「質問」という表現は、対象者からの返答を促すために対象者に提示される何らかの形態の質問またはプロンプトである。該質問は対象者が認識可能な何らかの方法で提示することができる。例えば、該質問は視覚的形式(テキストあるいは画像)または聴覚的形式で提示することができる。図5はユーザインターフェースに関連するテキスト形式の質問(U.160)の図解例を示している。
【0052】
1つの例示的な実施形態において、該質問は、対象者に身体的特性、生活様式情報、見た目のタイプ、または個人的な嗜好などの個人情報を入力するように促すものであってもよい。生活様式の例としては、それに限定されないが、自由精神的、冒険的、享楽的、現代的、および宗教的などが挙げられる。ルックスの例としては、それに限定されないが、保守的、現代的、ホット、クール、シック、およびレトロなどが挙げられる。
【0053】
上述のように、図4Aに示す方法は、質問に対する対象者の返答に基づいて第1美容製品を選択すること(S.130)を含むものであってもよい。第1美容製品の選択は任意の分析技術を使用して対象者の返答を分析することにより自動的に行うことができる。このような分析技術は、それに限定されないが、統計分析、モデルリング、テキスト分析、協調フィルタリング、人工知能、および第1美容製品の選択を対象者の返答に関連付ける他のいかなる技術でもよい。このような関連付けは、集団データ(populative data)または専門家の経験に基づいている。人工知能エンジンの例は、神経回路網、強制プログラム、ファジー論理、類別、数式処理、ファジー集合論、進化計算、人工頭脳学、データマイニング、近似推論、導関数自由最適化、およびソフト計算化の1つまたは複数を含む。人工知能技術は本明細書に包含する現在出願中の明細書に開示されている。
【0054】
或いは、本発明による方法により、第1番目に選択される製品は対象者が選択する種類から選択されてもよい。例えば、対象者がリップスティックに興味を示す場合には、分析技術は対象者の希望と合いそうなリップスティックを特定するために使用されてもよい。
【0055】
図4Aに示された方法は、代表的な顔面の画像への第1美容製品のシミュレーションを表示装置上に表示可能にすること(S.140)をさらに含むものであってもよい。第1美容製品のこのようなシミュレーションは、図1AのステップS.30について上述した方法と同様に達成することができる。図5の画像U.140は、顔面の画像上への第1美容製品(ファンデーションなど)の使用のシミュレーション例を示している。
【0056】
同様に、上述したように、図4Aの方法は、第1美容製品が満足のゆくものであるかを対象者が示すことを可能にすること(S.150)をさらに含んでもよい。例えば、対象者は、第1美容製品のシミュレーションを視認した後、選択が気入らずに始めからやり直すことを選ぶことができる。対象者が続行したければ、例えば、図5に示す選択を行うことが可能なインターフェースエリア(U.170)を使用して承諾を示してもよい。当該インターフェースは、表示ボタン、音声認識応答、またはユーザによる応答が可能な他の何らかの機構のうち1つまたは複数を含むことができる。このように、対象者が承諾の旨を示すことを可能にすることは、対象者が選択を行うことができるように、対象者に対し選択機構を提供することを含んでもよい。これは、対象者がネットワークを介するアクセスまたはパーソナルコンピュータ上へのロードによりソフトウェアを利用できるようにすることにより達成されてもよい。
【0057】
もし、ユーザが第1製品には満足しないと示した場合、当該方法は、代わりとなる第1美容製品を選択し、さらに、代表的な顔面の画像に適用される該代わりとなる第1美容製品のシミュレーションを表示装置上に表示可能にすることを含む。代わりとなる第1美容製品は、上述の分析技術のいずれかを用いて選択することができる。また、対象者は前述のように、代わりとなる第1美容製品が満足のゆくものであるかを示すことができる。
【0058】
第1製品が対象者にとって満足のゆくものであるとみなされると、図4の方法は、第1美容製品に補足的な第2美容製品が選択されるステップS.160に進む。本明細書に使用される「補足的な製品」という表現は、物理的、身体的、生物学的、あるいは、美学的に対象者と適合するもの1つを含む。物理的に適合するとは、例えば、有害なアレルギー反応を引起す可能性が低いことを含んでいてもよく、他の製品と物理的によく混合する。美的な適合性とは、2つの製品を一緒に適用した場合に美的魅力を有する(または相反する)ことを意味する。専門家および人口研究から導出される情報は、データ構造に格納され、補足的製品を識別するために必要に応じて使用される。当該データベースは、例えば、人工知能アルゴリズムを含め、前述の様々な方法のうちの1つの方法でサーチすることができる。
【0059】
第2美容製品の選択は、前述のような人工知能エンジンを使用することによる第2美容製品の識別を含むものであってもよい。
【0060】
図5の画像U.150は、(ファンデーションなどの)第1美容製品と共に顔面の画像上に表示された(リップスティックなどの)第2美容製品を例示している。
【0061】
図4Aに図示された方法では、表示装置上の代表的な顔面の画像への第1美容製品のシミュレーション(例えば図5のU.140)を、新規画像U.150に置き換えることができる。もう一つの方法として、図5に例示したように、画像U.140と画像U.150を同時に表示してもよい。
【0062】
第2美容製品が対象者にとって満足のゆくものでない場合、本発明による方法は、対象者がその旨を示し、代わりとなる第1美容製品について前述した方法と同様に、対象者が少なくとも1つの補足的第2美容製品を選択することを可能にすることを含む。
【0063】
1つまたは複数の満足のゆく製品が提示された時点で、対象者には販売情報が提供されてもよい。このような販売情報は、それに限定されないが、少なくとも1つの製品販売店の場所、製品販売を行うウェブサイトへのリンク、および/または製品の購入を可能にする情報を含むものであってもよい。
【0064】
図4Bは、対象者の視点に立った図4Aの方法のフローチャートである。少なくとも1つの質問に回答した(S.180)後に、対象者は、質問に対する対象者の回答に基づいて選択された第1美容製品のシミュレーションを顔面の画面上で視認する(S.190)ことができる。第1美容製品が満足のゆくものであると示される(S.200)と、第1製品を適用した顔面の画像上に同時に表示することにより対象者に対し補足的な製品を提示する(S.210)ことができる。
【0065】
図4Cと図4Dは、本発明による、少なくとも1つの提案された製品を受注する例示的な方法を図示した2ページに渡るフローチャートを説明している。当該方法は、対象者による美容製品のタイプの選択を可能にし(S.230)、対象者に1つ以上の質問をし(S.240)、少なくとも1つの選択された種類の美容製品を提案し(S.250)、対象者に提案した美容製品の使用をシミュレーションし(S.260)、その製品が満足のゆくものであるかを決定する(S.270)ことを伴うことができる。その製品が満足のゆくものである場合、当該方法は、対象者に別の美容製品を提案し(S.280)、第1製品と共に顔面の画像上で該別の美容製品の使用をシミュレーションし(S.290)、対象者が注文を望む(S.300)場合には対象者から受注することを含むことができる。対象者が、ステップS.270で第1番目に選択された製品に対し、またはステップ300で第2番目に提案された製品に対し不満を示すと、そのアルゴリズムはループし(それぞれ、S275およびS305を)、対象者が別の提案を見ることができるようにする。
【0066】
図6Aは、本発明による例示的な較正方法のフローチャートである。以下に詳細に説明するように、当該方法は、画像取得装置を用いて対象者の身体部位の画像を取得するように対象者にプロンプトする(S.330)ことと、対象者に対して取得画像を表示装置上で表示可能にする(S.340)ことと、表示される画像の色と対象者の実際の色とを比較するように対象者にプロンプトする(S.350)ことと、対象者が表示される画像の色と実際の色との相違を認識した場合に対象者が画像の色を較正することを可能にする(S.360)ことと、対象者が、色較正画像に少なくとも1つの美容製品の使用をシミュレーションすることを可能にすること(S.370)を含むことができる。
【0067】
本明細書で使用される「色較正」という表現は、それに限定されないが、対象者の肌の実際の色を表示装置上に表示される対象者の肌の色などと適合させることを含む。
【0068】
身体部位の画像をユーザに取得するようにプロンプトすること(S.330)は、ウェブサイトを通じて行われるか、あるいは、ユーザがアクセスする機械にプログラムを伝達することにより行われてもよい。プロンプトは、画像取得を実行する方法に関する指示を提供すること、画像取得装置にドライバを提供すること、画像取得ソフトウェアを提供すること、または画像取得を容易化するためにネットワークサイトへのアクセスを提供することのうち1つまたは複数を含むものであってもよい。本発明による画像取得装置の例は、それに限定されないが、ウェブカメラ、ディジタルカメラ、アナログカメラ、スキャナ、および身体画像の映像表示を取得する他のいかなる機構を含んでもよい。
【0069】
図6Aの方法は、ユーザに対して取得画像を表示装置上に表示可能にすること(S.340)をさらに含むことができる。図7は表示装置342上に表示される取得画像180を例示している。本明細書で使用される「表示を可能にする」という表現は、直接的な表示行為に限定されない。該表現は、表示させるソフトウェアへのアクセスをユーザに提供するなどの間接的な行為も含む。
【0070】
画像が表示されると、当該方法は、表示された画像の色を対象者の実際の色と比較するように対象者にプロンプトすること(S.350)を含むことができる。例えば、対象者は、表示された身体部位の色をその身体部位の実際の肌の色と比較するようにプロンプトされるものであってもよい。対象者へのプロンプトは、テキストコマンド、音声コマンドか、あるいは、比較を促す他の何らかの指令を通じて行うことができる。
【0071】
図7は、対象者が表示装置342の付近に手を置くことで、表示される画像180の色を手190の実際の色と比較する方法を図示している。ステップS.350のプロンプトは、対象者が比較を行うための案内または指示を与えることによりそれを実行するように促してもよい。例えば、対象者の手の肌の色(色調など)が前記身体部位の実際の肌の色と異なっている場合は、対象者は更に正確な比較を行うようにプロンプトされるものであってもよい(例えば、図7では、取得された顔面の画像を、対象者の手の肌の色ではなく対象者の実際の顔面の肌の色と比較している)。
【0072】
ユーザによる色の較正を可能にすることには、複数色の表示を可能にすることと、対象者の身体部位の実際の色に最も近い表示色の1つを対象者が選択することを可能にすることと、表示された画像を変更して選択した色を適用可能にすることが含まれてもよい。前述の作用は直接的または間接的に生じるものであってもよい。対象者にはそれぞれ異なる色に対応する複数の操作ボタン40a、40b、40cおよび40dが提示され、その中から特定の色が選択されてもよい(図7)。対象者には、例えば選択した色を反映するように表示画像を修正するための確認ボタン240を提示することができる。例示的な表示色の操作ボタン40c、40c、40cおよび40dの代替案として、連続的なスライドバーが提供されてもよいし、あるいは、対象者が能動的に色の識別表示を行うことができる他の何らかの操作機能が提供されてもよい。
【0073】
図7に図示された方法と同様に、対象者は実際の毛髪の色または実際の目の色を選択することが可能であってもよい。
【0074】
本発明により、ユーザは、色較正画像上に少なくとも1つの美容製品の使用をシミュレーションすることができる(S.370)。これは美容製品のシミュレーション操作260を提供することにより可能である(図7)。このような操作ボタンは、例えば、少なくとも1つの美容製品が美容製品の選択操作ボタン250を使用して複数の美容製品から選択された後に、対象者に提示されるものであってもよい。美容製品の選択は、ユーザにより操作されるものであってもよいし、あるいは、ユーザおよび/またはユーザの活動に関する他の何らかの情報に補足的製品を選択することなどにより自動的または半自動的に行われるものであってもよい。例えば、複数の美容製品に対応するリストなどが表示されるものであってもよく、それは、シミュレーション用の推奨オプションおよび/またはシミュレーション用の予め選択されたオプションを対象者に提供する。
【0075】
図6Bは、図6Aと同様の方法をユーザの視点から示している。当該方法は、画像取得装置を使用して身体部位の画像を取得する(S.390)ことと、表示装置上で取得した画像表示を視認する(S.400)ことと、表示画像の色を身体部位の実際の色と比較する(S.410)ことと、表示画像と身体部位の実際の色との間に相違が認識された場合に画像の色を較正する(S.420)ことと、色較正画像上に少なくとも1つの美容製品の使用をシミュレーションすること(S.430)を含むことができる。
【0076】
図8は、顔面の3次元画像を使用した分析を可能にする例示的方法のフローチャートである。この図に示されたように、当該方法は、対象者の顔面の取得画像を少なくとも1つ使用して顔面の3次元画像の作成を容易化すること(S.440)を含む。本明細書の様々な箇所で説明したように、「容易化する」とは、直接的または間接的な行為に関する。例えば、「作成を容易化する」という表現は、少なくとも1つの対象者の取得画像に基づいて3次元画像を作成するソフトウェアへのアクセスを提供することを含むものであってもよい。ソフトウェアへのアクセスは、サーバにソフトウェアを保存するような、ウェブサイトまたは他の何らかのネットワークロケーションを通じて提供される。ソフトウェアはユーザが管理および制御する装置に格納するために提供されるものであってもよい。例えば、ソフトウェアを含むメモリ格納装置を対象者に提供してもよい。
【0077】
更に別の実施形態では、ソフトウェアを内蔵する専用装置が対象者の使用のために提供されてもよい。例えば、該専用装置は販売店に設置されてもよいし、小売店または美容施設などの販売施設に設置されるコンピュータであってもよい。
【0078】
3次元画像の作成にはいかなる公知技術も用いることができる。例えば、3次元画像を作成する技術は、映画産業において「The Matrix」、「Toy story」および「Final Fantasy」などの映画の製作に使用されている。これら公知技術には、現実の俳優をマッピングするものもある。
【0079】
3次元画像の作成の容易化は、対象者の1つまたは複数の取得画像を使用して3次元画像の作成を容易化することを伴うものであってもよい。単一の2D取得画像を使用する場合、3次元画像の作成は、3次元画像を作成するための3次元フレーム上に仮想的な方法で取得画像を適用することを伴うものであってもよい。このような3次元フレームは、データベースに格納されるフレームであってもよいし、格納データまたは入力データに基づいて生成される生成フレームであってもよい。例えば、3次元フレームはバーチャルワイヤメッシュ状である。
【0080】
顔面の3次元画像を作成するために使用される取得画像は、対象者が取得するものであってもよいし、あるいは、別の個人、存在または装置が取得するものであってもよい。取得画像はデータベースまたはいかなる形態のデータ格納媒体に格納された画像であってもよい。
【0081】
当該方法は、一枚以上の対象者の顔面の画像を取得するように対象者にプロンプトすることを含むことができる。プロンプトは、図6AのステップS.330に関して上述した方法と同様に行われ、該プロンプトは画像を取得する方法についての指示をユーザに与えることを含んでもよい。前記プロンプトは、ウェブカメラ、ディジタルカメラ、アナログカメラ、スキャナーまたは他の何らかの画像取得装置を用いて1枚以上の顔面の画像を取得するように対象者を導くものであってもよい。3次元画像を作成するために複数の取得画像が使用される際、取得画像は図9Aに図示された正面図U.300および図9Bに図示された側面図U.310などのように、異なる視点から取得された画像であってもよい。別の例では、対象者が画像取得装置の正面で自己の頭部を回転してもよく、画像取得装置は連続動作を取得してもよいし、あるいは、一連の不連続画像をスナップ撮影してもよい。
【0082】
当該方法は、対象者の位置から遠隔な位置へ取得画像を転送する方法について対象者に指示すること、遠隔な位置で取得画像を受信すること、および/または前記位置で3次元画像を作成することを含むことができる。本明細書で開示した何れの通信手段も前述の転送を可能にするために使用できる。
【0083】
図8で図示したように、当該方法は、顔面の3次元画像上での美的特徴の使用のシミュレーションおよび/または美容分析を可能にするための3次元画像処理を容易化すること(S.442)も含むものであってもよい。直接的な行為に加えて、「顔面の3次元画像上での美的特徴の使用のシミュレーションおよび/また3次元画像処理をを容易化すること」は、前述の様々な方法の1つでユーザにソフトウェアへのアクセスを提供する間接的な行為を含んでもよい。このようなソフトウェアは「シミュレーション」、「処理」またはその両方の組み合わせを実行するために構築されたソフトウェアであってもよい。
【0084】
「3次元表示上での美的特徴の使用のシミュレーション」を容易化することは、図1の方法と図3Aと図3Bに図示された例に関して上述した方法と同様に、対象者が顔面の3次元画像に1つ以上の美的特徴(化粧品など)の使用のシミュレーションを可能にすることを伴うものであってもよい。対象者には、複数の異なる美的特徴から美的特徴の選択オプションが与えられることができる。美的特徴は、図1A、図3Aおよび図3Bに関して前述した美的特徴のいずれでもよい。美的特徴がメークアップのような美容製品であるときは、3次元画像の使用により美的特徴のシミュレーションが更に現実的に見えるようにすることができる。
【0085】
顔面の3次元表示に美的特徴の使用をシミュレーションすることは、画像処理技術を使用して成し遂げられる。1つの例示的な実施形態において、特定の美的特徴を適用する3次元画像のエリアを「マッピングする」ために公知の画像処理技術を使用することができる。例えば、3次元エリアの唇の位置は、唇のメークアップをシミュレーションするエリアとして定義されるようにマッピングすることができる。美容製品のような美的特徴は、ユーザにより直接的に、または上述のように自動的にシミュレーションのために選択されてもよい。1つの実施形態において、美的特徴は、マスカラ、アイシャドウ、アイライナー、ファンデーション、コンシーラー、ブラシ、リップメークアップ、ヘアカラーリング、または、対象者の美的外観を向上させる他の何らかの製品などのメークアップ製品でありうる。
【0086】
3次元画像は、提案された美容製品を使用した結果、対象者の顔への意図された修正を反映するように修正される。いかなるモーフィング技術を用いてもよい。
【0087】
当該方法は、図1Aの方法に関して上述したように、3次元画像を人間の像上に表示することを可能にすることと、衣類、宝石類、あるいは、像用の他品目の選択を可能にすることも含むものであってもよい。
【0088】
本発明の実施形態により、1つの方法は、対象者が複数の異なる仮想的観点から3次元画像の視認を可能にすることを含むものであってもよい。対象者は、3次元表示を視認する仮想的観点を修正することができてもよい。これは、一連の透視画像を表示するソフトウェアへのアクセスを対象者に提供することにより行うことができる。また、該ソフトウェアは、対象者が様々な視点を選択的に切り換えることを可能にすることができてもよい。さらに別の方法では、ユーザには、2面のうち少なくとも1面において選択的に顔面の画像を回転するための1つまたは複数のスライドバーが提供されてもよい。
【0089】
視点を切り換えることにより、ユーザは、1つ以上の美的特徴が自分の顔にどのように現れるのかを自覚することができる。当該方法は、対象者が1つ以上の美的特徴を購買することを可能にする情報が提示されることおよび/またはそのような購入注文を受注することを伴うものであってもよい。例えば、対象者が見たものを気に入ったとき、対象者はネットワークを介して視認した美的特徴を電子的に購買することができてもよい。当該ネットワークは、3次元表示ソフトウェアを具備したネットワークと同一のものであってもよい。
【0090】
「美容分析を可能にするための顔面の3次元画像処理」を容易化することは、様々な異なる行為のうちいずれか1つを含むことができる。例えば、該処理は、3次元画像中の1つ以上の身体外部の状態を識別すること、および/または、身体外部の状態の向上を反映するように3次元画像を修正することを伴うものであってもよい。1つの例示的な実施形態では、ステップS.442の容易化は、顔面の3次元画像の低速度撮影によるシミュレーションの表示を容易化することを伴ってもよい。
【0091】
1つの例示的な実施形態では、3D画像の作成時に使用される顔面の取得画像が外部的な状態を含んでいる場合、ステップS442の容易化は、3次元画像を介した身体外部の状態の分析を含んでもよい。このような分析は、対象者の位置から遠隔な位置から行うこともできる。例えば、遠隔地のコンサルタントとは、3次元画像を使用して外部的な状態を分析する専門家である。当該分析は、上述したような3次元画像の角度を変更することを伴うものであってもよい。さらに、当該方法は、少なくとも部分的に身体外部の状態の分析に基づいて、対象者に美容製品を提示すること(本明細書に開示された通信手段のいずれかを介して推奨する美容製品を送信すること等)も含んでもよい。
【0092】
別の例において、ステップS.442の容易化は、身体外部の状態を分析するように構築されたソフトウェアへのアクセスを対象者に提供することを含んでもよい。例えば、該ソフトウェアは、身体外部の状態の範囲および程度を識別することができるなどの、画像処理技術を使用することができてもよい。該ソフトウェアは、対象者に美容製品を提案するように構築されてもよい。前述したような論理アルゴリズムは、外部の状態に処置を施す際に使用するのに適切な美容製品を識別するものであってもよい。
【0093】
コンピュータグラフィック技術は、マルチ次元画像を生成するためおよび/または対象者の身体外部の状態をシミュレーションするために使用されてもよい。このような技術は、時間経過後の身体外部の状態の向上をモデル化するためにも使用されてもよい。例えば、人間の顔面の3次元または2次元画像を、辺または点で定義することができる。次に、それらの点を結び、人間の顔に相当する対象物のワイヤフレーム完成予想図を作成してもよい。1つの例示的な実施形態として、Facial Definition Parameter(FDP)を特徴とするMPEG−4フェイシャルメッシュを使用することができる。次に、対象者の2次元画像がワイヤフレーム面に適用されうる。対象物を光源で照らすことにより陰影を表示してもよい。面は、多角形またはBスプラインパッチで表現してもよく、あるいは、他の何らかのコンピュータグラフィック技術により表現してもよい。人体構造上の身体外部の状態をモデル化するために、OpenGL, Renderman またはVRMLなど、いずれのグラフィックアプリケーションを使用してもよい。
【0094】
人間の顔は、該人間の顔を表示する上で筋肉パッチを表現するBスプラインパッチによりモデル化することができる。顔面の筋肉をBスプラインパッチとして表現する一環として、筋肉繊維の性質および方向を考慮してもよい。一般的に、顔面の筋肉には線形筋と括約筋の2種類がある。線形筋は、眉を隆起させる前頭筋の主動筋のような骨格に付着する方向に収縮する。もう一方の括約筋は、線形筋および括約筋を共に拡張する口輪筋のような架空中央地点の周囲で収縮する。例示的な実施形態では、線形筋をシミュレーションするために開口したBスプラインパッチを使用する一方で、括約筋をシミュレーションするために閉口したBスプラインパッチを使用してもよい。
【0095】
人間の顔は、頭蓋骨、筋肉層、外皮層および筋肉層と外皮層間の結合組織からなる層構造である点に注目してモデル化することができる。外皮と筋肉を結合する組織は、架空のスプリングを使ってシミュレーションすることができる。こういったモデルは、本明細書に包含する” A Plastic−Visco−Elastic Model for Wrinkles in Facial Animation and Skin Aging,” (Wu他による)において説明されている。1つの例示的な実施形態にこの顔面のモデルを使用し、顔面の動きにともなう変形が表示されてもよい。顔面の動きの伸縮性だけでなく、老化と共に進行して結果的に皺となる肌の柔軟性も、この顔面のモデルの一部に取り入れてもよい。
【0096】
前述モデルの変形版を使用する場合、1つの例示的な実施形態として、皺のような身体外部の状態をシミュレーションすることができる。皺の追加を、顔面の画像の既存する数学的モデルへの入力として使用し、顔面の画像を適宜修正してもよい。例えば、皺が追加される顔面の画像の一部に関連する柔軟性の重み係数を、皺を追加するシミュレーションを行うために変更することができる。1つの実施例では、対象者が自己評価プロンプトに返答する際に、画像の数学的モデルを変更できる。別の実施例では、ユーザが(皺除去剤などの)美容製品を選択することができ、画像に関連する数学的モデルが、該選択された美容製品の効果を考慮して変更される。
【0097】
他のモデルおよび/または数学的技術がユーザの自己評価および/または美容製品の効力をシミュレーションするために使用されてもよい。随意で前記モデルおよび技術を老化の影響をシミュレーションするために使用してもよい。1つの例示的な実施例として、物理的モデルよりも幾何学的なモデルが身体外部の状態をシミュレーションするために使用してもよい。
【0098】
図10Aは、美容分析を可能にする方法の一例を示すフローチャートである。当該方法は、表示装置上に、少なくとも一部が美容製品の使用をシミュレーションした顔面部分の表示である複数のテンプレートの表示を容易化する(S.550)ことと、表示されたテンプレートの少なくとも1つの選択を可能にする(S.560)ことと、表示装置上に、選択した少なくとも1つのテンプレートに応じて美容製品の使用をシミュレーションした、少なくとも1つの表示された顔面部分を含む顔面のシミュレーション画像の表示を容易化すること(S.570)を含む。この例の少なくとも複数のテンプレートは、美容製品の使用をシミュレーションした体の一部または複数の部分を表すように構成されてもよい。例えば、美容製品がメークアップ用である場合、少なくとも複数のテンプレートは既にメークアップされた体の一部または複数の部分を表すように構成される。
【0099】
上述したように、当該方法は、複数のテンプレートの表示を容易化する(S.550)ことを含む。表示の容易化は、(テンプレートの表示などの)直接的な行為、あるいはソフトウェアへのアクセスの提供または本明細書で説明した他の形態を含む他の何らかの形態の間接的な行為などの、間接的な行為を伴うことができる。
【0100】
図10Cは、様々な美容製品の使用をシミュレーションしたテンプレートの一例を図示している。図10Cの実施例に示したテンプレートは、目のグループのテンプレート710、頬のグループのテンプレート720、および唇のテンプレート730を含む。目の各テンプレート710は、異なるアイシャドウメークアップを使用するシミュレーションを含み、頬の各テンプレート720は、異なるブラシメークアップを使用するシミュレーションを含み、唇の各テンプレート730は、リップスティック、リップグロスまたはリップライナーなどの異なるリップメークアップ製品を使用するシミュレーションを含む。各グループの各テンプレートは、異なる色、異なるきめ、異なるブランド、異なる成分、および/または各グループのテンプレートと他の何らかの相違を有するメークアップ製品をシミュレーションしたものにすることができる。例えば、第1番目の目のテンプレート710は、他の目のテンプレートでシミュレーションされたアイシャドウ製品とは異なる、色、きめ、ブランドおよび/または成分を有するアイシャドウメークアップをシミュレーションすることができる。そのメークアップは、マスカラ、アイシャドウ、アイライナー、ファンデーション、コンシーラー、ブラッシャー、リップメークアップ、リップスティック、リップグロス、およびヘアカラーリングの中から選択した化粧品とすることができる。
【0101】
図10Cの実施例は、異なるメークアップシミュレーションに関するものであるが、図10Aのフローチャートに図示された例示的な方法は、他の種類の美容製品の異なるシミュレーションを伴ってもよいと解されたい。
【0102】
図10Cの実施例に示したように、前記テンプレートは、(テンプレート710のグループ、テンプレート720のグループ、テンプレート730のグループなどの)テンプレートのグループを含んでもよく、グループ内の各テンプレートは、異なる美容製品をシミュレーションした実質的に同一形状の顔面部分を有する。
【0103】
当該方法の1つの実施例で、複数のテンプレートのうち少なくとも一部は、異なる形状の顔面部分を有するテンプレートのグループを含むものであってもよい。このような実施例は、図1Aおよび2A〜2Cに関連して上述した方法の特徴のうち一部を含んでもよい。随意で、図10Aに関連する方法は、図2Aと同じテンプレート構成を使用してもよく、少なくとも該テンプレートの一部は、唇、目、頬、眉、鼻、耳、および/または異なる形状および/または大きさを有する他の顔面部分を表示したものである。
【0104】
当該方法は、テンプレートを格納するデータベースへのアクセスを保持、利用、および/または提供することも伴うことができる。
【0105】
図10Aに図示したように、当該方法は、さらに、表示されるテンプレートのうち少なくとも1つを選択可能にすること(S.560)を含む。該可能にすることは、本明細書で説明した何らかの直接的または間接的な行為によって行うことができる。例えば、選択機能を有するソフトウェアへのアクセスを提供することにより行われてもよい。1つまたは複数のテンプレートを、何らかの公知の方法で選択することができる。例えば、図2Aの方法に関する選択技術および/または本明細書で説明した他のいかなる方法も使用することができる。
【0106】
別の実施例で、図10Aの方法は、個人が複数の異なる身体外部の状態のうち1つを選択可能にすることと、顔面のシミュレーション画像上で選択した身体外部の状態のシミュレーションを可能にすることを含むものであってもよい。例えば、前記可能にすることは、図2Bおよび/または図2Cと類似のユーザインターフェースの使用を可能にするなどして、図1Aの方法に関して説明した方法と同様に行うことができる。
【0107】
上述したように、図10Aの方法は、表示装置上に、少なくとも1つの選択したテンプレートに応じてシミュレーションを行った顔面部分に美容製品の使用をシミュレーションした、少なくとも1つの表示された顔面部分を含む顔面のシミュレーション画像の表示を容易化すること(S.570)も含む。S.550の容易化と同様に、S.570の容易化も、該表示を行うソフトウェアへのアクセスを提供するなど間接的な、または直接的な、いずれの行為を伴うものであってもよい。
【0108】
図10AのS.570の「選択されるテンプレートに応じたシミュレーションを行った1つまたは複数の顔面部分を含む顔面のシミュレーション画像の表示」は、図1AのS.40に関して上述した方法と同様に行うことができる。図10Cの方法の1つの実施例では、テンプレートグループ710、720、および730のうち1つから各テンプレートが選択されると、表示された顔面の画像700が、該選択されたテンプレートの画像に対応する顔面部分と美容製品のシミュレーションを含むように変更修正されてもよい。
【0109】
前記テンプレートおよび/または顔面のシミュレーション画像は、2次元または3次元のどちらでもよい。例えば、2次元のテンプレートは、シミュレーションされる顔面の3次元画像を形成するために使用されてもよい。
【0110】
図1Aに関して説明した方法と同様に、図10Aの方法の顔面のシミュレーション画像を、少なくとも人間の一部のシミュレーション像上に表示することができる。さらに、当該方法は、衣類、宝石類、および/または他のいかなる項目のうち少なくとも1品目の選択を可能にすることを伴うことができ、その場合、選択される項目がシミュレーション像上に表示される。
【0111】
当該方法は、さらに、実際の肌の色調および実際の毛髪の色のうち少なくとも1つをシミュレーションするために、前記顔面のシミュレーション画像に色合いの適用を可能にすることを含んでもよい。当該方法は、さらに、個人が選択的に呼び出すことができるように、顔面のシミュレーション画像の格納を可能にすることを含んでもよい。
【0112】
図10Bは、図10Aと同様の方法をユーザの視点から示している。図10Bの方法は、表示装置上で、少なくともその一部が美容製品の使用をシミュレーションした顔面部分の表示である複数のテンプレートの表示を視認すること(S.580)と、表示されたテンプレートの少なくとも1つを選択すること(S.590)と、少なくとも1つの選択したテンプレートに応じて美容製品の使用をシミュレーションした、少なくとも1つの顔面部分の表示を含む顔面のシミュレーション画像の表示を表示装置上で視認すること(S.600)を含む。
【0113】
本明細書で説明した1つ以上の方法に対応する指令は、コンピュータで読取可能な媒体に保存することができる。コンピュータで読取可能な媒体は、それに限定されないが、ハードディスク、フロッピー(登録商標)ディスクおよびCD−ROMなどのデータ格納装置、インターネットのようなネットワークから受信される搬送波、および/またはROMまたはRAMの形式を含め、本明細書で説明したいかなるメディアも含むことができる。
【0114】
本発明の1つの例示的な実施形態は、本明細書で説明した1つ以上の方法を実施するように構築されたプロセッサを有するシステムを含む。本明細書で使用する「プロセッサ」という用語は、1つ以上の方法を実施するように構築されたいかなる構造配置をも含むことを意図しており、データプロセッサまたは他形式のコンピュータ対応のプロセッサに限定されない。
【0115】
非限定的な実施例を用いて、図11は、本発明の特徴および原理の少なくとも一部を実施したシステム環境10を図解している。図11の説明図に図示されたように、システム環境10は、通信ネットワーク19を経由してホストサイト(1〜N)20〜26に接続されたユーザアクセス装置(1〜M)12〜18を含む。該ユーザアクセス装置12〜18の少なくとも1つを使用して、消費者などのユーザは、通信ネットワーク19を通じてホストサイト20〜26の少なくとも1つに接続することができる。本発明によるユーザアクセス装置は、何らかのコンピュータプラットフォームに基づくものでもよい。このようなユーザアクセス装置には、それに限定されないが、パーソナルコンピュータ、小型クライアント装置などのインターネットアクセスターミナル、パームパイロットなどの携帯型デバイス、またはコンピュータモジュールを有する他のいかなる装置も含む。ユーザアクセス装置は、家庭、店舗、モール、空港、鉄道の駅、バスの駅、またはユーザが有線または無線接続を使用して通信ネットワーク19に接続することができる他のいかなるロケーションをも含め、一箇所以上の様々な場所に配置することができる。
【0116】
本発明によるホストサイトの装置は、いかなる場所にも配置されうるコンピュータサーバまたは情報処理エンジンである。該ホストサイト装置は、通信ネットワーク19を介してユーザアクセス装置の少なくとも1つに接続されうる。
【0117】
通信ネットワーク19は、単独でまたはいずれかの適切な組み合わせで(PBXまたはPOTSといった)電話対応ネットワーク、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)、専用イントラネット、および/またはインターネットを構成する。さらに、有線および/または無線の構成要素およびシステムのいかなる適切な組み合わせも、通信ネットワーク19内に含むことができる。
【0118】
図11は、通信ネットワーク19に接続される各ユーザアクセス装置を図示しているが、必ずしもそのようにする必要はない。通信ネットワークを使用してホストサイトと情報交換をする代わりに、ユーザはロメガジップドライブまたはメモリステックデバイスといった取り外し可能な格納デバイス(図12に図示された商品42)を使用して単純に情報交換を行ってもよい。同様に、ホストサイトは通信ネットワーク19に接続される必要はなく、代わりに、取り外し可能な格納デバイスを介してユーザアクセスデバイスと情報交換を行ってもよい。顔面のシミュレーション画像、美容製品の推奨、色較正画像、または3次元画像などの情報は、E−mailメッセージ、電子ネットワークのウェブサイト、および/またはファックス送信など、いかなる電子通信形態も含め、任意の公知の方法により供給、搬送、伝送および受信することができる。該情報は、従来の郵便配達のような非電子的通信手段を介して送信することもできる。複数のユーザノードデバイスおよびホストが図11に図示されているが、さらに広い意味で、単一のホスト(および単一のユーザデバイス)も本発明に包含されるものと解されたい。
【0119】
図12に示すように、ユーザアクセスデバイスは、コンピュータモジュール30、ディスプレイ32、キーボード34、マウスなどのポインティングデバイス36、画像取得装置41および取り外し可能なデータ格納デバイス42を含むものであってもよい。図12は、パーソナルコンピュータプラットフォームに基づいた例示的なユーザアクセスデバイスを図示しているが、該ユーザアクセスデバイスは携帯型デバイスプラットホームまたは他の何らかのタイプのコンピュータプラットフォームを使用して実施されてもよい。従って、例えば、図11に図示された様々な構成要素を他の何らかのタイプの組み合わせにすべて組み合わせてユーザアクセスデバイスを提供してもよい。すなわち、前述の説明は何ら限定的なものでなく、本明細書で用いられる「ユーザアクセスデバイス」という表現は、上記の方法に関する少なくとも何らかの情報を(伝送するなど)供給する、および/または、(受信するなど)アクセスするために、対象者が使用するいかなる種類のデバイスに関係するものであってもよい。さらに、本発明は、図12の環境において、全体または一部分が実行されうる。
【0120】
図13は、図12のユーザアクセスデバイス12のコンピュータモジュール30の実施形態を示している。コンピュータモジュール30は、さらに、少なくとも1つのCPU50、少なくとも1つのメモリ52、および少なくとも1つの格納デバイス54を含むことができる。格納デバイス54は、例示的な実施形態において、3D画像化モジュール60、メークアップシミュレーションモジュール70、色較正モジュール80、推奨モジュール90、ユーザ側の美容製品データベース100、ユーザ側の画像データベース110を含んでもよい。
【0121】
システムが用いる情報は、一般的に格納デバイスに格納されるように記載したが、情報がハードディスク、フロッピー(登録商標)ディスク、およびCD−ROMのような第2格納デバイス、インターネットのようなネットワークから受信される搬送波、または、その他ROMまたはRAM形態など、様々なコンピュータで読取可能な媒体に格納されあるいはそこから読取られてもよいことは当業者にとっては自明である。1つの実施形態では、美容モジュール100の指令を遠隔な位置からダウンロードすることもできる。さらに、図12および13に図示したユーザアクセスデバイスの構成要素は単なる例示に過ぎないということに注目されたい。例えば、ユーザアクセスデバイスの構成要素は、もっと多くてもまたは少なくてもよく、および/または異なってもよい。
【0122】
図14は例示的なホストサイト130を図示している。ホストサイト130は少なくとも1つのCPU132、少なくとも1つのメモリ134、および少なくとも1つの格納デバイス136を含むことができる。格納デバイス136は、例示的な実施形態において、ホストモジュール140、サーバ側の美容製品データベース150、サーバ側の画像データベース160をさらに含むものであってもよい。CPU132により実行されると、ホストモジュール140は、ユーザ側のモジュールと接続できる。図示されていないが、通信ネットワーク19との通信を可能にするためにホストモジュール140が、ウェブサーバソフトウェアおよび他のインターネット関連アプリケーション、および/または、コンピュータネットワークのソフトウェアなどの他の構成要素と接続してもよいことは当業者にとっては自明である。
【0123】
本明細書では、美容製品の女性による使用に関して説明している。しかし、この説明による形態は一つの例に過ぎない。本発明は、性別を問わずに利用可能であり、美容業界に限定されるわけではないことを理解されたい。また、発明の機能的側面は、システムまたはネットワークの任意の場所から実行することができ、データソフトウェアはネットワーク内、独立のサイトまたは使用者または対象者の所有および操作に基づく媒体に存在するものであってもよいことを理解されたい。
【0124】
さらに、本発明の方法を実施するために使用し得る物理的機構(例えば、ハードウェア、ソフトウェア、ネットワーク、システム)は多く存在することを理解されたい。ネットワーク、ハードウェアおよびシステムは、様々な方式を採用することが可能であり、ソフトウェアやハードウェア機能は複数の個所に散在し得る。さらに、ここで開示された実施例によるシステム以外のシステムによって発明を実施することも可能である。従って、本発明の方法が特定の構造に限定されるわけではないことを理解されたい。
【0125】
さらに、その方法や部分は、電子環境、物理環境またはその組み合わせにおいて実施することができる。例えば、方法の一部または多くの部分が電子環境で実行され、方法の「購入」部分が店頭で行われるように、またはこれの反対にすることができる。
ここに示す発明と矛盾しない程度に、この出願および請求項における用語の解釈に、次の一般定義を用いることとする。定義が複数存在する場合、1つの包括的な定義として捉えるべきである。
【0126】
「画像」とは、2次元および3次元形式のもののうち、いずれか一方または両方を含む。本発明による特定の実施例において、3次元画像を作成するために異なる視点からの複数の画像を使用することが可能である。より広い意味で、単一の画像を使用することも可能である。「画像」なる用語は、実施形態によって、対象者に関する情報を導出するためまたは視認可能な画像を作成するために使用できる電子画像データ、または視認可能な画像のいずれも含み得る。画像は、対象者の身体の一部に対応する身体画像であってもよく、例えば対象者の顔面全体または対象者の顔面の一部を表すものであってもよい。画像は、対象者の身体の一部を示す詳細な映像(例えばディジタル画像または写真)および/または対象者の身体の一部を等高線で表したトポロジー図であってもよい。画像が、身体外部の状態を表すものであれば、その状態を実際に示す画像であっても、状態を象徴的に表した画像であっても構わない。画像は、実際の画像であっても、シミュレーション画像であってもよい。シミュレーション画像は、完全にまたは一部合成されたコンピュータ画像、既存の画像に基づく画像および保存された対象者の特徴に基づく画像を含み得る。
【0127】
「画像取得装置」とそれに類似する表現、さらには同様の機能を有する構造を表す表現は、ディジタルカメラ、ウェブカメラ、フィルムカメラ、アナログカメラ、ディジタルビデオカメラ、スキャナ、ファクシミリ、コピー機、赤外線映像装置、超音波映像装置、または対象者の外部の身体状態の画像、対象者の容姿の画像および/または対象者の肌の画像を取得することができる、その他のあらゆる機構のうちの1つまたは複数を含み得る。超音波装置は、肌の厚さ情報を取得したり、外部の特定箇所をマッピングするものであってもよい。従って、ここでいう「画像」とは、映像そのものより広い概念である。画像取得装置を幾つか組み合わせて使用することも可能である。例えば、フィルムカメラを使用して写真用紙で得られた画像を平床スキャナでスキャンすることで他の画像を作成することも可能である。
【0128】
「(画像を)取得する」という表現とその活用形は、画像を得るための画像取得装置の使用に関するものである。「取得」とは、画像を得るために画像取得装置を直接使用する行為をいうものである。さらに、取得するために行われる間接的な行動も含み得る。その点で、「取得」とは、画像取得装置に画像を取得させるために、ハードウェアへのアクセスや、クライアント側のアルゴリズムとサーバ側のアルゴリズムのうちの少なくとも一方へのアクセスを提供するといった、間接的な行為も含み得る。これは、画像取得処理を助けるためのソフトウェアを使用者に提供したり、ソフトウェアが存在するネットワーク上の場所へのアクセス権を使用者に提供することによって達成されるものであってもよい。さらに、本発明の特定の実施形態によれば、取得とは、対象者から画像を取得する旨の指示を受けたり、画像取得前に対象者に通知したり、画像が取得できたら対象者に通知することのうち1つ以上を含み得る。
【0129】
「画像処理方法」という表現とそれに類似する表現は、画像中の、肌の状態等の特徴を1つ以上識別することのできるソフトウェアプログラム、コンピュータ、特定のアプリケーション専用の集積回路、電子装置および/またはプロセッサを含み得る。このような方法は、2値化、画像分割、フーリエ変換、高速フーリエ変換(FFT)および/または離散的コサイン変換を含むことができ、この種の処理は、画像の全体または一部に対して行い、係数を得るものであってもよい。この技術分野において周知のように、係数に基づいて状態を確認することが可能である。状態を確認するために、ファジー論理、ニューラルネットワーク、遺伝プログラミングおよび決定木プログラミング等の人工知能技術を利用することもできる。また、特定の状態を発見するために、画像を1つまたは複数のディジタルフィルタに通すことも可能である。これらの例は、いずれの画像処理方法が使用されてもよいことを前提に例示したものに過ぎない。
【0130】
「ネットワークインタフェース」なる表現とそれに類似する表現は、ネットワーク上のノードまたは場所間の通信を補助するための機構をいうものである。ネットワークインタフェースは、例えば、バス、モデムまたはその他の入出力構造を含み得る。ネットワークインタフェースは、例えば、イーサネット(登録商標)通信網、インターネットプロトコル通信網、電話網、無線通信網、セルラー通信網、または2つ以上のモードあるいは遠在する場所間の通信を可能にする機構のうち、1つ以上のネットワーク内に存在する入力および/または出力モジュールに接続することができる任意のネットワークへの接続を可能にするものである。本発明のある実施形態において、ネットワークインタフェースはユーザインタフェースも含み得る。
【0131】
「ユーザインタフェース」なる表現とそれに類似する表現は、キーボード、キーパッド、マウス、トラックボール、電話、スキャナ、マイク、タッチスクリーン、ウェブカメラ、音声自動応答システム(IVR)、音声認識システムまたは情報を伝達するのに適した他の任意の機構等の部品を1つ以上含み得る。ユーザインタフェースは、さらに、有線、光または電磁波による無線接続の入力ポートを含み得る。ある実施形態では、ユーザインタフェースは、入力指示およびデータを受信するための他のコンピュータシステムへの接続を含み得る。ユーザインタフェースは、さらに、磁気および光ディスク等の記憶媒体に対して入力データを読み込んだり、書き込んだりするためのディスクドライブ等のデータ読取装置を含むことも可能である。
【0132】
ここでいう「身体外部の状態」、「肌の状態」および「実際の状態」とは、肌、歯、毛髪、眉毛、睫毛、体毛、顔面の毛、手の爪および/または足の爪、またはその他の人体外部の一部のうちの少なくとも1つの状態を示すものである。肌の状態の例として、弾力性、乾燥、蜂巣炎、発汗、老化、皺、黒色腫、脱皮、剥離、色の均一性、深い皺、肝斑、鮮明性、線、微小循環、てかり、柔らかさ、滑らかさ、色、きめ、マット、保水性、たるみ、柔軟性、応力、張り、弾力、皮脂の生成、清潔性、透光性、発光性、刺激性、赤色化、血管濾過、血管運動、血管拡張、血管収縮、色素沈着、ソバカス、汚点、脂性、毛穴の分布、毛穴の大きさ、ほくろ、母斑、にきび、黒色にきび、白色にきび、あばた、いぼ、吹出物、腫れ物、水脹れ、傷跡、くすみ、しみ、乾癬および対象者の肌に関する他の特徴を含み得る。毛髪の状態の例として、角質栓、長さ、乾燥度、脂性、ふけ、厚さ、染色、密度、毛根の状態、枝毛、抜毛、薄毛、鱗毛、段化、清潔性および対象者の頭髪に関するその他の特徴を含み得る。手の爪および足の爪の状態の例は、爪真菌症、割爪、剥離、乾癬、発光性、線、斑点、色、光沢、強さ、脆さ、厚さ、ささくれ、長さ、疾患および対象者の爪に関するその他の特徴を含み得る。他の状態の例として、例えば、顔面の部分の大きさや割合、歯の変色、および対象者に関するその他の美的、物理的、生理的または生物学的状態を含み得る。
【0133】
ある行為を「可能にする」、「容易化する」または「引起す」とは、その行為を直接実行すること、間接的に促進したり、動作を補助することのうち1つ以上を意味するものである。従って、これらの表現は、行為を実行する者と提携または協力することおよび/または行為を実行する者に顧客を紹介することまたはそれから顧客を紹介されることを含む。「可能にする」、「容易化する」および「引起す」の定義に含まれる間接的な行為の他の例として、行為の実行することを補助するための道具を対象者に1つ以上提供すること、行為の実行方法についての指示、行為を実行するためのプロンプトや合図または行為を実行することを積極的に勧めることを含み得る。間接的行為は、行為を行う他者を補助する者や行為を直接行う者と協力することを含み得る。道具は、ソフトウェア、ハードウェア、または行為を実行することを補助するための道具を提供するネットワーク上の場所(例えばウェブサイト)へのアクセス(ハイパーリンクを介して直接またはその他の協力または提供形式によって)を含み得る。従って、「アクセスを可能にする」や「表示を可能にする」等の表現は操作者が実際に何かをアクセスしたり表示したりすることを必要とするわけではない。例えば、操作者は、行為を実行する組織と提携したり、他者にアクセスおよび表示を行うための指示、道具または促しを与えることによって可能にするという機能を果たすことができる。
【0134】
「表示」なる表現とそれに類似する表現も、装置が送信者の所有または支配下にあるかに係らず、ネットワークを介して表示装置に伝送するためのコンテンツを、提供するなど間接的な行為を含み得る。表示する情報を配信するための系列上に存在する組織は、ここで用いる意味では、いずれも「表示」する行為を行うものである。
【0135】
同様に、「提供する」という表現は、直接的な行為も間接的な行為も含みうる。例えば、コンピュータプログラムにアクセスを提供することは、ネットワークを介してコンピュータプログラムにアクセスを提供することおよび対象者に対象者のワークステーションまたはコンピュータ上で実行できるように構築されたコンピュータプログラムを作成または配布することのうち少なくとも1つを含み得る。例えば、第一者が、第二者によって管理されるサーバまたはウェブサイトにネットワークトラヒックを(電子リンクまたは訪れることを勧めることで)導くようにしてもよい。第二者がそこで特定のソフトウェアを保持していれば、ここでいう「アクセスを提供する」なる表現の意味においては、第一者がその特定のソフトウェアを提供していることを理解されたい。第一者が、対象者を、特定のソフトウェアを対象者に配送する第二者に導く場合、第一者が対象者にそのソフトウェアへのアクセスを提供していることになる。(勿論、いずれの場合であっても、ここで使用する表現の意味では第二者もアクセスを提供していることになる。)
【0136】
「受取る」とは、ネットワーク、口頭、電子通信、電話通信、文書またはその他に受取ることを可能にする手段によって取得することを意味する。また、「受取り」は、直接的であっても間接的であってもよい。例えば、受取りは、他者を代表し、他者を代理しまたは他者と協力して行動する第三者を介して行われるものであってもよい。いずれの場合であっても、このような間接的および直接的な行動は、すべて、ここで用いる「受取り」という表現に含まれる。受取られる要求は、例えば、様々な形態からなり得る。単に、チェックされたチェックボックス、クリックされたボタン、提出されたフォームまたは口頭による肯定であってもよい。また、タイプまたは手書きされた文章による要求であってもよい。受取りは、オンラインの申込書、電子メール、ファクシミリ、電話、音声自動応答装置、またはウェブサイト、インターネットプロトコルのアドレスまたはネットワークアカウントからネットワークを介して電子的に送信されるファイル転送プロトコルによるもののいずれによるものであってもよい。要求は、情報を必要とする対象者または対象者の代表者から受け取るものであってもよい。「受取り」は、1つまたは複数のネットワークおよび/または記憶媒体を介して直接的または間接的に受取ることを含み得る。受取りは、郵送またはその他の配送手段によって文書として物理的に行われる可能性もある。
【0137】
「保持」という表現は、収集、保存、アクセス、アクセスの提供、または何かをアクセス可能にすることを直接的または間接的に行うことを含む広い意味で使われている。例えば、情報を保持する者の中には、情報が保存されている第三者のサイトへリンクを提供する組織も含まれる。
上述した概念と同様に、例えば、得る、決定する、作成する、選択する、適用する、シミュレーションを行う、提示する等は、直接的および間接的な行動を含むものである。従って、下記の請求項を解釈するにあたり、記載された行動は直接的および間接的な行為のいずれによっても実行され得る。間接的行為のさらなる例として、信号の送信、ソフトウェアの提供、指示の提供、ある組織と協力してその組織に行動を行わせること、直接的または間接的行為を外部委託すること、または何等かの方法で指定された行為を補助することを含む。
【0138】
「製品」は、有形商品、品物、サービスおよび行為を意味する包括的な表現である。「美容製品」、「美容ケア製品」、「化粧品」やそれに類似した表現は、(上述のように)肌、毛髪および爪等の身体外部の状態を1つまたは複数に対して効果のある品物をいう。美容製品のうち、有形商品の例として、任意の形態(例えば、軟膏、クリーム、ゲル、スプレー、サプリメント、飲食物、吸入剤、ローション、ケーキ、液剤および粉末)による治療製品、身体洗浄剤およびメーキャップ製品等の化粧品が含まれる。
【0139】
サービス形態の美容製品の例として、毛髪のスタイリング、頭髪のカット、頭髪の染色、頭髪の除去、肌のトリートメント、メーキャップの塗付およびその他の美容向上手段が含まれる。他の行為の例として、身体マッサージ、顔マッサージ、ディープクレンジング、美容製品の適用、運動、セラピー、または専門家、対象者自身または対象者の知合いによって行われる身体外部の状態に対して効果のあるその他の行為等が含まれる。
【0140】
次に、美容製品の例として、スクラブ、リンス、洗浄剤、保湿剤、皺除去剤、剥奪剤、トナー、クレンザー、コンディショナー、シャンプー、キューティクルクリーム、オイルおよび坑真菌物質、老化防止剤、皺防止剤、ソバカス防止剤、スキンコンディショナー、スキントナー、肌用着色剤、タンナー、ブロンザ−、美白剤、毛髪染色剤、洗髪剤、整髪剤、弾力性強化製品、製剤、頬紅、マスカラ、アイライナー、リップライナー、口紅、リップグロス、アイブロウライナー、アイシャドー、マニキュア、ファンデーション、コンシーラー、歯の美白剤、皮下脂肪除去剤、ヘアストレートナーおよびカーラー、および減量製品を挙げることができる。美容ケア療法は、上述の製品を1つまたは複数使用するものであってもよい。
【0141】
「美容アドバイス」、「美容指導」と類似の表現は、対象者に美容関連情報を提供する行為を意味するものである。アドバイスや指導は、美容製品の推奨(例えば、対象者が評価するように促した状態を処置するための美容製品の推奨)、改善策、予防策、予想、予後、価格および在庫情報、適用および利用情報、補足製品の提案、生活または食事療法の推奨、または対象者に将来の処置の流れを指導し、対象者に過去の出来事を理解させ、対象者の美に関連する将来の予想情報を反映し、または対象者に美容製品について理解させるための情報を含む。
【0142】
「ネットワーク」という表現は、インターネットや電話網等の公衆のネットワーク、私設ネットワーク、仮想私設ネットワークまたは2つ以上のノードまたは場所間の通信を図るためのその他の手段を含む。ネットワークは、有線および無線接続のいずれか一方または両方を含むものであってよい。無線通信は、電波による無線通信であってもよいが、当業者であれば、無線通信方式として、赤外見通し線、セルラー、マイクロ波、衛星、ブルートゥースパケット無線およびスペクトル拡散無線等、様々な通信技術を使用することができることを把握するであろう。無線データは、ポケットベル、テキストメッセージ、電子メール、インターネットアクセス、および音声通信が可能または不可能なその他の特殊データアプリケーションを含み得る。
【0143】
場合によって、本発明におけるネットワークは、宅配ネットワーク(例えば、郵便、UPS、フェデックス等)をも含み得る。本発明の範囲内にあると認められるその他の種類のネットワークとして、ローカルエリアネットワーク、メトロポリタンエリアネットワーク、ワイドエリアネットワーク、アドホックネットワーク、または2つのノードまたは離れた場所間の通信を容易化するための任意の手段が含まれる。
【0144】
ここでいう「人工知能」(AI)とは、知識、技術および方法を組み合わせたあらゆる計算によるインテリジェントシステムを総合して示す表現である。AIエンジンは、知識を適用するように構築され、変化する環境においても順応し、より上手に対応することを自ら学習することができるシステムであればよい。従って、AIエンジンは、次の計算方法、すなわちニューラルネットワーク、制約プログラム、ファジー論理、分類化、従来の人工知能技術、シンボル操作、ファジー集合論、進化型計算、サイバーネティックス、データマイニング、近似推論、微分不使用最適化、決定木またはソフトウェアコンピューティングのうち1つまたは複数を組み合わせて採用するものであってよい。計算によるインテリジェント手法を用いることで、AIエンジンは、未知または可変の環境に適応することを学習し、性能を改善することができる。AIエンジンに、中央演算装置、コプロセッサ、メモリ、レジスタ、またはその他のデータ処理装置およびサブシステムのうち1つまたは複数を含む様々な部品またはシステムを採用したり、設けたりすることができる。
【0145】
AIエンジンは、製品情報、専門家のアドバイス、ユーザプロフィールまたは感覚によるデータ等の入力に基づいて訓練することができる。AIエンジンは、入力を用いて、反復性訓練方法を実行するものであってもよい。訓練とは、多種の学習ルールまたは訓練アルゴリズムに基づくものであり得る。例えば、学習ルールは、逆伝播、リアルタイム反復学習、パターン毎学習、指導学習、補間、加重和、強化学習、時差学習、非指導学習または記録学習のうち1つまたは複数を含み得る。訓練の結果、AIエンジンはその環境に応じて動作を変化させることを学習し、知識を得ることができる。知識とは、AIエンジンが、新しいデータまたは状況に対して適切な反応を示す根拠となる情報をいう。知識は、例えば、2つ以上の製品間の相関情報を表すものであってもよい。知識は、データベース等の便利な場所に任意の形式で保存しておくことが可能である。
AIエンジンはその動作を変えることを学習することができるので、AIエンジンまたはシステム内のその他の部分に、すべての製品の組み合わせに関する相関情報を保持する必要はない。
【0146】
「個人情報」、「対象者固有情報」、「ユーザ固有情報」、「ユーザプロフィール」、「個人の特徴」、「個人の特質」、「プロフィール情報」および類似の表現(この部分ではすべて含めて「個人情報」という)は、対象者または使用者に関するあらゆる情報を広く包含するものである。このような情報は、例えば、身体的な特徴、ファッションの嗜好、デモグラフィック情報、栄養情報、化粧品使用情報、病歴情報、環境情報、美容製品使用情報、生活習慣等の項目に属し、氏名、年齢、生年月日、身長、体重、人種、食生活、休暇のパターン、個人の住所または居所または職場の地理的位置、職習慣、睡眠習慣、使用する洗面用具、運動習慣、リラクゼーション習慣、美容ケア習慣、喫煙および飲酒習慣、日光露出習慣、日焼け止めの使用、日焼け傾向、日焼けによる炎症および重度の炎症の数、食事制限、使用するダイエットサプリメントまたはビタミン類、黒色素細胞腫等の身体の外部に影響すると診断された状態、写真またはマルチメディアファイル等の対象者の画像、顔の特徴、対象者の血族に関する身体的特徴情報(例えば、若年での禿頭、白髪、皺等の発生)等の家族歴情報、身体外部の状態(既に定義したとおり)、色の嗜好、服装の嗜好、旅行の傾向、娯楽の嗜好、健康情報、製品または塑性物または他の要素(例えば日光露出)に対する拒絶反応、身体化学、従来の美容ケア製品の使用とその効果、購買およびショッピングおよびブラウジングの傾向、趣味、婚姻状況、対象者が親であるか、在住する国、在住する地域、生まれた国および地域、宗教の所属、政党の所属、対象者が都会の在住者であるか、郊外の在住者であるか、地方の在住者であるか、対象者が在住する都会地域の規模、対象者が退職者であるか、年収、性的嗜好または対象者の習慣、嗜好または趣味を反映するその他の情報を含み得る。
【0147】
個人情報は、さらに、対象者の電子ブラウジングまたは購買傾向を監視することによって、または対象者のコンピュータ上に保持されたクッキー、アンケートへの返答、または対象者に関する情報を提供することができるその他の機構によって電子的に収拾された情報も含み得る。また、書面によるアンケート、個人面談または顧客の嗜好調査等の非電子的手段で収集されたものであってもよい。
【0148】
「補足」および「補足製品」とは、物理的、身体的、生物学的および美的適合性のうちの1つまたは複数の概念を意味する。製品は、他の製品、製品の組み合わせまたは対象者のうちの1つまたは複数と補足性を有するものであり得る。後者の場合、製品が「補足的」であるかは対象者の個人情報によるものであり得る。従って、製品が補足性を有するということは、不適当なアレルギー反応を引起す可能性が低いこと、他の製品との物理的な混合特性がよいこと、または対象者または1つまたは複数の製品との美的な適合性がよいことをいうものであり得る。美的適合性とは、2つの製品が一緒に装着された場合に美的魅力を有する(または相反しない)ことを意味する。補足製品の識別は、さらに、製品の特徴、対象者の好み、調査データまたは専門家のアドバイスによるものであり得る。
【0149】
ここで、「あってよい」や「あり得る」という表現は、自由な無制約的な意味で解釈されるべきである。「あってよい」や「あり得る」は、少なくとも、記載された構造または行為を確実に含むものとして捉えるべきである。さらに、「または」という表現は、普通接続詞および選言的接続詞のいずれの解釈も可能である。
【0150】
ここで示すフローチャートは、例示目的で連続するブロックの系列として示してあるが、最も広い意味においてブロックの順序は本発明にとっては重要ではない。さらに、発明の趣旨から逸脱せずにブロックを削除したり追加したりすることも可能である。また、発明は、異なる実施形態に関連して説明した特徴を組み合わせたものも含み得る。
【0151】
説明はサーバ側の方法に焦点を絞っているが、発明がそれに対応するクライアント側の方法、ソフトウェア、製品、およびパソコンで読取可能な媒体を含み、ここで説明する方法のうちの幾つかまたはすべての方法のための指令を保存するためにパソコンで読取可能な媒体を使用することが可能であることを理解されたい。さらに、開示された構造はここで説明した機能を実施するための手段を規定するものであり、本発明が、開示された機能を実行するための手段を含むことを理解されたい。
【0152】
前記の実施形態の説明において、説明を簡素化するために様々な特徴が1つの実施形態の中に組み合わされている。この開示方法は、請求項による発明が、各請求項に明示的に記載された特徴以外に他の特徴も必要とするという意図を反映するものであると解釈されるべきではない。むしろ、請求項に示してあるとおり、発明の要旨は上に開示した各実施形態の特徴をすべて含んでいなくとも達成され得る。従って、前記の請求項は、ここにて当該実施形態の説明内に導入されるものであって、各請求項は発明の個別の実施形態として独立して存在する。
【図面の簡単な説明】
【図1A】顔面のシミュレーション画像に美的特徴の使用をシミュレーションすることを可能にする、本発明による例示的な方法のフローチャートを図示している。
【図1B】顔面のシミュレーション画像に美的特徴の使用をシミュレーションする、本発明による例示的な方法のフローチャートを図示している。
【図2A】本発明による顔面の作成用コンピュータプログラムの例示的ユーザインターフェースである。
【図2B】顔面の画像にシミュレーションするための身体外部の状態を選択することを可能にする例示的ユーザインターフェースである。
【図2C】顔面の画像にシミュレーションするための身体外部の状態を選択することを可能にする別の例示的ユーザインターフェースである。
【図3A】本発明による処理前の顔面の画像を例示している。
【図3B】本発明による処理後の顔面の画像を例示している。
【図4A】本発明による少なくとも1つの補足的な美容製品を推奨する例示的方法のフローチャートである。
【図4B】本発明による推奨された補足的な美容製品の少なくとも1つを受ける例示的な方法のフローチャートである。
【図4C】提案された製品のうち少なくとも1つを受注するための、本発明による例示的方法を図示した2ページに渡るフローチャートである。
【図4D】提案された製品のうち少なくとも1つの注文を受けるための、本発明による例示的な方法を図示した2ページに渡るフローチャートである。
【図5】顔面の画像に第1および第2美容製品の使用をシミュレーションする、本発明による例示的なユーザインターフェースである。
【図6A】本発明による例示的な較正方法のフローチャートである。
【図6B】ユーザの視点から見た本発明による例示的な較正方法のフローチャートである。
【図7】例示的な色の較正方法に使用する、本発明による例示的なユーザインターフェースである。
【図8】3次元画像を採用した本発明による例示的方法のフローチャートである。
【図9A】対象者の顔面の画像を1つ以上取得する本発明の実施例を図示している。
【図9B】対象者の顔面の画像を1つ以上取得する本発明の実施例を図示している。
【図10A】本発明による美容分析を可能にする例示的方法のフローチャートである。
【図10B】本発明による美容分析を可能にする例示的方法のフローチャートである。
【図10C】美容製品の使用をシミュレーションした顔面部分の表示である選択可能なテンプレートを図示した例示的ユーザインターフェースである。
【図11】本発明によるシステムと方法を実施する例示的環境のダイアグラムである。
【図12】本発明による例示的ユーザアクセスデバイスの概要図である。
【図13】図12のユーザアクセスデバイスのコンピュータモジュールの例示的実施形態の概要図である。
【図14】図11のホストサイトのコンピュータモジュールの例示的実施形態の概要図である。

Claims (25)

  1. 顔面の3次元画像を使用した分析を可能にする方法であって、
    少なくとも1つの対象者の顔面を取得した画像を使用して顔面の3次元画像を作成することと、
    顔面の3次元画像に美的特徴の使用をシミュレーションすることおよび/または美容分析を可能にするように顔面の3次元画像を処理すること、
    とを含む方法。
  2. 該3次元画像がソフトウェアによって作成される請求項1に記載の方法。
  3. 3次元画像において美的特徴の使用をシミュレーションすることと、美容分析を可能にするように3次元画像処理することのうち、少なくとも一方のために該ソフトウェアが構築される請求項2に記載の方法。
  4. 該ソフトウェアが美的特徴の使用をシミュレーションするために構築される請求項3に記載の方法。
  5. 該ソフトウェアが3次元画像処理するために構築される請求項3または4に記載の方法。
  6. 美的特徴は美容製品である請求項1ないし5のいずれか1項に記載の方法。
  7. 該美的特徴は化粧品、宝石類、眼鏡、ボディピアスおよび刺青から選択される請求項1ないし6のいずれか1項に記載の方法。
  8. 該3次元画像処理が、3次元画像において少なくとも1つの身体外部の状態を識別することと、および前記身体外部の状態を向上させるために3次元画像を変更することのうち、少なくとも一方を含む請求項1ないし7のいずれか1項に記載の方法。
  9. 該方法が、さらに、複数の美的特徴の中から美的特徴の選択を可能にすることを含み、3次元画像が、選択した美的特徴の使用をシミュレーションするように修正変更される請求項1ないし8のいずれか1項に記載の方法。
  10. 美的特徴が美容製品を含む請求項9に記載の方法。
  11. 美容製品は化粧品を含む請求項10に記載の方法。
  12. 該方法は、さらに、対象者が複数の異なる仮想的視点から3次元画像を視認することを可能にすることを含む請求項1ないし11のいずれか1項に記載の方法。
  13. 該方法は、さらに、対象者に対し、少なくとも1つ対象者の顔面の画像を取得するようにプロンプトすることを含む請求項1ないし12のいずれか1項に記載の方法。
  14. 前記シミュレーションおよび/または処理が、対象者から遠隔地で3次元画像を分析することを含む請求項1ないし13のいずれか1項に記載の方法。
  15. 3次元画像の作成が、対象者の顔面の画像を複数使用して行われる請求項1ないし14のいずれか1項に記載の方法。
  16. 3次元画像は、少なくとも1つの対象者の顔面の画像および3次元フレームを使用して作成される請求項1ないし14のいずれか1項に記載の方法。
  17. 少なくとも1つの取得された画像が、少なくとも1つの身体外部の状態を反映し、さらに、該方法が、3次元画像を通じて身体外部の状態を分析することを含む請求項1ないし16のいずれか1項に記載の方法。
  18. 該分析が、対象者の位置から遠隔地で行われる請求項17に記載の方法。
  19. 該方法は、さらに、少なくとも部分的に外部身体状態の分析に基づいて対象者に美容製品を提案することを含む請求項17または18に記載の方法。
  20. 該ソフトウェアは身体外部の状態を分析するように構築される請求項2に記載の方法。
  21. 該ソフトウェアは、さらに、美容製品を提案するように構築される請求項20に記載の方法。
  22. 顔面の3次元画像の低速度撮影のシミュレーションが表示される請求項1ないし21のいずれか1項に記載の方法。
  23. 少なくとも1つの取得画像が単一画像取得装置を使用して取得される請求項1ないし22のいずれか1項に記載の方法。
  24. 請求項1ないし23のいずれか1項に記載の方法のための指令を保存するコンピュータで読取可能な媒体。
  25. 請求項1ないし24のいずれか1項に記載の方法を実行するように構築されたプロセッサを具備するシステム。
JP2002288305A 2001-10-01 2002-10-01 顔面の3次元画像を使用した分析 Pending JP2004038918A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US32555901P 2001-10-01 2001-10-01
US10/024,615 US7634103B2 (en) 2001-10-01 2001-12-21 Analysis using a three-dimensional facial image

Publications (1)

Publication Number Publication Date
JP2004038918A true JP2004038918A (ja) 2004-02-05

Family

ID=26698660

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002288305A Pending JP2004038918A (ja) 2001-10-01 2002-10-01 顔面の3次元画像を使用した分析

Country Status (3)

Country Link
US (1) US7634103B2 (ja)
EP (1) EP1298597A3 (ja)
JP (1) JP2004038918A (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006024184A (ja) * 2004-06-09 2006-01-26 Canon Inc 画像処理装置、画像処理方法、プログラム、及び記憶媒体
JP2006079619A (ja) * 2004-09-07 2006-03-23 L'oreal Sa まつ毛の少なくとも一つの外辺の合成されたイメージを生成するための方法及び装置
JP2006154181A (ja) * 2004-11-29 2006-06-15 Pioneer Electronic Corp 画像表示装置
US7773091B2 (en) 2004-09-07 2010-08-10 L'oreal Method and device for generating a synthesized image of at least one fringe of lashes
JP2011138528A (ja) * 2004-06-09 2011-07-14 Canon Inc 画像処理装置、画像処理方法、プログラム、及び記憶媒体
JP2013527946A (ja) * 2010-03-10 2013-07-04 イーエルシー マネージメント エルエルシー スペクトル画像データを用いて3drgbモデルを生成する肌手入れ分析システム
US20170017969A1 (en) * 2015-07-17 2017-01-19 Overstock.Com, Inc. Methods and systems for auditing and editing content of an e-commerce site
WO2017145249A1 (ja) * 2016-02-22 2017-08-31 富士機械製造株式会社 画像処理システム及び画像処理方法
JP2022505760A (ja) * 2018-10-25 2022-01-14 ロレアル 深層学習を使用して個人用の製品推奨を提供するためのシステムおよび方法
JP2022009212A (ja) * 2020-01-31 2022-01-14 株式会社Zozo メガネ、推奨化粧品提示制御システム及び推奨化粧品提示制御方法
JP2022091704A (ja) * 2020-12-09 2022-06-21 シャネル パフュームズ ビューテ 画像に現れるリップメイクアップ製品を特定する方法

Families Citing this family (108)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10142526C5 (de) * 2001-08-30 2006-02-16 Wella Ag Verfahren für eine Haarfarbberatung
US20050004475A1 (en) * 2003-06-13 2005-01-06 L'oreal Method of comparing the appearance of a region of the human body at at least two different instants
US20080270175A1 (en) * 2003-12-31 2008-10-30 Klinger Advanced Aesthetics, Inc. Systems and methods using a dynamic expert system to provide patients with aesthetic improvement procedures
US20060282288A1 (en) * 2003-12-31 2006-12-14 Klinger Advanced Aesthetics, Inc. Methods of providing a patient with aesthetic improvement procedures
US20050144029A1 (en) * 2003-12-31 2005-06-30 Rakowski Richard R. Systems and methods for aesthetic improvement
JP2005225025A (ja) * 2004-02-12 2005-08-25 Konica Minolta Holdings Inc 顔画像処理システム
CN101043832A (zh) * 2004-10-22 2007-09-26 株式会社资生堂 嘴唇的分类方法,化妆方法,分类图谱及化妆用器具
FR2883395B1 (fr) * 2005-03-16 2007-06-01 Marie Anne Senckeisen Procede d'assistance au maquillage en temps reel et son dispositif de mise en oeuvre
US20060218031A1 (en) * 2005-03-25 2006-09-28 The Weinberg Group Llc System and methodology for collecting autobiographical data concerning use of consumer products or exposures to substances
US20070041638A1 (en) * 2005-04-28 2007-02-22 Xiuwen Liu Systems and methods for real-time object recognition
US8306277B2 (en) * 2005-07-27 2012-11-06 Canon Kabushiki Kaisha Image processing apparatus and image processing method, and computer program for causing computer to execute control method of image processing apparatus
US8047915B2 (en) 2006-01-11 2011-11-01 Lyle Corporate Development, Inc. Character for computer game and method
US8107672B2 (en) * 2006-01-17 2012-01-31 Shiseido Company, Ltd. Makeup simulation system, makeup simulator, makeup simulation method, and makeup simulation program
US7856125B2 (en) * 2006-01-31 2010-12-21 University Of Southern California 3D face reconstruction from 2D images
US20070183688A1 (en) * 2006-02-03 2007-08-09 Gary Hollfelder Data management system and method
US20070255589A1 (en) * 2006-04-27 2007-11-01 Klinger Advanced Aesthetics, Inc. Systems and methods using a dynamic database to provide aesthetic improvement procedures
FR2898712B1 (fr) 2006-03-17 2009-04-10 Oreal Procede et systeme pour generer une image de synthese d'au moins un cheveu
FR2900256B1 (fr) * 2006-04-24 2008-12-05 Marie Anne Senckeisen Procede d'assistance en temps reel a la modification de l'apparence physique d'une entite et son dispositif de mise en oeuvre.
WO2007140609A1 (en) * 2006-06-06 2007-12-13 Moreideas Inc. Method and system for image and video analysis, enhancement and display for communication
US8077931B1 (en) * 2006-07-14 2011-12-13 Chatman Andrew S Method and apparatus for determining facial characteristics
JP4986279B2 (ja) * 2006-09-08 2012-07-25 任天堂株式会社 ゲームプログラムおよびゲーム装置
US7707130B2 (en) * 2006-10-23 2010-04-27 Health Care Information Services Llc Real-time predictive computer program, model, and method
US20110016001A1 (en) * 2006-11-08 2011-01-20 24/8 Llc Method and apparatus for recommending beauty-related products
US8175409B1 (en) * 2006-12-01 2012-05-08 Adobe Systems Incorporated Coherent image selection and modification
US8290257B2 (en) 2007-03-02 2012-10-16 The Procter & Gamble Company Method and apparatus for simulation of facial skin aging and de-aging
JP2009064423A (ja) * 2007-08-10 2009-03-26 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
US8730231B2 (en) 2007-11-20 2014-05-20 Image Metrics, Inc. Systems and methods for creating personalized media content having multiple content layers
DE102008012071A1 (de) * 2008-02-29 2009-09-17 Dr. Scheller Cosmetics Ag Verfahren und Informationsterminal zur Anzeige von Produktinformationen
US9058765B1 (en) * 2008-03-17 2015-06-16 Taaz, Inc. System and method for creating and sharing personalized virtual makeovers
US8358348B2 (en) * 2008-05-09 2013-01-22 Elc Management Llc Method and system for automatic or manual evaluation to provide targeted and individualized delivery of cosmetic actives in a mask or patch form
US8425477B2 (en) * 2008-09-16 2013-04-23 Elc Management Llc Method and system for providing targeted and individualized delivery of cosmetic actives
US8597667B2 (en) * 2008-05-09 2013-12-03 Elc Management Llc Targeted and individualized cosmetic delivery
US8491926B2 (en) 2008-09-16 2013-07-23 Elc Management Llc Method and system for automatic or manual evaluation to provide targeted and individualized delivery of cosmetic actives in a mask or patch form
US20100186234A1 (en) 2009-01-28 2010-07-29 Yehuda Binder Electric shaver with imaging capability
US9965778B2 (en) * 2009-02-02 2018-05-08 Modiface Inc. System and method for the indication of modification region boundaries on facial images
US20100198682A1 (en) * 2009-02-04 2010-08-05 Miranda Aref Farage Sensitive skin product marketing articles
US8550818B2 (en) * 2010-05-21 2013-10-08 Photometria, Inc. System and method for providing and modifying a personalized face chart
US9025030B2 (en) 2010-06-08 2015-05-05 Cheryl Garcia Video system
JP5808171B2 (ja) * 2010-07-16 2015-11-10 株式会社 資生堂 目元画像シミュレーション装置、目元画像生成方法、及び目元画像生成プログラム
US8321301B2 (en) 2010-07-20 2012-11-27 Sony Corporation Method and system for clothing shopping using an image of a shopper
TW201212852A (en) * 2010-09-21 2012-04-01 Zong Jing Investment Inc Facial cosmetic machine
KR20120087256A (ko) * 2010-12-17 2012-08-07 한국전자통신연구원 전문가 지식 기반 메이크업 로봇의 운용 방법 및 시스템
KR101194773B1 (ko) * 2011-03-29 2012-10-26 강진수 탈모진행정도의 측정 방법
DE102011015730A1 (de) * 2011-03-31 2012-10-04 Land Rheinland-Pfalz, vertreten durch das Landeskriminalamt Rheinland-Pfalz Phantombilddatenbank (3D)
US9082235B2 (en) * 2011-07-12 2015-07-14 Microsoft Technology Licensing, Llc Using facial data for device authentication or subject identification
US20130033590A1 (en) * 2011-08-03 2013-02-07 Sumera Yacoob Real-Time Skin Color Visualization and Classification Tool
US8885873B2 (en) 2011-09-09 2014-11-11 Francis R. Palmer Iii Md Inc. Systems and methods for using curvatures to analyze facial and body features
US9183510B1 (en) * 2011-10-03 2015-11-10 Tastebud Technologies, Inc. Method and system for personalized recommendation of lifestyle items
WO2013070749A1 (en) * 2011-11-07 2013-05-16 Coinstar, Inc. Consumer operated kiosk for sampling beauty products and associated systems and methods
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US20130159895A1 (en) * 2011-12-15 2013-06-20 Parham Aarabi Method and system for interactive cosmetic enhancements interface
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
TWI463955B (zh) * 2012-02-20 2014-12-11 Zong Jing Investment Inc Eye makeup device
RU2493608C1 (ru) * 2012-03-01 2013-09-20 Мария Викторовна Рэйнман Тренажер обучения наращиванию ресниц
US9118876B2 (en) * 2012-03-30 2015-08-25 Verizon Patent And Licensing Inc. Automatic skin tone calibration for camera images
US9104908B1 (en) 2012-05-22 2015-08-11 Image Metrics Limited Building systems for adaptive tracking of facial features across individuals and groups
US9449412B1 (en) 2012-05-22 2016-09-20 Image Metrics Limited Adaptive, calibrated simulation of cosmetic products on consumer devices
US9129147B1 (en) 2012-05-22 2015-09-08 Image Metrics Limited Optimal automatic capture of facial movements and expressions in video sequences
US9460462B1 (en) 2012-05-22 2016-10-04 Image Metrics Limited Monetization using video-based simulation of cosmetic products
US9111134B1 (en) 2012-05-22 2015-08-18 Image Metrics Limited Building systems for tracking facial features across individuals and groups
US9378584B2 (en) 2012-05-23 2016-06-28 Glasses.Com Inc. Systems and methods for rendering virtual try-on products
US9483853B2 (en) 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US20140032359A1 (en) * 2012-07-30 2014-01-30 Infosys Limited System and method for providing intelligent recommendations
JP6112823B2 (ja) * 2012-10-30 2017-04-12 キヤノン株式会社 情報処理装置、情報処理方法及びコンピュータにより読み取り可能なプログラム
US20140229239A1 (en) * 2013-02-14 2014-08-14 Bank Of America Corporation Face retirement tool
USD737376S1 (en) 2013-03-14 2015-08-25 Outerwall Inc Consumer operated kiosk for sampling products
JP6960734B2 (ja) 2013-03-15 2021-11-05 株式会社 資生堂 カスタム外用剤を具体化および調合するためのシステムおよび方法
US10002498B2 (en) 2013-06-17 2018-06-19 Jason Sylvester Method and apparatus for improved sales program and user interface
US8837796B1 (en) * 2013-06-27 2014-09-16 Healthcare Content Solutions, Inc. Systems and methods for monitoring a dermatologic condition
WO2015116521A1 (en) * 2014-02-03 2015-08-06 Revlon Consumer Products Corporation Providing a product recommendation based on color
WO2015127394A1 (en) * 2014-02-23 2015-08-27 Northeastern University System for beauty, cosmetic, and fashion analysis
US9699123B2 (en) 2014-04-01 2017-07-04 Ditto Technologies, Inc. Methods, systems, and non-transitory machine-readable medium for incorporating a series of images resident on a user device into an existing web browser session
US9639742B2 (en) * 2014-04-28 2017-05-02 Microsoft Technology Licensing, Llc Creation of representative content based on facial analysis
US9773156B2 (en) 2014-04-29 2017-09-26 Microsoft Technology Licensing, Llc Grouping and ranking images based on facial recognition data
US9202312B1 (en) 2014-07-18 2015-12-01 Restoration Robotics, Inc. Hair simulation method
USD748196S1 (en) 2014-08-27 2016-01-26 Outerwall Inc. Consumer operated kiosk for sampling products
US9760762B2 (en) 2014-11-03 2017-09-12 Anastasia Soare Facial structural shaping
WO2016204778A1 (en) 2015-06-19 2016-12-22 Palmer Family Trust Systems and methods of analyzing images
US10460368B2 (en) 2015-06-30 2019-10-29 Pella Corporation System for presenting and updating a contextual visualization of multiple products installed in an installation location for multiple users
US9984282B2 (en) * 2015-12-10 2018-05-29 Perfect Corp. Systems and methods for distinguishing facial features for cosmetic application
US11055762B2 (en) 2016-03-21 2021-07-06 The Procter & Gamble Company Systems and methods for providing customized product recommendations
TWI573100B (zh) * 2016-06-02 2017-03-01 Zong Jing Investment Inc 自動臉部化妝方法
US10373348B2 (en) * 2016-08-05 2019-08-06 Optim Corporation Image processing apparatus, image processing system, and program
US20180096418A1 (en) * 2016-10-04 2018-04-05 Chris Basmadjian Product modeling system and methods for operating same
US10354546B2 (en) 2016-11-25 2019-07-16 Naomi Belhassen Semi-permanent makeup system and method
US10621771B2 (en) 2017-03-21 2020-04-14 The Procter & Gamble Company Methods for age appearance simulation
US10614623B2 (en) 2017-03-21 2020-04-07 Canfield Scientific, Incorporated Methods and apparatuses for age appearance simulation
US10912372B2 (en) 2017-05-16 2021-02-09 Anastasia Beverly Hills, Llc Facial stencils
WO2018222808A1 (en) 2017-05-31 2018-12-06 The Procter & Gamble Company Systems and methods for determining apparent skin age
EP3635626A1 (en) 2017-05-31 2020-04-15 The Procter and Gamble Company System and method for guiding a user to take a selfie
JP7200139B2 (ja) 2017-07-13 2023-01-06 株式会社 資生堂 仮想顔化粧の除去、高速顔検出およびランドマーク追跡
CN108121957B (zh) * 2017-12-19 2021-09-03 麒麟合盛网络技术股份有限公司 美颜素材的推送方法及装置
US10607264B2 (en) 2018-02-02 2020-03-31 Perfect Corp. Systems and methods for virtual application of cosmetic effects to photo albums and product promotion
US10691932B2 (en) 2018-02-06 2020-06-23 Perfect Corp. Systems and methods for generating and analyzing user behavior metrics during makeup consultation sessions
US20190246065A1 (en) * 2018-02-06 2019-08-08 Perfect Corp. Systems and methods for makeup consultation using an improved user interface
US10762665B2 (en) 2018-05-23 2020-09-01 Perfect Corp. Systems and methods for performing virtual application of makeup effects based on a source image
US20210307498A1 (en) * 2018-05-24 2021-10-07 Mixcreative Llc System and method for creating customized brushes
WO2020014695A1 (en) 2018-07-13 2020-01-16 Shiseido Americas Corporation System and method for adjusting custom topical agents
US11074675B2 (en) * 2018-07-31 2021-07-27 Snap Inc. Eye texture inpainting
US11257142B2 (en) 2018-09-19 2022-02-22 Perfect Mobile Corp. Systems and methods for virtual application of cosmetic products based on facial identification and corresponding makeup information
US10949649B2 (en) 2019-02-22 2021-03-16 Image Metrics, Ltd. Real-time tracking of facial features in unconstrained video
US11076683B2 (en) 2019-04-05 2021-08-03 L'oreal Systems and methods for creating custom formulations
US11136233B2 (en) 2019-04-05 2021-10-05 L'oreal Fluid formulation assembly for custom formulation systems
US10849832B2 (en) 2019-04-05 2020-12-01 L'oreal Custom formulation systems
US11160353B2 (en) 2019-04-05 2021-11-02 L'oreal Bead assembly for custom formulation systems
CN111144423B (zh) * 2019-12-26 2023-05-05 哈尔滨工业大学 基于一维组卷积神经网络的高光谱遥感数据多尺度光谱特征提取方法
CN112686818A (zh) * 2020-12-29 2021-04-20 维沃移动通信有限公司 人脸图像处理方法、装置及电子设备

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62144280A (ja) 1985-12-18 1987-06-27 Tokyo Insatsu Shiki Kk メイクアツプシユミレ−タ
JPH06118349A (ja) 1992-10-02 1994-04-28 Seiko Epson Corp 眼鏡装用シミュレーション装置
US5751829A (en) 1994-08-18 1998-05-12 Autodesk, Inc. Spectrally coordinated pattern search-imaging system and method
JP2603445B2 (ja) * 1994-11-10 1997-04-23 インターナショナル・ビジネス・マシーンズ・コーポレイション 髪画像適合方法及びコンピュータ・システム
US5687259A (en) * 1995-03-17 1997-11-11 Virtual Eyes, Incorporated Aesthetic imaging system
BR9600543A (pt) * 1996-02-06 1997-12-30 Samir Jacob Bechara Sistema computadorizado para escolha e adaptação de óculos
AU4258897A (en) 1996-09-04 1998-03-26 David A. Goldberg Method and system for obtaining person-specific images in a public venue
JP3529954B2 (ja) 1996-09-05 2004-05-24 株式会社資生堂 顔だち分類法及び顔だちマップ
US5930769A (en) 1996-10-07 1999-07-27 Rose; Andrea System and method for fashion shopping
WO1998020458A1 (en) 1996-11-08 1998-05-14 Mirror Software Corporation Aesthetic imaging system
JPH10228758A (ja) 1997-02-12 1998-08-25 Sony Corp 記録再生装置および方法
US6283858B1 (en) 1997-02-25 2001-09-04 Bgk International Incorporated Method for manipulating images
JP3912834B2 (ja) 1997-03-06 2007-05-09 有限会社開発顧問室 顔画像の修正方法、化粧シミュレーション方法、化粧方法、化粧サポート装置及びファンデーション転写膜
US20010011818A1 (en) 1997-03-07 2001-08-09 Heritage Publishing, Inc. System and method for promoting stores and products
US6147692A (en) 1997-06-25 2000-11-14 Haptek, Inc. Method and apparatus for controlling transformation of two and three-dimensional images
NL1007397C2 (nl) 1997-10-30 1999-05-12 V O F Headscanning Werkwijze en inrichting voor het met een gewijzigd uiterlijk weergeven van tenminste een deel van het menselijk lichaam.
US20010014868A1 (en) 1997-12-05 2001-08-16 Frederick Herz System for the automatic determination of customized prices and promotions
US6362850B1 (en) 1998-08-04 2002-03-26 Flashpoint Technology, Inc. Interactive movie creation from one or more still images in a digital imaging device
US6215498B1 (en) 1998-09-10 2001-04-10 Lionhearth Technologies, Inc. Virtual command post
US6427022B1 (en) 1998-11-10 2002-07-30 Western Research Company, Inc. Image comparator system and method for detecting changes in skin lesions
US6260024B1 (en) 1998-12-02 2001-07-10 Gary Shkedy Method and apparatus for facilitating buyer-driven purchase orders on a commercial network system
JP2000315262A (ja) 1999-03-02 2000-11-14 Fujitsu Ltd 画像表示方法およびその装置および記憶媒体
US6571003B1 (en) 1999-06-14 2003-05-27 The Procter & Gamble Company Skin imaging and analysis systems and methods
US6437866B1 (en) 1999-07-07 2002-08-20 Fd Management, Inc. System for assisting customers in selecting an optimum color cosmetic product
TW511040B (en) 1999-07-07 2002-11-21 Fd Man Inc Color cosmetic selection system
US6293284B1 (en) 1999-07-07 2001-09-25 Division Of Conopco, Inc. Virtual makeover
JP2001052108A (ja) 1999-08-11 2001-02-23 Hitachi Maxell Ltd 光学読み取り装置
WO2001018674A2 (en) 1999-09-03 2001-03-15 The Procter & Gamble Company Methods and apparatuses for providing a customized product combination to a consumer
WO2001020517A2 (en) 1999-09-17 2001-03-22 The Procter & Gamble Company Method for obtaining consumer information
JP2001104050A (ja) * 1999-10-06 2001-04-17 Seiko Epson Corp 画像処理を用いた化粧支援方法および化粧台ならびに画像処理を用いた化粧支援処理プログラムを記録した記録媒体
AU2001234815A1 (en) 2000-02-04 2001-08-14 Omnichoice.Com System and method for assisting customers in choosing among a set of commodities using customer preferences
US6504546B1 (en) * 2000-02-08 2003-01-07 At&T Corp. Method of modeling objects to synthesize three-dimensional, photo-realistic animations
JP2001268594A (ja) * 2000-03-15 2001-09-28 Infiniteface.Com Inc 三次元ビューティーシミュレーション用クライアントサーバシステム
AU2001249481A1 (en) 2000-03-28 2001-10-23 Eyeweb Inc. Image segmenting to enable electronic shopping for wearable goods and cosmetic services
US20020064302A1 (en) 2000-04-10 2002-05-30 Massengill R. Kemp Virtual cosmetic autosurgery via telemedicine
EP1290595A2 (en) 2000-04-14 2003-03-12 The Procter & Gamble Company An interactive system for conducting business and method for the interactive distribution of information relating to products and services
EP1281054B1 (en) 2000-05-12 2008-01-02 The Procter & Gamble Company Method for analyzing hair and predicting achievable hair dyeing ending colors
EP1299787A4 (en) * 2000-05-18 2005-02-02 Visionix Ltd BRASS ADJUSTMENT SYSTEM AND USEFUL ADAPTATION PROCEDURES
US6516245B1 (en) 2000-05-31 2003-02-04 The Procter & Gamble Company Method for providing personalized cosmetics
CZ20023561A3 (cs) 2000-05-31 2003-03-12 The Procter & Gamble Company Způsoby a systém pro poskytování individuálně zaměřených přípravků
WO2002005249A2 (en) 2000-06-27 2002-01-17 Rami Orpaz Make-up and fashion accessory display and marketing system and method
JP2002007568A (ja) 2000-06-27 2002-01-11 Kaihatsu Komonshitsu:Kk 診断システム、診断データ生成方法、それに用いられる情報処理装置、及び端末装置、並びに記録媒体
WO2002003232A2 (en) 2000-06-30 2002-01-10 The Procter & Gamble Company Method and system for creating and improving products and services using electronic collection of information
EP1182047A1 (en) * 2000-08-26 2002-02-27 Hewlett-Packard Company, A Delaware Corporation Method and apparatus for printing a test pattern
US7079158B2 (en) 2000-08-31 2006-07-18 Beautyriot.Com, Inc. Virtual makeover system and method
US6792401B1 (en) * 2000-10-31 2004-09-14 Diamond Visionics Company Internet-based modeling kiosk and method for fitting and selling prescription eyeglasses
US6959119B2 (en) 2000-11-03 2005-10-25 Unilever Home & Personal Care Usa Method of evaluating cosmetic products on a consumer with future predictive transformation
US20030014324A1 (en) 2001-07-10 2003-01-16 Donovan Don Roderick Techniques for synthesizing and distributing personal care products

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006024184A (ja) * 2004-06-09 2006-01-26 Canon Inc 画像処理装置、画像処理方法、プログラム、及び記憶媒体
JP2011138528A (ja) * 2004-06-09 2011-07-14 Canon Inc 画像処理装置、画像処理方法、プログラム、及び記憶媒体
JP2006079619A (ja) * 2004-09-07 2006-03-23 L'oreal Sa まつ毛の少なくとも一つの外辺の合成されたイメージを生成するための方法及び装置
JP2009211721A (ja) * 2004-09-07 2009-09-17 L'oreal Sa 少なくとも一房のまつ毛の外観をシミュレーションする方法及び装置
US7773091B2 (en) 2004-09-07 2010-08-10 L'oreal Method and device for generating a synthesized image of at least one fringe of lashes
JP2006154181A (ja) * 2004-11-29 2006-06-15 Pioneer Electronic Corp 画像表示装置
JP2013527946A (ja) * 2010-03-10 2013-07-04 イーエルシー マネージメント エルエルシー スペクトル画像データを用いて3drgbモデルを生成する肌手入れ分析システム
KR101381033B1 (ko) * 2010-03-10 2014-04-04 이엘씨 매니지먼트 엘엘씨 스펙트럼 영상 데이터를 이용하여 3d rgb 모델을 생성하는 피부 관리 분석 시스템
US20170017969A1 (en) * 2015-07-17 2017-01-19 Overstock.Com, Inc. Methods and systems for auditing and editing content of an e-commerce site
WO2017145249A1 (ja) * 2016-02-22 2017-08-31 富士機械製造株式会社 画像処理システム及び画像処理方法
JPWO2017145249A1 (ja) * 2016-02-22 2018-12-13 株式会社Fuji 画像処理システム及び画像処理方法
JP2022505760A (ja) * 2018-10-25 2022-01-14 ロレアル 深層学習を使用して個人用の製品推奨を提供するためのシステムおよび方法
JP7242848B2 (ja) 2018-10-25 2023-03-20 ロレアル 深層学習を使用して個人用の製品推奨を提供するためのシステムおよび方法
JP2022009212A (ja) * 2020-01-31 2022-01-14 株式会社Zozo メガネ、推奨化粧品提示制御システム及び推奨化粧品提示制御方法
JP7469278B2 (ja) 2020-01-31 2024-04-16 株式会社Zozo コンピュータシステム、制御方法及びプログラム
JP2022091704A (ja) * 2020-12-09 2022-06-21 シャネル パフュームズ ビューテ 画像に現れるリップメイクアップ製品を特定する方法
JP7417574B2 (ja) 2020-12-09 2024-01-18 シャネル パフュームズ ビューテ 画像に現れるリップメイクアップ製品を特定する方法

Also Published As

Publication number Publication date
EP1298597A2 (en) 2003-04-02
US7634103B2 (en) 2009-12-15
US20030063794A1 (en) 2003-04-03
EP1298597A3 (en) 2005-01-12

Similar Documents

Publication Publication Date Title
US7634103B2 (en) Analysis using a three-dimensional facial image
US20030065589A1 (en) Body image templates with pre-applied beauty products
US20030065255A1 (en) Simulation of an aesthetic feature on a facial image
US7437344B2 (en) Use of artificial intelligence in providing beauty advice
EP1298587A2 (en) Body image enhancement
US6761697B2 (en) Methods and systems for predicting and/or tracking changes in external body conditions
US7324668B2 (en) Feature extraction in beauty analysis
US20030065578A1 (en) Methods and systems involving simulated application of beauty products
US20030065524A1 (en) Virtual beauty consultant
US20030120534A1 (en) Cosmetic affinity indexing
US7006657B2 (en) Methods for enabling evaluation of typological characteristics of external body portion, and related devices
US20030064350A1 (en) Beauty advisory system and method
US20030065523A1 (en) Early detection of beauty treatment progress
US20030065525A1 (en) Systems and methods for providing beauty guidance
US20030065526A1 (en) Historical beauty record
WO2011085727A1 (en) Advice information system
US20030013994A1 (en) Methods and systems for generating a prognosis
US20030065552A1 (en) Interactive beauty analysis
EP1298584A2 (en) Method and apparatus to capture and analyze an image of a human body part
US20120329033A1 (en) Beauty-related information collection and diagnosis using environments
JP2003220036A (ja) 画像取得の較正方法およびシステム
US20030065588A1 (en) Identification and presentation of analogous beauty case histories
US20030064356A1 (en) Customized beauty tracking kit
EP1326179A2 (en) Shop-in-a-shop website construction
EP3699811A1 (en) Machine-implemented beauty assistant for predicting face aging

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060117

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060704