JP2017041281A - カスタム製品を創作するための方法及びシステム - Google Patents

カスタム製品を創作するための方法及びシステム Download PDF

Info

Publication number
JP2017041281A
JP2017041281A JP2016230018A JP2016230018A JP2017041281A JP 2017041281 A JP2017041281 A JP 2017041281A JP 2016230018 A JP2016230018 A JP 2016230018A JP 2016230018 A JP2016230018 A JP 2016230018A JP 2017041281 A JP2017041281 A JP 2017041281A
Authority
JP
Japan
Prior art keywords
user
eyewear
model
computer system
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016230018A
Other languages
English (en)
Other versions
JP2017041281A5 (ja
JP6542744B2 (ja
Inventor
エー. フォンテ ティモシー
A Fonte Timothy
エー. フォンテ ティモシー
ジェイ. ヴァラディ エリック
J Varady Eric
ジェイ. ヴァラディ エリック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bespoke Inc
Original Assignee
Bespoke Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bespoke Inc filed Critical Bespoke Inc
Publication of JP2017041281A publication Critical patent/JP2017041281A/ja
Publication of JP2017041281A5 publication Critical patent/JP2017041281A5/ja
Application granted granted Critical
Publication of JP6542744B2 publication Critical patent/JP6542744B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0621Item configuration or customization
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C13/00Assembling; Repairing; Cleaning
    • G02C13/003Measuring during assembly or fitting of spectacles
    • G02C13/005Measuring geometric parameters required to locate ophtalmic lenses in spectacles frames
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • A61B3/0041Operational features thereof characterised by display arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/111Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring interpupillary distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B29WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
    • B29DPRODUCING PARTICULAR ARTICLES FROM PLASTICS OR FROM SUBSTANCES IN A PLASTIC STATE
    • B29D12/00Producing frames
    • B29D12/02Spectacle frames
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C13/00Assembling; Repairing; Cleaning
    • G02C13/001Assembling; Repairing
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C13/00Assembling; Repairing; Cleaning
    • G02C13/003Measuring during assembly or fitting of spectacles
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00Optical parts
    • G02C7/02Lenses; Lens systems ; Methods of designing lenses
    • G02C7/024Methods of designing ophthalmic lenses
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00Optical parts
    • G02C7/02Lenses; Lens systems ; Methods of designing lenses
    • G02C7/024Methods of designing ophthalmic lenses
    • G02C7/027Methods of designing ophthalmic lenses considering wearer's parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16BBIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
    • G16B5/00ICT specially adapted for modelling or simulations in systems biology, e.g. gene-regulatory networks, protein interaction networks or metabolic networks
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B33ADDITIVE MANUFACTURING TECHNOLOGY
    • B33YADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
    • B33Y10/00Processes of additive manufacturing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B33ADDITIVE MANUFACTURING TECHNOLOGY
    • B33YADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
    • B33Y50/00Data acquisition or data processing for additive manufacturing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B33ADDITIVE MANUFACTURING TECHNOLOGY
    • B33YADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
    • B33Y80/00Products made by additive manufacturing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole

Abstract

【課題】既製のまたは事前に規定された部品を排他的に使用せずに、ゼロから完全なカスタム製品を創作するためのシステム及び方法を提供すること。【解決手段】カスタム製品を創作するためのシステムは、ユーザの画像データ及び/または測定データを捕捉するための画像捕捉デバイスを含む。コンピュータが、画像捕捉デバイスに通信的に連結されており、捕捉した画像データ及び/または測定データに基づいてユーザの解剖学的モデルを構築するように構成される。コンピュータは、構成可能な製品モデルを提供し、製品モデルのプレビュー及び自動的なまたはユーザ主導のカスタマイゼーションを可能にする。ディスプレイが、コンピュータに通信的に連結されており、解剖学的モデルまたはユーザの画像データに重ね合わせられたカスタム製品モデルを表示する。【選択図】図2

Description

本発明は、ゼロからの優位なカスタム製品のオンデマンド生成、製造及び配達に関する。より詳細には、主題発明は、自動嗜好プロファイル及び/またはユーザ主導のユーザ固有の嗜好プロファイルから生成された仕様から製品を作製すること、並びにプロファイルに基づいてユニークで優位なカスタム製品を作製することによって、個人ユーザのニーズ及び嗜好に最適なカスタマイズされたパーソナル製品をオンデマンドで創作、製造及び配達することにある。
特定のユーザに応じた唯一の製品としてカスタマイズまたは作製されることを顧客が所望できる多くのパーソナル製品があるが、これらのパーソナル製品の主要なものの一つに、アイウェアがある。本発明は、カスタムアイウェアの創作、生産及び配達に関して記述するが、本主題発明が、ユーザの解剖学的または身体的特性並びに特定の製品に対するユーザの嗜好に関連する多種多様な製品の創作、生産及び配達に関係することが認識される。述べたように、アイウェアの創作、生産及び配達に関する本発明の記述が、ユーザの特徴及び要望に対してカスタマイズされる多種多様な製品の創作、生産及び配達との多数の類似点を持つことが認識される。それ故に、以下に本発明をアイウェアに関して記述するが、本発明がそのようなものに限定されないことが理解される。
アイウェアは、多くの人々にとって必需品となっているが、その購入には消費者にとっての多くの課題がある。伝統的な店内での購入では、消費者は店内で限られた選択肢に直面し、多くの場合に、複数の店舗を訪れる必要がある。ユーザは、なおも、手に余る沢山の選択肢を見て回り、フィット、スタイル、色、形状、価格などの間の妥協点を見つけ出さなくてはならない。アイウェアは、最も一般的には、一つまたは二つの一般的な色及びサイズにおいて市販されるよう特定のスタイルで大量生産されている。ユーザの顔は、識別の基本的な形態として十分にユニークであるが、ユーザは人によって異なる一般的な顔用に作られた製品から選ばなくてはならない。ユーザにとって、個人のユニークな趣味、顔の骨格及びニーズに合う一つの完璧なメガネを見つけ出すことは非常に困難である。また、多くの場合に、そもそも視力の処方が必要であるので、身に付けたときの見え方を考慮することも困難である。
最近の参入者は、これらの問題点のいくつかに対処するための試みとして、オンライン商店街でアイウェアを見て回ってきた。しかしながら、市販のアイウェア選択システムのいずれも、ゼロから作製される、ユーザの解剖学的特徴並びにユーザの好き嫌いに対してカスタマイズされた完全にユニークで優位な製品を提供することは試みていない。それ故に、既製の予め設計され大量生産されたまたは在庫のある部品のみに頼らずに完全にカスタマイズ可能な優位な製品をユーザに提供することに対するニーズがある。主要な部品の基礎をなす形態、サイズ、形状または他の特性は、ユーザにとっての真にユニークかつカスタマイズされた製品を提供するためにカスタマイズする必要がある。ユーザの画像データを取得できた時点で、次に、ユーザの顔を解析して極めて重要な測定値を得、ユーザの嗜好を決定し、カスタマイズされたアイウェアをオンデマンドで製造することが所望される。
当然ながら、可能な限り自動で、かつユーザが今までに見てきたアイウェアの最も完璧な唯一のピースをユーザに戻すプロセスが所望されている。これが比較的に敏速な様式で実行されれば、オンデマンドで製造されたユニークなアイウェアのピースが即座にユーザに提供される。
より詳細には、オンライン市場は、依然として消費者にとっての数多くの問題が存在しているが、急速に成長している。消費者にとっては、オンラインでの買物中にメガネを身に付ける能力が不十分である。オンラインサイトは、店舗よりも選択肢は多いが、多くの場合に、消費者は、選択用のメガネの果てしないページに直面する。メガネの品質は、多くの場合に未知の要素であり、消費者は、購入するまで新しいメガネを物理的に持つまたは見ることができないので、それらが正しくフィットし、快適であるかについてましてやなおさら心配する。
高品質の素材及び設計を持つユニークなオーダーメイド製品を提供し、ゼロから作製するものとしてユーザが考えている公正かつ手ごろな価格でユニークかつ優位なアイテムを提供し、この場合ではメガネである個人向けの完璧な製品を創作及び購入するためのより容易かつよりカスタマイズされた体験を可能にする買物体験に対する明確なニーズがある。
アイウェアを含む衣料品を仮想的に身に付ける概念は、長年にわたって先行技術において論じられてきた。下記の特許のすべては、プレビューシステムに関連するが、それらのいずれも、ゼロから作製された製品の提供には関連せず、むしろ、特定のアイテム向けに予め作られている部品に頼っている。
例として、US4,539,585においてSpackovaは、画像内の人物が衣料品を身に付けているものとして視認するためのコンピュータシステムを記述している。US4,730,260におけるMori及びUS4,845,641におけるNinomiyaらは、画像内の人物にアイウェアを仮想的にオーバーレイするためのコンピュータシステムを記述している。US5,280,570においてJordanは、メガネの背後において眼がどのように見えるかの写実的レンダリングを用いる、ユーザが店舗を訪れてメガネを仮想的に身に付ける必要があるシステムを記述している。US5,592,248においてNortonは、アイウェアの仮想画像を人物の顔の画像にオーバーレイすることによって外見をプレビューするさまざまな方法を記述している。US5,983,201においてFayeは、オンラインストアと接続することによってパーソナルコンピュータにおいてユーザが様々な眼鏡を仮想的に身に付けて、ユーザの嗜好及びサイズに基づいてアイウェアのサブセットを選択し、そしてユーザがフレームを購入できるシステムを記述している。US6,095,650においてGaoは、画像を捕捉し、画像のスケーリング及びフレームを中心付けるための瞳孔の検出を含む、ユーザの画像上でアイウェアを重ね合わせて表示するための別のシステムを記述している。US6,142,628においてSaigoは、フレームに加えてレンズ選択及びレンズ形状の表示も含む別の試着システムを記述している。US7,016,824においてWaupotitshは、ユーザによって提供された三次元顔モデルを使用してアイウェアモデルをオーバーレイするアイウェアプレビューシステムを記述している。US6,692,127においてAbitbolは、三次元モデルを取得するための広角カメラを必要とするアイウェア試着システムを記述している。US6,535,223においてFoleyは、既知のスケールのオブジェクトを含む人物の顔の画像に基づいて瞳孔間距離を決定し、その上、プレビューのアイウェアを重ね合わせ、注文できるシステムを記述している。
前述の先行技術のすべてが、人物の画像にアイウェアを重ね合わせてプレビューするさまざまな様式を検討しているが、ゼロからユニークかつ唯一の製品の創作、組立及び配達を行うオンデマンドシステムではない。これらはまた、これまでに大量生産されていない新しいカスタムアイウェアをプレビューすることはできない。ユーザ固有の情報を使用してユーザにとってより優れたアイウェアを作製することもできない。要するに、ゼロから唯一の製品を提供するオンデマンドシステムを使用してアイウェアなどの新しい製品をカスタマイズ、適応、修正、実装または創作することはしない。さらに、前の技術のすべてが、アイウェアを人物の画像に重ね合わせてプレビューすることに依存している。
他方では、US5,576,778においてFujieは、人物の顔面寸法に基づいてアイウェアを設計するシステムを記述している。Fujieの技術が、設計を達成するために、顔の画像データから抽出されたベジェ曲線におけるさまざまなアンカーポイントの制御に限定されていることに留意されたい。しかしながら、個人によるこれらのアンカーポイントの仕様またはその制御は、技術的かつ困難であり、これらのポイントが形状を制御するためのユーザの言葉を使用して制御されるので、より技術的かつ困難である。さらに、Fujieの技術は、ベジェ曲線に基づいた極座標をマシンツールに特異的に送信することに限定される。これは、ユーザにとって余りにも複雑であり、ユーザの言葉単独では、唯一の制御として適さないことがある。
US6,944,327においてSoattoは、ユーザの顔のプレビュー画像に基づいてアイウェアをカスタマイズするシステムを記述している。しかしながら、Soattoの技術は、自動的に生成されたユーザの嗜好を考慮していない。Soattoの技術は、オンデマンドのエンドツーエンドのプロセス、及びアイウェアを実際に製造できるフルシステムを記述していない。さらに、Soattoの方法は、特定のカメラ、正面顔画像のみ、及びサイズ調整のために顔の二次元テンプレートを生成する方法の使用に限定されている。正面画像のみのプレビューへの限定は、良好なプレビュー及びユーザにとっての快適性を保証するためのこめかみ周囲の極めて重要なサイズ調整情報が得られない。さらに、大抵のコンピュータシステムは、便利に使用できるマルチレンズカメラを有していない。調節が、一定の縁サイズを維持しながら制御点を通じてのみ行われ、この利用は、種々のユーザが種々のサイズを確実に必要とするために、制限されることに留意されたい。顔の三次元モデルを表現する方法には、通常では大抵のユーザが使用できない二つ以上のカメラが必要となることが認識される。
US6,533,418においてIzumitaniは、ユーザの顔に重ね合わせた画像プレビューに基づく注文に応じてアイウェアを作製するシステムを記述している。しかしながら、この特許は、レンズ形状、フレームタイプ、フレーム部品及び色の変更のみを論じている。これは、部品の交換または縁なしから縁ありへのフレームスタイルの変更のみは説明しているが、フレーム形状の変更は説明しておらず、より完全にアイウェアをカスタマイズすることを所望する場合には、非常に限定的である。さらに、この特許は、フレームサイズをユーザの顔に合わせる、またはベストなフレームの選択を援助する自動化アルゴリズムは記述していない。代わりに、選択用の多くの交換可能部品を有するカスタム注文カタログのような手動システムを使用する。これは、アイウェアの消費者にとって圧倒的または過度に複雑であり得る。さらに、記述されているプレビューシステムは、アイウェアを身に付けたユーザの正面及び側面の描写しか示さず、インタラクティブビュー、三次元ビューまたは映像は無く、顔の寸法を自動的には測定しない。さらに、ユーザは、正確な測定値を取得するために情報を支援または入力する必要がある。最後に、この特許は、アイウェアの製造は記述しているが、オーダーメイドのアイウェアを実際に生産する方法は明確には記述していない。
US7,845,797においてWardenは、複数のカメラ及び照明源を有するシステムにおいて正面及び側面画像を使用するカスタムアイウェアの製造方法を記述している。この方法は、ユーザの顔に身に付けられているアイウェアの有無にかかわらず、ベストなレンズ位置を決定する前に画像を捕捉する必要がある。この方法は、所望するアイウェアをユーザが既に物理的に所有している必要があり、単にその次のフレームの組におけるレンズの配置を精密にすることをユーザが望んでいることを想定しているので、極めて限定的である。要するに、これは、ゼロから開始し、その後、カスタム製品の創作、設計、組立及び配達を行うオンデマンドのエンドツーエンドシステムではない。
典型的な消費者のニーズを満足させるために、確かなかつ楽しい買物体験を提供できる使い勝手のよい方法及びシステムが必要となっている。システムは、コンピュータハードウェア、及び奥行きもしくは距離測定機能を持たない、最小ハードウェアをスタンドアロンのまたはコンピュータシステムに組み込まれた単レンズデジタルカメラに限定した、典型的な消費者でも使用可能な画像捕捉機器と連携する能力を持つ必要がある。この発明の実施形態は、単一カメラのハードウェアを使用するシステム、及びこれらの技術が、消費者によって使用される形態においてより普及する、または、コンピュータシステムが、小売店または診療室の所在地に据え付けられる場合に、マルチカメラまたは奥行きカメラ技術から利益を得るシステムの両方を記述する。
先行技術は、ユーザにおけるアイウェアの美的プレビューのために主に設計された技術を記述している。より優れた体験、カスタムフィット、カスタムスタイル、自動調節及び推薦を可能にするより定量的な解析、並びにユーザごとのユニークな骨格及び趣味にフィットするようなアイウェアを設計するための全体的な能力に対する必要性がある。
多くの場合には、瞳孔間距離がアイウェアの正確なフィットを保証するための唯一の測定値であるが、その測定値単独では、カスタムアイウェアの正確な身体的装着を保証するには不十分である。特に、累進多焦点もしくはデジタル補正されたまたは自由形状のレンズなどの進歩的な光学系においてはより多くの情報が必要である。ただし、カスタムアイウェアを巧みに作製するのに必要な顔の測定値のタイプ及び量にかかわらず、それらを手動で測定することをユーザに要求すべきではない。大抵のターゲットユーザは、ウェブブラウザにおける容易なプロンプト以上のものには技術的に熟知していない。消費者は、特に、先行技術に記述されているように二次元画像のみを使用する場合に、パーツ及び部品を選りすぐるまたは顧客があらゆる詳細を描くよりも容易な体験を必要としている。方法及びシステムは、ユーザが自動的な推薦を所望する場合に、サイズ調整及びスタイルの自動化を含む容易なカスタマイゼーションを可能にする必要がある。平均的なユーザは、顔にカスタマイズして適合させた設計を有し、「見た通りのものが得られる」表示におけるプレビューを見て、そして変更を行い顔及びフィットの結果を見ることによって、要望する任意のアイウェア設計及び優れたフィットを取得できなければならない。
最後に、方法及びシステムは、ユーザに妥当なコストで生産及び販売し、許容範囲内にある時間内で配達できるように製造可能な製品をもたらす必要がある。プレビューされる製品を、製品を注文するユーザが満足できるコスト及び期間において最終的に製造できない場合には、素晴らしいプレビューシステムは実用的ではないことが認識される。
故に、レンズ及びフレームのより優れた、かつよりパーソナライズされたカスタマイゼーション、より正確なモデリング及びプレビュー、より自動化または支援されたアイウェア選択及びカスタマイゼーション、より詳細な測定を可能にする方法及びシステム、並びにユーザの注文を実現するために効率的かつ経済的にカスタマイズされたアイウェアを生産するための方法に対する切迫したニーズがある。
本主題発明は、多くの重要な部分を有する。第一の部分は、既製のもの、これまでに設計されたもの、大量生産されているものまたは在庫のある部品からは専ら製造されない、ゼロから作製された優位なカスタマイズされた製品が所望されていることの理解である。前述のように、予め作られているまたは既に製造されている多くの部品を選択し、カスタマイズされたオブジェクトにおいてそれらを組み立てる多くのシステムが存在する。しかしながら、多数の大量生産されたアイテムが存在する場合には、ユーザは、ユーザの特定のプロファイルに基づく真にユニークな1個限りの製品が提示されている感覚はもたない。大量生産された部品から作製された製品は、ユーザのユニークな骨格及び嗜好にフィットするのに必要な所望の程度のカスタマイズもされない。ユーザにフィットさせるために、カスタム製品の少なくともいくつかの部分は完全にゼロから創作する必要がある。例えば、製品のある程度の形態を、ユニークな大量生産されていない形状またはサイズに創作する必要がある。ユーザの指示の有無にかかわらず、基本的な形状及びカスタム製品の形態を自動的に設計及び変更する能力は、単にユーザに閲覧させて大量生産された部品を組み立てさせるシステムに勝る重要な利点である。
第二の部分は、どのように個人の解剖学的特徴を確認するか、解剖学的特徴を測定するときに何を測定するか、及びゼロからの優位なオブジェクトの創作においてどのようにこれらの解剖学的な測定特徴を利用するかである。
第三の部分は、ある期間にわたって導き出されたユーザのプロファイル、習慣的な購買傾向、好き嫌いを確認し、これらの好き嫌い及びプロファイルのすべてを使用して、提案されたユニークな製品をユーザに提供できることである。
第四に、ユーザの解剖学的特徴及び嗜好に倣ってモデル化された製品において前述の情報のすべてを考慮し、ユニークな製品を迅速に製造し、許容範囲内にあるスケジュールにおいて製品をユーザに配達できることが重要である。オンデマンドで製品を製造するプロセスフローの予測的な性質の故に、ユーザが所望していると考えられ得る、またはユーザが決して考え付くことができないユニークな製品が生産され、提供される。
故に、高いレベルにおいて、主題のシステムは、既製のもの、これまでに設計されたもの、大量生産されているものまたは在庫のある部品を使用するものに専ら限定されない、ゼロから完全なカスタム製品をユーザが取得できるエンドツーエンドシステムである。製品は、オーダーメイドであり、ユーザの骨格及び個人的嗜好に最も適している。システムは、最終製品の配達を通じてユーザに関するデータを入手するステップを組み込むことができる。このシステムは、ストック、予め設計されている部品または予め作られている部品を排他的に使用せずに、最初からの設計及び製作を可能にする革新を提供することから、先行技術よりも遥かに優れている。それどころか、製品は、最初から設計され、ユーザの好き嫌い、ユニークな解剖学的属性及びユニークな要件のいくつかまたはすべてを自動的に利用する。これにより、最終製品は、設計、形状、フィット、サイズ、色、重量、仕上げ、機能及び芸術的印象に関して、ユーザの望みに可能な限り近づく。さらに、システムはエキスパートシステムであると考えることができるので、例えば、最適なスタイル及びフィットを持つ製品をユーザに提供するために、専門的な人がユーザに提供されるようなものである。いたる所で選択を提案する主題のシステムは、エキスパートのいわゆる人工知能を反映する
システムそれ自体がユニークであることに加えて、解剖学的モデルを開発し、ある特定の解剖学的特徴、さまざまなイメージング技術、測距及びサイズ特性化技術、スケーリング技術、製品提示技術、ユーザ対話技術、並びにカスタム製造技術を直接に導き出すためのさまざまな技術が記述される。これらの技術は、主題のシステムの既にユニークな特徴に追加される。
本主題発明の特徴のうちの一つは、個人の特徴、より詳細には顔の特徴を取得する能力である。自画像、例として、必要とされる解剖学的モデルを得るのに必須の画像情報の提供において、スマートフォンまたはデジタルカメラの利用が実用的であることが見出された。カメラ付き携帯電話で撮るるいわゆる「自撮り」または自画像は、三次元ではないが、スマートフォンから形成された画像のさまざまな特徴を利用して、人物の顔の三次元モデリングを生成することができる。故に、人物の解剖学的特徴を入力する便利な方法は、画像捕捉のためにどこにでもある携帯電話を使用することであり、本主題発明の認定は、解剖学的モデリングを可能にする、単一カメラからの自画像において十分な情報があることである。
本主題発明は、アイウェアに関して記述するが、例として、宝石類、衣類、ヘルメット、ヘッドフォン及び他のパーソナルアイテムを含む任意の性質のパーソナライズされた製品をゼロから設計、製造及び配達することも本主題発明の範囲内にある。また、本発明の範囲は、優位なカスタム製品をゼロから作製することに焦点を合わせるが、記述する方法は、必ずしも100%優位でないまたはゼロから作製されていない高度にユニークなカスタム製品にも適用することができる。多くの製品が、従来の方法を使用して構成、ストックまたは製造することが過度に困難であるカスタム製品を提供するための高度で様々な設計(例えば、何百、何千、何百万もの設計)から利益を得、そして本明細書に記述する方法に極めて適するであろう。製品をカスタムオーダーメイドに合わせることが要求される高度の構成可能性が、本発明の範囲内にある。
主題のオンデマンドのエンドツーエンドシステムの包括性は、以下に依存している。
画像データ及び解剖学的情報の取得及び解析
本主題発明において、改善されたまたは代替的な方法を可能にする新しい方法は、画像の捕捉並びにユーザの解剖学的情報及びモデルの決定を達成する。これらは、アイウェアフレーム並びに進歩的な光学設計の両方を特徴付けるのに使用される、より詳細な解剖学的データ、美観の解析及び他のメトリクスを含む。従来、そのような詳細な設計を特徴付けるために、画像データから抽出された解剖学的情報、美的情報及び他のメトリクスを使用する試みは無かった。
他のユーザ情報の取得
画像データから自動的には取得されない他のユーザ情報及び嗜好を使用して、製品をカスタマイズするためのさらなる情報を提供することができる。この情報は、製品設計を特定のユーザに適するように変更できる新規の予測及び学習アルゴリズムに使用される。
構成可能な製品モデル
本主題発明は、在庫部品を交換してカスタマイズされた組み立てを行うよりも遥かにパーソナライズされたカスタマイゼーションを可能にする構成可能な製品モデルを記述する。構成可能なモデルは、全体形状、輪郭、三次元表面、測定値、色、仕上げ及び追加のものを、個人ユーザにより完全にカスタマイズすることができる。
製品のカスタマイゼーション
解析された画像データから導き出されたユーザの骨格並びに個人的嗜好に基づいて、アイウェアの形状及びスタイルをそのユーザについて自動的にカスタマイズするためのアルゴリズムが使用される。また、カスタム製品の設計及び製作を支援するための、ユーザの趣味及び設計を予測する予測アルゴリズムも使用される。これは、最も見込みが高い設計を前もってユーザに提示するのに役立つ。
優位なカスタム製品のユーザへのプレビュー
主題の方法は、優位なカスタム製品の高忠実度のレンダリングを提供する。これらは、既存の製品の標準的なプレビューではない。アイウェアなどの優位なカスタム製品のプレビューは、ユーザに特異的かつユニークに作製されるので、製品が生産されるまたは存在するのに先だって現れる。これらのプレビューには、製品が存在しておらず、製品説明のための事前の写真、説明書または検査も存在しないので、既存製品のプレビューよりも進歩的な技術を伴う。未だ作られていない優位なカスタム製品の高品質プレビューを可能にするために、すべてのものを迅速に生成または構成する必要がある。主題のシステムは、既存製品(例えば、アイウェアまたはアイウェアの部品)の単なるレンダリングではなく、ゼロから完全に新しいカスタム設計を提供する。
製品プレビューとのユーザ対話
さまざまな改善された方法によって、ユーザは、カスタム設計プレビューと対話し、カスタム設計をリアルタイムで変更し、他からのフィードバックを取得することができ、そしてまた、他の仲間、設計者もしくは眼鏡技師も、そのユーザのためのカスタム製品を設計することができる。
カスタム製品の製造
部品の交換またはアイウェアのいくつかの部品のみの限定されたカスタマイズなどの、カスタマイゼーションの極めて基本的な方法を記述する先行技術とは異なり、主題のシステムは、ゼロから、プレミアムなアイウェアなどの完全なカスタム製品を生産する。優位なカスタムアイウェアは、あるユーザ向けの特定の形状、サイズ及び色の注文に応じて作られたフレーム及びレンズを含む。主題のシステムは、同じ高品質素材で作られた定格のプレミアムなアイウェアの完成品ではあるが、完全なカスタム設計であるものを供給できる進歩的な技術を使用する。
ショッピングシステム
最後に、本主題発明は、ユーザが、カスタム製品を取得するのに必須のステップを進み、自身のデータ及び嗜好を入力し、そして製品を選択及び購入ことができるショッピングシステムを含む。
定義
以下の定義は、説明的な目的のために、本明細書に使用される言葉の広さを定義するのに役立つ。これらの定義は、本発明の範囲を限定せず、当業者は、追加の定義を各カテゴリに応用できることを認識する。本明細書に使用される定義として、画像データは、二次元画像(複数可)、デジタル画像、映像、一連の画像、立体画像、三次元画像、標準的な感光性カメラを用いて入手した画像、複数のレンズを有するカメラを用いて入手した画像、奥行きカメラを用いて入手した画像、レーザ、赤外線または他のセンサモダリティを用いて入手した画像を含む。コンピュータシステムは、タブレット、電話機、デスクトップ、ラップトップ、キオスク、サーバ、ウェアラブルコンピュータ、ネットワークコンピュータ、分散もしくはパラレルコンピュータ、または仮想コンピュータを含む。撮像デバイスは、単レンズカメラ、複数レンズカメラ、奥行きカメラ、レーザカメラ、赤外線カメラ、またはデジタルカメラを含む。入力デバイスは、タッチスクリーン、ジェスチャセンサ、キーボード、マウス、奥行きカメラ、音声認識及びウェアラブルデバイスを含む。ディスプレイは、パネル、LCD、プロジェクタ、三次元ディスプレイ、ヘッドアップディスプレイ、フレキシブルディスプレイ、テレビ受信機、ホログラフィックディスプレイ、ウェアラブルディスプレイ、または他のディスプレイ技術を含む。画像、映像またはインタラクティブレンダリングの形態においてプレビューされた画像は、製品モデル画像と重ね合わせられたユーザの画像、製品モデルのレンダリングと重ね合わせられたユーザの画像、ユーザの解剖学的モデル及び製品モデルの画像を含む。解剖学的モデル、詳細及び寸法は、特徴の長さ(例えば、指の長さ)、特徴間の距離(例えば、両耳間の距離)、角度、特徴の表面積、体積もしくは特徴、特徴の二次元輪郭(例えば、手首のアウトライン)、特徴の三次元モデル(例えば、鼻または耳の表面)、三次元座標、三次元メッシュもしくは表面表現、形状推定もしくはモデル、曲率測定値、または皮膚もしくは髪の色の鮮明度の推定の記述を含む。モデルまたは三次元モデルは、点群、パラメトリックモデル、テクスチャマッピングモデル、表面もしくは体積メッシュ、またはオブジェクトを表す他の点、線及び幾何学的要素の集合を含む。製造命令は、段階的な製造命令、組立命令、順位付け仕様、CAMファイル、gコード、自動化ソフトウェア命令、そしてマシン類を制御するための座標、テンプレート、画像、描画、材料仕様、検査寸法または要件を含む。製造システムは、製造命令をユーザ及び/またはマシンに供給するように構成されたコンピュータシステム、製造命令に従うように構成されたマシンを含むネットワーク化されたコンピュータシステム、命令が連続的に伝えられる一連のコンピュータシステム及びマシンを含む。アイウェアは、眼鏡フレーム、サングラスフレーム、フレーム及びレンズの両方、処方アイウェア、非処方(度なし)アイウェア、スポーツアイウェア、または電子もしくはウェアラブル技術のアイウェアを含む。
カスタム製品
以下は、カスタムフィットであり、画像データから導き出されたユーザ骨格に基づいて設計され、プレビューされ、ユーザの嗜好により変更され、その後、カスタマイゼーション後初めて注文に応じて製造される製品についての実施形態である。
一実施形態に従う、カスタム製品を創作するための方法が開示される。一つの方法は、少なくとも一つのコンピュータシステムを使用して、ユーザの画像データを入手することと、少なくとも一つのコンピュータシステムを使用して、解剖学的詳細及び/またはユーザの寸法を決定することと、少なくとも一つのコンピュータシステム及びユーザの解剖学的データを使用して、ユーザについての新しい製品モデル(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)を構成することと、少なくとも一つのコンピュータシステムを使用して、構成可能な製品モデルをユーザの画像データまたは解剖学的モデルに適用することと、少なくとも一つのコンピュータシステムを使用して、構成可能な製品モデルを含むユーザの画像をプレビューすることと、選択的に、少なくとも一つのコンピュータシステム及び/またはユーザ入力を使用して、構成可能な製品モデル特性(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)をプレビューにおいて調節及び更新することと、プレビューされたモデルに基づいてカスタム製品を製造するための命令を実行する少なくとも一つのコンピュータシステムを使用して、作成することと、少なくとも一つのコンピュータシステム及び製造システムを使用して、新しいカスタム製品を製造することと、を含む。
一実施形態に従う、カスタム製品を創作するためのシステムが開示される。一つのシステムは、ユーザの画像データを取得するように構成された画像取得デバイスと、ユーザからの命令を受信するように構成された入力デバイスと、画像データをユーザに表示するように構成されたディスプレイと、カスタム製品を生産するように構成された製造システムと、カスタム製品を創作及びプレビューするための命令を記憶するためのデジタルストレージデバイスと、以下を含む方法を遂行するための命令を実行するように構成されたプロセッサと、を含む。この方法は、少なくとも一つのコンピュータシステムを使用して、ユーザの画像データを入手することと、少なくとも一つのコンピュータシステムを使用して、解剖学的詳細及び/またはユーザの寸法を決定することと、少なくとも一つのコンピュータシステム及びユーザの解剖学的データを使用して、ユーザについての新しい製品モデル(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)を構成することと、少なくとも一つのコンピュータシステムを使用して、構成可能な製品モデルをユーザの画像データまたは解剖学的モデルに適用することと、少なくとも一つのコンピュータシステムを使用して、構成可能な製品モデルを含むユーザの画像をプレビューすることと、選択的に、少なくとも一つのコンピュータシステム及び/またはユーザ入力を使用して、構成可能な製品モデル特性(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)をプレビューにおいて調節及び更新することと、少なくともコンピュータシステムを使用して、プレビューされたモデルに基づいてカスタム製品を製造するための命令を作成することと、少なくとも一つのコンピュータシステム及び製造システムを使用して、新しいカスタム製品を製造することと、である。
カスタム製品を創作するためのシステムが開示される。一つのシステムは、ユーザの画像データを取得するように構成された画像取得デバイスと、ユーザからの命令を受信するように構成された入力デバイスと、画像データをユーザに表示するように構成されたディスプレイと、カスタム製品を生産するように構成された製造システムと、カスタム製品を創作及びプレビューするための命令を記憶するためのデジタルストレージデバイスと、方法を遂行するための命令を実行するように構成されたプロセッサと、を含む。
システムは、ユーザの画像データを入手することと、解剖学的詳細及び/またはユーザの寸法を決定することと、対応する新しい製品モデルを提供することによってこれらの詳細を考慮に入れた製品を構成することと、構成可能な製品モデルをユーザの画像データまたは解剖学的モデルに適用することと、構成可能な製品モデルを含むユーザの画像をプレビューすることと、選択的に、プレビューを調節及び更新することと、プレビューされたモデルに基づいてカスタム製品を製造するための命令を作成することと、新しいカスタム製品を製造することと、を含む。前述は、適切にプログラムされたコンピュータを使用して遂行できるし、または非一時的コンピュータ可読媒体の形態であってもよい。
より詳細には、ユーザの画像データを受信するように構成された少なくとも一つのコンピュータシステムを含む、カスタムアイウェアを創作するためのシステム及び方法が開示される。コンピュータシステムは、さらに、限定されないが、デモグラフィック、処方、嗜好などを含むユーザからの他のデータを受信するように構成される。システム及び方法は、ユーザが提供したデータからの、ユーザに関する定量的な解剖学的情報の決定を含むことができる。システム及び方法は、ユーザの解剖学的な及びスタイルのニーズを満足させるための、サイズ、形状、色、仕上げ及びスタイルを含むアイウェアモデルの特性のカスタマイゼーションを含むことができる。システムは、プレビューされた表示に一致するような、カスタマイズされたアイウェアの物理的な製造も含む。
一実施形態に従う、ディスプレイを備えて構成された少なくとも一つのコンピュータシステムを含む、カスタムアイウェアを創作及び視覚化するためのシステム及び方法が開示される。コンピュータシステムは、さらに、ユーザの画像データ及び/または測定データを捕捉するための少なくとも一つの画像捕捉デバイスを備えて構成される。コンピュータシステムは、さらに、デモグラフィック、処方及び嗜好を含むユーザからの他のデータを受信するように構成される。システム及び方法は、ユーザが提供したデータからの、ユーザに関する定量的な解剖学的情報の決定を含むことができる。システム及び方法は、ユーザの顔における適切な位置においてユーザの画像データに重ね合わせられたアイウェアモデルの視覚化を含むことができる。システム及び方法は、アイウェアモデルの特性のカスタマイゼーション、及びユーザの画像データに重ね合わせられカスタマイズされたアイウェアの更新されたプレビューの提供も含むことができる。システム及び方法は、プレビューされた表示に一致するような、カスタマイズされたアイウェアの物理的な製造も含む。
別の実施形態に従う、アイウェアを自動的にカスタマイズするためのシステム及び方法が開示される。コンピュータシステムは、さらに、ユーザの画像データ、定量的な解剖学的情報及び他の提供されたデータを解析し、ユーザの骨格及びスタイルの嗜好にベストマッチするようなアイウェアモデルの最適特性を決定するように構成される
別の実施形態に従う、カスタムアイウェアモデルと対話するためのシステム及び方法が開示される。コンピュータシステムは、さらに、インターフェースアプリケーションを備えて構成される。システム及び方法は、コンピュータシステムを通じてユーザからの入力またはコマンドを取得することができる。システム及び方法は、さらに、アイウェアプレビューの角度、ズーム及び回転を含む、視覚化の制御を含むことができる。システム及び方法は、さらに、ユーザの画像データのアイウェアモデルの位置及び向きの制御を含むことができる。システム及び方法は、さらに、ユーザがアイウェアモデルの特性を直接にカスタマイズし、更新したプレビューを提供できることを含むことができる。
別の実施形態に従う、光学レンズ設計を自動的に規定するためのシステム及び方法が開示される。このシステム及び方法は、ユーザの定量的な解剖学的情報、処方情報及びカスタムアイウェアモデルを解析し、瞳孔間距離、頂点間距離、顔の全巻き角、アイウェア及びフレームアウトラインを含む、光学設計情報を提供するのに必要なパラメータを計算することを含む。システム及び方法は、さらに、カスタムレンズを設計及び製造するためのパラメータを製造システムに提供するように構成される。
別の実施形態に従う、カスタムアイウェアを購入するためのウェブインターフェースのためのシステム及び方法が開示される。コンピュータシステムは、さらに、データ転送手段を備えて構成される。システム及び方法は、アイウェア設計を選択し、アイウェア設計と対話し、それをプレビュー及びカスタマイズし、アイウェアを注文し、そしてカスタムアイウェアを作り、ユーザに発送するのに必要なすべての情報を転送するためのインターフェースをユーザに提供することを含む。
別の実施形態に従う、カスタムアイウェアの製造を制御するためのシステム及び方法が開示される。コンピュータシステムは、さらに、データ及び情報を少なくとも一つの製造システムに転送するように構成される。システム及び方法は、カスタムアイウェアモデルまたはパラメータ、ユーザ情報及び注文を製造システムに転送することを含む。システム及び方法は、さらに、アイウェアモデルまたはパラメータを、製造機器を制御するのに使用される製造データに変換することを含む。システム及び方法は、カスタムアイウェアを製作、検査及び発送するための命令をマシン類、ロボット及び人間オペレータに提供することも含む。
別の実施形態に従う、パラメトリックアイウェアモデルのためのシステム及び方法が開示される。このシステム及び方法は、アイウェア設計の形状及びサイズに関する寸法情報を含有するアイウェアの表示を含む。システム及び方法は、さらに、限定されないが、長さ、幅、高さ、厚さ及び半径を含む、アイウェアモデルのある特定の重要な特徴を規定するパラメータを含む。システム及び方法は、さらに、少なくとも一つのパラメータが変えられたときに更新し、すべてのパラメータの制約を満たすようにアイウェアを自動的に変更するアイウェアモデルを含む。
別の実施形態に従う、学習マシンまたは予測器もしくは予測マシンを含む、ユーザの対話及び嗜好から学習するためのシステム及び方法が開示される。このシステム及び方法は、ユーザがとる、アイウェアの選択、カスタマイズ及びプレビューのアクションの追跡を含む。システム及び方法は、さらに、カスタムアイウェア特性についてのユーザの嗜好を決定するために、ユーザが提供した画像データ、定量的な解剖学的情報及び他の提供された情報に加えて、追跡したアクションの機械学習解析を含む。システム及び方法は、さらに、学習した解析に基づいてユーザに推薦することを含む。
別の実施形態に従う、データ本体から学習するためのシステム及び方法が開示される。このシステム及び方法は、画像データ、定量的な解剖学的情報、嗜好及びカスタムアイウェアをユーザ情報に関連付ける他の情報のデータベースを作製することを含む。システム及び方法は、それらのデータに基づいてユーザの嗜好を予測するために機械学習分類子を訓練することを含む。システム及び方法は、さらに、解析を新しいユーザに応用することによって、そのユーザの骨格及び嗜好に適合するであろうカスタムアイウェア設計を最適に提供することを含む。
別の実施形態に従う、カスタマイゼーションプロセスを通してユーザを案内するためのシステム及び方法が開示される。このシステム及び方法は、アイウェアをユーザの嗜好及び骨格にカスタマイズするのに必要なステップを通してユーザを案内するための命令または質問のシーケンスを提供することを含む。
別の実施形態に従う、不十分なフィットを予測するためのシステム及び方法が開示される。このシステム及び方法は、ユーザの定量的な解剖学的情報とカスタムアイウェア設計との間のフィットを解析することを含む。システム及び方法は、シミュレーション、物理的モデリング及び解析を使用して、アイウェアとユーザとの間の準光学的なフィットが設計されるときを予測することを含む。システム及び方法は、さらに、準最適設計情報をユーザに提供すること、またはそれを自動的に補正することを含む。
別の実施形態に従う、カスタマイズされたアイウェアモデルを通じた視覚をプレビューするためのシステム及び方法が開示される。このシステム及び方法は、レンズの形状、サイズ及び光学的特性を含む、カスタムアイウェアモデルを通じた視覚のプレビューをレンダリングすることを含む。システム及び方法は、限定されないが、歪み、焦点領域、色及び他の光学的効果を含むユーザの視覚をシミュレートする動画または静止画をレンダリングすることを含む。
別の実施形態に従う、別のアイウェアをコピーするためのシステム及び方法が開示される。このシステム及び方法は、アイウェアを身に付けている、ユーザを含む人物の画像データを受信することを含む。システム及び方法は、さらに、アイウェアを検出し、形状、色及びサイズを解析することを含む。システム及び方法は、さらに、形状、サイズ及び色の解析に一致するようにカスタムアイウェア設計を最適化することを含む。システム及び方法は、さらに、ユーザの画像データにおいてカスタムアイウェアをプレビューし、さらなるカスタマイゼーションを可能にすることを含む。
別の実施形態に従う、カスタムアイウェアプレビュー、及びアイウェアをカスタマイズする能力を共有するためのシステム及び方法が開示される。このシステム及び方法は、ユーザの画像データをプレビューしてアイウェアをカスタマイズするための許可を、少なくとも一つのコンピュータシステムから少なくとも一つの他のコンピュータシステムに送信することを含む。システム及び方法は、さらに、第三者に、ユーザの画像データにおいてアイウェアモデルと対話させ、それをカスタマイズ及び更新させることを含む。システム及び方法は、さらに、第三者が、フィードバック及び更新した設計をユーザに提供することを含む。
別の実施形態に従う、アイウェアの色を別のオブジェクトと一致させるためのシステム及び方法が開示される。このシステム及び方法は、所望の色を持つオブジェクトについての画像データまたは(限定されないが、製造業者、品番などを含む)情報を取得することを含む。システム及び方法は、さらに、参照画像において画像データの色をキャリブレーションすることを含む。システム及び方法は、さらに、所望のオブジェクトの色特性を抽出し、その色をカスタムアイウェアモデルに適用することを含む。
例えば、本願発明は以下の項目を提供する。
(項目1)
製品を提供するためのシステムにおいて、ゼロから1個限りのカスタム製品を創作するためのシステムを提供する技術的改善が、
ユーザの画像データ及び/または測定データを捕捉するための画像捕捉デバイスと、
前記画像捕捉デバイスに通信的に連結されており、前記捕捉した画像データ及び/または測定データに基づいて前記ユーザの解剖学的モデルを構築するように構成されたコンピュータであって、製品モデルを提供し、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、ゼロから1個限りのカスタム製品を構成できるような前記製品モデルのカスタマイゼーションを可能にするようにパラメータをカスタマイズして前記製品モデルを変更する前記コンピュータと、
前記コンピュータに通信的に連結されており、前記解剖学的モデルまたは前記ユーザの画像データに重ね合わせられた前記カスタム製品モデルを表示するディスプレイと、を備えており、
前記コンピュータが、さらに、該カスタマイズされた製品モデルに従いゼロから前記ユーザのためのカスタム製品を製造するための前記カスタマイズされた製品モデルを製造業者に提供するように構成された、前記システム。
(項目2)
画像データの取得及び解析が、選択的に、前記画像に組み込まれる解剖学的詳細を決定するための画像データを入手することと、前記ユーザ入力及び解剖学的詳細に基づいて三次元製品モデルを構成することと、前記構成可能な三次元製品モデルに基づいた前記ユーザの画像をプレビューすることと、前記プレビューされた画像に基づいて製造命令を作成することと、を含む、項目1に記載のシステム。
(項目3)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記製品がアイウェアであり、前記製品モデルが構成可能なアイウェアモデルである、
(b)前記画像捕捉デバイスが、単レンズカメラを備え得、自画像をとる能力があるハンドヘルドデジタルカメラを含む、
(c)前記解剖学的モデルが、前記ユーザの顔の少なくとも一部分で構成された顔モデルである、
(d)前記カスタム製品モデルのカスタマイズ可能な特性が、サイズ、形状、色、仕上げ及びスタイルの少なくとも一つを含む、
(e)前記製品がアイウェアであり、前記コンピュータが、前記捕捉した画像データ、測定データ、導き出された解剖学的モデルまたはユーザ入力の少なくとも一つに基づいて、前記アイウェアモデルを自動的にカスタマイズするように構成される、そして選択的に、
(i)前記コンピュータが、前記ユーザの前記骨格にベストフィットするように前記アイウェアモデルをカスタマイズするように構成される、及び/または
(ii)前記コンピュータシステムが、前記フレーム及びレンズの前記サイズ及び形状を調節するように前記アイウェアモデルのパラメータをカスタマイズするように構成される、及び/または
(iii)前記コンピュータが、さらに、前記ユーザが選択するための複数のカスタムアイウェアモデルを生成するように構成される、
(f)前記製品がアイウェアであり、前記コンピュータが、さらに、前記アイウェアについての光学レンズ設計をカスタマイズするように構成される、
(g)前記コンピュータが、さらに、前記カスタマイゼーションを先導するためのユーザ入力及び嗜好を受信するように構成される、
(h)前記コンピュータシステムに通信的に連結されており、ゼロから前記1個限りの大量生産でない製品を製造するように構成された製造システムであって、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、前記1個限りの製品が、前記カスタマイズされた製品モデル、ユーザ情報及び注文情報に従い前記ユーザ向けに設計された、前記製造システムをさらに含む、
(i)ユーザ向けのカスタマイズされた製品モデルの提供が、
前記ユーザから画像データを取得及び解析することと、
前記取得及び解析した画像データに基づいて前記製品モデルを自動的にカスタマイゼーションすることと、
カスタマイゼーションの程度、それ故に、前記製造品のカスタマイゼーションの程度を変えるように前記自動的にカスタマイズされた製品を修正することによって、ゼロからの1個限りの製品の創作、組立及び配達に基づくオンデマンドの1個限りの製品を提供することと、を含む、
(j)前記コンピュータシステムが、顔を検出し、前記顔の姿勢を決定し、顔の特徴を検出し、そして解剖学的モデルを前記検出された特徴及び画像データに当てはめることによって、前記画像データを解析するように構成される、
(k)前記コンピュータシステムが、複数のユーザについての画像データ及び解剖学的モデルで構成された訓練データに基づいて画像データを解析する及び解剖学的モデルを構成するための機械学習を使用するように構成される、
(l)前記画像捕捉デバイスが、前記コンピュータシステムの両側に位置付けられた少なくとも二つのカメラで構成される、
(m)前記画像捕捉デバイスが、複数レンズデジタルカメラまたは奥行きセンサもしくは奥行き測定機能を持つカメラである、
(n)前記画像データが、少なくとも一つの画像または映像である、
(o)前記画像データが、奥行き測定データを加味した少なくとも一つの画像または映像である、
(p)前記コンピュータシステムが、前記カスタム製品の物理プロトタイプまたはプレビューを創作するように構成される、項目1または2に記載のシステム。
(項目4)
前記画像入手及び解剖学的モデル構成が、前記解剖学的モデルを現実世界の測定単位にスケーリングすることを含む、項目1〜3のいずれか1項に記載のシステム。
(項目5)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記解剖学的モデルが、一つのみの画像を用いてスケーリングされる、
(b)前記解剖学的モデルが、画像データをスケーリングすることによってスケーリングされる、
(c)前記解剖学的モデルが、参照ターゲットを用いてスケーリングされる、
(d)前記解剖学的モデルが顔の特徴間の距離を利用してスケーリングされ、前記解剖学的モデルが前記ユーザの前記顔を含む、
(e)前記解剖学的モデルが、参照ターゲットに対する奥行きを決定することによってスケーリングされる、
(f)前記解剖学的モデルが、生来の単位のスケールを持つ形状モデルを前記画像データに当てはめることによってスケーリングされる、項目4に記載のシステム。
(項目6)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記解剖学的モデルが、前記画像データから検出された点集合として再構成される、
(b)前記解剖学的モデルが、三次元点群として再構成される、
(c)前記解剖学的モデルが三次元メッシュモデルとして再構成され、前記三次元メッシュモデルが、好ましくは、変形可能または形状モデルである、
(d)複数のカメラ位置が前記解剖学的モデルの生成に利用され、前記解剖学的モデルが三次元モデルであり、前記三次元解剖学的モデルのカメラ位置が、前記解剖学的モデルが前記画像データと共に登録されるように解決される、
(e)前記製品モデルが、三次元パラメトリックアイウェアモデルである、
(f)前記製品がアイウェアであり、前記製品モデルが、個別に修正することができる前記製品の寸法に関するパラメータを好ましくは有する構成可能なアイウェアモデルであり、前記構成可能なアイウェアモデルが、フレームの長さ、高さ及び厚さ、テンプルの長さ、高さ及び厚さ、ブリッジ幅、レンズのサイズ、テンプルの角度、テンプルの曲率及び曲げ角、前記フレームの曲率、特徴の半径または曲率、ノーズパッドの高さ、奥行き、曲率及び角度の少なくとも一つについてのパラメータを好ましくは有する、
(g)前記製品モデルが、ある特定の特徴または寸法の変化を抑制する制約を有する、
(h)前記製品モデルが、ある特定の特徴または寸法の変化度を制限する制約を有する、
(i)前記意図されたスタイルを大幅に変更することのないカスタマイゼーションが可能な、パラメータ及び制約の独自のセットを持つ複数のベース製品モデルが存在する、
(j)前記コンピュータが、前記モデル間の相違または寸法を決定可能なように、前記ユーザの解剖学的モデルと相対的に前記製品モデルを自動的に位置付けるように構成され、前記コンピュータシステムが、好ましくは、前記決定した相違または寸法の最適化に基づいて前記製品モデルを自動的にカスタマイズするように構成される、
(k)前記コンピュータシステムが、前記解剖学的モデルの非対称の特徴にフィットするように、前記製品モデルを自動的にカスタマイズするように構成される、
(l)前記コンピュータシステムが、前記解剖学的モデルのさまざまな顔の表情または位置にフィットするように、前記製品モデルを自動的にカスタマイズするように構成される、
(m)前記コンピュータシステムが、前記ユーザの解剖学的モデル及び画像データの形状、色及びサイズなどの美的特性にベストフィットするように、前記製品モデルを自動的にカスタマイズするように構成される、
(n)前記コンピュータが、ユーザの嗜好を決定するための機械学習技術を使用して構成される、
(o)前記コンピュータシステムが、前記カスタム製品が前記ユーザの嗜好に一致するかの見込みに基づいて、前記ユーザについての複数のスタイルまたはカスタム製品を自動的にカスタマイズ及びランク付けするように構成される、
(p)前記コンピュータが、既存のアイウェアの画像データに一致またはそれを複製するように、前記製品モデルを自動的にカスタマイズするように構成される、
(q)前記コンピュータシステムが、前記ユーザの嗜好及び解剖学的モデルまたは画像データに最も合う最適なソリューション(複数可)を見つけ出すように、前記製品モデルの複数のパラメータを自動的に調節する、
(r)前記製品がアイウェアであり、前記コンピュータが、さらに、前記ユーザの視力の処方情報を受信するように構成される、
(s)前記製品がアイウェアであり、前記コンピュータシステムが、前記カスタムアイウェアモデルにベストフィットするよう光学系設計及び材料を調節するように構成され、前記コンピュータシステムが、好ましくは、前記ユーザの処方情報に要求される前記光学系設計にベストフィットするように、前記アイウェアモデルを自動的にカスタマイズするように構成される、
(t)前記製品がアイウェアであり、前記コンピュータシステムが、瞳孔間距離、頂点間距離、広角傾斜、フレームの全巻き角、及びアイウェアと相対的な眼の位置の少なくとも一つを含む、前記解剖学的及びアイウェアモデルの光学的測定値を決定するように構成される、
(u)前記製品がアイウェアであり、前記コンピュータシステムが、さらに、光学的測定値を事前に規定された最適値に最適化するよう、前記カスタムアイウェアモデルを自動的に調節するように構成される、
(v)前記製品がアイウェアであり、前記コンピュータシステムが、前記解剖学的、光学的及びアイウェアモデルを解析し、光学性能についての任意のパラメータが許容できないか否かを決定するように構成される、
(w)前記製品がアイウェアであり、前記コンピュータシステムが、前記カスタムアイウェアモデル及びカスタム光学系のプレビューを生成するように構成される、
(x)前記製品がアイウェアであり、前記コンピュータシステムが、歪みまたは反射を含む前記光学系の効果をプレビューするように構成される、項目1〜5のいずれか1項に記載のシステム。
(項目7)
前記コンピュータシステムが、前記コンピュータシステムに連結されたディスプレイに示されたユーザの画像データにおいて新しい1個限りのカスタム製品のプレビューをレンダリングするように構成された、項目1〜6のいずれか1項に記載のシステム。
(項目8)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記コンピュータシステムが、前記ユーザの画像データにおける照明の特性を決定し、それらの特性を前記新しいカスタム製品モデルの前記レンダリングされたプレビューに適用するように構成される、
(b)前記コンピュータシステムが、前記新しい製品モデルの前記レンダリングされたプレビューが前記画像データに一致するよう、前記画像のホワイトバランスを決定するように構成される、
(c)前記コンピュータシステムが、奥行き計算及び前記ユーザの前記解剖学的モデルを使用して、前記レンダリングされた新しい製品モデルが可視またはマスクされた部分を決定するように構成される、
(d)前記コンピュータシステムが、前記レンダリングカメラにとって可視の前記アイウェアの部分を決定し、非可視である部分にマスクするように構成され、前記コンピュータシステムが、選択的に、レンダリング中に前記マスクを適用する、または前記コンピュータシステムが、選択的に、前記マスクを前記レンダリングされた画像に適用して前記画像を前記ユーザの画像データと組み合わせる、
(e)前記コンピュータシステムが、レイトレーシングを使用して前記アイウェアモデルをレンダリングするように構成され、前記コンピュータシステムが、選択的に、前記解剖学的モデルを使用して、レンダリング中には前記アイウェアモデルを見えないようにし、一方でレイトレーシング中に前記アイウェアモデルをマスクするように構成される、
(f)前記コンピュータシステムが、前記アイウェア及び解剖学的モデルをレンダリングして前記画像データに登録するのに必須の前記カメラ位置を決定するように構成され、前記コンピュータシステムが、選択的に、レンダリング中に前記解剖学的モデルを表示しないように構成される、
(g)前記コンピュータシステムが、前記解剖学的モデル、アイウェアモデル、及び/または画像データの前記レンダリングを調節して、前記オリジナル画像データを取得するのに使用したものとは異なるカメラの視点をシミュレートするように構成される、項目7に記載のシステム。
(項目9)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記コンピュータシステムが、前記コンピュータシステムに連結されたディスプレイに示された前記ユーザの解剖学的モデルにおいて新しいカスタム製品のプレビューをレンダリングするように構成され、前記解剖学的モデルが、選択的に、前記ユーザの画像データを使用してテクスチャマッピングされる、
(b)前記コンピュータシステムが、前記新しいカスタム製品の物理プレビューを生成するように構成される、
(c)前記コンピュータシステムが、前記コンピュータシステムに連結されたディスプレイに1:1実物大スケールにおいて、前記新しいカスタム製品のプレビューをレンダリングするように構成される、
(d)前記第一のコンピュータシステムが、ユーザの画像データにおいて新しいカスタム製品のプレビューをレンダリングするための少なくとも一つの追加のリモートコンピュータシステムと通信し、その結果、前記第一のコンピュータシステムが、前記リモートシステムから画像データを受信し、前記第一のコンピュータシステムに連結されたディスプレイに示すように構成される、
(e)前記コンピュータシステムが、前記ユーザからの入力を受信して、プレビューに基づいて前記ユーザの骨格と相対的に前記カスタム製品モデルの位置を調節するように構成される、
(f)前記コンピュータシステムが、選択的に、前記ユーザによって定義された新しい位置に基づいて、前記ユーザの骨格にフィットするよう前記カスタム製品モデルを更新するように構成され、前記コンピュータシステムが、選択的に、前記ユーザによって定義された前記新しい位置に基づいて、前記カスタム製品モデルが前記ユーザの骨格において静止する新しい静止位置を計算するように構成される、
(g)前記コンピュータシステムが、前記プレビューされた画像データにおいて前記アイウェアを前記ユーザが直接にタッチして再配置することができる前記ユーザからのタッチ入力を受信するように構成される、
(h)前記コンピュータシステムが、前記ユーザの変更が、製品のフィットにおいて望ましくない、許容できないまたは不十分さを生じ得る場合に、前記ユーザに警告するように構成される、
(i)前記コンピュータシステムが、前記カスタム製品モデルの前記形状、サイズ、寸法または物理的特性の少なくとも一つを調節するためのユーザ入力を受信するように構成され、前記コンピュータシステムが、選択的に、前記ユーザが前記プレビューにタッチすることによって前記カスタム製品モデルを直接編集することができるタッチ形態のユーザ入力を受信するように構成される、または前記コンピュータシステムが、選択的に、前記カスタム製品モデルの前記形状、サイズ、寸法または物理的特性の少なくとも一つに影響を与える制御を前記ユーザに提供するように構成される、
(j)前記コンピュータシステムが、前記カスタム製品モデルの前記色、仕上げ、材料または美的特性の少なくとも一つを調節するためのユーザ入力を受信するように構成される、
(k)前記コンピュータシステムが、前記コンピュータシステムとのユーザ対話を記録及び保存するように構成され、前記ユーザ対話が、前記カスタム製品モデルに為された変更、前記カスタム製品モデルとの対話に費やした時間、前記カスタム製品モデルの格付け、購入品、保存されたカスタム製品モデル、プレビューされたカスタム製品モデルの少なくとも一つからなり、前記コンピュータシステムが、選択的に、ユーザ対話に基づいてユーザの嗜好を予測するように構成される、または前記コンピュータシステムが、選択的に、他のユーザの過去の対話に基づいてユーザの嗜好を予測するように構成される、
(l)前記コンピュータシステムが、対話から導き出されたユーザの嗜好に基づいて製品モデルを自動的にカスタマイズするように構成される、項目1〜8のいずれか1項に記載のシステム。
(項目10)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記コンピュータシステムが、カスタム製品を生産するための前記製造システム向けの命令を自動的に生成するように構成される、
(b)前記コンピュータシステムが、カスタム製品を生産するための製造要員向けの命令を自動的に生成するように構成される、
(c)前記コンピュータシステムが、前記カスタム製品モデルに基づいて、複数の製造機器向けのコンピュータ数値制御命令を生成するように構成される、
(d)前記コンピュータシステムが、積層造形加工機器のための前記カスタム製品の二次元または三次元表現を生成するように構成される、
(e)前記コンピュータシステムが、除去加工機器のためのツールパスを持つ前記カスタム製品の二次元または三次元表現を生成するように構成される、
(f)前記コンピュータシステムが、前記カスタム製品モデルに基づいてロボット制御命令を生成するように構成される、
(g)前記コンピュータシステムが、命令のシーケンスを、前記カスタム製品を完成するのに必要な各製造機器に転送するように構成される、
(h)前記コンピュータシステムが、視力の処方情報をレンズ製造機器またはレンズ製造業者のコンピュータシステムに転送するように構成される、
(i)前記コンピュータシステムが、仕上げ機器向けの色、パターン、模様または他の仕上げ命令を生成するように構成される、
(j)前記コンピュータシステムが、前記優位なカスタム製品を追跡するための固有の製造番号を生成し、前記カスタム製品に前記固有の製造番号をマークするように構成される、
(k)前記製造システムが、前記カスタム製品モデル及び特性に基づいて品質管理または検査基準を生成するように構成される、
(l)前記コンピュータシステムが、ユーザが前記コンピュータシステムのディスプレイ及び入力デバイスを使用して複数のカスタム製品を閲覧して選択することができるように構成される、
(m)前記コンピュータシステムが、前記ユーザが、カスタム製品モデルのレンダリングをされた画像データのプレビュー画像を、デジタル転送メカニズムを通じて他の人々と共有することができるように構成され、前記コンピュータシステムが、選択的に、前記プレビュー画像についてのフィードバックを受信するように構成され、前記コンピュータシステムが、選択的に、前記ユーザが、前記ユーザのためのカスタマイズまたはカスタム製品の創作を行うためのアクセスを他の人々に提供することができるように構成される、そして
前記コンピュータシステムに通信的に連結されており、ゼロから前記1個限りの大量生産でない製品を製造するように構成された製造システムであって、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、前記1個限りの製品が、前記カスタマイズされた製品モデル、ユーザ情報及び注文情報に従い前記ユーザ向けに設計される、前記製造システムをさらに含む、項目1〜9のいずれか1項に記載のシステム。
(項目11)
カスタム製品の提供方法において、
ゼロから1個限りのカスタム製品を創作するためのシステムを提供する技術的改善が、
ユーザの画像データ及び/または測定データを捕捉するための画像捕捉デバイスを提供することと、
前記画像捕捉デバイスに通信的に連結されており、前記捕捉した画像データ及び/または測定データに基づいて前記ユーザの解剖学的モデルを構築するように構成されたコンピュータであって、製品モデルを提供し、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、ゼロから1個限りのカスタム製品を構成できるような前記製品モデルのカスタマイゼーションを可能にするようにパラメータをカスタマイズして前記製品モデルを変更する前記コンピュータを提供することと、
前記コンピュータに通信的に連結されており、前記解剖学的モデルまたは前記ユーザの画像データに重ね合わせられた前記カスタム製品モデルを表示するディスプレイを提供することと、
カスタマイズされた製品モデルを製造業者に提供し、前記カスタマイズされた製品モデルに従いゼロから前記ユーザのためのカスタム製品を製造することと、を含む、前記方法。
(項目12)
画像データの取得及び解析が、選択的に、前記画像に組み込まれる解剖学的詳細を決定するための画像データを入手することと、前記ユーザ入力及び解剖学的詳細に基づいて三次元製品モデルを構成することと、前記構成可能な三次元製品モデルに基づいた前記ユーザの画像をプレビューすることと、前記プレビューされた画像に基づいて製造命令を作成することと、を含む、項目11に記載の方法。
(項目13)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記製品がアイウェアであり、前記製品モデルが構成可能なアイウェアモデルである、
(b)前記画像捕捉デバイスが、単レンズカメラを備え得、自画像をとる能力があるハンドヘルドデジタルカメラを含む、
(c)前記解剖学的モデルが、前記ユーザの顔の少なくとも一部分で構成された顔モデルである、
(d)前記カスタム製品モデルのカスタマイズ可能な特性が、サイズ、形状、色、仕上げ及びスタイルの少なくとも一つを含む、
(e)前記製品がアイウェアであり、前記コンピュータが、前記捕捉した画像データ、測定データ、導き出された解剖学的モデルまたはユーザ入力の少なくとも一つに基づいて、前記アイウェアモデルを自動的にカスタマイズするように構成される、そして選択的に、
(i)前記コンピュータを使用して、前記ユーザの前記骨格にベストフィットするように前記アイウェアモデルをカスタマイズする、
(ii)前記コンピュータを使用して、前記フレーム及びレンズの前記サイズ及び形状を調節するように前記アイウェアモデルのパラメータをカスタマイズする、及び/または
(iii)前記コンピュータを使用して、前記ユーザが選択するための複数のカスタムアイウェアモデルを生成する、
(f)前記製品がアイウェアであり、前記コンピュータを使用して、前記アイウェアについての光学レンズ設計をカスタマイズする、
(g)前記コンピュータを使用して、前記カスタマイゼーションを先導するためのユーザ入力及び嗜好を受信する、
(h)前記コンピュータシステムに通信的に連結されており、ゼロから前記1個限りの大量生産でない製品を製造するように構成された製造システムであって、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、前記1個限りの製品が、前記カスタマイズされた製品モデル、ユーザ情報及び注文情報に従い前記ユーザ向けに設計された、前記製造システムを提供することをさらに含む、
(i)ユーザ向けのカスタマイズされた製品モデルの提供が、
前記ユーザから画像データを取得及び解析することと、
前記取得及び解析した画像データに基づいて前記製品モデルを自動的にカスタマイゼーションすることと、
カスタマイゼーションの程度、それ故に、前記製造品のカスタマイゼーションの程度を変えるように前記自動的にカスタマイズされた製品を修正することによって、ゼロからの1個限りの製品の創作、組立及び配達に基づくオンデマンドの1個限りの製品を提供することと、を含む、
(j)前記コンピュータシステムを使用して、顔を検出し、前記顔の姿勢を決定し、顔の特徴を検出し、そして解剖学的モデルを前記検出された特徴及び画像データに当てはめることによって、前記画像データを解析する、
(k)複数のユーザについての画像データ及び解剖学的モデルで構成された訓練データに基づいて画像データを解析する及び解剖学的モデルを構成するための機械学習を使用する、
(l)前記コンピュータシステムの両側に位置付けられた少なくとも二つのカメラから捕捉された画像を使用する、
(m)複数レンズデジタルカメラまたは奥行きセンサもしくは奥行き測定機能を持つカメラから捕捉された画像を使用する、
(n)画像データとして少なくとも一つの画像または映像を使用する、
(o)画像データとして奥行き測定データを加味した少なくとも一つの画像または映像を使用する、
(p)前記コンピュータシステムを使用して、前記カスタム製品の物理プロトタイプまたはプレビューを創作する、項目11または12に記載の方法。
(項目14)
前記画像入手及び解剖学的モデル構成が、前記解剖学的モデルを現実世界の測定単位にスケーリングすることを含む、項目11〜13のいずれか1項に記載の方法。
(項目15)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)一つのみの画像を用いて前記解剖学的モデルをスケーリングする、
(b)画像データをスケーリングすることによって前記解剖学的モデルをスケーリングする、
(c)参照ターゲットを用いて前記解剖学的モデルをスケーリングする、
(d)顔の特徴間の距離を利用して前記解剖学的モデルをスケーリングし、前記解剖学的モデルが前記ユーザの前記顔を含む、
(e)参照ターゲットに対する奥行きを決定することによって前記解剖学的モデルをスケーリングする、
(f)生来の単位のスケールを持つ形状モデルを前記画像データに当てはめることによって前記解剖学的モデルをスケーリングする、項目14に記載の方法。
(項目16)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記画像データから検出された点集合として前記解剖学的モデルを再構成する、
(b)三次元点群として前記解剖学的モデルを再構成する、
(c)三次元メッシュモデルとして前記解剖学的モデルを再構成し、前記三次元メッシュモデルが、好ましくは、変形可能または形状モデルである、
(d)前記解剖学的モデルの生成に複数のカメラ位置を利用し、前記解剖学的モデルが三次元モデルであり、前記三次元解剖学的モデルのカメラ位置が、前記解剖学的モデルが前記画像データと共に登録されるように解決される、
(e)前記製品モデルとして三次元パラメトリックアイウェアモデルを利用する、
(f)前記製品がアイウェアであり、前記製品モデルが、個別に修正することができる前記製品の寸法に関するパラメータを好ましくは有する構成可能なアイウェアモデルであり、前記構成可能なアイウェアモデルが、フレームの長さ、高さ及び厚さ、テンプルの長さ、高さ及び厚さ、ブリッジ幅、レンズのサイズ、テンプルの角度、テンプルの曲率及び曲げ角、前記フレームの曲率、特徴の半径または曲率、ノーズパッドの高さ、奥行き、曲率及び角度の少なくとも一つについてのパラメータを好ましくは有する、
(g)前記製品モデルが、ある特定の特徴または寸法の変化を抑制する制約を有する、
(h)前記製品モデルが、ある特定の特徴または寸法の変化度を制限する制約を有する、
(i)前記意図されたスタイルを大幅に変更することのないカスタマイゼーションが可能な、パラメータ及び制約の独自のセットを持つ複数のベース製品モデルが存在する、
(j)前記コンピュータシステムを使用して、前記モデル間の相違または寸法を決定可能なように、前記ユーザの解剖学的モデルと相対的に前記製品モデルを自動的に位置付け、前記コンピュータシステムが、好ましくは、前記決定した相違または寸法の最適化に基づいて前記製品モデルを自動的にカスタマイズするように構成される、
(k)前記コンピュータシステムを使用して、前記解剖学的モデルの非対称の特徴にフィットするように、前記製品モデルを自動的にカスタマイズする、
(l)前記コンピュータシステムを使用して、前記解剖学的モデルのさまざまな顔の表情または位置にフィットするように、前記製品モデルを自動的にカスタマイズする、
(m)前記コンピュータシステムを使用して、前記ユーザの解剖学的モデル及び画像データの形状、色及びサイズなどの美的特性にベストフィットするように、前記製品モデルを自動的にカスタマイズする、
(n)前記コンピュータシステムを使用して、ユーザの嗜好を決定するための機械学習技術を使用する、
(o)前記コンピュータシステムを使用して、前記カスタム製品が前記ユーザの嗜好に一致するかの見込みに基づいて、前記ユーザ向けの複数のスタイルまたはカスタム製品を自動的にカスタマイズ及びランク付けする、
(p)前記コンピュータシステムを使用して、既存のアイウェアの画像データに一致またはそれを複製するように、前記製品モデルを自動的にカスタマイズする、
(q)前記コンピュータシステムを使用して、前記ユーザの嗜好及び解剖学的モデルまたは画像データに最も合う最適なソリューション(複数可)を見つけ出すように、前記製品モデルの複数のパラメータを自動的に調節する、
(r)前記製品がアイウェアであり、前記ユーザの視力の処方情報を受信するように前記コンピュータシステムを構成する、
(s)前記製品がアイウェアであり、前記カスタムアイウェアモデルにベストフィットするよう光学系設計及び材料を調節するように前記コンピュータシステムを構成し、前記コンピュータシステムが、好ましくは、前記ユーザの処方情報に要求される前記光学系設計にベストフィットするように、前記アイウェアモデルを自動的にカスタマイズするように構成される、
(t)前記製品がアイウェアであり、瞳孔間距離、頂点間距離、広角傾斜、フレームの全巻き角、及びアイウェアと相対的な眼の位置の少なくとも一つを含む、前記解剖学的及びアイウェアモデルの光学的測定値を決定するように前記コンピュータシステムを構成する、
(u)前記製品がアイウェアであり、光学的測定値を事前に規定された最適値に最適化するよう、前記カスタムアイウェアモデルを自動的に調節するように前記コンピュータシステムを構成する、
(v)前記製品がアイウェアであり、前記解剖学的、光学的及びアイウェアモデルを解析し、光学性能についての任意のパラメータが許容できないか否かを決定するように前記コンピュータシステムを構成する、
(w)前記製品がアイウェアであり、前記カスタムアイウェアモデル及びカスタム光学系のプレビューを生成するように前記コンピュータシステムを構成する、
(x)前記製品がアイウェアであり、歪みまたは反射を含む前記光学系の効果をプレビューするように前記コンピュータシステムを構成する、項目11〜15のいずれか1項に記載のシステム。
(項目17)
前記コンピュータシステムに連結されたディスプレイに示されたユーザの画像データにおいて新しい1個限りのカスタム製品のプレビューをレンダリングするように前記コンピュータシステムを構成する、項目11〜16のいずれか1項に記載のシステム。
(項目18)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記ユーザの画像データにおける照明の特性を決定し、それらの特性を前記新しいカスタム製品モデルの前記レンダリングされたプレビューに適用する、
(b)前記新しい製品モデルの前記レンダリングされたプレビューが前記画像データに一致するように、前記画像のホワイトバランスを決定する、
(c)奥行き計算及び前記ユーザの前記解剖学的モデルを使用して、前記レンダリングされた新しい製品モデルが可視またはマスクされた部分を決定する、
(d)前記レンダリングカメラにとって可視の前記アイウェアの部分を決定し、非可視である前記部分にマスクし、前記コンピュータシステムが、選択的に、レンダリング中に前記マスクを適用する、または前記コンピュータシステムが、選択的に、前記マスクを前記レンダリングされた画像に適用して該画像を前記ユーザの画像データと組み合わせる、
(e)レイトレーシングを使用して前記アイウェアモデルをレンダリングし、前記コンピュータシステムが、選択的に、前記解剖学的モデルを使用して、レンダリング中には前記アイウェアモデルを見えないようにし、一方でレイトレーシング中に前記アイウェアモデルをマスクするように構成される、
(f)前記アイウェア及び解剖学的モデルをレンダリングして前記画像データに登録するのに必須のカメラ位置を決定し、前記コンピュータシステムが、選択的に、レンダリング中に前記解剖学的モデルを表示しないように構成される、
(g)前記解剖学的モデル、アイウェアモデル、及び/または画像データの前記レンダリングを調節して、前記オリジナル画像データを取得するのに使用したものとは異なるカメラの視点をシミュレートする、項目17に記載のシステム。
(項目19)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)前記コンピュータシステムに連結されたディスプレイに示された前記ユーザの解剖学的モデルにおいて新しいカスタム製品のプレビューをレンダリングし、前記解剖学的モデルが、選択的に、前記ユーザの画像データを使用してテクスチャマッピングされる、
(b)前記新しいカスタム製品の物理プレビューを生成する、
(c)前記コンピュータシステムに連結されたディスプレイに1:1実物大スケールにおいて、前記新しいカスタム製品のプレビューをレンダリングする、
(d)ユーザの画像データにおいて新しいカスタム製品のプレビューをレンダリングするための少なくとも一つの追加のリモートコンピュータシステムと通信し、その結果、前記第一のコンピュータシステムが、前記リモートシステムから画像データを受信し、前記第一のコンピュータシステムに連結されたディスプレイに示される、
(e)前記ユーザからの入力を受信して、プレビューに基づいて前記ユーザの骨格と相対的に前記カスタム製品モデルの位置を調節する、
(f)前記ユーザによって定義された新しい位置に基づいて、前記ユーザの骨格にフィットするよう前記カスタム製品モデルを更新し、前記コンピュータシステムが、選択的に、前記ユーザによって定義された前記新しい位置に基づいて、前記カスタム製品モデルが前記ユーザの骨格において静止する新しい静止位置を計算するように構成される、
(g)前記プレビューされた画像データにおいて前記アイウェアを前記ユーザが直接にタッチして再配置することができるユーザからのタッチ入力を受信する、
(h)前記ユーザの変更が、製品のフィットにおいて望ましくない、許容できないまたは不十分さを生じ得る場合に、前記ユーザに警告する、
(i)前記カスタム製品モデルの前記形状、サイズ、寸法または物理的特性の少なくとも一つを調節するためのユーザ入力を受信し、前記コンピュータシステムが、選択的に、前記ユーザが前記プレビューにタッチすることによって前記カスタム製品モデルを直接編集することができるタッチ形態のユーザ入力を受信するように構成される、または前記コンピュータシステムが、選択的に、前記カスタム製品モデルの前記形状、サイズ、寸法または物理的特性の少なくとも一つに影響を与える制御を前記ユーザに提供するように構成される、
(j)前記カスタム製品モデルの前記色、仕上げ、材料または美的特性の少なくとも一つを調節するためのユーザ入力を受信する、
(k)前記コンピュータシステムとのユーザ対話を記録及び保存し、前記ユーザ対話が、前記カスタム製品モデルに為された変更、前記カスタム製品モデルとの対話に費やした時間、前記カスタム製品モデルの格付け、購入品、保存されたカスタム製品モデル、プレビューされたカスタム製品モデルの少なくとも一つからなり、前記コンピュータシステムが、選択的に、ユーザ対話に基づいてユーザの嗜好を予測するように構成される、または前記コンピュータシステムが、選択的に、他のユーザの過去の対話に基づいてユーザの嗜好を予測するように構成される、
(l)対話から導き出されたユーザの嗜好に基づいて製品モデルをカスタマイズする、項目11〜18のいずれか1項に記載の方法。
(項目20)
以下の特徴の一つ以上によって特徴づけられる、すなわち、
(a)カスタム製品を生産するための前記製造システム向けの命令を生成する、
(b)カスタム製品を生産するための製造要員向けの命令を生成する、
(c)前記カスタム製品モデルに基づいて、複数の製造機器向けのコンピュータ数値制御命令を生成する、
(d)積層造形加工機器のための前記カスタム製品の二次元または三次元表現を生成する、
(e)除去加工機器のためのツールパスを持つ前記カスタム製品の二次元または三次元表現を生成する、
(f)前記カスタム製品モデルに基づいてロボット制御命令を生成する、
(g)命令のシーケンスを、前記カスタム製品を完成するのに必要な各製造機器に転送する、
(h)視力の処方情報をレンズ製造機器またはレンズ製造業者のコンピュータシステムに転送する、
(i)仕上げ機器向けの色、パターン、模様または他の仕上げ命令を生成する、
(j)前記優位なカスタム製品を追跡するための固有の製造番号を生成し、前記カスタム製品に前記固有の製造番号をマークする、
(k)前記カスタム製品モデル及び特性に基づいて品質管理または検査基準を生成する、
(l)ユーザが前記コンピュータシステムのディスプレイ及び入力デバイスを使用して複数のカスタム製品を閲覧して選択することができる、
(m)前記ユーザが、カスタム製品モデルのレンダリングをされた画像データのプレビュー画像を、デジタル転送メカニズムを通じて他の人々と共有することができ、前記コンピュータシステムが、選択的に、前記プレビュー画像についてのフィードバックを受信するように構成され、前記コンピュータシステムが、選択的に、前記ユーザが、前記ユーザのためのカスタマイズまたはカスタム製品を創作するためのアクセスを他の人々に提供することができるように構成される、そして
前記コンピュータシステムに通信的に連結されている製造システムを提供することと、前記製造システムを使用することによって、ゼロから前記1個限りの大量生産でない製品を製造することをさらに含み、少なくとも一つの製品部品が事前に規定された既製の部品を使用せずにカスタマイズして設計されたものであり、前記1個限りの製品が、前記カスタマイズされた製品モデル、ユーザ情報及び注文情報に従い前記ユーザ向けに設計される、項目11〜19のいずれか1項に記載の方法。
本主題発明のこれらの及び他の特徴は、以下の図面と併用される発明を実施するための形態に関連してよりよく理解される。
既製の部品を排他的に使用せずに、ゼロから優位なカスタマイズされた製品を創作するためのシステムのブロック図である。 カスタムアイウェアショッピングシステムのブロック図である。 主題のシステムの画像捕捉部のブロック図であり、製造プロセスを駆動するコンピュータシステムにつながれている、画像捕捉デバイス、ユーザ入力及び他の情報間の相互関係を示す。 主題のシステムの使用を通じてカスタマイズすることができるアイウェア及びアイウェア部品の概略図である。 ユーザの顔及び解剖学的特徴の概略図である。 画像データを捕捉するためのコンピュータシステムの概略図である。 顔を解析するための顔とアイウェアとの間の寸法の概略図であり、これによってさらなる顔及びアイウェアのパラメータがもたらされる。 顔及びアイウェアの追加の寸法の概略図である。 パラメータ化された定量的な解剖学的モデルの図表示である。 カスタムフィット幅を調節する前、及び他の基本寸法に影響を及ぼすことなく調節した後のパラメータ化されたアイウェアモデルの実施例の概略図である。 最適な眼の中心位置を含む二つのアイウェア設計の概略図である。 アイウェアをプレビュー、補正及びカスタマイズするための例示的コンピュータシステムインターフェースの概略図である。 個人の顔における製品の配置を確認できる、コンピュータシステムのインターフェースを用いたアイウェアの幅のカスタム調節、並びに個人の表示の改善時に為すことができる改善を示す例示的な図解の概略図である。 編集されたアイウェア設計を示す例示的な図解の概略図である。 パラメータを最適化するための自動アイウェアモデル調節の実施例の概略図である。 製造するために平坦パターンに変換されたカスタム三次元アイウェアモデルの実施例の概略図である。 カスタム三次元アイウェアモデル及び製造された部品の実施例の概略図である。 参照を利用してユーザの画像を入手するための撮像デバイスを備えたコンピュータの概略図である。 オリジナルのユーザ画像と共に解剖学的モデルを登録するためのコンピュータシステムの概略図である。 画像データに基づいて、ユーザの顔のモデル及び参照ターゲットのモデルを再構成するためのコンピュータシステムの使用の概略図である。 二重ミラー反射システムを使用した、ユーザの顔についての解剖学的モデルのスケーリングの概略図である。 事前に入手している画像のコレクションからのユーザの顔の解剖学的モデルの作製及びスケーリング、並びに特徴集合及びカメラ位置を変えた三次元顔モデルの当てはめの概略図である。 ユーザが既に保持している既存のアイウェアを使用した、ユーザの顔のスケーリングの概略図である。 参照ボックスを表示し、参照ボックスの画素サイズ及び真のサイズを計算することによって参照オブジェクトの寸法を測定するためのシステムの概略図である。 非対称の顔の特徴にフィットするように、最適化されたアイウェア設計をカスタマイズするためのシステムの概略図である。 シミュレートされたカメラの視点を達成するためのシステムの概略図である。 店内でのカスタムアイウェアショッピング方法のブロック図である。 店内でのカスタムアイウェアショッピングシステムのブロック図である。 種々のユーザの骨格にフィットするようにアイウェアのノーズパッドをカスタマイズするためのシステムの概略図である。 形状及びサイズのカスタマイゼーションの程度のごく一部を実証する、カスタム製品モデルの構成の概略図である。 解剖学的モデルに位置合わせする前のアイウェアモデルのカスタマイズの概略図である。 解剖学的モデルに位置合わせした後のアイウェアモデルのカスタマイズの概略図である。 カスタムかつ優位な製品のための製造シーケンスのブロック図である。 カスタムヘルメットの創作の概略図である。
図1Aを参照すると、コンピュータシステム14がユーザ画像に基づいた入力を含むコンピュータシステムへの入力に基づいてゼロからカスタム製品を創作するシステムが提供される。ゼロからとは、既製のもの、これまでに設計されたもの、これまでに生産されたものまたは在庫のある部品を排他的に使用せずに製造される優位なカスタマイズされた製品が提供されるという事実を意味する。これは、例えば、留め具、ヒンジなどの付随的な部品をカスタム製品の部品として使用できないという意味ではない。しかしながら、製品の主要な部品は最初から設計され、故に、既に製造されている部品から組み立てられた製品によって入手できるものとは異なる新しいタイプのユニーク性のある製品が与えられる。
これらのカスタム製品を生成するコンピュータシステムが情報を取得することを理解することが重要である。コンピュータシステムは、ユーザのイメージングデータを取得し、画像データから解剖学的データ、測定値、さらに選択的に、ユーザコンピュータの履歴の解析から解明されたユーザの好き嫌いなどのユーザの嗜好及び情報を決定する。コンピュータシステムは、また、ユーザがある特定の嗜好を指定する、または製品のカスタマイゼーションのいくつかの態様を直接に制御することができるユーザからの入力も受信する。
システムは、孤立しては動作せず、言い換えれば、コンピュータシステムは、何も無いところからはカスタム製品を生成しない。コンピュータにその創造的プロセスを開始させるために、構成可能な製品モデルが、カスタマイズ可能な製品に必須のいくつかの大体の輪郭、構造及び仕様を少なくとも特定するコンピュータシステムにインストールされる。
既に述べたように、かつ10に例証するように、コンピュータシステム14は、画像データを取得して解析し、ユーザの解剖学的測定値及び詳細を決定する。前述したように、画像捕捉は、様々な異なる方法で遂行することができ、最も顕著には、スマートフォンまたはデジタルカメラなどのハンドヘルド電子デバイスから生成された自画像の利用である。これは、解剖学的特徴を規定するための開始点として、どこにでもある携帯電話を利用できる平均的なユーザにとって便利な画像捕捉法である。
12に例証するように、コンピュータシステムは、多種多様なソースから収集することができるユーザの嗜好及び情報を選択的に取得する。コンピュータシステムは、14において、コンピュータシステムを案内するための少なくとも一つの構成可能な製品モデルを備えて提供される13。コンピュータシステム14は、その入力のすべてを解析し、新しいカスタム製品モデルを自動的に出力する。コンピュータシステム14の出力は、それ故に、コンピュータシステムがカスタム製品及びユーザのプレビューを創作するプレビューシステム15に提供される。次に、17に例証するように、コンピュータシステムは、選択された優位な、完全なカスタム製品を製造するための製品モデル及び情報を作成する。
16において、プレビュー及びカスタム製品を更新、通知または制御するために選択的なユーザ対話が提供されることに留意されたい。コンピュータシステムがカスタム製品のプレビューを創作した後に、ユーザは、プレビュー及びカスタム製品を更新、通知または制御するために選択的なユーザ対話を指定することができる。これらの追加制御命令がコンピュータシステム14に入力されると、システムは、カスタム製品についての選択的な新しい指示を実行し、ユーザの変更を直接に組み込むか、または入力を使用して新しいカスタム製品モデルを通知することができる。
より詳細には、システムは、次の通りに動作する。コンピュータシステムは、10において、コンピュータシステムに接続されたカメラまたは撮像デバイスなどの様々な手段を用いて、ユーザによってコンピュータシステムに転送された画像データ、または別のコンピュータシステムから転送された画像データを取得する。解剖学的測定値及び詳細によって、寸法、モデル、形状解析などが得られる。そのさらなる詳細について記述する。
12に例証するように、コンピュータシステム14は、他の選択的なユーザ情報及び嗜好を取得する。例えば、デモグラフィック情報、医療情報または処方情報、質問に対する回答、スタイル選択、キーワードなどであるこの情報は、コンピュータシステムの自動解析及びユーザについての製品のカスタマイゼーションに関するさらなる入力として使用することができる。
13に例証するように、コンピュータシステムは、製造業者または設計者によって追加された構成可能な製品モデルを含有する。これらの構成可能な製品モデルは、カスタム製品の表示であり、形状、サイズ、色、仕上げなどを含む特性を変更して修正することができる。構成可能なモデルは、何千、何百万または無限のバリエーションを有し、これはまた、製造業者が選ぶドメインにおける構成可能性を制約または限定する能力を持って創作される(例えば、他のものが構成されるときには、ある特定の範囲の材料厚しか使用できない、またはある特定の寸法を変えることができない)。構成可能なモデルは、大量生産されているまたは予め設計されている留め具などの副部品を含有し、副部品を用いて組み立てられた主要なカスタム部品によって、ゼロから作製され高度にカスタマイズされた優位な製品を得ることができる。
14に例証するように、コンピュータシステムは、構成可能な製品モデル、ユーザの画像データ、ユーザの解剖学的データ、及び選択的なユーザの嗜好で構成された入力を使用して、新しいカスタム製品モデルを生成する。コンピュータシステムは、方程式、解析、形状モデル、機械学習、クラスタリング、ルックアップテーブルなどを含む様々な技術を使用して、最終カスタム製品モデルを生産することができる。コンピュータシステムは、また、ユーザが選べる様々な顧客モデルを生産することもできる。これらの顧客モデルは、優位な、ストックされていない、個人ユーザ向けの完全なカスタム品であるとみなされる。
15に例証するように、コンピュータシステムは、カスタム製品モデルのプレビューを創作する。プレビューは、カスタム製品の画像、ユーザの解剖学的モデルにおけるカスタム製品モデルのレンダリング、ユーザの画像データにおけるカスタム製品モデルのレンダリング、カスタム製品モデルの物理的なラピッドプロトタイプなどで構成することができる。プレビューは、コンピュータシステムのディスプレイ上でユーザに示すことができる。
16に例証するように、コンピュータシステムは、カスタム製品モデルを更新、通知または制御するためのユーザ入力を受信する。ユーザ、またはユーザによって許可を与えられた他者は、プレビューを変更する、色もしくはサイズなどのカスタム製品モデルの構成可能なオプションを選択する、製品モデルを精密にするための質問に回答することができ、またはユーザは、構成可能なモデルをそのユーザの嗜好に合わせて直接に変更(すなわち、形状またはスタイルを変更)することができる。
17に例証するように、コンピュータシステムは、ユーザによって承認されたカスタム製品を、製造のために作成する。作成は、カスタム製品モデル及びユーザの嗜好を、製造システムなどが解読できる仕様、命令、データ構造、コンピュータ数値制御命令、二次元または三次元モデルファイルなどのセットに変換することを含むことができる。作成は、製造プロセスの各ステップを通してマシン類または人々を案内するためのカスタマイズされたコンピュータ制御命令も含むことができる。
18に例証するように、コンピュータシステムは、優位なカスタム製品を生産する製造システムに命令を提供する。優位なカスタム製品を生産するためのさまざまな特定の方法を記述する。
前述のコンピュータ及び製造システムを、ユーザ200によって使用されるコンピュータシステム220のブロック図として図2に概して描写する。例示の実施形態において、少なくとも一つのコンピュータシステム220は、限定されないが、タブレット、電話機、デスクトップ、ラップトップ、キオスクまたはウェアラブルコンピュータを含み、画像データをユーザに提示するためのディスプレイ230を備えて構成される。ディスプレイ230は、LCDスクリーン、フレキシブルスクリーン、プロジェクション、三次元ディスプレイ、ヘッドアップディスプレイまたは他のディスプレイ技術を含む。コンピュータシステム220は、コンピュータシステムを制御するための入力デバイスを有する。このデバイスは、限定されないが、タッチスクリーン、キーボード、マウス、トラックパッドまたはジェスチャセンサを含む。コンピュータシステム220は、さらに、画像捕捉デバイス210を備えて構成される。このデバイスは、限定されないが、単レンズカメラ、ビデオカメラ、マルチレンズカメラ、IRカメラ、レーザスキャナ、干渉計などを含む。画像捕捉デバイスは、下文において「カメラ」と参照される。コンピュータシステム220は、さらに、データ240を通信及び転送するためのネットワークまたは他のシステムに接続するように構成される。コンピュータシステム220は、限定されないが、サーバ、リモートコンピュータなどを含む他のコンピュータシステム(複数可)250に接続するように構成される。他のコンピュータシステム(複数可)250は、製造システム260に接続されるまたはそれを制御する。コンピュータシステム220は、さらに、カスタム製品を視認、カスタマイズ、ショッピング及び注文するためのインターフェースをユーザ200に提供するように構成される。
ユーザの画像データ、骨格及び嗜好に基づいてカスタム製品を創作するためのカスタム製品システムに加えて、本主題発明は、ユーザが、カスタム製品システムへのアクセス、そして購入、注文、閲覧、対話、支払いなどを行うための手段を得ることができるショッピングシステムを記述する。カスタム製品システムを中心に作られたカスタムアイウェアショッピングシステムの一実施形態を記述する。
カスタムアイウェアショッピングシステム
図1Bを参照し、ゼロから創作されるカスタムかつ優位なアイウェアを注文するためのシステムを詳述する。101に例証するように、ユーザは、コンピュータシステムを使用して、アイウェアを視認し、試すための少なくとも一つのスタイルを選択する。この最初のステップは、選択的であり、ユーザは、コンピュータディスプレイ上で複数のアイウェアを視認し、複数のアイウェアのいずれかのプレビューを選ぶことができる。ユーザは、購入前の買物体験の初めにまたはいつでも自分が選んだ時に、試すためのスタイルを選択し、プレビューすることができる。102に例証するように、コンピュータシステムは、画像データ及び参照情報の入手方法をユーザに指示する。コンピュータシステムのカメラが、ユーザの一つ以上の画像、映像またはライブプレビューで構成された画像データを捕捉し、そしてコンピュータシステムディスプレイが、そのディスプレイを通じて画像データを示す。103に示すように、コンピュータシステムは、コンピュータ画像データを解析し、画像データに登録される解剖学的モデルを作製する。その後、104に例証するように、コンピュータシステムは、処方データ、パーソナルデータ及び他の情報を選択的に後のステップにおいて入力するようにユーザを促す。これに続いて、105に例証するように、コンピュータシステムは、入力情報、すなわち、測定値、解剖学的モデル、ユーザの嗜好及び画像データを解析する。106に例証するように、コンピュータシステムは、ユーザ向けのアイウェアのサイズ及びフィットを自動的に調節する。さらに、107に例証するように、コンピュータシステムは、形状、スタイル及び色の選択をユーザに自動的に推薦することができる。ステップ108に例証するように、コンピュータシステムは、ゼロから設計された、少なくとも一つの部品を用いた少なくとも一つの新しいカスタムアイウェアモデルを創作し、そのアイウェアモデルをユーザの画像データに自動的に配置する。コンピュータシステムは、109に例証するように、レンズを含み得るカスタムアイウェアモデルのプレビューをレンダリングする。レンダリングは、前述のように、ユーザの画像データ及びユーザの解剖学的モデルと、カスタムアイウェアモデルとの組み合わせを含むことができる。
110に例証するように、ユーザは、コンピュータシステムと対話して、アイウェアのサイズ、形状、位置、スタイル、色、仕上げ及びパターンなどの少なくとも一つを調節することができる。その結果、111において例証するように、アイウェアが十分にフィットしないまたはユーザの対話に基づいた注文に合わないかを、コンピュータシステムが提示する。
その後、112に例証するように、コンピュータシステムは、データを保存し、価格及び配達の見積もり、並びに発注するか否かを決定するために顧客が必要とする任意の他の関連情報を計算する。113に例証するように、ユーザは、代わりのアイウェアを選択する、または114に例証するように、ユーザは、注文するためのカスタムアイウェアを選択することができる。
113に例証するように、ユーザが代わりのアイウェアを選択する場合には、コンピュータシステムは、108に例証するように、新しいカスタムアイウェアモデルを自動的に生成し、プロセスが再び開始される。
114に例証するように、ユーザが注文するためのアイウェアを選択すると、コンピュータシステムは、ユーザ情報及びモデルを解析して製造命令を作成し、115に例証するように、製造機器のためのカスタム製造ファイルを作成する。その後、コンピュータシステムは、116に例証するように、カスタムアイウェアを作製するように製造機器及び要員を管理する。最後に、117に例証するように、アイウェアをユーザに発送する。これにより、ユーザのためにゼロから創作及び製造されたカスタムアイウェア製品が完成する。
以下のセクションは、ユーザにとって優位なカスタム製品の創作に伴う主要なステップのさらなる詳細を記述する。
画像データ及び解剖学的情報の取得及び解析
以下のセクションは、ステップ10として図1Aに、かつ102、103及び105として図1Bに例証した画像データ及び解剖学的情報の取得及び解析のための詳細なシステム及び方法を記述する。
画像データ及び解剖学的情報の取得及び解析のための詳細な方法を記述する前に、顔の骨格及びアイウェアの専門用語を参照として記述する。図3は、ラベルされたさまざまな部品を持つアイウェア301を示す。フロントフレーム302が、レンズ303を適所に保持する。ブリッジ304がフロントフレーム302の中央に位置し、ノーズパッド305が、フロントフレーム302から延伸し、アイウェア301を着用者の鼻に保持する。ヒンジ306が、フロントフレーム302と、特徴308において着用者の耳の上端にかかるテンプル307とを接続する。図3には、アイウェア設計を一つしか示さないが、これらの基本的な部品を他のアイウェア設計にも応用できる、またはいくつかのアイウェア設計が異なる部品を有してもよいことを認識すべきである。
図4は、ユーザの顔401、眼402、眼402の中心にある瞳孔403、及び眉毛404を示す。耳405は、アイウェアのテンプルがかかる所の耳の上端406として示される位置も有する。鼻407は、アイウェアの支持に必須の要素である。頬骨408、口409、額410、顎先または下顎411、鼻孔412及び髪413は、定量的な解剖学的モデルの検出及び解析において重要な他の特徴である。
画像データの収集
図5は、コンピュータデバイス502を使用して自身の顔503の画像データを入手するユーザ501を示す。コンピュータシステムがユーザの顔の画像データを捕捉して解析している間、ある特定の位置に顔を置くことの命令がユーザに与えられる。コンピュータシステムは、人物の顔の画像を捕捉するために、スマートフォンまたはハンドヘルドデジタルカメラを利用することができる。前述のように、三次元モデリングを可能にするための、より詳細には、解剖学的モデルを生成するための十分な情報が、個人の単一カメラビューから得られる。
コンピュータシステムは、スケールの基準を与えるために画像内にある特定のオブジェクトの存在を要求する場合がある。アイウェアの寸法をユーザの顔と相対的な適切なサイズに形成し、画像データまたは結果生じた解剖学的モデルに寸法を与えることを保証することが重要であり、そして正確なサイズ調整を保証するための測定値が必要である。参照オブジェクトは、限定されないが、硬貨、定規、紙シート、クレジットカード、コンピュータディスク、電気もしくはコンピュータコネクタ、スタンプ、コンピュータデバイスにおけるキャリブレーションターゲット、またはコンピュータデバイスそれ自体を含むことができる。オブジェクトは、ユーザの顔付近に位置すると、画像データに寸法を設定するための基準寸法をシステムに与える。奥行きカメラなどの他の画像技術を使用できる場合、または本質的な寸法を持つ形状モデル技術が使用される場合には、その結果、画像データのスケールを撮像機器または形状モデルによって決定できるので、参照オブジェクトはなくてもよい。
例示の実施形態では、ユーザが命令に従い、コンピュータシステムの撮像デバイスの前に位置すると、それらのデータの収集及び解析が開始される。第一の参照画像が、顔と同じフィールドにおいてユーザによって保持された参照オブジェクトとともに捕捉される。コンピュータによって捕捉された画像データは、コンピュータシステムによって解析され、参照オブジェクトが検出され、例えば画素においてそのサイズが測定される。画像データは、コンピュータシステムによってさらに解析され、限定されないが、瞳孔、眼、鼻、口、耳、顔、眉毛、髪などを含む複数の特徴の一つ以上が検出される。例示の実施形態では、ユーザの瞳孔が検出され、各々の瞳孔の中心にランドマークが配置される。別の実施形態では、ユーザは、精度を保証するために、各々の瞳孔マーカの位置を確認または編集することを選択的に聞かれてもよい。参照オブジェクトから事前に解析されたデータを用いて、瞳孔と他の特徴との間の画素における距離を、画素からミリメートルまたはインチなどの距離単位にスケーリングする。別の実施形態では、ユーザは、スケールのために参照オブジェクトを使用する代わりに、検眼士からまたは眼の検査によって取得した瞳孔間距離などの顔の寸法(複数可)についてのデータを事前に入手し、このデータをコンピュータシステムに入力することができる。代替的に、参照画像が、プロセスにおける後の処理において、または他の画像データの収集と同時に入手される。
参照オブジェクトを用いてデータをスケーリングする目的は、ユーザの最終の定量的な解剖学的モデルから導き出すことができる測定値を保証することにある。ユーザの顔の画像にアイウェアを仮想的に配置及びフィットする方法を最もよく決定するためのいくつかの主要な測定値がある。
図6は、アイウェア601とユーザの顔602との関係性の例証を示す。アイウェアと顔とが接触する位置は、それらがアイウェアのフィットを制御するので、極めて重要である。アイウェア601とユーザの鼻603との接触位置を示す。アイウェア601とユーザの耳604との接触位置、並びにアイウェア605の上端と耳606の上端との間の高さ及び長さも示す。
図7に関して、さまざまな詳細なアイウェアの測定値を例証する。図7は、瞳孔702間の両眼瞳孔間距離(Pd)703a、及び鼻の中心と瞳孔702との間の単眼瞳孔間距離703bとともにアイウェア701を示す。さらに、最高品質の光学系が所望される場合、または累進多焦点レンズなどの専門の光学系が所望される場合には、眼及び光学系に関する追加の測定値が有用である。これは例えば、頂点間距離709(眼からレンズまでの距離)、広角傾斜角710(顔の前面に対するレンズの角度)、顔もしくはフレームの全巻き角704(顔の周囲のフレームの曲率)、レンズの高さ713(レンズ内での瞳孔との垂直位置)、または光心である。前述のように、先行技術は、完全に定量的なユーザの顔の解剖学的モデルから入手できる豊富な情報を生成及び使用することが制限されており、アイウェアフレーム及び光学系を完全にカスタマイズすることに加えて、ベストなアイウェアショッピングインターフェース及び体験を可能にすることが制限されてきた。
一実施例として、図7は、アイウェア707のノーズパッド間の距離も示す。これに関して、図7は、鼻711のモデルを示し、これを使用して、限定されないが、さまざまな位置における長さ712及び幅713を含む定量的測定値が導き出される。鼻の寸法はユーザごとに異なるので、骨格に完璧にフィットさせるために、鼻のサイズ及び形状、次に、カスタムフィットアイウェアを正確に測定できることに多大の利益がある。高圧点がないように二つの接触面が適切に位置合わせして噛み合い、そしてアイウェアが鼻によって適切な位置に自然に支持されている場合に、ユーザの鼻に位置するアイウェアのノーズパッドの最適な快適性が達成される。各ユーザは、最高の快適性、美観または実用性のために、自身の鼻において身に付けるアイウェアの位置に関してユニークな嗜好を有する場合がある。また、鼻の構造または形状は、民族間で相当に異なる。例えば、アジア人血統のユーザの鼻梁は、白人のそれよりも小さくかつ平坦であり、それらのユーザは、多くの場合に、その種族向けに特異的に設計されたメガネを好む。しかしながら、個人ユーザ及びそのユニークな解剖学的構造向けではなく、種族向けに設計することには明白な利点がない。鼻の定量的な骨格を理解することによって、多くの場合に眼の専門家によって実行されるその後の調節を必要とせずに、独創的に得られる最高の快適性、美観及び実用性を持つ所望の位置において、カスタムアイウェアを鼻に正確に位置付けることができる。どのような方法でも、特にプラスチックフレームにおけるノーズパッドなどのアイウェア特徴の事後の正確な調節は、多くのアイウェア設計では不可能である。
図7は、ユーザの顔とのフィットを達成するのに必要なテンプル705の長さ及びテンプル706間の距離の追加の測定も示す。さらに、眉、頬骨、鼻の長さ及び頭部の幅が、アイウェアのユーザの顔へのフィットを制限する場合がある。頭部の形状、鼻の曲率、長さ、形状及び角度などの顔の他の寸法並びに追加の情報が、特定のユーザにとってのベストなアイウェアスタイル及び形状の提案を援助するのに使用される。アイウェアと相対的な瞳孔の位置が、良好な視力特性を保証するのに重要である。
例示の実施形態において、コンピュータシステムは、カメラが一連の画像または映像を捕捉している間、頭部を位置付けて移動させることをユーザに指示する。その回転は、側方移動、上下移動、またはそれらの組み合わせである。コンピュータシステムは、頭部を的確な位置に移動させることをユーザに指示する、またはディスプレイ上に示されている動作に近づけることを単にリクエストする。別の実施形態では、ユーザは、ハンドヘルドコンピュータシステムを有し、頭部を回転させる代わりに、頭部の周囲においてカメラを移動させる。別の実施形態では、ユーザは、コンピュータシステムを用いて画像もしくは映像を捕捉する代わりに、システムにアップロードするための画像もしくは映像を既に有する、またはユーザは、別の撮像デバイスを用いて画像もしくは映像を捕捉し、それらをコンピュータシステムにアップロードする。
捕捉された映像は、画像データのセットを構成する、さまざまな角度からのユーザの顔の一連の画像からなることができる。コンピュータシステムは、捕捉して直ぐに画像を解析し、問題がある場合または入手した画像の質、姿勢もしくはデータ量が不十分である場合には、フィードバックをユーザに提供することができる。
例示の実施形態において、コンピュータシステムは、画像データを解析し、ある特定の境界内のフレームの中心付近にユーザの顔がとどまることを保証する。コンピュータシステムは、画像データに顔検出アルゴリズムを実行し、各画像において顔の境界線を検出することができる。コンピュータシステムが、境界外の顔、ユーザの顔の前に検出された障害物もしくは閉塞物、または過度のぼやけもしくは他の許容できない捕捉されたアーチファクトを検出した場合には、画像データの新しいセットを再入手することの警告及び命令がユーザに与えられる。さらに、コンピュータシステムは、残りのデータセットについてのより集中的な計算を実行する前に画像データの一部分をトリミングまたは除外することによって、計算及び/または伝送時間を短縮する。例えば、コンピュータシステムは、検出した顔の境界外にある画像の任意の一部をトリミングすることができる。顔の検出に加えて、コンピュータシステムは、顔の姿勢(回転度)を推定することができる。姿勢の推定は、姿勢を決定するように訓練されたさまざまな顔検出器または分類アルゴリズムを使用して行われる。各画像における姿勢の推定では、コンピュータシステムにより適切な範囲内の姿勢が捕捉されたか否かが決定される。適切な範囲内の姿勢が捕捉されていない場合には、コンピュータシステムは、ユーザに再入手を指示することができる。コンピュータシステムは、不要な画像をフィルタリングすることもできる。例えば、重複した姿勢または画質についての閾値を下回る少数の許容できない画像が存在する場合がある。コンピュータシステムは、画像の全体セットを拒絶するのではなく、前述のメトリクスに基づいて、いくつかの許容できない画像を拒絶し、画質の閾値をパスした画像のみを処理することができる
コンピュータシステムは、自動的にまたはユーザの入力によって的確な画像捕捉デバイスを特定し、その後、その光学系の理解を使用して光学的歪みを補正する、またはレンズの被写界深度の知識を利用してデータセットをよりよく解析する。画像捕捉デバイスに応じて、コンピュータシステムは、広角レンズにおいて観察されるレンズの樽型歪曲などの歪みまたは欠陥も補正する。これらの補正によって、入手した画像データをユーザに最もよく示すことができる。
定量的な解剖学的モデル
図1Aの10及び図1Bの103を再び参照すると、方法は、ユーザの顔及び頭部の少なくとも一部分の定量的な解剖学的モデルの構成を描写する。コンピュータシステムは、画像データの完全なセットを入手すると、画像データを解析することによって、ユーザの顔の定量的な解剖学的モデルを構成する。モデルを構成するためのさまざまな技術が使用され、例示の実施形態では、定量的な解剖学的モデルは、限定されないが、多角形、曲線要素などを含む要素からなる表面メッシュとして表される。
図8は、メッシュ804の実施例を示す。メッシュの解像度は、顔における曲率、位置及び特徴などに基づいて変更される。例えば、眼及び鼻周囲の細部の位置の解像度は、頭部の上端などの細部が少ない領域のそれよりも高い。例示の実施形態では、顔メッシュは、正面及び側面の顔面領域のみをモデリングするが、他の実施形態では、頭部全体、または眼及び鼻のみなどの顔のより狭い領域を含む、欠くことのできないその任意の部分のみをモデリングする。代替的な表示として、点群、距離マップ、画像ボリュームまたはベクトルが挙げられる。
例示の実施形態では、汎用定量的な解剖学的モデルは、ユーザの顔にフィットするように歪曲している。モデルは、パラメータ化され、パラメータの調節の影響を受けるさまざまなメッシュポイントを持つメッシュとして表される。図8は、メッシュ要素804を持つモデル801の実施例を示す。この実施例では、パラメータは、口特徴802の全長803に影響を与える。全長803に影響を与えるパラメータを調節すると、口の適当な要素が、指定されたパラメータに一致するように座標を調節する。形状モデルなどの他のモデルは、特定の特徴には対応しないが、汎用解剖学的モデルを複数の異なる顔のサイズ及び形状に適応させることができる主要な部品のような汎用パラメータを有することができる。
コンピュータシステムは、画像データを解析し、特徴検出、姿勢推定、位置合わせ及びモデルパラメータ調節のシーケンスを反復的に実行する。モデルの配置及び位置合わせを援助するために、顔の大まかな位置及び顔が向いている方向を決定する顔検出及び姿勢推定アルゴリズムが使用される。限定されないが、ハールライクまたはローカルバイナリを含む、さまざまな特徴を規定するための後処理が行われる画像内の顔を検出することに加えて、頭部の姿勢を決定するための分類子を訓練するために、機械学習法が使用される。データセットの訓練は、顔の位置及び姿勢の方向において注釈を付けられ、さまざまな姿勢における顔の画像を基礎とし、特定の顔の特徴も含む。その出力は、画像内の顔の位置、及び頭部が向いている方向または姿勢のベクトルで構成される。
顔及び姿勢が第一の画像フレームにおいて定められると、限定されないが、眼の位置、鼻の位置及び形状、耳の位置、耳の上端位置、口の隅の位置、顎先の位置、顔の縁などを含む、アイウェア配置に関連するより詳細な顔の特徴、及び概略の顔の幾何学形状を定義する反復プロセスが開始される。ここでもまた、機械学習が使用され、画像を解析して顔の特徴及び縁が検出される。これらの特徴が位置付けられると、汎用定量的な解剖学的モデルのパラメータが調整及び調節され、検出された特徴の位置とメッシュとの間の誤差が最小限になるような特徴との最適なフィットが見つけ出される。汎用定量的な解剖学的モデルの追加の最適化を実行して、画像内のテクスチャ情報を使用してモデルの局所微調整を向上することができる。
例示の実施形態では、汎用定量的な解剖学的モデルは、限定されないが、眼の位置、眼のサイズ、顔の幅、頬骨構造、耳の位置、耳のサイズ、眉のサイズ、眉の位置、鼻の位置、鼻の幅及び長さ並びに曲率、女性的なまたは男性的な形状、年齢などを含む特徴に影響を与えるパラメータを有する。検出された特徴とモデルとの間の誤差の推定を使用して、最適化の収束が定量化される。また、データセットにおける隣接する画像間の小さな変化を使用して、画像データを用いた姿勢推定及びモデルの位置合わせの精緻化も行う。このプロセスは、それに続く画像フレームにも繰り返される。
例示の実施形態において、隣接する画像フレームから検出された特徴を使用してその後のまたはその前のフレームを初期化することによって、特徴検出を向上する。プロセスは、必要数の画像を通して継続し、場合によっては、最適パラメータを収束して、歪んでいる汎用モデルと画像データとの間の誤差を最小限にするために、複数回、複数の画像を通して繰り返す。フレーム間の特徴点、姿勢及び解剖学的モデル当てはめにおけるノイズ及び不一致を最小限にするために、正則化及び平滑化を用いることができる。最終の定量的な解剖学的モデルは、前述のように、ユーザからの入力などの参照データ、または参照オブジェクトに対するスケーリングに基づいてスケーリングされる。あるいは、解剖学的モデルが現実世界の寸法における形状モデルとして導き出された場合には、顔の形状とサイズとの間の関係性を使用して、モデルのスケールを直接に提供することができる。
モデルが一連の画像を通じて精密化されるので、モデルと画像データとの配向及び幾何学的関係が既知となる。画像にわたる特徴点及び顔モデルのバンドル調整を実行することによって、解剖学的モデルを画像データに登録する的確なカメラ位置をもたらすことができる。この情報を使用して、その後のレンダリングのために、モデルを配向して画像データに登録することができる。
当業者は、画像データのセットから定量的情報を構成して表すための多くの方法があることを認識する。別の実施形態では、定量的な解剖学的モデルを生成するために、以前の汎用骨格モデルがなくてもよい。運動からの構造(Structure from motion)(SFM)写真測量などの方法が、定量的な解剖学的モデルを直接に作製するのに使用される。この技術では、ユーザの顔の周囲の一連の画像が必要である。各画像において検出された特徴、及び複数の画像にわたる特徴間の相対距離が、三次元表現を構成するのに使用される。汎用形状モデルとそれに続く局所的なSFMによる微調整とを組み合わせた方法を利用して、鼻の形状などの特徴の部分詳細を向上することができる。
別の実施形態では、定量的な解剖学的モデルは、検出された重要な特徴の点群のみから構成される。例えば、眼の中心、眼の隅、鼻の先端、耳の上端及び他の重要なランドマークが、複数の画像を通じて検出及び追跡される。データセットにおける空間内において正しい位置に置かれたこれらの簡素な点が、その後の解析に必要な定量的情報を取得するのに必要なすべての情報を提供する。これらは、前述の方法、またはアクティブアピアランスモデルもしくはアクティブ形状モデルのような他の方法を使用して取得することができる。
奥行きカメラまたはレーザセンサなどの技術を使用して画像データを入手することができ、これらの技術を使用して、本質的に三次元スキャナのような距離を検出する能力によって三次元モデルを直接に生成できる方法を記述している先行技術が存在する。さらに、焦点距離外の領域の使用または隣接する画像間の視差の使用によって奥行きが推定される。
あるいは、定量的な解剖学的モデル及び寸法は、ユーザ自身が所有しているユーザの顔の既存のモデルから導き出すことができる。モデルは、三次元スキャニングシステムまたは撮像デバイスから入手することができる。ユーザが自身の顔についての解剖学的モデルを既に有している場合には、非一時的コンピュータ可読媒体、ネットワーク接続または他の手段によって、それをコンピュータシステムにデジタル的に転送することができる。
結果として生じる製品のサイズが適当であり、かつプレビューされたバージョンに一致する製品をユーザが受け取ることを保証するためには、アイウェアなどの製品をカスタマイズするためのユーザの画像データの収集中のユーザのスケール及び寸法が重要である。以下の実施形態は、画像データから解剖学的モデルを入手し、それをスケーリング及び再構成するためのさまざまなシステム及び方法を記述する。
複数の画像に存在する参照ターゲットを用いてユーザの顔の解剖学的モデルをスケーリングする実施形態
ここで図17を参照する。この実施形態に関しては、a)コンピュータシステム1701が、ユーザ1703の画像データを入手するのに使用されるカメラまたは撮像デバイス1702を備えて構成され、b)既知の寸法の参照ターゲット1704(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが少なくとも一つの既定の寸法1705(例えば、硬貨の直径)を有し、d)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、e)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように少なくともいくつかの画像内の参照ターゲットを検出し、f)コンピュータシステムが、モデル座標及びカメラ位置が顔モデルをユーザの顔1703の画像の姿勢、位置及びスケールに位置合わせするようにして、オリジナルのユーザ画像と共に解剖学的モデルを登録し、g)コンピュータシステムが、各画像における検出したターゲット寸法(複数可)と参照ターゲットの既知の寸法との比を使用して、解剖学的モデルの寸法についての倍率を設定し、h)コンピュータシステムが、追加的に、任意の単一の寸法測定値からの誤差を減少するために、各フレームにおける参照ターゲット(複数可)の複数の既定の寸法の測定された寸法を平均化または重み付けすることができる。
一つのみの画像に存在する参照ターゲットを用いてユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、画像に存在する既知の寸法の参照ターゲットを含むユーザの個々の画像を入手するのに使用され、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有し、d)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、e)コンピュータシステムが、モデル座標及びカメラ位置が顔モデルをユーザの顔の画像の姿勢、位置及びスケールに位置合わせするようにして、参照ターゲットを含有するユーザの画像と共に解剖学的モデルを登録し、f)コンピュータシステムが、画像における検出したターゲット寸法と参照ターゲットの既知の寸法との比を使用して、顔モデルの寸法についての倍率を設定する。
ユーザの顔の解剖学的モデルが構成される画像データをスケーリングする実施形態
この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)既知の寸法の参照ターゲット(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有し、d)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように少なくとも一つの画像内の参照ターゲットを検出し、e)コンピュータシステムが、検出した寸法とオブジェクトの既定のサイズとの比を使用して、画像データについての倍率を設定し(例えば、寸法を画素のサイズに適用する)、f)コンピュータシステムが、画像の基礎的寸法を仮定するモデルを用いて、画像データに基づいてユーザの顔の解剖学的モデルを再構成する。
モデルに含まれる参照ターゲットを用いてユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態の利点は、ユーザの顔に対する参照ターゲットの向き及び位置がモデルを用いて再構成されるので、それがそれほど重要でないことである。
図19を参照すると、この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)既知の寸法の参照ターゲット(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有し、d)図19に示すように、コンピュータシステムが、顔とターゲットとが互いに接触していても、していなくてもよい画像データに基づいて、互いと相対的に、空間内に二つのモデルが位置するように、ユーザの顔1901及び参照ターゲット1902のモデル(または、複数のモデル)を再構成し、e)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように、モデル内の参照ターゲットを検出し、f)コンピュータシステムが、モデル内の参照ターゲットの検出した寸法とターゲットの既定のサイズとの比を使用して、モデル全体についての倍率を設定し、g)選択的に、コンピュータシステムが、スケーリング後にモデルから参照ターゲットを取り除き、最終的なスケーリングされた顔モデルのみを残す。
ユーザによって入力された瞳孔間距離(Pd)を用いて、ユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、ユーザは、通例、頭部をスケーリングするための基準寸法を提供する、検眼士によって測定されたPdを有する。これが行われる方法は、次の通りである。a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、c)コンピュータシステムが、顔モデルにおけるユーザの眼の特徴(瞳孔、虹彩など)を検出し、眼の特徴間の距離を測定し、d)画像入手及び再構成プロセス前、後またはその間に、ユーザがPd測定値を提供し、e)コンピュータシステムが、ユーザのPd測定値を使用して、モデルの寸法についての倍率を設定し、モデル内の測定された眼の距離がユーザの実際のPdに一致するようにモデルのサイズを調節する。
画像(複数可)において検出及び測定された寸法を用いてユーザの顔の解剖学的モデルをスケーリングし、次に、それを利用してユーザの顔のモデルをスケーリングする実施形態
この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)既知の寸法の参照ターゲット(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有するように決定され、d)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように少なくとも一つの画像内の参照ターゲットを検出し、e)コンピュータシステムが、少なくとも一つの画像内の顔の特徴(瞳孔、虹彩、眼の隅、口の隅、鼻など)を検出し、それらの間のスケーリングされていない距離を測定し、f)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、g)コンピュータシステムが、画像内の参照ターゲットの検出した寸法とターゲットの既定のサイズとの比を使用して、検出された顔の特徴(Pd、眼の隅間の距離、口の幅など)についての倍率を設定し、h)コンピュータシステムが、顔モデルにおける顔の特徴を検出し、それらの間の距離を測定し、スケーリングされた顔の特徴の測定値を使用して顔モデルをスケーリングし、i)選択的に、コンピュータシステムが、画像データにおける顔の特徴を最初に検出せずとも、画像データに登録された顔モデルにおける顔の特徴を直接に検出する。
存在する参照ターゲットを用いて奥行きを決定することによって、ユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)既知の寸法の参照ターゲット(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有し、d)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように少なくともいくつかの画像内の参照ターゲットを検出し、e)図17に示すように、コンピュータシステム1701が、検出した寸法1705、参照ターゲット1704の既知のサイズ及び固有のカメラパラメータを使用して、カメラからターゲットまでの距離1706を決定し、f)コンピュータシステムが、画像に基づいてユーザの顔のモデルを再構成し、g)コンピュータシステムが、参照ターゲットとユーザの顔へのの距離、及び固有のカメラパラメータを使用して、ユーザの顔モデルのスケールを決定し、h)選択的に、コンピュータシステムが、顔モデルをスケーリングする前に、複数のフレームにおける参照ターゲットの測定された寸法を平均化して、任意の単一の画像の測定値から得られる値の誤差を減少する。
画像において検出された奥行きを用いて、コンピュータシステムを使用してユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)奥行き検出機能を持つカメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)ユーザが自身の画像を取得するようにコンピュータシステムを位置付け、その上、コンピュータシステム(距離計、オートフォーカス距離、奥行きセンサなど)が、コンピュータからユーザまでの距離も測定し、c)コンピュータシステムが、コンピュータからユーザまでとして測定された距離、及び固有のカメラパラメータを使用して、画像のスケールを決定し、d)コンピュータシステムが、画像データに基づいてユーザの顔のモデルを再構成し、画像における寸法に基づいて本質的にスケーリングされたモデルが得られる。
各画像において検出された奥行きを用いて、コンピュータシステムを使用してユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)奥行き検出機能を持つカメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)ユーザが、自身の画像を取得するようにコンピュータシステムを位置付け、その上、コンピュータシステムが、コンピュータから画像データにおける各画素までの距離も測定し、c)コンピュータシステムが、各画素におけるコンピュータからユーザまでとして測定された距離を使用し、カメラ固有パラメータを使用して、画像データの各画素をスケーリングし、d)コンピュータシステムが、画像データに基づいてユーザの顔のモデルを再構成し、モデルが完成したときにスケーリングされるように各画素のスケールをモデルに適用する。
近接距離においてのみ検出された奥行きを用いて、コンピュータシステムを使用してユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)奥行き検出機能を持つカメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)奥行き検出機能を持つカメラを備えて構成されたコンピュータシステムが、例えば、画像データにおける少なくともユーザの眼または他の顔の特徴を含む、ユーザのクローズアップ画像データを入手するのに使用され、c)クローズアップ画像の収集中、ユーザが、少なくともいくつかの顔の特徴の画像を取得するようにコンピュータシステムを位置付け、その上、コンピュータシステムが、コンピュータからユーザまでの距離も測定し、d)コンピュータシステムが、クローズアップ画像内の顔の特徴(虹彩、瞳孔など)を検出し、特徴間の距離を測定し、e)コンピュータシステムが、コンピュータからユーザまでとして測定された距離、及び固有のカメラ特性を使用して、画像データにおける画素のスケールを決定し、f)コンピュータシステムが、画像スケール及び特徴間の測定距離に基づいて、顔の特徴間の基準距離を決定し、g)コンピュータシステムが、ユーザの顔全体の画像データに基づいてユーザの顔のモデルを再構成し、h)コンピュータシステムが、顔モデルにおける顔の特徴を検出し、それらの間の距離を測定し、参照の特徴測定値を使用して顔モデルをスケーリングする。
コンピュータシステム及び二重ミラー反射を使用してユーザの顔の解剖学的モデルをスケーリングする実施形態
図20を参照すると、この実施形態では、a)撮像デバイス2003及び撮像デバイスと同じ側面に位置するディスプレイ2008を備えて構成されたコンピュータシステム2001が、ユーザ2004の画像データを入手するのに使用され、b)ユーザ2004が、ミラー2007と面するディスプレイ2008及び撮像デバイス2003を含む、ミラー2007の前面の画像を入手することによって、ユーザの画像データと、ミラー反射を通じて撮像デバイスによって同じく捕捉される画像データのプレビューを表示するデバイスの画像データを同時に入手し、c)コンピュータシステムが、画像内のコンピュータシステムの少なくとも一つの寸法(画面サイズ、コンピュータ上の特徴のサイズ、コンピュータ上の参照画像など)を検出し、d)コンピュータシステムが、その型またはモデル、画面寸法、参照画像のサイズなどを提供することによって、検出した寸法の既知の基準サイズを決定し、e)コンピュータシステムが、ユーザの画像データ(ユーザ及びデバイスのディスプレイ上のユーザ)の同時の組の各々において、少なくとも一つの寸法(眼の特徴間の距離、頭部のサイズ、モデル寸法など)を検出し、f)コンピュータシステム2001が、コンピュータシステムの基準寸法及び固有のカメラ特性を使用して、デバイスとミラーとの間の距離2009を決定し、g)コンピュータシステムが、デバイスとミラーとの間の距離、デバイスのディスプレイ上で検出されたユーザ寸法、ミラーにおいて検出されたユーザ寸法、及び撮像デバイスの特性を使用して、検出されたユーザ寸法の倍率を設定し、h)コンピュータシステムが、画像データに基づいてユーザの顔のモデルを再構成し、i)コンピュータシステムが、再構成されたモデルについてのユーザ寸法(複数可)を検出し、倍率に基づいてモデルをスケーリングし、j)選択的に、ユーザが、ミラーに対して参照オブジェクトを位置付けまたは保持することによって、コンピュータシステムからミラーまでの距離を決定することができる。
コンピューティングデバイスのフロント及びリアカメラを使用して、ユーザの顔の解剖学的モデルをスケーリングする実施形態
図20を再び参照すると、この実施形態では、a)コンピュータシステムの前面2002及び背面2003に位置する撮像デバイスを備えて構成されたコンピュータシステム2001が、ユーザの画像データを入手するのに使用され、b)ユーザ2004が、ミラー2007の前面の画像データを入手することによって、一方のカメラ(方向2005)を用いたユーザの画像データと、それと反対側のカメラ(方向2006)を用いたユーザの反射画像とを同時に入手し、c)コンピュータシステムが、画像データ内のコンピュータシステムの少なくとも一つの寸法(画面サイズ、コンピュータ上の特徴のサイズ、コンピュータ上の参照画像など)を検出し、d)コンピュータシステムが、その型またはモデル、画面寸法、参照画像のサイズなどを提供することによって、検出した寸法の既知の基準サイズを決定し、e)コンピュータシステムが、三次元再構成を向上するために、選択的に、立体データとして一組の画像データを共に使用して、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、f)コンピュータシステムが、両方の組の画像データに解剖学的モデルを登録し、g)コンピュータシステムが、基準寸法、登録された解剖学的モデル及びカメラ固有パラメータを使用して、モデルの倍率を決定し、h)選択的に、ユーザが、ミラーに対して参照オブジェクトを位置付けまたは保持することによって、コンピュータシステムからミラーまでの距離を決定する。
コンピュータシステム及びミラーを使用してユーザの顔の解剖学的モデルをスケーリングする実施形態
この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、顔付近に位置付けられたカメラを用いて、ミラーの前に位置するユーザの画像データを入手するのに使用され、b)既知の寸法の参照ターゲット(例えば、硬貨、クレジットカード、電話機、タブレット、スクリーン、紙、定規など)が、ミラー面に位置し、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)参照ターゲットが、少なくとも一つの既定の寸法(例えば、硬貨の直径)を有し、d)コンピュータシステムが、少なくとも一つの既定の寸法の検出を含むように少なくとも一つの画像内の参照ターゲットを検出し、e)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成し、(f)コンピュータシステムが、カメラ固有パラメータ、検出された基準寸法及び参照オブジェクトの既知の寸法を使用して、カメラからミラーまでの距離を決定し、ここで、ミラーが、ユーザと、カメラによって見られるユーザの反射像との間の中間点に位置するので、カメラからユーザまでの距離は、カメラからミラーまでの距離の2倍であり、g)コンピュータシステムが、カメラからユーザまでの距離及びカメラ固有パラメータを使用して、画像データのスケールを設定し、h)コンピュータシステムが、画像データに基づいてユーザの顔の解剖学的モデルを再構成する。
事前に入手している画像のコレクションを用いて、ユーザの顔の解剖学的モデルを製作及びスケーリングする実施形態
この実施形態の利点は、ユーザが自由に使える事前に入手している画像のコレクション(例えば、既存の写真のコレクション、フォトギャラリー、ソーシャルネットワークまたはオンラインの画像ギャラリーフォトなど)を使用することである。図21を参照すると、この実施形態では、a)コンピュータシステムが、ユーザ2105の画像のコレクション(例えば、2101、2102、2103)を受信し、b)各写真のどの顔がそのユーザであるかを決定するために、顔認識データを用いて事前に画像にタグ付けし得、c)画像が事前にタグ付けされていない場合には、コンピュータシステムは、少なくとも一つの画像のうちのどれがユーザの顔であるかを確認するようにユーザを促す、または最高頻度で検出された顔を使用して顔認識を実行することによって、写真の中の他の人とは分けてユーザを決定し、d)コンピュータシステムが、ユーザの各画像における顔の特徴(例えば、眼、鼻、口、耳、顎先などのさまざまなポイント)を検出し、顔モデル2104を画像データに当てはめ、e)選択的に、コンピュータシステムが、各画像の表情(例えば、2101対2103)を決定し、顔モデルを中立の表情に調節し、f)コンピュータシステムが、各画像におけるユーザの顔の姿勢を決定し、g)コンピュータシステムが、ユーザの特徴集合及びカメラ位置(2105、2106、2107)のコレクションにわたって顔モデルを当てはめることによって、ユーザの顔の単一モデル2104を再構成し、ここで、顔モデルは、次の方法のうちの一つによってスケーリングされ、h)コンピュータシステムが、前述の方法、すなわち、Pd入力、参照ターゲットを含む画像などに基づいてユーザに追加のデータをリクエストし、i)コンピュータシステムが、画像内の既知のオブジェクトを検出(例えば、紙シート、ロゴ、電話機などを認識)して基準サイズを決定し、j)コンピュータシステムが、本明細書に記述する任意の他の方法を使用して、参照オブジェクトを含むようにユーザが取った追加の画像データをリクエストし、k)顔モデルが、形状とサイズを関連付ける寸法を含有する形状モデルの故に本質的にスケーリングされる。
既に所有している既存のアイウェアを使用してユーザの顔をスケーリングする実施形態 アイウェアを買いに行く多くの人々は、アイウェアが満足にフィットするか否かにかかわらず、既にアイウェアを所有している。これを使用すれば、ユーザの顔の寸法をスケーリングするのに役立つ。あるいは、製造業者が、このプロセスに使用するためのサンプルのアイウェアを送ることができる。
図22を参照すると、この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザ2202の画像データ2201を入手するのに使用され、b)コンピュータシステムが、所有してユーザが身に付けているアイウェア2204の個々の画像データ2203を入手するのに使用され、c)コンピュータシステムが、例えば、フレームの幅2205または長さ、レンズのサイズなどのアイウェアについての基準寸法情報(例えば、アイウェアをスケーリングするのに使用される参照ターゲットに隣接するアイウェアの写真、後の実施形態において説明されるような、1:1スケールに設定されたコンピュータシステムディスプレイ2206上で基準2208に位置合わせすることによるアイウェア2207の測定値、測定値の入力、アイウェアのモデル名、ユーザがアイウェアを測定するのに利用できる画面上に表示されたルーラまたは対話的なルーラなど)を提供するようにユーザにリクエストし、d)コンピュータシステムが、画像データに基づいてユーザの顔のモデルを再構成し、e)コンピュータシステムが、画像データ内のアイウェア寸法(例えば、フレームの全幅または全高、レンズの幅など)を検出し、f)コンピュータシステムが、アイウェアの有無にかかわらず、画像データ間のユーザの顔の特徴またはモデル(例えば、眼2209及び口の隅2210)を関連付け、g)コンピュータシステムが、検出した基準のアイウェア寸法、及びアイウェアの有無にかかわらずに関連付けられた、画像データ間の特徴に基づいて、顔モデルについての倍率を決定し、h)コンピュータシステムが、モデル座標及びカメラ位置が顔モデルをユーザの顔の画像の姿勢、位置及びスケールに位置合わせするようにして、オリジナルのユーザ画像と共に顔モデルを登録する。
ソナーを使用してユーザの顔をスケーリングする実施形態
コンピュータシステムからユーザまでの距離、またはコンピュータシステムからミラーまでの距離の計算が要求される任意の実施形態においては、ソナー法が使用される。
以下の実施形態は、音波を使用した距離の決定を記述する。a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)コンピュータシステムが、さらに、マイクロフォン及び音波(例えば、一連の周波数、繰り返しの音波など)を放出し、マイクロフォンで同じ音波を記録するのに使用されるスピーカを備えて構成され、c)音波が、オンデバイスのスピーカ、ユーザに位置するもしくは距離が保たれているヘッドフォン、または他のデバイスから放出され、d)コンピュータシステムが、コンピュータシステムによって音波が放出されてから、それがコンピュータシステムのマイクロフォンによって検出されるまでの経過時間を解析することによって、コンピュータシステムからミラーまでの距離、またはユーザの耳におけるヘッドフォン及びコンピュータシステムからの距離などの、それ自体とオブジェクトとの間の距離を計算し、e)コンピュータシステムが、複数の音波、フィルタリングまたは他の解析を使用して、ノイズ、反射、アーチファクトを減少し、かつ距離検出の精度を最適化でき、f)コンピュータシステムが、他の実施形態において記述されるような距離を使用してユーザの画像データまたは解剖学的モデルをスケーリングする。
既に再構成及びスケーリングされた顔モデルからPdを決定する実施形態
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、b)コンピュータシステムが、顔モデルから眼の特徴(虹彩、瞳孔など)を検出し、c)コンピュータシステムが、顔モデルにおいて眼の特徴間の距離を測定してPdを計算する。
自身が選択した参照オブジェクトのサイズを測定する手段をユーザに提供する実施形態
既知の寸法の参照オブジェクトが必要な任意の実施形態では、ユーザが、自身またはコンピュータシステムがその寸法を知らないオブジェクト、すなわち、所有している名刺、鉛筆、アイウェアなどを使用しなければならない状況がある。
この特定の実施形態は、未知の寸法の矩形オブジェクト(または、矩形内にフィットできるオブジェクト)を測定するシステムを記述しているが、方法は、任意の形状のものに拡大適用することができる。図23を参照すると、a)ディスプレイ2302及び入力デバイスを備えて構成されたコンピュータシステム2301が、ディスプレイ上に参照ボックス2303を表示するのに使用され、b)コンピュータシステムが、解像度、画素サイズ、ディスプレイの全体寸法などのコンピュータシステムのディスプレイについての情報を取得し、ここで、コンピュータシステムは、コンピュータシステムにおけるそれ自体のソフトウェア、ウェブブラウザ、ディスプレイまたはコンピュータシステムモデルについて情報を提供するユーザからこの情報を取得し、c)コンピュータシステムが、(例えば、スクリーンの長さ及び幅を画素の数で割ることによって)ディスプレイの画素サイズを計算し、d)次に、コンピュータシステムが、ディスプレイ上の参照ボックス2303の真のサイズを計算し、e)コンピュータシステムが、ユーザに、画面に対して参照オブジェクト2306を位置付け、2305に例証するように、入力デバイス(タッチスクリーン、マウス、タッチパッド、ジェスチャなど)を使用して参照ボックス2303を調節してオブジェクトのサイズ2307に一致させることを指示し、f)コンピュータが、調節された参照ボックスのサイズを計算することによって参照オブジェクトのサイズを取得し、g)選択的に、コンピュータシステムが、将来の画像において認識するためのオブジェクトの外見についての情報を取得するための、参照オブジェクトの画像データを取得する撮像デバイス2308を備えて構成される。コンピュータシステムが奥行き画像デバイスを備えて構成される場合には、奥行き及びスケール情報を使用して参照オブジェクトの測定を向上する。
参照オブジェクトの使用を伴う任意の実施形態においては、オブジェクトは、正確な寸法を取得するために撮像デバイスと直角でなくてもよい。参照オブジェクトの事前の知識を用いて、カメラと相対的なオブジェクトの角度が決定される。画像面に対する角度及び測定された距離を使用して、オブジェクトの真の基準寸法が決定される。
選択的なユーザの嗜好及び情報
図1A及び図1Bのステップ104は、ユーザの処方データ及び解析情報を提供するための他の情報の獲得を記述する。このステップは、コンピュータ的に時間を消費する場合にはコンピュータシステムが画像データを解析しながらデータを捕捉することに利点があるが、後に実行してもよい。コンピュータシステムは、コンピュータシステムに接続された入力デバイスを用いてユーザが情報を入力する様式を通じてこの情報をリクエストする。コンピュータシステムは、処方の写真などの物理的な情報のセットの画像データを取得することによって、情報を受信することもできる。コンピュータシステムは、光学式文字認識を使用して、画像をデコード及びユーザの処方データを抽出することができる。コンピュータシステムは、音声認識、電子的に転送されたデータまたは他の手段を通じてユーザ情報を受信することができる。ユーザによって入力された情報の使用については、レンズのモデリング及びカスタムアイウェアモデルの創作の記述において後述する。
構成可能な製品モデル
図1A及び図1Bのステップ106及び107は、構成可能な製品または構成可能なアイウェアモデルを記述する。例示の実施形態において、構成可能なモデルは、三次元であり、パラメトリック特徴及び寸法を備えて構成され、三次元表面メッシュとして表される。アイウェアの三次元モデルは、スキャニングもしくは写真測量による三次元捕捉、または三次元コンピュータ支援製図(CAD)もしくは三次元モデリングを通じるなどの様々な方法から創作される。例えば、二次元モデル、形状モデル、特徴ベースのモデルなどの、構成可能なモデルの様々な他の方法または表現を使用できることに留意すべきである。
例示の実施形態では、アイウェア製造業者によって、フレーム並びに/またはフレーム及びレンズを含む三次元パラメトリックモデルが創作される。三次元パラメトリックモデルは、限定されないが、多角形、曲線要素などを含む要素または特徴から形成された表面メッシュまたはソリッドモデルとして創作される。パラメトリックモデルでは、他の特徴間の一貫性のある関係性を維持しつつ、アイウェアの一つ以上の寸法を変更し、適当なモデル及びメッシュ要素を更新することができる。
図9は、レンズ周囲のアイウェアの幅903についてのパラメータを変更することによって、アイウェアモデル902に調節したアイウェアモデル901の実施例を示す。パラメータ化されたアイウェアモデルの利点は、ブリッジ及びノーズパッドの幅907が維持され、高さ908が維持され、アイウェアモデル901とモデル902との間の全体的な美観が一貫していることである。パラメータ化によって、設計の他の重要な要素に影響を及ぼすことなく、フレーム901の単に一つの態様における大幅な変更が可能になる。パラメータ化されたアイウェアモデルは、すべての他の特徴を抑制しつつ、ある特徴における変更をモデルの残りのものに伝えるという利点を有する。これらの変更は、非常に効率的なデータ転送及びストレージを可能にする単純な数値として表される。これらのパラメータは、製品のサイズ及び形態について無限の可変性を有し、必要に応じて、ユーザの骨格及び嗜好への顧客モデルの当てはめにおいて極限精度をもたらすことができる。この実施例におけるメガネの形態の高いまたは無限の可変性を有する能力は、優位な、ゼロからのカスタム製品の基本原理を実証する。主要な部品、この場合はフロントフレームの基礎的形態を変更及びカスタマイズすることによって、既に製造されているものまたは在庫のある部品を用いては決して実行できない高度にユニークなように、その設計が、個人ユーザにとって本質的に優位かつカスタムメイドとなる。
図13は、さらなる形状のカスタマイゼーションを実証する実施例のベースアイウェア設計1301を例証する。ベース設計は、アイウェアモデルが有する基本的なスタイルまたは形状であり、設定及びパラメータを通じて修正することができる。コンピュータシステムは、点1305と点1307との間の曲率を調節する。または、コンピュータシステムの入力デバイスにおいて指示するユーザが、アイウェアにおける点1305を選択し、矢印1306の方向に点線に沿って点1307に移動する。次に、アイウェア1302が、編集された領域1308に修正される。アイウェアをカスタマイズするのに必須のステップの数を減らすのと同時に、対称性を維持するために、更新されたアイウェア1303に示すように、アイウェアの片側における変更が、アイウェアの他方の側にも等しく適用される。この対称性効果は、構成可能なモデルの特徴として取り込むことができる制約の一つの実施例である。
構成可能なアイウェアモデルは、ある特定の主要な部品または領域を、製造においてもはや最適でない設計に変更することを防止する制約を有する。例えば、部品の最低厚は、構造強度を保証するように制限され、レンズ周囲の最低厚は、アイウェアが破損することなくレンズをアイウェアに組み立てることができることを保証するように制限され、可能性があるヒンジ位置は、適切な角度においてフィット及び位置できることを保証するように制限される。特定のストック品であるヒンジを使用する必要がある場合には、その結果、ヒンジの接続点は、カスタムアイウェアの基礎的形態及び形状がどのように変化するかにかかわらず、一貫している必要がある。さらに、対称性またはカスケーディング効果の故に、ある特定の特徴同士は関連している。例えば、コンピュータまたはユーザが縁の一部の幅または厚さを調節した場合には、対称性及び魅力的な外見を保証するために、両側における縁全体が調節される。例えば、ヒンジ及びノーズパッド位置などの特徴の全体的な位置は、依然として制約される。すべてのこれらの制約及び関連性は、アイウェア設計者によって事前にプログラムされ、構成可能なモデルに組み入れられる。
図29は、構成可能な製品モデルにおいて達成されたカスタマイゼーションの実施例、特に、製品モデルを精密化及びカスタマイズするためのさまざまなパラメータを組み合わせる能力を例証する。アイウェアモデル2900は、例証では16個のバリエーションに構成される。4つの列2902は、アイウェアレンズの幅2903及び高さ2904の実施例の構成を例証する。4つの行2901は、ノーズブリッジ幅2905、耳に接触する所のテンプル間の距離2906、フロントフレームから耳までの高さ2907、及び他の適切な変更についてのパラメータのいろいろな組み合わせを例証する。材料厚2908並びにヒンジのサイズ及び位置2909などの重要な特徴は、変更されない。パラメトリック設定によって、製造可能でありかつ高度に構成可能なアイウェア設計が可能になる。製造業者は、すべてのこれらの設計及びそれ以上の設計において1個のヒンジ及び1つの材料厚を使用し、それでもなお基礎的な形状及びサイズの大規模なカスタマイゼーションが可能である。モデル2900と2910とは、互いに極めて異なり、従来では、種々の大量生産される製品が必要であろう。従来の大量生産された製品を用いてこのレベルのバリエーションを顧客に提供することは、設計及びストックのために何千、何百万またはより多くの部品が必要となり、全く現実的ではない。本明細書に記述する残りの方法及びシステムを用いた構成可能なモデルによって、一つのベースモデルから、図29に例証するすべての構成を構成化でき、これにより、一つの製品を、個人の顧客に応じてカスタマイズし、次に、生産することができる。これらの16個のバリエーションが、全部の可能性がある設計のバリエーションの極端に小さなサブセットを示し、すなわち、示す実施例の間で補間し、これを超えて推定され、例証に示さない他のパラメータを設定することによって可能な何千、何百万または無限のバリエーションが存在することに留意すべきである。例えば、構成可能なモデルが変更可能な10個のパラメータを有し、各パラメータが2mm、4mm、6mmなどの距離などの(無限であってもよい)20のインクリメントを有し、モデルが20の色及び3つの仕上げ加工を使用可能である場合には、その結果、一つのモデルについての総計の構成の組み合わせは、6×1021、すなわち、6セクスティリオンであり、10億×10億×6000である。これらのタイプの構成が、既製の部品の置き換え及び組み合わせで構成されるタイプに制限されないことにも留意すべきである。部品の基本的な形状及びサイズは、変更される各パラメータに応じて完全に異なり、構成可能なかつ部品がゼロから作製されるモデルが必要である。この程度のカスタマイゼーションは、優位な、ゼロからカスタマイズする本細書に記述する方法によってのみ達成することができる。
アイウェアモデルは、幾何学形状に加えて、表面仕上げ、色、テクスチャ及び他の美容の特性についてのパラメータも有することができる。三次元アイウェアモデルは、表面を示す画像にマッピングされたテクスチャであってもよいし、または写真のようにリアルなアイウェアの外観を示すために、テクスチャ、照明、及び反射率、透過率、表面下散乱、表面または粗さなどの表面特性を含んでレンダリングされてもよい。モデルの構成可能な性質によって、数多くの材料、塗料、色及び表面仕上げを示すことができる。製造時のフレーム及びレンズの厳密な見え方をディスプレイ上において適切に示して再生することを強化する、レイトレーシングなどの当業者に公知のさまざまなレンダリング技術が、最も写真のようにリアルな実行可能な方法においてアイウェア及びレンズをレンダリングするのに使用される。影及び反射などの他の光学的対話の効果を、アイウェア及びユーザの顔の三次元モデルに表示することができる。三次元アイウェアモデルは、テンプルがフレームフロントに対して曲がり、ユーザの顔モデルにフィット可能なヒンジ点をテンプルに有する。別の実施形態では、三次元アイウェアモデルによって、フレームのバルク材特性における適切な量の弾性係数(伸縮)も実現可能になり、この弾性特性は、選択されたフレーム材料に応じて変えることができる。
製品のカスタマイゼーション
解剖学的モデルが構成されると、構成可能な製品モデルの配置及びカスタマイゼーションの情報を提供するのにこれが使用される。例示の実施形態では、コンピュータシステムは、定量的な解剖学的モデル、ユーザが入力した嗜好、及びユーザの画像データの少なくとも一つに基づいて、ユーザの顔に対してアイウェアを自動的に調節する。定量的な解剖学的モデルの寸法及び構成可能なアイウェアモデルの寸法は、共に、コンピュータシステムに既知であり、ベストフィットを自動的に保証する、またはベストフィットにごく近いソリューションに達するように、さまざまなサイズ調節が為される。三つの異なるアプローチを記述する。すなわち、解剖学的モデルに対する位置合わせまたは配置及びユーザについてのプレビューをレンダリングする前、解剖学的モデルに対する位置合わせまたは配置後であるが、ユーザについてのプレビューをレンダリングする前、並びに位置合わせまたは配置及びユーザについてのプレビューをレンダリングした後に、構成可能なアイウェアモデルをカスタマイズする方法がある。最後の方法では、ユーザは、顔についてのベースの事前に構成されたアイウェアモデルを見た後に、追加の入力を提供することができる。
解剖学的モデルへの配置前のカスタマイゼーション
一実施形態において、アイウェアモデルは、解剖学的モデルに位置付けられる前に自動的にカスタマイズされる。それ故に、アイウェアモデルがユーザの画像に直接に当てはめまたはレンダリングされる前に、全く新しいカスタム設計が創作される。
図30を参照する。この実施形態では、a)コンピュータシステムが、限定されないが、寸法、点、線及び眼、鼻、耳、眉などの表面を含む、特定された主要な顔の特徴3005を有するスケーリングされた顔モデル3001を(任意の前述の方法を使用して)取得し、b)コンピュータシステムが、限定されないが、寸法、点、線及びテンプル、ノーズパッド、レンズ、ブリッジなどの表面を含む、特定された重要な特徴3006を有する構成可能な三次元製品モデル3002を取得し、c)コンピュータシステムが、例えば、アイウェア幅と顔の幅との最適比、レンズ内の眼の最適な中心などの所定のフィットメトリクスに基づいて構成製品モデルのパラメータの最適化を実行して、顔及びモデルのさまざまな特徴間の誤差を減少する。例えば、テンプルと耳の上端との間の誤差が最小限になるまで、テンプルの長さを調節する。または、コンピュータシステムは、機械学習または解析的方程式などの他の技術に基づいて、フィット及びスタイルを最適化する。そしてd)コンピュータシステムが、新しいパラメータを用いて構成可能な製品モデル3003を更新し、e)コンピュータシステムが、3004に例証するように、最適化を実行して、製品モデル3003を顔3001に位置合わせするための剛体変換を得る。製品及び顔の重要な特徴間の誤差が最小限にされ、いくつかの特徴が他の特徴よりも重み付けされる。そしてf)コンピュータシステムが、解剖学的モデルに位置合わせするために製品モデルの座標を変換することによって、新しいアイウェア設計をユーザの骨格に位置合わせする。
解剖学的モデルへの配置後のカスタマイゼーション
別の実施形態では、ベースアイウェアが解剖学的モデルと相対的に位置付けられ、次に、次の通りに自動調節を完了し、ユーザのプレビューのためにレンダリングする前に全く新しいカスタム製品を創作する。図31を参照する。
a)コンピュータシステムが、限定されないが、寸法、点、線及び眼、鼻、耳、眉などの表面を含む、特定された主要な顔の特徴3107を有するスケーリングされた顔モデル3101を(任意の前述の方法を使用して)取得し、b)コンピュータシステムが、限定されないが、寸法、点、線及びテンプル、ノーズパッド、レンズ、ブリッジなどの表面を含む、特定された重要な特徴3108を有する構成可能な製品モデル3102を取得し、c)コンピュータシステムが、3103に例証するように、最適化を実行して、製品モデルを顔に位置合わせするための剛体変換を得る。製品及び顔の重要な特徴間の誤差が最小限にされ、いくつかの特徴が他の特徴よりも重み付けされる。そして、d)コンピュータシステムが、解剖学的モデルに位置合わせするために製品モデルの座標を変換する。3104に例証するように、コンピュータシステムが、製品モデルと解剖学的モデルとの間の対話並びに寸法及び誤差を解析する。実施例の例証では、3103におけるアイウェアモデルは、ユーザの顔に対して過度に大きく、鼻のサイズに起因して過度に低く位置し、かつ顔の形状に対して過度に幅広い。そして、次に、e)コンピュータシステムが、3105に例証するように、製品モデルを自動的に適応させ、例えば、アイウェア幅と顔の幅との最適比、レンズ内の眼の最適な中心などの所定のフィットメトリクスに基づいて、顔の特徴と製品特徴との間の誤差をさらに最小限にする。結果として生じた顧客モデル3106は、ユーザにとってよりよく設計されている。
カスタム装着
コンピュータは、定量的な解剖学的モデルとアイウェアモデルとの間の測定値のセットを解析する。測定値のセットは、限定されないが、顔の幅と相対的なアイウェアの幅、鼻の幅と相対的なノーズパッド間の距離、鼻の角度、形状またはサイズと相対的なノーズパッドの角度、形状またはサイズ、耳の位置と相対的なテンプルの長さ、顔の高さと相対的なアイウェアの高さ、眼または他の基準点に対する左右の耳の高さ、レンズの中心と眼の中心との間の距離、内側レンズ表面から瞳孔までの頂点間距離、フレームと相対的なテンプルの外向きの角度、顔の前面によって生成された面と相対的なレンズの外向きの角度、顔の対応する巻き曲率に対するアイウェアの全巻き角を含む。
コンピュータシステムは、これらの測定値を使用して、構成可能なアイウェアモデルをユーザの顔に最適化する。アイウェア対顔の幅の比についての最適値などのメトリクスをデフォルトすることによって、自動調節が通知される。理想的には、各メトリクスは、すべてのユーザの顔にわたって適切にスケーリングする無次元比である。しかしながら、頂点間距離などのいくつかの測定値は、規定の寸法であってもよい。最適値の範囲も同様に使用することができる。各メトリクスは個別に最適化される、またはアイウェアフレーム幅とテンプル角度との間の対話効果などの対話効果が存在する場合には、それらは共に最適化される。
例えば、図14は、自動最適化の前の、ビュー1411におけるユーザの定量的な解剖学的モデル1401及び構成可能なアイウェアモデル1402を示す。メトリクスのセットは、アイウェアの幅1403と顔の幅1404との比、テンプル1407の角度、及び耳の上端までの距離1405と相対的なテンプルの全長1406である。単なる一つの実施例として、これらのメトリクスについての最適値は、0.95、87度及び1であり、これらの値は、事前に最適化されたアイウェアモデル1402は満たしていない。コンピュータシステムは、すべての三つのメトリクス及び最適値の間の誤差を最小限にすることを模索する。最小二乗法、最急降下法などまたは他の当業者に既知の最適化方法を使用して、ユーザの顔にベストフィットするアイウェアパラメータの新しいセットを取得する。パラメータの更新後、1412に示すような自動的に調節された三次元アイウェアモデルが表示され、幅1408、テンプル全長1409及びテンプル角度1410がユーザにより適した、より優れた最初の視覚化またはすべてのアイウェアモデルの近似が可能になる。アイウェアがベストフィットするまたはユーザにとってのベストフィットサイズに近くなるように自動的にサイズ調整することによって、ユーザが最終アイウェア設計に達するのに必要な時間及びステップが減少し、その結果、より優れた買物体験が可能になる。ユーザは、予想しなかった満足のいくアイウェア設計、または自身に適合するものとして今まで知らなかったスタイルにおいて自身を良い意味で驚きを持って見ることもできる。あらゆる設計及びスタイルを十分にフィットさせる概念が、良好な買物体験を保証するための重要な最初のステップである。
別の実施例として、図28は、カスタマイゼーションする前の鼻2801及びアイウェアモデル2802の断面を例証する。ノーズパッド2803は、鼻の輪郭に一致せず、鼻の表面に交わらない。同じ鼻2804を、ユーザに応じてカスタム構成されたアイウェアモデル2805とともに例証する。ノーズパッド2806は、ここでは鼻の輪郭及び角度に一致し、表面にほどよく位置する。従来の技術では、ユーザの鼻に正確に一致及びフィットするようなノーズパッドの輪郭のフルカスタマイゼーションが可能ではないので、これは、フルカスタマイゼーションの優れた実行力の実施例となる。
いくつかの場合において、アイウェアモデルが高度に構成可能である、またはパラメータ化された設計の解空間内に最適値が十分にあるときには、あらゆる最適化が必要なく、厳密に規定されたメトリクスの直接解を取得することができる。例えば、テンプル全長が103.4mm必要であり、メガネのフロント幅が142.1mm必要である場合には、その結果、モデルをこれらの値に厳密に調節することができる。
最適値は、性別、年齢、顔の形状、アイウェアスタイル、アイウェアの目的、または現在の流行などの、ユーザによって入力されたまたは画像データから決定された他のファクタに基づいて変えることができる。例えば、女性は、平均的に男性よりも、顔サイズに対してわずかに小さいアイウェアを好む場合がある。レクリエーションで使用するアイウェアを選ぶユーザは、眼に入る風を減少し、誤りのない視界を拡大し、かつ/またはより大きな衝撃もしくは太陽光線からの保護を提供するために、増大したフレームの全巻き角及びよりきついテンプルフィットを好む場合がある。プラスチック製のアイウェアを選ぶユーザは、金属製のアイウェアを選ぶユーザよりも大きなアイウェアを好む場合がある。これらのユーザ定義の嗜好を使用して、カスタマイゼーションプロセス中に最適パラメータを変更することができる。
カスタマイゼーション及び美観の予測
例示の実施形態において、カスタムフィット及びスタイルが、ユーザの画像データ、及び可能性としてユーザが提供する追加の情報に基づいて、コンピュータシステムによって推薦される。ユーザによって選択されたベース設計についてのカスタムフィットに加えて、コンピュータシステムは、ユーザに特有のカスタム製品を創作するアイウェアスタイルの提案もすることができる。イメージングデータ及び解剖学的モデルから取得された、カスタム提案の提供に使用されるユーザについての情報は、限定されないが、モデルから得られた顔の前面の領域または頭部の容積などの全体的な顔のサイズ、顔の幅、顔の高さ、耳の位置(左右の耳は、異なる高さを有する場合がある)、瞳孔間距離、面積または長さもしくは高さなどの眼のサイズ、両眼間の間隔、鼻、眼または口の非対称性、眼の色、髪の色、髪の量及び形状、皮膚の色、民族性、年齢、その場所または地域のスタイル傾向、性別、頬骨の形状及び位置の評価、額の角度、頬の角度、眼の下の円、眉毛のサイズ及び形状、顔の形状(例えば、丸、四角、卵形など)、顔の中心と相対的な眼の垂直位置、ヘアスタイル(例えば、アップ、ダウン、ロング、禿げ、ストレート、カーブ)、顔の毛、特徴の強さまたは柔らかさを含む。
特徴の一部、すべてまたは追加の特徴は、画像データから特徴づけられる。いくつかの特徴は、定量的な解剖学的モデルにおいて直接に測定可能である。例えば、鼻の曲率及び耳の位置は、解剖学的モデルから直接に測定可能である。例示の実施形態において、機械学習アルゴリズムを使用して特徴を分類する。複数の顔からの画像データの訓練データベースが収集され、すべての特徴が記録される。コンピュータシステムは、強度マップ、勾配フィルタ、ハールフィルタ、ヘッシアン、ソーベルフィルタ、ハフ変換、セグメンテーション、及びキャニーフィルタなどの、各画像についての複数の解析を実行し、例えば、口の角度、顔の縁、鼻のサイズ、しわなどの複数の特徴を測定または検出する。例えば、年齢推定の援助のためのしわ特徴を推定するために、コンピュータシステムは、解剖学的モデルによって分割された画像の一部を解析する。モデルの境界内において、ソーベルフィルタを利用して縁及び縁の強度を検出する。顔領域は、ソーベルフィルタを利用する所の複数の領域にさらに分割され、各領域における縁の量及び強度を定量化する。顔についてのすべての領域の集合が、しわを検出するための特徴を提供する。眼及び口などの主要な顔の特徴における縁特徴のみを有し、しわのない人物は、しわに起因するより多くの縁特徴を有するしわのある人よりも比較的低いスコアを有する。機械学習法を使用して、限定されないが、サポートベクターマシン、ブースティング、バッギング、ランダムフォレストなどを含むトレーニングセットにおいて特徴を分類する。次に、コンピュータシステムは、機械学習分類子を使用して、画像データを所望の特徴に関連付ける。
他の美的特性も同様に定量化することができる。前述の技術を使用して皮膚特徴または毛髪特徴を検出することによって、画像データのそれらの領域を孤立させることができる。次に、色の画像解析によって、肌の色合い及び髪の色の特性化を確立することができる。クラスタリングは、肌の色合いまたは髪の色のカテゴリを確立し、画像から類似の色を共にグループ化できる方法である。あるいは、機械学習法を画像データの色空間に使用して、美的特性を決定するように分類子を訓練することができる。
例示の実施形態において、ユーザは、画像データから解析されたデータを向上または補足するために、なおもいくつかの情報を提供することを依頼される。ユーザは、限定されないが、年齢、性別、所在地、職業、「流行」または「伝統的」などのスタイルの嗜好、メガネを身に付けたいときの服装のタイプ(フォーマル、カジュアルなど)、色の嗜好、お気に入りの衣類、異なるアイウェアスタイルまたは形状の優先格付け、及び自身または趣味を記述する言葉を含む情報を提供する。
各特徴は、該特徴の重要性をアルゴリズムに示す対応する重みも保持することができる。あるいは、ユーザは、ソーシャルネットワークウェブサイト、個人プロファイル、ユーザについての広告データベース情報、または他のそのような個人情報のソースをコンピュータシステムにリンクさせることができる。これによりコンピュータシステムは、お気に入りの音楽、有名人、訪問した地域、好きなレストラン、または公に使用する言葉及び記述子の言語解析のリストなどの、ユーザに質問するよりも実用的なユーザについての様々な情報をインポートすることができる。例えば、ブログまたはソーシャルウェブサイトにおけるユーザの投稿を解析する場合には、「赤色」が他の色よりも遥かに頻繁に言及する色であること、または画像においてダークフォーマルの衣類を最も頻繁に身に付けていることが明らかになることがあり、これらを使用して、ユーザの色またはスタイルの嗜好についての情報をコンピュータシステムに提供することができる。
例示の実施形態において、コンピュータシステムは、さまざまな特徴に関連する嗜好の訓練データベースを有する。これらの嗜好は、限定されないが、アイウェアスタイル、アイウェア材料、アイウェア形状、アイウェアの色、アイウェアの仕上げ、外形サイズ及び例えば、幅、厚さなどのカスタマイズされた局所調節を含む局所的なサイズ調節を含むアイウェアサイズ、顔におけるアイウェアの位置、並びにレンズサイズを含む。
嗜好は、実際のユーザ、設計者、検査ユーザによってまたは他の手段を通じて決定される。嗜好は、ただ一つのお気に入り、複数のお気に入り、お気に入りの範囲、ランク付けされたお気に入り、またはスコアを持つお気に入りとして設定される。さらに、ユーザは、自身にアピールしない好ましくない選択または特徴を有することができる。例えば、ユーザは、丸いフレーム形状と卵形のフレーム形状とを同等に好むが、矩形のフレーム形状を嫌う場合がある。嗜好は、ユーザによるコンピュータシステムの使用に基づいて自動的に設定される。例示の実施形態において、ユーザが、アイウェアを買いに行き、そしてアイウェアの格付け、アイウェアのショッピングカートへの追加、アイウェアの変更、またはショッピングプロセス中のアイウェアについての質問の回答などのある特定のアクションをとると、コンピュータシステムは、そのアクションを記録して嗜好として関連付ける。例えば、ユーザが、青色のアイウェアを繰り返して試着し、気に入り、そして改造する場合には、青色がそのユーザについての嗜好として関連付けられる。
別の実施形態では、これらの嗜好は、エキスパート設計者または検査ユーザによって定めることができる。設計者または検査ユーザは、さまざまなアイウェア設計及び特徴をランク付けまたは格付けすることが求められる質問または活動の特定のセットを進める。設計者または検査ユーザは、アイウェアを嗜好に修正またはカスタマイズすることも依頼される場合がある。これらのユーザの詳細な検査に基づいて、嗜好についてのデータベースを確立することができる。
その結果、データベースは、複数の変数、すなわち、ユーザの画像データ、定量的な解剖学的モデル及び提供された個人情報、すなわち、ユーザについての解析されたデータ及びそれらの画像データ、並びにユーザが設定した嗜好の間の関係性で構成される。コンピュータシステムは、機械学習または予測解析を利用して、新しいユーザからの入力、すなわち、新しい画像データ及び解剖学的モデル、個人情報、並びにコンピュータシステムにおけるショッピング行動に基づいて、応答の予測(嗜好)を作製する。このアプローチは、高度にカスタマイズされ、かつ便利なアイウェア買物体験を提供できるという利点を有する。例えば、ユーザの画像データ解析及び質問に対する少しの基本的な回答によって、そのユーザについての以下の詳細なプロファイルが提供される。すなわち、30代半ばの女性、黒くて中程度の長さの髪、四角い顔、非常に小さい鼻、わずかに青い眼、中間の皮膚の色、流行のファッションが趣味、ホワイトカラーの専門的職業、大胆なファッションを好む、メガネを毎日身に付ける、及び都市部に住んでいるというプロファイルが提供される。これらの特徴の各々は、さまざまなアイウェアの嗜好に関連付けられ、組み合わされた情報が機械学習法によって分類されると、推測的なアイウェア設計の嗜好を提示しないまたは知らない場合でさえも、ユーザの嗜好に真に一致するアイウェアのセットを推薦することができる。本明細書に記述するアイウェアショッピングの実施では、アイウェアを自動的にサイズ調整する方法に加えて、ユーザは、高度にパーソナライズされた体験を含む買物体験を開始し、他の既存のショッピングの実施を通じるよりも速くかつ容易に、より理想的なカスタムアイウェアに到達する。
別の実施形態では、製品モデルは、非対称性でカスタマイズされる。例えば、図24は、斜鼻2402及び2403における他方よりも低い一方の耳という共通の問題点を持つユーザ2401を示す。これらの顔の解剖学的な非対称性は、多くの人に存在し、アイウェアの顔におけるフィットまたは見え方に影響を及ぼし、多くの場合に、検眼士による手動での補正が必要となり、問題を解決できることもあるし、できないこともある。ユーザ2401では、アイウェア2404は、非対称の顔の特徴の故に、角度2405において位置付けられ、片側に位置ずれしている。カスタマイゼーションについての任意の前の実施形態では、製品モデルを、顔の左側と右側とで異なるように適応させることができる。これは、製品の左サイズと右サイズとを最適化するように、異なる測定値、点、表面または他の幾何学形状を有することにより達成することができる。結果として生じるアイウェアは、左側と右側との特徴について異なる寸法を有する、例えば、テンプルを左右で異なる長さにする、またはノーズパッドを片側に位置ずれさせることができる。ユーザの非対称の特徴に関係なく、アイウェアの水平かつ十分に位置合わせされた配置を達成するために、最適化には制約が追加される。非対称のカスタマイゼーション後、ユーザ2401は、顔において平衡かつ中心に位置するアイウェア2406を有する。
ユーザの顔のさまざまな表情を考慮に入れたカスタムアイウェアの設計が所望される。例えば、人は、笑うと頬の構造が変化する、または顔をしかめると眉の形状が変化する。これがアイウェア設計において障害となり、通常の使用中、アイウェアが動く、または不快感を生じることがある。以下の実施形態は、さまざまな表情でもフィットするように最適化されたアイウェア設計のカスタマイズ方法を記述する。
この実施形態では、a)撮像デバイスを備えて構成されたコンピュータシステムが、画像データを入手し、(前述の任意の方法を使用して)中立の表情におけるユーザの顔のモデルを構成し、b)コンピュータシステムが、少なくとも一つの追加の表情を持つ追加の画像データまたはユーザを入手して少なくとも一つの追加の顔モデルを構成し(または、単一モデルをさまざまな表情に調節するのに必須のパラメータを取得し)、c)コンピュータシステムが、前述の方法からの一つの追加の制約を持つ配置、設計最適化、ユーザ調節、及びプレビューを実行する。アイウェア設計、配置及びプレビューは、ユーザの複数の表情を示す複数の顔モデルにわたって実行される。すべての顔モデルまたはすべての表情の制約を満たす最適設計が作り出され、顔の複数の表情及び動作の範囲にわたってユーザにベストフィットするカスタムアイウェアが得られる。
カスタマイゼーション及び光学系
図1Bのステップ104において前述したように、コンピュータシステムは、処方アイウェアの注文に必要な光学レンズの処方情報を入力するようにユーザを促す。処方情報は、ユーザが受け入れるサイズ、形状及び厚さのレンズをレンダリングすることによって、アイウェア全体のより完成されたかつ写実的なプレビューを提供するのにも使用される。種々の処方には種々の光学系(より薄いまたはより厚いレンズ、より大きいまたは小さい曲率)が必要となるので、ユーザの具体的な処方が、最終製品の外観に影響を与える。ユーザがデータを入力しない場合には、平均の(光学補正していない)処方レンズまたはピアノレンズの推定をレンダリングに使用して、少なくとも、アイウェアフレームにおけるレンズのビューを提供する。あるいは、ユーザに、例えば、近視または遠視、乱視、視力評価、嗜好のレンズタイプなどの視覚についての一般的な質問をする。これらの一般的な質問は、最も有望なレンズのサイズ及び厚さをユーザに関連付けるために、コンピュータシステムによって使用することができる。カスタムレンズのレンダリングは、ある特定のフレームスタイル及びサイズが処方の強度に付与されるものとして許容範囲内にあるか否か、かつ/または選択したレンズインデックスに適当であるか否かを判断するために、ユーザによって視認される。例えば、(厚いレンズをもたらす)1.49の標準インデックスを有する標準的なレンズにおいてレンダリングされた−9.0の処方を見た後に、ユーザは、レンズ厚を薄くするために、厚いレンズエッジを隠す異なるカスタムアイウェア設計または1.67もしくは1.71のより高いインデックスを好む場合がある。コンピュータシステムは、また、ベストなビジュアル及び美観を提供するために、フレーム設計及び処方に基づいてレンズインデックスを自動的に提案もする。例えば、非常に強力な処方を持つユーザは、厚いレンズエッジをよりよく美観的にマスクするために、そのより厚い縁の機能の故にプラスチックフレームを好む場合がある。コンピュータシステムは、その提案を行うことができる。
例示の実施形態において、ユーザは、限定されないが、レンズの色合い(透明、さまざまなサングラスの影、屋内及び屋外での推定される色合いを持つ調光レンズ、偏光レンズなど)、処方スタイル(ピアノ、単焦点、デジタル補正、二焦点、累進多焦点など)、レンズ材料インデックス(1.5、1.67など)、レンズコーティング(複数可)、レンズエッジのレンチキュラー化(レンズエッジの薄化)、またはブランドを含むレンズスタイルを選択することができる。アイウェアを身に付けているユーザを視認するときに観察者が見ることができる、特定のレンズタイプ及び処方に起因する任意の歪みまたは光学的効果を含む目に見えるあらゆる変化が、三次元アイウェアモデルにおいて写実的にレンダリングされる。
例示の実施形態において、デジタル補正(すなわち、自由形状)、累進多焦点または他の進歩的な光学レンズ設計を可能にするために、定量的な解剖学的モデル及びアイウェアモデルからより進歩的な測定値が導き出される。デジタル補正レンズ及び/または累進多焦点レンズを製造するために、理想的には、限定されないが、瞳孔間距離、頂点間距離、広角傾斜、フレームの全巻き角及び瞳孔と相対的なレンズの高さを含む様々な測定値が必要となる。従来、アイケアの専門家(眼鏡技師、検眼士など)は、特殊な機器またはカメラを利用してこれらの測定値を直に得ていた。これらの測定値は、専門的に行われる場合でさえも、多くの場合に、眼の表面からレンズの背面までの距離の測定などにおいて概算が困難である。コンピュータシステムにおいて解剖学的及びアイウェアモデルを使用する測定は、測定値をとるのに物理的な障壁または制限がないので、遥かに容易かつより正確である。ユーザは、コンピュータシステムにおいてアイウェアを選択するときに自動的に測定値が取得されることによって、コスト及びアイケアの専門家を訪れる時間が削減されるという多大な利益を有することができる。
別の実施形態では、製品モデルは、レンズの形成に使用される光学パラメータを最適化するように構成される。レンズ設計情報を提供するための、解剖学的モデルから得られる詳細及び寸法の使用に加えて、光学設計を向上するために、アイウェアフレームを最適化することができる。例えば、標準的な頂点間距離(眼からレンズの内表面までの距離)は、約12〜14mmである。標準的なメガネでは、この距離は大いに変化し得るが、最適測定を達成するように構成可能なフレームを調節することができる。他のパラメータは、限定されないが、フレームの全巻き角、レンズの中心と相対的な眼の位置、広角傾斜などを含む。この実施形態では、a)コンピュータシステムが、限定されないが、点、線及び眼、鼻、耳、眉などの表面を含む、特定された主要な顔の特徴を有するスケーリングされた顔モデルを(任意の前述の方法を使用して)取得し、b)コンピュータシステムが、限定されないが、点、線及びテンプル、ノーズパッド、レンズ、ブリッジなどの表面を含む、特定された重要な特徴を有する構成可能な三次元製品モデルを取得し、c)コンピュータシステムが、限定されないが、頂点間距離、広角傾斜、Pd及びフレームの全巻き角を含む関与のある寸法を解析し、d)コンピュータシステムが、寸法が所望の範囲内(例えば、頂点間距離12〜14mm)になるまでアイウェアの形状及びユーザの顔におけるアイウェアの位置を変化させるよう製品モデルのパラメータを最適化し、e)コンピュータシステムが、新しいパラメータを用いて構成可能な製品モデルを更新し、f)コンピュータシステムが、最適化を実行して、製品モデルを顔に位置合わせするための剛体変換を得、ここで、製品及び顔の重要な特徴間の誤差が最小限にされ、いくつかの特徴が他の特徴よりも重み付けされ、g)コンピュータシステムが、解剖学的モデルに位置合わせするために製品モデルの座標を変換する。
前述のように、図7は、必要なさまざまな測定値のいくつかを例証する。瞳孔間距離(Pd)が、両眼703aまたは単眼703bの測定値として測定される。ユーザの処方アイウェアのベストな実施を可能にするために、多くの場合に、単眼の測定値が好まれるが、適切な測定がより困難であり、大抵、特定の機器を使用した身体的に直の測定が要求される。ユーザの単一の二次元正面画像において実行される大抵のPd測定は、システムにとって眼の位置の検出が容易であり、その上、照明の制約に起因して、例えば、ユーザがカメラに対して正確に直面しない可能性があり、鼻の正確な中心を適切に検出することが眼の検出よりも困難であるので、両眼の測定に依存している。しかしながら、ユーザの定量的な解剖学的モデルの眼及び鼻の特徴を使用することによって、単眼Pdがよりよく取得される。この場合には、定量的な解剖学的モデルによって提供される追加の情報によって、定量的な解剖学的モデルの構成に使用される個々の二次元画像がそのような測定を実行するのに単独では十分ではない場合でさえも(例えば、ユーザがカメラに対して完璧に直面する二次元画像がなくても)、鼻の中心を自動決定することができる。眼の中心間の直線距離が測定される場合には、各眼の単眼Pdが眼の中心から鼻のブリッジの中心までの距離として定義される。頂点間距離709は、多くの場合に、訓練されたアイケアの専門家によっても直に適切に測定することが困難であるが、定量的な解剖学的モデルが再び利点をもたらす。頂点間距離は、眼の中心からレンズの内表面までの距離である。顔に身に付けられたユーザのフレームと眼との中間を得ることが困難であるので、アイケアの専門家にとってこのパラメータの測定は困難である。ユーザが試みるアイウェア設計ごとに測定を直に繰り返す必要があり、極めて不都合でありかつ時間を消費する。故に、測定は、多くの場合に概算となる。しかしながら、測定が困難なこの寸法は、アイウェアを身に付けているユーザの定量的な解剖学的モデルに利用される様々な方法、例えば、アイウェアモデルにおいて眼の表面の中心からレンズの内表面への視線を追跡することによって、卓越した精度で計算される。顔の面と相対的な視線の垂直性は、顔の前面における面を構成するためのモデルにおける様々な特徴、またはレンズの面を使用することによって保証される。広角傾斜710は、完璧な垂直からのレンズの頂角である。ここでもまた、この寸法は、アイウェアモデルと併用される定量的な解剖学的モデルを使用して測定される。平面が、レンズを通して、ユーザの顔の垂直位置に関して定義される。水平軸に関する平面間の角度を使用して広角傾斜が計算される。フレームの全巻き角704は、ユーザの顔に対する、フレームに位置付けられたレンズの水平角であり、広角傾斜と類似の方法で、垂直軸に関する角度を使用して計算される。装着高さ713が、頂点間距離と類似の方法で計算される。コンピュータシステムが、頂点間距離を計算するのに必要な寸法である、瞳孔を覆うようにちょうど中心付けられたレンズ位置(レンズの光心)を計算すると、装着高さを決定するための、フレームにおけるレンズ穴の内面の底部までの垂直距離が計算される。これらの測定のすべてが、ユーザの定量的な解剖学的モデルと相対的な、ユーザによって位置付けられ、プレビューされた三次元レンズを用いて実行されるという利点を有する。
例示の実施形態において、コンピュータシステムは、ユーザのレンズを製造するのに必要なすべての情報(すべてのフレーム寸法、瞳孔間距離、レンズがデジタル補正された場合には追加の顔の測定値、処方情報、レンズ材料インデックス及びレンズのレンチキュラー化の選択)を有すると、選択されたアイウェアにおける及びユーザの画像データに位置付けられたユーザのレンズを写実的にレンダリングすることもできる。前述の情報の所与によってレンズの三次元バージョンを再構成するためのアルゴリズムが確立され、これは最新のレンズの表面及び縁をデジタル的に示すために必要である。一実施形態において、コンピュータシステムは、ラスタリングまたはレイトレーシングなどの極めて高度なレンダリング技術を使用して、三次元オブジェクトとしてレンズを表示することに加えて、レンズを通過するときに湾曲する光もレンダリングする。前述のレンダリング技術の使用により、システムは、レンズをユーザの顔に位置付けられたフレームにレンダリングし、これによりユーザは、第三者から視認されたときにどのように見えるかを正確に見ることができる。レンズを備えたアイウェアがユーザの顔に配置されると、レンズを通して視認される顔の正確に歪められたビューを示すことができる。さらに、反射防止コーティングの実際の性能に加えて、境目のない累進多焦点、(専用の倍率領域を持つ)二焦点などのレンズ特徴の含有に起因するレンズ歪みの出現がユーザに示される。正確なレンダリングを取得することによって、ユーザは、さまざまな選択のトレードオフをより明確にした上で、選択されたフレーム及びレンズのタイプに関する詳細な情報を得た上でのよりよい決定を為すことができる。ユーザは、小売環境にレンズを買いに行くときに、レンズ厚を20%削減するという期待をしつつ、レンズのインデックス材を増大するというプレッシャーを受ける。しかしながら、ユーザが有する情報は不完全である。すなわち、多くの場合に、選択したフレームにどの程度厚いレンズが実際に合うのかを告げられていないし、多くの場合に、20%削減が実際に何mmの削減かを想定できていないし、多くの場合に、本人におけるレンズの美観を見ずにそのような比較を理論的にすることができない。この情報の不完全性によって、多くの場合に、ユーザは、より優れた情報が提供されていたらしなかったであろう機能向上の犠牲を払うことになる。20%削減は、多いように思えるが、実際には、0.7mmのみの削減であり得、所与の価格では十分な実用性を提供しない場合がある。この実施形態では、選択されたレンズの写真のようにリアルなレンダリングに加えて、さまざまなフレーム構成に合うあらゆる種類のレンズ構成もユーザに提示することができ、ユーザは、より詳細な情報を得た上での決定を為すことができる。さらに、最終的に製造されたレンズは、レンダリングされたものと全く同じようであり、意外に感じることがない。
別の実施形態では、任意のレンズ構成の断面図が表示され、任意の位置におけるレンズの厚さが視覚化され、他のレンズ構成(幅、インデックス材、デジタル補正など)と比較することができる。
既存のアイウェアに対するカスタマイゼーション
別の実施形態では、ユーザは、所有物である物理的なアイウェアを既に身に付けている画像データを捕捉する。画像データは、コンピュータシステムによって捕捉される、またはユーザが画像データをコンピュータシステムに提供する。コンピュータシステムは、前述と同様の方法を使用して画像データを解析するが、それに追加の画像処理をして、アイウェアの形状、色及び位置を検出及び決定する。次に、コンピュータシステムは、定量的な解剖学的モデルをユーザの顔に適応させるのと同じように、構成可能なアイウェアモデルを調節してユーザが身に付けているアイウェアに一致させる。形状モデルまたは他のアルゴリズムを使用して、画像データまたは画像データにおいて検出された特徴にアイウェアモデルを適応及び当てはめることができる。これによりユーザは、既に所有しているアイウェアを複製または複製して修正することができる。例えば、ユーザは、フレームの色及びノーズパッドの幅は別として好みのアイウェアを所有することができる。ユーザは、システムを使用して、アイウェアのモデルを創作し、前述の方法及びシステムを使用してフレームの色及びノーズパッドの幅を調節することができる。ユーザは、このシステムを使用して、既存のアイウェアの身に付けにおける(美観、実用性または快適性の理由のための)好みの鼻の位置を指示することもできる。その後、システムは、すべての新しいアイウェア設計を、ユーザの鼻におけるその位置に配置する。別の実施形態では、ユーザは、アイウェアを身に付けている任意の人物の写真をアップロードし、コンピュータシステムが、アイウェアの形状及び色を検出及び解析することによって、アイウェア写真にベストマッチする、ユーザのための新しい三次元アイウェアモデルを更新することができる。例えば、ユーザは、特定のスタイルのアイウェアを身に付けている仲間または有名人の写真を見て、同様の設計を取得するために写真をアップロードし、次に、趣味及び骨格に合わせてさらにカスタマイズすることができる。
別の実施形態では、アイウェア設計者または製造業者が、画像データ収集プロセスの一部の期間に、ユーザが身に付けることができるサンプルのアイウェアフレームを提供する。前述の方法と同様に、コンピュータシステムが、アイウェアを検出及び解析する。この実施形態では、アイウェアモデルのサイズ及び形状が設計者に既知であるという利点がある。検出されたアイウェアのサイズが既知であるので、画像データでのユーザの顔におけるアイウェアの存在によって、データのための両方の参照スケールが提供され、よりロバストな解剖学的モデル再構成を可能にするための非常に強力な検出特徴が提供される。コンピュータシステムは、あらゆるフレームにおける既知のオブジェクトを追跡し、ユーザの顔の他の特徴と一貫性のある関係性を知ることによって、ユーザの特徴のよりロバストな検出を有する。さらに、ユーザは、サンプルのアイウェアフレームの品質及び技巧に物理的に触れ、それを観察することができる。
位置合わせ
図1Bの108を参照すると、アイウェアモデルは、解剖学的モデルに位置合わせされる。例示の実施形態において、構成可能なアイウェアモデル及び定量的な解剖学的モデルは、基準幾何学形状の最適化に基づいて位置合わせされる。この位置合わせは、ユーザの骨格とアイウェアモデルとの間の幾何学的な対話についての情報を利用したカスタマイゼーションプロセスに情報を提供するためにカスタマイゼーション前、またはカスタマイゼーション後、かつアイウェアモデルがユーザの顔に適切に配置されることを保証するためにレンダリングの前に行うことができる。理想的には、アイウェアは、ノーズパッドが鼻の表面の接線においてそこに接触し、テンプルが耳の上端に位置し、そして頭部の側面に接触すべきである。アイウェアの上端は、所定の設計において、ユーザの眉からある特定の距離に位置すべきである。眼は、所定の設計において、理想の眼の位置に関する可能な限り中心に位置すべきである。デフォルト位置がなく、各々の人物の顔が互いに異なるので、カスタムアイウェアについてのアプローチは、各個人ユーザによって変わる骨格を考慮に入れる必要がある。
図10は、小さくて丸いフレーム1001及び大きい飛行機操縦士用のフレーム1002である二つの実施例のアイウェア設計を示す。設計1001における最適な眼の位置を、アイウェアのレンズ開口内の十分に中心に位置する1003として示す。設計1002における最適位置を、レンズ開口の上端の方に中心を外れた1004として示す。アイウェアの理想の初期配置は、ユーザの眼がこれらの位置に可能な限り近い位置(例えば、直ぐ後ろ)である。
アイウェアの中心と鼻の中心線との間の距離、頭部との交点に位置する各々のモデル化された耳の上端と(耳の上端に位置する)テンプルの底部との間の距離、アイウェアのノーズパッドと鼻の表面との間の距離、眼の中心点と設計上の最適な眼の位置との間の距離、そして眉及び/または頬骨と特定のアイウェアの前面フレームとの間の既定のオフセット距離を最小限にすることによって最適化が得られる。位置及び測定値の代替的な組み合わせを使用しても配置を最適化することができる。
例示の実施形態において、アイウェアのテンプルはヒンジにおいて曲がり、それらが接触するところの耳の上方に位置する顔の側面との接触を維持することによってユーザの顔とのフィットを保証する。例えば、耳におけるユーザの頭部の幅がアイウェアの幅よりも狭いと、テンプルは、顔の側面との接触を維持するように内側に曲がって現実的にフィットし、ユーザは、アイウェアが許容範囲内にあるか否かを見ることができる。コンピュータシステムは、ヒンジによって特徴づけられるテンプルの角回転が可能な複数の部品からなる動的アセンブリまたはフレキシブルアセンブリとしてアイウェアを示す。別の実施形態では、テンプルそれ自体が内側または外側に曲がるように弾性変形することによって、耳の上端における頭部の側面とのぴったりとした接触を保証する。この実施形態では、コンピュータシステムは、既定量だけ安全に弾性的に曲がることができる変形可能なユニットとしてアイウェアテンプルを示すことができる。
別の実施形態では、定量的な解剖学的モデル特徴とアイウェアモデルとの間の関係性は、解剖学的モデルとアイウェアモデルとの間の位置が最適条件に設定された訓練モデルのデータベースから確立された機械学習技術及び/またはアルゴリズムによって設定される。システムは、新しい解剖学的パラメータ及びアイウェア幾何学形状に基づいて、訓練データにおいて訓練された分類子を使用して、定量的な解剖学的モデルとアイウェアモデルとの間の向き及び登録を指定することができる。この方法は、微妙なユーザの嗜好に基づいてアイウェアの配置を微調整することができる。
カスタム製品プレビュー
定量的な解剖学的モデルが確立され、スケーリングされ、そして画像データ及び/または解剖学的モデルとして登録されると、アイウェアの表示がユーザの顔にフィットされる。図1Aの15及び図1Bの109を再び参照すると、カスタムプレビューを創作するための、ユーザの画像データ上でのアイウェアモデルのレンダリングが記述されている。例示の実施形態において、顔に正しく位置付けられ、重ね合わせられたカスタムアイウェアを含む画像データがユーザに提示される。例示の実施形態において、定量的な解剖学的モデルは、ユーザに表示されないが、位置合わせ及びデータの測定に使用される。データは、ユーザが、タッチスクリーン、マウスのようなコンピュータ周辺機器、ジェスチャ対話または任意の他の人間コンピュータインターフェース技術などのシステムを含むコンピュータシステムと対話することによって、調節、回転及びズームすることができるインタラクティブ画像として表示される。これによりユーザは、さまざまな向きにおける顔に身につけられたカスタムアイウェアを見ることができる。
別の実施形態では、フロント及びサイドビュー、またはユーザの顔の中心に位置付けられた垂直軸の周りにおいて設定された角度の複数のビューなどの少なくとも一つの静止画像が示される。なおも別の実施形態では、拡張現実的なアプローチが使用される。ビデオカメラを備えて構成されたコンピュータシステムを使用して、ユーザの顔のライブビデオフィードが示される。定量的な解剖学的モデルは、ユーザの顔をリアルタイムで追跡し、ユーザがコンピュータシステムの前で顔を動かすときにリアルタイムで三次元アイウェアモデルを表示し、ユーザの顔に重ね合わせることができる。これにより、小売店にいるかのように、メガネを試しながらミラーを見ているような錯覚を起こすことができる。なおも別の実施形態では、ユーザの画像データは示されず、その代わりにそれらは、顔に重ね合わせられ、正しく位置合わせされた三次元アイウェアモデルと共に、顔及び頭部のモデルにおいて提示される。あるいは、アイウェアは、実際の三次元モデルではなく、さまざまな角度からの一連の予めレンダリングされた画像として示される。この方法は、ネットワークシステムを通じた高品質の予めレンダリングされた画像を容易に表示することができる。
別の実施形態では、画像データの解析は、サーバ(複数可)またはクラウドコンピュータ(複数可)などの別のコンピュータシステムにおいてリモートにおいて実行され、これによりユーザのコンピュータシステムが保有し得るよりも速いまたはより専門化されたもしくは極めて高度なコンピュータ機能を利用できる。リモートサーバは、何千ものネットワーク化された、より大型かつ迅速なデータ記憶装置を備えたCPU及びGPUコアを保有し、ユーザが所有しているローカルコンピュータシステムよりも遥かにコンピュータ的に強力かつ/または効率的なシステムをもたらす。ユーザのコンピュータシステムは、画像データをリモートコンピュータシステムに転送し、画像データの解析後、レンダリングされた画像などのソリューションまたは追加のデータが、ネットワークまたは他のデータ伝送方法を通じてユーザのコンピュータシステムに戻される。別の実施形態では、ユーザのコンピュータシステムは、リモートシステムにデータを送信する前に初期の計算、またはリモートシステムから戻されたデータを受信後に最終の計算を実行する。この初期または最終の計算には、リモートシステムに伝送するもしくはそこから伝送されるデータ量、またはリモートシステムにおける計算の負荷を減少するという利点がある。
コンピュータシステムは、照度、画質、ソース及び温度についてユーザの画像データを解析する。定量的な解剖学的モデルが構成され、画像データに登録されると、コンピュータシステムは、以下の少なくとも一つについて、各々の画像を解析する。
−標準的なホワイトバランスに準拠する解剖学的モデルの範囲内の色温度。
−照明源の解析情報を提供できるような、明るい部分及び影に対応する光及び暗黒領域の位置。解剖学的モデルにおける光源を繰り返し調節またはそれらを直接に計算して、計算及び測定された明るい部分と影との間の誤差を最小限にすることによって、一つの照明源または複数の照明源を検出する。
−光源の強度及び性質についての情報を提供するような、解剖学的モデルの範囲内の全体的な明るさ及びコントラスト。
照明についての情報を使用して、画像データにベストマッチするように光源を三次元アイウェアモデルのレンダリングに適用し、アイウェアモデル及びユーザの画像データのほぼシームレスな統合を提供する。
ユーザにとって写実的なかつ実物以上によく見せるプレビューを達成するために、自然な照明下で自然な肌の色合いがユーザに見えるように、ユーザの画像データに良好なホワイトバランスを設定することに利点がある。多くの画像デバイスまたは画像後処理ソフトウェアにおいて実施されている自動ホワイトバランスが使用される。さらに、検出された顔面領域が、ホワイトバランス情報を特定するために使用される。画像内の特定のオブジェクトを正確なホワイトバランスのために使用することにさらなる利点がある。黄色、緑色または青色の色合いは、種々の照明源に共通であり、調節によってそれらを除去すべきである。この実施形態では、a)カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用され、b)既知の寸法のホワイトバランスターゲットが、ユーザの少なくともいくつかの画像内で視認可能なように位置付けられ、c)コンピュータシステムが、紙、新聞、電話機、電話ケース、電子デバイスなどのホワイトまたはグレーホワイトバランスターゲットを使用することをユーザに指示する。または、ホワイトバランスターゲットは、紙幣、電子デバイスもしくはロゴなどの既知の色のオブジェクトである。そして、d)コンピュータシステムが、少なくとも一つのユーザの画像におけるホワイトバランスターゲットを検出し、e)コンピュータシステムが、ターゲットがナチュラルホワイトまたはグレーになるまで、画像データのホワイトバランス(例えば、三原色または色温度及び色合い)を調節し、f)コンピュータシステムが、設定されたホワイトバランスをユーザのすべての画像データに適用する。
以下の実施形態は、ユーザの画像または解剖学的データにおいてカスタムアイウェアのプレビューを創作するためのシステム及び方法を記述する。モデル座標及びカメラ位置がユーザの顔の画像の姿勢、位置及びズームレベルにおいて顔モデルに位置合わせされるように、ユーザの顔の定量的な解剖学的モデルが確立され、スケーリングされ、そして画像データに登録される。構成可能な三次元アイウェアモデルが、定量的な解剖学的モデルに位置合わせされる。画像が、ユーザの画像データまたはモデルにおいて構成可能なアイウェアを含んでレンダリングされる。アイウェアは、限定されないが、ラスター、走査線及びレイトレースレンダリングを含む当業者に公知の様々な技術を用いてレンダリングされる。
ユーザの画像データにおいてアイウェアの画像をレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデルをユーザの画像データの姿勢及び位置に合わせるようにカメラ位置を設定し、b)コンピュータシステムが、カメラと解剖学的モデルとの間に位置付けられた構成可能な三次元アイウェアモデルのすべての面を示し(または、維持し)、c)コンピュータシステムが、(例えば、解剖学的モデルが、カメラと構成可能な三次元アイウェアモデルとの間にある場合に)解剖学的モデルの背後に位置する構成可能な三次元アイウェアモデルのすべての面を隠し(または、削除し)、d)コンピュータシステムが、構成可能な三次元アイウェアモデルの示された(または、維持された)面のみをレンダリングし、隠された(または、削除された)アイウェア面または解剖学的モデルはレンダリングせず、e)コンピュータシステムが、レンダリングされたアイウェア画像をユーザの画像に統合する。
奥行き計算を使用してユーザの画像データにおいてアイウェアの画像をレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデルをユーザの画像データの姿勢及び位置に合わせるようにカメラ位置を設定し、b)コンピュータシステムが、カメラから、画像内の任意の所与の点における、アイウェアモデル及び解剖学的モデルのすべての面または頂点までの奥行き(すなわち、距離)を計算し、ここで、コンピュータシステムが奥行き値を保存することができ、c)コンピュータシステムが、画像上の任意の所与の点または画素における最も近い面のみをレンダリングし、d)コンピュータシステムが、可視的にレンダリングはされないが、奥行き計算において使用されるようにトランスペアレンシを解剖学的モデルに適用し、e)コンピュータシステムが、ユーザのオリジナル画像で構成された背景にアイウェアをレンダリングする。
レイトレーシングを用いてユーザの画像データにおいてアイウェアの画像をレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデルをユーザの画像データの姿勢及び位置に合わせるようにカメラ位置を設定し、b)コンピュータシステムが、最終レンダリングにおいては目に見えないが、光線に対して不透明かつ反射しないものとして解剖学的モデルの表面を設定し、c)コンピュータシステムが、カメラと背景との間の光線を追跡し、d)コンピュータシステムが、解剖学的モデルが目に見えないので、構成可能な三次元アイウェアモデルのみをレンダリングし、e)構成可能な三次元アイウェアモデルが、不透明なものの背後に隠れて目に見えない解剖学的モデルの一部とともに表示され、f)コンピュータシステムが、レンダリングされた画像をユーザの画像に統合する。解剖学的モデルは、光線が影に投げかけられ得る面としても使用することができる。
マスクを用いてユーザの画像データにおいてアイウェアの画像をレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデルをユーザの画像データの姿勢及び位置に合わせるようにカメラ位置を設定し、b)コンピュータシステムが、バイナリマスク画像(例えば、構成可能な三次元アイウェアモデルが解剖学的モデルの前に位置する画素については1、そして解剖学的モデルが構成可能な三次元アイウェアモデルの前に位置する画素については0)として構成可能な三次元アイウェアモデル及び解剖学的モデルをレンダリングし、c)コンピュータシステムが、構成可能な三次元アイウェアモデルをレンダリングし、d)バイナリマスクをレンダリングされた画像に適用し、解剖学的モデル及び解剖学的モデルの背後にある構成可能な三次元アイウェアモデルの任意の部分を隠し、e)コンピュータシステムが、マスクをユーザの画像に適用して、レンダリングされたアイウェア画像を統合する。
レンダリング中にマスクを用いてユーザの画像データにおいてアイウェアの画像をレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデルをユーザの画像データの姿勢及び位置に合わせるようにカメラ位置を設定し、b)コンピュータシステムが、バイナリマスク画像(例えば、構成可能な三次元アイウェアモデルが解剖学的モデルの前に位置する画素については1、そして解剖学的モデルが構成可能な三次元アイウェアモデルの前に位置する画素については0)として構成可能な三次元アイウェアモデル及び解剖学的モデルをレンダリングし、c)コンピュータシステムが、黒色領域におけるレンダリングを防止するマスクを用いて、構成可能な三次元アイウェアモデルをレンダリングし(解剖学的モデル及び前に位置するものはいずれも、レンダリング中は目に見えないまたは生成されない)、d)コンピュータシステムが、マスクをユーザの画像に適用して、レンダリングされたアイウェア画像を統合する。
テクスチャマッピングされた顔モデルを用いてアイウェアをレンダリングする実施形態
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、b)コンピュータシステムが、入手した画像を使用して顔モデルを構成し、ユーザのテクスチャマッピングされた画像を生成し、そのテクスチャマッピングされた画像を顔モデルに適用し、c)コンピュータシステムが、(前述の任意の方法を使用して)構成可能な三次元アイウェアモデルをユーザの顔モデルに位置付けし、d)コンピュータシステムが、テクスチャマッピングされた顔モデル及び構成可能なアイウェアモデルを共にレンダリングして、ユーザのためのプレビュー画像データを生成し、e)選択的に、テクスチャマッピングされた顔モデル及びアイウェアモデルのレンダリングが、ユーザのオリジナル画像に重ね合わせられ、またはf)選択的に、コンピュータシステムが、ユーザに顔及びアイウェアモデルの姿勢及び位置を制御または調節するための入力を提供させ、ユーザによる各々の調節後に画像データをレンダリングすることができる。
ユーザの写真を使用したプレビュー
選んだ任意の写真におけるカスタムアイウェアのプレビューを見ることがユーザに所望されている。画像は、お気に入りの写真、専門家による写真、または解剖学的モデルの作製に使用される画像とは異なる他の画像であってもよい。この実施形態は、解剖学的モデルを新しい画像に位置合わせし、次に、新しい画像においてアイウェアをレンダリングする方法を記述する。この実施形態では、a)コンピュータシステムが、(必ずしも解剖学的データの取得に使用されるものでなくてもよい)ユーザの新しい画像を取得する。この画像は、ネットワーク接続を通じてアップロードされ、コンピュータにリンクされ、電子メール、ショートメッセージサービスまたは他の通信システムなどを通じて送信される。そして、b)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、c)コンピュータシステムが、新しい画像において、顔、推定姿勢及び検出された顔の特徴を検出し、d)コンピュータシステムが、顔モデル及びカメラの剛体変換を実行して顔モデル特徴を、新しい画像の検出された顔の特徴に位置合わせし、e)コンピュータシステムが、(前述の任意の方法を使用して)構成可能な三次元アイウェアモデルをユーザの顔モデルに位置付けし、f)コンピュータシステムが、(前述の任意の方法を使用して)ユーザの新しい画像においてアイウェアをレンダリングする。
シミュレートされたカメラの視点
画像データの入手に使用されるカメラとは異なるカメラまたは視覚特性(焦点距離、歪み、視野、被写体からの距離)をシミュレートすることも所望される。ユーザは、人の目またはより平坦なカメラレンズの視点をシミュレートすることを所望することがある。より遠い距離における人の目とカメラとを比較すると、短距離において写真をとるコンピュータカメラの広角レンズは、多くの場合に、レンズにより近いオブジェクト(鼻またはメガネ)を倍加及び拡大し、レンズから遠いオブジェクト(耳及び頭部の側面)の見かけを縮小する。
図25を参照すると、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザ2501のスケーリングされた顔モデルを取得し、b)コンピュータシステムが、(前述の任意の方法を使用して)構成可能な三次元アイウェアモデル2502をユーザの顔モデルに位置合わせし、c)コンピュータシステムが、解剖学的かつ構成可能な三次元アイウェアモデル2504がユーザの画像データの姿勢及び位置と位置合わせするように、カメラ位置2503を設定し、d)コンピュータシステムが、ユーザの画像データ2506に位置合わせされたアイウェアの同一の配置を依然として維持しつつ、固有のカメラパラメータ及びモデルからの距離2505を変更し、種々の視点及びカメラ特性をシミュレートし、e)コンピュータシステムが、(前述の任意の方法を使用して)アイウェアをユーザの画像においてレンダリングし、f)選択的に、コンピュータシステムが、オリジナルの及びシミュレートされたカメラ特性及び位置からわかる解剖学的情報を使用して、オリジナルのユーザ画像を変形させる及び歪ませる。歪みによって、基礎的な画像データが、異なるカメラの視点をよりよく表すことができる。
物理プレビューのための実施形態
デジタルプレビューの代わりにカスタム製品の物理プレビューを有することが有利である。以下の実施形態は、ユーザにアイウェアの物理プレビューを提供する二つの方法を記述する。
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、b)コンピュータシステムが、(前述の任意の方法を使用して)ユーザの顔モデルにフィットするように構成可能な三次元アイウェアモデルをカスタマイズし、c)コンピュータシステムが、迅速な製造のために、三次元アイウェアモデルをデジタルファイルに変換する。技術は、限定されないが、以下を含む。
i.アイウェアモデルをプラスチック、紙または金属に直接三次元印刷すること。モデルは、コスト及び重量を節約するために、中空体に変換される。
ii.三次元モデルを平坦パターンに変換し、CNCレーザ、ウォータージェット、ビニールカッター、粉砕機などを用いて、平坦なシート(紙、段ボール、プラスチック、金属など)を切断、選択的に、折り重ねるまたは折り曲げること。
iii.三次元モデルを、前述の方法を使用して生産されたフレームフロント及びテンプルなどの複数のピースに変換すること。ピースは、留め具、接着剤または他の方法を使用して組み立てられる。
そして、d)コンピュータシステムが、限定されないが、氏名及び住所、選択的な支払情報、他の連絡先情報、配送の嗜好を含むユーザからの入力を受信し、e)コンピュータシステムが、カスタムアイウェアモデルのラピッドプロトタイプを作製し、小包に詰め、ユーザに発送するための命令を生成する。
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、b)コンピュータシステムが、(前述の任意の方法を使用して)ユーザの顔モデルにフィットするように構成可能な三次元アイウェアモデルをカスタマイズし、c)コンピュータシステムが、迅速な製造のために、三次元アイウェアモデルをデジタルファイルに変換する。技術は、限定されないが、以下を含む。
i.アイウェアモデルをプラスチック、紙または金属に直接三次元印刷すること。モデルは、コスト及び重量を節約するために、中空体に変換される。
ii.三次元モデルを平坦パターンに変換し、CNCレーザ、ウォータージェット、ビニールカッター、粉砕機などを用いて、平坦なシート(紙、段ボール、プラスチック、金属など)を切断、選択的に、折り重ねるまたは折り曲げること。
iii.三次元モデルを、前述の方法を使用して生産されたフレームフロント及びテンプルなどの複数のピースに変換すること。ピースは、留め具、接着剤または他の方法を使用して組み立てられる。
そして、d)コンピュータシステムが、ユーザのためのファイルを生成し、限定されないが、電子メール、ネットワークサーバからのダウンロードへのリンク、デジタルメッセージの添付ファイルなどを含む、デジタルファイルを取得するための手段をユーザに提供し、e)コンピュータシステムが、ファイルを用いてラピッドプロトタイプを作製するための、プリンタまたは三次元プリンタを使用するための命令、組み立てるための命令、プリントまたは作製するためのサービスにファイルを送信するための命令などのユーザ向けの命令を生成する。
アイウェアの実物大1:1画像をレンダリングする実施形態
ユーザは、画像またはモデルにおけるアイウェアのプレビューレンダリングに加えて、アイウェアの真のサイズを理解することを所望することがある。例えば、ユーザは、そのサイズと所有している既存のアイウェアとを比較することができる。
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)画像データからユーザのスケーリングされた顔モデルを取得し、b)コンピュータシステムが、(前述の任意の方法を使用して)ユーザの顔モデルにフィットするように構成可能な三次元アイウェアモデルをカスタマイズし、c)コンピュータシステムが、解像度、画素サイズ、ディスプレイの全体寸法などのコンピュータシステムのディスプレイについての情報を取得する。ここで、コンピュータシステムは、それ自体、ウェブブラウザ、ディスプレイまたはコンピュータシステムモデルについて情報を提供するユーザからこの情報を取得する。そして、d)コンピュータシステムが、(例えば、スクリーンの長さ及び幅を画素の数で割ることによって)ディスプレイの画素サイズを計算し、e)コンピュータシステムが、アイウェアモデルの画素サイズ及び寸法を使用することによって、1:1の実際のスケールを持つフロントビュー、サイドビュー、トップビューなどのさまざまな向きにおいてアイウェアモデルをレンダリングし、f)コンピュータシステムが、1:1画像をユーザに表示し、g)選択的に、コンピュータシステムが、ユーザが入力デバイスを通じて実際の1:1サイズにおいて回転及びパンするように制御できる、アイウェアモデルのリアルタイムインタラクティブ画像をレンダリングする。
物理学ベースのプレビュー
アイウェアのフィットに共通する問題は、鼻及びテンプルのサイズが不正確であり、その結果として、ユーザの鼻からアイウェアが滑り落ちることである。物理学ベースのプレビュー方法は、アイウェアが鼻に留まるか否かをシミュレートすることができる。以下は、物理学ベースの調節についての実施形態である。
この実施形態では、a)コンピュータシステムが、(前述の任意の方法を使用して)ユーザの画像データ及び顔モデルにおいてカスタムアイウェアモデルのプレビューを表示し、b)コンピュータシステムが、ユーザ入力(タッチスクリーン、スライダーバー、マウス制御、ジェスチャなど)を受信して、アイウェアモデルのフロントフレームをユーザの顔に対して垂直に上下に、かつ/またはフロントフレームをユーザの顔により近いもしくはそれから遠い方に移動し、c)コンピュータシステムが、顔モデルの表面と重なり合うノーズパッドまたは顔モデルの耳の上端と重なり合うテンプルのように、アイウェアがモデルを妨げないことを保証する制約を実行し、d)コンピュータシステムが、以下の物理的特性をアイウェアモデル及び顔モデルに適用する。
i.体積及び材料特性から推定されるアイウェアモデルの質量。
ii.アイウェア材料の摩擦係数。
iii.人間の皮膚の一般的特性として推定される皮膚の摩擦係数。
そして、e)コンピュータシステムが、アイウェアの質量に作用する重力と、顔モデルの鼻の表面に接触するアイウェアのノーズパッド及び顔モデルの耳に接触するアイウェアテンプルの対抗する摩擦力との間の力平衡を表す力学方程式系を解き、f)アイウェアが、それを支持する釣り合いの力によって位置する所の定常状態に達するまで、力学方程式が繰り返し解かれる。
レンズのビューレンダリング
別の実施形態では、コンピュータシステムは、累進多焦点のアイウェアを身に付けているときのユーザの視覚をシミュレートする。ユーザ用に構成されたレンズを通じて見ることができるようなビューがユーザに提示され、ユーザは、レンズを通じて見るであろう世界を見ることができる。この技術は、境目のないデジタル補正された(自由形状の)累進多焦点レンズのカスタム構成に最も応用される。写真は、画像の前に位置するレンズを用いて、画面上に(事前に選択されたもしくはユーザがアップロードしたものまたはコンピュータシステムの撮像デバイスからのライブ画像ストリームとして)表示することができる。情報が、レンズのさまざまな補正された領域(歪みのある領域、通路、最大拡大領域、遷移領域など)をユーザに対して特定するように、レンズにわたって重ね合わせられる。システムは、写真をレンズ後方に実際的に位置付けしたときの離れている程度を表示し、当業者に公知のレイトレーシングレンダリング技術を使用して、写真からの光がレンズを通過して視認者に届くときに写真を歪ませることができる。アイウェアのレンズ設計または形状もしくはサイズの変更は、このプレビューにおいてリアルタイムで更新することができる。ユーザは、歪んでいるレンズの領域(累進多焦点レンズにおける周辺領域)、及びさまざまなデジタルレンズ設計に既定の歪みの量をよりよく知ることができる。別の実施形態では、コンピュータシステムは、イメージングセンサを使用してシステムディスプレイを通じて見るライブプレビューを提供し、コンピュータシステムは、このビューをリアルタイムで、選択されたレンズ設計を考慮して歪ませることができる。このライブプレビューの現実性が増大したビューによって、ユーザは、所定のレンズパラメータ及びカスタムフレームパラメータにカスタマイズしたレンズを通じて見る生活を体験することができる。
ユーザ対話及び制御
図1Aの16及び図1Bの110、113、114を参照すると、コンピュータシステムは、ショッピング、選択、編集、修正、プレビュー、プレビューの制御、視覚化、購入、及び製品のカスタマイズに関連する他の活動を実行するための、コンピュータシステムと対話する手段をユーザに提供する。
図11は、実施例のコンピュータシステムインターフェース1101を示し、これはユーザ1102におけるアイウェア1106のプレビューを含み、コンピュータシステムのディスプレイに示される。コンピュータシステムインターフェースは、注文、視認、構成、プレビューの送信、共有、ヘルプの取得または他の機能を行うためのコントロール1103を含有する。アイウェアスタイルまたはベース設計は、コントロール1108を用いて選択可能であり、色及び仕上げはコントロール1105を用いて選択可能である。1104のディスプレイを通じてユーザに命令が提供される。様々な他の設計が、アイウェアのビュー、カスタマイズ及び注文について記述したのと同じニーズに適合できることが、当業者によって認識されるはずである。例えば、2つ、4つまたは9つのウィンドウなどの、アイウェアの複数のビューを使用することによって、種々のスタイルを同時にまたはユーザの異なるビューの視点に表示することができる。一実施形態において、コンピュータシステムは、異なる構成のカスタムアイウェアを身に付けているユーザの複数の事例を表示する。示す各アイウェアは、変更可能な一つまたは複数のオプションを有することができる。例えば、ディスプレイは、その各事例が、同じカスタム設計であるが、異なる色、スタイルまたはレンズ材料で表示された設計のアイウェアを身に付けているユーザの顔を示す9つの事例を示す。別の実施例では、その各事例が、同じスタイル及び色であるが、わずかに大きいもしくは小さいバリエーション、または顔におけるアイウェア配置をわずかに高くもしくは低く変更したなどの、(同じサイジングアルゴリズムまたは複数の競合アルゴリズムを使用して)わずかに異なるように顔に自動的にサイズ調整されたアイウェアを身に付けているユーザの複数の事例が表示される。別の実施例では、ディスプレイは、異なる角度(正面、等角、側面、上面)から視認した同じまたは異なるカスタムアイウェアを身に付けているユーザの複数の事例を示す。ユーザの一つの事例が操作されると、すべての事例が同時に更新される。例えば、ユーザが一つの事例のビューを変更すると、同じビューの変更がすべての事例に適用される。
例示の実施形態において、コンピュータシステムによって、ユーザは、顔におけるアイウェアモデルの位置を調節することができる。ユーザは、入力デバイスを用いてアイウェアを選択し、移動、ドラッグまたは入力デバイスを用いた他の制御アクションを実行することによって、それを特定の位置に調節する。例えば、ユーザは、テンプルにおいてアイウェアをつかんで、耳によりよくフィットするようにそれを上下にスライドする、またはノーズブリッジにおいてアイウェアをつかんで、鼻に位置するように配置もしくは調節する。さらに、ユーザは、アイウェアの自動配置における任意の誤差を補正することができる。
別の実施形態では、アイウェアモデルは、ユーザが位置を調節したときにリアルタイムまたはほぼリアルタイムで適応及び構成される。例えば、典型的には、単にプレビューのためにアイウェアを新しい位置に移動することがある。その結果、新しい位置では、鼻が過度に狭い、もしくはテンプルが過度に長い、またはいくつかの部分がフィットしないことがあるので、その位置にある間アイウェアがもはやフィットしないことがある。構成可能なアイウェアでは、ユーザがアイウェアを移動すると、アイウェアが新しい位置においてユーザの顔にフィットする形状に変化するようにモデルが適応する。ユーザがアイウェアを顔から引き離すと、数ある変化の中でも、ノーズパッドがわずかに長くなり、テンプルがわずかに長くなり、それとは対照的に、ノーズパッドが過度に短くなり、テンプルが過度に短くなることがあり、調節しないとユーザの顔からメガネが落下する。
例えば、図11では、インターフェース1101においてプレビューされたユーザ1102におけるアイウェア1106が、不適当な角度で位置付けられている。ユーザは、入力デバイスを用いてアイウェア1106を選択し、それを示す方向1107に移動することによって位置付けを調節する。ビュー1109に示すように、次に、プレビューは、ユーザの仕様ごとにユーザの顔に適切に位置付けられたアイウェア1110を示すように更新される。あるいは、コンピュータシステムがアイウェアをより適切に位置合わせするように、ユーザが、耳、眼、鼻及び他の特徴が位置する特定の点を手動で特定することができる。一般に、人の左耳と右耳とは高さが異なり、通常、これによりアイウェアは、曲がってまたは角度を付けて位置する。角度を調節し、左耳と右耳との高さの差異を考慮に入れたカスタムアイウェア設計を保証する能力は、正確かつ快適なフィットの取得においてユーザに多大な利益を与える。構成可能なアイウェアモデルによって、適切なフィットをプレビューに表示できることに加えて、実際に構成及び製造することができる。これによりユーザは、実際にフィットすることに加えて、プレビューにおいて見られる製品が得られ、これは先行技術に勝る明白な利点である。
アイウェアモデルがユーザの解剖学的モデルに自動的に配置された時点で、ユーザがプレビュー中に配置を嗜好のように調節できることが所望される。例えば、ユーザは、眼もしくは鼻に対してより高いもしくは低い、または顔から遠いもしくはそれにより近いメガネを身に付けることを好む場合がある。これらの調節は、アイウェアがユーザの嗜好に合わせた位置にフィットされたカスタムアイウェア設計についての情報を提供するのに有用となり得る。完全なカスタムアイウェアの多大な利益のうちの一つは、基礎的設計をユーザの配置の嗜好にフィットするように適応できることにある。典型的に、ユーザは、顔の種々の位置(眼により近いもしくはそれから遠い、または鼻においてより高いもしくは低い位置)におけるアイウェアをプレビューまたは身に付けることができるが、アイウェアが正しいサイズ及び形状でないと、その結果、不快感が生じ、適切な位置に留まらないまたは所望の位置において身に付けることができない。以下の実施形態は、カスタムアイウェアのカスタム配置が可能なシステム及び方法を記述する。
垂直位置を設定し、アイウェアモデル配置に適応させることによって、ユーザの顔におけるアイウェアモデルの垂直位置を調節する実施形態
この実施形態では、a)コンピュータシステムが、ユーザの画像データにおいてカスタムアイウェアモデルのプレビューを表示し、b)コンピュータシステムが、ユーザ入力(タッチスクリーン、スライダーバー、マウス制御、ジェスチャなど)を受信して、アイウェアモデルのフロントフレームをユーザの顔に対して垂直に上下に移動し、c)コンピュータシステムが、ユーザの顔においてアイウェアモデルを適切に調節するための制約系を解決する。
i.フロントフレームの垂直高さは、ユーザによって指定された垂直位置内にある必要がある。
ii.アイウェアのテンプルは、顔モデルのユーザの左右の耳と頭部とが交差する所の上端点に接触する必要がある。テンプルは、ユーザの顔の対称性または非対称性に応じて、異なる高さに調節される。
iii.アイウェアのノーズパッド領域は、顔モデルのユーザの鼻と接触はするが、重ならない必要がある。
iv.選択的に、制約系は、他の点、線、面または前述のような特徴であってもよい。
そして、d)ユーザ指定のアイウェアモデルの垂直位置を達成するようにアイウェア位置を調節することによって制約を満たすことができる場合には、システムが、新しいアイウェアモデル位置の更新されたプレビューを表示し、e)選択的に、制約を満たすことができない場合には、システムが、位置が許容されないまたはアイウェアが適切にフィットできない(例えば、鼻から滑り落ちる)ことをユーザに通知する。あるいは、リアルタイムで計算される場合には、ユーザが、垂直距離の設定した範囲内のみにおいて、アイウェアを調節することができる。
所望の位置を達成するように、位置を設定してアイウェアモデルに適応させることによって、ユーザの顔におけるアイウェアモデルの位置を調節する実施形態
この実施形態では、a)コンピュータシステムが、ユーザの画像データにおいてカスタムアイウェアモデルのプレビューを表示し、b)コンピュータシステムが、ユーザ入力(タッチスクリーン、スライダーバー、マウス制御、ジェスチャなど)を受信して、アイウェアモデルのフロントフレームをユーザの顔に対して垂直に上下に、かつ/またはフロントフレームをユーザの顔により近いもしくはそれから遠い方に移動し、c)コンピュータシステムが、ユーザの顔においてアイウェアモデルを適切に調節するための制約系を解決する。
i.フロントフレームの垂直高さ及び顔との接近性は、ユーザによって指定された位置内にある必要がある。
ii.アイウェアのテンプルは、顔モデルのユーザの左右の耳と頭部とが交差する所の上端点に接触する必要がある。テンプルは、ユーザの顔の対称性または非対称性に応じて、異なる高さに調節される。
iii.アイウェアのノーズパッド領域は、顔モデルのユーザの鼻と接触はするが、重ならない必要がある。
iv.選択的に、制約系は、他の点、線、面または前述のような特徴であってもよい。
そして、d)調節がアイウェアモデルと顔モデルにおけるユーザの鼻との間に隙間または障害物を生成する場合には、アイウェアモデルのノーズピースが、コンピュータシステムによって順応(厚さ、パッドの位置、幅などの調節)されてユーザの鼻と接触し、e)調節がテンプルとユーザの顔の耳との間に隙間または障害物を生成する場合には、テンプルが、コンピュータシステムによって順応(長さ、角度などの調節)され、f)調節がカスタムアイウェアモデル制約の解決可能なドメイン外に隙間もしくは障害物を生成する場合、またはアイウェアの大部分が障害物となる(例えば、フレーム全体が顔に移動している)場合には、コンピュータシステムが、許容できない位置には調節することができず、g)システムが、新しいアイウェアモデル位置の更新されたプレビューを表示する。
一連のオプションを事前に計算することによって、ユーザの顔におけるアイウェアモデルの位置を調節する実施形態
この実施形態では、a)コンピュータシステムが、ユーザの画像データにおけるアイウェアモデルの最適なフィットを計算し、b)コンピュータシステムが、最適位置からの設定された増分(すなわち、+4mm、+2mm、−2mm、−4mm)において、鼻に対して上下に移動するようなアイウェアの垂直位置の移動、または顔に対して離れるもしくは近づくような移動についての複数の調節を行い、c)コンピュータシステムが、すべての調節された構成におけるアイウェアモデルにユーザの画像を事前にレンダリングし、d)コンピュータシステムが、ユーザの画像データにおいてカスタムアイウェアモデルのプレビューを表示し、e)コンピュータシステムが、ユーザ入力(タッチスクリーン、スライダーバー、マウス制御、ジェスチャなど)を受信して、アイウェアモデルのフロントフレームを、調節された構成を事前計算するのに使用された増分だけ、ユーザの顔に対して垂直に上下に移動し、f)コンピュータシステムが、ユーザ選択に一致する調節された構成レンダリングを表示する。
面制約を用いてユーザの顔におけるアイウェアモデルの垂直位置を調節する実施形態
この実施形態では、a)コンピュータシステムが、ユーザの画像データにおけるアイウェアモデルの最適なフィットを計算し、b)コンピュータシステムが、アイウェアと顔モデルとの間の起こり得る運動を制限する制約を設定する。
i.アイウェアモデルは、ある特定の方向(例えば、顔から離れるもしくは近づく方向または垂直上下)のみに移動する。
ii.アイウェアモデルは、左右の耳とテンプルとの間の接触点を通じる線によって形成された軸に沿ってのみ回転する。
iii.アイウェアモデルは、テンプルと、顔モデルにおけるユーザの左右の耳と頭部とが交差する所の上端点との間の接触を維持する必要がある。
iv.アイウェアモデルの両方のノーズパッドは、顔モデルにおける鼻の表面の許容範囲内に接触するまたはその範囲内にある必要がある。
v.選択的に、制約系は、他の点、線、面または前述のような特徴であってもよい。
そして、c)コンピュータシステムが、ユーザの画像データにおいてカスタムアイウェアモデルのプレビューを表示し、d)コンピュータシステムが、ユーザ入力(タッチスクリーン、スライダーバー、マウス制御、ジェスチャなど)を受信して、アイウェアモデルを移動する。ここで、コンピュータシステムは、各ユーザ入力を用いて制約系を計算する。そして、e)アイウェアモデルが、所定の制約内でのみ移動し、f)コンピュータシステムが、ユーザによって移動されたアイウェアモデルの位置調節を表示する。
最新のアイウェアの画像を用いてユーザの顔におけるアイウェアモデルの垂直位置を調節する実施形態
ユーザは、好みの位置において顔に位置するアイウェアを既に所有していることがある。この実施形態は、アイウェアスタイル、形状及び設計が異なる場合でさえも、新しいカスタムアイウェアが同じ位置付けが取得されるよう設計される方法を記述する。
この実施形態では、a)撮像デバイスを備えて構成されたコンピュータシステムが、(前述の任意の方法を使用して)画像データを入手してユーザの顔のモデルを構成し、b)ユーザが、コンピュータシステムを使用して、好みの位置にあるアイウェアを身に付けているユーザの画像データを入手し、c)コンピュータシステムが、アイウェアがユーザの顔に接触している所の解剖学的位置(例えば、ユーザの鼻と相対的なノーズパッドの位置)、及び/または顔の特徴に対するアイウェアの基準位置を抽出し(例えば、アイウェアの先端は、眼の上方への特定の距離、またはアイウェアブリッジが位置付けられている所の鼻の丈から下方へのある距離に位置付けられている)、d)コンピュータシステムが、解剖学的位置及び/または基準位置を使用して、新しいカスタムアイウェアのフィット及び設計を最適化し、e)コンピュータシステムが、ユーザの顔においてアイウェアモデルを適切に調節するための制約系を解決する。
i.フロントフレームの垂直高さ、角度及び顔との接近性は、抽出したデータに最も近い位置にある必要がある。
ii.アイウェアのテンプルは、顔モデルのユーザの左右の耳と頭部とが交差する所の上端点に接触する必要がある。テンプルは、ユーザの顔の対称性または非対称性に応じて、異なる高さに調節される。
iii.アイウェアのノーズパッド領域は、顔モデルのユーザの鼻と接触はするが、重ならない必要がある。
iv.選択的に、制約系は、他の点、線、面または前述のような特徴であってもよい。
そして、f)コンピュータシステムが、ユーザの画像データにおいてカスタムアイウェアモデルのプレビューを表示する。
構成可能なモデルのユーザ対話及び制御
カスタムアイウェアシステムの多大な利益は、製品を嗜好に合わせて直接に修正及び更新する能力をユーザに与えることにある。例示の実施形態において、コンピュータシステムは、修正のためのテンプレートとして機能する、ベース設計からアイウェア形状を編集または調節するための制御をユーザに与える。ベース設計は、コンピュータシステムによってユーザ用に予め自動的にカスタマイズされてもよいし、任意のカスタマイゼーションが行われる前のオリジナルのベース設計であってもよい。
図12は、ユーザ1202においてプレビューされたアイウェア1203を調節するための実施例のコンピュータインターフェース1201を示す。ベース設計は、限定されないが、全体に縁がある、部分的に縁がある、縁なし、プラスチックまたは金属を含む様々なスタイルまたは材料からなる。制御は、限定されないが、ドラッグまたは調節することができるアイウェアにおける制御点、特定の特徴にリンクするスライダー、フレームの直接的な描画、並びにフレームの特徴を伸縮または押し引きするためのタッチ、ジェスチャ、マウス及び他の対話を含む。一実施形態において、この制御によって、ユーザは、限定されないが、ノーズパッドの幅、テンプルの全長及び高さ、並びにアイウェアの前面の幅及び高さを含むある特定の限られた特徴を変更することができる。例えば、図12のユーザ1202が面長の顔である場合には、ユーザは、外形サイズをより狭くするようにアイウェア1203を調節する。ユーザは、コンピュータシステムの入力デバイスを用いてアイウェア1203を選択し、図12の矢印に示すように、アイウェアの縁を顔の方に内側に移動する。結果として生じた修正されたアイウェア1206を、更新されたプレビュー1205において示す。購入前にアイウェアについてのそのような容易かつカスタマイズされた調節を為す、ユーザに与えられる能力は、最先端技術におけるアイウェア製品の購入に関して大きな変化を表す。フィードバックがほぼ瞬間的に出され、ユーザは、コンピュータシステムディスプレイにおいて、更新されたレンダリングされたプレビューを見ることができる。
一実施形態において、構成可能なモデルに関して事前に定義された範囲内にカスタマイゼーションを制限する制約が使用される。モデルのパラメトリック設計及び制約を使用することによって、カスタムフィット及びサイズ調整を達成するためのユーザにとってのプロセスの簡単さを維持しつつ、各アイウェアのベース設計を保つように特徴調節を制限することができる。いくつかの使用事例では、設計においてユーザに100%の制御を与えることに利点を有し得るが、ユーザが美観的に満足し、かつ製造可能な製品を容易に取得できる程度に調節を制限することには明白な利点がある。例えば、何も制約がないと、ユーザは、フィットもせず、見栄えも悪い、自己と重なり合うまたは極めて非対称的なもしくはぎざぎざがある魅力のない設計を図らずも作製することがある。組み込まれた制約に加えて、例えば、制御点、矢印などのコントロールは、調節可能な領域のみにおいて強調表示される、もしくはユーザがその領域内に入力デバイスを移動したときに強調表示され得る、またはアイウェアの変更可能な部分(複数可)を説明する命令があってもよい。
別の実施形態では、ユーザは、アイウェアの全体設計を依然として保ちつつ調節可能な箇所には少ししか制限を有さない。例えば、コンピュータシステムによって、ユーザは、アイウェアの任意の部分をつかんで調節し、アイウェアの任意の部分の長さ、高さ、幅及び厚さ並びに縁及びテンプルなどのさまざまな部材の曲率の調節を制御することができる。図13は、実施例のベースアイウェア設計1301を例証する。ユーザは、コンピュータシステムの入力デバイスで指示して、アイウェアにおける点1305を選択し、点線に沿って矢印1306の方向に点1307まで移動する。その結果、アイウェア1302は、編集された領域1308に修正される。アイウェアをカスタマイズするのに必須のステップの数を減らすのと同時に、対称性を維持するために、更新されたアイウェア1303に示すように、アイウェアの片側における変更が、アイウェアの他方の側にも等しく適用される。
編集を指示しないユーザ調節
別の実施形態では、コンピュータシステムが、調節に関するまたはそれを通じる案内に役立つ質問をユーザに尋ねることができる。例えば、コンピュータシステムは、「現在、顔にかけているアイウェアが過度に幅広いまたは狭い?」、もしくは「現在、アイウェアが過度に厚いまたは薄い?」、または「より大きいもしくは小さいスタイルを好む?」という質問をすることができる。ユーザは、選択肢を選択する、またはインターフェースを通じてプロンプトに回答し、その後、それに応答したアイウェアに対する調節を観察することができる。本明細書に記述する機械学習法と合わせると、システムは、ユーザからのライブのフィードバックに基づいた微妙な適応を可能にしつつ、パーソナライズされたかつカスタマイズされた推薦を提供する強力な手段に相当することができる。
別の実施形態では、コンピュータシステムは、限定されないがノーズパッド及びテンプルを含む、調節するための特定の主要な領域をユーザに警告する。鼻及び両耳の上端は、十分にフィットすることが必要な三つの主要な接触点であり、左右の耳は、高さが異なる場合がある。コンピュータシステムは、これらの特定の領域の点検及び必要に応じて調節をユーザに依頼することができる。例えば、ユーザは、耳全体にわたって十分にフィットするまでテンプルの長さを調節する、またはアイウェアのフロントフレームが理想的かつ美観的に鼻の高さに位置するように、左右で異なる高さの耳に対応させて別々にテンプル角度を調節することができる。
別の実施形態では、ユーザは、画像データのプレビューにおいて新しいアイウェア設計をリアルタイムで調節、修正、再配置または選択することができる。前述のように、リアルタイムでプレビューが提供され、アイウェア設計をリアルタイムで修正するための制御がユーザに与えられる。
不適切なフィット
図1Bのステップ111を再び参照すると、可能性として不適切なもしくは不快感のあるフィットが存在するときを、または設計が注文に合わずに創作されたか否かを検出するコンピュータシステムが記述されている。これらの望ましくない構成は、ユーザの対話及びモデルのカスタマイゼーションに起因することがあり、それらの変更がモデルに与える影響に気付かない場合がある。例えば、テンプルがユーザの顔に順応するように極端に曲がることが要求される場合には、ユーザの頭部の側面に印加される圧力を原因として不快感が生じる。ユーザの頭部にかかる圧力は、ヒンジ設計の特性、ヒンジ及び/またはテンプルが変形する程度、並びにヒンジから、テンプルがユーザの頭部に接触する所までの距離に基づいて計算される。別の実施例では、ノーズパッドが鼻において過度にきついまたは過度に緩い、及びアイウェアが滑ることがある。コンピュータシステムによって検出できる明白な障害物がある場合がある。解剖学的モデル及び構成可能なアイウェアモデルの解析によって、妨げとなる面を検出することができる。ノーズパッドにかかる圧力は、顔並びにアイウェア幾何学形状及びアイウェアの材料特性に基づいて計算される。圧力が過度に高いと決定された場合には、設計に警告または自動調節が与えられる。さらに、レンズが非最適な角度で位置付けられ、これによりユーザが不十分な視覚的体験または準最適な視力を有する場合がある。コンピュータシステムは、ユーザにおける正確なフィットを保証するための、数ある中でも、三次元アイウェアモデルと定量的な解剖学的モデルとの間の以下の判断基準を解析する。すなわち、ノーズパッドと鼻との間の障害物または隙間、耳の上端とテンプルとの間の障害物または隙間、耳にフィットするのに必要な(内側または外側への)テンプルの角度、レンズの角度、並びに鼻におけるアイウェアの位置及びレンズと相対的な眼の位置(例えば、眼がレンズ内の十分に中心に位置しているか?)を解析する。
コンピュータシステムは、寸法情報と、材料特性、力及び変形計算、並びに応力または張力の数値シミュレーションとを結びつける。解析された各メトリクスには仕様が存在し得、判断基準がそれを満たさない場合には、ユーザは警告される。あるいは、コンピュータシステムは、代替物または代替物のセットを自動的に提案する。
カスタム仕上げ
例示の実施形態において、コンピュータシステムは、アイウェアの色、仕上げ、テクスチャまたは材料を変更するための制御をユーザに与える。これらのオプションのユーザの制御は、コンピュータシステムからの自動的な推薦がなくても起こすことができ、またはコンピュータシステムが初期のカスタム設計を作製した後にユーザに制御を与えることもできる。コンピュータシステムは、アイウェアにおいてプレビューまたは適用される複数の色を表示する。ユーザは、アイウェアのさまざまな部分について異なる色を選択する。色の選択は、製造業者によって定められた色及び仕上げのセットに限定してもよいし、または何百、何千もしくはより多くの色及び仕上げが存在する。ユーザは、また、材料の仕上げについてのオプションをプレビューしても選択する。選択及びレンダリングされる仕上げの実施例は、研磨、ブラシ、サテン、クリアコーティング、光沢、つや消し、エンボス加工、槌目、グレインなどを含む。ユーザの変更及びアイウェアの編集は、その更新がプレビュービューに適用される編集インターフェースにおいて起こる、またはその変更及び編集は、リアルタイムで適用及びプレビューされる。
別の実施形態では、ユーザは、例えば、衣類、マニキュア液、絵画などのオブジェクトの写真をとる。ユーザは、デジタル画像として写真を提供する、またはコンピュータシステムを使用して写真をとる。ユーザは、色またはパターンに一致させるための、コンピュータシステムにおける写真上の点または領域を選択する。写真は、コンピュータシステムによって解析され、その画像からカスタムカラーまたはパターンが特定される。コンピュータシステムは、高精度のカラーマッチング及び再生を得るために用いられるキャリブレーション標準を必要とすることがある。キャリブレーション標準は、ユーザが画像に含ませることが必要な様々なキャリブレーションされた色及び影を持つ印刷カードである。製造業者は、このカードをユーザに支給する、またはユーザはそれを印刷することができる。コンピュータディスプレイにも、所望される色を持つオブジェクトに隣接してそれを提示することができる。ディスプレイは、ミラーにおいてまたは第二の画像捕捉デバイス を使用してオブジェクトと共に捕捉することができる色補正パターンを表示することができる。あるいは、ユーザは、既知のオブジェクトを写真に含ませることを促される。既知のオブジェクトは、コンピュータシステムにおいてキャリブレーション及び保存されたアイテムである。実施例は、食品ボックスもしくは雑誌、ソーダ缶、通貨またはクレジットカードにおけるロゴなどの、高度の色精度及び一貫性を持ち専門的に印刷されたものとして公知のどこにでもあるロゴを含むことができる。あるいは、コンピュータシステムは、化粧品、塗料試料、自動車または織物などの他の製造物から既知の色のデータベースを有することができる。これによりユーザは、データベースからお気に入りのシャツ、車またはマニキュア液の色を選択することができ、さらにまた、製造業者は、意図された色を適切に再生及びそれと一致するのに必要な色情報を有する。
別の実施形態では、アイウェアは、ユーザからのパターン、画像またはテキストを用いてカスタマイズされる。パターン、画像またはテキストは、パターンとして本明細書に言及される。パターンは、印刷、彫刻、エッチング、塗装または別な様にアイウェアの任意の表面に適用される。パターンは、前述のカスタムカラーの記述と同様の画像からユーザによって提供された、またはユーザによって入力された、コンピュータシステムにおける使用可能なオプションのライブラリから生成される。例えば、ユーザは、テンプルの内側に氏名を印刷することを所望することがある。または、テンプルの側面におけるライン設計のエッチング、またはアイウェアにおけるリーフのテクスチャードパターンの印刷を所望することがある。パターンは、三次元アイウェアモデルにおいてレンダリングされ、ユーザにプレビューされ、その後、製造されたアイウェアに適切に再生される。
別の実施形態では、アイウェアは、限定されないが、ロゴ、お守り、宝石などを含むアクセサリを使ってカスタマイズされる。例えば、ベース設計は、ヒンジ付近の左右のテンプルにアクセサリを配置するオプションを有することができる。デフォルトアクセサリが存在し、ユーザは、その変更、再配置または除去を選ぶことができる。ユーザは、様々な形状、色、材料などを含む複数のオプションから選択することができる。アクセサリは、コンピュータシステムによってレンダリングされ、三次元アイウェアモデルがプレビューのためにユーザに表示される。
嗜好の記録
例示の実施形態において、ユーザが、アイウェアを選択し、そのサイズ、色及び他の特徴を調節すると、これらの嗜好が、非一時的コンピュータ可読媒体に記録及び保存される。ユーザのモデル、画像データ及び他の情報も、コンピュータシステムに保存される。ユーザが、異なる材料または異なるスタイルなどの代わりのアイウェア設計を選択すると、アイウェアが、ユーザの過去の対話及び嗜好に基づいてそのユーザの嗜好に調節され、それ故に、繰り返しの作業も減らしつつ、よりカスタマイズされたアイウェアを通じてのブラウジング体験が得られる。例えば、所望のフィットの嗜好が定められれば、任意の設計またはスタイルを、嗜好に従いユーザにフィットするように更新することができる。顔の幅よりもわずかに小さいアイウェア、及び眼から遠い位置にアイウェアを身に付けることを好む場合には、その結果、すべてのスタイルを嗜好に調節することができる。別の実施形態では、特定のユーザについての嗜好は、そのユーザがコンピュータシステムを使用するときに精密化される。嗜好の訓練データベースを作製する前述のような方法では、コンピュータシステムは、ユーザがアイウェアを購入及びプレビューするときに、そのユーザの嗜好を記録及び追跡記録する。この情報は、嗜好を精密化し、ユーザが入力したまたはユーザにより提供された画像データから事前に解析された情報に追加するのに使用される。ユーザの保存された嗜好も、将来の予測及び前述のような新しいユーザのカスタマイゼーションのためのより大型のデータベースを作製するのに使用することができる。
ユーザ及び/またはコンピュータシステムがアイウェアを調節すると、関連のある場合に、変更の規模及び方向がコンピュータシステムに記録される。ユーザによってリクエストされた変更に一致する量だけ適当なモデルのパラメータを調節することによって、構成可能なアイウェアモデルが更新される。モデルにプログラムされた任意の制約がチェックされ、限度を超えた場合に、コンピュータシステムはユーザに警告する。あるいは、変更が限度まで適用され、限度を超えたあらゆる過剰な変更は、(限度を超えたことのユーザへの警告の有無にかかわらず)無視または否定される。例えば、ユーザがアイウェアの幅を140mmから190mmに変更するが、設計の最高幅の限度が170mmである場合には、その結果、アイウェアは、最高幅である170mmのみまで調節され、ユーザには、この限度に到達したことが通知される。更新されたモデルは、前述のようにコンピュータシステムによってレンダリング及び表示され、これによりユーザは、ユーザの画像データにおける新しい三次元アイウェアモデルをプレビューすることができる。別の実施形態では、アイウェアの変更された領域が、一定期間またはユーザが変更を受け入れるまで、ユーザに強調表示または識別される。リクエストした任意の変更を取り消す(または、やり直す)ためのプロビジョンがユーザに与えられる。
構成の能率
ユーザまたはコンピュータシステムが種々のユーザにフィットするような構成可能なモデルの変更をリクエストするときに、能率性のために、事前に構成された複数のカスタム設計を有することが所望され得る。例えば、何百、何千または何百万の設計の構成を事前に構成し、コンピュータシステムまたはネットワークアクセス可能なコンピュータシステムに保存することができる。これらの事前に段階分けされた構成が最も一般的にアクセスされる設計構成に及ぶ場合には、その結果、それらを迅速にユーザにアクセスさせる及び表示することができる。あるいは、形状マッチングアルゴリズム、ルックアップテーブルまたは他の技術が、ユーザの嗜好に最も近いモデルを見つけ出すのに使用される。次に、その後の小さな調整が事前に段階分けされた構成に為され、構成可能なモデルを正確なユーザの嗜好に合わせて微調整する。
製造のための前処理
図1Aの17及び図1Bの115及び116に例証するように、コンピュータシステムは、ユーザの嗜好及び設計を示し、その次に、価格及び発送についての見積もりを計算するためのデータを保存する。ユーザが注文を所望する最終のカスタムアイウェアを決定した後に、コンピュータシステムは、オリジナルのプレビュー画像が能率のためにより低品質に作製された場合に、より写真のようにリアルにレンダリングされた、かつより高い品質及び解像度の最終の表示を生成することができる。コンピュータシステムは、カスタムアイウェアについての注文を完了する前に、価格、予定発送日及び他の情報をユーザに提供する。表示は、ユーザによって選択されたさまざまなパラメータ及び設定値、またはアイウェアの最終三次元モデルで構成することができる。コンピュータシステムは、アイウェア表示並びに嗜好、寸法、構成データ及び他の情報を、ネットワーク接続または情報転送の他の手段を通じて、製造業者がアクセス可能な別のコンピュータシステムに転送する。アイウェア表示に加えて、コンピュータシステムは、注文の完了に必要なユーザの個人情報、支払明細書、発送先住所、画像データ及び任意の他の情報も受信することができる。
見積もりの発送日及び価格を提供するために、コンピュータシステムは、限定されないが、必要なすべての原材料の在庫、現在の生産能力、生産中の数、将来のスケジュール、予定されている注文、及び材料または生産能力についてのリードタイムなどを含む多くのパラメータをアクティブに追跡する。コンピュータシステムは、スケジューリング及び発送についての見積もりを実行し、予定配達日をユーザに提供する、またはユーザについての保証された配達日を達成するのに必要なアクションを製造業者に提供する。
カスタム製品の製造
図1Bの114は、アイウェアを購入するためのユーザの決定を例証している。図1Aの18並びに図1Bの116及び117は、アイウェア及びレンズを製造するための情報及びファイルの解析及び作成を記述している。最終のアイウェア表示、嗜好、寸法、構成データは、製造業者のコンピュータシステムに入力されると、解析されて、製造指図書並びに製造CAD、CAM、CNCまたは他の製造及びモデリングファイルのセットの両方が自動的に作製される。ユーザの注文にリンクされた連続的な識別子が生成され、生産プロセスを進行するときにアイウェアを追跡する。コンピュータシステムは、製造番号を原材料、仕様または品質チェックリストに関連付ける。コンピュータシステムは、特定のアイウェアモデルに必要な製造法に応じた製造ファイルも作成する。これは、限定されないが、ラピッドプロトタイピングまたは積層造形加工法のためのモデルファイル、機械加工(例えば、gコード)、ルーティング、フライス削りまたは他の除去加工のためのツールパスCNCコードに変換されたモデルファイル、フォトエッチングのための平坦パターンに変換されたモデルファイル、レーザ切断のためのツールパスまたはロボット制御コードを用いて平坦パターンに変換されたモデルファイル、レーザマーキングまたはエッチング、水ジェット切断、スタンピング(及び、スタンプツールの生産)、パンチング(及び、パンチツールの生産)、または他の二次元切断法、射出成形、鋳造または他のツール生産のためのモールドを生成するための、ラピッドプロトタイピングまたは逆幾何学の積層造形加工法に変換されたモデルファイル、部分処理、研磨、組立、ドリリング、切断のためのロボット制御命令に変換されたモデルファイルなどを含む。
コンピュータシステムは、また、レンズ面に変換された処方情報、レンズ材料及びユーザ情報、レンズレーザマーキング、レンズ製造のためのレンズエッジ機械加工命令、前述の方法のいずれかにおける既存の製造ファイルを更新するための、ユーザによって入力されたパラメータ、そして塗装、陽極酸化、蒸着、めっき、スタンプ、印刷、エッチング、エンボス加工またはアイウェアの外観を変更するのに使用される別の処理をされた色及びパターン、並びに一般に、製造機器に応じてファイルまたは命令に自動的に変換される、ユーザの注文から特定された定量的情報に応じて製造ファイルも作成する。
図15は、金属薄板またはプラスチックからレーザ切断または機械加工して用意するための、前面1502、左テンプル1503及び右テンプル1504の平坦パターンに自動的に変換された三次元アイウェア設計1501の実施例を示す。これらの部品は、他の注文による他の部品と共に、使用する材料またはプロセス所要時間の最小限化などの製造におけるメトリクスを最適化するように自動的に配置される。平坦パターンは、事前に切断された部品を屈曲または形成するための製造機器によって使用される、屈曲位置1505に関する幾何学的情報も含有する。パターンは、製造機器に寸法及び命令を提供するのに必要なデジタルファイルまたは他の媒体として保存される。その後のオペレーションは、自動化機器において実行される屈曲、折り重ねまたは他の成形オペレーションを含むことができる。製造システムは、連続的な識別子を使用して、部品に実行するオペレーションを決定するまたは各ステップにおける部品に関する仕様を取得することができる。屈曲パターンまたは他のコンピュータ可読命令が、機器に提供される。
図16は、ユーザに応じてカスタマイズされた三次元パラメトリックアイウェアモデル1601、及び生産された結果生じた製造された部品1602の実施例を示す。これらなどの部品は、前述の製造技術または当業者に公知の他の方法のいずれかを使用して生成される。
製造に関しては、図1Bのステップ117は、製造機器及び要員を制御するコンピュータシステムを記述している。コンピュータシステムは、人間によって援助されたまたは援助されていない複数の製造機器を順序付けることができる。実例となる実施例として、コンピュータシステムは、金属製のアイウェアフレームを作製するためのシーケンスを実行するための以下の命令セットを提供することができる。
必須の材料を引き込み、それをレーザ切断機械またはCNCマシンに供給する、ロボット向けの命令。それと並行して、レンズを表面仕上げ、研磨、マーク、コーティング及びエッジングするための、レンズ製造機器に送信される命令。ロゴまたは他の装飾的なマーキングを持つようにアイウェア及びマークの形状を切断するための、レーザ切断機械向けの命令及びツールパス。レーザ切断した部品を屈曲及びスタンピングマシンに転送するための、ロボット向けの命令。アイウェアを所望の最終形状に成型するための、屈曲及びスタンピングマシン向けの命令。部品を研磨マシンに転送するための、ロボット向けの命令。部品を仕上げるための、研磨マシン向けの命令。アイウェアを塗装、コーティング、陽極酸化、印刷または着色するための命令。完成部品をソートし、アイウェアとレンズとを関連付けるための、ロボット向けの命令。アイウェア及びレンズ、ノーズパッド並びにイヤーパッドを組み立て、最終検査を実行するための、人間オペレータ向けの命令。発送のための最終製品のパッケージ化及びラベル付けのための、ロボット向けの命令。
前述の命令は、一つのカスタム製品のための一つのシーケンスである。複数のカスタム製品の製造を成功させるために、製造プロセスを制御するコンピュータシステムは、生産されるカスタム部品ごとの、プロセスの各段階におけるコマンドのシーケンスを生成する。図32は、カスタムかつ優位な製品のためのプロセスフローを示すブロック図を例証する。3201において開始し、経時的に、3202においてカスタムアイウェア1、3203においてカスタムアイウェア2、及び3204においてカスタムアイウェア3に関する注文を受信する。注文の受信後、各アイウェアは、3205において製造番号を受信する。コンピュータシステムは、利用可能なマシン、未出荷注文、位置ずれ及び他のデータに基づいて、レーザ切断のために部品をバッチ3206及び3207にグループ化する。コンピュータシステムは、バッチごとに、部品を切断するための命令をレーザカッタに与える。このため、カスタム製品がレーザカッタから次のステップに移動している間に、レーザカッタは、次のバッチのカスタム製品についての命令を受信する。レーザ切断後、コンピュータシステムは、部品ごとの命令のシーケンスを、順々に曲げ機械3208に提供する。各部品が曲げ機械において仕上げされるときに、コンピュータシステムは、命令をスタンピングマシン3209に提供する。
一実施形態において、コンピュータシステムは、品質管理または検査向けの命令を生成する。コンピュータシステムは、人間検査官が使用するテンプレート、寸法または検査に関する成否基準を作製する。各部品がユニークかつ優位であるので、ユニークな検査基準の作製が重要である。コンピュータシステムは、各々の製品についての寸法、特性または判断基準からなる自動検査にも命令を提供することができる。さらに、コンピュータシステムは、ユーザの骨格のデータまたはモデルを、検査または組立付属品を生産するための製造機器に提供することができる。例えば、最終製品モデルがユーザに適切にフィットすることを保証するために、ユーザの耳及び鼻の三次元の印刷モデルを創作することができる。
下請業者または複数の製造所を先行するステップのいずれかにおいて使用することができ、一実施形態におけるコンピュータシステムは、注文情報及び/または製造命令もしくは概略図を自動的に処理する。最後に、図1のステップ118において、カスタムアイウェアをユーザに発送する。
代替的なショッピングシステム
以下の実施形態は、前の記述を補足または向上するための代替的なまたは追加のシステム及び方法を記述する。
店内システム
カスタム製品及びアイウェアを創作するように記述した方法及びシステムは、小売店、検眼士の診療室または他の物理的な位置において有するのに有用である。システム及び方法は、顧客、眼鏡技師、検眼士、販売員、もしくは診療室もしくは小売店の所在地においてベストなフレーム及びレンズの選択及び購入においてユーザを支援する他の専門家、またはコンピュータネットワークを通した遠隔支援を通じて、部分的にまたは全体的に制御される。図26は、店舗内においてシステムを用いてカスタムアイウェアをショッピングする例示の方法を例証する。図27は、例示のコンピュータシステムを例証する。ストアコンピュータシステム2730は、店内のまたは遠隔の専門家2710による選択的な支援を受けて顧客2700によって使用される。コンピュータシステム2730は、画像捕捉デバイス 2720及びディスプレイ2740を備えて構成される。コンピュータシステムは、選択的に、カスタムアイウェア材料に一致させるユーザのオブジェクトのカスタムカラーを測定するようにキャリブレーションされた撮像デバイスを有する。ストアコンピュータシステムは、製造業者のシステム2780及び2790、及び選択的に、ユーザ情報、情報サービス、処方などを含有し得る、コンピュータのコンピュータシステム2770及び専門家のストアコンピュータシステム2760へのデータ転送コネクション2750を備えて構成される。
プロセスが専門家の店舗または診療室において開始される場合には、ユーザのパーソナルコンピュータシステムは、専門家による立合い後にユーザの画像データ及びアイウェアの在庫へのアクセスを有し、このため、ユーザは、その後にこの情報にアクセスすることができる。例えば、ユーザは、店舗において完成された初期モデル及びカスタマイゼーション設定を取得した後に、家でショッピングを継続することができる。コンピュータシステムは、また、処方データの手入力が必要ないように、処方情報を測定して測定値をコンピュータシステムに自動的に組み入れる検眼装置と連携するようにも構成することができる。店内システムのさらなる利点は、より制御可能でありかつより高品質の画像捕捉及び表示システムを生成する能力である。画像データを捕捉し、カスタムプレビューを表示する目的専用に設計されたキオスクまたはコンピュータシステムを用いれば、キャリブレーションを利用してマルチカメラシステムまたは奥行き検出カメラなどの専用ハードウェア部品をより進歩的に使用することができる。
図27は、例示の方法を例証する。この実施形態では2701において、カメラまたは撮像デバイスを備えて構成されたコンピュータシステムが、ユーザの画像データを入手するのに使用される。コンピュータシステムは、選択的に、さらに、参照ターゲット、多重もしくはキャリブレーションされた撮像デバイス、奥行きデバイス、アイウェアなどのウェアラブル参照ターゲット、またはユーザのスケールがコンピュータシステムによって測定可能であることを保証するためのキャリブレーションされた距離及び位置決めデバイスを備えて構成することができる。2702において、店舗または診療室の専門家は、コンピュータシステムの使用及び画像データの入手において顧客を支援することができる。2703において、コンピュータシステムは、画像データに基づいてユーザの顔の解剖学的モデルを再構成する。2704及び2705において、コンピュータシステムは、選択的に、店舗の専門家、医師または他の人物が、例えば、身体的測定値、処方情報などの追加の解剖学的データを入力できる入力デバイスを有する。コンピュータシステムは、サイズ及びフィット2707並びにスタイル2708についてユーザに合わせてカスタムアイウェアモデルを自動的に構成または調節する。2709において、コンピュータシステムは、カスタム製品を創作し、モデル座標及びカメラ位置が顔モデルをユーザの顔の画像の姿勢、位置及びスケールに位置合わせするようにして、オリジナルのユーザ画像と共に解剖学的モデルを登録する。2710において、コンピュータシステムは、アイウェアモデルをユーザモデル及び画像に位置合わせし、ユーザの画像においてアイウェアモデルのプレビューをレンダリングする。2711において、コンピュータシステムは、選択的に、ユーザのための物理プロトタイプまたはプレビューを創作するためのラピッドプロトタイピングシステム(三次元プリンタ、CNCカッタなど)を有するまたはそれに接続する。2712及び2713において、コンピュータシステムは、ユーザまたは店舗の専門家がカスタムアイウェアモデルを調節、更新または構成することができる入力デバイスを有し、そしてさらに、ユーザまたは店舗の専門家がさまざまなアイウェアモデルを選択して試すことができる入力デバイスを有する。2714において、コンピュータシステム及び選択的に専門家は、アイウェアが顧客に十分にフィットしていない場合には、他のものを推薦することができる。2715において、コンピュータシステムは、価格及び製造時間についてのデータを計算する。2717において、ユーザまたは店舗の専門家は、さまざまなアイウェアモデルを選択して試す。2716において、顧客は、注文するためのカスタムアイウェアを選択することができる。2718において、コンピュータシステムは、最終アイウェアモデル及びユーザ情報を、ネットワーク接続または他の形態の電子通信を通じて製造業者のコンピュータシステムに転送する。これにより製造業者は、カスタムアイウェアを生産することができる。2719及び2720において、製造業者のコンピュータシステム及び製造システムは、アイウェアモデル及び情報を前処理し、カスタムアイウェアを生産する。2721において、カスタムアイウェアを完成して顧客に発送する、または顧客が買えるように店舗の所定の位置に用意する。
データ及び設計へのアクセスの共有
別の実施形態では、ユーザは、そのユーザの画像データ及び解剖学的モデルへのアクセスを、仲間、家族、アイケアの専門家またはファッションコンサルタントなどの別の団体に提供する。ユーザは、コンピュータシステムに、画像データ、並びに選択的に、嗜好、アイウェアモデル及びネットワークを通じた設定またはデータ転送技術などの他の情報を、別のコンピュータシステムに転送させることができる。この転送は、ハイパーリンク、認証ログインまたは例えば、電子メール、デジタルメッセージ、ソーシャルネットワーキング、クラウドストレージなどの様々な通信形態のうちの一つを通じて別の人物に直接に送信される他のメカニズムによって行われる。次に、他の団体が、オリジナルのユーザの顔モデルまたは画像データにおいてアイウェアを調節、カスタマイズ及びプレビューする。次に、他の団体は、お気に入り及びアイウェア設計をセーブし、その後、画像、設計、ビュー、カスタマイゼーション、提案、通知などをオリジナルのユーザに返送する。次に、オリジナルのユーザは、コンピュータシステムを使用して、他の団体によってそのユーザのために設計及びフィットされたアイウェアをプレビューする。この実施形態は、ユーザがそのユーザのアイウェアの設計を他の人々にクラウドソースすることによって、可能性として、受信するプレビューについての設計の多様性及び品質を拡大できるという大きな利点を有する。この場合には、コンピュータ駆動アルゴリズム及び人間による設計の知力の両方を有する。
例示の実施形態において、ユーザは、アイウェアのプレビューを含む、そのユーザの複数の画像データまたはインタラクティブモデルを送信する。画像データまたはモデルは、ユーザのコンピュータシステムから、例えば、電子メール、デジタルメッセージ、ソーシャルネットワーキング、クラウドストレージなどの様々な通信形態のうちの一つを通じて、他の情報伝送システムのコンピュータネットワークを経由して別のコンピュータシステムに送信される。次に、コンピュータシステムによって、権限を与えられた人物または人々が、応答、格付け、メッセージ及び他の形態のフィードバックをオリジナルのユーザに提供することができる。
別の実施形態では、システムは、アイウェアの独自のラインを創作するために、アイウェア設計者またはファッションブランドによって使用される。従来の製造法では部品を大口で注文する必要があり、高忠実度のプロトタイプは高価であり、かつ任意のセールの前にはスタイル、サイズ及び色の多くの組み合わせを注文して在庫として保持する必要があるので、アイウェアの新しいラインの作製には多大な初期費用が要る。本明細書に記述するシステムは、設計者が使用して、色、形状、サイズ及び他の特徴を変えた設計のセットを創作することができる。ユーザの画像データ、解剖学的モデル及び嗜好で満たされたデータベースは、人々の多数のサンプルにわたってアイウェアを検査及びプレビューするための類希な手段を提供する。設計のサンプルが提供され、ユーザが設計を視認してその注文を所望するときには、設計者またはファッションブランドが決して在庫を運ぶ必要のないオンデマンド製造及び配送方法を使用することができる。
別の実施形態では、アイケアの専門家が、身体的測定値を得て、コンピュータシステムを使用して、ユーザに関する解剖学的データを、構成可能なアイウェアモデルを用いてカスタム設計を生成する他のシステムに入力する場合には、そのコンピュータシステムは、画像解析部がなくても使用することができる。次に、専門家またはユーザは、嗜好及び微調整を提供し、前述のように製造されたアイウェアを有することができる。
追加の製品
別の実施形態では、本明細書に記述するすべての方法及び技術は、カスタムアイウェアケースのカスタマイゼーション、レンダリング、表示及び製造にも応用される。ユーザは、複数の材料、色、設計、形状及び特徴から選択し、ディスプレイにおいてケースの正確なレンダリングを見ることができる。さらに、ケースは、アイウェアが飛び回る自由空間がケース内に過剰に存在しないように、設計されたカスタムアイウェアにフィットするようなサイズに自動的に形成することができる。すなわち、ケースのサイズを最小化し、輸送中にアイウェアを保護するケースの能力を増大するように、アイウェアにカスタムフィットするようにケースを自動的に設計することができる。ケースの色、スタイル及び材料、並びに製造法は、カスタムアイウェアを作製するのに使用されたものと一致させることもできる。ユーザの氏名などのカスタムテキストが、ケース上にまたはその内側に彫刻またはマークされる。本明細書に記述するのと同じアイウェア製造技術を、カスタムケースを製造するのに使用することもできる。
当業者は、本明細書に記述するシステム及び方法を他のカスタム製品のカスタマイゼーション、レンダリング、ディスプレイ及び製造にも使用できることを認識する。記述した技術が、カスタマイゼーションのために作製される顧客画像データ、解剖学的モデル及び製品モデルの使用に応用されるので、数多くの他の製品が同様の方法で設計される。例えば、カスタム宝石類(例えば、ブレスレット、ネックレス、イヤリング、リング、鼻リング、鼻ピアス、舌リング、舌ピアスなど)、カスタム腕時計(腕時計の文字盤、バンドなど)、カスタムカフリンク、カスタム蝶ネクタイ及び通常のネクタイ、カスタムネクタイピン、カスタム帽子、カスタムブラジャー、インサート(パッド)及び他の下着、カスタム水着、カスタム衣類(ジャケット、パンツ、シャツ、ドレスなど)、(母の骨格の走査及び再生に基づく)カスタム哺乳瓶の先端及びおしゃぶり、カスタム補綴物、カスタムヘルメット(オートバイ、自転車、スキー、スノーボード、カーレース、F1など)、カスタム耳栓(アクティブまたはパッシブ聴覚保護)、カスタムオーディオイヤホン(ヘッドフォン)チップ(オーバーイヤー及びインイヤー)、カスタムブルトゥースヘッドセットチップ(オーバーイヤーまたはインイヤー)、カスタム安全ゴーグルまたはマスク、並びにカスタムヘッドマウントディスプレイが挙げられる。
別の製品の実施例の実施形態として、以下のシステム及び方法は、図33を参照してカスタムヘルメット製品を記述する。
一実施形態に従う、カスタムヘルメットを創作するための方法が開示される。一つの方法は、少なくとも一つのコンピュータシステムを使用して、ユーザの画像データを入手することと(頭部形状が異なる二人のユーザを3301及び3302に示す)、少なくとも一つのコンピュータシステムを使用して、解剖学的詳細及び/またはユーザの寸法を決定することと、少なくとも一つのコンピュータシステム及びユーザの解剖学的データを使用して、ユーザのための新しいカスタムヘルメットモデル(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)を構成することと(保護要素3304及びストラップ3305を含む構成可能なヘルメットモデル3303を示す)、少なくとも一つのコンピュータシステムを使用して、構成可能なヘルメットモデルをユーザの画像データまたは解剖学的モデルに適用することと、少なくとも一つのコンピュータシステムを使用して、構成可能なヘルメットモデルを含むユーザの画像をプレビューすることと(ユニークな頭部形状に適応する、ユーザにおけるカスタムヘルメットモデル3306を示す)、選択的に、少なくとも一つのコンピュータシステム及び/またはユーザ入力を使用して、構成可能なヘルメットモデル特性(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)をプレビューにおいて調節及び更新することと、その命令を実行する少なくともコンピュータシステムを使用して、プレビューされたモデルに基づいてカスタムヘルメットを製造するための命令を作成することと、少なくとも一つのコンピュータシステム及び製造システムを使用して、新しいカスタムヘルメットを製造することと、を含む。
一実施形態に従う、カスタムヘルメットを創作するためのシステムが開示される。一つのシステムは、ユーザの画像データを取得するように構成された画像取得デバイスと、ユーザからの命令を受信するように構成された入力デバイスと、画像データをユーザに表示するように構成されたディスプレイと、カスタムヘルメットを生産するように構成された製造システムと、カスタムヘルメットを創作及びプレビューするための命令を保存するデジタルストレージデバイスと、以下を含む方法を遂行するための命令を実行するように構成されたプロセッサと、を含む。この方法は、少なくとも一つのコンピュータシステムを使用して、ユーザの画像データを入手することと、少なくとも一つのコンピュータシステムを使用して、解剖学的詳細及び/またはユーザの寸法を決定することと、少なくとも一つのコンピュータシステム及びユーザの解剖学的データを使用して、ユーザのための新しいヘルメットモデル(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)を構成することと、少なくとも一つのコンピュータシステムを使用して、構成可能なヘルメットモデルをユーザの画像データまたは解剖学的モデルに適用することと、少なくとも一つのコンピュータシステムを使用して、構成可能なヘルメットモデルを含むユーザの画像をプレビューすることと、選択的に、少なくとも一つのコンピュータシステム及び/またはユーザ入力を使用して、構成可能なヘルメットモデル特性(例えば、カスタマイズされた形状、サイズ、寸法、色、仕上げなど)をプレビューにおいて調節及び更新することと、少なくともコンピュータシステムを使用して、プレビューされたモデルに基づいてカスタムヘルメットを製造するための命令を作成することと、少なくとも一つのコンピュータシステム及び製造システムを使用して、新しいカスタムヘルメットを製造することと、である。

Claims (1)

  1. 本明細書に記載の発明。
JP2016230018A 2013-08-22 2016-11-28 カスタム製品を創作するための方法及びシステム Active JP6542744B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361869051P 2013-08-22 2013-08-22
US61/869,051 2013-08-22
US201462002738P 2014-05-23 2014-05-23
US62/002,738 2014-05-23

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016524465A Division JP6099232B2 (ja) 2013-08-22 2014-08-22 カスタム製品を創作するための方法及びシステム

Publications (3)

Publication Number Publication Date
JP2017041281A true JP2017041281A (ja) 2017-02-23
JP2017041281A5 JP2017041281A5 (ja) 2017-09-21
JP6542744B2 JP6542744B2 (ja) 2019-07-10

Family

ID=52480074

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016524465A Active JP6099232B2 (ja) 2013-08-22 2014-08-22 カスタム製品を創作するための方法及びシステム
JP2016230018A Active JP6542744B2 (ja) 2013-08-22 2016-11-28 カスタム製品を創作するための方法及びシステム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2016524465A Active JP6099232B2 (ja) 2013-08-22 2014-08-22 カスタム製品を創作するための方法及びシステム

Country Status (8)

Country Link
US (15) US9470911B2 (ja)
EP (1) EP3036701A4 (ja)
JP (2) JP6099232B2 (ja)
KR (2) KR102207026B1 (ja)
CN (2) CN108537628B (ja)
AU (2) AU2014308590B2 (ja)
CA (1) CA2921938C (ja)
WO (1) WO2015027196A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023068051A1 (ja) * 2021-10-19 2023-04-27 カシオ計算機株式会社 表示制御方法、プログラム及び表示制御装置
JP2023078857A (ja) * 2021-11-26 2023-06-07 アイジャパン株式会社 アイウェア仮想試着システム、アイウェア選定システム、アイウェア試着システムおよびアイウェア分類システム

Families Citing this family (427)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977377B2 (en) * 2010-02-25 2015-03-10 Jostens, Inc. Method for digital manufacturing of jewelry items
US9147222B2 (en) * 2010-06-23 2015-09-29 Digimarc Corporation Detecting encoded signals under adverse lighting conditions using adaptive signal detection
GB201102794D0 (en) * 2011-02-17 2011-03-30 Metail Ltd Online retail system
US9208265B2 (en) 2011-12-02 2015-12-08 Jostens, Inc. System and method for jewelry design
US10929904B1 (en) 2012-10-23 2021-02-23 Protolabs, Inc. Automated fabrication price quoting and fabrication ordering for computer-modeled structures
WO2014069656A1 (ja) * 2012-11-05 2014-05-08 株式会社ニコン 眼鏡レンズの設計方法および眼鏡レンズの設計システム
US9582615B2 (en) 2013-01-16 2017-02-28 Jostens, Inc. Modeling using thin plate spline technology
US10159296B2 (en) 2013-01-18 2018-12-25 Riddell, Inc. System and method for custom forming a protective helmet for a customer's head
CN105264426B (zh) * 2013-06-07 2017-06-09 埃西勒国际通用光学公司 用于确定光学设备的方法
AU2014284129B2 (en) * 2013-06-19 2018-08-02 Commonwealth Scientific And Industrial Research Organisation System and method of estimating 3D facial geometry
CN103489107B (zh) * 2013-08-16 2015-11-25 北京京东尚科信息技术有限公司 一种制作虚拟试衣模特图像的方法和装置
US9470911B2 (en) * 2013-08-22 2016-10-18 Bespoke, Inc. Method and system to create products
US9606701B1 (en) 2013-10-14 2017-03-28 Benko, LLC Automated recommended joining data with presented methods for joining in computer-modeled structures
US10373183B1 (en) 2013-10-16 2019-08-06 Alekhine, Llc Automatic firm fabrication price quoting and fabrication ordering for computer-modeled joining features and related structures
CN105580051B (zh) * 2013-10-30 2019-05-14 英特尔公司 图像捕捉反馈
USD789228S1 (en) 2013-11-25 2017-06-13 Jostens, Inc. Bezel for a ring
FR3013620B1 (fr) * 2013-11-26 2015-12-25 Essilor Int Procede de biseautage d'une lentille ophtalmique
WO2015081343A1 (en) * 2013-12-01 2015-06-04 Wildtrack Classification system for similar objects from digital images
US10169795B2 (en) * 2013-12-10 2019-01-01 Google Technology Holdings LLC Sizing wearable items by device scanning
US11027085B2 (en) * 2013-12-20 2021-06-08 Koninklijke Philips N.V. 3-D patient interface device adjustment system and method
CA2934574C (en) * 2014-01-03 2022-05-24 Essilor International(Compagnie Generale D'optique) Method for determining an optical equipment comprising at least one optical lens and a spectacle frame
US10682826B2 (en) * 2014-01-06 2020-06-16 Madico, Inc. Platform for validating materials and cutting protective covers
US11537765B1 (en) 2014-02-20 2022-12-27 Benko, LLC Placement and pricing of part marks in computer-modeled structures
CN106164988B (zh) * 2014-03-27 2021-03-16 日本电气株式会社 Pos终端、信息处理设备、白平衡调节方法以及记录介质
US11410224B1 (en) * 2014-03-28 2022-08-09 Desprez, Llc Methods and software for requesting a pricing in an electronic marketplace using a user-modifiable spectrum interface
US20150277155A1 (en) * 2014-03-31 2015-10-01 New Eye London Ltd. Customized eyewear
US10552882B1 (en) 2014-05-20 2020-02-04 Desprez, Llc Methods and software for enabling custom pricing in an electronic commerce system
US9760935B2 (en) * 2014-05-20 2017-09-12 Modiface Inc. Method, system and computer program product for generating recommendations for products and treatments
US9951394B2 (en) * 2014-05-28 2018-04-24 National Beef Packing Company, Llc Hide routing systems and methods
US10713394B1 (en) 2014-06-12 2020-07-14 Benko, LLC Filtering components compatible with a computer-modeled structure
US10121178B2 (en) * 2014-06-13 2018-11-06 Ebay Inc. Three-dimensional eyeglasses modeling from two-dimensional images
US10852838B2 (en) * 2014-06-14 2020-12-01 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US11392396B1 (en) 2014-06-24 2022-07-19 Desprez, Llc Systems and methods for automated help
US10025805B1 (en) 2014-06-24 2018-07-17 Benko, LLC Systems and methods for automated help
US20160027097A1 (en) * 2014-07-23 2016-01-28 Zenni Optical Inc. Visual Search Interface for Open Filters for Eyeglass Selection
US10460342B1 (en) 2014-08-12 2019-10-29 Benko, LLC Methods and software for providing targeted advertising to a product program
US9086582B1 (en) * 2014-08-20 2015-07-21 David Kind, Inc. System and method of providing custom-fitted and styled eyewear based on user-provided images and preferences
WO2016035181A1 (ja) * 2014-09-03 2016-03-10 株式会社ニコン 撮像装置、情報処理装置、及び撮像システム
US20160070822A1 (en) * 2014-09-09 2016-03-10 Primesmith Oy Method, Apparatus and Computer Program Code for Design and Visualization of a Physical Object
US9613020B1 (en) 2014-09-15 2017-04-04 Benko, LLC Natural language user interface for computer-aided design systems
US10162337B2 (en) 2014-09-15 2018-12-25 Desprez, Llc Natural language user interface for computer-aided design systems
US11599086B2 (en) 2014-09-15 2023-03-07 Desprez, Llc Natural language user interface for computer-aided design systems
US10095217B2 (en) 2014-09-15 2018-10-09 Desprez, Llc Natural language user interface for computer-aided design systems
US10528032B2 (en) * 2014-10-08 2020-01-07 Aetrex Worldwide, Inc. Systems and methods for generating a patterned orthotic device
US9460517B2 (en) * 2014-10-22 2016-10-04 Pointivo, Inc Photogrammetric methods and devices related thereto
US11276095B1 (en) 2014-10-30 2022-03-15 Desprez, Llc Methods and software for a pricing-method-agnostic ecommerce marketplace for manufacturing services
US11023934B1 (en) 2014-10-30 2021-06-01 Desprez, Llc Business variable optimization for manufacture or supply of designed products
US10836110B2 (en) 2014-10-31 2020-11-17 Desprez, Llc Method and system for ordering expedited production or supply of designed products
US11415961B1 (en) 2014-10-31 2022-08-16 Desprez, Llc Automated correlation of modeled product and preferred manufacturers
US10073439B1 (en) 2014-10-31 2018-09-11 Desprez, Llc Methods, systems, and software for processing expedited production or supply of designed products
US10235009B1 (en) 2014-10-31 2019-03-19 Desprez, Llc Product variable optimization for manufacture or supply of designed products
US9629698B2 (en) 2014-11-04 2017-04-25 James R. Glidewell Dental Ceramics, Inc. Method and apparatus for generation of 3D models with applications in dental restoration design
GB201420090D0 (en) * 2014-11-12 2014-12-24 Knyttan Ltd Image to item mapping
CN104618705B (zh) * 2014-11-28 2017-04-05 深圳市魔眼科技有限公司 基于眼球追踪的不同距离自适应全息显示方法及设备
JP6594129B2 (ja) * 2014-11-28 2019-10-23 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
KR102329814B1 (ko) * 2014-12-01 2021-11-22 삼성전자주식회사 3d 디스플레이를 위한 양안 거리 인식 장치
KR101665396B1 (ko) * 2015-01-08 2016-10-13 이주성 파일의 도면화 방법
WO2016135659A1 (en) * 2015-02-26 2016-09-01 Finity Technology Limited Computer implemented platform for the creation of a virtual product.
GB2536060B (en) * 2015-03-06 2019-10-16 Specsavers Optical Group Ltd Virtual trying-on experience
US10194799B2 (en) * 2015-03-09 2019-02-05 Sanovas Intellectual Property, Llc Robotic ophthalmology
CN107250719B (zh) 2015-03-10 2020-07-14 豪雅镜片泰国有限公司 眼镜佩戴参数测量系统、测量用程序及其测量方法、以及眼镜镜片的制造方法
US10803501B1 (en) 2015-03-17 2020-10-13 Desprez, Llc Systems, methods, and software for generating, customizing, and automatedly e-mailing a request for quotation for fabricating a computer-modeled structure from within a CAD program
US11004126B1 (en) 2016-03-17 2021-05-11 Desprez, Llc Systems, methods, and software for generating, customizing, and automatedly e-mailing a request for quotation for fabricating a computer-modeled structure from within a CAD program
RU2596062C1 (ru) 2015-03-20 2016-08-27 Автономная Некоммерческая Образовательная Организация Высшего Профессионального Образования "Сколковский Институт Науки И Технологий" Способ коррекции изображения глаз с использованием машинного обучения и способ машинного обучения
US10832197B1 (en) 2015-03-30 2020-11-10 EMC IP Holding Company LLC Creating and utilizing bill of work information to provide a dynamic routing plan for manufacturing a product
WO2016164859A1 (en) * 2015-04-10 2016-10-13 Bespoke, Inc. Systems and methods for creating eyewear with multi-focal lenses
US9885887B2 (en) * 2015-04-22 2018-02-06 Kurt Matthew Gardner Method of determining eyeglass frame measurements from an image by executing computer-executable instructions stored on a non-transitory computer-readable medium
US20170168323A1 (en) * 2015-04-22 2017-06-15 Kurt Matthew Gardner Method of Determining Eyeglass Fitting Measurements from an Image by Executing Computer-Executable Instructions Stored on a Non-Transitory Computer-Readable Medium
US11086148B2 (en) * 2015-04-30 2021-08-10 Oakley, Inc. Wearable devices such as eyewear customized to individual wearer parameters
US10922579B2 (en) 2015-05-06 2021-02-16 Essilor International Frame recognition system and method
CN104814715A (zh) * 2015-05-13 2015-08-05 张仕郎 智能云验光机器人系统
EP3098734A1 (en) * 2015-05-28 2016-11-30 Dassault Systèmes Querying a database with likeness criterion
NL2014891B1 (nl) * 2015-05-29 2017-01-31 Maydo B V Werkwijze voor het vervaardigen van een brilmontuur dat is aangepast aan een brildrager.
US9532709B2 (en) * 2015-06-05 2017-01-03 Jand, Inc. System and method for determining distances from an object
US10012832B2 (en) 2015-06-22 2018-07-03 Microsoft Technology Licensing, Llc Automatic lens design using off-the-shelf components
NL1041388B1 (nl) * 2015-07-02 2017-01-30 Mat Nv Bril, samenstel van zo een bril en zuurstoftoedieningsmiddelen, tevens werkwijze voor het opbouwen van zo een samenstel en hulpmiddel voor gebruik daarbij.
KR102146398B1 (ko) 2015-07-14 2020-08-20 삼성전자주식회사 3차원 컨텐츠 생성 장치 및 그 3차원 컨텐츠 생성 방법
US10489812B2 (en) * 2015-07-15 2019-11-26 International Business Machines Corporation Acquiring and publishing supplemental information on a network
DE102015213832B4 (de) * 2015-07-22 2023-07-13 Adidas Ag Verfahren und Vorrichtung zum Erzeugen eines künstlichen Bildes
JP6474900B2 (ja) * 2015-08-11 2019-02-27 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイ
US9770165B2 (en) * 2015-08-13 2017-09-26 Jand, Inc. Systems and methods for displaying objects on a screen at a desired visual angle
US10007352B2 (en) 2015-08-21 2018-06-26 Microsoft Technology Licensing, Llc Holographic display system with undo functionality
WO2017040338A1 (en) * 2015-08-28 2017-03-09 Fitted Solutions, Llc. System for accurate remote measurement
US10620778B2 (en) * 2015-08-31 2020-04-14 Rockwell Automation Technologies, Inc. Augmentable and spatially manipulable 3D modeling
US10459430B2 (en) * 2015-09-11 2019-10-29 Xerox Corporation Method and system for variable data printing in a 3D print system
WO2017042612A1 (en) * 2015-09-12 2017-03-16 Shamir Optical Industry Ltd. Automatic eyewear measurement and specification
KR102136241B1 (ko) * 2015-09-29 2020-07-22 바이너리브이알, 인크. 표정 검출 성능을 갖는 머리-장착형 디스플레이
US10359763B2 (en) 2015-10-19 2019-07-23 International Business Machines Corporation Automated prototype creation based on analytics and 3D printing
US20180322555A1 (en) * 2015-11-03 2018-11-08 The Stainless Steel Monument Company Pty Ltd A design system and method
JP6572099B2 (ja) * 2015-11-06 2019-09-04 キヤノン株式会社 撮像装置及びその制御方法、ならびにプログラム
WO2017081135A1 (en) * 2015-11-10 2017-05-18 Koninklijke Philips N.V. Determining information about a patient's face
US10220172B2 (en) * 2015-11-25 2019-03-05 Resmed Limited Methods and systems for providing interface components for respiratory therapy
FR3044429B1 (fr) * 2015-11-26 2018-01-05 Ak Optique Procede de fabrication d'une monture de lunettes sur mesure
FR3044430B1 (fr) * 2015-11-26 2018-03-23 Ak Optique Procede de fabrication d'une monture de lunettes munie d'appuis nasaux a meplat
JP6834980B2 (ja) * 2015-12-08 2021-02-24 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10706580B2 (en) * 2015-12-09 2020-07-07 Hajime Kasahara Position-information specifying method, position-information specifying device, and position-information specifying program
CN105469072B (zh) * 2015-12-14 2019-05-31 依视路国际公司 一种评估眼镜佩戴者和其所佩戴眼镜搭配度的方法和系统
EP3182378B1 (en) * 2015-12-16 2021-08-11 Dassault Systèmes Modification of a constrained asymmetrical subdivision mesh
EP3182306A1 (en) * 2015-12-16 2017-06-21 Dassault Systèmes Topological change in a constrained asymmetrical subdivision mesh
US10289771B2 (en) * 2015-12-16 2019-05-14 Dassault Systemes Modification of a constrained asymmetrical subdivision mesh
CN106887024B (zh) * 2015-12-16 2019-09-17 腾讯科技(深圳)有限公司 照片的处理方法及处理系统
WO2017102003A1 (en) * 2015-12-17 2017-06-22 Essilor International (Compagnie Generale D'optique) Distributed optical job and manufacturing computation systems and methods
KR101867564B1 (ko) * 2015-12-29 2018-07-17 엘리셀 주식회사 개인 맞춤형 마스크 팩 제조 방법과 그 장치
CN105894533A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术(北京)有限公司 基于智能设备实现体感控制的方法、系统以及智能设备
US10878220B2 (en) * 2015-12-31 2020-12-29 Cerner Innovation, Inc. Methods and systems for assigning locations to devices
WO2017120247A1 (en) 2016-01-05 2017-07-13 Reald Spark, Llc Gaze correction of multi-view images
US10564628B2 (en) * 2016-01-06 2020-02-18 Wiivv Wearables Inc. Generating of 3D-printed custom wearables
US11736756B2 (en) * 2016-02-10 2023-08-22 Nitin Vats Producing realistic body movement using body images
WO2017138004A1 (en) * 2016-02-12 2017-08-17 Shamir Optical Industry Ltd. Methods and systems for testing of eyeglasses
JP6762003B2 (ja) 2016-02-29 2020-09-30 国立大学法人神戸大学 物体表面修正方法およびワークの加工方法
ES2604806B1 (es) * 2016-03-03 2018-07-25 Horizons Optical S.L.U. Procedimiento de pedido de gafas y procedimientos de fabricación y suministro y dispositivo correspondientes
KR20180118116A (ko) * 2016-03-04 2018-10-30 에씰로 앙터나시오날 안과용 렌즈를 주문하는 방법 및 해당 시스템
US9460557B1 (en) * 2016-03-07 2016-10-04 Bao Tran Systems and methods for footwear fitting
BE1023456B1 (nl) * 2016-03-09 2017-03-27 Fit Things Nv Snijinrichting en -methode
EP3428877A4 (en) 2016-03-09 2019-10-30 Nikon Corporation DETECTION DEVICE, INFORMATION PROCESSING DEVICE, METHOD, PROGRAM, AND DETECTION SYSTEM
WO2017163643A1 (ja) * 2016-03-22 2017-09-28 富士フイルム株式会社 装着性調整値出力メガネシステム、装着性調整値出力メガネ、装着性情報検出メガネ、および装着性調整値出力メガネシステムに用いられるプログラム、並びに調整機能付メガネ
US11423449B1 (en) 2016-03-23 2022-08-23 Desprez, Llc Electronic pricing machine configured to generate prices based on supplier willingness and a user interface therefor
GB2549071B (en) * 2016-03-23 2020-11-11 Sony Interactive Entertainment Inc 3D printing system
EP3432776B1 (en) * 2016-03-23 2023-03-29 The Procter & Gamble Company Imaging method for determining stray fibers
US10556309B1 (en) 2016-03-24 2020-02-11 Proto Labs Inc. Methods of subtractively manufacturing a plurality of discrete objects from a single workpiece using a removable fixating material
US10176275B1 (en) 2016-03-28 2019-01-08 Luvlyu, Inc. Breast shape visualization and modeling tool
DE102016106121A1 (de) 2016-04-04 2017-10-05 Carl Zeiss Ag Verfahren und Vorrichtung zum Bestimmen von Parametern zur Brillenanpassung
CN105708467B (zh) * 2016-04-06 2017-12-29 广州小亮点科技有限公司 人体实际距离测量及眼镜架的定制方法
US10579203B2 (en) * 2016-04-13 2020-03-03 Intel Corporation Wellness mirror
US10401824B2 (en) 2016-04-14 2019-09-03 The Rapid Manufacturing Group LLC Methods and software for reducing machining equipment usage when machining multiple objects from a single workpiece
WO2017181151A1 (en) * 2016-04-14 2017-10-19 Cornell University Methods for incremental 3d printing and 3d printing arbitrary wireframe meshes
JP6734690B2 (ja) * 2016-04-15 2020-08-05 株式会社Shoei ヘルメットの被り心地の調整方法及び調整用の情報処理装置
US11307437B2 (en) 2016-05-10 2022-04-19 Materialise Nv Method of designing and placing a lens within a spectacles frame
US20170337516A1 (en) * 2016-05-18 2017-11-23 Kuiu, Inc. Distributed product development and funding system
US10672055B2 (en) * 2016-05-23 2020-06-02 Oath Inc. Method and system for presenting personalized products based on digital signage for electronic commerce
EP3465545A4 (en) * 2016-06-01 2020-01-29 Vidi Pty Ltd OPTICAL MEASURING AND SCANING SYSTEM AND METHOD FOR USE
CN105842875B (zh) * 2016-06-07 2018-07-24 杭州美戴科技有限公司 一种基于人脸三维测量的眼镜架设计方法
EP3258308A1 (en) * 2016-06-13 2017-12-20 ESSILOR INTERNATIONAL (Compagnie Générale d'Optique) Frame for a head mounted device
US10417356B1 (en) 2016-06-16 2019-09-17 Amazon Technologies, Inc. Physics modeling for interactive content
US10402068B1 (en) 2016-06-16 2019-09-03 Amazon Technologies, Inc. Film strip interface for interactive content
US10018854B2 (en) 2016-06-22 2018-07-10 Indizen Optical Technologies of America, LLC Custom ophthalmic lens design derived from multiple data sources
CN106200918B (zh) * 2016-06-28 2019-10-01 Oppo广东移动通信有限公司 一种基于ar的信息显示方法、装置和移动终端
EP3264286B1 (en) 2016-06-28 2020-11-18 Dassault Systèmes Querying a database with morphology criterion
FR3053509B1 (fr) * 2016-06-30 2019-08-16 Fittingbox Procede d’occultation d’un objet dans une image ou une video et procede de realite augmentee associe
WO2018002533A1 (fr) * 2016-06-30 2018-01-04 Fittingbox Procédé d'occultation d'un objet dans une image ou une vidéo et procédé de réalité augmentée associé
CN106205633B (zh) * 2016-07-06 2019-10-18 李彦芝 一种模仿、表演练习打分系统
WO2018017867A1 (en) * 2016-07-20 2018-01-25 Riddell, Inc. System and methods for designing and manufacturing a bespoke protective sports helmet
US10216011B2 (en) * 2016-07-25 2019-02-26 iCoat Company, LLC Eyewear measuring systems, methods and devices
CN106054405A (zh) * 2016-07-27 2016-10-26 深圳市金立通信设备有限公司 一种镜片调整的方法及终端
US20190164200A1 (en) * 2016-07-28 2019-05-30 Essilor International Eyeglasses-matching tool
US10534809B2 (en) * 2016-08-10 2020-01-14 Zeekit Online Shopping Ltd. Method, system, and device of virtual dressing utilizing image processing, machine learning, and computer vision
US10290136B2 (en) 2016-08-10 2019-05-14 Zeekit Online Shopping Ltd Processing user selectable product images and facilitating visualization-assisted coordinated product transactions
US20180068449A1 (en) * 2016-09-07 2018-03-08 Valve Corporation Sensor fusion systems and methods for eye-tracking applications
WO2018051160A1 (en) * 2016-09-16 2018-03-22 Essilor International Systems and methods to provide customized product information
US10818064B2 (en) * 2016-09-21 2020-10-27 Intel Corporation Estimating accurate face shape and texture from an image
JP7211937B2 (ja) * 2016-09-22 2023-01-24 エシロール・アンテルナシオナル 電子眼鏡フレーム要素を特定する方法
CN107865473B (zh) * 2016-09-26 2019-10-25 华硕电脑股份有限公司 人体特征测距装置及其测距方法
US9990780B2 (en) * 2016-10-03 2018-06-05 Ditto Technologies, Inc. Using computed facial feature points to position a product model relative to a model of a face
US10328686B2 (en) 2016-10-10 2019-06-25 Microsoft Technology Licensing, Llc Determining print-time for generation of 3D objects based on 3D printing parameters
JP6744191B2 (ja) * 2016-10-12 2020-08-19 株式会社日立製作所 部品発注方式選定装置、部品発注方式選定方法およびプログラム
CN106444676B (zh) * 2016-10-21 2019-03-01 上海安宸信息科技有限公司 一种基于广域网络覆盖的智能控制系统
US11361003B2 (en) * 2016-10-26 2022-06-14 salesforcecom, inc. Data clustering and visualization with determined group number
KR101851303B1 (ko) 2016-10-27 2018-04-23 주식회사 맥스트 3차원 공간 재구성 장치 및 방법
US10445938B1 (en) * 2016-11-09 2019-10-15 Snap Inc. Modifying multiple objects within a video stream
EP3321817A1 (en) 2016-11-14 2018-05-16 Dassault Systèmes Querying a database based on a parametric view function
EP3538230A1 (en) * 2016-11-14 2019-09-18 Themagic5 Inc. User-customised goggles
US11559378B2 (en) 2016-11-17 2023-01-24 James R. Glidewell Dental Ceramics, Inc. Scanning dental impressions
US10284731B2 (en) 2016-11-29 2019-05-07 Echostar Technologies L.L.C. Apparatus, systems and methods for generating 3D model data from a media content event
US11226831B2 (en) 2016-12-05 2022-01-18 Facebook, Inc. Customizing content based on predicted user preferences
US10715520B2 (en) * 2016-12-08 2020-07-14 Mastercard International Incorporated Systems and methods for decentralized biometric enrollment
US11609547B2 (en) * 2016-12-19 2023-03-21 Autodesk, Inc. Gestural control of an industrial robot
EP3339943A1 (en) * 2016-12-21 2018-06-27 Fielmann Ventures GmbH Method and system for obtaining optometric parameters for fitting eyeglasses
CN106682424A (zh) * 2016-12-28 2017-05-17 上海联影医疗科技有限公司 医学图像的调节方法及其系统
US10545481B2 (en) 2016-12-28 2020-01-28 Proto Labs Inc Methods and software for providing graphical representations of a plurality of objects in a central through opening
US10675857B2 (en) * 2016-12-30 2020-06-09 Konica Minolta Business Solutions U.S.A., Inc. Patterns for 3D printing
EP3566212A4 (en) * 2017-01-06 2020-08-19 Intuitive Surgical Operations Inc. SYSTEM AND PROCEDURE FOR REGISTRATION AND COORDINATED MANIPULATION OF IMAGE COMPONENTS WITH EXTENDED REALITY
EP3568835A1 (en) * 2017-01-12 2019-11-20 Atos Spain Sociedad Anonima A system for manufacturing personalized products by means of additive manufacturing doing an image-based recognition using electronic devices with a single camera
EP3355101B1 (de) 2017-01-27 2019-05-15 Carl Zeiss Vision International GmbH Computerimplementiertes verfahren zur bestimmung einer repräsentation eines brillenfassungsrands oder einer repräsentation der ränder der gläser einer brille
EP3355103A1 (de) * 2017-01-27 2018-08-01 Carl Zeiss AG Computerimplementiertes verfahren zur bestimmung von zentrierparametern
EP3355214A1 (de) 2017-01-27 2018-08-01 Carl Zeiss Vision International GmbH Verfahren, recheneinrichtung und computerprogramm zum bereitstellen eines fassungsrandmodells
CN106951678A (zh) * 2017-02-20 2017-07-14 集合智造(北京)餐饮管理有限公司 一种用于食品柔性制造中信息采集和处理的方法、系统
GB2559978A (en) 2017-02-22 2018-08-29 Fuel 3D Tech Limited Systems and methods for obtaining eyewear information
SG11201907902VA (en) * 2017-02-27 2019-09-27 Vivita Japan Inc Cad device and program
JP2018144380A (ja) * 2017-03-07 2018-09-20 富士ゼロックス株式会社 造形管理システム、造形管理制御装置
US10860748B2 (en) * 2017-03-08 2020-12-08 General Electric Company Systems and method for adjusting properties of objects depicted in computer-aid design applications
KR102037573B1 (ko) * 2017-03-09 2019-10-29 주식회사 파트너스앤코 문진 데이터 및 카메라 데이터에 기반한 진단용 데이터 처리 장치 및 그 시스템
JP6558388B2 (ja) * 2017-03-14 2019-08-14 オムロン株式会社 画像処理装置
JP6961972B2 (ja) * 2017-03-24 2021-11-05 富士フイルムビジネスイノベーション株式会社 立体形状成形装置、情報処理装置及びプログラム
DE102017107346A1 (de) * 2017-04-05 2018-10-11 Carl Zeiss Ag Vorrichtung zur Energieversorgung von und/oder Kommunikation mit einem Augenimplantat mittels Beleuchtungsstrahlung
US10307908B2 (en) * 2017-04-07 2019-06-04 X Development Llc Methods and systems for establishing and maintaining a pre-build relationship
WO2018191784A1 (en) * 2017-04-19 2018-10-25 SPEQS Limited Eyeglasses ordering system and digital interface therefor
WO2018199890A1 (en) * 2017-04-24 2018-11-01 Truthvision, Inc. A system and method for measuring pupillary distance
US10776861B1 (en) 2017-04-27 2020-09-15 Amazon Technologies, Inc. Displaying garments on 3D models of customers
US10777018B2 (en) * 2017-05-17 2020-09-15 Bespoke, Inc. Systems and methods for determining the scale of human anatomy from images
US10234848B2 (en) * 2017-05-24 2019-03-19 Relativity Space, Inc. Real-time adaptive control of additive manufacturing processes using machine learning
US10621779B1 (en) * 2017-05-25 2020-04-14 Fastvdo Llc Artificial intelligence based generation and analysis of 3D models
EP3410178A1 (de) 2017-06-01 2018-12-05 Carl Zeiss Vision International GmbH Verfahren, vorrichtung und computerprogramm zum virtuellen anpassen einer brillenfassung
EP3413122B1 (de) * 2017-06-08 2020-03-04 Carl Zeiss Vision International GmbH Verfahren, vorrichtung und computerprogramm zum bestimmen eines nah-durchblickpunktes
US10810647B2 (en) * 2017-06-09 2020-10-20 International Business Machines Corporation Hybrid virtual and physical jewelry shopping experience
KR20190022856A (ko) * 2017-06-12 2019-03-06 미디어 그룹 코 엘티디 제어 방법, 제어기, 스마트 거울 및 컴퓨터 판독가능 저장매체
US20180357819A1 (en) * 2017-06-13 2018-12-13 Fotonation Limited Method for generating a set of annotated images
WO2018236285A1 (en) * 2017-06-22 2018-12-27 Neitas Pte. Ltd. INFORMATION PROCESSING DEVICE
EP3422087B1 (de) * 2017-06-28 2019-12-25 Carl Zeiss Vision International GmbH Verfahren zur korrektur von zentrierparametern und/oder einer achslage sowie entsprechendes computerprogramm und verfahren
EP3422278A1 (en) * 2017-06-29 2019-01-02 MTG Co., Ltd. Commercial product size determination device and commercial product size determination method
EP3422708A1 (en) * 2017-06-29 2019-01-02 Koninklijke Philips N.V. Apparatus and method for generating an image
TW201907334A (zh) * 2017-07-03 2019-02-16 華碩電腦股份有限公司 電子裝置、影像處理方法及非暫態電腦可讀取記錄媒體
US10984559B2 (en) * 2017-07-03 2021-04-20 StyleRiser Inc. Color engine
JP6514278B2 (ja) * 2017-07-04 2019-05-15 ファナック株式会社 レーザ加工ロボットシステム
CN107424047A (zh) * 2017-07-06 2017-12-01 广州视源电子科技股份有限公司 一种定制产品的方法及系统
EP3425447B1 (de) * 2017-07-06 2019-09-11 Carl Zeiss Vision International GmbH Verfahren, vorrichtung und computerprogramm zum virtuellen anpassen einer brillenfassung
EP3425446B1 (de) 2017-07-06 2019-10-30 Carl Zeiss Vision International GmbH Verfahren, vorrichtung und computerprogramm zum virtuellen anpassen einer brillenfassung
CN109429060B (zh) * 2017-07-07 2020-07-28 京东方科技集团股份有限公司 瞳孔距离测量方法、可穿戴眼部设备及存储介质
US10386647B1 (en) * 2017-07-11 2019-08-20 Facebook, Inc. Magnetic interpupillary distance adjustment
EP3651995A4 (en) * 2017-07-14 2021-04-21 MRK Fine Arts, LLC IMAGE SELECTION AND SIZING FOR JEWELERY
FR3069687B1 (fr) * 2017-07-25 2021-08-06 Fittingbox Procede de determination d'au moins un parametre associe a un dispositif ophtalmique
EP3662321A1 (fr) * 2017-08-03 2020-06-10 Oyyo Procédé de détermination de caractéristiques dimensionnelle s d'un article de vision, et procédé de fabrication et article de vision correspondant
CN108305317B (zh) * 2017-08-04 2020-03-17 腾讯科技(深圳)有限公司 一种图像处理方法、装置及存储介质
US10810706B2 (en) * 2017-08-04 2020-10-20 Outward, Inc. Machine learning based image processing techniques
EP4293574A3 (en) 2017-08-08 2024-04-03 RealD Spark, LLC Adjusting a digital representation of a head region
US20190070787A1 (en) * 2017-08-10 2019-03-07 William Marsh Rice University Machine learning enabled model for predicting the spreading process in powder-bed three-dimensional printing
US20190057180A1 (en) * 2017-08-18 2019-02-21 International Business Machines Corporation System and method for design optimization using augmented reality
CN107633398A (zh) 2017-08-24 2018-01-26 阿里巴巴集团控股有限公司 图像显示方法及装置和电子设备
WO2019045712A1 (en) * 2017-08-31 2019-03-07 Sony Mobile Communications Inc. METHODS OF CONSTRUCTING A PRINTING 3D MODEL, AND DEVICES AND COMPUTER PROGRAM PRODUCTS THEREOF
KR101976086B1 (ko) * 2017-08-31 2019-08-28 김지환 증강된 모자 서비스 제공 방법
CN111448069B (zh) * 2017-08-31 2022-02-25 通用电气公司 用于增材制造的定制的工程模型的分发
US20190072934A1 (en) * 2017-09-01 2019-03-07 Debbie Eunice Stevens-Wright Parametric portraiture design and customization system
US10507337B2 (en) * 2017-09-13 2019-12-17 Elekta, Inc. Radiotherapy treatment plan optimization workflow
US10881827B2 (en) 2017-09-29 2021-01-05 Koninklijke Philips N.V. Providing a mask for a patient based on a temporal model generated from a plurality of facial scans
KR102546863B1 (ko) * 2017-10-20 2023-06-22 로레알 화장 조성물의 도포를 위한 맞춤형 어플리케이터의 제조 방법
EP3697258B1 (en) * 2017-10-20 2021-09-22 L'Oreal Method for manufacturing a personalized applicator for the application of a cosmetic composition
US10613710B2 (en) * 2017-10-22 2020-04-07 SWATCHBOOK, Inc. Product simulation and control system for user navigation and interaction
US10585420B2 (en) 2017-11-06 2020-03-10 Abemis LLC Method and system to generate three-dimensional meta-structure model of a workpiece
KR20190061770A (ko) 2017-11-28 2019-06-05 양희재 맞춤형 주얼리를 제작 판매하는 서비스 서버 및 방법
US11157985B2 (en) * 2017-11-29 2021-10-26 Ditto Technologies, Inc. Recommendation system, method and computer program product based on a user's physical features
CN108122190B (zh) * 2017-12-06 2021-06-01 中国航空工业集团公司西安航空计算技术研究所 一种gpu统一染色阵列顶点染色任务属性数据组装方法
WO2019110012A1 (en) * 2017-12-08 2019-06-13 Shanghaitech University Face detection and recognition method using light field camera system
US10413172B2 (en) * 2017-12-11 2019-09-17 1-800 Contacts, Inc. Digital visual acuity eye examination for remote physician assessment
EP3499447A1 (en) * 2017-12-12 2019-06-19 Facebook, Inc. Providing a digital model of corresponding product in a camera feed
US10712811B2 (en) * 2017-12-12 2020-07-14 Facebook, Inc. Providing a digital model of a corresponding product in a camera feed
US11281824B2 (en) 2017-12-13 2022-03-22 Dassault Systemes Simulia Corp. Authoring loading and boundary conditions for simulation scenarios
CN108230385B (zh) * 2017-12-20 2022-01-14 湖南大学 单相机运动检测超高叠层、超薄烟标数量方法及装置
US20190196577A1 (en) * 2017-12-21 2019-06-27 Quicket GmbH Methods and systems for generating a representation of a seated person using facial measurements
US10620454B2 (en) * 2017-12-22 2020-04-14 Optikam Tech, Inc. System and method of obtaining fit and fabrication measurements for eyeglasses using simultaneous localization and mapping of camera images
US11579472B2 (en) 2017-12-22 2023-02-14 Optikam Tech, Inc. System and method of obtaining fit and fabrication measurements for eyeglasses using depth map scanning
CN108171577A (zh) * 2017-12-27 2018-06-15 大连鉴影光学科技有限公司 一种c2m平台的智能配镜系统
US10643446B2 (en) 2017-12-28 2020-05-05 Cerner Innovation, Inc. Utilizing artificial intelligence to detect objects or patient safety events in a patient room
JP6899097B2 (ja) * 2017-12-29 2021-07-07 京セラドキュメントソリューションズ株式会社 画像処理装置、画像処理方法及び画像処理プログラム
US10433630B2 (en) * 2018-01-05 2019-10-08 L'oreal Cosmetic applicator system including trackable cosmetic device, and client device to assist users in makeup application
WO2019140036A1 (en) * 2018-01-11 2019-07-18 E-Vision Smart Optics, Inc. Three-dimensional (3d) printing of electro-active lenses
US20190244274A1 (en) * 2018-02-06 2019-08-08 Perfect Corp. Systems and methods for recommending products based on facial analysis
US10798211B2 (en) 2018-02-13 2020-10-06 Ebay Inc. Generating attribute preference models based on disparate attribute spectrums
US10574881B2 (en) * 2018-02-15 2020-02-25 Adobe Inc. Smart guide to capture digital images that align with a target image model
JP6560383B1 (ja) * 2018-02-16 2019-08-14 ヤフー株式会社 情報表示プログラム、情報表示方法、情報表示装置、及び配信装置
US11017575B2 (en) 2018-02-26 2021-05-25 Reald Spark, Llc Method and system for generating data to provide an animated visual representation
EP3537239A1 (de) 2018-03-06 2019-09-11 Siemens Aktiengesellschaft Verfahren zum betreiben einer werkzeugmaschine mittels anpassung eines precompilierten datenmodells
WO2019185856A1 (en) * 2018-03-29 2019-10-03 Asimos Oy Method for manufacturing one-piece corrective eyewear
KR102039171B1 (ko) * 2018-03-30 2019-10-31 경일대학교산학협력단 인공신경망을 이용한 거울형 가상 피팅 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
EP3776057A1 (en) 2018-04-06 2021-02-17 Essilor International Method for customizing a head mounted device adapted to generate a virtual image
US10789725B2 (en) * 2018-04-22 2020-09-29 Cnoga Medical Ltd. BMI, body and other object measurements from camera view display
KR102091643B1 (ko) * 2018-04-23 2020-03-20 (주)이스트소프트 인공신경망을 이용한 안경 착용 영상을 생성하기 위한 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
US10831042B2 (en) * 2018-05-03 2020-11-10 Optikam Tech, Inc. System and method for obtaining and utilizing measurements to enable customized eyewear to be purchased online
EP3794577A4 (en) * 2018-05-16 2022-03-09 Conex Digital LLC SMART PLATFORM COUNTER DISPLAY INTELLIGENT METHOD AND SYSTEM
US11257297B1 (en) * 2018-06-15 2022-02-22 Baru Inc. System, method, and computer program product for manufacturing a customized product
JP7326707B2 (ja) * 2018-06-21 2023-08-16 カシオ計算機株式会社 ロボット、ロボットの制御方法及びプログラム
US10762702B1 (en) * 2018-06-22 2020-09-01 A9.Com, Inc. Rendering three-dimensional models on mobile devices
JP7453956B2 (ja) 2018-07-13 2024-03-21 株式会社 資生堂 カスタム外用薬を調整するためのシステムおよび方法
EP3598209A1 (en) * 2018-07-18 2020-01-22 Essilor International Method for determining an opththalmic equipment and system associated
EP3598210A1 (en) * 2018-07-18 2020-01-22 Essilor International Method for determining an ophthalmic component
EP3598208A1 (en) * 2018-07-18 2020-01-22 Essilor International Method for determining a component of an ophthalmic equipment and associated system
AU2019309513C1 (en) 2018-07-26 2023-04-27 Oakley, Inc. Lens for eyewear and other headworn supports having improved optics
US11399589B2 (en) 2018-08-16 2022-08-02 Riddell, Inc. System and method for designing and manufacturing a protective helmet tailored to a selected group of helmet wearers
CN109191247A (zh) * 2018-08-23 2019-01-11 郑植 一种珠宝定制系统及方法
KR102149395B1 (ko) * 2018-08-31 2020-08-31 주식회사 더메이크 트루뎁스 카메라를 이용하여 아이웨어 시착 및 추천 서비스를 제공하는 시스템 및 방법
US11209650B1 (en) 2018-09-06 2021-12-28 Facebook Technologies, Llc Waveguide based display with multiple coupling elements for artificial reality
FR3085766B1 (fr) * 2018-09-06 2020-10-16 Sidel Participations Procede d'assistance par ordinateur dans la gestion d'une ligne de production
US10481321B1 (en) * 2018-09-06 2019-11-19 Facebook Technologies, Llc Canted augmented reality display for improved ergonomics
EP3621019A1 (de) 2018-09-07 2020-03-11 Giffits GmbH Computer-implementiertes verfahren zum erstellen von angebots- und/oder auftragsdaten eines zu individualisierenden objekts
US10909225B2 (en) * 2018-09-17 2021-02-02 Motorola Mobility Llc Electronic devices and corresponding methods for precluding entry of authentication codes in multi-person environments
US11450065B2 (en) 2018-09-24 2022-09-20 Magic Leap, Inc. Methods and systems for three-dimensional model sharing
TWI676873B (zh) * 2018-10-01 2019-11-11 財團法人工業技術研究院 刀具監控系統及刀具監控方法
US10621655B1 (en) * 2018-10-10 2020-04-14 Capital One Services, Llc Systems and methods for SMS e-commerce assistant
WO2020079510A1 (en) * 2018-10-16 2020-04-23 Abhay Swamy System and method for production and customization of material
CN111090263B (zh) * 2018-10-23 2023-11-28 杨宇 一种定制化智能生产线控制系统和控制方法
CN109483066A (zh) * 2018-10-24 2019-03-19 宁波欧尼克科技有限公司 一种非结构化部件的加工系统
DE102018008669A1 (de) * 2018-11-05 2020-05-07 Shape Engineering GmbH Verfahren zur Herstellung eines Brillenglases
US10685457B2 (en) * 2018-11-15 2020-06-16 Vision Service Plan Systems and methods for visualizing eyewear on a user
CA3120841A1 (en) 2018-11-21 2020-05-28 Riddell, Inc. Protective recreational sports helmet with components additively manufactured to manage impact forces
US20200159040A1 (en) * 2018-11-21 2020-05-21 Kiritz Productions LLC, VR Headset Stabilization Design and Nose Insert Series Method and apparatus for enhancing vr experiences
CN109558665B (zh) * 2018-11-22 2023-01-10 杭州美戴科技有限公司 一种个性化柔性鼻托的自动设计方法
JP6852141B2 (ja) * 2018-11-29 2021-03-31 キヤノン株式会社 情報処理装置、撮像装置、情報処理装置の制御方法、および、プログラム
US11922649B2 (en) * 2018-11-30 2024-03-05 Arithmer Inc. Measurement data calculation apparatus, product manufacturing apparatus, information processing apparatus, silhouette image generating apparatus, and terminal apparatus
BR112021010609A2 (pt) * 2018-12-10 2021-08-24 Essilor International Sistema, dispositivo e método para determinar a exequibilidade de um artigo óptico
US11107241B2 (en) * 2018-12-11 2021-08-31 Seiko Epson Corporation Methods and systems for training an object detection algorithm using synthetic images
DE102018009811A1 (de) * 2018-12-13 2020-06-18 YOU MAWO GmbH Verfahren zum Generieren von Herstellungsdaten zur Herstellung einer Brille für eine Person
EP3899642A1 (en) 2018-12-20 2021-10-27 Snap Inc. Flexible eyewear device with dual cameras for generating stereoscopic images
US10825260B2 (en) * 2019-01-04 2020-11-03 Jand, Inc. Virtual try-on systems and methods for spectacles
US11227075B2 (en) * 2019-01-25 2022-01-18 SWATCHBOOK, Inc. Product design, configuration and decision system using machine learning
CN109733050B (zh) * 2019-02-19 2020-11-06 大连声鹭科技有限公司 一种自助备案自助制章方法
FR3092987A1 (fr) * 2019-02-22 2020-08-28 Deepsmile Technology Procédé de visualisation de l’impact d’un plan de traitement dentaire
US11234893B2 (en) * 2019-02-27 2022-02-01 Steven A. Shubin, Sr. Method and system of creating a replica of an anatomical structure
KR102646684B1 (ko) * 2019-02-28 2024-03-13 삼성전자 주식회사 전자 장치 및 컨텐츠를 생성하는 방법
ES2886876T3 (es) * 2019-03-08 2021-12-21 Exocad Gmbh Modelado implementado por ordenador de una pieza de prótesis dental individualizada para el paciente
WO2020184590A1 (ja) * 2019-03-14 2020-09-17 三井化学株式会社 レンズオーダーシステム、レンズオーダー方法、プログラム、およびデータ構造
WO2020208421A1 (en) * 2019-04-09 2020-10-15 Shiseido Company, Limited System and method for creation of topical agents with improved image capture
EP3726474A1 (en) * 2019-04-19 2020-10-21 Koninklijke Philips N.V. Methods and systems for handling virtual 3d object surface interaction
CN110113528B (zh) * 2019-04-26 2021-05-07 维沃移动通信有限公司 一种参数获取方法及终端设备
US11030801B2 (en) * 2019-05-17 2021-06-08 Standard Cyborg, Inc. Three-dimensional modeling toolkit
KR102294822B1 (ko) * 2019-06-10 2021-08-26 김용만 스테레오 비전을 이용한 안경 제작용 인체 데이터 측정장치
CN110348944A (zh) * 2019-06-10 2019-10-18 脉脉眼镜科技(深圳)有限责任公司 远程验光及实物试镜的互联网眼镜销售系统和方法
US11622843B2 (en) 2019-06-25 2023-04-11 James R. Glidewell Dental Ceramics, Inc. Processing digital dental impression
US11534271B2 (en) 2019-06-25 2022-12-27 James R. Glidewell Dental Ceramics, Inc. Processing CT scan of dental impression
US11540906B2 (en) 2019-06-25 2023-01-03 James R. Glidewell Dental Ceramics, Inc. Processing digital dental impression
US11238611B2 (en) * 2019-07-09 2022-02-01 Electric Avenue Software, Inc. System and method for eyewear sizing
EP3999902A1 (en) * 2019-07-18 2022-05-25 Essilor International System and method for determining at least one feature of at least one lens mounted in a spectacle frame
EP4003824A1 (en) 2019-07-22 2022-06-01 Specialized Bicycle Components, Inc. Bicycle saddle
WO2021022158A1 (en) * 2019-08-01 2021-02-04 The Regents Of The University Of Colorado, A Body Corporate Eyeglass frames for treatment of dry eye syndrome and corresponding 3d printing systems and methods
US11488239B2 (en) * 2019-08-26 2022-11-01 Warby Parker Inc. Virtual fitting systems and methods for spectacles
US11684819B2 (en) 2019-08-29 2023-06-27 Wahoo Fitness, LLC Indoor bicycle training device
KR20220050990A (ko) * 2019-08-29 2022-04-25 와후 피트니스 엘.엘.씨. 실내 자전거 조절 방법 및 시스템
US11403699B2 (en) * 2019-08-29 2022-08-02 Lg Electronics Inc. Multimedia device and method for controlling the same
US11770604B2 (en) * 2019-09-06 2023-09-26 Sony Group Corporation Information processing device, information processing method, and information processing program for head-related transfer functions in photography
US10991067B2 (en) 2019-09-19 2021-04-27 Zeekit Online Shopping Ltd. Virtual presentations without transformation-induced distortion of shape-sensitive areas
CN114730101A (zh) 2019-09-24 2022-07-08 贝斯普客有限公司D/B/A拓扑眼镜 使用面部特征的3d扫描来调整库存眼镜框架的系统和方法
KR102293038B1 (ko) * 2019-09-26 2021-08-26 주식회사 더메이크 페이스 타입 및 사이즈별 판매 데이터에 기초하여 안경을 추천하는 시스템 및 방법
EP3798944A1 (en) * 2019-09-30 2021-03-31 Hoya Lens Thailand Ltd. Learning model generation method, computer program, eyeglass lens selection support method, and eyeglass lens selection support system
TWI731442B (zh) * 2019-10-18 2021-06-21 宏碁股份有限公司 電子裝置及其利用觸控資料的物件資訊辨識方法
CN110866970B (zh) * 2019-10-21 2023-04-25 西南民族大学 一种通过面部关键点识别实现重建配镜的系统及方法
WO2021086319A1 (en) * 2019-10-29 2021-05-06 Hewlett-Packard Development Company, L.P. Generation of model data for three dimensional printers
US20210173230A1 (en) * 2019-10-30 2021-06-10 LuxMea Studio, LLC Bespoke eyewear and system and method for manufacturing bespoke eyewear
US11176357B2 (en) * 2019-10-30 2021-11-16 Tascent, Inc. Fast face image capture system
KR20210054315A (ko) * 2019-11-05 2021-05-13 손금아 맞춤형 안경 제작 시스템 및 그 방법
KR20210059060A (ko) * 2019-11-13 2021-05-25 삼성디스플레이 주식회사 검출 장치
US10965931B1 (en) 2019-12-06 2021-03-30 Snap Inc. Sensor misalignment compensation
CN114830162A (zh) * 2019-12-17 2022-07-29 依视路国际公司 用于情境化设备推荐的装置、方法和计算机可读存储介质
CN114787872A (zh) * 2019-12-19 2022-07-22 依视路国际公司 用于扩展用于评估眼睛配戴物兼容性的图像数据库的装置、方法及计算机可读存储介质
CN114830015A (zh) * 2019-12-19 2022-07-29 依视路国际公司 用于确定配戴着眼睛配戴物的受试者的至少一个几何形态参数的值的方法
CN111179033A (zh) * 2019-12-27 2020-05-19 珠海随变科技有限公司 眼镜定制的后台数据处理、眼镜定制方法、装置及设备
US11622207B2 (en) 2019-12-31 2023-04-04 Starkey Laboratories, Inc. Generating a hearing assistance device shell
CN111694167A (zh) * 2020-01-03 2020-09-22 周爱霞 基于镜片尺寸选择的镜架加工系统及方法
CN111274673B (zh) * 2020-01-07 2021-02-23 上海索辰信息科技股份有限公司 基于粒子群优化的光学产品模型优化方法及系统
CN113128310A (zh) * 2020-01-12 2021-07-16 邓广博 基于多参数采集的目标搜索平台及方法
US11642018B1 (en) 2020-01-15 2023-05-09 Meta Platforms Technologies, Llc Volumetric depth imaging for lens fit
EP3851902A1 (en) * 2020-01-15 2021-07-21 Essilor International Method for generating modified eyeglass frame manufacturing data
EP3851903A1 (en) * 2020-01-15 2021-07-21 Essilor International A method and system for providing an eyeglasses frame
US11614638B1 (en) * 2020-01-15 2023-03-28 Meta Platforms Technologies, Llc Prescription optical element for selected head mounted device
US11768378B1 (en) 2020-01-15 2023-09-26 Meta Platforms Technologies, Llc Prescription optical element based on optical-mechanical profile
WO2021155200A1 (en) * 2020-01-29 2021-08-05 America's Collectibles Network, Inc. (Tennessee Corp.) System and method of bridging 2d and 3d assets for product visualization and manufacturing
US11181758B2 (en) 2020-02-07 2021-11-23 Facebook Technologies, Llc Eyewear frame customization using machine learning
US11783475B2 (en) * 2020-02-07 2023-10-10 Meta Platforms Technologies, Llc In ear device customization using machine learning
CN115088004A (zh) * 2020-02-12 2022-09-20 依视路国际公司 为给定人员预测光学设备
EP4106998A4 (en) 2020-02-19 2024-04-10 Univ Auburn METHOD FOR PRODUCING INDIVIDUALIZED PROTECTIVE CLOTHING BASED ON BODY SCANNING AND RESULTING PRODUCTS
DE102020104536A1 (de) 2020-02-20 2021-08-26 Carl Zeiss Vision International Gmbh Verfahren und Vorrichtungen zur dreidimensionalen Augenrekonstruktion
EP4106984A4 (en) * 2020-02-21 2024-03-20 Ditto Tech Inc EYEWEAR FRAME CONNECTION INCLUDING LIVE CONNECTION
CN111419537B (zh) * 2020-02-26 2022-04-19 东莞理工学院 一种个性化3d打印医用隔离眼罩的制备方法
EP3876026A1 (de) 2020-03-06 2021-09-08 Carl Zeiss Vision International GmbH Verfahren und vorrichtungen zum bestimmen des vorneigungswinkels
CN111507202B (zh) * 2020-03-27 2023-04-18 北京万里红科技有限公司 图像处理方法、装置及存储介质
GB2593702A (en) * 2020-03-30 2021-10-06 Fuel 3D Tech Limited Method and system for eyewear fitting
EP3889968A1 (en) 2020-04-01 2021-10-06 L'oreal Method for self-measuring facial or corporal dimensions, notably for the manufacturing of personalized applicators
WO2021203071A1 (en) * 2020-04-02 2021-10-07 Ocularex, Inc. Real time augmented reality selection of user fitted eyeglass frames for additive manufacture
US11507056B1 (en) 2020-04-06 2022-11-22 Lockheed Martin Corporation System and method for three-dimensional (3D) computer-aided manufacturing (CAM) of an ensemble of pilot equipment and garments
US11531655B2 (en) * 2020-04-15 2022-12-20 Google Llc Automatically improving data quality
KR20230002738A (ko) 2020-04-15 2023-01-05 와비 파커 인코포레이티드 참조 프레임을 사용하는 안경용 가상 시착 시스템
US20210322112A1 (en) * 2020-04-21 2021-10-21 Mazor Robotics Ltd. System and method for aligning an imaging device
WO2021221672A1 (en) * 2020-04-30 2021-11-04 Hewlett-Packard Development Company, L.P. Customized parametric models to manufacture devices
US20210342931A1 (en) * 2020-05-04 2021-11-04 Meazure Me Custom HD, LLC Methods and systems for automated selection and ordering of hair products
WO2021232049A1 (en) * 2020-05-13 2021-11-18 Bodygram, Inc. Generation of product mesh and product dimensions from user image data using deep learning networks
FR3111451B1 (fr) * 2020-06-12 2022-11-11 Acep Trylive Dispositif et procédé pour l’acquisition d’images d’une paire de lunettes
US11423567B2 (en) 2020-06-17 2022-08-23 Fotonation Limited Method and system to determine the location and/or orientation of a head
US11533443B2 (en) 2020-06-29 2022-12-20 Innovega, Inc. Display eyewear with adjustable camera direction
US11475242B2 (en) 2020-07-27 2022-10-18 Seiko Epson Corporation Domain adaptation losses
US11748942B2 (en) 2020-08-13 2023-09-05 Siemens Mobility Pty Ltd System and method for automatically generating trajectories for laser applications
US11500658B2 (en) 2020-08-24 2022-11-15 Visionworks of America, Inc. Systems and methods for using a transaction data structure for configuring and providing graphical user interfaces
WO2022044036A1 (en) * 2020-08-25 2022-03-03 Lenskart Solutions Pvt. Ltd., System and method to determine true facial feature measurements of a face in a 2d image
US11544846B2 (en) 2020-08-27 2023-01-03 James R. Glidewell Dental Ceramics, Inc. Out-of-view CT scan detection
US20220067954A1 (en) * 2020-08-31 2022-03-03 Koninklijke Philips N.V. Dynamic measurement optimization based on image quality
CN111988579B (zh) * 2020-08-31 2022-05-31 杭州海康威视系统技术有限公司 数据审核方法、系统和电子设备
CN112330793A (zh) * 2020-09-30 2021-02-05 安克创新科技股份有限公司 耳模三维模型的获取方法、耳机定制方法和计算设备
US11669880B2 (en) 2020-10-08 2023-06-06 Kiksar Technologies Private Limited System and method for customization of an eyewear
US11590555B2 (en) 2020-10-26 2023-02-28 Joseph Oshman Methods of creating bike rack hooks
US20220125553A1 (en) * 2020-10-27 2022-04-28 Marc Lemchen Methods for Direct Printing of Orthodontic and Dental Appliances onto the Teeth of a Patient
CN112606402A (zh) * 2020-11-03 2021-04-06 泰州芯源半导体科技有限公司 应用多参数解析的产品制造平台
CN112308073B (zh) * 2020-11-06 2023-08-25 中冶赛迪信息技术(重庆)有限公司 废钢火车装卸料转载状态识别方法、系统、设备及介质
US20220163822A1 (en) * 2020-11-24 2022-05-26 Christopher Chieco System and method for virtual fitting of eyeglasses
CN112788192B (zh) * 2020-12-21 2023-05-09 柏丽德珠宝(广州)有限公司 基于珠宝定制的图像处理方法及装置
US11543802B2 (en) * 2020-12-23 2023-01-03 Etsy, Inc. Multi-source item creation system
WO2022140796A1 (en) * 2020-12-23 2022-06-30 BLNG Corporation Systems and methods for generating jewelry designs and models using machine learning
US20210335504A1 (en) * 2020-12-29 2021-10-28 Abeer Ayoub System and method for comprehensive eye care
FR3118821B1 (fr) * 2021-01-13 2024-03-01 Fittingbox Procédé de détection et de suivi dans un flux vidéo d’un visage d’un individu portant une paire de lunettes
CN112883811B (zh) * 2021-01-25 2023-06-02 天津怡和嘉业医疗科技有限公司 一种人脸尺寸确定方法和装置
US20240069366A1 (en) 2021-01-28 2024-02-29 Essilor International Method and apparatus for determining a fit of a visual equipment
TWI789702B (zh) * 2021-02-09 2023-01-11 晶碩光學股份有限公司 鏡片建構方法
EP4043946A1 (en) * 2021-02-12 2022-08-17 Essilor International A device and method for automatically evaluating visual equipment
EP4047519A1 (en) 2021-02-22 2022-08-24 Carl Zeiss Vision International GmbH Devices and methods for processing eyeglass prescriptions
CN112801038B (zh) * 2021-03-02 2022-07-22 重庆邮电大学 一种多视点的人脸活体检测方法及系统
US20220300728A1 (en) * 2021-03-22 2022-09-22 Snap Inc. True size eyewear experience in real time
US11762219B2 (en) 2021-04-06 2023-09-19 Innovega, Inc. Automated contact lens design through image capture of an eye wearing a reference contact lens
US11546686B2 (en) 2021-04-06 2023-01-03 Dan Clark Audio, Inc. Headphone ear pad system
US11604368B2 (en) 2021-04-06 2023-03-14 Innovega, Inc. Contact lens and eyewear frame design using physical landmarks placed on the eye
CN112965983B (zh) * 2021-04-12 2022-05-17 邹可权 一种个性化罩杯数据库的建立方法及使用方法
DE102021109140A1 (de) 2021-04-13 2022-10-13 Bundesdruckerei Gmbh Verfahren und Anordnung zur optischen Erfassung eines Kopfes einer Person
US20220343534A1 (en) * 2021-04-23 2022-10-27 Google Llc Image based detection of display fit and ophthalmic fit measurements
US11704931B2 (en) * 2021-04-29 2023-07-18 Google Llc Predicting display fit and ophthalmic fit measurements using a simulator
USD990180S1 (en) 2021-04-30 2023-06-27 Specialized Bicycle Components, Inc. Bicycle saddle
KR20220150084A (ko) 2021-05-03 2022-11-10 주식회사 시리우스시스템 실시간 제조공정 지원 시스템
US11625094B2 (en) 2021-05-04 2023-04-11 Google Llc Eye tracker design for a wearable device
WO2022240902A1 (en) * 2021-05-10 2022-11-17 Carnelian Laboratories Llc Fit detection system for head-mountable devices
WO2022254409A1 (en) * 2021-06-04 2022-12-08 ResMed Pty Ltd System and method for providing customized headwear based on facial images
US20220390771A1 (en) * 2021-06-07 2022-12-08 Blink Technologies Inc. System and method for fitting eye wear
US20220398781A1 (en) * 2021-06-10 2022-12-15 EyesMatch Ltd. System and method for digital measurements of subjects
CN113515873B (zh) * 2021-07-07 2022-04-19 中国科学院重庆绿色智能技术研究院 一种基于量纲分析的金属增材制造熔池形状预测方法
JP2023009953A (ja) * 2021-07-08 2023-01-20 日本電気株式会社 分析装置、コミュニケーションシステム、分析方法、及びプログラム
KR20240011791A (ko) * 2021-07-15 2024-01-26 구글 엘엘씨 웨어러블 컴퓨팅 디바이스의 이미지 기반 피팅
DE102021118580A1 (de) 2021-07-19 2023-01-19 Nodety GmbH Verfahren zum Steuern von Produktionsvorrichtungen
CN113706470B (zh) * 2021-07-29 2023-12-15 天津中科智能识别产业技术研究院有限公司 一种虹膜图像分割方法、装置、电子设备及存储介质
US11915200B2 (en) * 2021-07-29 2024-02-27 Zazzle Inc. Collaborative video chat screen sharing using a digital product collaboration platform
US20230046950A1 (en) * 2021-08-12 2023-02-16 Google Llc Image based detection of fit for a head mounted wearable computing device
US20230103129A1 (en) * 2021-09-27 2023-03-30 ResMed Pty Ltd Machine learning to determine facial measurements via captured images
WO2023091043A1 (en) * 2021-11-17 2023-05-25 SmileDirectClub LLC Systems and methods for automated 3d teeth positions learned from 3d teeth geometries
CN114445554B (zh) * 2021-12-24 2023-02-10 广东时谛智能科技有限公司 一种鞋体专属定制方法、装置、电子设备及存储介质
US20230252655A1 (en) * 2022-02-09 2023-08-10 Google Llc Validation of modeling and simulation of wearable device
CN114488566B (zh) * 2022-02-15 2024-04-02 首都医科大学附属北京同仁医院 基于面部形态三维数据的眼镜框个性化设计方法
EP4249994A1 (en) * 2022-03-23 2023-09-27 Essilor International Improved detection of an outline of a spectacle frame
WO2023187730A1 (en) * 2022-03-31 2023-10-05 Soul Machines Limited Conversational digital character blending and generation
EP4254251A1 (en) * 2022-04-01 2023-10-04 BAE SYSTEMS plc Vehicle design tool
WO2023187311A1 (en) * 2022-04-01 2023-10-05 Bae Systems Plc Vehicle design tool
US20230360350A1 (en) * 2022-05-03 2023-11-09 Ditto Technologies, Inc. Systems and methods for scaling using estimated facial features
EP4300172A1 (en) 2022-07-01 2024-01-03 Fielmann AG Method for determining lens fitting parameters
KR102499864B1 (ko) * 2022-07-12 2023-02-16 (주)인터비젼 사용자 맞춤용 누진렌즈 설계 장치 및 그의 누진렌즈 설계 방법
US11538228B1 (en) * 2022-08-26 2022-12-27 Illuscio, Inc. Systems and methods for augmented reality viewing based on directly mapped point cloud overlays
US11893847B1 (en) 2022-09-23 2024-02-06 Amazon Technologies, Inc. Delivering items to evaluation rooms while maintaining customer privacy
US11733853B1 (en) * 2022-09-28 2023-08-22 Zazzle Inc. Parametric modelling and grading
CN117252866B (zh) * 2023-11-14 2024-02-13 山东迪格重工机械有限公司 基于图像识别的数控冲压成型自调节作业检测方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998052092A1 (fr) * 1997-05-16 1998-11-19 Hoya Corporation Systeme servant a elaborer des lunettes de façon personnalisee
JPH10320434A (ja) * 1997-05-16 1998-12-04 Nippon Telegr & Teleph Corp <Ntt> 眼鏡製造支援方法及びシステム
JP2007206211A (ja) * 2006-01-31 2007-08-16 Eyemetrics Japan Co Ltd 眼鏡装着シミュレーション方法及び装置
JP2011192189A (ja) * 2010-03-16 2011-09-29 Nikon Corp 眼鏡販売システム、レンズ企業端末、フレーム企業端末、眼鏡販売方法、および眼鏡販売プログラム

Family Cites Families (124)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4539585A (en) 1981-07-10 1985-09-03 Spackova Daniela S Previewer
JPS6180222A (ja) 1984-09-28 1986-04-23 Asahi Glass Co Ltd メガネ合せ方法及びメガネ合せ装置
EP0260710A3 (en) 1986-09-19 1989-12-06 Hoya Corporation Method of forming a synthetic image in simulation system for attachment of spectacles
KR910000591B1 (ko) 1986-10-30 1991-01-26 가부시기가이샤 도시바 안경 프레임 화상처리 기록방법 및 이를 실시하기 위한 시스템
JPH0535827A (ja) 1991-05-10 1993-02-12 Miki:Kk 眼鏡の選択および設計システム
JP3072398B2 (ja) * 1991-09-30 2000-07-31 青山眼鏡株式会社 眼鏡枠製造システム
DE4224922A1 (de) 1992-07-28 1994-02-03 Carlo Kuester Vorrichtung und Verfahren zur Verarbeitung personenspezifischer Parameter
US5280570A (en) 1992-09-11 1994-01-18 Jordan Arthur J Spectacle imaging and lens simulating system and method
JP2751145B2 (ja) 1993-12-15 1998-05-18 株式会社三城 眼鏡形状デザイン設計システム
ES2111478B1 (es) 1995-10-02 1998-11-01 Tovar Romero Jaime Sistema de diseño y seleccion de gafas mediante procesamiento digital de imagenes.
US5592248A (en) 1995-11-16 1997-01-07 Norton; Ross A. Computerized method for fitting eyeglasses
US6241355B1 (en) * 1996-03-29 2001-06-05 Brian A. Barsky Computer aided contact lens design and fabrication using spline surfaces
US5724258A (en) * 1996-05-09 1998-03-03 Johnson & Johnson Vision Products, Inc. Neural network analysis for multifocal contact lens design
US5983201A (en) 1997-03-28 1999-11-09 Fay; Pierre N. System and method enabling shopping from home for fitted eyeglass frames
AU753506B2 (en) 1998-02-03 2002-10-17 Tsuyoshi Saigo Simulation system for wearing glasses
US6144388A (en) * 1998-03-06 2000-11-07 Bornstein; Raanan Process for displaying articles of clothing on an image of a person
EP1027681A4 (en) * 1998-05-13 2001-09-19 Acuscape International Inc METHOD AND DEVICE FOR GENERATING 3D MODELS OF MEDICAL IMAGES
US6563499B1 (en) 1998-07-20 2003-05-13 Geometrix, Inc. Method and apparatus for generating a 3D region from a surrounding imagery
US6095650A (en) 1998-09-22 2000-08-01 Virtual Visual Devices, Llc Interactive eyewear selection system
WO2000060513A1 (en) * 1999-04-01 2000-10-12 Max Hats, Ltd. Integrated product and process for mass customization of goods one item at a time
US7062454B1 (en) 1999-05-06 2006-06-13 Jarbridge, Inc. Previewing system and method
US8046270B2 (en) * 2000-05-19 2011-10-25 Eastman Kodak Company System and method for providing image products and/or services
WO2001032074A1 (en) 1999-11-04 2001-05-10 Stefano Soatto System for selecting and designing eyeglass frames
EP1136869A1 (en) 2000-03-17 2001-09-26 Kabushiki Kaisha TOPCON Eyeglass frame selecting system
WO2001079918A1 (fr) 2000-04-19 2001-10-25 Aoyama Gankyo Kabushikikaisha Procede de production d'une monture de lunettes
EP1299787A4 (en) * 2000-05-18 2005-02-02 Visionix Ltd BRASS ADJUSTMENT SYSTEM AND USEFUL ADAPTATION PROCEDURES
US6535223B1 (en) 2000-05-31 2003-03-18 Schmidt Laboratories, Inc. Method and system for determining pupiltary distant and element height
CA2382075A1 (en) 2000-06-16 2001-12-27 Michael P. Shanley Method of measuring and sizing objects from an image of a human face using iris size
US6791584B1 (en) 2000-09-05 2004-09-14 Yiling Xie Method of scaling face image with spectacle frame image through computer
US6664956B1 (en) 2000-10-12 2003-12-16 Momentum Bilgisayar, Yazilim, Danismanlik, Ticaret A. S. Method for generating a personalized 3-D face model
US6792401B1 (en) 2000-10-31 2004-09-14 Diamond Visionics Company Internet-based modeling kiosk and method for fitting and selling prescription eyeglasses
AU2002214291A1 (en) 2000-11-24 2002-06-03 Vision Optic Co., Ltd. Eyeglasses order/sale system over network and its method
KR100417923B1 (ko) * 2000-11-29 2004-02-11 이성균 데이터통신망을 매개로 한 안경맞춤시스템 및 그 운영방법
US7016824B2 (en) * 2001-02-06 2006-03-21 Geometrix, Inc. Interactive try-on platform for eyeglasses
DE10106562B4 (de) 2001-02-13 2008-07-03 Rodenstock Gmbh Verfahren zur Demonstration des Einflusses einer bestimmten Brillenfassung und der in diese Brillenfassung eingesetzten optischen Gläser
JP2002279295A (ja) * 2001-03-21 2002-09-27 Minolta Co Ltd 加工データの提供方法
US7103211B1 (en) 2001-09-04 2006-09-05 Geometrix, Inc. Method and apparatus for generating 3D face models from one camera
US20030065255A1 (en) * 2001-10-01 2003-04-03 Daniela Giacchetti Simulation of an aesthetic feature on a facial image
US6682195B2 (en) 2001-10-25 2004-01-27 Ophthonix, Inc. Custom eyeglass manufacturing method
US7434931B2 (en) * 2001-10-25 2008-10-14 Ophthonix Custom eyeglass manufacturing method
US7287853B2 (en) 2002-01-04 2007-10-30 Vision Optic Co., Ltd. Spectacle and contact lens selecting system and method thereof
KR100523742B1 (ko) * 2002-03-26 2005-10-26 김소운 3차원 안경 시뮬레이션 시스템 및 방법
DE10216824B4 (de) 2002-04-16 2006-03-02 Thomas Doro Verfahren und Vorrichtung zum Konstruieren einer Maßbrille
US20040004633A1 (en) 2002-07-03 2004-01-08 Perry James N. Web-based system and method for ordering and fitting prescription lens eyewear
FR2842977A1 (fr) 2002-07-24 2004-01-30 Total Immersion Procede et systeme permettant a un utilisateur de melanger en temps reel des images de synthese avec des images video
DE10323811A1 (de) * 2003-05-23 2005-01-13 Bwg Bergwerk- Und Walzwerk-Maschinenbau Gmbh Verfahren zum kontinuierlichen Zugrecken von metallischen Bändern und Zugreckanlage
JP4369694B2 (ja) 2003-07-18 2009-11-25 東海旅客鉄道株式会社 コンクリート構造物の保護方法
US6994327B2 (en) 2003-08-13 2006-02-07 Certainteed Corporation Cap and base assembly for a fence post
US7512255B2 (en) * 2003-08-22 2009-03-31 Board Of Regents, University Of Houston Multi-modal face recognition
US20050190264A1 (en) 2003-09-12 2005-09-01 Neal Michael R. Method of interactive system for previewing and selecting eyewear
JP4186766B2 (ja) 2003-09-12 2008-11-26 セイコーエプソン株式会社 眼鏡レンズの製造システム及び眼鏡レンズの製造方法
FR2860887B1 (fr) 2003-10-13 2006-02-03 Interactif Visuel Systeme Ivs Mesure de configuration du visage et de montures de lunettes placees sur ce visage a une efficacite amelioree
JP2007531559A (ja) * 2004-02-20 2007-11-08 オフソニックス,インク 波面収差を解析するシステムおよび方法
US7154529B2 (en) 2004-03-12 2006-12-26 Hoke Donald G System and method for enabling a person to view images of the person wearing an accessory before purchasing the accessory
US7804997B2 (en) 2004-06-10 2010-09-28 Technest Holdings, Inc. Method and system for a three dimensional facial recognition system
JP2006113425A (ja) 2004-10-18 2006-04-27 Yasumori Kanazawa 眼鏡供給システム
FR2885231A1 (fr) 2005-04-29 2006-11-03 Lorraine Sole Soc D Optique Sa Procedes et dispositifs permettant de faciliter le choix d'une monture de lunettes
US7607776B1 (en) 2005-10-24 2009-10-27 James Waller Lambuth Lewis Digital eye bank for virtual clinic trials
US7487116B2 (en) 2005-12-01 2009-02-03 International Business Machines Corporation Consumer representation rendering with selected merchandise
US20070244722A1 (en) 2006-04-12 2007-10-18 Gary Nathanael Wortz Method for determining refractive state and providing corrective eyewear
EP1862110A1 (en) 2006-05-29 2007-12-05 Essilor International (Compagnie Generale D'optique) Method for optimizing eyeglass lenses
US20080178088A1 (en) * 2006-07-27 2008-07-24 Personics Holdings Inc. Method and device of customizing headphones
AU2007308758B2 (en) 2006-10-26 2014-01-30 Carl Zeiss Vision Australia Holdings Limited Ophthalmic lens dispensing method and system
ES2467152T3 (es) * 2007-01-25 2014-06-12 Rodenstock Gmbh Procedimiento para determinar los puntos de referencia de lejos y de cerca
US20080198328A1 (en) 2007-02-16 2008-08-21 Seriani Joseph S System and method self enabling customers to obtain refraction specifications for, and purchase of, previous or new fitted eyeglasses
US20110071804A1 (en) 2007-02-21 2011-03-24 Yiling Xie Method And The Associated Mechanism For 3-D Simulation Stored-Image Database-Driven Spectacle Frame Fitting Services Over Public Network
US7665843B2 (en) 2007-02-21 2010-02-23 Yiling Xie Method and the associate mechanism for stored-image database-driven spectacle frame fitting services over public network
WO2008130906A1 (en) * 2007-04-17 2008-10-30 Mikos, Ltd. System and method for using three dimensional infrared imaging to provide psychological profiles of individuals
EP2037314B1 (en) 2007-12-28 2021-12-01 Essilor International A method and computer means for choosing spectacle lenses adapted to a frame
EP2031434B1 (en) 2007-12-28 2022-10-19 Essilor International An asynchronous method for obtaining spectacle features to order
WO2009097122A1 (en) * 2008-01-28 2009-08-06 Netvirta, Llc Simple techniques for three-dimensional modeling
US20090319337A1 (en) 2008-06-09 2009-12-24 Yiling Xie Optical product network via Internet
EP2161611A1 (en) * 2008-09-04 2010-03-10 Essilor International (Compagnie Générale D'Optique) Method for optimizing the settings of an ophtalmic system
DE102009004380B4 (de) 2009-01-12 2012-04-05 Rodenstock Gmbh Verfahren zum Herstellen einer individuellen Brillenfassung, Computerprogrammprodukt, Verwendung und Brillenfassungsherstellungsgerät
FR2945365B1 (fr) 2009-05-11 2011-06-24 Acep France Procede et systeme de selection en ligne d'une monture de lunettes virtuelle
US20110022545A1 (en) * 2009-07-24 2011-01-27 A Truly Electric Car Company Re-inventing carmaking
GB0913311D0 (en) 2009-07-30 2009-09-02 Nova Resources S A R L Eyeglass frames
GB0920129D0 (en) 2009-11-17 2009-12-30 Nova Resources S A R L Correct scaling for superimposed images
FR2955409B1 (fr) 2010-01-18 2015-07-03 Fittingbox Procede d'integration d'un objet virtuel dans des photographies ou video en temps reel
FR2957511B1 (fr) 2010-03-19 2021-09-24 Fittingbox Procede et dispositif de mesure de distance inter-pupillaire
US9959453B2 (en) * 2010-03-28 2018-05-01 AR (ES) Technologies Ltd. Methods and systems for three-dimensional rendering of a virtual augmented replica of a product image merged with a model image of a human-body feature
US8459792B2 (en) 2010-04-26 2013-06-11 Hal E. Wilson Method and systems for measuring interpupillary distance
KR101859932B1 (ko) * 2010-06-29 2018-05-21 조지 프레이 환자 맞춤형 수술 가이드 및 이를 이용하기 위한 방법
US9519396B2 (en) * 2010-09-28 2016-12-13 Apple Inc. Systems, methods, and computer-readable media for placing an asset on a three-dimensional model
CN102073759A (zh) * 2010-12-29 2011-05-25 温州大学 一种基于脸型特征参数的眼镜配置控制方法
US20130088490A1 (en) 2011-04-04 2013-04-11 Aaron Rasmussen Method for eyewear fitting, recommendation, and customization using collision detection
US8622545B2 (en) * 2011-07-26 2014-01-07 Shaw Vision Inc. Spectacle lenses and method of making same
KR20130032117A (ko) * 2011-09-22 2013-04-01 주식회사 유비케어 약품복약 정보 제공 장치 및 방법
FR2980681A3 (fr) 2011-09-29 2013-04-05 Fittingbox Procede de determination des mesures oculaires et optiques d'interet pour la fabrication et le montage de verre de lunettes correcteurs, a l'aide d'une camera en contexte non controle
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US20130187916A1 (en) 2012-01-25 2013-07-25 Raytheon Company System and method for compression and simplification of video, pictorial, or graphical data using polygon reduction for real time applications
US8708494B1 (en) 2012-01-30 2014-04-29 Ditto Technologies, Inc. Displaying glasses with recorded images
FR2987920B1 (fr) 2012-03-08 2018-03-02 Essilor International Procede de determination d'une caracteristique geometrico-morphologique, de posture ou comportementale d'un porteur d'une paire de lunettes
FR2988494B1 (fr) 2012-03-20 2015-04-03 Essilor Int Methode de fabrication d'une lentille ophtalmique correctrice de lunettes personnalisee pour un porteur
US20150061166A1 (en) 2012-04-03 2015-03-05 Luxexcel Holding B.V. Device and method for producing custom-made spectacles
US20130335416A1 (en) * 2012-05-23 2013-12-19 1-800 Contacts, Inc. Systems and methods for generating a 3-d model of a virtual try-on product
US20130314413A1 (en) 2012-05-23 2013-11-28 1-800 Contacts, Inc. Systems and methods for scaling a three-dimensional model
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US9483853B2 (en) 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US9311746B2 (en) 2012-05-23 2016-04-12 Glasses.Com Inc. Systems and methods for generating a 3-D model of a virtual try-on product
NL2010009C2 (en) 2012-12-19 2014-06-23 Sfered Intelligence B V Method and device for determining user preferred dimensions of a spectacle frame.
US20140240470A1 (en) * 2013-02-28 2014-08-28 Codi Comercio Design Industrial, Lda Method, system and device for improving optical measurement of ophthalmic spectacles
US20140253707A1 (en) * 2013-03-11 2014-09-11 Dasa V. Gangadhar Automated acquisition of eyeglasses
US9429773B2 (en) 2013-03-12 2016-08-30 Adi Ben-Shahar Method and apparatus for design and fabrication of customized eyewear
US9470911B2 (en) 2013-08-22 2016-10-18 Bespoke, Inc. Method and system to create products
US20150127363A1 (en) 2013-11-01 2015-05-07 West Coast Vision Labs Inc. Method and a system for facilitating a user to avail eye-care services over a communication network
EP2887131A1 (de) 2013-12-20 2015-06-24 Jakob Schmied Verfahren zur Herstllung einer individuell an eine Person angepassten Brille sowie Brille
FR3016051B1 (fr) 2014-01-02 2017-06-16 Essilor Int Procede de determination d'au moins un parametre geometrique d'une monture personnalisee de lunettes et procede de determination de la monture personnalisee associe
US9810927B1 (en) 2014-03-19 2017-11-07 3-D Frame Solutions LLC Process and system for customizing eyeglass frames
US20150277155A1 (en) 2014-03-31 2015-10-01 New Eye London Ltd. Customized eyewear
US10331111B2 (en) 2014-04-30 2019-06-25 Materialise N.V. Systems and methods for customization of objects in additive manufacturing
EP2946914A1 (en) 2014-05-21 2015-11-25 Mount Bros LLC Method of manufacturing eyeglass frames, apparatus for carrying out the method and frames obtained with such method
FR3024911B1 (fr) 2014-08-14 2017-10-13 Oyyo Procede d'essayage et de fabrication de lunettes
US20180001581A1 (en) 2015-01-14 2018-01-04 Jayant K. Patel Compositions, systems and methods for patient specific ophthalmic device
US9341867B1 (en) 2015-01-16 2016-05-17 James Chang Ho Kim Methods of designing and fabricating custom-fit eyeglasses using a 3D printer
US10194799B2 (en) 2015-03-09 2019-02-05 Sanovas Intellectual Property, Llc Robotic ophthalmology
US11086148B2 (en) 2015-04-30 2021-08-10 Oakley, Inc. Wearable devices such as eyewear customized to individual wearer parameters
NL2014891B1 (nl) 2015-05-29 2017-01-31 Maydo B V Werkwijze voor het vervaardigen van een brilmontuur dat is aangepast aan een brildrager.
FR3038077A1 (fr) 2015-06-26 2016-12-30 Frederic Clodion Dispositif de prises de vues en 3d et de mesures du visage pour la realisation de lunettes de vue, ou lunettes de soleil, sur mesure
FR3044429B1 (fr) 2015-11-26 2018-01-05 Ak Optique Procede de fabrication d'une monture de lunettes sur mesure
DE102016106121A1 (de) 2016-04-04 2017-10-05 Carl Zeiss Ag Verfahren und Vorrichtung zum Bestimmen von Parametern zur Brillenanpassung
BR102016009093A2 (pt) 2016-04-22 2017-10-31 Sequoia Capital Ltda. Equipment for acquisition of 3d image data of a face and automatic method for personalized modeling and manufacture of glass frames
CN107589562A (zh) 2017-09-20 2018-01-16 厦门云镜视界设计有限公司 一种眼镜定制方法
CN107498846A (zh) 2017-09-20 2017-12-22 厦门云镜视界设计有限公司 一种基于3d模型的眼镜制作方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998052092A1 (fr) * 1997-05-16 1998-11-19 Hoya Corporation Systeme servant a elaborer des lunettes de façon personnalisee
JPH10320434A (ja) * 1997-05-16 1998-12-04 Nippon Telegr & Teleph Corp <Ntt> 眼鏡製造支援方法及びシステム
JP2007206211A (ja) * 2006-01-31 2007-08-16 Eyemetrics Japan Co Ltd 眼鏡装着シミュレーション方法及び装置
JP2011192189A (ja) * 2010-03-16 2011-09-29 Nikon Corp 眼鏡販売システム、レンズ企業端末、フレーム企業端末、眼鏡販売方法、および眼鏡販売プログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023068051A1 (ja) * 2021-10-19 2023-04-27 カシオ計算機株式会社 表示制御方法、プログラム及び表示制御装置
JP2023061308A (ja) * 2021-10-19 2023-05-01 カシオ計算機株式会社 表示制御方法、プログラム及び表示制御装置
JP7380664B2 (ja) 2021-10-19 2023-11-15 カシオ計算機株式会社 表示制御方法、プログラム及び表示制御装置
JP2023078857A (ja) * 2021-11-26 2023-06-07 アイジャパン株式会社 アイウェア仮想試着システム、アイウェア選定システム、アイウェア試着システムおよびアイウェア分類システム

Also Published As

Publication number Publication date
US20220350174A1 (en) 2022-11-03
US20150154679A1 (en) 2015-06-04
US20170269385A1 (en) 2017-09-21
US20150055086A1 (en) 2015-02-26
US10222635B2 (en) 2019-03-05
CN108537628B (zh) 2022-02-01
US9529213B2 (en) 2016-12-27
US11914226B2 (en) 2024-02-27
AU2014308590B2 (en) 2016-04-28
US11428958B2 (en) 2022-08-30
CA2921938C (en) 2016-12-20
AU2016208357B2 (en) 2018-04-12
US10031351B2 (en) 2018-07-24
EP3036701A4 (en) 2017-01-18
US20220357600A1 (en) 2022-11-10
US20150154322A1 (en) 2015-06-04
US20200285081A1 (en) 2020-09-10
US20150055085A1 (en) 2015-02-26
CN105637512A (zh) 2016-06-01
AU2014308590A1 (en) 2016-03-03
JP6099232B2 (ja) 2017-03-22
JP2016537716A (ja) 2016-12-01
US20180299704A1 (en) 2018-10-18
US20170068121A1 (en) 2017-03-09
AU2016208357A1 (en) 2016-08-11
US20160062151A1 (en) 2016-03-03
US9470911B2 (en) 2016-10-18
US20160062152A1 (en) 2016-03-03
KR101821284B1 (ko) 2018-01-23
JP6542744B2 (ja) 2019-07-10
US10031350B2 (en) 2018-07-24
WO2015027196A1 (en) 2015-02-26
US10459256B2 (en) 2019-10-29
CN105637512B (zh) 2018-04-20
US11867979B2 (en) 2024-01-09
CA2921938A1 (en) 2015-02-26
CN108537628A (zh) 2018-09-14
US9304332B2 (en) 2016-04-05
KR20160070744A (ko) 2016-06-20
US20190146246A1 (en) 2019-05-16
US10451900B2 (en) 2019-10-22
US11428960B2 (en) 2022-08-30
EP3036701A1 (en) 2016-06-29
US20150212343A1 (en) 2015-07-30
KR102207026B1 (ko) 2021-01-22
US10698236B2 (en) 2020-06-30
US20150154678A1 (en) 2015-06-04
US9703123B2 (en) 2017-07-11
KR20180009391A (ko) 2018-01-26

Similar Documents

Publication Publication Date Title
US11914226B2 (en) Method and system to create custom, user-specific eyewear
CN114730101A (zh) 使用面部特征的3d扫描来调整库存眼镜框架的系统和方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170808

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170808

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180903

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20181130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181212

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190613

R150 Certificate of patent or registration of utility model

Ref document number: 6542744

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250