JP2020515952A - 年齢容姿シミュレーションのための方法 - Google Patents

Abstract

消費者の年齢容姿シミュレーションのための方法及びシステムが提供される。方法の少なくとも１つの実施形態は、消費者の画像（消費者の顔を含む）を受信するステップと、消費者の民族性を決定するステップと、患者の年齢を決定するステップと、消費者の所望のシミュレーションされた年齢を決定するステップと、を含む。次いで、消費者の所望のシミュレーションされた年齢を表すための変更画像が作成され得、画像を変更することは、統計的民族エイジングモデルを利用して顔の形状、顔の色、及び顔の肌合いのうちの少なくとも１つを変更することを含む。変更画像、第１の変更画像が、表示するために、消費者に提供され得る。

Description

本出願は、一般に、年齢容姿シミュレーションのための方法に関し、より具体的には、統計モデルを使用して個人の年齢をシミュレーションするために、民族性、年齢、及び性別の入力を利用して、顔の形状、色、及び／又は肌合いを予測する方法に関する。

若々しい見た目は、成人にとってほぼ共通の願望である。そのため、今日の市場には、エイジングの徴候を減らすことが期待される多数の製品が存在している。これらの製品の多くは、シワのある容姿を緩和するためにいくらかの効果を有するが、これらの解決策は、典型的には、個人のニーズに合わせてカスタマイズされていない。また、年齢予測及び進行のために現在コンピューティングシステムが開発されているが、これらのプログラムは、複数の基準に基づいて、年齢容姿を正確に決定する、かつ／又は進行させる能力を欠いている。

一例として、米国特許第６，７３４，８５８号（「‘８５８特許」）には、製品効能を実証するためにコンピュータエイジングを使用するための方法及び装置が記載されている。‘８５８特許には、画像を所定時間まで漸進的にエイジングさせることができ、そのエイジングに対する製品の効果に関する決定を行うことができることが開示されている。しかし、‘８５８特許は、エイジングの民族の違い、すなわち、個人がエイジングするにつれて個人の顔に生じる、色、形状、肌合いなどへの民族に依存した変化を考慮する能力に対処することができない。

別の例として、国際出願第２００６／００５９１７号（「‘９１７公開」）には、人の顔の可能なエイジングのためのシステム及び／又は方法が記載されている。具体的には、‘９１７公開には、画像内の個人の年齢を特定し修正するために、ベクトル表現を利用することができることが開示されている。いくつかの実施形態は、同じ家族の世代間の関係を決定する。しかし、‘９１７公開は、民族に依存する色の変化、形状の変化、及び／又はこの文献に記載のアルゴリズムを正確に実行するための要因に関する精度を提供することができない。

米国特許第６，７３４，８５８号 国際出願第２００６／００５９１７号

従来のモデリング技法は、漸進的な形状、色、及び（最も困難な）肌合いの経時的な変化の現実感を維持しながら、開始年齢から少なくとも１つの中間年齢を通って最終年齢まで個人を好適にエイジング又はディエイジングさせたることができない。したがって、年齢容姿の変化を予測するエイジングモデル及び方法を改良することが必要とされている。

個人の年齢容姿シミュレーションのための方法が提供される。この方法は、個人の顔を含む個人の画像を受信するステップと、個人の民族性を決定するステップと、個人の年齢を決定するステップと、を含む。いくつかの実施形態は、個人の所望のシミュレーションされた年齢を決定するステップと、個人の所望のシミュレーションされた年齢を表すように画像を変更することによって変更画像を作成するステップと、を含み、画像を変更するステップは、民族エイジングモデルを使用して、顔の形状、顔の色、及び顔の肌合いのうちの少なくとも１つを変更することを含む。いくつかの例では、方法はまた、表示するために第１の変更画像をユーザに提供するステップを含む。

いくつかの例では、方法は、個人の画像を受信するステップを含み、画像は個人の顔を含み、画像は個人の顔の３次元画像として構成される。

いくつかの例では、変更画像を作成することは、統計的民族形状モデルを使用してランドマークを変更すること、統計的民族肌合いモデルを使用して肌合いを変更すること、又は統計的民族色モデルを使用して色を変更することを含む。

上述の方法の実装に関係する装置及び非一時的コンピュータ可読媒体もまた、本明細書で提供される。

年齢容姿シミュレーションのためのシステムを示す。 エイジング及び／又はディエイジング容姿シミュレーションを提供するためのユーザインターフェースを示す。 年齢容姿シミュレーションのために個人の画像を捕捉するためのユーザインターフェースを示す。 個人情報（例えば、性別、民族性、年齢）を受信するためのユーザインターフェースを示す。 年齢容姿シミュレーションを提供するためのユーザインターフェースを示す。 統計的民族エイジングモデルに基づいて、年齢によるランドマークの軌跡（すなわち、形状）の変化を表示するためのインターフェースを示す。 統計的民族肌合いモデルを使用した年齢容姿予測／シミュレーションに基づいて顔の特徴のうち肌合いを表示するためのインターフェースを示す。 統計的民族色モデルを使用して、年齢容姿シミュレーションのために画像に色の変化を適用するためのインターフェースを示す。 統計的な民族形状及び／又は色モデル（単数又は複数）を使用して、年齢容姿シミュレーションのために形状及び／又は色の変化を画像に適用するためのユーザインターフェースを示す。 統計的民族肌合いモデルを使用して、年齢容姿シミュレーションのために複数のマルチレベルのモデルの肌合いを提供するための管理者インターフェースを示す。 統計的民族形状、色、肌合い、及び／又は臨床製品有効性モデル（単数又は複数）を使用して、年齢容姿シミュレーションのために、形状、色、肌合い、及び／又は製品有効性の変化を画像に表示するためのユーザインターフェースを示す。 製品を購入するためのユーザインターフェースを示す。 予測されたエイジングの影響に対抗し、追跡能力を遂行するために詳細な製品治療処方計画を提供するためのユーザインターフェースを示す。 年齢容姿シミュレーションのフローチャートを示す。 年齢容姿予測のためのリモートコンピューティング装置を示す。

「消費者」は、本明細書における年齢容姿予測方法及びシステムを美容（すなわち、非医学的）目的のために使用する人物を指す。

本明細書における「美容」とは、人体の部位に所望の視覚的効果を与える非医学的方法を意味する。視覚的な美容効果は、一時的、半永久的、又は永久的なものであってもよい。

「化粧料」とは、美容効果（例えば、クレンジング、美化、魅力促進及び／又は容姿変更）をもたらすために哺乳動物の身体又はその任意の部分に擦り込む、注ぐ、振りかける、噴霧する、導入する、又は他の方法で塗布することを目的とした任意の物質及びその任意の成分を意味する。美容物質は、アメリカ食品医薬品局によって「一般的に安全と認められる」（Generally Recognized as Safe）（ＧＲＡＳ）物質及び食品添加物を含み得る。

「化粧品製品」は、化粧料（例えば、肌保湿剤、ローション、香水、口紅、爪磨き、眼及び顔用メークアップ用前処理、クレンジングシャンプー、ヘアカラー、剃毛準備、及び脱臭剤）を含む製品である。

「患者」とは、本明細書における年齢容姿予測方法及びシステムを医療又は医学的に関連する目的のために使用する人物を指す。

「スキンケア」は、肌状態を調節及び／又は改善することを意味する。いくつかの非限定的な例としては、より滑らかで、より均一な外観及び／若しくは感触を与えることによって肌の外観及び／又は手触りを改善すること、肌の１つ以上の層の厚さを厚くすること、肌の弾性又は弾力性を改善すること、肌のハリを改善すること、肌の脂っぽい、てかてかした、かつ／若しくはくすんだ外観を緩和し、肌の水和状態若しくは保湿を改善し、小ジワ及び／若しくはシワの外観を改善し、肌剥脱若しくは落屑を改善し、肌を膨化させ、肌バリア特性を改善し、肌色を改善し、赤み、にきび、酒さ若しくは肌の大きなシミの外観を緩和し、かつ／又は肌の明るさ、つや、若しくは透明感を改善することが挙げられる。

「スキンケア活性物質」は、肌に塗布すると、肌又は肌の中に通常見られる細胞の一種に急性の効能及び／又は慢性の効能をもたらす、化粧料を意味する。スキンケア活性物質は、肌又はそれに関連する細胞を調節及び／又は改善する（例えば、肌の弾性、肌水分量、肌のバリア機能、及び／又は細胞代謝を改善する）ことができる。

「スキンケア組成物」は、スキンケア活性物質を含み、肌の状態を調節及び／又は改善する組成物を意味する。

「治療」は、製品、スキンケア計画、又は肌の処置の適用を含む、任意の化粧品又は医療用スキンケアを指す。

本明細書における年齢容姿シミュレーションのためのシステム及び方法を、エイジング及び／又はディエイジング予測及び／又はシミュレーション体験をユーザに提供するように構成することができる。いくつかの例では、ユーザは、性別、民族性、及び／又は年齢情報と共に自身の画像を提供し、これにより、ユーザがどのようにエイジングするかを視覚的に伝えるために、経験的／統計的、年齢による顔の形状及び顔色（肌合い及び／又は色）データモデルと組み合わせることができる。このような見通しにより、ユーザは、スキンケア治療及び／又は処置について選択を行い、自身が所望する肌の容姿効能をもたらすことができる。追加的に又は代替的に、これらのモデルは、臨床に基づく有効性データと組み合わせたとき、予想される結果（平均レスポンダー、最良レスポンダーなど）をシミュレーションするために使用することができ、それにより、ユーザが好適な治療に対して見識のある選択を行うのを支援することができる。用語「シミュレーション」は、本明細書に記載するような、２Ｄ及び３Ｄ空間の両方における機能性、並びに画像の投影（２Ｄ投影など）の予測性を含む。

統計的民族モデルを、少なくとも１つの顔の特徴、少なくとも１つの年齢特徴、及び／又は形状に適用し、個人のエイジング／ディエイジングをシミュレーションしてもよい。治療のシミュレーション適用後、個人の新たなシミュレーションされた容姿を示すユーザの画像を提供することができる。このプロセスはまた、時間の経過のシミュレーション（例えば、ある人が治療の有無によって今から１０年でどのように見えるか）と併せて行われてもよい。

図１は、年齢容姿シミュレーションのための例示的なコンピューティング環境を示す。図１に示すように、ネットワーク１００は、ユーザコンピューティング装置１０２及びリモートコンピューティング装置１０４に連結されている。ネットワーク１００は、有線及び／又は無線部分の任意の組み合わせを有する任意の広域ネットワーク、ローカルネットワークなどを含んでもよい。一例として、ネットワーク１００は、インターネット、公衆スイッチ電話ネットワーク、セルラーネットワーク（３Ｇ、４Ｇ、ＬＴＥなど）を含んでもよい。同様に、ネットワーク１００は、ローカルエリアネットワーク、Ｗｉ−Ｆｉ、Ｂｌｕｅｔｏｏｔｈネットワーク、Ｚｉｇｂｅｅ、近距離通信、これらの組み合わせなどのローカルネットワークを含んでもよい。

ユーザコンピューティング装置１０２は、画像を捕捉する、リモートコンピューティング装置１０４と通信する、かつ／又は１つ以上のユーザインターフェースをユーザに提供するのに好適な任意のコンピューティング装置として構成されてもよい。例えば、ユーザコンピューティング装置１０２は、スマートフォン、パーソナルコンピュータ、ラップトップ、タブレット、又はキオスクであってもよい。図１にモバイル装置として示されているが、ユーザコンピューティング装置１０２はそのように限定されない。例えば、ユーザコンピューティング装置１０２は、本明細書に記載する解析及びデータを提供する、並びに製品、印刷処理を施す、かつ／又は他の有形物を提供する、並びに、有形物の引き換えに支払いを受信するように構成されてもよい。

ユーザコンピューティング装置１０２は、デジタル画像を捕捉するための画像捕捉装置１０６を含んでもよい。以下により詳細に記載するように、捕捉された画像は、３Ｄ及び／又は２Ｄ画像を含んでもよい。このため、画像捕捉装置１０６は、所望のデータを捕捉するための１つ以上の画像センサ及び／又はレンズを含んでもよい。

リモートコンピューティング装置１０４は、ネットワーク１００を介してユーザコンピューティング装置１０２と通信するように構成されてもよい。このため、リモートコンピューティング装置１０４は、サーバ、パーソナルコンピュータ、スマートフォン、ラップトップ、ノートブック、キオスク、タブレット、拡張／仮想現実ヘッドセットなどを含んでもよい。リモートコンピューティング装置１０４は、例えば、図１に示すようなメモリ構成要素１４０及び他の構成要素を含んでもよく、それは、年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ、及び民族エイジングモデルロジック１４４ｃを記憶する。以下により詳細に記載するように、年齢シミュレーションロジック１４４ａは、個人の画像を解析し、年齢、容姿、又は民族性予測を実行するように構成されてもよい。インターフェースロジック１４４ｂは、ユーザコンピューティング装置１０２に提供される１つ以上のユーザインターフェースを作成するように構成されてもよい。民族エイジングモデルロジック１４４ｃは、本明細書に記載する民族モデルのうちの１つ以上を実行するように構成されてもよい。いくつかの例では、年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ、及び／又は民族エイジングモデルロジック１４４ｃは、ユーザコンピューティング装置自体１０２及び／又は図１に示されていない別のコンピューティング装置の記載された機能の一部又は全部を実行してもよい。

本明細書に記載するシステム及び方法は、化粧品の分野（例えば、スキンケア用）の消費者又は医療分野の患者に利用され得る。集合的に、患者及び／又は消費者は、本明細書において「個人（単数又は複数）」と呼ばれる場合がある。医療分野に関連する実施形態は、医療専門家による操作を必要とする製品及び処置などの、医学的状態の治療又は医学的に関連する審美的治療のための製品及び／又はそれに関連する方法を含み、例えば、ヘルスケア従事者による手術を必要とする製品及び処置と、医療診断の過程でヘルスケア従事者が使用する製品と、ヘルスケア従事者による治療を必要とする疾患又は他の医学的状態の治療に使用される製品と、処方薬で販売されている製品と、美容／整形外科医、皮膚科医、一般的な医師、医療用スパスタッフ、及び製薬会社の活動と、である。

図２は、年齢容姿シミュレーションを提供するための例示的なユーザインターフェース２３０を示す。図示するように、ユーザインターフェース２３０は、年齢予測器オプション２３２、年齢シミュレータオプション２３４、製品オプション２３６、及び治療オプション２３８を含んでもよい。年齢予測器オプション２３２の選択に応じて、モデルは、より詳細に記載するように、年齢容姿予測を提供するように構成され得る。年齢シミュレータオプション２３４の選択に応じて、個人のエイジングをシミュレーションするための１つ以上のユーザインターフェースが提供され得る。製品オプション２３６の選択に応じて、個人用の１つ以上の製品がユーザに推奨され得る。治療オプション２３８の選択に応じて、個人用の１つ以上の治療がユーザに推奨され得る。いくつかの例では、ユーザインターフェース２３０は、民族性予測器オプション（図示せず）を含んでもよく、これにより、ユーザは、民族的容姿予測を選択することができる。

本明細書に記載する方法は、個人の画像を捕捉するステップと、個人の年齢シミュレーションを提供するステップと、ユーザと相互作用するステップと、を含み得ることを理解されたい。したがって、個人は、画像が捕捉され、かつ／又はエイジングシミュレーションが実行される任意の人物を含み得る。ユーザは、ユーザコンピューティング装置１０２の任意のユーザを含んでもよい。いくつかの例では、個人及びユーザは同一人物であるが、必ずしもそうである必要はない。

図３は、年齢容姿シミュレーションのための個人の画像を表示するための例示的なユーザインターフェース３３０を示す。図示するように、ユーザは、ユーザインターフェース３３０に表示され得る個人の画像を捕捉及び／又は受信することができる。画像使用オプション３３２は、年齢シミュレーション、年齢予測、及び／又は民族性予測のための画像を利用するために提供され得る。画像は、画像捕捉装置１０６（図１）を介して捕捉されてもよく、かつ／又は電子通信などを介してダウンロードされ、受信されてもよい。

いくつかの例では、画像は、個人の顔の３Ｄ画像として構成されてもよい。例えば、個人の画像は、３次元システム（ユーザコンピューティング装置１０２の一部であってもなくてもよい）で捕捉されてもよい。ユーザコンピューティング装置１０２、リモートコンピューティング装置１０４及び／又は他の装置は、必要に応じて、捕捉された画像の前処理を実行してもよい。２Ｄ画像又は３Ｄ画像の前処理は、捕捉された画像から外部物体を除去することと、顔の特徴が予め決められたモデルと整合するように画像の向きを変えることと、画像の顔の特徴をランドマークすることと、ランドマークを複数の個人のための実質的に一致した位置に調整することと、を含んでもよい。

いくつかの例では、例えば、３次元画像からの１つ以上のランドマークを正面図及び／又は側面図の２次元に投影することによって、個人の３Ｄ画像を２次元表現に変換することができる。画像が２Ｄ画像に変換される（又はそれとして捕捉されると）、かつ／又は他の方法で前処理されると、画像を、顔の１つ以上の領域内のシワ領域及び他の年齢特徴について解析することができる。例えば、顔の眼窩周囲領域のシワを決定し、サイズに応じて分類することができる。画像はまた、画像の標準及び／又は交差偏光バージョンでの可視的なシミなどの他の年齢特徴についても解析することができる。同様に、他の特徴（細孔、肌合い／色、にきび、酒さなど）を、平行偏光又は他の撮像モダリティを使用して検出することができる。

図４は、民族性オプション４３２、性別オプション４３４、及び現在の年齢オプション４３６を含む例示的なユーザインターフェース４３０を示す。より少ない又はより多くの基準がユーザにより入力されてもよいことを理解されたい。民族性オプション４３２の選択に応じて、ユーザは個人の民族性を入力することができる。いくつかの例では、インターフェース４３０は、ユーザに様々な別々の民族群の割合として民族性を入力させることができる。この場合、各民族群について統計的エイジングモデルによって生成される予想される変化（以下に説明する形状、色、及び／又は肌合い）は、入力した民族性に比例する加重平均を使用して合成されることになる。次いで、この多民族の予想される変化を入力画像のシミュレーションに使用することができる。性別オプション４３４の選択に応じて、ユーザは個人の性別を入力することができる。現在の年齢オプション４３６の選択に応じて、ユーザは個人の現在の年齢を入力することができる。いくつかの例では、ユーザ入力のための１つ以上のオプションは、過去のユーザアクション、画像解析などからシステムによって自動的に決定されてもよい。

図５は、年齢予測及び年齢容姿予測／シミュレーションを提供するための例示的なユーザインターフェース５３０を示す。図示するように、ユーザインターフェース５３０は、個人のシミュレーションエイジング／ディエイジングを提供することができる。具体的には、リモートコンピューティング装置１０４及び／又はユーザコンピューティング装置１０２によって実行され得る、統計的民族モデル（例えば、統計的民族形状モデル、統計的民族肌合いモデル、及び／又は統計的民族色モデル）を使用して、個人の画像をエイジング及び／又はディエイジングすることができる。

ユーザインターフェース５３０は、製品オプション５３２、治療オプション５３４、及び／又はホームオプション５３６を含むことができる。製品オプション５３２の選択に応じて、予想されるエイジングの変化を治療するために１つ以上の製品が提供され得る。治療オプション５３４の選択に応じて、１つ以上の治療計画が提供され得る。ホームオプション５３６の選択に応じて、インターフェースは、ユーザインターフェース２３０に戻り、新たな捕捉及び解析を開始することができる。

ユーザインターフェース５３０はまた、画像の解析に基づいて個人の予測年齢又は見かけ年齢を表示してもよい。例えば、対応する左右のランドマーク（眼、耳、頬など）は、画像上の中心縦軸を中心として平均され得る（この例では、個人が実質的な顔面対称性を有すると仮定されている）。この例を続けると、個人の見かけ年齢を決定するために、シワ及びシミなどの年齢特徴、顔の特徴間の距離、距離に関連する比率などを決定及び収集することができる。いくつかの例では、ランドマークの各組の点間の垂直距離及び／又は水平距離を測定することができ、距離の間の比率を計算することができる。個人の選択された年齢特徴、比率、距離及び民族性に基づいて、リモートコンピューティング装置１０４及び／又はユーザコンピューティング装置１０２は、見かけ年齢を決定することができる。

人々はエイジングにより、顔に対する形状変化を受け、年齢特徴を作成し、そのうちの少なくとも一部は、その民族性に固有である。例えば、顔の特徴（眼、頬、及び耳など）間の距離、顔の特徴の大きさなどは、個人の民族性に照らして個人の年齢を示す場合がある。比率及び距離を、複数の様々な年齢の当該民族性の平均的な人と比較することによって、リモートコンピューティング装置１０４及び／又はユーザコンピューティング装置１０２は、見かけ年齢を決定することができる。また、検出した年齢特徴を利用して見かけ年齢を更に決定してもよい。シミ解析スコア、シワ解析スコア、ランドマーク距離、ランドマーク比、及び絶対ランドマーク座標を組み合わせて、１つ以上の年齢予測／シミュレーションモデル（例えば、形状及び肌合い／色モデル）で使用される個人の顔を表す完全な特徴セットを形成することができる。各特徴は、例えば、民族母集団におけるその最大値と最小値に基づいて、例えば［０、１］の間で正規化されてもよい。

好適な年齢予測モデルを構築するには、モデルへの特徴入力の数を減らしてモデルを簡略化し、かつ／又は過剰適合を回避してもよい。いくつかの例では、全ての可能なシワスコアから、年齢に対して１つの最も相関の高いシワ特徴のみを保持してもよい。また、所定の閾値未満の相関を有する任意の特徴を取り除いてもよい。いくつかの例では、閾値は約０．５になるように選択されてもよい。いくつかの例では、１つ以上の民族群は、アフリカ民族群に対して約０．４といった、異なる閾値を有してもよい。更に、残りの特徴を、相関ベースの特徴選択（ＣＦＳ：Correlation-based Feature Selection）アルゴリズムに入力し、年齢と相関が高く、互いに相関しない特徴を見出すことができる。これらのステップは、依然として年齢と良好な相関性を維持しつつ、民族群に応じて、８又は９個まで特徴数を減らす。最適に選択されたサブセットの特徴を線形回帰分類器に入力し、次の形態などの年齢の線形予測モデルを開発することができる。

式中ｎはモデル内の特徴数であり、ｗ_ｉ及びｆ_ｉはそれぞれｉ番目の特徴に対するモデル重み及び特徴値であり、ｃは定数である。任意の新しい個人（すなわち、これまでモデルの一部ではなかった誰か）の年齢を予測するには、関連するサブセットの特徴を計算し、次いで、上記の等式に入力して予測年齢を計算してもよい。

本明細書における予測モデルは、単純線形回帰モデルのみに限定される必要はなく、多項式モデル、他の非線形モデル（平滑化スプライン、多変量適応回帰スプライン（ＭＡＲＳ）など）、ニューラルネットワークなどの年齢の範囲にわたって特徴の軌跡をより適切に表現する一層高度なモデルであってもよい。同様に、当該個人の民族性を決定するために、同様の測定及び予測モデルを作製することができ、それにより、単一の民族群予測又は多民族群のいくつかの組み合わせのいずれかとなってもよい。

図６は、捕捉された画像内に検出された顔のランドマークをマッピングし、個人の顔の特徴の予測された軌跡を提供するための例示的なインターフェース６３０を示す。図６に示す例では、矢印は個人がエイジングにつれて顔のランドマークの予想される移動を示す。各矢印の方向及び大きさは、同じ民族性の他の個人の母集団の統計解析に基づいて、民族形状モデルから決定され得る。一例として、個人の下顎領域に対応する矢印６３２は、個人の下顎領域の予想される経時的な移動を示す。この例では、矢印６３２の尾部は第１の年齢における下顎領域の位置を示し、矢印６３２の頭部は同じ年齢及び民族性の平均的な人の形状エイジングモデルに基づいて、下顎領域の所定年数後の予測される場所を示す。同様に、矢印６３４及び矢印６３６は、モデルによって予測される、個人の予想される顎の輪郭の経時的な移動を示す。この例では、矢印６４０及び矢印６４２は、モデルによって予測される、個人の耳の予想される移動を示す。矢印６３８は、モデルによって予測される、個人の額のランドマークの予測された動きを示す。

矢印６３２、６３４、６３６、６４０及び６４２は、年齢によりこれらの顔の特徴の位置が変化することが予想される様々な顔のランドマークに対応することを理解されたい。矢印は予想される移動の大きさ及び方向を示す。したがって、例えば額の矢印６３８は比較的短く見えるのは、年齢が、示された民族性モデルに対して顔の当該部分に劇的に影響を及ぼすと予想されないためである。

リモートコンピューティング装置１０４は、顔の特徴間の距離、比、及び／又は個人の顔の特徴の位置を比較し、当該データをその民族性の分布と比較することができる。この比較に基づいて、個人の見かけ年齢及び／又は民族性を決定することができる。また、リモートコンピューティング装置１０４は、統計的民族形状、肌合い及び／又は色モデルを使用して、当該民族性の平均的な人の特徴と実質的に一致するように、個人の顔の形状を変更する（及び本明細書に記載する他の調整を行う）ことによって、画像を所望のシミュレーションされた年齢に変更することができる。

３Ｄ及び／又は２Ｄ空間内の個人間の共通点を特定する顔のランドマークを、例えば、画像上の適切な位置を選択することによって、手動で捕捉された画像上に配置することができる。追加的に又は代替的に、顔のランドマークは、ＡＳＭ（Active Shape Models）、ＣＬＭ（Constrained Local Models）、カスケード分類器、テンプレートマッチングなどの既知の方法によって自動的に検出されてもよい。自動的に検出されたランドマークは、ユーザがランドマークをそれらの所望の位置に相互能動的に移動させることをできるインターフェースを介して、精度のために更に手動で調整されてもよい。

図６のインターフェース６３０（並びに、図７〜１０の、それぞれインターフェース７３０、８３０、９３０及び／又は１０３０）がユーザに提供されても、提供されなくてもよいことを理解されたい。いくつかの例では、これらのインターフェースは、メンテナンス及び／又はトラブルシューティングのための管理者にのみ提供されてもよい。いくつかの例では、インターフェース６３０、７３０、８３０、９３０、及び／又は１０３０は、ユーザがアクセス可能でなくてもよい。このため、これらの管理者インターフェースは、記載する機能を提供するために利用され得るプロセスを示すために、本明細書で提供される。

図７は、年齢容姿シミュレーションモデルに基づいて顔の特徴の形状変化を適用するための例示的なインターフェース７３０を示す。図示するように、インターフェース７３０は、所望のシミュレーションされた年齢及び統計的民族形状モデルに基づいて、個人の画像の描写に形状の修正を行うことができる。具体的には、図６に示す例示的なランドマーク配置の変更を利用すると、図６の画像は図７の結果を生成するように修正され得る。一例として、インターフェース７３０内の修正された（エイジングされた）画像は、口元が広くなり、目が垂れ下がり、かつ鼻が広くなり、その範囲はモデルによって決定される。

いくつかの例では、形状モデル、色モデル、及び肌合いモデルなどの複数のモデルを作成することができる。いくつかの例では、形状モデルは、ランドマーク点が年齢に応じた移動の仕方を表すことができ、それは、体重増加、肌又は他の顔の特徴など弛みのような変化を表すものである。いくつかの例では、色モデルは、各画素の強度値の年齢に応じた平均的な変化の仕方を表すことができ、それは、眼の下の黒い円、全体的な色素沈着変化、眼の色変化などの影響を表すものである。いくつかの例では、肌合いモデルは、各画素の強度値が、シワ及び微細線、高色素及び低色素のシミ、並びに日光損傷などの、肌の比較的微細な肌合いの細部に関して各画素の強度値の変化の仕方を表すことができる。形状、色及び肌合いモデルは、所定の年齢に対して、予想されるランドマーク位置及び画素値をそれぞれ戻す。いくつかの例では、捕捉された画像が３Ｄ画像である場合のように、これらの形状、色及び肌合いモデルは、３Ｄの変化を表し、例えば、３Ｄ形状モデルは、顔形状又はトポロジーの３Ｄの変化がどのように生じるかを示すことができる。３Ｄ色又は肌合いモデルは、３Ｄ三角形メッシュ内の各三角形に対する色又は肌合いがどのように変化するかを示すことができる。

いくつかの例では、形状モデルは、対称的に平均化され、ＧＰＡ（Generalized Procrustes Analysis）を介して整合されたランドマーク点上で線形回帰によって構築され得る。ランドマークは、個人間の回転及び／又はシフトを考慮するように、民族群母集団にわたって整合され得る。いくつかの例では、平均垂直眼座標が個人とモデルとの間で共通となるように眼の垂直位置に基づいて画像を更に整合してもよい。額の上部又は首の底部などの他のランドマークを検出して、追加のランドマークを母集団及び画像に追加してもよい。各ランドマークＸ及びＹ座標について、線形回帰直線を、独立変数を次の形式で年齢と適合することができる。
Ｐ＝Ｍ_ｓｈ＊年齢＋Ｂ_ｓｈ
式中ｐは所与の年齢における予測される点を表し、Ｍ_ｓｈ及びＢ_ｓｈは回帰モデル重み及び係数である。もちろん、この形状モデルは、線形回帰モデルに限定される必要はなく、多項式モデル、平滑化スプライン、ＭＡＲＳ、ニューラルネットワークなどの多くの他の線形及び／又は非線形予測モデルで実装することができる。更にまた、３Ｄ画像捕捉の場合、この形状モデルは、３Ｄ空間、すなわちＸ座標、Ｙ座標、及びＺ座標におけるランドマーク座標を使用して構築されてもよい。

いくつかの例では、色モデルは、画像画素色値に線形回帰を実行することによって構築されてもよい。しかし、モデルを構築するために使用される母集団画像を整合することができる。これは、母集団の平均顔を決定することを含む。ＧＰＡ整合ランドマークは、母集団の平均ランドマーク位置を生成するために共に平均化されてもよい。次いで、個人の画像ごとに、ランドマーク位置をアンカーとして使用し、それらを元の位置から母集団平均の位置まで移動させることによって、薄板スプライン（ＴＰＳ）のワーピングを使用して画像を歪ませることができる。ＴＰＳワーピングは、中間点をアンカーに補間するために放射基底関数を使用する非剛性変換技法であり、これは次に画素色値にマッピングされる。全ての個人の全ての画像を平均顔形状に歪ませると、画素を整合できるように、各画素の線形回帰モデルを計算することができる。この肌合い回帰モデルは、以下の形式を有し得る。
Ｉ＝Ｍ_ｔｘ＊年齢＋Ｂ_ｔｘ
画像Ｉ及び回帰パラメータＭ_ｔｘ及びＢ_ｔｘは、３チャネルＲＧＢ画像（幅×高さ×３）の大きさに等しいサイズの行列である。この色モデルは、所与の年齢に対する顔の画像を構成する画素値を予測する。

新しい画像のエイジング又はディエイジングをシミュレーションするには、形状及び色モデルの両方を現実感のために適用することができる。色モデルは、母集団の平均ランドマーク位置、すなわち「平均顔形状」に対して構築されていることを理解されたい。したがって、色モデルから予測される画像を、母集団平均ランドマーク点から、エイジング／ディエイジングした個人の所望のランドマーク点まで歪ませることができる。

形状モデルを適用する１つの方法は、所望の年齢における予想されるランドマーク座標と、個人の実際の年齢における予想されるランドマーク座標との間のデルタを（共に形状モデルに従って）計算し、次いでこのデルタを個人の実際のランドマーク座標に追加し、それによって、所望の年齢における個人の予測されるランドマーク座標を生成することである。また、ＴＰＳは、実際の座標を予測座標の位置に移動させることによって、個人の画像を歪ませるように使用することができる。理解されるように、ＴＰＳだけでなく、画像ワーピングの他の方法を使用してもよく、この他の方法としては、アフィン又は透視変換、弾性変形、又は他のパラメトリック若しくはノンパラメトリック方法が挙げられるが、これらに限定されない。

同様に、デルタは、所望の年齢における予想される色と個人の実際の年齢における予想される色との間で色モデルを使用して計算することができる。このデルタは、同様に、予測画像を生成するために画像に追加することができる。デルタの追加前に、デルタ画像を、形状モデルからの個人の画像の歪みと整列するように予測されるランドマーク点まで歪ませなければならないことを理解されたい。

図８は、年齢容姿シミュレーションのために、捕捉された画像に適用される色モデルを閲覧するための例示的なインターフェース８３０を示す。図８に示すように、インターフェース８３０は、所望のシミュレーションされた年齢に対する決定された民族性の平均的な人の平均的な色を表してもよい。したがって、更なる修正のために、色のマッピングを図７の画像に適用することができる。

図９は、年齢容姿シミュレーションのために、画像への色変化を閲覧するための例示的なインターフェース９３０を示す。図示するように、図８の色マップを図７の画像に適用し、顔の特徴の形状変化と顔の色変化の両方が組み込まれた更なる修正画像を提供することができる。上記したように、画像内の画素を、平均的な人の画像内の画素と比較することができる。画素の比較に基づいて、画像内の画素を、図８の画像の少なくとも一部と実質的に一致するように変更することができる。一例として、いくつかの実施形態は、形状変化及び／又は所定のランドマークエリアを経験するエリアなどの、対象エリアの色を比較するだけでよい。

いくつかの例では、本明細書におけるエイジング又はディエイジングシミュレーションは、ウェーブレットドメイン内でより高度な肌合いモデルを介して改善し、色モデル方法で可能である肌合い特徴を超えて、肌合い特徴を強化することができる。例えば、個人の画像を歪ませて、平滑化ウェーブレットのピラミッドに分解してもよい。次いで、各ウェーブレットピラミッドレベルで複数の画素の集団にわたって線形回帰を実行して、個人の年齢に対するウェーブレット強度を予測するようにモデルを構築することができる。所望のシミュレーションされた年齢に対するウェーブレットピラミッドは、ウェーブレットピラミッド回帰モデルを使用して予測することができる。所望のシミュレーションされた年齢の肌合いは、所望のシミュレーションされた年齢に対する予測されるウェーブレットを利用して強化することができる。

元の年齢と所望のシミュレーションされた年齢との間の予想されるデルタ形状の変化は、形状回帰モデルを使用して見出すことができる。このデルタは、画像内の個人の顔の実際の形状に追加されて、個人のエイジング後の形状を見出すことができる。画像から修正された個人の画像及び他の画像を、エイジング後の形状の画像と実質的に一致するように歪ませることができる。同様に、元の年齢と所望のシミュレーションされた年齢との間の色差を、歪ませた画像に追加して、色デルタでエイジング後の画像を生成することができる。色デルタ画像の肌合いは、予測されるウェーブレットのピラミッドを使用して強化することができる。

図１０は、年齢容姿シミュレーションのためにウェーブレットドメイン内に複数のマルチレベルのモデル肌合いを提供するための例示的なインターフェース１０３０を示す。図１０に示すように、インターフェース１０３０は、画像１０３２，１０３４，１０３６に肌合いの変更を付与して、様々な年齢における特定の民族性の平均的な人の変化を示すように構成されてもよい。この特徴を利用して、シワと他の年齢特徴をシミュレーションしてもよい。

図１１は、年齢容姿シミュレーションのために画像に肌合いの変更をするための例示的なユーザインターフェース１１３０を示す。図２の年齢シミュレータオプション２３４の選択に応じて、ユーザインターフェース１１３０が提供され得る。図示するように、ユーザインターフェース１１３０はユーザに提示されてもよく、所定の将来の年齢における個人のシミュレーションされた画像を提供し得る。ユーザインターフェース１１３０に提供される画像は、図９の画像に肌合い変更（並びに、形状の変更及び／又は色の変更）を適用した結果であってもよい。ユーザインターフェース１１３０は、製品オプション１１３２及び／又は治療オプション１１３４を含んでもよい。以下により詳細に記載するように、製品オプション１１３２の選択に応じて、予想されるエイジング変化を治療するために１つ以上の製品が推奨され得る。治療オプション１１３４の選択に応じて、１つ以上の治療計画が推奨され得る。

図１２は、エイジングする肌の容姿の改善に役立つ製品を購入するための例示的なユーザインターフェース１２３０を示す。図１１の製品オプション１１３２（及び／又は図２の製品オプション２３６）の選択に応じて、ユーザインターフェース１２３０が提供され得る。民族性、現在の年齢容姿、予想されるエイジング及び／又は他の基準に基づいて、１つ以上の製品がユーザに推奨されてもよい。また、推奨される製品のうち１つ以上を購入するための購入オプション１２３２、１２３４、１２３６も提供される。いくつかの例では、ユーザインターフェース１２３０は、推奨される製品の全てを単一選択（例えば、「全ての購入」オプション）で購入するオプションを含んでもよい。

図１３は、予測されたエイジングの影響に対抗するために、医療処置のための製品又は提案の推奨される適用などの治療を提供するための例示的なユーザインターフェース１３３０を示す。図１１の治療オプション１１３４（及び／又は図２の治療オプション２３８）の選択に応じて、ユーザインターフェース１３３０が提供され得る。個人の実際の年齢、年齢の進行及び／又は他の要因に基づいて、１つ以上の治療をユーザに推奨することができる。また、追跡進捗オプション１３３２、シミュレーション治療オプション１３３４及びホームオプション１３３６も提供される。追跡進行オプション１３３２の選択に応じて、ユーザは、個人の追加画像を捕捉し、経時的な年齢特徴及び年齢容姿の進行を追跡することができる。これにより、ユーザに治療の効果を示すことができる。シミュレーション治療オプション１３３４の選択に応じて、ユーザコンピューティング装置１０２は、個人への選択された治療を経時的に使用した結果をシミュレーションすることができる。いくつかの例では、これは、例えば、臨床試験の文脈内の製品又は処置などの、選択された治療（単数又は複数）を使用した、あるいはその治療（単数又は複数）が提供された、個人のみの母集団を使用して、特定の形状、色、及び／又は肌合いエイジングモデルを構築することによって実施されてもよい。次いで、治療の効果を示す年齢シミュレーションされた画像を、これらの治療エイジングモデルを使用して作成することができる。治療を使用しない場合の年齢シミュレーションされた画像も、標準母集団モデルを使用して作成してもよい。これらの２つの画像は、治療の有無によるエイジングのシミュレーションを見るために、ユーザに比較されてもよい。別の例では、１組の形状、色及び／又は肌合いモデルが、年齢に対する更なる独立変数として含まれる治療期間（又は同様の製品使用頻度測定）で構築されてもよい。このようにして、モデルは、年齢及び治療使用法に関する視覚的変化を本質的に表す。治療の有無により、又は更に治療レベルを変え、このようなモデルを使用して、ユーザによる比較のために、シミュレーションされた画像を作成してもよい。

本明細書におけるシステム及び方法は、内因性及び外因性エイジング／ディエイジングをシミュレーションするために利用される場合があることを理解されたい。例えば、本システム及びモデルは、喫煙、体重増加、体重減少などの特定のユーザアクションに関連する外因性エイジング効果をシミュレーションするために利用されてもよい。エイジング及び／又はディエイジングシミュレーションは、所定の範囲内で複数年間適用されると、結果として得られる画像のコレクション（例えば、個人の元の捕捉画像、第１の所望のシミュレーションされた年齢を表す第１の変更画像、第２の所望のシミュレーションされた年齢を表す第２の変更画像など）をアニメーションに組み合わせることができる。これは、個人のエイジング及び／又はディエイジングの予測を示すためのスライドショー又はビデオとして利用することができる。複数の年齢を通じた滑らかなアニメーションのために、本明細書における統計的民族モデルに従って複数の中間の年を生成することが望ましい場合がある。本システム及び方法は、形状、色、及び肌合いの滑らかで連続的なモデルを開発し、これにより、いかなる経年変化の解明が所望されても（すなわち、ビデオアニメーションの後続のフレーム間の年齢デルタ）、開始年齢から任意のかつ全ての中間年齢を通って最終年齢まで個人を円滑にエイジングさせる／ディエイジングさせる連続的なシミュレーションの作成を可能にする。

また、経年変化された肌合いは、滑らかな連続的肌合いモデルを用いずに適用され得ることも理解されたい。例えば、形状モデルを使用して、元の年齢と所望のシミュレーションされた年齢との間の予測されるデルタを見出すことができる。これを個人の顔の本物の形状に追加して、目標の顔の形状を見出すことができる。例示的な標的となる個人が選択されてもよく、その年齢特徴が抽出され、ソースの個人に追加される。標的となる個人の高周波成分を抽出してもよい。また、これらの構成要素を、目標形状に歪ませ、歪んだ画像に適用し、経年変化したシミュレーションされた画像を生成することができる。

図１４は、例示的な年齢容姿シミュレーションのフローチャートを示す。ブロック１４５０に示すように、個人の顔を含む個人の画像を受信することができる。ブロック１４５２では、個人の民族性を決定することができる。ブロック１４５４では、個人の年齢を決定することができる。理解されるように、年齢、民族性、及び／又は他の特徴を決定することは、画像からデータを処理して年齢（又は「見かけ年齢」）又は他の特徴を推定することを含んでもよい。いくつかの例では、年齢、民族性、及び／又は他の特徴を決定することは、ユーザから個人の実際の年齢を受信するなど、対応するデータを特定するためユーザから入力を受信することを含んでもよい。ブロック１４５６では、ユーザ入力を介して所望のシミュレーションされた年齢を受信するなどによって、個人の所望のシミュレーションされた年齢を決定することができる。ブロック１４５８では、ブロック１４５０からの個人の画像を変更することによって個人の所望のシミュレーションされた年齢を表すように変更画像を作成することができる。画像を変更することは、顔の形状を変更すること、顔の色を変更すること、及び顔の肌合いを変更すること、のうちの少なくとも１つを含んでもよい。ブロック１４６０では、変更画像が、表示するためにユーザに提供されてもよい。

図１５は、年齢容姿シミュレーションのためのリモートコンピューティング装置１０４を示す。図示するように、リモートコンピューティング装置１０４は、プロセッサ１５３０、入力／出力ハードウェア１５３２、ネットワークインターフェースハードウェア１５３４、データストレージ構成要素１５３６（それはユーザデータ１５３８ａ、エイジングデータ１５３８ｂ、及び／又は他のデータを格納する）、及びメモリ構成要素１４０を含む。メモリ構成要素１４０は、揮発性及び／又は不揮発性メモリ等として構成されてもよく、そのため、それは、ランダムアクセスメモリ（ＳＲＡＭ、ＤＲＡＭ、及び／又は他の種類のＲＡＭ）、フラッシュメモリ、セキュアデジタル（ＳＤ）メモリ、レジスタ、コンパクトディスク（ＣＤ）、デジタル多用途ディスク（ＤＶＤ）、及び／又は他の種類の非一時的コンピュータ読み取り可能媒体を含んでもよい。特定の実施形態に応じて、これらの非一時的コンピュータ読み取り可能媒体は、リモートコンピューティング装置１０４内部、及び／又はリモートコンピューティング装置１０４の外部に存在してもよい。

メモリ構成要素１４０は、動作ロジック１５４２、年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ、及び民族エイジングモデルロジック１４４ｃを記憶することができる。年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ及び民族エイジングモデルロジック１４４ｃは、それぞれ、複数の異なるロジックの断片を含み、ロジックの断片のそれぞれは、一例として、コンピュータプログラム、ファームウェア、及び／又はハードウェアとして具体化され得る。ローカルインターフェース１５４６は、図１５にも含まれ、リモートコンピューティング装置１０４の構成要素間の通信を促進するための、バス又は他の通信インターフェースとして実装されてもよい。

プロセッサ１５３０は、（データストレージ構成要素１５３６及び／又はメモリ構成要素１４０等から）命令を受信及び実行するように動作可能な、任意の処理構成要素を含んでもよい。入出力ハードウェア１５３２は、マイクロフォン、スピーカ、ディスプレイ、及び／又は他のハードウェアを含んでもよく、かつ／又はそれらとインターフェースするように構成されてもよい。

ネットワークインターフェースハードウェア１５３４は、アンテナ、モデム、ＬＡＮポート、ワイヤレスフィディリティ（Ｗｉ−Ｆｉ）カード、ＷｉＭａｘカード、Ｂｌｕｅｔｏｏｔｈチップ、ＵＳＢカード、移動通信ハードウェア、並びに／又は他のネットワーク及び／若しくは装置と通信するための他のハードウェアを含む、任意の有線又は無線ネットワークハードウェアを含んでもよく、かつ／又はそれらと通信するように構成されてもよい。この接続により、リモートコンピューティング装置１０４と、ユーザコンピューティング装置１０２のような他のコンピューティング装置との間の通信を促進することができる。

動作ロジック１５４２は、リモートコンピューティング装置１０４の構成要素を管理するためのオペレーティングシステム及び／又は他のソフトウェアを含んでもよい。また上記にも論じたように、年齢シミュレーションロジック１４４ａは、メモリ構成要素１４０内に存在してもよく、プロセッサ１５３０に、個人の年齢容姿及び／又は年齢進行シミュレーションを決定するように構成されてもよい。同様に、インターフェースロジック１４４ｂは、本明細書に記載するように、ユーザインターフェースを提供するために利用されてもよい。民族エイジングモデルロジック１４４ｃは、本明細書に記載する民族エイジングモデルのうちの１つ以上を提供するために利用されてもよい。

図１５の構成要素は、リモートコンピューティング装置１０４内部に存在するものとして図示されているが、これは一例に過ぎないことを理解されたい。いくつかの実施形態では、構成要素のうちの１つ以上がリモートコンピューティング装置１０４の外部に存在してもよい。リモートコンピューティング装置１０４は単一の装置として図示されているが、これもまた単なる一例に過ぎないことも理解されたい。いくつかの例では、年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ、及び民族エイジングモデルロジック１４４ｃは、異なるコンピューティング装置上に存在してもよい。一例として、本明細書に記載する機能及び／又は構成要素のうちの１つ以上が、リモートコンピューティング装置１０４及び／又はユーザコンピューティング装置１０２によって提供されてもよく、ユーザコンピューティング装置は、ネットワーク１００を介してリモートコンピューティング装置１０４に連結され得る。

また、リモートコンピューティング装置１０４は、年齢シミュレーションロジック１４４ａ、インターフェースロジック１４４ｂ及び民族エイジングモデルロジック１４４ｃが別々のロジック的構成要素として図示されているが、これもまた一例に過ぎない。いくつかの実施形態では、単一のロジックの断片によって、リモートコンピューティング装置１０４に、記載する機能を提供させてもよい。

いくつかの例では、本方法は、例えば、拡張又は仮想現実のヘッドセット（例えば、Ｍｉｃｒｏｓｏｆｔ（商標）ＨｏｌｏＬｅｎｓ（商標）、Ｏｃｕｌｕｓ Ｒｉｆｔ（商標）など）を用いて、拡張又は仮想現実体験を介して実施されてもよい。拡張又は仮想現実体験では、個人は、エイジング／ディエイジングシミュレーション後に、それら自体の仮想３Ｄモデルを閲覧及び相互作用することができる。例えば、個人の３Ｄ画像を捕捉することができ、次いで、本明細書における形状、色、及び／又は肌合いモデルを適用して、所望の年数だけエイジング又はディエイジングをシミュレーションすることができる。同様に、製品有効性モデルを別々に、あるいはエイジングシミュレーションと併せて適用してもよい。最後に、個人のシミュレーションされた３Ｄ画像を、個人の３Ｄ拡張又は仮想空間に投影して、個人が閲覧及び／又は相互作用することができる。

同様の方法で、エイジング／ディエイジングシミュレーションを、個人のビデオフィードにリアルタイムで適用することができ、これはその後、鏡状の様式で個人に表示される。捕捉されたビデオは、個人の仮想３Ｄモデルを構成するために使用され、このモデルは次にシミュレーションされ、いくつかの表示様式で個人に投影される。このようにして、個人は動き回って、まるでミラーを見ているように、自身のシミュレーションされたバージョンを検査することができる。

組み合わせ／実施例
Ａ．消費者の年齢容姿シミュレーションのための方法であって、
（ｉ）消費者の画像を受信するステップであって、画像は消費者の顔を含む、受信するステップと、
（ｉｉ）消費者の民族性を決定するステップと、
（ｉｉｉ）消費者の見かけ年齢を決定するステップと、
（ｉｖ）消費者の第１の所望のシミュレーションされた年齢を決定するステップと、
（ｖ）消費者の第１のシミュレーションされた年齢を表すように画像を変更するステップであって、画像を変更するステップは、コンピューティング装置のメモリ構成要素に記憶されたエイジングモデルロジックを使用して、顔の形状、顔の色、及び顔の肌合いのうちの少なくとも１つを変更して、第１の変更画像を作成することを含む、変更するステップと、
（ｖｉ）インターフェース装置上に第１の変更画像を表示するステップと、を含むことを特徴とする方法。

Ｂ．顔のランドマークを使用して、画像内の形状を決定するステップを更に含み、画像を変更するステップは、コンピューティング装置のメモリ構成要素に記憶された統計的民族形状モデルロジックを使用して、少なくとも１つの顔のランドマークの位置を変更することを含むことを特徴とするパラグラフＡに記載の方法。

Ｃ．顔のランドマークの位置を変更することは、消費者と同じ民族性の個人の母集団の統計解析に基づいて顔のランドマークの方向及び大きさのうちの少なくとも１つを変更することを含むことを特徴とするパラグラフＢに記載の方法。

Ｄ．画像内の肌合いを決定するステップを更に含み、第１の変更画像を作成することは、統計的な民族肌合いモデルを使用して、肌の動き、シワの存在、及びシワの範囲のうちの少なくとも１つを変更することを含むことを特徴とするパラグラフＡないしＣのいずれか１つに記載の方法。

Ｅ．画像の色を決定するステップを更に含み、第１の変更画像を作成することは、統計的民族色モデルを使用して、顔の色、毛髪の色、眉の色、眼の色、眼の下の暗い円の暗色化、可視的なシミの存在、及び可視的なシミの範囲のうちの少なくとも１つを変更することを含むことを特徴とするパラグラフＡないしＤのいずれか１つに記載の方法。

Ｆ．消費者の第２の所望のシミュレーションされた年齢を決定するステップと、統計的民族モデルを使用して、消費者の第２の所望のシミュレーションされた年齢を表す第２の変更画像を作成するステップと、第１及び第２の変更画像を使用して消費者のエイジング又はディエイジングを表すアニメーションを作成するステップと、を更に含むことを特徴とするパラグラフＡないしＥのいずれか１つに記載の方法。

Ｇ．アニメーションは、形状、色及び／又は肌合いの変化を円滑に表す、第１及び第２の所望のシミュレーション年齢間の中間の年齢含むビデオとして提示されることを特徴とするパラグラフＦに記載の方法。

Ｈ．消費者の決定された年齢に影響を及ぼす消費者が受ける治療を決定するステップと、消費者が治療を受けた結果を表すように画像を変更するステップと、を更に含むことを特徴とするパラグラフＡないしＧのいずれか１つに記載の方法。

Ｉ．民族性は複数の民族群の組み合わせ又は比率としてユーザによって指定され、統計的民族モデルはこの組み合わせ又は比率によって同様に組み合わされることを特徴とするパラグラフＡないしＨのいずれか１つに記載の方法。

Ｊ．将来の予測精度を増加させるために、画像及び第１の変更画像を記憶するステップを更に含むことを特徴とするパラグラフＡないしＩのいずれか１つに記載の方法。

Ｋ．拡張空間又は仮想現実空間においてリアルタイムでユーザのエイジング後のバージョンを、ユーザが観察し及びそれと相互作用することができるように、第１の変更画像は拡張現実体験又は仮想現実体験としてユーザに提供されることを特徴とするパラグラフＡないしＪのいずれか１つに記載の方法。

Ｌ．消費者の見かけ年齢を決定するステップは、コンピューティング装置に記憶されたロジックを使用して、画像上の別の位置からの顔のランドマークの距離、及び画像上の別の位置からの顔のランドマークの距離に関連する比率、のうちの少なくとも１つを決定することと、距離又は比率を消費者と同じ民族性の人の平均と比較することと、を含むことを特徴とするパラグラフＡないしＫのいずれか１つに記載の方法。

Ｍ．消費者の画像は、コンピューティング装置に連結された画像捕捉装置によって捕捉されることを特徴とするパラグラフＡないしＬのいずれか１つに記載の方法。

Ｎ．コンピューティング装置、インターフェース装置、及び画像捕捉装置が、一体型装置の一部であることを特徴とするパラグラフＭに記載の方法。

Ｏ．画像は、外部オブジェクトを除去するように前処理されることを特徴とするパラグラフＡないしＮのいずれか１つに記載の方法。

Ｐ．民族エイジングモデルロジックは、消費者と同じ性別の個人の統計解析に基づくことを特徴とするパラグラフＡないしＯのいずれか１つに記載の方法。

Ｑ．３次元画像を３次元画像の２元投影に変換して、消費者の画像を提供するステップを更に含むことを特徴とする請求項１に記載の方法。

Ｒ．コンピューティング装置及びインターフェース装置は、互いから遠隔に位置することを特徴とするパラグラフＡないしＭ又はＯないしＱのいずれか１つに記載の方法。

本明細書における特定の実施例及び実施形態は、顔の特徴及びランドマークに関して説明したが、そのようなモデル及び技法はまた、肩、肘、手、指、膝、足などの身体の残りの部分全体にわたる他のランドマークまで拡張されてもよいことを理解されたい。このような方法では、いくつかの拡張又は仮想現実の実施形態で所望されるように、形状、色、及び／又は肌合いの変化を全身シミュレーションのために身体全体に適用することができる。

本明細書に記載する全ての数値範囲は、より狭い範囲を含み、区切られた上下の範囲制限は、明示的に区切られていない更なる範囲を作る上で互換性がある。本明細書に記載する実施形態は、本明細書に記載の必須構成要素並びに任意成分を含み得る、それらから本質的になり得る、又はそれらからなり得る。本明細書及び添付の特許請求の範囲において使用される単数形「ａ」、「ａｎ」、及び「ｔｈｅ」は、文脈が明らかに他の意味を示さない限り、複数形も含むものとする。

本明細書にて開示された寸法及び値は、列挙された正確な数値に厳密に限定されるものとして理解されるべきではない。その代わりに、特に指示がない限り、このような寸法はそれぞれ、列挙された値とその値を囲む機能的に同等な範囲との両方を意味することが意図されている。例えば、「４０ｍｍ」として開示される寸法は、「約４０ｍｍ」を意味することが意図される。

相互参照されるか又は関連する全ての特許又は特許出願、及び本願が優先権又はその利益を主張する任意の特許出願又は特許を含む、本明細書に引用される全ての文書は、明示的に除外されるか、又は別途制限されない限り、参照によりその全体が本明細書に組み込まれる。いかなる文献の引用も、本明細書中で開示又は特許請求される任意の発明に対する先行技術であるとはみなされず、あるいはそれを単独で又は他の任意の参考文献と組み合わせたときに、そのような任意の発明を教示、示唆、又は開示するとはみなされない。更に、本文書における用語の任意の意味又は定義が、参照することによって組み込まれた文書内の同じ用語の意味又は定義と矛盾する場合、本文書におけるその用語に与えられた意味又は定義が適用されるものとする。

本発明の特定の実施形態を例示及び説明してきたが、本発明の趣旨及び範囲から逸脱することなく他の様々な変更及び修正を行うことができる点は当業者には明白であろう。したがって、本発明の範囲内に含まれるそのような全ての変更及び修正は、添付の特許請求の範囲にて網羅することを意図したものである。

Claims (15)

1. 消費者の年齢容姿シミュレーションのための方法であって、
   （ｉ）前記消費者の画像を受信するステップであって、前記画像は前記消費者の顔を含む、該受信するステップと、
   （ｉｉ）前記消費者の民族性を決定するステップと、
   （ｉｉｉ）前記消費者の見かけ年齢を決定するステップと、
   （ｉｖ）前記消費者の第１の所望のシミュレーションされた年齢を決定するステップと、
   （ｖ）前記消費者の前記第１のシミュレーションされた年齢を表すように前記画像を変更するステップであって、前記画像を変更するステップは、コンピューティング装置のメモリ構成要素に記憶された民族エイジングモデルロジックを使用して、前記顔の形状、前記顔の色、及び前記顔の肌合いのうちの少なくとも１つを変更して、第１の変更画像を作成することを含む、該変更するステップと、
   （ｖｉ）インターフェース装置上に前記第１の変更画像を表示するステップと、
   を含むことを特徴とする方法。
2. 顔のランドマークを使用して、前記画像内の形状を決定するステップを更に含み、前記画像を変更するステップは、前記コンピューティング装置の前記メモリ構成要素に記憶された統計的民族形状モデルロジックを使用して、少なくとも１つの顔のランドマークの位置を変更することを含むことを特徴とする請求項１に記載の方法。
3. 前記画像内の肌合いを決定するステップを更に含み、前記第１の変更画像を作成することは、統計的な民族的肌合いモデルを使用して、肌の動き、シワの存在、及び前記シワの範囲のうちの少なくとも１つを変更することを含むことを特徴とする請求項１又は２に記載の方法。
4. 前記画像の色を決定するステップを更に含み、前記第１の変更画像を作成することは、統計的民族色モデルを使用して、顔の色、毛髪の色、眉の色、眼の色、眼の下の暗い円の暗色化、可視的なシミの存在、及び可視的なシミの範囲のうちの少なくとも１つを変更することを含むことを特徴とする請求項１ないし３のいずれか１つに記載の方法。
5. 前記消費者の第２の所望のシミュレーションされた年齢を決定するステップと、統計的民族モデルを使用して、前記消費者の前記第２の所望のシミュレーションされた年齢を表す第２の変更画像を作成するステップと、前記第１及び第２の変更画像を使用して、前記消費者のエイジング又はディエイジングを表すアニメーションを作成するステップと、
   を更に含むことを特徴とする請求項１ないし４のいずれか１つに記載の方法。
6. 前記アニメーションは、形状、色、及び／又は肌合いの変化を円滑に表す、前記第１及び第２の所望のシミュレーション年齢間の中間の年齢を含むビデオとして提示されることを特徴とする請求項５に記載の方法。
7. 前記消費者の前記決定された年齢に影響を及ぼす前記消費者が受ける治療を決定するステップと、前記消費者が前記治療を受けた結果を表すように前記画像を変更するステップと、
   を更に含むことを特徴とする請求項１ないし６のいずれか１つに記載の方法。
8. 前記民族性は複数の民族群の組み合わせ又は比率としてユーザによって指定され、統計的民族モデルは前記組み合わせ又は前記比率によって同様に組み合わされることを特徴とする請求項１ないし７のいずれか１つに記載の方法。
9. 将来の予測精度を増加させるために、前記画像及び前記第１の変更画像を記憶するステップを更に含むことを特徴とする請求項１ないし８のいずれか１つに記載の方法。
10. 拡張空間又は仮想現実空間においてリアルタイムでユーザのエージング後のバージョンを、前記ユーザが観察し及び相互作用することができるように、前記第１の変更画像は拡張現実体験又は仮想現実体験として前記ユーザに提供されることを特徴とする請求項１ないし９のいずれか１つに記載の方法。
11. 前記消費者の前記見かけ年齢を決定するステップは、前記コンピューティング装置に記憶されたロジックを使用して、前記画像上の別の位置からの顔のランドマークの距離、及び前記画像上の別の位置からの顔のランドマークの距離に関連する比率、のうちの少なくとも１つを決定することと、前記距離又は比率を前記消費者と同じ民族性の人の平均と比較することと、
    を含むことを特徴とする請求項１ないし１０のいずれか１つに記載の方法。
12. 前記消費者の画像は、前記コンピューティング装置に連結された画像捕捉装置によって捕捉されることを特徴とする請求項１ないし１１のいずれか１つに記載の方法。
13. 前記画像は、外部オブジェクトを除去するように前処理されることを特徴とする請求項１ないし１２のいずれか１つに記載の方法。
14. 前記民族エイジングモデルロジックは、前記消費者と同じ性別の個人の統計解析に基づくことを特徴とする請求項１ないし１３のいずれか１つに記載の方法。
15. ３次元画像を前記３次元画像の２次元投影に変換して、前記消費者の前記画像を提供するステップを更に含むことを特徴とする請求項１ないし１４のいずれか１つに記載の方法。

Images