JP2023134415A - 美容装置を使用する場合におけるユーザーの身体部分の状態を検知し、３次元環境に関連付けるためのシステム - Google Patents

Abstract

【課題】ユーザーの検知状態の場所を追跡するための、仮想３次元環境において、ユーザーの頭に検知状態を再構築するための、ユーザーの表示にフィードバックを提供するために３次元再構築を使用するための、又は検知状態に基づいて接続されたスタイリングツールを制御するためのシステム。【解決手段】身体部分の状態を検知するように構成される少なくとも１つのセンサ、及び空間における装置の場所を追跡するように構成された場所トラッカーを含み、システムは、セッションの間、少なくとも１つのセンサによって検出された身体部分の特定の検知状態の情報を受信し、セッションの間、装置の追跡した場所の情報を場所トラッカーから受信し、特定の検知状態が装置によって検出される特定の時間を、特定の時間の空間における装置の場所と関連付けるように構成される処理回路を含む。【選択図】図１

Description

関連出願の相互参照
本出願は、米国特許出願第１６／１３７，６１０号及び第１６／１３７，６１４号の利益に関し、その利益を主張し、両者とも２０１８年９月２１日に出願され、それぞれの全体内容は、参照により本明細書に組み込まれる。

本出願は、スタイリングツールのセンサからの情報及び検知動作中の空間における追跡場所に基づいて、ユーザーの検知状態の場所を追跡するための、仮想３次元環境において、ユーザーの頭に検知状態を再構築するための、ユーザーの表示にフィードバックを提供するために３次元再構築を使用するための、又は検知状態に基づいて接続されたスタイリングツールを制御するためのシステムに関する。

一実施形態において、システム及び方法を提供し、装置は、ユーザーの身体部分を処理するように構成され、装置は、身体部分の状態を検知するように構成される少なくとも１つのセンサを含み、場所トラッカーは、空間における装置の場所を追跡するように構成され、システムは、セッションの間、少なくとも１つのセンサによって検出された身体部分の特定の検知状態の情報を受信し、セッションの間、装置の追跡した場所の情報を場所トラッカーから受信し、特定の検知状態が装置によって検出された特定の時間を、特定の時間の空間における装置の場所と関連付けるように構成される処理回路を含む。

一実施形態において、装置は、ヘアスタイリングツールであり、身体部分はユーザーの毛髪である。

一実施形態において、検知状態は、毛髪の損傷領域である。

一実施形態において、検知状態は、身体部分の少なくとも１つの検知画像に基づく。

一実施形態において、検知状態は、装置が身体部分に接触した場合に検知される音に基づく。

一実施形態において、検知状態は、身体部分の検知した乾燥レベルに基づく。

一実施形態において、装置は、スキンケアツールであり、身体部分（ｂｏｄｙ ｐａｒｔｙ）はユーザーの皮膚である。

一実施形態において、検知状態は、しわ、目尻の小じわ、ニキビ（ａｃｎｅ）及び黒ニキビ（ｂｌａｃｋｈｅａｄ）の少なくとも１つである。

一実施形態において、センサは装置にあり、ユーザーの身体部分に対面するように構成される。

一実施形態において、少なくとも１つのセンサは、外部であり、身体部分に関係して、装置の動きを捕える。

一実施形態において、システム及び方法を提供し、処理回路は、セッションの間、少なくとも１つのセンサによって検出されたユーザーの身体部分の特定の検知状態の情報を受信し、セッションの間、装置の追跡場所の情報を場所トラッカーから受信し、特定の検知状態が装置によって検出された特定の時間を、特定の時間の空間における装置の場所と関連付け、関連付けられた特定の時間及び装置の場所に基づいて、特定の検知状態が発生した場合、３次元仮想環境において、身体部分の場所を決定するように構成される。

一実施形態において、処理回路は、特定の検知状態を３次元仮想環境に関連付ける所定のファイルフォーマットを有するデジタルファイルを生成するように構成される。

一実施形態において、所定のファイルフォーマットは、タイムスタンプフィールド、加速度計座標フィールド、ジャイロスコープフィールド、磁気コンパスフィールド、センサ測定フィールド、３Ｄ座標フィールド、３Ｄ正規フィールド、及び特定のタイムスタンプに対応するエントリが表示される目的の領域を表すかどうかを示すフィールドの少なくとも１つを含む。

一実施形態において、処理回路は、３次元仮想環境の表示を生成するために、デジタルファイルを表示装置に出力するように構成される。

一実施形態において、３次元仮想環境の表示は、ユーザーの３次元表現に、特定の検知状態を描写する。

一実施形態において、処理回路は、装置を制御して、検知状態を処理するために、デジタルファイルに基づいて、デジタルレシピを生成し、デジタルレシピをスタイリングツールに送信するように構成される。

本発明の先の態様及び付帯の利点の多くは、以下の詳細な記述を参照することによってより良く理解されるのと同じように、添付の図面と併せると、より容易に認識されるであろう。

図１は、ユーザーの特徴を検知するためのフィードバックシステムを示す。 図２は、一実施形態による全体のシステムの構成要素を示す。 図３は、一実施形態による検知構成要素の概要を示す。 図４Ａ、４Ｂ、及び４Ｃは、装置の動き及び空間位置を「オンボード」例においてどのようにして追跡することができるのかを示す一例を示す。 図５は、一実施形態における「オンボード」例による装置において実行される過程を示す。 図６Ａ及び６Ｂは、一実施形態において別個のセンサを使用する一例を示す。 図７は、一実施形態による装置とセンサとの間で実行される過程を示す。 図８は、一実施形態による装置のハードウェア構成要素の電気ブロック図の図を示す。 図９は、一実施形態によるセンサのハードウェア構成要素の電気ブロック図の図を示す。 図１０は、一実施形態による３次元再構築構成要素の概要を示す。 図１１は、一実施形態による検知状態の座標を仮想３Ｄユーザー画像にマップするために、システムによって実行される過程を示す。 図１２は、一実施形態による３Ｄ再構築アルゴリズムに基づいて作製された異なるデジタルファイルフォーマットの例を示す。 図１３は、一実施形態によるフィードバック構成要素の概要を示す。 図１４は、一実施形態による装置によって実行することができるアルゴリズムを示す。 図１５は、装置が一実施形態によるヘアスタイリングツールである場合のデジタルレシピの用途を示す。 図１６は、一実施形態によるユーザーの皮膚に作用する音波振とうブラシ装置である装置の例を示す。 図１７は、装置が一実施形態によるヘアスタイリングツールである場合の３Ｄ再構築及びデジタルレシピの用途を示す。

図１は、同時係属中の米国特許出願第１５／７２１，２８６号に現在記載されているフィードバックシステム１００を示し、参照により本明細書に組み込まれる。システム１００は、ヘアドライヤー装置１１０及びブラシ装置１５０を含む。ヘアドライヤー１１０は、熱風を生成し、出口１１２から熱風を放出するように、通常のヘアドライヤーの機能を実行する。ブラシ１５０は、ブラシの軸の周りに配置される毛１５４を含む（「円形」のヘアブラシタイプ）。しかしながら、追加の周知のヘアブラシタイプも使用することができる。

さらに、ヘアドライヤー装置１１０及びブラシ装置１５０は、追加の構成要素を含む。例えば、ヘアドライヤー装置１１０は、温度コントローラ１１４及びアクチュエータ１１６をさらに含む。温度コントローラ１１４は、ヘアドライヤーによって放出された空気の温度を制御し、調節する。アクチュエータは、空気流のパターンの形状及び空気流の速度を制御する。アクチュエータは、空気流において移動して、その形状を修正することができる可動性の機械部品であってもよい。ヘアドライヤーは、ヘアドライヤーの出口１１２の近くに好ましくは配置される近接センサ１１８をさらに含んでもよい。近接センサは、技術分野で周知の赤外センサ等の光学センサであってもよい。しかしながら、静電容量センサ、超音波センサ又はドップラーセンサ等のその他の例を使用してもよい。

ヘアドライヤー装置１１０は、受信した検知特徴に基づいて、ヘアドライヤーの少なくとも１つの設定を変化させるように構成される。一実施形態において、ヘアドライヤー装置１１０は、受信した検知特徴に基づいて、ヘアドライヤーの少なくとも１つの設定を動的に調整するように構成される。

ブラシ装置は、外部装置（ヘアドライヤー１５０等）と無線通信を実行するために、無線ＲＦ通信インターフェース等の通信及び制御回路を含むそれ自体のＰＣＢ１８０をさらに含んでもよい。ＰＣＢは、アクセラレータ／ジャイロメータ等の動き検出装置をさらに保持してもよい。

ブラシ装置は、毛髪の湿度センサ及び温度センサも含んでもよい。毛髪及び湿度センサが、技術分野において周知であり、理解されている。

図１に描写されるように、ブラシ装置１５０とヘアドライヤー１１０との間の無線機械間フィードバックループであってもよく、各装置に組み込まれた無線ＲＦ通信インターフェース間の通信によって容易になる。このようなフィードバックループにおいて、ブラシは、ヘアドライヤーが動作しているときの温度、ユーザーの毛髪の湿度レベルを検知し、このようなフィードバックをヘアドライヤーに提供することができる。この情報に基づいて、ヘアドライヤーは、例えば、ヘアドライヤーの発熱素子の抵抗を調節し、ファンの速度を調節し、及び／又は空気流の形状を制御する機械要素の形状を調節することによって、空気流の温度及び／又は形状及び／又は速度を調節することができる。

したがって、通常の技術において、ヘアドライヤーにおいて、直接的に調節を行うために、ユーザーの毛髪の特徴を検知することができるヘアブラシ及び／又はヘアドライヤーがあってもよい。しかしながら、必要とされることは、ユーザーにフィードバックするために仮想３次元環境において再構築することができるように、ユーザーの検知状態の特定の場所を決定し、将来において、又はさらにリアルタイムにユーザーの毛髪を処理する場合に、より精細な制御及び調節をスタイリングツールに提供する能力である。

したがって、システムの１つの目的は、スタイリングツールセンササンプルをユーザーの３Ｄ表現における空間位置と融合することである。一実施形態によるシステムは、以下から構成することができる：
－皮膚及び／又は毛髪のためのスタイリングツール又は診断ツール、
－加速度、角速度及び磁場を記録するドングル又は一体型加速度計／ジャイロスコープ／磁気コンパス、
－赤外又は超音波方法に基づくカメラ及び／又は近接センサを有する視覚システムによって完成することができる３Ｄ位置システム、
－ツールによるユーザー専用の経験、及び
－３Ｄ再構築アルゴリズム。

システムは、使用するツールの種類に依存して、ユーザーの頭又はユーザーの身体の別の部分におけるツールの位置及び配向をリアルタイムに決定することができる。

マイクロホン、カメラ、コンダクタンス、力等のセンサの一時的な測定値を動き／空間追跡ツール（加速度計、ジャイロスコープ及び／又はコンパス等）によって記録した３Ｄ位置と同調させることによって、システムにユーザーの検出状態を３Ｄに再構築させることができる。

システムの別の目的は、デジタルフォーマットを使用して、異なる種類の測定値を同じスケールに正規化し、結合することである。

それぞれのスマートスタイリングツール又は診断ツールは、一体型の特定のセンサを有する：
－接続したヘアブラシは、毛髪の損傷を聴くためのマイクロホン、力センサ、導電性を含んでもよく、
－スタイリングアイロンは、温度及び湿度、毛髪のコンダクタンス、接触時間、毛髪にかかる合計エネルギーを検知することができ、
－カメラ診断ツール：皮膚／毛髪の特性の顕微鏡画像、異なる波長の照明下の画像処理能力による水和作用。

３Ｄ位置システムを追加し、センサの測定値をこれらのツールの位置と同調して、測定値を結合し、それをユーザーの身体表面に局在化する一般的なファイルフォーマットを作製することができる。

ファイルフォーマットは、以下を少なくとも有する：
－ユーザーの経験によって特定される物理的開始点及びユーザーの身体
－同調を確実にするセンサの標本化周波数と適合する精細なタイムスタンプ
－適切な計算に特定されなければならないデータフォーマット及びセンサのユニット
－センサの数及び種類
－特定のユーザーアクション
－３Ｄ表示を再構築するために記録されたユーザーの身体領域
－コンテキスト情報及び排他的ではない：タイムゾーン、位置情報、天候、温度、バージョン。

この一般的なデジタルファイルフォーマット標準は、より精細な分析のために、全ての種類の測定値を同じ空間参照に統一することができる。

図２は、一実施形態による全体のシステム２００の構成要素を示す。システムは、検知構成要素２０１、３Ｄ再構築構成要素２０２、フィードバック構成要素２０３を含むように広く描写し、それぞれを以下に詳細に記述する。

図３は、前述のシステム２００による検知構成要素２０１の概要を示す。検知構成要素は、スタイリングツール３０１を含み、センサを有するヘアブラシとして記述する。しかしながら、ヘアドライヤー、フラットアイロン等の任意の数のスタイリングツールであってもよい。センサは、図１に示されるセンサの種類のようなユーザーの毛髪の状態を検知するためのセンサであってもよく、毛髪の湿度センサ及び／又は温度センサを含む。センサは、接近して毛髪の損傷を検出するための光学センサ、又はさらには、ブラシをかけた時に生じる音に基づいて毛髪の状態を検出するためのオーディオセンサであってもよい。センサは、赤外セル又は超音波センサ等の近接センサであってもよい。近接センサを使用して、装置／センサ間の距離を測定し、適切なアクションを実行する。例えば、ユーザーの頭がヘアドライヤーの排気の近くにあり過ぎる場合、ヘアドライヤーは温かすぎる空気を毛髪に吹きかけるべきではない。対照的に、センサが皮膚及び／又は毛髪に関係する測定を行うことができる良い範囲にある場合を装置は検出する。

動き又は空間位置又は空間位置の変化を検出するために、ヘアブラシは、技術分野で周知の加速度計／ジャイロスコープ又は磁気コンパスを含んでもよい。

あるいは、検知構成要素は、別個のセンサ３０２を含んでもよい。センサ３０２は、スタイリングツールに含まれる同様のセンサを含んでもよいが、環境の画像を捕え、画像認識を行うことができるカメラを含んでもよい。画像認識は、スタイリングツールに関係して、ユーザーの存在及び位置を検出するために使用することができる。

センサ３０２は、スタイリングツールから送信される特定の信号を検出することもでき、センサ３０２にセンサの位置に関係して、スタイリングツールの特定の位置を検出させることができる。ユーザーが頭の領域に所定の位置に装着可能なセンサ（ネックレス又はユーザーの顔に付着する接着性センサ）も装着する場合、センサ３０２は、センサ３０２に関係してユーザーの空間位置をさらに検出することができる。

光学センサ３０２がない場合、検知ハードウェアは、「オンボード」のスタイリングツールであると考えられる。３０１。図４は、スタイリングツール３０１の動き及び空間位置を「オンボード」例においてどのようにして追跡することができるのかを示す一例を示す。この例では、スタイリングツール３０１は、前述のように動き検出装置を含んでもよく、図４（Ａ）に示すように、時間＝０における最初の位置４０１からの位置の変化を検出することができる。ヘアブラシが図４（Ｂ）に示すように、時間＝１において第２の位置に移動する場合、例えば、加速度計／ジャイロスコープ／磁気コンパスによって検出される動きに基づいて、最初の位置と第２の位置との間の空間的差異を検出することができる。同様に、スタイリングツール３０１が時間＝２において第３の位置に移動する場合、最初の位置から（又はあるいは第２の位置からの）空間的差異を再度決定することができる。

前述の例において、スタイリングツール３０１の最初の位置４０１は、ブラシを真っ直ぐに保持している間、頭の上部の所定の位置である。ユーザーは、時間＝０においてスタイリングツールのボタンを押して、過程を開始することができ、そのときのスタイリングツールの位置は、所定の位置の使用に対して、ユーザーの頭に関係する予測可能な原点にあると考えられる。所定の位置４０１は、図４に示される位置に限定されず、任意の所定の位置を使用してもよいが、ユーザーにとって、ユーザーの頭に関係する予測可能な場所に再作製することが容易であるほうが好ましい。

図５は、前述の「オンボード」例によるスタイリングツール３０１において実行される過程を示す。前述のように、ユーザーは、スタイリングツールが時間＝０において最初の位置にある場合、「開始」入力を入力することができる。この時間において、ステップ５０１ａでは、１つ以上の状態（湿度、温度、毛髪の損傷等）がスタイリングツールのセンサによって検出される。並行して、ステップ５０１ｂでは、前述の場所検出装置は、スタイリングツールのおよその空間位置／場所、より詳細には、センサの空間位置を検出し、場所の検出を開始する。ステップ５０２ａ及び５０２ｂにおいて、センサ及び場所検出装置は、その同調時間データに関連するそれぞれの検出データを記録しながら、並行して動作し続ける。最終的に、ステップ５０３ａ及び５０３ｂにおいて、センサ及び場所データは、ユーザーによって提供される「停止」入力に応答して、その同調タイミングで動作を停止する。

図４及び５は、「オンボード」の例を示したが、図６では個別のセンサ３０２を使用する場合の例を示す。図４の例と同様に、時間＝０において、スタイリングツールは、最初の位置にあってもよく、センサは近くの定位置にある。時間＝０において、センサ３０２は、前述の技術の１つに基づいて、センサ３０２に関係するスタイリングツールとユーザーの頭の両方の位置を検出する。図６（Ｂ）に示すように、任意の時間Ｎにおいて、センサ３０２は、ユーザーに関係するスタイリングツールの新しい場所を検出する。

図７は、前述の図５に示される過程と同様に、スタイリングツール３０１とセンサ３０２との間で実行される過程を示す。ユーザーは、スタイリングツールが時間＝０において最初の位置にある場合、「開始」入力を入力することができる。この時間において、ステップ７０１ａで、スタイリングツールは、センサ３０２に「開始」信号を送信することができる。したがって、スタイリングツールは、進行して、前述のようにセンサを使用して、１つ以上の状態（湿度、温度、毛髪の損傷等）を検出する。並行して、ステップ７０１ｂでは、センサ３０２は、スタイリングツールのおよその空間位置／場所を検出する。ステップ７０２ａ及び７０２ｂにおいて、センサ及び位置検出装置は、その同調時間データに関連するそれぞれの検出データを記録しながら、並行して動作し続ける。最終的に、ステップ７０３ａ及び７０３ｂにおいて、センサ及び場所データは、スタイリングツール３０１におけるユーザーによって提供される「停止」入力に応答して、その同調タイミングで動作を停止し、センサ３０２に「停止」信号を送信することができる。

図８は、スタイリングツール３０１が一実施形態によるヘアブラシである場合、スタイリングツール３０１のハードウェア構成要素の電気ブロック図の図を示す。ヘアブラシは、マイクロコントローラ／プロセッサ８０３、電源８０４、通信インターフェース８０５、ユーザーインターフェース８０６、メモリ８０７を含む。

ヘアブラシは、音検知回路８０９も含んでもよく、日々のエネルギー及びスペクトルの音の変化に基づいて、ユーザーの毛髪の乾燥状態を検出するマイクロホンを含んでもよい。

ヘアブラシは、湿潤検知回路８１１も含んでもよい。この回路は、米国特許出願第１３／１１２，５３３号（米国公報第２０１２／０２９１７９７Ａ１）に記載されるものと同様であってもよく、参照により本明細書に組み込まれる。あるいは、湿潤検知回路は、磁場の変化を検出するホール効果センサに依存してもよく、このような変化は湿潤レベルに感応性である。

ヘアブラシは、力センサ８１１も含んでもよく、ヘッドとハンドルとの間に位置するロードセルの形態であってもよい。

ヘアブラシは、前述のように、ヘアブラシの近くの局所温度又は湿度を検出する周囲温度／湿度センサ８１２も含んでもよい。

さらに、ヘアブラシは、毛髪が濡れている又は乾燥しているかどうかを検出するために、又はユーザーの毛髪との接触を検出するために、ヘアブラシに組み込まれた導電ピンクイル８１３を含んでもよい。

ヘアブラシは、撮像ユニット８１４も含んでもよく、ユーザーの頭又はユーザーがヘアブラシを使用している間の毛髪と対面するブラシの外面に配置されるカメラであってもよい。撮像ユニットは、ユーザーの毛髪の熱特徴を検知する熱撮像能力を有してもよい。撮像ユニットは、また、撮像過程を補助するために、照明ユニット（ＬＥＤライト等）を備えてもよい。

一実施形態において、ヘアドライヤーは、ユーザーによって保持されるヘアドライヤーの配向を検出することができる位置／動きセンサ８０８を含み、同様に、ヘアドライヤーの動き及び動きの経路も検出することができる。一実施形態において、位置／動きセンサは、地磁気センサ及び加速度センサの少なくとも１つ又は組み合わせである。例えば、３軸地磁気センサは、３軸地磁気センサを収容しているスタイリングツール（の筐体）の現在の配向があるならば、地球磁気学の方向、又は言い換えれば地磁気ベクトルＶｔを確認する。３軸加速度センサは、静止状態の３軸加速度センサを収容しているスタイリングツール（の筐体）の現在の配向があるならば、重力の方向、又は言い換えれば重力ベクトルＧを確認する。重力ベクトルＧは、下向き垂直方向に適合する。重力ベクトルＧは、同様に、Ｘｓ、Ｙｓ及びＺｓ軸構成要素に分解されてもよい。

あるいは、又はさらに、３軸Ｘｓ、Ｚｓ及びＹｓ（ロール、ピッチ及びヨー）の周りの角速度を検出するセンサであるジャイロスコープを使用してもよく、対象物の回転を検出することができる。さらに、地磁気センサは、前述のように、地磁気ベクトルに基づいて、対象物が対面する方向を確認することができる。

前述のスタイリングツール３０１の例が、ヘアブラシとして記述されている一方で、スタイリングツールは、任意の他の種類のスタイリングツール又はフラットアイロン、ヘアドライヤー、櫛、美顔用マッサージ器等のユーザーの状態又は特徴を検知するように構成される個人用電気器具であってもよい。

図９は、一実施形態によるセンサ３０２のハードウェア構成要素の電気ブロック図の図を示す。電源９０４からの電源は、マイクロコントローラ／プロセッサ９０３によって制御される。

センサ３０２は、通信インターフェース９０５によって別の装置とデータ通信を行うことができる。

センサ３０２は、ユーザーインターフェース９０６を含んでもよく、ツールの筐体における入力ボタンの形態であってもよく、又は容量性若しくは抵抗性タッチスクリーンディスプレイ等の接触検知ディスプレイの形態であってもよい。

一実施形態において、センサ３０２は、出力インジケータ９０２を含み、照明（ＬＥＤ照明）、タッチスクリーンのインジケータ、又はスピーカーによる可聴出力の形態であってもよい。

一実施形態において、センサ３０２は、ヘアドライヤーを制御するために、又はユーザーのデータ若しくはその他の情報を保存するために、ソフトウェアを保存するメモリ９０７を含む。

センサ３０２は、近接センサ９１８も含んでもよく、外部対象物又は装置の存在を検出することができ、技術分野で理解されている赤外センサ等の光学センサであってもよい。しかしながら、静電容量センサ、超音波センサ又はドップラーセンサ等のその他の例を使用してもよい。

センサ３０２は、動き／位置センサ９０８を含んでもよく、スタイリングツールに含まれ、前述の位置／動きセンサ８０８に類似している。

センサ３０２は、電荷結合素子（ＣＣＤ）及び撮像画像を生成する相補型金属酸化膜半導体（ＣＭＯＳ）等の画像センサ９０９を含む。

前述の例において、スタイリングツール３０１とセンサ３０２の両方は、クライアント装置１２０と通信するための回路及びハードウェアを含むことができる通信インターフェース（Ｉ／Ｆ）を含む。通信インターフェース２０５は、ネットワークとインターフェースするためのＢＣＭ４３３４２Ｗｉ－Ｆｉ、周波数変調及びＢｒｏａｄｃｏｍ社のブルートゥースコンボチップ等のネットワークコントローラを含んでもよい。ハードウェアは、サイズを縮小するために設計することができる。例えば、プロセッサ２０３は、技術分野で理解されているＣＰＵであってもよい。例えば、プロセッサは、Ａｐｐｌｅ社のＡＰＬ０７７８であってもよく、又は当業者によって認識されると思われるその他のプロセッサタイプであってもよい。あるいは、ＣＰＵは、当業者によって認識されると思われる、ＦＰＧＡ、ＡＳＩＣ、ＰＬＤに実装されてもよく、又は別々の論理回路を使用してもよい。さらに、ＣＰＵは、並行して協働する複数のプロセッサとして実装されて、前述の本発明の過程の命令を実行してもよい。

図１０は、図２に前に示された３Ｄ再構築構成要素２０２の概要を示す。３Ｄ再構築構成要素において、スタイリングツール（複数可）３０１は、情報システム１００１に検知状態のデータを提供し、クラウドサーバー、コンピュータ、又は小型装置（スマートフォン、タブレット等）の形態であってもよい。さらに、センサ３０２は、環境における対象物の検出位置に関係するその記録データを情報システム１００１に提供することもできる。

情報システム１００１は、その後、１００２に描写されるように、検知データを仮想３Ｄユーザー画像にマップすることができる。仮想３Ｄユーザー画像１００２は、性別、身長、体重、毛髪の長さ、毛髪のタイプ及びその他等のユーザーの特徴に基づいて、所定の代表的なヒトの画像の仮想３Ｄ画像であってもよい。実際のユーザーの厳密なレプリカである仮想３Ｄ画像を有する必要はない。

スタイリングツール又はセンサ３０２の何れかの場所トラッカーによって提供されるデータは、１００２に描写される仮想３Ｄ画像の起点と一致する起点に関して、３次元座標の形態である。再構築の過程において、システム１００１は、スタイリングツールから受信される検知状態（毛髪の損傷等）の座標を仮想３Ｄ画像環境に直接的にマップすることができる。しかしながら、これは、仮想３Ｄ画像に示される毛髪の表面に完璧にマッピングすることができないため、システム１００１は、必要な場合、オフセットを適用して、検知状態の座標を仮想３Ｄユーザー画像の毛髪の表面の最も適切な位置にマップするように構成される。このオフセットは、検知状態の座標を仮想３Ｄユーザー画像の毛髪の表面の最も近いスポットに調節することに基づいて、適用することができる。システム１００１は、マシンラーニング技術を使用して、必要に応じてトレーニングサンプルを使用して、フィードバックを受信することに基づいて、オフセットの適用を最適化するように構成することができる。

図１１は、検知状態の座標を３Ｄユーザー画像にマップするシステム１００１によって実行される過程を示す。ステップ１１０１において、システムは、スタイリングツール３０１から受信した検知状態を受信し、保存する。ステップ１１０２において、システムは、前述のスタイリングツール３０１又はセンサ３０２の何れかによって提供され得る検出した場所データを受信し、保存する。

ステップ１１０３において、システムは、検知状態のデータに基づいて、目的の領域（毛髪の損傷等）及び関連するタイムススタンプを分析し、抽出する。このステップは、関与するセンサの種類に基づいて異なる。例えば、損傷した毛髪の検出において、毛髪の乾燥状態の閾値以上を検出する湿潤センサの読み取りが、目的の領域の抽出を引き起こすことができる。光学又は画像センサを使用する場合、枝毛の画像認識が、目的の領域の抽出を引き起こすことができる。あるいは、音響センサを使用する場合、目的の領域は、毛髪のブラッシングの音が、過剰に乾燥している又は損傷した毛髪の特徴である特定の周波数閾値を引き起こす場所であってもよい。

ステップ１１０４において、システム１００１は、目的の領域のタイムスタンプに適合するタイムスタンプを有する場所データを抽出し、保存し、場所データ及び目的の領域は、互いに関連する。

ステップ１１０５において、システムは、前述のように、３Ｄ座標データの形態である、場所データに関連させることに基づいて、３Ｄ仮想ユーザー画像に目的の領域を「マップ」する。実際には、この「マッピング」は、仮想３Ｄ画像（ユーザーの毛髪の一部等）の表示特徴と関連して、目的の領域を保存することを伴う。システム１００１は、マッピングの結果を示す表示を含んでもよく、１００２に示される３Ｄアバターにおけるマップした場所において、プレースホルダー指標又は画像を表示することを伴っていてもよい。

マッピングが完了すると、システムは、図１０の１００３に示されるように、標準化したフォーマットであるデジタルファイルを作製するように構成される。

図１２は、３Ｄ再構築アルゴリズムに基づいて作製された異なるデジタルファイルフォーマットの例を示す。図１２に示されるファイルフォーマットは、この例ではヘアドライヤー等の１つの装置から回収されたデータを表す。ファイルフォーマットは、タイムスタンプフィールド１２１１、加速度計座標フィールド１２１２、ジャイロスコープフィールド１２１３、磁気コンパスフィールド１２１４、センサ測定フィールド１２１４、３Ｄ座標フィールド１２１５、３Ｄ正規フィールド１２１６、及び特定のタイムスタンプに対応するエントリが表示される目的の領域を表すかどうかを示すフィールド１２１７等の複数のフィールドを含む。デジタルファイルのデータは必要に応じてフィルターがかけられ、又は圧縮されて、保存スペースを減少させることができる。

図１３は、前に図２で示したフィードバック構成要素２０３の概要を示す。図１３に示されるように、デジタルファイル１００３がシステム１３０１に提供され、システム１００１と同じシステムであってもよく、又は異なるシステム、装置、又はさらにユーザーのパーソナル装置（スマートフォン等）であってもよい。

システム１３０１は、マシンラーニングを使用して、異なる種類の測定値について、目的の領域の検知データを結合するように構成される。これは、経時的に検知データを比較し、ユーザーの将来の健康及び美しさを予測することを伴う。

例えば、検知状態がグレーの毛髪である場合、システム１３０１は、グレーの毛髪の開始のパターンが、検知データを経時的に比較することに基づいて生じているかどうかを決定するように構成される。このような決定は、３Ｄ仮想ユーザー画像に予測される結果を描写することができる３Ｄ画像データを生成するために使用することができる。これらの結果は、ユーザーに送信されて、ステップ１３０２に示されるように、スマートフォン等のユーザーの装置に表示することができる。

ステップ１３０２ａに示されるように、ユーザーのスマートフォンに結果を表示することは、３Ｄ仮想ユーザーの目的の領域に指標を示す「損傷オーバーレイビュー」を含んでもよい。１３０２ｂに示されるように、表示は、仮想３Ｄユーザー画像に目的の領域をズームした領域を実際に示し、又は描写する「画像局在化ビュー」を含んでもよい。例えば、目的の領域が損傷した毛髪である場合、画像局在化は、目的の領域が存在するユーザーのスポットにおいて、損傷した毛髪の実際の代表的な画像を示す。

ユーザーの目的の検出された領域並びに予測される健康及び美しさに基づいて、情報システムによって、１３０３において、個人用３Ｄレシピ又は処理を生成することができる。

例えば、デジタルレシピは、システムによって生成されて、ユーザーの毛髪にさらなる損傷が生じないように、スタイリングツール（ヘアドライヤー等）でユーザーの毛髪を処理することができる。デジタルレシピはヘアドライヤーそれ自体に送信することができ、ヘアドライヤーは、例えば、ヘアドライヤーの発熱素子の抵抗を調節し、ファンの速度を調節し、及び／又は空気流の形状を制御する機械要素の形状を調節することによって、空気流の温度及び／又は形状及び／又は速度を調節することができる。

前述のように、同時係属中の米国特許出願第１５／７２１，２８６号は、参照により本明細書に組み込まれ、ヘアブラシからの状態の直接的なフィードバックに基づいて、その設定を調節することができるヘアドライヤーを記載している。この場合、前述のデジタルレシピは、一実施形態によるヘアドライヤー等に直接的に送信することができる。

図１４は、一実施形態によるヘアドライヤーによって実行することができるアルゴリズムを示す。ステップ１４１０において、ヘアドライヤーはデジタルレシピを受信する。ステップ１４２０において、デジタルレシピは処理され、分析される。ステップ１４３０において、ヘアドライヤーは、処理／分析されたデジタルレシピに基づいて、ヘアドライヤーの設定の調節を実行する。

図１４は、デジタルレシピを使用して、ヘアドライヤー装置（又はその他のヘアスタイリングツール）を調節することができることを示しているが、デジタルレシピは、図１５に示される様々な利益のために使用することができる。例えば、調節又は前述のヘアドライヤー／スタイリングツール１５０１を使用する場合に、調節又は特定の１つ以上のヘア製品１５０２の推奨といったレジームについての入力として、デジタルレシピを同時に又は交互に使用することができ、デジタルレシピは、適宜、ユーザーに情報を音で提供することができる仮想支援装置１５０３に出力することもできる。

さらに、前述の例は、ヘアドライヤー、ヘアスタイリングツール、又はヘアブラシの一例に関しているが、本出願は、この例に限定されず、その他の例を使用することができる。

例えば、図１６は、ユーザーの皮膚に作用する音波振とうブラシ装置１６００の例を示す。ブラシ装置は、前述のセンサ３０１と同様のセンサ１６０１を含んでもよく、ユーザーの顔の画像、音、質感又は乾燥状態を捕えるために、装置の前面に配置する。さらに又はあるいは、前述のセンサ３０２と同様の外部センサ１６０２を提供してもよい。

目的の領域は、しわ、目尻の小じわ、ニキビ（ａｃｎｅ）、乾燥肌、黒ニキビ（ｂｌａｃｋｈｅａｄ）又はその他等の任意の数の皮膚状態を検出することを含んでもよい。

顔の領域についての３Ｄ再構築の結果は、前述の毛髪の領域の結果に類似している。例えば、図１７に示されるように、３Ｄ再構築は、スマートフォン１７０１の表示に出力することができ、ユーザーのアバターに検知状態領域を強調する。あるいは、３Ｄ再構築を使用して、デジタルレシピを作製することができ、（ｉ）顔のスキンケア装置の調節又は制御１７０２、（ｉｉ）スキンケア製品の推奨１７０３、（ｉｉｉ）カスタマイズされたフェイシャルマスクを作製する１７０４ために使用され、又は（ｉｉｉ）適宜、ユーザーに情報を音で提供することができる仮想支援装置１７０５に出力するために、出力することができる。

本開示の原理、代表的な実施形態、動作モードは、前述に記載した。しかしながら、保護することを意図する本開示の態様は、開示の特定の実施形態に限定されるものとして解釈されない。さらに、本明細書に記載の実施形態は、制限するというより説明するものとしてみなされる。本開示の趣旨から逸脱することなく、変形及び変化がその他及び使用される等価物によってなされ得ることが理解される。したがって、全ての変形、変化及び等価物が、請求される本開示の趣旨及び範囲にあることを明示的に意図する。

Claims (32)

1. ユーザーの身体部分を処理するように構成された装置であって、前記装置は、前記身体部分の状態を検知するように構成された少なくとも１つのセンサを含む、装置と、
   空間における前記装置の場所を追跡するように構成された場所トラッカーと、を含むシステムであって、
   前記システムは、
   セッションの間、少なくとも１つのセンサによって検出された前記身体部分の特定の検知状態の情報を受信し、
   前記セッションの間、前記装置の前記追跡した場所の情報を、前記場所トラッカーから受信し、
   前記特定の検知状態が前記装置によって検出された特定の時間を前記特定の時間の空間における前記装置の場所と関連付けるように構成される処理回路を含む、システム。
2. 前記装置は、ヘアスタイリングツールであり、前記身体部分はユーザーの毛髪である、請求項１に記載のシステム。
3. 前記検知状態は前記毛髪の損傷領域である、請求項２に記載のシステム。
4. 前記検知状態は前記身体部分の少なくとも１つの検知画像に基づく、請求項１に記載のシステム。
5. 前記検知状態は、前記装置が前記身体部分に接触した場合に検知される音に基づく、請求項１に記載のシステム。
6. 前記検知状態は前記身体部分の検知した乾燥レベルに基づく、請求項１に記載のシステム。
7. 前記装置は、スキンケアツールであり、前記身体部分（ｂｏｄｙ ｐａｒｔｙ）は前記ユーザーの皮膚である、請求項１に記載のシステム。
8. 前記検知状態は、しわ、目尻の小じわ、ニキビ（ａｃｎｅ）及び黒ニキビ（ｂｌａｃｋｈｅａｄ）の少なくとも１つである、請求項７に記載のシステム。
9. 前記センサは前記装置にあり、前記ユーザーの前記身体部分に対面するように構成される、請求項１に記載のシステム。
10. 前記少なくとも１つのセンサは、外部であり、前記身体部分に関係して、前記装置の動きを捕える、請求項１に記載のシステム。
11. ユーザーの身体部分を処理するように構成された装置を含むシステムによって実行される方法であって、前記装置は、前記身体部分の状態を検知するように構成された少なくとも１つのセンサ、及び空間における前記装置の場所を追跡するように構成された場所トラッカーを含み、前記方法は、
    セッションの間、前記少なくとも１つのセンサによって検出された前記身体部分の特定の検知状態の情報を受信し、
    前記セッションの間、前記装置の前記追跡した場所の情報を、前記場所トラッカーから受信し、
    前記特定の検知状態が前記装置によって検出された特定の時間を前記特定の時間の空間における前記装置の場所と関連付けることを含む、方法。
12. 前記装置は、ヘアスタイリングツールであり、前記身体部分はユーザーの毛髪である、請求項１１に記載の方法。
13. 前記検知状態は前記毛髪の損傷領域である、請求項１２に記載の方法。
14. 前記検知状態は前記身体部分の少なくとも１つの検知画像に基づく、請求項１１に記載の方法。
15. 前記検知状態は、前記装置が前記身体部分に接触した場合に検知される音に基づく、請求項１１に記載の方法。
16. 前記検知状態は前記身体部分の検知した乾燥レベルに基づく、請求項１１に記載の方法。
17. 前記装置は、スキンケアツールであり、前記身体部分（ｂｏｄｙ ｐａｒｔｙ）は前記ユーザーの皮膚である、請求項１１に記載の方法。
18. 前記検知状態は、しわ、目尻の小じわ、ニキビ（ａｃｎｅ）及び黒ニキビ（ｂｌａｃｋｈｅａｄ）の少なくとも１つである、請求項１７に記載の方法。
19. 前記センサは前記装置にあり、前記ユーザーの前記身体部分に対面するように構成される、請求項１１に記載の方法。
20. 前記少なくとも１つのセンサは、外部であり、前記身体部分に関係して、前記装置の動きを捕える、請求項１１に記載の方法。
21. セッションの間、装置の少なくとも１つのセンサによって検出されたユーザーの身体部分の特定の検知状態の情報を受信し、
    前記セッションの間、前記装置の追跡した場所の情報を、場所トラッカーから受信し、
    前記特定の検知状態が検出された特定の時間を前記特定の時間の空間における装置の場所と関連付け、
    前記特定の検知状態が前記装置の前記関連付けした特定の時間及び場所に基づいて発生する３次元仮想環境における前記身体部分の場所を決定するように構成された処理回路を含む、システム。
22. 前記処理回路は、前記特定の検知状態を前記３次元仮想環境と関連付ける所定のファイルフォーマットを有するデジタルファイルを生成するように構成される、請求項２１に記載のシステム。
23. 前記所定のファイルフォーマットは、タイムスタンプフィールド、加速度計座標フィールド、ジャイロスコープフィールド、磁気コンパスフィールド、センサ測定フィールド、３Ｄ座標フィールド、３Ｄ正規フィールド、及び特定のタイムスタンプに対応するエントリが表示される目的の領域を表すかどうかを示すフィールドの少なくとも１つを含む、請求項２２に記載のシステム。
24. 前記処理回路は、前記３次元仮想環境の表示を生成するために、前記デジタルファイルを表示装置に出力するように構成される、請求項２２に記載のシステム。
25. 前記３次元仮想環境の前記表示は、前記ユーザーの３次元表現に、前記特定の検知状態を描写する、請求項２４に記載のシステム。
26. 前記処理回路は、装置を制御して、前記検知状態を処理するために、前記デジタルファイルに基づいて、デジタルレシピを生成し、前記デジタルレシピを前記スタイリングツールに送信するように構成される、請求項２２に記載のシステム。
27. セッションの間、装置の前記少なくとも１つのセンサによって検出されたユーザーの身体部分の特定の検知状態の情報を受信し、
    前記セッションの間、前記装置の追跡した場所の情報を、場所トラッカーから受信し、
    前記特定の検知状態が検出された特定の時間を前記特定の時間の空間における前記装置の場所と関連付け、
    前記特定の検知状態が前記装置の前記関連付けした特定の時間及び場所に基づいて発生する３次元仮想環境における前記身体部分の場所を決定することをさらに含む、システムによって実行される方法。
28. 前記特定の検知状態を前記３次元仮想環境と関連付ける所定のファイルフォーマットを有するデジタルファイルを生成することを含む、請求項２７に記載の方法。
29. 前記所定のファイルフォーマットは、タイムスタンプフィールド、加速度計座標フィールド、ジャイロスコープフィールド、磁気コンパスフィールド、センサ測定フィールド、３Ｄ座標フィールド、３Ｄ正規フィールド、及び特定のタイムスタンプに対応するエントリが表示される目的の領域を表すかどうかを示すフィールドの少なくとも１つを含む、請求項２８に記載の方法。
30. 前記３次元仮想環境の表示を生成するために、前記デジタルファイルを表示装置に出力することをさらに含む、請求項２８に記載の方法。
31. 前記３次元仮想環境の前記表示は、前記ユーザーの３次元表現に、前記特定の検知状態を描写する、請求項３０に記載の方法。
32. 装置を制御して、前記検知状態を処理するために、前記デジタルファイルに基づいて、デジタルレシピを生成し、前記デジタルレシピを前記スタイリングツールに送信することをさらに含む、請求項２８に記載の方法。

Images