JP6710883B1 - 美容促進装置、美容促進システム、美容促進方法、および美容促進プログラム - Google Patents
美容促進装置、美容促進システム、美容促進方法、および美容促進プログラム Download PDFInfo
- Publication number
- JP6710883B1 JP6710883B1 JP2019557510A JP2019557510A JP6710883B1 JP 6710883 B1 JP6710883 B1 JP 6710883B1 JP 2019557510 A JP2019557510 A JP 2019557510A JP 2019557510 A JP2019557510 A JP 2019557510A JP 6710883 B1 JP6710883 B1 JP 6710883B1
- Authority
- JP
- Japan
- Prior art keywords
- area
- face
- feature amount
- unit
- vertex
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003796 beauty Effects 0.000 title claims abstract description 119
- 238000000034 method Methods 0.000 title claims description 19
- 238000003384 imaging method Methods 0.000 claims abstract description 65
- 238000004364 calculation method Methods 0.000 claims abstract description 46
- 210000003205 muscle Anatomy 0.000 claims abstract description 19
- 238000012545 processing Methods 0.000 claims description 45
- 230000008859 change Effects 0.000 claims description 18
- 230000002093 peripheral effect Effects 0.000 claims description 11
- 210000001747 pupil Anatomy 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 4
- 230000001737 promoting effect Effects 0.000 claims description 4
- 239000002537 cosmetic Substances 0.000 claims description 2
- 230000000994 depressogenic effect Effects 0.000 claims 3
- 210000005069 ears Anatomy 0.000 claims 1
- 230000001936 parietal effect Effects 0.000 claims 1
- 230000006870 function Effects 0.000 description 43
- 238000012986 modification Methods 0.000 description 27
- 230000004048 modification Effects 0.000 description 27
- 238000010586 diagram Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 14
- 239000003925 fat Substances 0.000 description 14
- 238000011156 evaluation Methods 0.000 description 10
- 230000032683 aging Effects 0.000 description 7
- 230000006866 deterioration Effects 0.000 description 7
- 238000013500 data storage Methods 0.000 description 6
- 230000006872 improvement Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 230000008450 motivation Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008921 facial expression Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000007665 sagging Methods 0.000 description 2
- 210000004761 scalp Anatomy 0.000 description 2
- 101150012579 ADSL gene Proteins 0.000 description 1
- 102100020775 Adenylosuccinate lyase Human genes 0.000 description 1
- 108700040193 Adenylosuccinate lyases Proteins 0.000 description 1
- 206010010356 Congenital anomaly Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000001097 facial muscle Anatomy 0.000 description 1
- 230000002431 foraging effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000399 orthopedic effect Effects 0.000 description 1
- 238000011158 quantitative evaluation Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000000216 zygoma Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
Description
例えば、特許文献1には、ユーザを撮影した撮影データから、ユーザの肌または頭皮の状態を評価する美容促進システムが開示されている。
次に、領域画定部が、特定された各頂点を結んだ直線により、三角形状をなす画定領域を画定し、面積算出部が画定領域の面積を算出する。そして、面積比較部が、画定領域の面積と基準面積とを比較する。これにより、経年劣化および改善対策による顔のプロポーションの変化を定量的に評価して、美容促進に資することができる。
本発明の第1実施形態に係る美容促進システム1ついて、図1から図8を参照しながら説明する。
図1は、本発明の一実施形態に係る美容促進システム1の構成例を示す模式図である。美容促進システム1は、ユーザ50の美容促進に資するために、ユーザ50の顔を撮像した撮像データに対してデータ処理を行い、ユーザ50の顔の状態を定量的に評価するエイジングマネジメント向け(経年劣化の管理と対策)の美容促進システムである。
なお、使用に際しては、図1に示すように、店舗のオペレータ60の操作のもとで行われてもよいし、ユーザ50自身が操作を行ってもよい。
すなわち、撮像装置10は、図1では簡略化して図示しているが、例えば撮像部が間隔をあけて複数配置された3Dカメラであってもよいし、1つの撮像部と距離センサとを備えている構成であってもよい。
具体的には、ネットワーク20は、ワイヤレスLAN(wireless LAN:WLAN)や広域ネットワーク(wide area network:WAN)、ISDNs(integrated service digital networks)、無線LANs、LTE(long term evolution)、LTE−Advanced、第4世代(4G)、第5世代(5G)、CDMA(code division multiple access)、WCDMA(登録商標)、イーサネット(登録商標)などである。
美容促進装置30は、装置側通信部31、データ記憶部32、装置処理部33、および装置側表示部34を備えている。美容促進装置30は、ユーザ50の顔を撮像した撮像データからユーザ50の顔の状態を解析する情報処理装置であって、一例として、本実施形態では、パソコンが用いられる。
データ記憶部32は、例えば、HDD、SSD、フラッシュメモリなど各種の記憶媒体により実現される。
装置側表示部34は、美容促進装置30の操作の内容や処理の結果を表示するモニタ装置である。
なお、装置処理部33は、これらの例に限られず、美容促進装置30の各部を制御するコンピュータであれば、どのようなものであってもよい。
頂点認識部33Aは、ユーザ50の顔を撮像した撮像データから、2つの固定点Pfおよび1つの可動点Pmそれぞれの位置を認識する。
なお、ここでいう固定という意味は、位置がまったく変化しないという意味ではなく、後述する可動点Pmと比較して、変化の量が極めて少ないという意味である。
また可動点Pmは、顔の筋肉に刺激を与えることで、顔の筋肉が強くなったり、顔の脂肪量が少なくなったりすることで、上側に向けて位置が変化する。このような可動点Pmの位置の変化により顔のプロポーションが変化して、顔が相手に与える印象に大きく左右する。
図3は、頂点認識部33Aによって認識する各頂点を示す図であって、撮像データの(a)正面図、(b)側面図である。なお、この内容はあくまで一例であり、頂点認識部33Aが認識する各頂点は、任意に変更することができる。すなわち、ユーザ50の骨格の構造や、筋肉の付き方等を考慮して、認識しやすい顔の頂点を、評価に用いることができる。
本実施形態では、深鼻点P1およびこめかみの頂点P2それぞれの上下方向の位置は、互いに同等となっている。頬上の頂点P3は、深鼻点P1およびこめかみの頂点P2のよりも下側に位置している。
本実施形態では、鼻下点P4および耳下点P5それぞれの上下方向の位置は、互いに同等となっている。頬下の頂点P6は、鼻下点P4および耳下点P5のよりも下側に位置している。
本実施形態では、撮像データが3Dデータであるため、座標値も3次元的に表現されることとなる。
なお、領域画定部33Bが画定する画定領域は、2次元的な領域でもよいし、3次元的な領域であってもよい。本実施形態では画定領域は、3次元的な領域となっている。
すなわち、領域画定部33Bは、上側画定領域A1および下側画定領域A2それぞれを、左右一対画定することとなる。
面積比較部33Dは、面積算出部33Cが算出した画定領域の面積と、画定領域と対応する領域の面積として既知の基準面積と、を比較する。
また、面積比較部33Dは、基準面積として、ユーザ50が望む顔としての理想モデルにおける画定領域の面積を用いることができる。このように基準面積としては、現時点での画定領域の面積と比較できるものであれば、任意に設定することができる。
理想モデルは、過去の撮像データを用いて作成する。過去の撮像データに対して、理想となる画定領域を目視で指定した元データを100個ほど準備する。この元データを用い、ディープラーニング(深層学習)処理を行うことで、理想モデルを作成することができる。
また、下側画定領域A2においても、可動点Pmである頬下の頂点P6が、鼻下点P4および耳下点P5よりも下側に位置している。
一方、可動点Pmである頬上の頂点P3、および頬下の頂点P6が上側に移動すると、上側画定領域A1および下側画定領域A2はそれぞれ、面積が小さくなることとなる。
すなわち、顔の筋肉が強くなったか、又は顔の脂肪が少なくなったことで、顔のプロポーションが改善したことを意味する。
すなわち、顔の筋肉が弱くなったか、又は顔の脂肪が多くなったことで、顔のプロポーションが悪化したことを意味する。
このようにユーザ50は、画定領域の変化量を確認することで、定量的に顔のプロポーションが改善に向かっているのか悪化しているのかを把握することができる。
携帯端末40は、端末側通信部41、端末記憶部42、端末処理部43、カメラ44、および端末側表示部45を備えている。携帯端末40は、いわゆるスマートフォンやタブレット等のユーザが携帯して使用する端末装置である。
端末記憶部42に記憶された制御プログラムを実行することで、端末処理部43が、美容促進システム1として実現すべき各機能のうちの少なくとも一部を実現してもよい。
カメラ44は、ユーザ50の操作により、撮像を行うことができる。本実施形態に係る撮像装置10に代えて、携帯端末40のカメラ44により、撮像データを取得して、美容促進装置30に送信してもよい。
端末側表示部45は、美容促進装置30により処理された比較結果を示す情報を表示するモニタ装置である。端末側表示部45は、比較結果とともに、撮像データを表示することができる。
図5は、美容促進システム1における処理フローを示す図であり、図6は、頂点認識部33Aが、頬上の頂点P3を認識する処理における模式図である。
本実施形態では、撮像装置10は3Dデータを取得する。3Dデータは、3Dカメラで撮像することで取得することができる。
頂点認識ステップでは、1つの画定領域を構成する3つの頂点として、2つの固定点Pfおよび1つの可動点Pmそれぞれの位置を認識する。ここで、各頂点の具体的な判別手法の一態様について説明する。なお、あくまでこの説明は一例であり、他の手法により各頂点を判別してもよい。
次に、他方の固定点Pfをなすこめかみの頂点P2については、顔のこめかみ部分のうち、最も窪んだ部分をこめかみの頂点P2として認識する。なお、こめかみの頂点P2は、正面視における顔の左右方向の外端部のうち、深鼻点P1と瞳の中心、または目頭とを結ぶ直線が通過する部分としてもよい。
この処理を左右両側で行うことで、左右一対の上側画定領域A1を構成する各頂点が認識される。
次に、他方の固定点Pfをなす耳下点P5については、顔のうち、耳の下に位置する部分のうち、最も窪んだ部分を耳下点P5として認識する。
この処理を左右両側で行うことで、左右一対の下側画定領域A2を構成する各頂点が認識される。
また、最新の撮像データを、過去の撮像データと重ね合わせることで、各頂点の位置を特定してもよい。また、オペレータ60が、各頂点として適切な箇所を撮像データ上で選択することで、各頂点の位置を特定してもよい。
領域画定ステップでは、各頂点同士を結んだ直線により、三角形状をなす画定領域を画定する。
面積算出ステップでは、画定領域の面積を、各頂点の座標データを用いて算出する。
面積比較ステップでは、画定領域の面積と、この画定領域と対応する領域の面積として既知の基準面積と、を比較する。この説明では、過去の測定結果で得られた画定領域の面積を、基準面積として設定している。
表示処理ステップでは、面積比較部33Dにより比較された画定領域の面積と、基準面積と、の比較結果を、装置側表示部34および端末側表示部45に表示する。また、比較結果には、今回の結果に対する知見や、今後ユーザ50が取り組む施策(顔のマッサージ等)を提案する情報が含まれていてもよい。なお、端末側表示部45には比較結果を表示しなくてもよい。
図7は、表示処理部33Eによる表示内容の一例を示す図であり、(a)2か月前の撮像データ、(b)評価時の撮像データである。また、図8は、表示処理部33Eによる表示内容の他の例を示す図であり、(a)2か月前の撮像データ、(b)評価時の撮像データである。
これにより、仮に顔のプロポーションの変化が、一定期間の経過前後において、撮像データで確認してもわかりにくいような違いしか無いような場合であっても、ユーザ50が、顔の変化の程度を認識しやすくなり、美容促進に対する動機づけを得ることができる。
このため、顔の頬の上部周辺のプロポーションを定量的に評価して、例えば加齢とともに気になりやすい頬上部のたるみ(例えば、ほうれい線と頬骨との間に形成されるゴルゴライン等)の変化を確認することができる。
次に、図9から図13を用いて、第1実施形態に係る美容促進システム1の各種変形例について説明する。なお、ここで説明する複数の変形例では、頂点認識部が認識する頂点の数、および評価に用いる画定領域(幾何形状)が、第1実施形態と異なっている。
各変形例の説明では、第1実施形態との相違点についてのみ説明し、共通する構成、および共通する効果については、その説明を省略する。
図9は、変形例に係る美容促進装置30の構成例を示すブロック図である。図10は、変形例1において、頂点認識部33Fによって認識する各頂点の一例を示す図であって、図10(a)は、撮像データの正面図、図10(b)は、撮像データの側面図である。
変形例1では、頂点認識部33Fが認識する頂点の数と、それに基づいて認識される幾何形状が、第1実施形態と異なっている。
図9および図10に示すように、変形例1では、頂点認識部33Fが、ユーザの顔を撮像した撮像データから、顔の上半分で、正中線を中心に、顔の左側と右側とのそれぞれで、1つの固定点(P1)および1つの可動点(P3)それぞれの位置を認識する。
図示の例では、顔の上半分で、正中線を中心に、顔の左側と右側とのそれぞれで、周縁部に含む幾何形状として直線L1を画定する。幾何形状画定部33Gは、第1実施形態における領域画定部33Bと同様の機能を発揮する。
そして、幾何形状画定部33Gは、顔の正中線を基準にして、左右一対の幾何形状を画定する。すなわち、幾何形状画定部33Gは、左右一対の直線L1を画定している。
そして、幾何形状画定部33Gは、顔の上下方向に間隔をあけて、2種類の幾何形状を画定する。すなわち、幾何形状画定部33Gは、周縁部に含む幾何形状として、顔の下半分で、正中線を中心に、顔の左側と右側とのそれぞれで、直線L2を画定する。幾何形状画定部33Gは、左右一対の直線L2を画定している。
すなわち、特徴量算出部33Hは、幾何形状が直線である場合には、直線の長さを算出し、図形である場合には、その面積を算出する。図示の例では、幾何形状が直線L1、L2であるため、それぞれの長さを算出する。
ここで、データ記憶部32は、第1実施形態において記憶していた基準面積に代えて、基準値を記憶している。基準値とは、第1実施形態における基準面積の概念を直線にまで拡張した概念であり、直線の長さ又は領域の面積を示す。
その結果は、表示処理部33Eが装置側表示部34および端末側表示部45に表示する。
図11に示すように、まず撮像装置10により、ユーザ50の顔を撮像する撮像ステップ(S601)を行う。
次に、頂点認識部33Fが、撮像装置10から送信された撮像データを用いて各頂点を認識する頂点認識ステップ(S602)を行う。
この変形例における幾何形状画定ステップでは、前述した通り、幾何形状画定部33Gが、直線L1、L2を左右一対ずつ画定する。
変形例1における特徴量算出ステップでは、幾何形状である直線L1、L2の長さを、各頂点の座標データを用いて算出する。
特徴量比較ステップでは、特徴量の値と、既知の基準値と、を比較する。この説明では、過去の測定結果で得られた直線L1、L2の長さを、基準値として設定している。
表示処理ステップでは、特徴量比較部33Iにより比較された幾何形状の特徴量と、基準値と、の比較結果を、装置側表示部34および端末側表示部45に表示する。また、比較結果には、今回の結果に対する知見や、今後ユーザ50が取り組む施策(顔のマッサージ等)を提案する情報が含まれていてもよい。なお、端末側表示部45には比較結果を表示しなくてもよい。
そして、このような比較を行うことにより、前述した第1実施形態と同様に、経年劣化および改善対策による顔のプロポーションの変化を定量的に評価して、美容促進に資することができる。
次に、図12を用いて、変形例2に係る美容促進システム1について説明する。図12は、変形例2において、頂点認識部33Fによって認識する各頂点の一例を示す図であって、図12(a)は、撮像データの正面図、図12(b)は、撮像データの側面図である。
そして、幾何形状画定部33Gは、頂点認識部33Fが位置を認識した各頂点同士を周縁部に含む幾何形状を画定する。ここで、図示の例では、幾何形状として、各頂点同士を結んだ五角形A1の領域を画定している。この変形例では、顔全体から左右一対の五角形A1の幾何形状を画定している。
そして、特徴量比較部33Iは、特徴量算出部33Hが算出した特徴量と、幾何形状と対応する値として既知の基準値と、を比較する。
なお、上記の説明では、可動点が一つである構成を示したが、五角形A1を画定する際に、頂点認識部33Fが、可動点を二つ以上認識してもよい。また、幾何形状画定部33Gは、顔の上半分と下半分とで、異なる五角形を画定してもよい。
次に、図13を用いて、変形例3に係る美容促進装置30について説明する。図13は、変形例3において、頂点認識部33Fによって認識する各頂点の一例を示す図であって、図13(a)は、撮像データの正面図、図13(b)は、撮像データの側面図である。
そして、幾何形状画定部33Gは、頂点認識部33Fが位置を認識した各頂点同士を周縁部に含む幾何形状として、円C1の領域を画定している。幾何形状画定部33Gは、顔全体から左右一対の円C1を画定する。
なお、上記の説明では、可動点が一つである構成を示したが、円C1を画定する際に、頂点認識部33Fが、可動点を二つ認識してもよい。また、幾何形状画定部33Gは、顔の上半分と下半分とで、異なる円を画定してもよい。
このように、評価する幾何形状は直線、円、多角形のいずれであってもよい。
次に、図14および図15を用いて、第2実施形態に係る美容促進システムについて説明する。図14は、本発明の第2実施形態に係る美容促進システム1Bの使用状態を説明する図である。図15は、第2実施形態に係る美容促進装置30Bの構成例を示すブロック図である。
撮像装置10の撮像部は、装置側表示部34における表示面の上部から、ユーザが位置する前面を撮像している。
美容促進装置30Bの装置側表示部34は、表示面が鏡面加工されている。
そして、装置側表示部34が、表示面に向かい合うユーザの顔を撮像した撮像データを、表示面に表示可能する機能を有する。このため、撮像装置10が撮像したユーザの顔の撮像データや、撮像データを用いて装置処理部33が行ったプロポーションの変化の評価結果を、鏡を見るようにしてユーザが確認することができる。
これにより、ユーザが身だしなみを整えるタイミングで、顔のプロポーションの変化を確認することができ、ユーザの利便性を確保することができる。
例えば、上記実施形態の制御プログラムは、コンピュータに読み取り可能な記憶媒体に記憶された状態で提供されてもよい。記憶媒体は、「一時的でない有形の媒体」に、制御プログラムを記憶可能である。記憶媒体は、HDDやSDDなどの任意の適切な記憶媒体、またはこれらの2つ以上の適切な組合せを含むことができる。記憶媒体は、揮発性、不揮発性、または揮発性と不揮発性の組合せでよい。なお、記憶媒体はこれらの例に限られず、制御プログラムを記憶可能であれば、どのようなデバイスまたは媒体であってもよい。
また、当該制御プログラムは、任意の伝送媒体(通信ネットワークや放送波等)を介して、美容促進システム1に実装されるアプリケーションプログラムであってもよい。美容促進システム1は、例えば、インターネット等を介してダウンロードした制御プログラムを実行することにより、各実施形態に示す複数の機能部の機能を実現する。
本発明の美容促進方法は、コンピュータが、ユーザの顔を撮像した撮像データから、前記顔の骨格に依存して特定される少なくとも1つの固定点、および前記顔の筋肉および脂肪に依存して特定される1つの可動点それぞれの位置を認識する頂点認識ステップと、前記頂点認識ステップにより位置を認識した各頂点同士を周縁部に含む幾何形状を確定する幾何形状画定ステップと、前記幾何形状の長さ又は面積を示す特徴量を算出する特徴量算出ステップと、前記特徴量算出ステップが算出した前記特徴量と、前記幾何形状と対応する値として既知の特徴量と、を比較する特徴量比較ステップと、を実行する。
10 撮像装置
20 ネットワーク
30 美容促進装置
40 携帯端末
50 ユーザ
60 オペレータ
Claims (15)
- ユーザの顔を撮像した撮像データから、前記顔の骨格に依存して特定される少なくとも1つの固定点、および前記顔の筋肉および脂肪に依存して特定される少なくとも1つの可動点それぞれの位置を認識する頂点認識部と、
前記頂点認識部が位置を認識した各頂点同士を周縁部に含む幾何形状を画定する幾何形状画定部と、
前記幾何形状の長さ又は面積を示す特徴量を算出する特徴量算出部と、
前記特徴量算出部が算出した前記特徴量と、前記幾何形状と対応する値として既知の基準値と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する特徴量比較部と、を備え、
前記幾何形状画定部は、前記顔の上下方向に間隔をあけて、2種類の前記幾何形状を画定し、
前記特徴量比較部は、前記基準値として、前記撮像データの撮像時から一定期間前の時点での前記ユーザにおける前記特徴量を用いる美容促進装置。 - 前記頂点認識部は、2つの前記固定点と、1つの前記可動点と、を認識し、
前記幾何形状画定部は、前記頂点認識部が位置を認識した各頂点同士を結んだ直線により、三角形状をなす画定領域を画定する領域画定部であり、
前記特徴量算出部は、前記特徴量として、前記画定領域の面積を算出する面積算出部であり、
前記特徴量比較部は、前記特徴量と前記既知の基準値との比較として、前記面積算出部が算出した前記画定領域の面積と、前記画定領域と対応する領域の面積として既知の基準面積と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する面積比較部であることを特徴とする請求項1に記載の美容促進装置。 - 前記特徴量比較部により、前記特徴量と、前記基準値と、を比較した比較結果を示す情報を出力する表示処理部を備えていることを特徴とする請求項1又は2に記載の美容促進装置。
- 前記幾何形状画定部は、前記顔の正中線を基準にして、左右一対の前記幾何形状を画定することを特徴とする請求項1から3のいずれか1項に記載の美容促進装置。
- 前記頂点認識部は、
2つの前記固定点として、深鼻点とこめかみの頂点とにより特定される各頂点を認識し、
1つの前記可動点として、頬上の頂点を認識することを特徴とする請求項2から4のいずれか1項に記載の美容促進装置。 - 前記頂点認識部は、前記撮像データを3次元的に評価して、
前記顔の鼻根部のうち、最も窪んだ部分を前記深鼻点として認識し、
前記顔のこめかみ部分のうち、最も窪んだ部分を前記こめかみの頂点として認識し、
前記顔の頬の上部のうち、瞳の外側の垂直線上付近において最も隆起した部分を前記頬上の頂点として認識することを特徴とする請求項5に記載の美容促進装置。 - 前記頂点認識部は、
2つの前記固定点として、鼻下点と耳下点とにより特定される各頂点を認識し、
1つの前記可動点として、頬下の頂点を認識することを特徴とする請求項2から6のいずれか1項に記載の美容促進装置。 - 前記頂点認識部は、前記撮像データを3次元的に評価して、
前記顔の鼻下部のうち、最も窪んだ部分を前記鼻下点として認識し、
前記顔のうち、耳の下に位置する部分のうち、最も窪んだ部分を前記耳下点として認識し、
前記顔の頬の下部のうち、瞳の外側の垂直線上付近における、口角の横の膨らみにおいて、最も隆起した部分を前記頬下の頂点として認識することを特徴とする請求項7に記載の美容促進装置。 - 前記特徴量比較部は、前記基準値として、前記ユーザが望む顔としての理想モデルにおける前記特徴量を用いることを特徴とする請求項1から8のいずれか1項に記載の美容促進装置。
- 前記請求項1から9のいずれか1項に記載の美容促進装置と、
前記ユーザの顔を撮像する撮像部、および前記撮像部が撮像した撮像データを前記美容促進装置に送信する送信部を備えた撮像装置と、を備え、
前記美容促進装置は、さらに前記撮像データを受信する受信部を備える美容促進システム。 - 内部に前記撮像部が内蔵されるとともに、表示面が鏡面加工された装置側表示部を備え、
前記装置側表示部が、前記表示面に向かい合うユーザの顔を撮像した撮像データを、前記表示面に表示可能なスマートミラーであることを特徴とする請求項10に記載の美容促進システム。 - コンピュータが、
ユーザの顔を撮像した撮像データから、前記顔の骨格に依存して特定される少なくとも1つの固定点、および前記顔の筋肉および脂肪に依存して特定される1つの可動点それぞれの位置を認識する頂点認識ステップと、
前記頂点認識ステップにより位置を認識した各頂点同士を周縁部に含む幾何形状を確定する幾何形状画定ステップと、
前記幾何形状の長さ又は面積を示す特徴量を算出する特徴量算出ステップと、
前記特徴量算出ステップが算出した前記特徴量と、前記幾何形状と対応する値として既知の基準値と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する特徴量比較ステップと、を実行し、
前記幾何形状画定ステップは、前記顔の上下方向に間隔をあけて、2種類の前記幾何形状を画定し、
前記特徴量比較ステップは、前記基準値として、前記撮像データの撮像時から一定期間前の時点での前記ユーザにおける前記特徴量を用いる美容促進方法。 - 前記頂点認識ステップでは、2つの前記固定点と、1つの前記可動点と、を認識し、
前記幾何形状画定ステップは、前記頂点認識ステップが位置を認識した各頂点同士を結んだ直線により、三角形状をなす画定領域を画定する領域画定ステップであり、
前記特徴量算出ステップは、前記画定領域の面積を算出する面積算出ステップであり、
前記特徴量比較ステップは、前記面積算出ステップが算出した前記画定領域の面積と、前記画定領域と対応する領域の面積として既知の基準面積と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する面積比較ステップであることを特徴とする請求項12に記載の美容促進方法。 - コンピュータに、
ユーザの顔を撮像した撮像データから、前記顔の骨格に依存して特定される少なくとも1つの固定点、および前記顔の筋肉および脂肪に依存して特定される1つの可動点それぞれの位置を認識する頂点認識機能と、
前記頂点認識機能が位置を認識した各頂点同士を周縁部に含む幾何形状を確定する幾何形状画定機能と、
前記幾何形状の長さ又は面積を示す特徴量を算出する特徴量算出機能と、
前記特徴量算出機能が算出した前記特徴量と、前記幾何形状と対応する値として既知の基準値と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する特徴量比較機能と、を実現させ、
前記幾何形状画定機能は、前記顔の上下方向に間隔をあけて、2種類の前記幾何形状を画定し、
前記特徴量比較機能は、前記基準値として、前記撮像データの撮像時から一定期間前の時点での前記ユーザにおける前記特徴量を用いる美容促進プログラム。 - 前記頂点認識機能では、2つの前記固定点と、1つの前記可動点と、を認識し、
前記幾何形状画定機能は、前記頂点認識機能が位置を認識した各頂点同士を結んだ直線により、三角形状をなす画定領域を画定する領域画定機能であり、
前記特徴量算出機能は、前記画定領域の面積を算出する面積算出機能であり、
前記特徴量比較機能は、前記面積算出機能が算出した前記画定領域の面積と、前記画定領域と対応する領域の面積として既知の基準面積と、を比較して、ユーザの顔のプロポーションの経時的な変化を定量的に評価する面積比較機能であることを特徴とする請求項14に記載の美容促進プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018226760 | 2018-12-03 | ||
JP2018226760 | 2018-12-03 | ||
PCT/JP2019/012588 WO2020115922A1 (ja) | 2018-12-03 | 2019-03-25 | 美容促進装置、美容促進システム、美容促進方法、および美容促進プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6710883B1 true JP6710883B1 (ja) | 2020-06-17 |
JPWO2020115922A1 JPWO2020115922A1 (ja) | 2021-02-15 |
Family
ID=70974225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019557510A Active JP6710883B1 (ja) | 2018-12-03 | 2019-03-25 | 美容促進装置、美容促進システム、美容促進方法、および美容促進プログラム |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6710883B1 (ja) |
TW (1) | TWI731447B (ja) |
WO (1) | WO2020115922A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7236754B2 (ja) * | 2021-04-22 | 2023-03-10 | B-by-C株式会社 | 美顔支援システム、美顔支援方法、及び美顔支援プログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1975870B1 (en) * | 2006-01-17 | 2020-08-26 | Shiseido Co., Ltd. | Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program |
JP4788786B2 (ja) * | 2009-02-09 | 2011-10-05 | 株式会社デンソー | 眠気検出装置,プログラムおよび眠気検出方法 |
TW201035877A (en) * | 2009-03-24 | 2010-10-01 | Altek Corp | Human face scoring method |
-
2019
- 2019-03-25 WO PCT/JP2019/012588 patent/WO2020115922A1/ja active Application Filing
- 2019-03-25 JP JP2019557510A patent/JP6710883B1/ja active Active
- 2019-10-23 TW TW108138182A patent/TWI731447B/zh active
Also Published As
Publication number | Publication date |
---|---|
JPWO2020115922A1 (ja) | 2021-02-15 |
TW202024634A (zh) | 2020-07-01 |
TWI731447B (zh) | 2021-06-21 |
WO2020115922A1 (ja) | 2020-06-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110326034B (zh) | 用于年龄外貌模拟的方法 | |
EP3323249B1 (en) | Three dimensional content generating apparatus and three dimensional content generating method thereof | |
KR102006019B1 (ko) | 시술에 대한 결과 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 | |
KR101556992B1 (ko) | 얼굴 성형 시뮬레이션을 이용한 3차원 스캔 시스템 | |
CN109978984A (zh) | 人脸三维重建方法及终端设备 | |
US11315298B2 (en) | Personalized stylized avatars | |
CN104809638A (zh) | 一种基于移动终端的眼镜虚拟试戴方法和系统 | |
CN110956071B (zh) | 眼部关键点的标注及其检测模型的训练方法和装置 | |
JP4999731B2 (ja) | 顔画像処理装置 | |
CN108682050B (zh) | 基于三维模型的美颜方法和装置 | |
US20160203358A1 (en) | Systems and methods for using curvatures to analyze facial and body features | |
US20230337898A1 (en) | Oral image processing method, oral diagnostic device for performing operation according thereto, and computer-readable storage medium in which program for performing method is stored | |
CN107343148B (zh) | 图像补全方法、装置和终端 | |
CN109242760B (zh) | 人脸图像的处理方法、装置和电子设备 | |
JP6710883B1 (ja) | 美容促進装置、美容促進システム、美容促進方法、および美容促進プログラム | |
CN107469355A (zh) | 游戏人物形象创建方法及装置、终端设备 | |
US20220415002A1 (en) | Three-dimensional (3d) image modeling systems and methods for determining respective mid-section dimensions of individuals | |
US20160345887A1 (en) | Moisture feeling evaluation device, moisture feeling evaluation method, and moisture feeling evaluation program | |
CN110852934A (zh) | 图像处理方法及装置、图像设备及存储介质 | |
CN111742352A (zh) | 3d对象建模方法以及相关设备和计算机程序产品 | |
JP6458300B2 (ja) | 身体情報取得装置および身体情報取得方法 | |
US11869213B2 (en) | Electronic device for analyzing skin image and method for controlling the same | |
JP7340880B2 (ja) | マッサージ評価方法、マッサージ評価装置、およびマッサージ評価プログラム | |
JP7442171B2 (ja) | 画像処理システム、画像処理方法、および画像処理プログラム | |
CN114333018A (zh) | 整形信息推荐方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191024 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191025 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191025 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20191213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191224 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200218 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200507 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6710883 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |