JP2024028060A - Method, skill evaluation device and program for evaluating skill for client changing hair style - Google Patents
Method, skill evaluation device and program for evaluating skill for client changing hair style Download PDFInfo
- Publication number
- JP2024028060A JP2024028060A JP2022131407A JP2022131407A JP2024028060A JP 2024028060 A JP2024028060 A JP 2024028060A JP 2022131407 A JP2022131407 A JP 2022131407A JP 2022131407 A JP2022131407 A JP 2022131407A JP 2024028060 A JP2024028060 A JP 2024028060A
- Authority
- JP
- Japan
- Prior art keywords
- evaluation
- treatment
- image
- user
- storage device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 240
- 238000000034 method Methods 0.000 title claims abstract description 105
- 238000011282 treatment Methods 0.000 claims description 225
- 239000002537 cosmetic Substances 0.000 claims description 30
- 239000000284 extract Substances 0.000 claims description 9
- 230000008451 emotion Effects 0.000 claims description 7
- 239000003795 chemical substances by application Substances 0.000 claims description 6
- 229940079593 drug Drugs 0.000 claims description 6
- 239000003814 drug Substances 0.000 claims description 6
- 239000000853 adhesive Substances 0.000 claims description 5
- 230000001070 adhesive effect Effects 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 51
- 238000010586 diagram Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 13
- 238000000605 extraction Methods 0.000 description 12
- 238000010801 machine learning Methods 0.000 description 7
- 210000003128 head Anatomy 0.000 description 6
- 230000008921 facial expression Effects 0.000 description 5
- 210000004761 scalp Anatomy 0.000 description 5
- 238000009434 installation Methods 0.000 description 4
- 239000002453 shampoo Substances 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000003796 beauty Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000001035 drying Methods 0.000 description 2
- 238000004043 dyeing Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 206010027940 Mood altered Diseases 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000000861 blow drying Methods 0.000 description 1
- 210000001520 comb Anatomy 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000011272 standard treatment Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000008719 thickening Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本発明は、頭髪スタイルを変更する利用者に対する施術の技能を評価する技能評価装置が行う方法、技能評価装置及びプログラムに関する。 TECHNICAL FIELD The present invention relates to a method, a skill evaluation device, and a program performed by a skill evaluation device for evaluating the skill of performing a treatment on a user who changes his or her hair style.
ウィッグは利用者の好みや自髪の状態、頭部の形などに応じて適した形態があるとともに、それぞれ適した施術が必要となる。施術者によってウィッグの利用者に対する施術の技能はばらつくことから、その技能を適切に評価し、施術者にフィードバックすることが望まれる。 Wigs come in different forms depending on the user's preferences, hair condition, head shape, etc., and each type requires an appropriate treatment. Since the skill of performing a treatment on a wig user varies depending on the practitioner, it is desirable to appropriately evaluate the skill and provide feedback to the practitioner.
特許文献１には、作業者個々の技能が重要視される様々な作業について、その作業を行う作業者の習熟レベルを容易かつ客観的に評価できる技能評価システムおよび技能評価方法が開示される。すなわち、作業の技能を修得する必要がある作業者の技能水準を評価する装置において、評価の対象となる技能が必要とされる作業に関連した作業の状態を測定し定量的な挙動データおよび作業状態データから得られる特定の有意なパターンと、あらかじめ構築された模範的なデータおよびそのデータ範囲・パターンに関する情報を記憶するパターン記憶装置が記憶する模範的なデータのパターンとを比較した結果から得られる指標を評価結果として提示する技能評価結果提示装置とを具備する構成が開示される。 Patent Document 1 discloses a skill evaluation system and a skill evaluation method that can easily and objectively evaluate the proficiency level of a worker who performs various tasks in which the skill of each worker is important. In other words, in a device that evaluates the skill level of workers who need to acquire work skills, quantitative behavioral data and work data are collected that measure the work status related to the work that requires the skills to be evaluated. A method obtained from a comparison between a specific significant pattern obtained from state data and a pattern of exemplary data stored in a pattern storage device that stores information regarding exemplary data and its data range/pattern that has been constructed in advance. A configuration is disclosed that includes a skill evaluation result presentation device that presents an index evaluated as an evaluation result.
ウィッグ等の頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術は、自髪に対する施術、頭皮に対する施術、ウィッグそのものに対する施術など多岐にわたることから、施術の技能を客観的に評価することは非常に困難である。単に施術の技能のみならず、利用者（顧客）とのコミュニケーションなど顧客満足度についても技能の一つとして捉え、評価することが望まれる。 The treatments for users who change their hair style using wigs and other hair style changing means are diverse, such as treatments on their own hair, treatments on the scalp, and treatments on the wig itself, so it is extremely difficult to objectively evaluate the skill of the treatment. It is difficult to It is desirable to consider and evaluate customer satisfaction, such as communication with users (customers), in addition to simply treatment skills.
本発明はかかる事情に鑑みてなされたものであり、その目的は、ウィッグ等の頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を客観的に評価することができる方法、技能評価装置及びプログラムを提供することにある。 The present invention has been made in view of the above circumstances, and its purpose is to provide a method and skill evaluation that can objectively evaluate the skill of a user who changes his/her hair style using a hair style changing means such as a wig. The objective is to provide equipment and programs.
本発明の第１の態様は、頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を評価する技能評価装置が行う方法であって、前記技能評価装置は、前記頭髪スタイル変更手段によって前記利用者の頭髪スタイルを変更するために行われる前記施術に関する評価基準情報を記憶した記憶装置にアクセス可能であり、技能評価装置が、前記施術中の画像を取得する工程と、技能評価装置が、前記画像から前記施術に関する画像特徴要素を抽出する工程と、技能評価装置が、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記画像特徴要素の評価を示す評価値を算出する工程とを有する方法である。 A first aspect of the present invention is a method performed by a skill evaluation device for evaluating the skill of performing a treatment on a user who changes a hair style using a hair style change means, the skill evaluation device performing a treatment using a hair style change means. A storage device storing evaluation criteria information regarding the treatment performed to change the hair style of the user is accessible, and the skill evaluation device includes a step of acquiring an image during the treatment; , a step of extracting an image feature element related to the treatment from the image, and a step of the skill evaluation device calculating an evaluation value indicating the evaluation of the image feature element based on the evaluation criterion information obtained by accessing the storage device. This is a method having the following.
本発明の第２の態様は、上記第１の態様に係る方法の各工程を実行するための手段を備えた技能評価装置である。 A second aspect of the present invention is a skill evaluation device including means for executing each step of the method according to the first aspect.
本発明の第３の態様は、頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を評価する技能評価装置であって、処理部と、前記処理部が実行可能な命令を含むプログラムを記憶した記憶部とを有し、前記プログラムが、上記第１の態様に係る方法の各工程を前記処理部に実行させる前記命令を含む、技能評価装置である。 A third aspect of the present invention is a skill evaluation device for evaluating the skill of performing a treatment on a user who changes a hair style using a hair style changing means, the device comprising a processing section and a program including instructions executable by the processing section. The skill evaluation device has a storage unit storing the above, and the program includes the instructions for causing the processing unit to execute each step of the method according to the first aspect.
本発明の第４の態様は、コンピュータが実行可能な命令を含むプログラムであって、上記第１の態様に係る方法の各工程を前記コンピュータに実行させる前記命令を含むプログラムである。 A fourth aspect of the present invention is a program including instructions executable by a computer, which causes the computer to execute each step of the method according to the first aspect.
本発明によれば、ウィッグ等の頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を客観的に評価することができる方法、技能評価装置及びプログラムを提供することが可能となる。 According to the present invention, it is possible to provide a method, a skill evaluation device, and a program that can objectively evaluate the skill of performing a treatment on a user who changes his or her hair style using a hair style changing means such as a wig.
以下、本発明の実施形態を図面に基づいて説明する。なお、以下の説明では、同一の部材には同一の符号を付し、一度説明した部材については適宜その説明を省略する。 Embodiments of the present invention will be described below based on the drawings. In the following description, the same members are given the same reference numerals, and the description of the members that have been described once will be omitted as appropriate.
（技能評価装置１）
図１は、本実施形態に係る技能評価装置を例示するブロック図である。
図１に示すように、技能評価装置１は、頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を評価する装置である。頭髪スタイル変更手段には、例えばウィッグ、ヘアーエクステンション、増毛施術（利用者の自毛に擬毛を取り付ける施術）などが含まれる。図１の例において、技能評価装置１は、処理部１１、記憶部１２、入力部１３、出力部１４および通信部１５を備える。技能評価装置１は、単独のコンピュータによって構成されていてもよいし、複数のコンピュータによって構成されていてもよい。また、複数のコンピュータや各部の少なくとも１つが離間した位置に配置され、任意の通信ネットワークを介して接続される構成であってもよい。
(Skill evaluation device 1)
FIG. 1 is a block diagram illustrating a skill evaluation device according to this embodiment.
As shown in FIG. 1, the skill evaluation device 1 is a device that evaluates the skill of performing a treatment on a user who changes his/her hair style using a hair style changing means. Hair style changing means include, for example, wigs, hair extensions, hair thickening procedures (attachment of fake hair to the user's own hair), and the like. In the example of FIG. 1, the skill evaluation device 1 includes a processing section 11, a storage section 12, an input section 13, an output section 14, and a communication section 15. The skill evaluation device 1 may be configured by a single computer, or may be configured by a plurality of computers. Alternatively, a configuration may be adopted in which a plurality of computers or at least one of each part is placed at a separate location and connected via an arbitrary communication network.
処理部１１は、技能評価装置１の全体的な動作を統括的に司り、所定の情報処理を実行する。処理部１１は、例えば、記憶部１２に格納された１つ以上のプログラム１２１の命令に従って処理を実行する１つ以上のプロセッサ（ＣＰＵ、ＭＰＵ、ＤＳＰなど）を含む。 The processing unit 11 centrally controls the overall operation of the skill evaluation device 1 and executes predetermined information processing. The processing unit 11 includes, for example, one or more processors (CPU, MPU, DSP, etc.) that execute processing according to instructions of one or more programs 121 stored in the storage unit 12.
記憶部１２は、処理部１１において実行されるプログラム１２１の命令や、処理部１１による処理の過程で一時的に保存されるデータ、処理部１１の処理に利用されるデータ、処理部１１の処理の結果として得られたデータなどを記憶する。記憶部１２は、例えば、主記憶装置（ＲＯＭ、ＲＡＭなど）と補助記憶装置（フラッシュメモリ、ＳＳＤ、ハードディスク、メモリカード、光ディスクなど）を含んでよい。記憶部１２は、１つの記憶装置から構成されてもよいし、複数の記憶装置から構成されてもよい。記憶部１２が複数の記憶装置から構成される場合、各記憶装置は、コンピュータのバスや他の任意の情報伝送手段を介して処理部１１と接続される。 The storage unit 12 stores instructions of a program 121 executed in the processing unit 11 , data temporarily stored during the process of processing by the processing unit 11 , data used for processing of the processing unit 11 , and processing of the processing unit 11 . Store the data obtained as a result. The storage unit 12 may include, for example, a main storage device (ROM, RAM, etc.) and an auxiliary storage device (flash memory, SSD, hard disk, memory card, optical disk, etc.). The storage unit 12 may be composed of one storage device or may be composed of a plurality of storage devices. When the storage unit 12 is composed of a plurality of storage devices, each storage device is connected to the processing unit 11 via a computer bus or other arbitrary information transmission means.
プログラム１２１は、コンピュータ読み取り可能な記録媒体（ＵＳＢメモリ、メモリカード、光ディスク、その他の非一時的な有形の媒体）に記録されたものを図示しない読み取り装置から入力して記憶部１２に記憶させてもよいし、通信部１５において他の装置から受信したものを記憶部１２に記憶させてもよい。 The program 121 inputs information recorded on a computer-readable recording medium (USB memory, memory card, optical disk, or other non-temporary tangible medium) from a reading device (not shown) and stores it in the storage unit 12. Alternatively, the information received from another device by the communication unit 15 may be stored in the storage unit 12.
入力部１３は、映像を取得するカメラを含む。入力部１３は、音声を取得するマイクを含んでいてもよい。カメラおよびマイクのほか、入力部１３は、ユーザの操作に応じた指示やその他の情報を処理部１１に入力するデバイスを含んでいてもよい。これらのデバイスは、例えば、タッチパネル、タッチパッド、キーボード、マウス、ボタン、スイッチである。 The input unit 13 includes a camera that acquires images. The input unit 13 may include a microphone for acquiring audio. In addition to the camera and microphone, the input unit 13 may include a device that inputs instructions and other information to the processing unit 11 according to user operations. These devices are, for example, touch panels, touch pads, keyboards, mice, buttons, switches.
出力部１４は、処理部１１において生成される映像信号に応じた映像を表示する装置であり、例えば液晶ディスプレイ、有機ＥＬディスプレイ、プロジェクタなどの表示機器を含む。また、出力部１４は、処理部１１において生成される音声信号に応じた音声を出力する装置であって、例えばスピーカ、ヘッドホン、イヤホンなどの少なくとも１つを含んでいてもよい。 The output unit 14 is a device that displays an image according to the image signal generated in the processing unit 11, and includes display equipment such as a liquid crystal display, an organic EL display, and a projector. Further, the output unit 14 is a device that outputs audio according to the audio signal generated in the processing unit 11, and may include, for example, at least one of a speaker, headphones, earphones, and the like.
通信部１５は、通信ネットワーク３を介して他の装置（記憶装置２等）と通信を行うための装置であり、例えば所定の通信規格（無線ＬＡＮ、イーサネット（登録商標）など）に準拠して通信を行う通信機器（ネットワークインターフェースカードなど）を含む。技能評価装置１は、通信ネットワーク３を介して接続される記憶装置２にアクセス可能である。 The communication unit 15 is a device for communicating with other devices (storage device 2, etc.) via the communication network 3, and is compliant with a predetermined communication standard (wireless LAN, Ethernet (registered trademark), etc.). Includes communication equipment (network interface card, etc.) that performs communication. The skill evaluation device 1 can access a storage device 2 connected via a communication network 3.
（記憶装置２）
図２は、記憶装置の構成を例示する図である。
記憶装置２はデータベースとして機能する。図２に示すように、記憶装置２は、評価基準情報２１、利用者情報２２および施術者情報２３を少なくとも記憶する。
(Storage device 2)
FIG. 2 is a diagram illustrating the configuration of a storage device.
The storage device 2 functions as a database. As shown in FIG. 2, the storage device 2 stores at least evaluation criteria information 21, user information 22, and practitioner information 23.
評価基準情報２１はウィッグの施術に関する評価の基準になる情報である。評価基準情報２１の詳細は後述する。利用者情報２２は、ウィッグの利用者に関する個人情報である。例えば、ウィッグの利用者の氏名、年齢、性別、頭部の測定情報、自髪の情報、使用ウィッグの情報、パッチ検査の結果などが挙げられる。施術者情報２３は、ウィッグの施術を行う技術者（施術者）に関する個人情報である。例えば、施術者の氏名、識別番号、担当利用者の情報、施術の実績情報、施術評価の結果および履歴などが挙げられる。 The evaluation standard information 21 is information that serves as a standard for evaluation regarding wig treatments. Details of the evaluation criteria information 21 will be described later. The user information 22 is personal information regarding the user of the wig. Examples include the wig user's name, age, gender, head measurement information, own hair information, information on the wig used, and patch test results. The practitioner information 23 is personal information regarding the technician (practitioner) who performs the wig treatment. Examples include the name of the practitioner, identification number, information on the user in charge, treatment performance information, treatment evaluation results and history, and the like.
図３は、記憶装置に記憶される評価基準情報を例示する図である。
図３に示すように、評価基準情報２１には、施術画像情報２１１、施術音声情報２１２、施術手順情報２１３、施術用具情報２１４、施術用化粧品等情報２１５、施術物理量情報２１６が含まれる。
FIG. 3 is a diagram illustrating evaluation criteria information stored in a storage device.
As shown in FIG. 3, the evaluation criteria information 21 includes treatment image information 211, treatment audio information 212, treatment procedure information 213, treatment tool information 214, treatment cosmetics etc. information 215, and treatment physical quantity information 216.
施術画像情報２１１は、ウィッグの施術についての画像（動画、静止画を含む。以下、同様）による評価の基準となる情報である。すなわち、施術画像情報２１１は、ウィッグの利用者に対する施術の工程ごとに評価の基準となる画像である。例えば、施術画像情報２１１には、正しい施術を行っている状態の画像や、間違った施術を行っている状態の画像が含まれる。 The treatment image information 211 is information that serves as a standard for evaluation using images (including moving images and still images; the same applies hereinafter) regarding wig treatments. That is, the treatment image information 211 is an image that serves as a standard for evaluation for each treatment step for the wig user. For example, the treatment image information 211 includes images of a correct treatment being performed and images of an incorrect treatment being performed.
施術音声情報２１２は、ウィッグの施術について利用者と施術者との会話に関して評価の基準となる情報である。例えば、施術音声情報２１２には、利用者と施術者との会話において、問いかけとなる言葉、回答となる言葉、和やかな会話となる言葉（ワード）、楽しい会話となる言葉、疑問を抱く言葉、不機嫌な場合に発する言葉などが音声情報として含まれる。 The treatment audio information 212 is information that serves as a basis for evaluation regarding the conversation between the user and the practitioner regarding the wig treatment. For example, the treatment audio information 212 includes words that pose a question, words that provide an answer, words that create a peaceful conversation, words that create a fun conversation, words that raise doubts, and words that cause a conversation between the user and the practitioner. The speech information includes words that you say when you are in a bad mood.
施術手順情報２１３は、ウィッグの施術手順に関する情報である。ウィッグの利用者に対する施術には各種のコースがあり、そのコースごとに施術手順が定められている。施術手順情報２１３には、このようなコースごとの施術手順の情報が含まれる。施術手順は手順識別情報と対応付けて記憶される。施術画像情報２１１の各画像は、この手順識別情報と紐付けされている。 The treatment procedure information 213 is information related to a wig treatment procedure. There are various courses of treatment for wig users, and treatment procedures are determined for each course. The treatment procedure information 213 includes information on treatment procedures for each course. The treatment procedure is stored in association with procedure identification information. Each image of the treatment image information 211 is associated with this procedure identification information.
施術用具情報２１４は、ウィッグの施術に用いる用具に関する情報である。ウィッグの施術に用いる用具には、施術者が手で使用するもの（コーム、ハサミ、トリマー、ドライヤーなど）や、機械器具（頭皮マッサージ器、スチーマーなど）が挙げられる。施術用具情報２１４は、施術手順情報２１３の手順識別情報と紐付けされている。すなわち、施術用具情報２１４は、ウィッグの施術の手順（工程）に対して適切な用具であるかどうか、また不適切な用具であるかどうかを示す基準となる情報でもある。 The treatment tool information 214 is information regarding tools used for wig treatment. Tools used in wig treatments include those used by the practitioner's hands (combs, scissors, trimmers, hair dryers, etc.) and mechanical devices (scalp massagers, steamers, etc.). The treatment tool information 214 is linked to the procedure identification information of the treatment procedure information 213. That is, the treatment tool information 214 is also information that serves as a standard indicating whether or not the tool is appropriate for the procedure (process) of wig treatment, or whether it is an inappropriate tool.
施術用化粧品等情報２１５は、ウィッグの施術に用いる化粧品等に関する情報である。ウィッグの施術に用いる化粧品等には、例えば、シャンプー、リンス、育毛剤、頭皮マッサージ用の化粧品、頭髪や頭皮に用いる薬剤、ウィッグの固定に使用される接着剤、ウィッグの取り外しに使用される剥離剤等が含まれる。施術用化粧品等情報２１５は、施術手順情報２１３の手順識別情報と紐付けされている。すなわち、施術用化粧品等情報は、ウィッグの施術の手順（工程）に対して適切な化粧品等であるかどうか、また不適切な化粧品等であるかどうかを示す基準となる情報でもある。 The treatment cosmetics etc. information 215 is information regarding cosmetics etc. used for wig treatments. Cosmetics used in wig treatments include shampoos, conditioners, hair restorers, cosmetics for scalp massage, drugs used for hair and scalp, adhesives used to fix wigs, and peeling agents used to remove wigs. This includes agents, etc. The treatment cosmetics etc. information 215 is linked to the procedure identification information of the treatment procedure information 213. That is, the information on cosmetics, etc. for treatment is also information that serves as a standard indicating whether cosmetics, etc. are appropriate for the procedure (process) of wig treatment, or whether they are inappropriate cosmetics, etc.
施術物理量情報２１６は、ウィッグの施術においてウィッグの取り付け位置に関する情報である。ウィッグの取り付け位置に関する情報としては、各ウィッグについての標準的な取り付け位置の情報や、利用者の頭部に対応したウィッグの取り付け位置の情報が含まれる。例えば、施術物理量情報２１６には、一般的なモデルの頭部を基準にしたウィッグの前後左右の取り付け位置、取り付け誤差の情報、各利用者の額の位置を基準にしたウィッグの前後左右の取り付け位置、取り付け誤差などが含まれる。 The treatment physical quantity information 216 is information regarding the wig attachment position in the wig treatment. The information regarding the wig attachment position includes information on the standard attachment position for each wig and information on the wig attachment position corresponding to the user's head. For example, the treatment physical quantity information 216 includes information on the front, rear, left, and right attachment positions of the wig based on the head of a general model, information on attachment errors, and information on the front, rear, left, and right attachment of the wig based on the position of each user's forehead. This includes position, installation errors, etc.
（評価の方法）
図４は、ウィッグの利用者に対する施術の技能を評価する方法を例示するフローチャートである。
図４には、技能評価装置１が実行する施術の技能の評価方法の各工程が示される。
先ず、ステップＳＴ１０１に示すように、技能評価装置１は、施術情報の取得を行う。施術情報の取得では、ウィッグの施術中の画像の取得を含む。技能評価装置１の入力部１３であるカメラは、ウィッグの施術中の画像を取り込み、処理部１１へ送る。また、施術情報の取得では、ウィッグの施術中に利用者と施術者との会話の音声を取得することを含んでいてもよい。この場合、技能評価装置１の入力部１３であるマイクによって利用者と施術者との会話を取り込み、会話の音声情報が処理部１１へ送られる。
(Evaluation method)
FIG. 4 is a flowchart illustrating a method for evaluating the skill of performing a treatment on a wig user.
FIG. 4 shows each step of the treatment skill evaluation method executed by the skill evaluation device 1.
First, as shown in step ST101, the skill evaluation device 1 acquires treatment information. Acquisition of treatment information includes acquisition of images during wig treatment. A camera, which is an input unit 13 of the skill evaluation device 1 , captures images of the wig being applied and sends them to the processing unit 11 . Further, acquiring the treatment information may include acquiring audio of a conversation between the user and the practitioner during the wig treatment. In this case, the microphone serving as the input unit 13 of the skill evaluation device 1 captures the conversation between the user and the practitioner, and audio information of the conversation is sent to the processing unit 11.
次に、ステップＳＴ１０２に示すように、技能評価装置１は、特徴の抽出を行う。特徴の抽出では、先のステップＳＴ１０１で取得した画像から、ウィッグの施術に関する画像特徴要素の抽出を行う。特徴の抽出は処理部１１によって行われる。すなわち、処理部１１は、ウィッグの施術中の画像から、その施術の特徴的な動作や利用者の様子を画像認識によって抽出する。例えば、処理部１１は、施術に関する特徴的な手の動きが分かる画像、利用者とウィッグとの位置関係が分かる画像、施術の手順が分かる画像、施術に利用している用具や薬品の画像などを画像認識によって抽出したり、利用者の感情を表す画像特徴要素（利用者の顔の表情など）を画像認識によって抽出したりする。また、ステップＳＴ１０１の施術情報の取得で音声の情報を取得している場合、処理部１１は、音声の情報から特徴となるワード（例えば、挨拶の言葉、利用者を気遣う言葉など）を含む音声を抽出する。また、処理部１１は、音声の抑揚に基づき特徴的な音声を抽出してもよい。 Next, as shown in step ST102, the skill evaluation device 1 extracts features. In the feature extraction, image feature elements related to the wig treatment are extracted from the image acquired in the previous step ST101. Feature extraction is performed by the processing unit 11. That is, the processing unit 11 extracts the characteristic movements of the wig treatment and the state of the user from the image during the wig treatment by image recognition. For example, the processing unit 11 may generate images that show characteristic hand movements related to the treatment, images that show the positional relationship between the user and the wig, images that show the procedure of the treatment, images of tools and medicines used in the treatment, etc. Image recognition is used to extract image features that represent the user's emotions (such as the user's facial expressions). Further, when voice information is acquired in the acquisition of treatment information in step ST101, the processing unit 11 extracts voice information including characteristic words (for example, words of greeting, words of concern for the user, etc.) from the voice information. Extract. Furthermore, the processing unit 11 may extract characteristic speech based on the intonation of the speech.
次に、ステップＳＴ１０３に示すように、技能評価装置１は、施術技術の評価を行う。施術の評価では、先のステップＳＴ１０２で抽出した画像特徴要素に基づき評価値を算出する。すなわち、技能評価装置１の処理部１１は、技能評価装置１が記憶装置２にアクセスして得た評価基準情報２１に基づき、画像特徴要素の評価を示す評価値を算出する。例えば、処理部１１は、先のステップＳＴ１０２で抽出された施術に関する特徴的な手の動きが分かる画像と、評価基準情報２１の施術画像情報２１１とを比較して、施術の評価を示す評価値を算出する。 Next, as shown in step ST103, the skill evaluation device 1 evaluates the treatment technique. In the treatment evaluation, an evaluation value is calculated based on the image feature elements extracted in the previous step ST102. That is, the processing unit 11 of the skill evaluation device 1 calculates an evaluation value indicating the evaluation of the image feature element based on the evaluation criterion information 21 obtained by the skill evaluation device 1 accessing the storage device 2. For example, the processing unit 11 compares the image showing characteristic hand movements related to the treatment extracted in the previous step ST102 with the treatment image information 211 of the evaluation standard information 21, and generates an evaluation value indicating the evaluation of the treatment. Calculate.
また、処理部１１は、先のステップＳＴ１０２で抽出された施術の手順が分かる画像と、評価基準情報２１の施術手順情報２１３とを比較して、施術の手順に関する評価を示す評価値を算出してもよい。例えば、処理部１１は、抽出された施術の手順が分かる画像と、施術手順情報２１３とを比較して、手順が正しいか、誤っているか、各手順に要した時間が施術手順情報２１３の基準時間に対してどの程度差があるのか、といった評価を数値化する。 Further, the processing unit 11 compares the image showing the procedure of the treatment extracted in the previous step ST102 with the treatment procedure information 213 of the evaluation standard information 21, and calculates an evaluation value indicating the evaluation regarding the procedure of the treatment. You can. For example, the processing unit 11 compares the extracted image showing the procedure of the treatment with the treatment procedure information 213, and determines whether the procedure is correct or incorrect and the time required for each procedure, which is the standard of the treatment procedure information 213. Quantify the evaluation, such as how much difference there is in terms of time.
処理部１１は、先のステップＳＴ１０２で抽出された施術の用具が分かる画像と、評価基準情報２１の施術用具情報２１４とを比較して、施術の用具に関する評価を示す評価値を算出してもよい。例えば、処理部１１は、抽出された施術の画像から施術者が使用している用具が施術に対して合致しているかどうかを評価する。施術用具情報２１４には施術に対する正しい用具の情報や、施術に対して使用してはいけない用具の情報などが記憶される。処理部１１は、この情報と比較することで、用具に対する評価値を算出する。 The processing unit 11 compares the image showing the treatment tool extracted in the previous step ST102 with the treatment tool information 214 of the evaluation standard information 21 and calculates an evaluation value indicating the evaluation regarding the treatment tool. good. For example, the processing unit 11 evaluates whether the equipment used by the practitioner matches the treatment based on the extracted treatment image. The treatment tool information 214 stores information on correct tools for the treatment, information on tools that should not be used for the treatment, and the like. The processing unit 11 calculates an evaluation value for the tool by comparing it with this information.
特に、施術に使用する用具のうちハサミやカミソリなどの刃物に関する使用には注意が必要である。このため、施術用具情報２１４には施術に適した刃物の情報や、施術に対して使用してはいけない刃物の情報、施術に対する刃物の正しい使用方法の情報、注意すべき使用方法の情報、誤った使用方法の情報が記憶される。抽出された施術の画像が刃物の画像であった場合、この刃物が施術において正しいかどうか、また刃物の使用方法が正しいかどうかについて、処理部１１は評価値を算出する。 In particular, care must be taken when using cutting tools such as scissors and razors for treatment. For this reason, the treatment tool information 214 includes information on blades suitable for the treatment, information on blades that must not be used for the treatment, information on the correct way to use the blade for the treatment, information on how to use it with caution, and information on blades that should be used with caution. Information on how to use it is stored. If the extracted treatment image is an image of a cutlery, the processing unit 11 calculates an evaluation value as to whether this cutlery is correct for the treatment and whether the method of using the cutlery is correct.
処理部１１は、先のステップＳＴ１０２で抽出された施術用の化粧品等が分かる画像と、評価基準情報２１の施術用化粧品等情報２１５とを比較して、施術用の化粧品等に関する評価を示す評価値を算出してもよい。例えば、処理部１１は、抽出された施術の画像から施術者が使用している化粧品等が施術に対して合致しているかどうかを評価する。施術用化粧品等情報２１５には施術に対する正しい化粧品等の情報や、施術に対して使用してはいけない化粧品等の情報などが記憶される。処理部１１は、この情報と比較することで、化粧品等に対する評価値を算出する。 The processing unit 11 compares the image showing the cosmetics, etc. for treatment extracted in the previous step ST102 with the information 215 of cosmetics, etc. for treatment of the evaluation standard information 21, and generates an evaluation indicating the evaluation regarding the cosmetics, etc. for treatment. A value may also be calculated. For example, the processing unit 11 evaluates whether the cosmetics and the like used by the practitioner match the treatment based on the extracted treatment image. The treatment cosmetics information 215 stores information on correct cosmetics, etc. for the treatment, information on cosmetics, etc. that should not be used for the treatment, and the like. The processing unit 11 calculates an evaluation value for cosmetics and the like by comparing with this information.
処理部１１は、先のステップＳＴ１０２で抽出された施術の物理量が分かる画像と、評価基準情報２１の施術物理量情報２１６とを比較して、施術の物理量に関する評価を示す評価値を算出してもよい。例えば、処理部１１は、抽出された施術の画像から利用者の頭部の基準位置に対するウィッグの取り付け位置のずれ量を測定し、施術物理量情報２１６と比較する。処理部１１は、この比較によってウィッグの施術での物理量に対する評価値を算出する。 The processing unit 11 compares the image showing the physical quantity of the treatment extracted in the previous step ST102 with the physical quantity information 216 of the treatment of the evaluation standard information 21, and calculates an evaluation value indicating the evaluation regarding the physical quantity of the treatment. good. For example, the processing unit 11 measures the amount of deviation of the wig attachment position from the reference position of the user's head from the extracted treatment image, and compares it with the treatment physical quantity information 216. The processing unit 11 calculates an evaluation value for the physical quantity in the wig treatment based on this comparison.
また、処理部１１は、先のステップＳＴ１０２で抽出した施術情報に音声の情報が含まれている場合、抽出された音声の情報と、評価基準情報２１の施術音声情報２１２とを比較して、会話から把握される利用者の満足度や、施術者と利用者との間のコミュニケーションについての評価値を算出してもよい。例えば、処理部１１は、抽出された音声の情報から、施術者による挨拶ができているか、利用者に対する気遣いができているか、両者の会話が弾んでいるかなど、抽出された音声の情報と施術音声情報２１２のそれぞれ判断の基準となる音声情報とを比較して、評価値を算出する。 Furthermore, if the treatment information extracted in step ST102 includes voice information, the processing unit 11 compares the extracted voice information with the treatment voice information 212 of the evaluation criteria information 21, An evaluation value of the user's satisfaction as determined from the conversation or the communication between the practitioner and the user may be calculated. For example, the processing unit 11 uses the extracted audio information to determine whether the practitioner is able to greet the user, whether the practitioner is considerate towards the user, whether the conversation between the two parties is lively, etc. The evaluation value is calculated by comparing the audio information 212 with the audio information that serves as a criterion for each judgment.
また処理部１１は、先のステップＳＴ１０２で抽出された利用者の感情を表す画像特徴要素（利用者の顔の表情など）に基づいて、施術に対する利用者の満足の度合いを評価する評価値を算出してもよい。例えば処理部１１は、抽出された画像特徴要素における利用者の顔の表情から利用者の感情（満足、不満足）を判定し、施術中に満足を示す表情が表れた回数、及び、施術中において不満を示す表情が表れた回数の少なくとも一方を計数し、その計数結果に基づいて利用者の満足度を評価する評価値を算出する。 The processing unit 11 also generates an evaluation value for evaluating the user's degree of satisfaction with the treatment based on the image feature elements (user's facial expressions, etc.) representing the user's emotions extracted in the previous step ST102. It may be calculated. For example, the processing unit 11 determines the user's emotion (satisfaction, dissatisfaction) from the user's facial expression in the extracted image feature element, and determines the number of times a facial expression indicating satisfaction appears during the treatment and the number of times during the treatment. At least one of the number of times a facial expression indicating dissatisfaction appears is counted, and an evaluation value for evaluating the degree of satisfaction of the user is calculated based on the counting result.
次に、ステップＳＴ１０４に示すように、技能評価装置１は、評価の出力を行う。評価の出力では、先のステップＳＴ１０３で算出した評価値を出力する。すなわち、技能評価装置１の出力部１４は、記憶部１２に記憶された施術者に対する技能評価の評価値を読み出し、モニタなどに出力する。 Next, as shown in step ST104, the skill evaluation device 1 outputs the evaluation. In the evaluation output, the evaluation value calculated in the previous step ST103 is output. That is, the output unit 14 of the skill evaluation device 1 reads out the evaluation value of the skill evaluation for the practitioner stored in the storage unit 12 and outputs it to a monitor or the like.
この一連の評価方法の処理は、施術中に逐次（リアルタイムで）行われてもよいし、施術が終了してから施術全体について行うようにしてもよい。リアルタイムで評価が行われる場合、施術の判定が一定レベル以下になるとアラートを出力し、施術責任者に知らせるようにしてもよい。また、個人情報保護の観点から、カメラで取り込んだ利用者の顔にぼかしをかけたり、音声をボイスチェンジャで処理したりしてもよい。 This series of evaluation method processes may be performed sequentially (in real time) during the treatment, or may be performed for the entire treatment after the treatment has ended. When evaluation is performed in real time, an alert may be output and the person in charge of the treatment may be notified when the treatment judgment falls below a certain level. Furthermore, from the perspective of protecting personal information, the user's face captured by a camera may be blurred, or the user's voice may be processed by a voice changer.
（プログラム）
図５は、本実施形態に係るプログラムの構成を例示する図である。
図５に示すプログラム１２１は、技能評価装置１の処理部１１で実行可能な命令を含む。プログラム１２１は、取得部１２１１、抽出部１２１２および評価部１２１３を含む。取得部１２１１は、図４に示すステップＳＴ１０１の施術情報の取得を行う命令を含む。抽出部１２１２は、図４に示すステップＳＴ１０２の特徴の抽出を行う命令を含む。評価部１２１３は、図４に示すステップＳＴ１０３の施術技術の評価を行う命令を含む。
(program)
FIG. 5 is a diagram illustrating the configuration of a program according to this embodiment.
The program 121 shown in FIG. 5 includes instructions executable by the processing unit 11 of the skill evaluation device 1. The program 121 includes an acquisition section 1211, an extraction section 1212, and an evaluation section 1213. The acquisition unit 1211 includes an instruction to acquire treatment information in step ST101 shown in FIG. The extraction unit 1212 includes an instruction for extracting features in step ST102 shown in FIG. The evaluation unit 1213 includes an instruction to evaluate the treatment technique in step ST103 shown in FIG.
プログラム１２１は、抽出部１２１２および評価部１２１３の少なくともいずれかにおいてＡＩ（人工知能）４を用いた処理を実行してもよい。例えば、抽出部１２１２においてＡＩ４を用いる場合、ＡＩ４は、施術中の画像からウィッグの施術について特徴的な動きとなる画像を抽出するよう機械学習を済ませている。機械学習は、例えば、施術画像情報２１１に記憶された各要素と種類との関係を教師データとして与えられている。また、機械学習は、施術音声情報２１２、施術手順情報２１３、施術用具情報２１４、施術用化粧品等情報２１５および施術物理量情報２１６についても同様に各要素と種類との関係を教師データとして与えられている。これにより、抽出対象の画像や音声の各要素と評価基準情報２１に記憶された各要素との適合度から抽出対象の画像や音声の種類が判断される。 The program 121 may execute processing using AI (artificial intelligence) 4 in at least one of the extraction unit 1212 and the evaluation unit 1213. For example, when AI4 is used in the extraction unit 1212, AI4 has undergone machine learning so as to extract an image showing a characteristic movement of a wig treatment from an image during the treatment. For example, machine learning is given the relationship between each element and type stored in the treatment image information 211 as training data. In addition, machine learning is also performed using the relationship between each element and type as training data for treatment audio information 212, treatment procedure information 213, treatment equipment information 214, treatment cosmetics information 215, and treatment physical quantity information 216. There is. Thereby, the type of image or sound to be extracted is determined from the degree of compatibility between each element of the image or sound to be extracted and each element stored in the evaluation criterion information 21.
また、評価部１２１３においてＡＩ４を用いる場合、ＡＩ４は、施術中の画像からウィッグの施術について適した施術であるかを判断するよう機械学習を済ませている。機械学習は、例えば、施術画像情報２１１に記憶された各要素と施術の正しさとの関係を教師データとして与えられている。また、機械学習は、施術音声情報２１２、施術手順情報２１３、施術用具情報２１４、施術用化粧品等情報２１５および施術物理量情報２１６についても同様に各要素と評価（評価値）との関係を教師データとして与えられている。これにより、抽出対象の画像や音声の各要素と評価基準情報２１に記憶された各要素との適合度から抽出対象の画像や音声に対する評価（評価値）が算出される。 Furthermore, when AI4 is used in the evaluation unit 1213, AI4 has undergone machine learning to determine whether the wig treatment is suitable from images during the treatment. For example, machine learning is given the relationship between each element stored in the treatment image information 211 and the correctness of the treatment as training data. In addition, machine learning can similarly calculate the relationship between each element and the evaluation (evaluation value) for the treatment audio information 212, treatment procedure information 213, treatment tool information 214, treatment cosmetics information 215, and treatment physical quantity information 216 using training data. It is given as. Thereby, the evaluation (evaluation value) of the image or sound to be extracted is calculated from the degree of compatibility between each element of the image or sound to be extracted and each element stored in the evaluation standard information 21.
ＡＩ４は、ソフトウェアとして構成されているものでもよいし、ハードウェアで構成されているものでもよい。また、機械学習の方式は、決定木学習、相関ルール学習、ニューラルネットワークなど公知の方式を用いればよい。 AI4 may be configured as software or may be configured as hardware. Further, as a machine learning method, a known method such as decision tree learning, association rule learning, or neural network may be used.
（評価の具体例）
次に、ウィッグの利用者に対する施術の技能の評価の具体例について説明する。
ここでは、ウィッグの施術の一例を挙げて、その施術についての施術者の技能の評価の具体例を説明する。
図６は、具体例の説明に用いる施術のコースの一例を示すフローチャートである。
図６に示すコースは、ウィッグの利用者が自髪をカットする施術を含む。
先ず、ステップＳＴ２０１に示すように、施術者は、利用者のウィッグの取り外しを行う。ウィッグを取り外す際には、使用しているウィッグの取り付け方法に合った取り外し方が採用される。ウィッグの取り外しにあたり、利用者が痛くないかの確認も必要である。
(Specific example of evaluation)
Next, a specific example of evaluation of treatment skills for a wig user will be explained.
Here, an example of a wig treatment will be given, and a specific example of evaluation of a practitioner's skill regarding the treatment will be explained.
FIG. 6 is a flowchart showing an example of a treatment course used to explain a specific example.
The course shown in FIG. 6 includes a treatment in which the wig user cuts his or her own hair.
First, as shown in step ST201, the practitioner removes the user's wig. When removing a wig, a removal method is adopted that matches the method of attaching the wig being used. It is also necessary to check that the user will not feel any pain when removing the wig.
次に、ステップＳＴ２０２に示すように、施術者は、利用者の自髪のカットを行う。自髪のカットは、使用しているウィッグに合わせて必要な箇所、必要なカット量で行われる。施術者は、カットを始める前からカットの途中、カットの終了後まで、鏡などを用いて利用者に確認してもらい、利用者とコミュニケーションをとりながら施術することが望まれる。 Next, as shown in step ST202, the practitioner cuts the user's own hair. Your own hair is cut in the necessary areas and amount according to the wig you are using. It is desirable for the practitioner to ask the user to check the cut using a mirror, etc. before starting the cut, during the cut, and after the cut is finished, and to communicate with the user while performing the treatment.
次に、ステップＳＴ２０３に示すように、施術者は、利用者の自髪のシャンプーを行う。自髪のシャンプーは、例えば、２回のシャンプー、コンディショナー、すすぎ、ホットタオル及びタオルドライ、育毛剤の塗布、頭皮及び肩のマッサージ、といった手順で行われる。 Next, as shown in step ST203, the practitioner shampoos the user's own hair. Shampooing your own hair involves, for example, shampooing your hair twice, applying a conditioner, rinsing, towel drying with a hot towel, applying a hair restorer, and massaging your scalp and shoulders.
次に、ステップＳＴ２０４に示すように、施術者は、利用者の自髪のブローセットを行う。自髪のブローセットでは、利用者の髪質に応じたドライヤーの種類、熱量、セットに使用するブラシなどの用具の適合や、これらの用具の取り扱い方が重要である。 Next, as shown in step ST204, the practitioner blow-sets the user's own hair. When blow-drying your own hair, it is important to consider the type of hair dryer, the amount of heat, and the suitability of tools such as brushes used for setting, depending on the user's hair type, and how to handle these tools.
次に、ステップＳＴ２０５に示すように、施術者は、ウィッグのシャンプーセットを行う。ウィッグのシャンプーセットでは、ウィッグの種類や質に応じたシャンプーの選択、洗い方、濯ぎ方、乾かし方などが必要である。 Next, as shown in step ST205, the practitioner shampoo-sets the wig. In a wig shampoo set, it is necessary to select a shampoo, washing method, rinsing method, drying method, etc. according to the type and quality of the wig.
次に、ステップＳＴ２０６に示すように、ウィッグの取り付けを行う。ウィッグの取り付けでは、施術者は、ウィッグの取り付け位置の正確性、取り付けにおいて利用者に違和感を与えないかどうか、利用者の希望に沿った取り付けになっているか、鏡などを用いて利用者に確認してもらい、利用者とコミュニケーションをとりながら施術することが望まれる。 Next, as shown in step ST206, the wig is attached. When installing a wig, the practitioner uses a mirror etc. to check the accuracy of the wig installation position, whether the installation will cause the user to feel uncomfortable, and whether the installation is in line with the user's wishes. It is advisable to have the patient checked and communicate with the user before performing the treatment.
各コースには施術の標準時間が設定されている。例えば、図６に示すコースでは、標準時間が５０分～６０分である。 Each course has a standard treatment time. For example, in the course shown in FIG. 6, the standard time is 50 to 60 minutes.
技能評価装置１は、このようなコースにおいてウィッグの利用者に対する施術の画像をカメラで取り込むとともに、マイクによって会話の音声を取得し、評価の処理を行う。具体的には、処理部１１で実行されるプログラム１２１の取得部１２１１の処理で施術の画像や音声を取得し、抽出部１２１２で画像特徴要素や音声特徴要素を抽出し、評価部１２１３で評価値を算出する。 The skill evaluation device 1 uses a camera to capture images of treatments performed on wig users in such a course, and also captures conversational sounds using a microphone to perform evaluation processing. Specifically, images and audio of the treatment are acquired through the processing of the acquisition unit 1211 of the program 121 executed by the processing unit 11, image feature elements and audio characteristic elements are extracted by the extraction unit 1212, and evaluated by the evaluation unit 1213. Calculate the value.
例えば、技能評価装置１によって評価を行う際、予め評価対象のコースを入力すると、処理部１１は、そのコースに対応した評価基準情報２１を参照する。抽出部１２１２は、取得部１２１１で取得した画像から施術者の手の動き、ウィッグ、利用者の頭部、用具、化粧品等（化粧品等の容器やラベル）を画像認識し、施術の手順を抽出する。 For example, when performing an evaluation using the skill evaluation device 1, if a course to be evaluated is input in advance, the processing unit 11 refers to the evaluation criteria information 21 corresponding to the course. The extraction unit 1212 recognizes the hand movements of the practitioner, the wig, the user's head, tools, cosmetics, etc. (containers and labels for cosmetics, etc.) from the image acquired by the acquisition unit 1211, and extracts the procedure of the treatment. do.
例えば、取得部１２１１で取得した画像から施術者がウィッグを取り外していることを認識すると、抽出部１２１２は、その画像や音声と取り外しの手順識別情報とを対応付けする。そして、評価部１２１３は、手順識別情報に紐付けされた施術画像情報のウィッグ取り外しの基準画像の情報を参照し、抽出したウィッグの取り外しの画像と比較して、評価値を算出する。 For example, when recognizing that the practitioner is removing the wig from the image acquired by the acquisition unit 1211, the extraction unit 1212 associates the image or sound with removal procedure identification information. Then, the evaluation unit 1213 refers to the information of the reference image of wig removal in the treatment image information linked to the procedure identification information, compares it with the extracted image of wig removal, and calculates an evaluation value.
また、抽出部１２１２によってウィッグの取り外しで使用する化粧品等のボトルの画像を認識すると、評価部１２１３は手順識別情報に紐付けされた化粧品等の情報を参照し、抽出した化粧品等の情報と比較して、そのウィッグの取り外しに適した化粧品等であるかどうかを評価する。 Furthermore, when the extraction unit 1212 recognizes an image of a bottle of cosmetics, etc. used for removing the wig, the evaluation unit 1213 refers to the information on the cosmetics, etc. linked to the procedure identification information, and compares it with the extracted information on the cosmetics, etc. Then, evaluate whether the cosmetics etc. are suitable for removing the wig.
また、抽出部１２１２は、ウィッグの取り外しにかかる時間、取り外し途中での利用者との会話などを抽出し、評価部１２１３は、それぞれの要素と評価基準情報２１の各要素とを比較して、評価値を算出する。 In addition, the extraction unit 1212 extracts the time required to remove the wig, the conversation with the user during removal, etc., and the evaluation unit 1213 compares each element with each element of the evaluation criteria information 21, Calculate the evaluation value.
なお、取得した画像から手順とは異なる刃物の使用を抽出したり、利用者の音声から不満や不快感を表す言葉を抽出したりして評価値が一定レベル以下になった場合、処理部１１はアラートを表示して施術責任者に知らせるようにしてもよい。 Note that if the evaluation value falls below a certain level by extracting the use of a knife that differs from the procedure from the acquired image or by extracting words expressing dissatisfaction or discomfort from the user's voice, the processing unit 11 An alert may be displayed to notify the person in charge of the treatment.
コースの手順に沿った施術が完了した場合、施術全体についての評価が行われる。
図７は、評価結果の出力例を示す図である。
図７には、施術者Ａが利用者Ｂ様について行った施術コースの技能評価の表示例（画面表示例）が示される。表示例には、総合評価（ランク形式）、総合点（点数形式）が示されるとともに、施術項目の個別評価が示される。また、個別評価の項目を選択すると、詳細評価が示される。
Once the treatment is completed according to the steps in the course, the entire treatment will be evaluated.
FIG. 7 is a diagram showing an example of outputting the evaluation results.
FIG. 7 shows a display example (screen display example) of skill evaluation for a treatment course performed by practitioner A for user B. The display example shows an overall evaluation (in rank format), an overall score (in score format), and also shows individual evaluations of treatment items. Furthermore, when an item for individual evaluation is selected, detailed evaluation will be shown.
図８は、評価結果の詳細の出力例を示す図である。
図８には、図７の例えば「施術手順」の項目を選択した場合の詳細評価が示される。個別項目の詳細評価には、ランクおよび転送のほか、その項目についてのコメントが示される。コメントは、各個別項目の画像や音声からＡＩ４によって自動的に選択されるようになっていてもよい。
FIG. 8 is a diagram showing an example of outputting details of evaluation results.
FIG. 8 shows detailed evaluation when, for example, the item "treatment procedure" in FIG. 7 is selected. The detailed evaluation of an individual item shows the rank and transfer as well as comments about that item. The comments may be automatically selected by the AI 4 from the images and sounds of each individual item.
図９は、評価結果の動画による確認の例を示す図である。
例えば、図７及び図８に示す再生開始アイコン（三角マーク）を選択すると、その個別項目に対応した施術の際の画像や音声が出力される。図９に示すように、画面には施術の際の画像や音声が出力される。画像の表示とともに、コメント欄にはその画像に合わせたタイミングでコメントが表示されるようになっていてもよい。施術の際の画像や音声を参照することで、施術者は自らの施術を見返して評価に基づく復習を行うことができ、他の施術者に対しては施術の教育に利用することができる。
FIG. 9 is a diagram showing an example of confirmation of evaluation results using a moving image.
For example, when the playback start icon (triangle mark) shown in FIGS. 7 and 8 is selected, images and sounds during the treatment corresponding to that individual item are output. As shown in FIG. 9, images and sounds during the treatment are output on the screen. At the same time as the image is displayed, a comment may be displayed in the comment column at a timing that matches the image. By referring to the images and sounds during the treatment, the practitioner can review his or her own treatment and review based on the evaluation, and can be used to educate other practitioners about the treatment.
以上説明したように、本実施形態によれば、ウィッグの利用者に対する施術の技能を客観的に評価することができる方法、技能評価装置１及びプログラム１２１を提供することが可能となる。 As described above, according to the present embodiment, it is possible to provide a method, skill evaluation device 1, and program 121 that can objectively evaluate the skill of performing a treatment on a wig user.
なお、上記に本実施形態およびその適用例を説明したが、本発明はこれらの例に限定されるものではない。例えば、前述の各実施形態またはその適用例に対して、当業者が適宜、構成要素の追加、削除、設計変更を行ったものや、各実施形態の特徴を適宜組み合わせたものも、本発明の要旨を備えている限り、本発明の範囲に包含される。 Note that although the present embodiment and its application examples have been described above, the present invention is not limited to these examples. For example, a person skilled in the art may appropriately add, delete, or change the design of each of the above-described embodiments or their application examples, or may suitably combine the features of each embodiment. As long as it has the gist, it is included within the scope of the present invention.
上述した実施形態では、頭髪スタイル変更手段としてウィッグ等が例示されているが、頭髪スタイル変更手段はこの例に限定されない。例えば、頭髪スタイル変更手段は、理容室や美容院などにおいて頭髪スタイルを変更するために用いられる任意の手段であってもよい。この場合、本発明により評価される施術の技能（頭髪スタイル変更手段によって利用者の頭髪スタイルを変更するために行われる施術の技能）は、理容室や美容院などにおいて行われるヘアカット、毛染め、パーマなどの施術の技能であってもよい。 In the embodiment described above, a wig or the like is exemplified as the hair style changing means, but the hair style changing means is not limited to this example. For example, the hair style changing means may be any means used to change the hair style in a barber shop, beauty salon, or the like. In this case, the skill of the treatment evaluated by the present invention (the skill of the treatment performed to change the hair style of the user using the hair style changing means) is hair cutting, hair dyeing, etc. performed at a barber shop, hair salon, etc. , perm, or other treatment skills.
１…技能評価装置，２…記憶装置，３…通信ネットワーク，１１…処理部，１２…記憶部，１３…入力部，１４…出力部，１５…通信部，２１…評価基準情報，２２…利用者情報，２３…施術者情報，１２１…プログラム，２１１…施術画像情報，２１２…施術音声情報，２１３…施術手順情報，２１４…施術用具情報，２１５…施術用化粧品等情報，２１６…施術物理量情報，１２１１…取得部，１２１２…抽出部，１２１３…評価部
DESCRIPTION OF SYMBOLS 1... Skill evaluation device, 2... Storage device, 3... Communication network, 11... Processing part, 12... Storage part, 13... Input part, 14... Output part, 15... Communication part, 21... Evaluation criteria information, 22... Utilization 23...Practitioner information, 121...Program, 211...Procedure image information, 212...Procedure audio information, 213...Procedure procedure information, 214...Procedure equipment information, 215...Procedure cosmetics, etc. information, 216...Procedure physical quantity information , 1211...acquisition section, 1212...extraction section, 1213...evaluation section
本発明の第１の態様は、頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を評価する技能評価装置が行う方法であって、前記技能評価装置は、前記頭髪スタイル変更手段によって前記利用者の頭髪スタイルを変更するために行われる前記施術に関する評価基準情報を記憶した記憶装置にアクセス可能であり、技能評価装置が、前記施術中の画像を取得する工程と、技能評価装置が、前記画像から前記施術に関する画像特徴要素を抽出する工程と、技能評価装置が、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記画像特徴要素の評価を示す評価値を算出する工程とを有し、前記記憶装置は、前記利用者に関する個人情報と関連付けされた前記評価基準情報を記憶し、前記記憶装置に記憶される前記個人情報は、前記頭髪スタイル変更手段であるウィッグと前記利用者との位置関係を示す情報として、各前記利用者の額の位置を基準にした前記ウィッグの前後左右の取り付け位置、及び、取り付け誤差を含み、前記画像特徴要素を抽出する工程は、前記ウィッグと前記利用者との位置関係を前記画像から抽出することを含み、前記評価値を算出する工程は、前記利用者の前記個人情報であって、前記利用者の額の位置を基準にした前記ウィッグの前後左右の取り付け位置、及び、前記取り付け誤差を含んだ前記個人情報と関連付けされた前記評価基準情報に基づいて、前記画像特徴要素から抽出した前記ウィッグと前記利用者との位置関係の評価を示す評価値を算出することを含む、方法である。 A first aspect of the present invention is a method performed by a skill evaluation device for evaluating the skill of performing a treatment on a user who changes a hair style using a hair style change means, the skill evaluation device performing a treatment using a hair style change means. A storage device storing evaluation criteria information regarding the treatment performed to change the hair style of the user is accessible, and the skill evaluation device includes a step of acquiring an image during the treatment; , a step of extracting an image feature element related to the treatment from the image, and a step of the skill evaluation device calculating an evaluation value indicating the evaluation of the image feature element based on the evaluation criterion information obtained by accessing the storage device. and the storage device stores the evaluation criteria information associated with personal information about the user, and the personal information stored in the storage device includes a wig, which is the hair style changing means, and a wig, which is the hair style changing means. The step of extracting the image characteristic elements includes information indicating the positional relationship with the user, including the front, rear, left, and right mounting positions of the wig based on the forehead position of each user, and the mounting error. The step of calculating the evaluation value includes extracting the positional relationship between the wig and the user from the image, and the step of calculating the evaluation value is based on the personal information of the user, based on the position of the user's forehead. The positional relationship between the wig and the user extracted from the image feature elements is determined based on the front, rear, left and right mounting positions of the wig, and the evaluation criterion information associated with the personal information including the mounting error. The method includes calculating an evaluation value indicating an evaluation .
上述した実施形態では、頭髪スタイル変更手段としてウィッグ等が例示されているが、頭髪スタイル変更手段はこの例に限定されない。例えば、頭髪スタイル変更手段は、理容室や美容院などにおいて頭髪スタイルを変更するために用いられる任意の手段であってもよい。この場合、本発明により評価される施術の技能（頭髪スタイル変更手段によって利用者の頭髪スタイルを変更するために行われる施術の技能）は、理容室や美容院などにおいて行われるヘアカット、毛染め、パーマなどの施術の技能であってもよい。
以下、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
頭髪スタイル変更手段によって頭髪スタイルを変更する利用者に対する施術の技能を評価する技能評価装置が行う方法であって、
前記技能評価装置は、前記頭髪スタイル変更手段によって前記利用者の頭髪スタイルを変更するために行われる前記施術に関する評価基準情報を記憶した記憶装置にアクセス可能であり、
前記技能評価装置が、前記施術中の画像を取得する工程と、
前記技能評価装置が、前記画像から前記施術に関する画像特徴要素を抽出する工程と、
前記技能評価装置が、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記画像特徴要素の評価を示す評価値を算出する工程と、
を有する方法。
［付記２］
前記記憶装置は、前記施術の手順に関する前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記画像から前記施術の手順を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術の手順に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術の手順の評価を示す評価値を算出することを含む、
付記１記載の方法。
［付記３］
前記記憶装置は、前記施術に用いる物品に関する前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記画像から前記施術に用いる物品を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術に用いる物品に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術に用いる物品の評価を示す評価値を算出することを含む、
付記１記載の方法。
［付記４］
前記記憶装置は、前記施術に用いる前記物品として刃物に関する前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記画像から施術者が保持する刃物を抽出することを含む、
付記３記載の方法。
［付記５］
前記記憶装置は、前記施術に用いる前記物品として化粧品、薬剤、接着剤及び剥離剤の少なくとも１つに関する前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記画像から前記利用者への施術に用いた化粧品、薬剤、接着剤及び剥離剤の少なくとも１つを抽出することを含む、
付記３記載の方法。
［付記６］
前記記憶装置は、前記施術の物理量に関する前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記画像から前記施術の物理量を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術の物理量に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術の物理量の評価を示す評価値を算出することを含む、
付記１記載の方法。
［付記７］
前記記憶装置は、前記利用者に関する個人情報と関連付けされた前記評価基準情報を記憶し、
前記画像特徴要素を抽出する工程は、前記頭髪スタイル変更手段であるウィッグと前記利用者との関係を前記画像から抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記利用者に関する個人情報と関連付けされた前記評価基準情報に基づき、前記画像特徴要素から抽出した前記ウィッグと前記利用者との関係の評価を示す評価値を算出することを含む、
付記１記載の方法。
［付記８］
前記記憶装置に記憶される前記個人情報は、前記ウィッグと前記利用者との位置関係を示す情報を含み、
前記画像特徴要素を抽出する工程は、前記画像から前記ウィッグと前記利用者との位置関係を抽出することを含む、
付記７記載の方法。
［付記９］
前記施術中の音声を取得する工程と、
前記音声から前記施術に関する音声特徴要素を抽出する工程と、をさらに備え、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記音声特徴要素の評価を示す評価値を算出することを含む、
付記１記載の方法。
［付記１０］
前記記憶装置は、前記利用者と施術者との会話に関する前記評価基準情報を記憶し、
前記音声特徴要素を抽出する工程は、前記音声から前記利用者と前記施術者との会話を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記利用者と前記施術者との会話に関する前記評価基準情報に基づき前記音声特徴要素から抽出した前記利用者と前記施術者との会話の評価を示す評価値を算出することを含む、
付記９記載の方法。
［付記１１］
前記画像特徴要素を抽出する工程は、前記画像から前記利用者の感情を表す前記画像特徴要素を抽出することを含み、
前記評価値を算出する工程は、前記画像から抽出した前記利用者の感情を表す前記画像特徴要素に基づいて、前記施術に対する前記利用者の満足の度合いを評価する評価値を算出することを含む、
付記１記載の方法。
［付記１２］
付記１～付記１１のいずれか一項に記載された方法の各工程を実行する手段を備えた技能評価装置。
［付記１３］
コンピュータが実行可能な命令を含むプログラムであって、
付記１～付記１１のいずれか一項に記載された方法の各工程を前記コンピュータに実行させる前記命令を含む、
プログラム。
In the embodiment described above, a wig or the like is exemplified as the hair style changing means, but the hair style changing means is not limited to this example. For example, the hair style changing means may be any means used to change the hair style in a barber shop, beauty salon, or the like. In this case, the skill of the treatment evaluated by the present invention (the skill of the treatment performed to change the hair style of the user using the hair style changing means) is hair cutting, hair dyeing, etc. performed at a barber shop, hair salon, etc. , perm, or other treatment skills.
Hereinafter, the invention described in the original claims of this application will be additionally described.
[Additional note 1]
A method performed by a skill evaluation device for evaluating the skill of performing a treatment on a user who changes his or her hair style using a hair style changing means, the method comprising:
The skill evaluation device is capable of accessing a storage device that stores evaluation criteria information regarding the treatment performed by the hair style changing means to change the hair style of the user,
a step in which the skill evaluation device acquires an image during the treatment;
a step in which the skill evaluation device extracts image feature elements related to the treatment from the image;
a step in which the skill evaluation device calculates an evaluation value indicating an evaluation of the image feature element based on the evaluation criterion information obtained by accessing the storage device;
How to have.
[Additional note 2]
The storage device stores the evaluation criteria information regarding the procedure of the treatment,
The step of extracting the image feature element includes extracting the procedure of the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the procedure of the treatment extracted from the image feature elements based on the evaluation criterion information regarding the procedure of the treatment obtained by accessing the storage device. including,
The method described in Appendix 1.
[Additional note 3]
The storage device stores the evaluation criteria information regarding the article used for the treatment,
The step of extracting the image characteristic elements includes extracting an article used for the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the article used for the treatment extracted from the image feature elements based on the evaluation criterion information regarding the article used for the treatment obtained by accessing the storage device. including doing;
The method described in Appendix 1.
[Additional note 4]
The storage device stores the evaluation criteria information regarding a cutlery as the article used in the treatment,
The step of extracting the image feature element includes extracting a blade held by the practitioner from the image.
The method described in Appendix 3.
[Additional note 5]
The storage device stores the evaluation criteria information regarding at least one of cosmetics, drugs, adhesives, and release agents as the article used in the treatment,
The step of extracting the image characteristic elements includes extracting from the image at least one of cosmetics, drugs, adhesives, and release agents used in the treatment of the user.
The method described in Appendix 3.
[Additional note 6]
The storage device stores the evaluation criteria information regarding the physical quantity of the treatment,
The step of extracting the image feature element includes extracting a physical quantity of the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the physical quantity of the treatment extracted from the image feature element based on the evaluation criterion information regarding the physical quantity of the treatment obtained by accessing the storage device. including,
The method described in Appendix 1.
[Additional note 7]
The storage device stores the evaluation criteria information associated with personal information about the user,
The step of extracting the image feature element includes extracting the relationship between the wig, which is the hair style changing means, and the user from the image,
The step of calculating the evaluation value includes calculating the relationship between the wig extracted from the image feature elements and the user based on the evaluation criterion information associated with personal information about the user obtained by accessing the storage device. including calculating an evaluation value indicating an evaluation of the relationship;
The method described in Appendix 1.
[Additional note 8]
The personal information stored in the storage device includes information indicating a positional relationship between the wig and the user,
The step of extracting the image feature element includes extracting a positional relationship between the wig and the user from the image.
The method described in Appendix 7.
[Additional note 9]
a step of acquiring audio during the treatment;
further comprising the step of extracting audio feature elements related to the treatment from the audio,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the voice feature element based on the evaluation criterion information obtained by accessing the storage device.
The method described in Appendix 1.
[Additional note 10]
The storage device stores the evaluation criteria information regarding the conversation between the user and the practitioner,
The step of extracting the voice feature elements includes extracting a conversation between the user and the practitioner from the voice,
The step of calculating the evaluation value includes calculating the evaluation value between the user and the practitioner extracted from the voice feature elements based on the evaluation criterion information regarding the conversation between the user and the practitioner obtained by accessing the storage device. including calculating an evaluation value indicating the evaluation of the conversation,
The method described in Appendix 9.
[Additional note 11]
The step of extracting the image feature element includes extracting the image feature element representing the user's emotion from the image,
The step of calculating the evaluation value includes calculating an evaluation value for evaluating the user's degree of satisfaction with the treatment based on the image feature element representing the user's emotion extracted from the image. ,
The method described in Appendix 1.
[Additional note 12]
A skill evaluation device comprising means for executing each step of the method described in any one of Supplementary Notes 1 to 11.
[Additional note 13]
A program containing instructions executable by a computer,
comprising the instructions for causing the computer to execute each step of the method described in any one of Supplementary Notes 1 to 11;
program.
Claims (13)
前記技能評価装置は、前記頭髪スタイル変更手段によって前記利用者の頭髪スタイルを変更するために行われる前記施術に関する評価基準情報を記憶した記憶装置にアクセス可能であり、
前記技能評価装置が、前記施術中の画像を取得する工程と、
前記技能評価装置が、前記画像から前記施術に関する画像特徴要素を抽出する工程と、
前記技能評価装置が、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記画像特徴要素の評価を示す評価値を算出する工程と、
を有する方法。 A method performed by a skill evaluation device for evaluating the skill of performing a treatment on a user who changes his or her hair style using a hair style changing means, the method comprising:
The skill evaluation device is capable of accessing a storage device that stores evaluation criteria information regarding the treatment performed by the hair style changing means to change the hair style of the user,
a step in which the skill evaluation device acquires an image during the treatment;
a step in which the skill evaluation device extracts image feature elements related to the treatment from the image;
a step in which the skill evaluation device calculates an evaluation value indicating an evaluation of the image feature element based on the evaluation criterion information obtained by accessing the storage device;
How to have.
前記画像特徴要素を抽出する工程は、前記画像から前記施術の手順を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術の手順に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術の手順の評価を示す評価値を算出することを含む、
請求項１記載の方法。 The storage device stores the evaluation criteria information regarding the procedure of the treatment,
The step of extracting the image feature element includes extracting the procedure of the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the procedure of the treatment extracted from the image feature elements based on the evaluation criterion information regarding the procedure of the treatment obtained by accessing the storage device. including,
The method according to claim 1.
前記画像特徴要素を抽出する工程は、前記画像から前記施術に用いる物品を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術に用いる物品に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術に用いる物品の評価を示す評価値を算出することを含む、
請求項１記載の方法。 The storage device stores the evaluation criteria information regarding the article used for the treatment,
The step of extracting the image characteristic elements includes extracting an article used for the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the article used for the treatment extracted from the image feature elements based on the evaluation criterion information regarding the article used for the treatment obtained by accessing the storage device. including doing;
The method according to claim 1.
前記画像特徴要素を抽出する工程は、前記画像から施術者が保持する刃物を抽出することを含む、
請求項３記載の方法。 The storage device stores the evaluation criteria information regarding a cutlery as the article used in the treatment,
The step of extracting the image feature element includes extracting a blade held by the practitioner from the image.
The method according to claim 3.
前記画像特徴要素を抽出する工程は、前記画像から前記利用者への施術に用いた化粧品、薬剤、接着剤及び剥離剤の少なくとも１つを抽出することを含む、
請求項３記載の方法。 The storage device stores the evaluation criteria information regarding at least one of cosmetics, drugs, adhesives, and release agents as the article used in the treatment,
The step of extracting the image characteristic elements includes extracting from the image at least one of cosmetics, drugs, adhesives, and release agents used in the treatment of the user.
The method according to claim 3.
前記画像特徴要素を抽出する工程は、前記画像から前記施術の物理量を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記施術の物理量に関する前記評価基準情報に基づき前記画像特徴要素から抽出した前記施術の物理量の評価を示す評価値を算出することを含む、
請求項１記載の方法。 The storage device stores the evaluation criteria information regarding the physical quantity of the treatment,
The step of extracting the image feature element includes extracting a physical quantity of the treatment from the image,
The step of calculating the evaluation value includes calculating an evaluation value indicating an evaluation of the physical quantity of the treatment extracted from the image feature element based on the evaluation criterion information regarding the physical quantity of the treatment obtained by accessing the storage device. including,
The method according to claim 1.
前記画像特徴要素を抽出する工程は、前記頭髪スタイル変更手段であるウィッグと前記利用者との関係を前記画像から抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記利用者に関する個人情報と関連付けされた前記評価基準情報に基づき、前記画像特徴要素から抽出した前記ウィッグと前記利用者との関係の評価を示す評価値を算出することを含む、
請求項１記載の方法。 The storage device stores the evaluation criteria information associated with personal information about the user,
The step of extracting the image feature element includes extracting the relationship between the wig, which is the hair style changing means, and the user from the image,
The step of calculating the evaluation value includes calculating the relationship between the wig extracted from the image feature elements and the user based on the evaluation criterion information associated with personal information about the user obtained by accessing the storage device. including calculating an evaluation value indicating an evaluation of the relationship;
The method according to claim 1.
前記画像特徴要素を抽出する工程は、前記画像から前記ウィッグと前記利用者との位置関係を抽出することを含む、
請求項７記載の方法。 The personal information stored in the storage device includes information indicating a positional relationship between the wig and the user,
The step of extracting the image feature element includes extracting a positional relationship between the wig and the user from the image.
The method according to claim 7.
前記音声から前記施術に関する音声特徴要素を抽出する工程と、をさらに備え、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記評価基準情報に基づき前記音声特徴要素の評価を示す評価値を算出することを含む、
請求項１記載の方法。 a step of acquiring audio during the treatment;
further comprising the step of extracting audio feature elements related to the treatment from the audio,
The step of calculating the evaluation value includes calculating an evaluation value indicating the evaluation of the voice feature element based on the evaluation criterion information obtained by accessing the storage device.
The method according to claim 1.
前記音声特徴要素を抽出する工程は、前記音声から前記利用者と前記施術者との会話を抽出することを含み、
前記評価値を算出する工程は、前記記憶装置にアクセスして得た前記利用者と前記施術者との会話に関する前記評価基準情報に基づき前記音声特徴要素から抽出した前記利用者と前記施術者との会話の評価を示す評価値を算出することを含む、
請求項９記載の方法。 The storage device stores the evaluation criteria information regarding the conversation between the user and the practitioner,
The step of extracting the voice feature elements includes extracting a conversation between the user and the practitioner from the voice,
The step of calculating the evaluation value includes calculating the evaluation value between the user and the practitioner extracted from the voice feature elements based on the evaluation criterion information regarding the conversation between the user and the practitioner obtained by accessing the storage device. including calculating an evaluation value indicating the evaluation of the conversation,
The method according to claim 9.
前記評価値を算出する工程は、前記画像から抽出した前記利用者の感情を表す前記画像特徴要素に基づいて、前記施術に対する前記利用者の満足の度合いを評価する評価値を算出することを含む、
請求項１記載の方法。 The step of extracting the image feature element includes extracting the image feature element representing the user's emotion from the image,
The step of calculating the evaluation value includes calculating an evaluation value for evaluating the user's degree of satisfaction with the treatment based on the image feature element representing the user's emotion extracted from the image. ,
The method according to claim 1.
請求項１～請求項１１のいずれか一項に記載された方法の各工程を前記コンピュータに実行させる前記命令を含む、
プログラム。
A program containing instructions executable by a computer,
comprising the instructions for causing the computer to execute each step of the method according to any one of claims 1 to 11;
program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022131407A JP7223906B1 (en) | 2022-08-19 | 2022-08-19 | METHOD, SKILL EVALUATION DEVICE, AND PROGRAM FOR EVALUATING SKILLS FOR USER WHO CHANGES HAIR STYLE |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022131407A JP7223906B1 (en) | 2022-08-19 | 2022-08-19 | METHOD, SKILL EVALUATION DEVICE, AND PROGRAM FOR EVALUATING SKILLS FOR USER WHO CHANGES HAIR STYLE |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP7223906B1 JP7223906B1 (en) | 2023-02-16 |
| JP2024028060A true JP2024028060A (en) | 2024-03-01 |
Family
ID=85224904
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022131407A Active JP7223906B1 (en) | 2022-08-19 | 2022-08-19 | METHOD, SKILL EVALUATION DEVICE, AND PROGRAM FOR EVALUATING SKILLS FOR USER WHO CHANGES HAIR STYLE |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7223906B1 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7466966B1 (en) | 2023-08-17 | 2024-04-15 | 株式会社ルシェノン | Nail evaluation program, device and method |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002072861A (en) * | 2000-09-01 | 2002-03-12 | Ibic Service:Kk | Hairdressing art lecture system |
| JP2018041120A (en) * | 2016-09-05 | 2018-03-15 | 富士通株式会社 | Business assessment method, business assessment device and business assessment program |
| JP2021015527A (en) * | 2019-07-15 | 2021-02-12 | 太丞 岡田 | Makeup evaluation apparatus, makeup evaluation system, and makeup evaluation method |
-
2022
- 2022-08-19 JP JP2022131407A patent/JP7223906B1/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002072861A (en) * | 2000-09-01 | 2002-03-12 | Ibic Service:Kk | Hairdressing art lecture system |
| JP2018041120A (en) * | 2016-09-05 | 2018-03-15 | 富士通株式会社 | Business assessment method, business assessment device and business assessment program |
| JP2021015527A (en) * | 2019-07-15 | 2021-02-12 | 太丞 岡田 | Makeup evaluation apparatus, makeup evaluation system, and makeup evaluation method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7223906B1 (en) | 2023-02-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| AU2009214829B2 (en) | System and method of cosmetic analysis and treatment diagnosis | |
| US10559102B2 (en) | Makeup simulation assistance apparatus, makeup simulation assistance method, and non-transitory computer-readable recording medium storing makeup simulation assistance program | |
| JP4280699B2 (en) | Skin analysis system and method | |
| JP2002304620A (en) | Measuring method for degree of expressive feature of body | |
| JP7223906B1 (en) | METHOD, SKILL EVALUATION DEVICE, AND PROGRAM FOR EVALUATING SKILLS FOR USER WHO CHANGES HAIR STYLE | |
| WO2012172625A1 (en) | Beauty sns system and program | |
| EP4376672A1 (en) | Haircare monitoring and feedback | |
| WO2023006609A1 (en) | Personal care monitoring and feedback | |
| JP2020160641A (en) | Virtual person selection device, virtual person selection system and program | |
| CN117355900A (en) | Artificial intelligence-based systems and methods for analyzing user-specific skin or hair data to predict user-specific skin or hair conditions | |
| TWI764827B (en) | Customer service device and method for assisting emotion determination | |
| JP6616541B1 (en) | A measurement method for displaying the degree of color of makeup glue on an image by AI judgment. | |
| JP6583754B2 (en) | Information processing device, mirror device, program | |
| WO2020261531A1 (en) | Information processing device, method for generating learned model of make-up simulation, method for realizing make-up simulation, and program | |
| JP7198963B1 (en) | METHOD, INFORMATION PROCESSING APPARATUS, AND PROGRAM FOR SUPPORTING HAIR STYLE VISUALIZATION | |
| TW201945898A (en) | Information processing device and program | |
| WO2024034537A1 (en) | Information processing device, information processing method, and program | |
| JP2019120777A (en) | Hairdressing management system using scissors for hairdressing | |
| KR102532561B1 (en) | Method for providing consulting data for personal style | |
| TWI740103B (en) | Customer service assiting method based on artifical intelligence | |
| KR20220037208A (en) | System and method for beauty treament | |
| RU2157077C1 (en) | Barber service effectuating method | |
| EP4377919A1 (en) | Haircare monitoring and feedback | |
| JP2024028058A (en) | Method for supporting adjustment of hairstyle, information processing apparatus, and program | |
| JP2021056137A (en) | Device for estimating state of skin |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220825 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220825 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221115 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221221 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230125 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230206 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7223906 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |