JP2018183509A - Body condition analysis apparatus and method - Google Patents

Body condition analysis apparatus and method Download PDF

Info

Publication number
JP2018183509A
JP2018183509A JP2017088364A JP2017088364A JP2018183509A JP 2018183509 A JP2018183509 A JP 2018183509A JP 2017088364 A JP2017088364 A JP 2017088364A JP 2017088364 A JP2017088364 A JP 2017088364A JP 2018183509 A JP2018183509 A JP 2018183509A
Authority
JP
Japan
Prior art keywords
user
analysis
unit
identification information
feature amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017088364A
Other languages
Japanese (ja)
Other versions
JP7056008B2 (en
Inventor
梢平 今井
Shohei Imai
梢平 今井
雅史 西角
Masafumi Nishizumi
雅史 西角
琢哉 村田
Takuya Murata
琢哉 村田
塩田 奈津子
Natsuko Shioda
奈津子 塩田
正利 米山
Masatoshi Yoneyama
正利 米山
木戸 稔人
Toshihito Kido
稔人 木戸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2017088364A priority Critical patent/JP7056008B2/en
Publication of JP2018183509A publication Critical patent/JP2018183509A/en
Application granted granted Critical
Publication of JP7056008B2 publication Critical patent/JP7056008B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To provide a body condition analysis apparatus and a body condition analysis method capable of more appropriately analyzing body condition.SOLUTION: A body condition analysis apparatus D according to the present invention includes a mirror 1, generates an analysis object image by capturing an image of the front of the mirror 1 by an imaging unit 3, determines whether or not the user is a user identified by user identification information stored in an identification information storage 61, when it is determined as a result of the determination that the user is a user identified by the user identification information stored in the identification information storage 61, analyzes the body condition based on a determination reference feature amount in the determined user and on an analyzed-time feature amount obtained based on the analysis object image, and outputs the analysis result from a display unit 4, or from a communication IF unit 7 if necessary, to the outside.SELECTED DRAWING: Figure 1

Description

本発明は、身体状態を分析する身体状態分析装置および身体状態分析方法に関する。   The present invention relates to a body state analysis device and a body state analysis method for analyzing a body state.

人々は、日々、健康であることを望むが、体調管理のために、例えばその一指標となる血圧を測定する血圧計等のように、専用の測定装置によって測定しなければならない場合が多い。このため、人は、手間を嫌って測定しなかったり、失念したりしてしまう。そこで、特許文献1に健康管理システムが提案されている。   People want to be healthy every day, but for physical condition management, they often need to be measured by a dedicated measuring device, such as a sphygmomanometer that measures blood pressure as one index. For this reason, a person dislikes a trouble and does not measure or forgets. Therefore, Patent Document 1 proposes a health management system.

この特許文献1に開示された健康管理システムは、化粧台または洗面台に備えられたミラー部と、ミラー部を使用する使用者の顔画像情報を取得する顔画像情報取得手段と、取得した顔画像情報から使用者の顔の肌状態を分析する分析部と、分析部による分析結果を通知する分析結果通知手段とを備える。これによれば、朝の外出の準備などで覗き込む化粧台または洗面台に備わるミラーを、顔画像情報取得手段で顔画像情報を取得するためのミラー部としたことで、普段の生活習慣の中で定期的な健康チェックをできて健康増進を図ることができる(例えば[0005]段落)。そして、この特許文献1に開示された健康管理システムは、顔画像情報取得手段で取得した顔画像情報を記憶する取得情報記憶部と、取得情報記憶部に記憶した顔画像情報を表示する顔画像表示手段と、判定部による判定結果が低評価な場合に、判定結果が高評価時のときの取得情報記憶部に記憶された顔画像情報を、顔画像表示手段に表示する制御部とをさらに備える。これによれば、判定部による低評価な判定結果が判定結果通知手段にて使用者に通知されて使用者が意気阻喪した際に、制御部によって、判定結果が高評価時のときの取得情報記憶部に記憶された顔画像情報を、顔画像表示手段に表示させることで、使用者を叱咤激励できて健康増進を図ることができる(例えば[0008]段落)。   The health management system disclosed in Patent Document 1 includes a mirror unit provided in a dressing table or a washstand, a face image information acquisition unit that acquires face image information of a user who uses the mirror unit, and an acquired face An analysis unit that analyzes the skin condition of the user's face from the image information, and an analysis result notification unit that notifies the analysis result by the analysis unit. According to this, the mirror provided on the dressing table or the washstand that is looked into when preparing for going out in the morning, etc., is used as a mirror part for acquiring the face image information by the face image information acquisition means. In particular, regular health checks can be conducted to improve health (for example, paragraph [0005]). The health management system disclosed in Patent Document 1 includes an acquisition information storage unit that stores face image information acquired by the face image information acquisition unit, and a face image that displays face image information stored in the acquisition information storage unit. A display unit, and a control unit that displays the face image information stored in the acquired information storage unit when the determination result is high when the determination result by the determination unit is low, on the face image display unit Prepare. According to this, when the judgment result notifying by the judgment unit is notified to the user by the judgment result notifying means and the user is depressed, the control unit obtains information when the judgment result is high evaluation. By displaying the face image information stored in the storage unit on the face image display means, the user can be encouraged and health can be promoted (for example, paragraph [0008]).

特開2009−153609号公報JP 2009-153609 A

ところで、ミラー部を覗き込むユーザは、例えば同居人が居れば必ずしも1人とは限らないため、前記特許文献1に開示された健康管理システムでは、複数人のデータが混在してしまう虞がある。複数人のデータが混在してしまうと、個々人の身体状態を適正に分析できない。   By the way, since the user who looks into a mirror part is not necessarily one person if there is a living person, for example, in the health management system indicated by the above-mentioned patent documents 1, there is a possibility that data of a plurality of persons may be mixed. . If the data of multiple people are mixed, the physical condition of each person cannot be analyzed properly.

本発明は、上述の事情に鑑みて為された発明であり、その目的は、より適正に身体状態を分析できる身体状態分析装置および身体状態分析方法を提供することである。   The present invention has been made in view of the above-described circumstances, and an object thereof is to provide a body state analysis apparatus and a body state analysis method that can analyze a body state more appropriately.

本発明者は、種々検討した結果、上記目的は、以下の本発明により達成されることを見出した。すなわち、本発明の一態様にかかる身体状態分析装置は、ミラーと、前記ミラーの前方を撮像して画像を分析対象画像として生成する撮像部と、使用者を特定し識別するための使用者識別情報を記憶する識別情報記憶部と、前記撮像部で撮像した分析対象画像に基づいて前記識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定する使用者判定部と、前記使用者における、病理診断に用いる所定の特徴量であって身体状態を分析する際の判定基準となる前記特徴量を判定基準特徴量として記憶する基準特徴量記憶部と、前記撮像部で撮像した分析対象画像から前記特徴量を分析時特徴量として求める特徴量処理部と、前記使用者判定部で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定部で判定された使用者識別情報の使用者における、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた前記分析時特徴量とに基づいて、身体状態を分析する分析部と、前記分析部で分析された身体状態の分析結果を外部に出力する出力部とを備える。好ましくは、上述の身体状態分析装置において、前記基準特徴量記憶部は、1または複数の前記判定基準特徴量を1または複数の前記使用者識別情報と対応付けて記憶する。好ましくは、上述の身体状態分析装置において、前記識別情報記憶部は、1または複数の前記使用者識別情報を1または複数の使用者に対応付けて記憶し、前記基準特徴量記憶部は、1または複数の前記判定基準特徴量を1または複数の前記使用者に対応付けて記憶する。好ましくは、上述の身体状態分析装置において、前記撮像部で撮像した複数の分析対象画像から複数の前記特徴量を求め、この求めた前記複数の特徴量の平均値を前記判定基準特徴量として求め、この求めた前記判定基準特徴量を前記基準特徴量記憶部に記憶する判定基準特徴量生成部をさらに備える。好ましくは、上述の身体状態分析装置において、前記特徴量は、第1特徴量と、前記第1特徴量の成分である第2特徴量とを備える。好ましくは、上述の身体状態分析装置において、前記第1特徴量は、白目部分(眼球における白い部分、結膜部分)の色である。好ましくは、黄疸の可能性を好適に分析できることから、上述の身体状態分析装置において、前記第2特徴量は、白目部分の色における青成分(色相の青成分)である。好ましくは、結膜炎の可能性を好適に分析できることから、上述の身体状態分析装置において、前記第2特徴量は、白目部分の色における赤成分(色相の赤成分)である。好ましくは、白内障および翼状片のうちの少なくともいずれかの可能性、ならびに、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性を好適に分析できることから、上述の身体状態分析装置において、前記第2特徴量は、黒目部分(眼球における虹彩および瞳孔の部分)の色における明度である。好ましくは、上述の身体状態分析装置において、前記第2特徴量は、頬部分の色である。好ましくは、黄疸の可能性を好適に分析できることから、上述の身体状態分析装置において、前記第2特徴量は、頬部分の色における青成分(色相の青成分)である。好ましくは、腎臓病の可能性を好適に分析できることから、上述の身体状態分析装置において、前記第2特徴量は、頬部分の色における明度である。好ましくは、骨粗鬆症の可能性を好適に分析できることから、上述の身体状態分析装置において、前記特徴量は、目の高さ位置である。好ましくは、上述の身体状態分析装置において、基準となる基準色を記憶する基準色記憶部をさらに備え、前記特徴量処理部は、前記撮像部で撮像した分析対象画像から前記特徴量を求め、この求めた前記特徴量を、前記基準色記憶部に記憶された基準色に基づいて補正した補正特徴量を前記分析時特徴量として求める。   As a result of various studies, the present inventor has found that the above object is achieved by the present invention described below. That is, the body condition analysis apparatus according to one aspect of the present invention includes a mirror, an imaging unit that images the front of the mirror and generates an image as an analysis target image, and a user identification for identifying and identifying a user An identification information storage unit that stores information; a user determination unit that determines whether or not the user identification information stored in the identification information storage unit is a user based on an analysis target image captured by the imaging unit; A reference feature quantity storage unit that stores the feature quantity that is a predetermined feature quantity used for pathological diagnosis in the user and that serves as a judgment reference when analyzing a physical state, and an image that is captured by the imaging unit A feature amount processing unit that obtains the feature amount from the analysis target image as an analysis feature amount, and the user determination unit that is determined to be a user of the user identification information stored in the identification information storage unit And said Based on the determination reference feature amount stored in the reference feature amount storage unit and the analysis feature amount obtained by the feature amount processing unit for the user of the user identification information determined by the user determination unit. And an analysis unit for analyzing the physical condition and an output unit for outputting the analysis result of the physical condition analyzed by the analysis unit to the outside. Preferably, in the above-described body condition analysis apparatus, the reference feature amount storage unit stores one or more determination criterion feature amounts in association with one or more user identification information. Preferably, in the above-described body condition analysis device, the identification information storage unit stores one or more user identification information in association with one or more users, and the reference feature quantity storage unit is 1 Alternatively, a plurality of determination criterion feature quantities are stored in association with one or more users. Preferably, in the above-described body condition analysis apparatus, a plurality of feature amounts are obtained from a plurality of analysis target images captured by the imaging unit, and an average value of the obtained plurality of feature amounts is obtained as the determination reference feature amount. The determination reference feature quantity generation unit for storing the obtained determination reference feature quantity in the reference feature quantity storage unit. Preferably, in the above-described body condition analysis apparatus, the feature amount includes a first feature amount and a second feature amount that is a component of the first feature amount. Preferably, in the above-described body condition analysis apparatus, the first feature amount is a color of a white eye part (a white part or a conjunctival part in an eyeball). Preferably, since the possibility of jaundice can be analyzed suitably, in the above-described body condition analysis device, the second feature amount is a blue component (blue component of hue) in the color of the white eye portion. Preferably, since the possibility of conjunctivitis can be analyzed favorably, in the above-described body condition analyzer, the second feature amount is a red component (red component of hue) in the color of the white eye portion. Preferably, the possibility of at least one of cataract and pterygium and at least one of the possibility of retinal hemorrhage, retinitis pigmentosa, retinal choroidal atrophy, retinal choroiditis, optic atrophy and optic neuritis Since the analysis can be suitably performed, in the above-described body state analysis device, the second feature amount is lightness in the color of the black eye part (the iris and pupil part in the eyeball). Preferably, in the above-described body condition analysis apparatus, the second feature amount is a color of the cheek portion. Preferably, since the possibility of jaundice can be analyzed suitably, in the above-described body condition analysis apparatus, the second feature amount is a blue component (blue component of hue) in the color of the cheek portion. Preferably, since the possibility of kidney disease can be analyzed suitably, in the above-described body condition analysis apparatus, the second feature amount is lightness in the color of the cheek portion. Preferably, since the possibility of osteoporosis can be suitably analyzed, in the above-described body condition analysis apparatus, the feature amount is the eye height position. Preferably, in the above-described body condition analysis device, the apparatus further includes a reference color storage unit that stores a reference color serving as a reference, and the feature amount processing unit obtains the feature amount from the analysis target image captured by the imaging unit, A corrected feature value obtained by correcting the obtained feature value based on the reference color stored in the reference color storage unit is obtained as the analysis feature value.

このような身体状態分析装置は、ミラーを備え、ミラーの前方を撮像することによって分析対象画像を生成し、この分析対象画像に基づいて、識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、この判定の結果、識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、この判定された使用者識別情報の使用者における、判定基準特徴量と、前記分析対象画像に基づいて求められた分析時特徴量とに基づいて、身体状態を分析し、その分析結果を外部に出力する。したがって、上記身体状態分析装置は、ミラーを備え、ミラーの前方を撮像することによって分析対象画像を生成するので、例えば、洗顔、歯磨き、メイクアップ、ヘアセット、コンタクトレンズの取付け、その取外し等の日常生活における行動の中でミラーを見る自然な動作の際に意識することなく、身体状態を分析でき、その分析結果の出力を参照することで、前記自然な動作の際に、日々の身体状態をチェックできる。そして、上記身体状態分析装置は、その身体状態の分析の際に、識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、この判定された使用者識別情報の使用者における、判定基準特徴量と分析時特徴量とに基づいて、身体状態を分析するので、当該身体状態分析装置が複数の使用者によって使用される場合でも、当該使用者の判定基準特徴量で身体状態を分析するから、より適正に身体状態を分析できる。   Such a body condition analysis apparatus includes a mirror, generates an analysis target image by imaging the front of the mirror, and uses the user identification information stored in the identification information storage unit based on the analysis target image. If it is determined that the user is a user of the user identification information stored in the identification information storage unit as a result of this determination, in the user of the determined user identification information, Based on the determination reference feature amount and the analysis feature amount obtained based on the analysis target image, the body state is analyzed, and the analysis result is output to the outside. Therefore, the body condition analysis apparatus includes a mirror and generates an analysis target image by imaging the front of the mirror. For example, face washing, tooth brushing, makeup, hair set, contact lens attachment, removal thereof, etc. You can analyze the physical state without being conscious of the natural movement when you look at the mirror in the behavior in daily life, and by referring to the output of the analysis result, you can see the daily physical condition in the natural movement Can be checked. The physical condition analyzer determines whether or not the user identification information stored in the identification information storage unit is a user when analyzing the physical condition, and uses the determined user identification information. The physical condition is analyzed on the basis of the determination criterion feature quantity and the analysis feature quantity in the user, so even if the physical condition analyzer is used by a plurality of users, the determination criterion feature quantity of the user is used. Since the physical condition is analyzed, the physical condition can be analyzed more appropriately.

他の一態様では、上述の身体状態分析装置において、前記使用者識別情報は、前記使用者の顔を写し込んだ顔画像であり、前記使用者判定部は、顔認証技術によって、前記撮像部で撮像した分析対象画像に基づいて前記識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、前記使用者判定部で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定部で判定された前記使用者識別情報の使用者における、前記識別情報記憶部に記憶されている使用者識別情報を、前記撮像部で撮像した分析対象画像に基づいて更新して前記識別情報記憶部に記憶する識別情報更新部をさらに備える。   In another aspect, in the above-described body condition analysis apparatus, the user identification information is a face image in which the user's face is captured, and the user determination unit is configured to capture the image by the face authentication technique. It is determined whether or not the user is the user of the user identification information stored in the identification information storage unit based on the analysis target image captured in step, and the user identification stored in the identification information storage unit by the user determination unit When it is determined that the user is a user of information, the user identification information stored in the identification information storage unit of the user of the user identification information determined by the user determination unit is captured. And an identification information updating unit that updates based on the analysis target image captured by the unit and stores it in the identification information storage unit.

このような身体状態分析装置は、識別情報記憶部に記憶されている使用者識別情報を、撮像部で撮像した分析対象画像に基づいて更新して識別情報記憶部に記憶するので、使用者の容貌が変化しても、より適切に使用者を判定できる。したがって、当該使用者の判定基準特徴量で身体状態が分析されるから、上記身体状態分析装置は、より適正に身体状態を分析できる。   Such a physical condition analyzer updates the user identification information stored in the identification information storage unit based on the analysis target image captured by the imaging unit and stores the updated information in the identification information storage unit. Even if the appearance changes, the user can be determined more appropriately. Therefore, since the physical condition is analyzed based on the determination criterion feature quantity of the user, the physical condition analysis apparatus can analyze the physical condition more appropriately.

他の一態様では、これら上述の身体状態分析装置において、前記使用者における、身体状態の分析に用いる判定閾値を記憶する閾値記憶部をさらに備え、前記分析部は、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた分析時特徴量との差を求め、この求めた差と、前記使用者判定部で判定された使用者識別情報の使用者における、前記閾値記憶部に記憶された判定閾値と、を比較することによって、身体状態を分析する。   In another aspect, the above-described physical condition analysis apparatus further includes a threshold storage unit that stores a determination threshold used by the user for analyzing the physical condition, and the analysis unit is included in the reference feature amount storage unit. The difference between the stored determination criterion feature quantity and the analysis-time feature quantity obtained by the feature quantity processing unit is obtained, and the obtained difference and the user of the user identification information judged by the user judgment unit are obtained. The physical condition is analyzed by comparing the determination threshold value stored in the threshold value storage unit.

このような身体状態分析装置は、使用者における、身体状態の分析に用いる判定閾値を記憶し、この使用者の判定閾値でその身体状態を分析する。したがって、上記身体状態分析装置は、使用者個々人に応じて判定閾値をカスタマイズでき、より適正に身体状態を分析できる。   Such a physical condition analyzer stores a determination threshold value used for analyzing the physical condition of the user, and analyzes the physical condition using the determination threshold value of the user. Therefore, the body condition analyzer can customize the determination threshold according to each individual user, and can analyze the body condition more appropriately.

他の一態様では、これら上述の身体状態分析装置において、前記分析部は、前記特徴量処理部で求めた前記分析時特徴量が所定の正常範囲内であるか否かを判定することによって、前記身体状態が正常であるか否かを判定し、前記使用者における、カルテの内容を表す電子カルテ情報、および、前記使用者における、健康診断の結果を表す健康診断結果情報のうちの少なくとも一方を過去身体状態情報として記憶する過去身体状態情報記憶部と、前記使用者判定部で判定された使用者識別情報の使用者における、前記過去身体状態情報記憶部に記憶された過去身体状態情報に基づいて、前記正常範囲を調整する正常範囲調整部とをさらに備える。   In another aspect, in the above-described body condition analysis devices, the analysis unit determines whether or not the analysis-time feature amount obtained by the feature amount processing unit is within a predetermined normal range. It is determined whether or not the physical condition is normal, and at least one of electronic medical chart information representing the contents of a medical chart in the user and health check result information representing a result of a health check in the user Past physical state information stored in the past physical state information storage unit in the past physical state information storage unit and the user identification information determined by the user determination unit in the past physical state information storage unit And a normal range adjusting unit for adjusting the normal range.

このような身体状態分析装置は、使用者判定部で判定された使用者識別情報の使用者における過去身体状態情報に基づいて、前記正常範囲を調整する。したがって、上記身体状態分析装置は、使用者個々人の過去身体状態情報を考慮することで、より適正に使用者が正常範囲内であるか否かを判定できる。   Such a physical condition analyzer adjusts the normal range based on past physical condition information on the user of the user identification information determined by the user determination unit. Therefore, the body condition analyzer can determine whether or not the user is within the normal range more appropriately by considering the past body condition information of the individual user.

他の一態様では、上述の身体状態分析装置において、前記特徴量は、第1特徴量と、前記第1特徴量の成分である第2特徴量とを備え、前記特徴量処理部は、前記第1および第2特徴量それぞれを第1および第2分析時特徴量それぞれとして求め、前記分析部は、前記特徴量処理部で求めた前記第1分析時特徴量が所定の正常範囲内であるか否かを判定することによって、前記身体状態が正常であるか否かを判定し、前記分析部は、前記正常範囲内ではないと判定した場合に、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた第2分析時特徴量との差を求め、この求めた差と、前記使用者判定部で判定された使用者識別情報の使用者における、前記閾値記憶部に記憶された判定閾値と、を比較することによって、身体状態を分析する。   In another aspect, in the above-described body condition analysis apparatus, the feature amount includes a first feature amount and a second feature amount that is a component of the first feature amount, and the feature amount processing unit includes the feature amount processing unit. First and second feature values are obtained as first and second analysis feature values, respectively, and the analysis unit has the first analysis feature value obtained by the feature processing unit within a predetermined normal range. It is determined whether or not the physical condition is normal by determining whether or not the analysis unit is stored in the reference feature amount storage unit when it is determined that it is not within the normal range The difference between the determination reference feature value and the second analysis feature value obtained by the feature value processing unit is obtained, and the obtained difference and the user identification information determined by the user determination unit are determined by the user. And comparing the determination threshold value stored in the threshold value storage unit. , To analyze the physical condition.

このような身体状態分析装置は、使用者が正常範囲内である否かを判定した上で、前記正常範囲内ではない場合に、身体状態を分析する。したがって、上記身体状態分析装置は、正常範囲内である場合に、身体状態を分析する処理をスキップでき、一方、2段階で解析するので、より適正に身体状態を分析できる。   Such a physical condition analyzer analyzes whether or not the user is within the normal range, and then analyzes the physical condition when the user is not within the normal range. Therefore, when the body condition analyzing apparatus is within the normal range, the process of analyzing the body condition can be skipped. On the other hand, since the analysis is performed in two stages, the body condition can be analyzed more appropriately.

本発明の他の一態様にかかる身体状態分析方法は、ミラーに設けられた撮像部によって、前記ミラーの前方を撮像して画像を分析対象画像として生成する撮像工程と、前記撮像工程で撮像した分析対象画像に基づいて、使用者を特定し識別するための使用者識別情報を記憶する識別情報記憶部に記憶された前記使用者識別情報の使用者か否かを判定する使用者判定工程と、前記撮像工程で撮像した分析対象画像から、病理診断に用いる所定の特徴量を分析時特徴量として求める特徴量処理工程と、前記使用者判定工程で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定工程で判定された使用者識別情報の使用者における、身体状態を分析する際の判定基準となる前記特徴量を判定基準特徴量として記憶する基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理工程で求めた前記分析時特徴量とに基づいて、身体状態を分析する分析工程と、前記分析工程で分析された身体状態の分析結果を外部に出力する出力工程とを備える。   According to another aspect of the present invention, there is provided a body condition analysis method in which an imaging unit provided in a mirror captures an image of the front of the mirror and generates an image as an analysis target image. A user determination step for determining whether the user is the user of the user identification information stored in the identification information storage unit that stores the user identification information for identifying and identifying the user based on the analysis target image; , A feature amount processing step for obtaining a predetermined feature amount used for pathological diagnosis as an analysis feature amount from the analysis target image captured in the imaging step, and a user stored in the identification information storage unit in the user determination step When it is determined that the user is the user of the identification information, the feature amount serving as a determination criterion when analyzing the body condition in the user of the user identification information determined in the user determination step is determined as a determination criterion feature. An analysis step for analyzing a physical state based on the determination reference feature amount stored in the reference feature amount storage unit and the feature amount at the time of analysis obtained in the feature amount processing step; and And an output step of outputting the analysis result of the analyzed physical condition to the outside.

このような身体状態分析方法は、ミラーに設けられた撮像部で、前記ミラーの前方を撮像することによって分析対象画像を生成し、この分析対象画像に基づいて、識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、この判定の結果、識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、この判定された使用者識別情報の使用者における、判定基準特徴量と、前記分析対象画像に基づいて求められた分析時特徴量とに基づいて、身体状態を分析し、その分析結果を外部に出力する。したがって、上記身体状態分析方法は、ミラーに設けられた撮像部で、前記ミラーの前方を撮像することによって分析対象画像を生成するので、日常生活における前記行動の中でミラーを見る自然な動作の際に意識することなく、身体状態を分析でき、その分析結果の出力を参照することで、前記自然な動作の際に、日々の身体状態をチェックできる。そして、上記身体状態分析方法は、その身体状態の分析の際に、識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、この判定された使用者識別情報の使用者における、判定基準特徴量と分析時特徴量とに基づいて、身体状態を分析するので、前記ミラーが複数の使用者によって使用される場合でも、当該使用者の判定基準特徴量で身体状態を分析するから、より適正に身体状態を分析できる。   In such a body condition analysis method, an image to be analyzed is generated by imaging the front of the mirror with an imaging unit provided in the mirror, and stored in the identification information storage unit based on the image to be analyzed It is determined whether or not the user is the user of the user identification information. As a result of the determination, when it is determined that the user is the user of the user identification information stored in the identification information storage unit, the determined user identification Based on the determination criterion feature amount and the analysis time feature amount obtained based on the analysis target image in the information user, the body state is analyzed, and the analysis result is output to the outside. Therefore, the body condition analysis method generates an analysis target image by imaging the front of the mirror with an imaging unit provided on the mirror, so that the natural action of looking at the mirror in the behavior in daily life The body condition can be analyzed without being conscious of the situation, and the daily body condition can be checked during the natural movement by referring to the output of the analysis result. The physical condition analysis method determines whether or not the user identification information stored in the identification information storage unit is a user when analyzing the physical condition, and uses the determined user identification information. Therefore, even when the mirror is used by a plurality of users, the physical condition is determined by the user's determination reference feature amount. Because it analyzes, it can analyze the physical condition more appropriately.

本発明にかかる身体状態分析装置および身体状態分析方法は、より適正に身体状態を分析できる。   The body state analysis device and the body state analysis method according to the present invention can analyze the body state more appropriately.

実施形態における身体状態分析装置の構成を示すブロック図である。It is a block diagram which shows the structure of the body condition analyzer in embodiment. 前記身体状態分析装置の外観構成を示す図である。It is a figure which shows the external appearance structure of the said physical condition analyzer. 前記身体状態分析装置に記憶されるベース情報テーブルの構成を示す図である。It is a figure which shows the structure of the base information table memorize | stored in the said physical condition analyzer. 前記身体状態分析装置を備えた身体状態分析システムの構成を示す図である。It is a figure which shows the structure of the physical condition analysis system provided with the said physical condition analyzer. 前記身体状態分析装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said physical condition analyzer. 図5に示すフローチャートにおける使用者の識別処理における各処理を示すフローチャートである。It is a flowchart which shows each process in the identification process of the user in the flowchart shown in FIG. 図6に示すフローチャートにおける使用者の過去身体状態情報の諸処理における各処理を示すフローチャートである。It is a flowchart which shows each process in the various processes of the user's past physical condition information in the flowchart shown in FIG. 図5に示すフローチャートにおける特徴量の抽出処理における各処理を示すフローチャートである。It is a flowchart which shows each process in the extraction process of the feature-value in the flowchart shown in FIG. 図5に示すフローチャートの分析処理において、黒目部分に基づく分析処理の各処理を示すフローチャートである。FIG. 6 is a flowchart showing each process of an analysis process based on a black eye part in the analysis process of the flowchart shown in FIG. 5. 図5に示すフローチャートの分析処理において、白目部分に基づく分析処理の各処理を示すフローチャートである。FIG. 6 is a flowchart showing each process of an analysis process based on a white-eye portion in the analysis process of the flowchart shown in FIG. 5. 図5に示すフローチャートの分析処理において、頬部分に基づく分析処理の各処理を示すフローチャートである。FIG. 6 is a flowchart showing each process of the analysis process based on the cheek portion in the analysis process of the flowchart shown in FIG. 5. 図5に示すフローチャートにおける分析結果の処理における各処理を示すフローチャートである。It is a flowchart which shows each process in the process of the analysis result in the flowchart shown in FIG.

以下、本発明にかかる実施の一形態を図面に基づいて説明する。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。   Hereinafter, an embodiment according to the present invention will be described with reference to the drawings. In addition, the structure which attached | subjected the same code | symbol in each figure shows that it is the same structure, The description is abbreviate | omitted suitably. In this specification, when referring generically, it shows with the reference symbol which abbreviate | omitted the suffix, and when referring to an individual structure, it shows with the reference symbol which attached the suffix.

図1は、実施形態における身体状態分析装置の構成を示すブロック図である。図2は、前記身体状態分析装置の外観構成を示す図である。図3は、前記身体状態分析装置に記憶されるベース情報テーブルの構成を示す図である。図4は、前記身体状態分析装置を備えた身体状態分析システムの構成を示す図である。   FIG. 1 is a block diagram illustrating a configuration of a body condition analysis apparatus according to an embodiment. FIG. 2 is a diagram showing an external configuration of the body condition analyzer. FIG. 3 is a diagram showing a configuration of a base information table stored in the physical condition analyzer. FIG. 4 is a diagram illustrating a configuration of a body condition analysis system including the body condition analysis apparatus.

実施形態における身体状態分析装置は、使用者の身体状態を分析する装置であり、例えば、図1および図2に示すように、ミラー1と、照明部2(2−1、2−2)と、撮像部3と、表示部4と、制御処理部5と、記憶部6と、通信インターフェース部(通信IF部)7と、筐体FRとを備える。   The body state analysis device in the embodiment is a device that analyzes a user's body state. For example, as illustrated in FIGS. 1 and 2, a mirror 1 and illumination units 2 (2-1, 2-2) The imaging unit 3, the display unit 4, the control processing unit 5, the storage unit 6, the communication interface unit (communication IF unit) 7, and the housing FR are provided.

筐体FRは、ミラー1が外部に臨むように、ミラー1、撮像部3、表示部4、制御処理部5、記憶部6および通信IF部7を収容する部材であり、例えば、比較的薄い箱体である。照明部2は、後述するように、筐体FRの外面に配設される。筐体FRは、例えば手鏡や姿見鏡等を構成する単体であって良く、あるいは、例えば化粧台や洗面台等の一部であって良い。   The casing FR is a member that houses the mirror 1, the imaging unit 3, the display unit 4, the control processing unit 5, the storage unit 6, and the communication IF unit 7 so that the mirror 1 faces the outside. It is a box. The illumination part 2 is arrange | positioned on the outer surface of the housing | casing FR so that it may mention later. The casing FR may be a single unit that constitutes a hand mirror, a viewing mirror, or the like, or may be a part of a dressing table or a washstand, for example.

ミラー(鏡)1は、物体の外観を写す部材である。本実施形態では、ミラー1を介して撮像部3がミラー1の前方を撮像し、ミラー1を介して表示部4に表示された表示内容が外部から参照できるようにするために、ミラー1は、ハーフミラー(半透鏡)で構成されている。なお、ミラー1の透過率と反射率との比は、1:1であって良いが、必ずしも1:1である必要はなく、任意である。   The mirror (mirror) 1 is a member that captures the appearance of an object. In the present embodiment, in order for the imaging unit 3 to image the front of the mirror 1 via the mirror 1 and to allow the display content displayed on the display unit 4 via the mirror 1 to be referred to from the outside, the mirror 1 is It is composed of a half mirror. The ratio between the transmittance and the reflectance of the mirror 1 may be 1: 1, but it is not necessarily 1: 1 and is arbitrary.

照明部2は、制御処理部5に接続され、制御処理部5の制御に従って、ミラー1の前方を照明する照明光を放射する光源装置である。照明部2は、1個でも良いが、本実施形態では、ミラー1の前方を撮像部3で撮像して生成された画像(分析対象画像)に、ミラー1を使う人物(当該身体状態分析装置Dに登録された使用者および非登録で使う使用者を含む)が写り込んでいる場合に、前記人物の画像に影が形成されることを抑制するために、照明部2は、少なくとも2個の1対の第1および第2照明部2−1、2−2を備えて構成され、これら第1および第2照明部2−1、2−2は、互いに所定の間隔開けて離間して、ミラー1の上方両端における筐体表面上に配設される。第1および第2照明部2−1、2−2は、例えば、電球、蛍光灯および白色LED(白色発光ダイオード)等である。   The illumination unit 2 is a light source device that is connected to the control processing unit 5 and emits illumination light that illuminates the front of the mirror 1 according to the control of the control processing unit 5. Although the number of the illuminating units 2 may be one, in the present embodiment, a person who uses the mirror 1 (the body condition analyzing apparatus) on an image (analysis target image) generated by imaging the front of the mirror 1 with the imaging unit 3 In order to suppress the formation of shadows in the person's image when a user registered in D and an unregistered user are captured), there are at least two illumination units 2 The first and second illumination units 2-1 and 2-2 are configured so that the first and second illumination units 2-1 and 2-2 are spaced apart from each other by a predetermined distance. The mirror 1 is disposed on the housing surface at both upper ends. The first and second illumination units 2-1 and 2-2 are, for example, a light bulb, a fluorescent lamp, and a white LED (white light emitting diode).

撮像部3は、制御処理部5に接続され、制御処理部5の制御に従って、ミラー1の前方を撮像して画像(画像データ)を分析対象画像(分析対象画像データ)として生成する装置である。撮像部3は、前記画像は、静止画であって良く、動画像であって良い。撮像部3は、例えば、本実施形態では、光学像を所定の結像面上に結像する結像光学系、前記結像面に受光面を一致させて配置され、前記光学像を電気的な信号に変換するエリアイメージセンサ、および、エリアイメージセンサの出力を画像処理することで画像を表すデータである画像データを生成する画像処理回路等を備えるデジタルカメラ等である。撮像部3は、本実施形態では、ミラー1の背面に配設され、ミラー1を介してミラー1の前方を撮像する。例えば、撮像部3は、埃等の侵入を防止するために、前記結像光学系の対物側がミラー1の背面に当接するように、配設され、固定されている。   The imaging unit 3 is an apparatus that is connected to the control processing unit 5 and generates an image (image data) as an analysis target image (analysis target image data) by imaging the front of the mirror 1 according to the control of the control processing unit 5. . In the imaging unit 3, the image may be a still image or a moving image. For example, in this embodiment, the imaging unit 3 is an imaging optical system that forms an optical image on a predetermined imaging surface, and a light receiving surface that is aligned with the imaging surface. An area image sensor that converts the signal into a simple signal, and a digital camera that includes an image processing circuit that generates image data that represents data by performing image processing on the output of the area image sensor. In this embodiment, the imaging unit 3 is disposed on the back surface of the mirror 1 and images the front of the mirror 1 via the mirror 1. For example, the imaging unit 3 is disposed and fixed so that the objective side of the imaging optical system is in contact with the back surface of the mirror 1 in order to prevent intrusion of dust or the like.

表示部4は、制御処理部5に接続され、制御処理部5の制御に従って、例えば、当該身体状態分析装置Dで分析された身体状態の分析結果等の所定の情報を表示する装置である。表示部4は、例えば、当該身体状態分析装置Dを好適に薄型化できる観点から、LCD(液晶表示装置)および有機EL(ElectroLuminecence、OLED(有機発光ダイオード))表示装置等である。本実施形態では、表示部4は、その表示面をミラー1に向けて、ミラー1を介して前記表示面が外部から参照可能なように、ミラー1の背面に前記表示面を当接させて配設されている。表示部4は、その表示面の大きさがミラー1の大きさと略同等であって良く、あるいは、ミラー1の大きさより小さくて良い。   The display unit 4 is a device that is connected to the control processing unit 5 and displays predetermined information such as the analysis result of the body state analyzed by the body state analysis device D according to the control of the control processing unit 5. The display unit 4 is, for example, an LCD (Liquid Crystal Display) and an organic EL (ElectroLuminescence, OLED (Organic Light Emitting Diode)) display from the viewpoint that the physical condition analyzer D can be suitably thinned. In the present embodiment, the display unit 4 faces the display surface toward the mirror 1 and makes the display surface contact the back surface of the mirror 1 so that the display surface can be referred to from the outside via the mirror 1. It is arranged. The size of the display surface of the display unit 4 may be approximately the same as the size of the mirror 1 or may be smaller than the size of the mirror 1.

通信IF部7は、制御処理部5に接続され、制御処理部5の制御に従って、外部の機器と通信を行うための通信回路である。通信IF部7は、制御処理部5から入力された転送すべきデータを収容した通信信号を、図4に示す後述のネットワークNWで用いられる通信プロトコルに従って生成し、この生成した通信信号をネットワークNWを介して外部の機器(例えば図4に示す後述のパーソナルコンピュータPCやサーバ装置SV等)へ送信する。通信IF部7は、ネットワークNWを介して前記外部の機器から通信信号を受信し、この受信した通信信号からデータを取り出し、この取り出したデータを制御処理部5が処理可能な形式のデータに変換して制御処理部5へ出力する。通信IF部7は、例えば、移動体通信網やデータ通信網等の通信網によって有線または無線で通信する通信カード、および、IEEE802シリーズの規格等に従った通信インターフェース回路等である。なお、通信IF部7は、さらに、例えば、Bluetooth(登録商標)規格、IrDA(Infrared Data Asscoiation)規格およびUSB(Universal Serial Bus)規格等の規格を用い、外部機器との間でデータの入出力を行うインターフェース回路を備えても良い。   The communication IF unit 7 is a communication circuit that is connected to the control processing unit 5 and performs communication with an external device under the control of the control processing unit 5. The communication IF unit 7 generates a communication signal containing data to be transferred input from the control processing unit 5 in accordance with a communication protocol used in the network NW described later shown in FIG. 4, and generates the generated communication signal in the network NW. To an external device (for example, a personal computer PC or a server device SV described later shown in FIG. 4). The communication IF unit 7 receives a communication signal from the external device via the network NW, extracts data from the received communication signal, and converts the extracted data into data that can be processed by the control processing unit 5 And output to the control processing unit 5. The communication IF unit 7 is, for example, a communication card that performs wired or wireless communication via a communication network such as a mobile communication network or a data communication network, and a communication interface circuit that complies with the IEEE 802 series standard. Note that the communication IF unit 7 further uses, for example, standards such as Bluetooth (registered trademark) standard, IrDA (Infrared Data Association) standard, USB (Universal Serial Bus) standard, etc. An interface circuit may be provided.

記憶部6は、制御処理部5に接続され、制御処理部5の制御に従って、各種の所定のプログラムおよび各種の所定のデータを記憶する回路である。前記各種の所定のプログラムには、例えば、制御プログラム、使用者判定プログラム、特徴量処理プログラム、分析プログラム、識別情報更新プログラムおよび正常範囲調整プログラム等の制御処理プログラムが含まれる。前記制御プログラムは、当該身体状態分析装置Dの各部2〜4、6、7を当該各部の機能に応じて制御するプログラムである。前記使用者判定プログラムは、撮像部3で撮像した分析対象画像に基づいて後述の識別情報記憶部61に記憶された使用者識別情報の使用者か否かを判定するプログラムである。前記特徴量処理プログラムは、撮像部3で撮像した分析対象画像から、病理診断に用いる所定の特徴量を分析時特徴量として求めるプログラムである。前記分析プログラムは、前記使用者判定プログラムで識別情報記憶部61に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定プログラムで判定された使用者識別情報の使用者における、後述の基準特徴量記憶部62に記憶された判定基準特徴量と、前記特徴量処理プログラムで求めた前記分析時特徴量とに基づいて、身体状態を分析するプログラムである。前記識別情報更新プログラムは、前記使用者判定プログラムで識別情報記憶部61に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定プログラムで判定された前記使用者識別情報の使用者における、識別情報記憶部61に記憶されている使用者識別情報を、撮像部3で撮像した分析対象画像に基づいて更新して識別情報記憶部61に記憶するプログラムである。前記正常範囲調整プログラムは、後述の正常範囲を調整するプログラムである。前記各種の所定のデータには、例えば、使用者識別情報、判定基準特徴量、過去身体状態情報、判定閾値および基準色等の、身体状態を分析する上で必要なデータが含まれる。このような記憶部6は、例えば不揮発性の記憶素子であるROM(Read Only Memory)や書き換え可能な不揮発性の記憶素子であるEEPROM(Electrically Erasable Programmable Read Only Memory)等を備える。そして、記憶部6は、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆる制御処理部5のワーキングメモリとなるRAM(Random Access Memory)等を含む。記憶部6は、これら上述の使用者識別情報、判定基準特徴量、過去身体状態情報、判定閾値および基準色それぞれを記憶するために、識別情報記憶部61、基準特徴量記憶部62、過去身体状態情報記憶部63、閾値記憶部64、正常範囲記憶部65および基準色記憶部66を機能的に備える。   The storage unit 6 is a circuit that is connected to the control processing unit 5 and stores various predetermined programs and various predetermined data under the control of the control processing unit 5. Examples of the various predetermined programs include control processing programs such as a control program, a user determination program, a feature amount processing program, an analysis program, an identification information update program, and a normal range adjustment program. The said control program is a program which controls each part 2-4, 6, 7 of the said physical condition analyzer D according to the function of the said each part. The user determination program is a program for determining whether or not the user is the user of the user identification information stored in the identification information storage unit 61 described later based on the analysis target image captured by the imaging unit 3. The feature amount processing program is a program for obtaining a predetermined feature amount used for pathological diagnosis from the analysis target image captured by the imaging unit 3 as an analysis feature amount. The analysis program determines the user identification information determined by the user determination program when the user determination program determines that the user is the user of the user identification information stored in the identification information storage unit 61. This is a program for analyzing a physical state based on a determination reference feature value stored in a reference feature value storage unit 62 (to be described later) and a feature value at the time of analysis obtained by the feature value processing program. The identification information update program is determined by the user determination program when the user determination program determines that the user is the user of the user identification information stored in the identification information storage unit 61. This is a program for updating the user identification information stored in the identification information storage unit 61 for the user of the identification information based on the analysis target image captured by the imaging unit 3 and storing it in the identification information storage unit 61. The normal range adjustment program is a program for adjusting a normal range described later. The various kinds of predetermined data include data necessary for analyzing the body condition, such as user identification information, determination reference feature quantity, past physical condition information, determination threshold value, and reference color. The storage unit 6 includes, for example, a ROM (Read Only Memory) that is a nonvolatile storage element, an EEPROM (Electrically Erasable Programmable Read Only Memory) that is a rewritable nonvolatile storage element, and the like. The storage unit 6 includes a RAM (Random Access Memory) that serves as a working memory of the control processing unit 5 that stores data generated during execution of the predetermined program. The storage unit 6 stores the identification information storage unit 61, the reference feature amount storage unit 62, the past body, in order to store the above-described user identification information, determination reference feature amount, past body state information, determination threshold value and reference color A status information storage unit 63, a threshold storage unit 64, a normal range storage unit 65, and a reference color storage unit 66 are functionally provided.

識別情報記憶部61は、前記使用者識別情報を記憶するものである。前記使用者識別情報は、当該身体状態分析装置Dの使用者を認証するために、使用者を特定し識別するための情報(データ)である。前記使用者識別情報は、例えば、使用者の名前(使用者名)や使用者に割り当てられた識別子(ID)等であって良いが、前記使用者識別情報が使用者名やID等である場合にはその入力を受け付ける入力部が必要となるので、その入力部を不要にできる観点から、本実施形態では、前記使用者識別情報は、撮像部3で撮像した画像から使用者を特定し識別できるように、使用者の顔を写し込んだ画像(顔画像、顔画像データ)である。   The identification information storage unit 61 stores the user identification information. The user identification information is information (data) for identifying and identifying the user in order to authenticate the user of the physical condition analyzer D. The user identification information may be, for example, a user name (user name) or an identifier (ID) assigned to the user, but the user identification information is a user name, ID, or the like. In some cases, an input unit that accepts the input is required. From the viewpoint of making the input unit unnecessary, in the present embodiment, the user identification information specifies the user from the image captured by the imaging unit 3. It is an image (face image, face image data) that captures the user's face so that it can be identified.

基準特徴量記憶部62は、識別情報記憶部61に記憶された使用者識別情報の使用者における、前記判定基準特徴量(判定基準特徴量のデータ)を記憶するものである。前記判定基準特徴量は、病理診断に用いる所定の特徴量であって身体状態を分析する際の判定基準となる前記特徴量である。前記所定の特徴量は、撮像部3で撮像した画像から得られる、使用者を写し込んだ画像領域(使用者画像領域)における色(色相、彩度、明度)、形状、コントラスト等である。より具体的には、本実施形態では、前記特徴量は、第1特徴量と、前記第1特徴量の成分である第2特徴量とを備える。前記第1特徴量は、例えば、白目部分(眼球における白い部分、結膜部分)の色である。この第1特徴量において、前記第2特徴量は、黄疸の可能性を好適に分析できることから、白目部分の色における青成分(色相の青成分)であり、結膜炎の可能性を好適に分析できることから、白目部分の色における赤成分(色相の赤成分)である。また例えば、前記第1特徴量は、黒目部分(眼球における虹彩および瞳孔の部分)の色であり、この第1特徴量において、前記第2特徴量は、白内障および翼状片のうちの少なくともいずれかの可能性、ならびに、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性を好適に分析できることから、黒目部分の色における明度である。また例えば、前記第1特徴量は、頬部分の色であり、この第1特徴量において、前記第2特徴量は、腎臓病の可能性を好適に分析できることから、頬部分の色における明度である。   The reference feature amount storage unit 62 stores the determination reference feature amount (determination reference feature amount data) for the user of the user identification information stored in the identification information storage unit 61. The determination criterion feature amount is a predetermined feature amount used for pathological diagnosis, and is the feature amount serving as a determination criterion when analyzing a physical state. The predetermined feature amount is a color (hue, saturation, brightness), shape, contrast, or the like in an image area (user image area) in which a user is captured, which is obtained from an image captured by the imaging unit 3. More specifically, in the present embodiment, the feature amount includes a first feature amount and a second feature amount that is a component of the first feature amount. The first feature amount is, for example, the color of a white eye part (a white part in the eyeball, a conjunctival part). In the first feature amount, the second feature amount can be analyzed suitably for the possibility of jaundice, so it is a blue component (blue component of hue) in the color of the white eye portion, and the possibility of conjunctivitis can be analyzed suitably. Therefore, the red component (the red component of the hue) in the color of the white eye portion. Further, for example, the first feature amount is a color of a black eye portion (an iris and a pupil portion in an eyeball), and in the first feature amount, the second feature amount is at least one of a cataract and a pterygium. And the possibility of retinal hemorrhage, retinitis pigmentosa, retinal choroidal atrophy, retinal choroiditis, optic nerve atrophy and optic neuritis can be suitably analyzed. is there. In addition, for example, the first feature amount is a color of the cheek portion, and in the first feature amount, the second feature amount can appropriately analyze the possibility of kidney disease. is there.

過去身体状態情報記憶部63は、識別情報記憶部61に記憶された使用者識別情報の使用者における、前記過去身体状態情報を記憶するものである。前記過去身体状態情報は、カルテの内容を表す電子カルテ情報、および、前記使用者における、健康診断の結果を表す健康診断結果情報のうちの少なくとも一方の情報(データ)である。より具体的には、前記過去身体状態情報は、例えば、バイタルの測定結果、血液検査結果、通院履歴および既往歴、持病等を含む。なお、本実施形態では、前記過去身体状態情報には、後述のように分析部54で分析した分析結果も含まれる。   The past physical state information storage unit 63 stores the past physical state information for the user of the user identification information stored in the identification information storage unit 61. The past physical condition information is information (data) of at least one of electronic medical chart information representing the contents of a medical chart and health check result information representing a result of a health check for the user. More specifically, the past physical condition information includes, for example, vital measurement results, blood test results, hospital histories and past histories, chronic diseases, and the like. In the present embodiment, the past physical state information includes an analysis result analyzed by the analysis unit 54 as described later.

閾値記憶部64は、識別情報記憶部61に記憶された使用者識別情報の使用者における、前記判定閾値(判定閾値のデータ)を記憶するものである。前記判定閾値は、身体状態の分析に用いる閾値である。本実施形態では、前記第1および第2特徴量、特に第2特徴量によって黄疸の可能性、結膜炎の可能性、白内障および翼状片のうちの少なくともいずれかの可能性、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性、ならびに、腎臓病の可能性それぞれが分析されるので、前記判定閾値は、第1ないし第5判定閾値を含む。前記第1判定閾値は、白目部分の色における青成分に基づいて黄疸の可能性が有るか否かを判定するために用いられる閾値である。白目部分の色における青成分において、分析時特徴量から判定基準特徴量を減算した第1減算結果が所定の第1判定閾値以上のマイナス値である場合に、黄疸の可能性が有ると判定される。前記第2判定閾値は、白目部分の色における赤成分に基づいて結膜炎の可能性が有るか否かを判定するために用いられる閾値である。白目部分の色における赤成分において、分析時特徴量から判定基準特徴量を減算した第2減算結果が所定の第2判定閾値以上のプラス値である場合に、結膜炎の可能性が有ると判定される。前記第3判定閾値は、黒目部分の色における明度に基づいて白内障および翼状片のうちの少なくともいずれかの可能性が有るか否かを判定するために用いられる閾値である。黒目部分の色における明度において、分析時特徴量から判定基準特徴量を減算した第3減算結果が所定の第3判定閾値以上のプラス値である場合に、白内障および翼状片のうちの少なくともいずれかの可能性が有ると判定される。前記第4判定閾値は、黒目部分の色における明度に基づいて網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性が有るか否かを判定するために用いられる閾値である。黒目部分の色における明度において、分析時特徴量から判定基準特徴量を減算した第4減算結果が所定の第4判定閾値以上のマイナス値である場合に、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性の可能性が有ると判定される。前記第5判定閾値は、頬部分の色における明度に基づいて腎臓病の可能性が有るか否かを判定するために用いられる閾値である。頬部分の色における明度において、分析時特徴量から判定基準特徴量を減算した第5減算結果が所定の第5判定閾値以上のマイナス値である場合に、腎臓病の可能性が有ると判定される。これら第1ないし第4判定閾値は、眼球色が相対的に薄い場合、眼球色が相対的に濃い場合および眼球色の違い等の、眼球色における色調の違いに応じた複数の設定値が複数のサンプルから適宜にそれぞれ設定される。すなわち、例えば、第1判定閾値は、眼球色が相対的に薄い場合の第1a判定閾値、眼球色が相対的に濃い場合の第1b判定閾値、眼球色が褐色である場合の第1c判定閾値、および、眼球色が青色である場合の第1d判定閾値等の、複数の閾値から成る。また、第5判定閾値は、肌の色の違い(人種の違い)等に応じた複数の設定値が複数のサンプルから適宜にそれぞれ設定される。すなわち、例えば、第5判定閾値は、白色人種用の第5a判定閾値、黄色人種用の第5b判定閾値および黒人種用の第5c判定閾値等の複数の閾値から成る。   The threshold storage unit 64 stores the determination threshold (determination threshold data) for the user of the user identification information stored in the identification information storage unit 61. The determination threshold value is a threshold value used for analysis of a physical condition. In the present embodiment, the first and second feature quantities, particularly the second feature quantity, may cause jaundice, conjunctivitis, cataract and / or pterygium, retinal hemorrhage, retinal pigment degeneration , Retinal choroid atrophy, retinal choroiditis, optic nerve atrophy and optic neuritis are analyzed, and the possibility of kidney disease is analyzed. Includes a threshold. The first determination threshold value is a threshold value used for determining whether or not there is a possibility of jaundice based on a blue component in the color of the white eye part. When the first subtraction result obtained by subtracting the determination reference feature value from the analysis feature value is a negative value that is equal to or greater than a predetermined first determination threshold value for the blue component in the white-eye color, it is determined that there is a possibility of jaundice. The The second determination threshold is a threshold used for determining whether or not there is a possibility of conjunctivitis based on the red component in the color of the white eye portion. In the red component in the white eye color, it is determined that there is a possibility of conjunctivitis when the second subtraction result obtained by subtracting the determination reference feature amount from the analysis feature amount is a positive value equal to or greater than a predetermined second determination threshold value. The The third determination threshold value is a threshold value used for determining whether or not there is a possibility of at least one of a cataract and a pterygium based on the lightness in the color of the black eye part. When the third subtraction result obtained by subtracting the determination reference feature amount from the analysis feature amount is a positive value equal to or greater than a predetermined third determination threshold value in lightness in the color of the black eye part, at least one of cataract and pterygium It is determined that there is a possibility. Whether the fourth determination threshold value may be at least one of retinal hemorrhage, retinitis pigmentosa, retinal choroiditis, retinal choroiditis, optic atrophy and optic neuritis based on the brightness of the color of the black eye part This is a threshold value used to determine whether or not. When the fourth subtraction result obtained by subtracting the determination reference feature amount from the analysis feature amount is a negative value that is equal to or greater than a predetermined fourth determination threshold value in lightness in the color of the black eye part, retinal bleeding, retinitis pigmentosa, retinal choroid It is determined that there is a possibility of at least one of atrophy, retinal choroiditis, optic atrophy and optic neuritis. The fifth determination threshold value is a threshold value used for determining whether or not there is a possibility of kidney disease based on the lightness in the color of the cheek portion. It is determined that there is a possibility of kidney disease when the fifth subtraction result obtained by subtracting the determination reference feature value from the analysis feature value is a negative value equal to or greater than a predetermined fifth determination threshold value in lightness in the cheek color. The The first to fourth determination threshold values include a plurality of setting values corresponding to differences in color tone of the eyeball color, such as when the eyeball color is relatively light, when the eyeball color is relatively dark, and when the eyeball color is different. Each of these samples is appropriately set. That is, for example, the first determination threshold is the 1a determination threshold when the eyeball color is relatively light, the 1b determination threshold when the eyeball color is relatively dark, and the 1c determination threshold when the eyeball color is brown , And a plurality of threshold values such as a 1d determination threshold value when the eyeball color is blue. In addition, as the fifth determination threshold, a plurality of setting values corresponding to differences in skin color (difference in race) or the like are appropriately set from a plurality of samples. That is, for example, the fifth determination threshold value includes a plurality of threshold values such as a 5a determination threshold value for white race, a 5b determination threshold value for yellow race, and a 5c determination threshold value for black race.

好ましくは、識別情報記憶部61は、1または複数の使用者識別情報を記憶し、基準特徴量記憶部62は、1または複数の判定基準特徴量を前記1または複数の使用者識別情報と対応付けて記憶し、過去身体状態情報記憶部63は、1または複数の過去身体状態情報を前記1または複数の使用者識別情報と対応付けて記憶し、閾値記憶部64は、1または複数の判定閾値(本実施形態では1または複数の第1ないし第5判定閾値)を前記1または複数の使用者識別情報と対応付けて記憶して良い。好ましくは、識別情報記憶部61は、1または複数の使用者識別情報を1または複数の使用者(例えば使用者の名前やID等)に対応付けて記憶し、基準特徴量記憶部62は、1または複数の判定基準特徴量を前記1または複数の使用者と対応付けて記憶し、過去身体状態情報記憶部63は、1または複数の過去身体状態情報を前記1または複数の使用者と対応付けて記憶し、閾値記憶部64は、1または複数の判定閾値(本実施形態では1または複数の第1ないし第5判定閾値)を前記1または複数の使用者と対応付けて記憶して良い。   Preferably, the identification information storage unit 61 stores one or a plurality of user identification information, and the reference feature amount storage unit 62 corresponds one or a plurality of determination reference feature amounts to the one or a plurality of user identification information. The past physical state information storage unit 63 stores one or more past physical state information in association with the one or more user identification information, and the threshold storage unit 64 stores one or more determinations. A threshold value (one or a plurality of first to fifth determination threshold values in the present embodiment) may be stored in association with the one or more user identification information. Preferably, the identification information storage unit 61 stores one or a plurality of user identification information in association with one or a plurality of users (for example, user names and IDs), and the reference feature quantity storage unit 62 One or more determination criterion feature quantities are stored in association with the one or more users, and the past physical state information storage unit 63 associates the one or more past physical state information with the one or more users. The threshold value storage unit 64 may store one or more determination threshold values (in this embodiment, one or more first to fifth determination threshold values) in association with the one or more users. .

本実施形態では、これら使用者識別情報、判定基準特徴量、過去身体状態情報および判定閾値(本実施形態では1または複数の第1ないし第5判定閾値)は、1つのテーブルに纏めて記憶され、これら識別情報記憶部61、基準特徴量記憶部62、過去身体状態情報記憶部63および閾値記憶部64は、互いに兼用されている。これら使用者識別情報、判定基準特徴量、過去身体状態情報および判定閾値(本実施形態では1または複数の第1ないし第5判定閾値)を登録するベース情報テーブルTBは、例えば、図3に示すように、使用者識別情報を登録する使用者識別情報フィールド621と、使用者識別情報フィールド621に登録された使用者識別情報の使用者における判定基準特徴量を登録する判定基準特徴量フィールド622と、使用者識別情報フィールド621に登録された使用者識別情報の使用者における過去身体状態情報を登録する過去身体状態情報フィールド623と、使用者識別情報フィールド621に登録された使用者識別情報の使用者における判定閾値を登録する判定閾値フィールド624とを備え、使用者識別情報ごとにレコードを備える。そして、本実施形態では、図3に示すように、ベース情報テーブルTBは、使用者識別情報フィールド621に登録された使用者識別情報の使用者における名前(使用者名、ID)および基本属性情報それぞれを登録する使用者名フィールド611および基本属性情報フィールド612をさらに備える。   In the present embodiment, the user identification information, the determination reference feature amount, the past physical condition information, and the determination threshold value (one or a plurality of first to fifth determination threshold values in the present embodiment) are collectively stored in one table. The identification information storage unit 61, the reference feature amount storage unit 62, the past physical condition information storage unit 63, and the threshold value storage unit 64 are also used as one another. The base information table TB for registering the user identification information, the determination reference feature amount, the past physical condition information, and the determination threshold value (one or a plurality of first to fifth determination threshold values in this embodiment) is, for example, shown in FIG. As described above, a user identification information field 621 for registering user identification information, a criterion characteristic amount field 622 for registering a criterion characteristic amount for the user of the user identification information registered in the user identification information field 621, and The past physical state information field 623 for registering the past physical state information of the user of the user identification information registered in the user identification information field 621 and the use of the user identification information registered in the user identification information field 621 And a determination threshold field 624 for registering a determination threshold for the user, and a record for each user identification information.In this embodiment, as shown in FIG. 3, the base information table TB includes the user identification information registered in the user identification information field 621 in the user name (user name, ID) and basic attribute information. A user name field 611 and a basic attribute information field 612 for registering each are further provided.

判定基準特徴量フィールド622には、本実施形態では、白目部分の色における青成分に基づいて黄疸の可能性を判定する際に用いられる、黄疸用の第1判定基準特徴量、白目部分の色における赤成分に基づいて結膜炎の可能性を判定する際に用いられる、結膜炎用の第2判定基準特徴量、黒目部分の色における明度に基づいて白内障および翼状片のうちの少なくともいずれかの可能性を判定する際に用いられる、白内障、翼状片用の第3判定基準特徴量、黒目部分の色における明度に基づいて網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性をを判定する際に用いられる、網膜出血等用の第4判定基準特徴量、ならびに、頬部分の色における明度に基づいて腎臓病の可能性を判定する際に用いられる、腎臓病用の第5判定基準特徴量が登録される。判定閾値フィールド624には、本実施形態では、第1ないし第5判定閾値が登録される。基本属性情報フィールド612には、前記基本属性情報として、使用者の性別、生年月日(年齢)、眼球色の色調、肌の色等が登録される。   In the determination criterion feature value field 622, in the present embodiment, the first determination criterion feature value for jaundice, which is used when determining the possibility of jaundice based on the blue component in the color of the white eye portion, the color of the white eye portion. The second criterion feature value for conjunctivitis used when determining the possibility of conjunctivitis based on the red component in the eye, the possibility of at least one of cataract and pterygium based on the brightness in the color of the black eye part Retinal hemorrhage, retinitis pigmentosa, retinal choroiditis, retinal choroiditis, optic nerve atrophy, and optic nerve Based on the fourth criterion feature value for retinal hemorrhage and the like used in determining the possibility of at least one of the flames and the lightness in the color of the cheek portion Used in determining the likelihood of, the fifth criterion characteristic quantity for kidney disease is registered. In the determination threshold field 624, in the present embodiment, first to fifth determination thresholds are registered. In the basic attribute information field 612, the user's sex, date of birth (age), eye color tone, skin color, and the like are registered as the basic attribute information.

これら使用者名、基本属性情報、過去身体状態情報は、例えば、図4に示すように、身体状態分析装置Dに通信可能に接続された、ユーザインターフェースとしての端末装置(例えばパーソナルコンピュータやスマートホン等)PCから、使用者Obが身体状態分析装置Dの使用を開始する際等の適宜なタイミングで入力され、新たなレコードが生成され、この新たに生成されたレコードにおける使用者名フィールド611、基本属性情報フィールド612および過去身体状態情報フィールド623に登録される。このタイミングで、例えば、端末装置PCによって、使用者Obがミラー1の前に居るように促され、撮像部3で使用者Obの画像が生成される。この生成された使用者Obの画像から背景差分法によって人物領域が抽出される。この人物領域から、例えば円形や楕円形のハフ変換によって、また例えば予め用意された頭部のモデル(テンプレート)を用いたパターンマッチングによって、また例えば頭部検出用に学習したニューラルネットワークによって、使用者Obの頭部領域の画像が顔画像として抽出される。この抽出された顔画像が使用者識別情報とされ、この使用者識別情報(顔画像)が前記新たに生成されたレコードにおける使用者識別情報フィールド621に登録される。そして、前記入力され登録された基本属性情報における眼球色の色調に応じた第1ないし第4判定閾値が前記新たに生成された判定閾値フィールド624に登録され、前記入力され登録された基本属性情報における肌の色に応じた第5判定閾値が前記新たに生成された判定閾値フィールド624に登録される。なお、過去身体状態情報は、例えば、図4に示すように、身体状態分析装置Dに通信可能に接続された、例えば病院HS等に配設された、電子カルテを管理するサーバ装置SVから、使用者名を検索キーに検索され、ダウンロードされ、過去身体状態情報フィールド623に登録されても良い。このように各情報が登録された後に、例えば、1週間や、2週間や、1カ月等の所定の準備期間中に、使用者がミラー1の前に居ると、その都度、制御処理部5によって、撮像部3で画像が生成され、この生成された画像に基づいて前記所定の特徴量が求められ、記憶部6に使用者識別情報あるいは使用者名と対応付けて蓄積される。前記所定の特徴量を求める際に、後述の、分析時特徴量を求める際に実施される色ズレの補正と同様に前記色ズレが補正される。前記所定の準備期間が経過すると、これら求められた複数の前記所定の特徴量の平均値が判定基準特徴量として求められ、前記使用者識別情報を使用者識別情報フィールド621に登録するレコード、あるいは、前記使用者名を使用者名フィールド611に登録するレコードにおける判定基準特徴量フィールド622に登録される。一例では、このように各情報(データ)がベース情報テーブルTBの各フィールド611、612、621〜624に登録される。   These user name, basic attribute information, and past physical condition information are, for example, as shown in FIG. 4, a terminal device as a user interface (for example, a personal computer or a smart phone) connected to the physical condition analysis device D so as to be communicable. Etc.) A new record is generated from the PC at an appropriate timing such as when the user Ob starts using the physical condition analyzer D, and a user name field 611 in the newly generated record is generated. The basic attribute information field 612 and the past physical condition information field 623 are registered. At this timing, for example, the terminal device PC prompts the user Ob to be in front of the mirror 1, and the imaging unit 3 generates an image of the user Ob. A person area is extracted from the generated image of the user Ob by the background subtraction method. From this person region, for example, by circular or elliptical Hough transform, by pattern matching using a head model (template) prepared in advance, for example, by a neural network learned for head detection, etc. An image of the head region of Ob is extracted as a face image. This extracted face image is used as user identification information, and this user identification information (face image) is registered in the user identification information field 621 in the newly generated record. Then, first to fourth determination thresholds corresponding to the color tone of the eyeball color in the input and registered basic attribute information are registered in the newly generated determination threshold field 624, and the input and registered basic attribute information The fifth determination threshold value corresponding to the skin color is registered in the newly generated determination threshold value field 624. For example, as shown in FIG. 4, the past physical condition information is obtained from a server apparatus SV that manages an electronic medical record, for example, disposed in a hospital HS or the like, which is connected to the physical condition analysis apparatus D. The user name may be searched for using a search key, downloaded, and registered in the past physical condition information field 623. After each information is registered in this way, for example, when the user is in front of the mirror 1 during a predetermined preparation period such as one week, two weeks, or one month, the control processing unit 5 Thus, an image is generated by the imaging unit 3, the predetermined feature amount is obtained based on the generated image, and stored in the storage unit 6 in association with the user identification information or the user name. When obtaining the predetermined feature amount, the color misregistration is corrected in the same manner as the color misalignment correction performed when obtaining the analysis feature amount, which will be described later. When the predetermined preparation period elapses, an average value of the determined plurality of the predetermined feature amounts is obtained as a determination reference feature amount, and the record for registering the user identification information in the user identification information field 621, or The user name is registered in the determination criterion feature field 622 in the record in which the user name field 611 is registered. In one example, each piece of information (data) is registered in each field 611, 612, 621 to 624 of the base information table TB in this way.

図1に戻って、正常範囲記憶部65は、正常範囲(正常範囲のデータ)を記憶するものである。前記正常範囲は、身体状態が正常であるか否かを判定するために用いられ、前記身体状態が正常である範囲である。本実施形態では、前記身体状態が正常であるか否かの判定は、分析時特徴量の第1特徴量によって実施される。このため、正常範囲は、白目部分の色が正常である範囲を表す第1正常範囲、黒目部分の色が正常である範囲を表す第2正常範囲、および、頬部分の色が正常である範囲を表す第3正常範囲から成る。これら第1ないし第3正常範囲は、それぞれ、複数のサンプルを用いて適宜に設定され、正常範囲記憶部65にデフォルト値として記憶される。後述するように、これら第1ないし第3正常範囲は、それぞれ、このデフォルト値を基準に、正常範囲調整部56によって、過去身体状態情報に基づいて調整される。   Returning to FIG. 1, the normal range storage unit 65 stores a normal range (normal range data). The normal range is used to determine whether or not the physical condition is normal, and is a range in which the physical condition is normal. In the present embodiment, the determination as to whether or not the physical condition is normal is performed based on the first feature amount of the analysis feature amount. For this reason, the normal range includes a first normal range representing a range in which the color of the white eye portion is normal, a second normal range representing a range in which the color of the black eye portion is normal, and a range in which the color of the cheek portion is normal. It consists of the 3rd normal range which represents. Each of the first to third normal ranges is appropriately set using a plurality of samples, and is stored as a default value in the normal range storage unit 65. As will be described later, each of the first to third normal ranges is adjusted based on the past physical condition information by the normal range adjustment unit 56 based on the default value.

基準色記憶部66は、前記基準色(基準色のデータ)を記憶するものである。前記基準色は、分析時特徴量を求める際に実施される色ズレの補正を実行する場合に、その基準となる色であり、例えば、赤成分を補正する赤用の基準値、緑成分を補正する緑用の基準値、および、青成分を補正する青用の基準値を備えて成る。例えば、身体状態分析装置Dの初期設定の際に、制御処理部5によって、照明部2(2−1、2−2)を点灯して撮像部3で得られた分析対象画像における色補正用領域の色が前記基準色として求められ、基準色記憶部66に記憶される。前記色補正用領域は、分析対象画像における人物が写り込んでない背景部分を写し込んだ画像の領域であり、例えば、通常、人物が写り込まないと考えられる、分析対象画像における上部右端に位置する所定の小領域、その上部中央に位置する所定の小領域、および、その上部左端に位置する所定の小領域等である。   The reference color storage unit 66 stores the reference color (reference color data). The reference color is a color that serves as a reference when correcting the color misalignment that is performed when obtaining the analysis feature amount. For example, the reference value for red that corrects the red component, the green component The reference value for green to be corrected and the reference value for blue to correct the blue component are provided. For example, at the time of initial setting of the body condition analyzer D, the control processing unit 5 turns on the illumination unit 2 (2-1, 2-2) and performs color correction in the analysis target image obtained by the imaging unit 3. The color of the area is obtained as the reference color and stored in the reference color storage unit 66. The color correction region is a region of an image in which a background portion in which a person in the analysis target image is not reflected is captured, and is usually located at the upper right end in the analysis target image, which is considered not to include a person, for example. These are a predetermined small area, a predetermined small area located at the upper center of the predetermined small area, a predetermined small area located at the upper left end thereof, and the like.

制御処理部5は、身体状態分析装置Dの各部2〜4、6、7を当該各部の機能に応じてそれぞれ制御し、身体状態を分析するための回路である。制御処理部5は、例えば、CPU(Central Processing Unit)およびその周辺回路を備えて構成される。制御処理部5には、制御処理プログラムが実行されることによって、制御部51、使用者判定部52、特徴量処理部53、分析部54、識別情報更新部55および正常範囲調整部56が機能的に構成される。   The control processing unit 5 is a circuit for controlling the units 2 to 4, 6, and 7 of the body condition analyzer D according to the function of each unit and analyzing the body state. The control processing unit 5 includes, for example, a CPU (Central Processing Unit) and its peripheral circuits. The control processing unit 5 functions as a control unit 51, a user determination unit 52, a feature amount processing unit 53, an analysis unit 54, an identification information update unit 55, and a normal range adjustment unit 56 by executing a control processing program. Configured.

制御部51は、身体状態分析装置Dの各部2〜4、6、7を当該各部の機能に応じてそれぞれ制御し、身体状態分析装置Dの全体制御を司るものである。   The control unit 51 controls each part 2 to 4, 6, and 7 of the body condition analyzer D according to the function of each part, and governs overall control of the body condition analyzer D.

使用者判定部52は、撮像部3で撮像した分析対象画像に基づいて識別情報記憶部61に記憶された使用者識別情報の使用者か否かを判定するものである。本実施形態では、前記使用者識別情報は、上述したように、顔画像(顔画像のデータ)であり、使用者判定部52は、公知の顔認証技術によって、撮像部3で撮像した分析対象画像に基づいて識別情報記憶部61に記憶された使用者識別情報の使用者か否かを判定する。顔認証技術は、例えば、今岡仁、他、「顔認証技術とその応用」、NEC技法、Vol63 No.3、2010年(平成29年3月29日検索、インターネット、<URL:http//jpn.nec.com/techrep/journal/g10/n03/pdf/100306.pdf>等に開示されている。この顔認証技術は、画像から顔領域の画像(顔画像)を抽出し、この抽出した顔画像から、例えば目、鼻、口端等の顔の特徴点を検出して顔の特徴点位置を求める検出処理と、この検出処理で求めた顔の特徴点位置を用いて前記顔画像の位置、大きさを正規化して照合画像を生成した後に、この照合画像と、予め登録された登録画像(本実施形態では使用者識別情報がこれに相当する)との類似度を求めて照合する照合処理とを備える。   The user determination unit 52 determines whether or not the user is the user of the user identification information stored in the identification information storage unit 61 based on the analysis target image captured by the imaging unit 3. In the present embodiment, as described above, the user identification information is a face image (face image data), and the user determination unit 52 analyzes the image to be analyzed by the imaging unit 3 using a known face authentication technique. It is determined whether or not the user is the user of the user identification information stored in the identification information storage unit 61 based on the image. Face authentication technology is disclosed in, for example, Hitoshi Imaoka, et al., “Face Authentication Technology and its Applications”, NEC Technique, Vol 63 No. 3, 2010 (searched on March 29, 2017, Internet, <URL: http://jpn.nec.com/techrep/journal/g10/n03/pdf/100306.pdf>). The face authentication technique extracts a face area image (face image) from an image, detects face feature points such as eyes, nose, and mouth edge from the extracted face image to obtain a face feature point position. After generating a collation image by normalizing the position and size of the face image using the detection process and the feature point position of the face obtained in this detection process, the collation image and a registered image (this In the embodiment, it is provided with a collation process for obtaining and collating the degree of similarity with the user identification information.

特徴量処理部53は、撮像部3で撮像した分析対象画像から、病理診断に用いる前記所定の特徴量を分析時特徴量として求めるものである。この分析時特徴量を求める際に、本実施形態では、特徴量処理部53は、撮像部3で撮像した分析対象画像から前記特徴量を求め、この求めた前記特徴量を、基準色記憶部66に記憶された基準色に基づいて補正した補正特徴量を前記分析時特徴量として求める。   The feature amount processing unit 53 obtains the predetermined feature amount used for pathological diagnosis from the analysis target image captured by the image capturing unit 3 as an analysis feature amount. In this embodiment, when obtaining the analysis feature quantity, the feature quantity processing unit 53 obtains the feature quantity from the analysis target image imaged by the imaging unit 3, and uses the obtained feature quantity as a reference color storage unit. A corrected feature amount corrected based on the reference color stored in 66 is obtained as the analysis feature amount.

分析部54は、使用者判定部52で識別情報記憶部61に記憶された使用者識別情報の使用者であると判定された場合に、使用者判定部52で判定された使用者識別情報の使用者における、基準特徴量記憶部62に記憶された判定基準特徴量と、特徴量処理部53で求めた分析時特徴量とに基づいて、身体状態を分析するものである。より具体的には、分析部54は、基準特徴量記憶部62に記憶された判定基準特徴量と、特徴量処理部53で求めた分析時特徴量との差を求め、この求めた差と、使用者判定部52で判定された使用者識別情報の使用者における、閾値記憶部64に記憶された判定閾値と、を比較することによって、身体状態を分析する。また、分析部54は、特徴量処理部53で求めた分析時特徴量が所定の正常範囲内であるか否かを判定することによって、身体状態が正常であるか否かを判定する。より詳しくは、本実施形態では、分析部54は、特徴量処理部53で求めた第1分析時特徴量(第1特徴量の分析時特徴量)が所定の正常範囲内であるか否かを判定することによって、身体状態が正常であるか否かを判定し、分析部54は、前記正常範囲内ではないと判定した場合に、基準特徴量記憶部62に記憶された判定基準特徴量と、特徴量処理部53で求めた第2分析時特徴量(第2特徴量の分析時特徴量)との差を求め、この求めた差と、使用者判定部52で判定された使用者識別情報の使用者における、閾値記憶部64に記憶された判定閾値と、を比較することによって、身体状態を分析する。   The analysis unit 54 determines the user identification information determined by the user determination unit 52 when the user determination unit 52 determines that the user is the user of the user identification information stored in the identification information storage unit 61. Based on the determination criterion feature quantity stored in the reference feature quantity storage unit 62 and the analysis feature quantity obtained by the feature quantity processing unit 53 of the user, the body state is analyzed. More specifically, the analysis unit 54 obtains a difference between the determination reference feature quantity stored in the reference feature quantity storage unit 62 and the analysis feature quantity obtained by the feature quantity processing unit 53, and the obtained difference The body condition is analyzed by comparing the determination threshold value stored in the threshold value storage unit 64 for the user of the user identification information determined by the user determination unit 52. Further, the analysis unit 54 determines whether or not the physical condition is normal by determining whether or not the analysis-time feature value obtained by the feature value processing unit 53 is within a predetermined normal range. More specifically, in the present embodiment, the analysis unit 54 determines whether or not the first analysis feature amount (the first feature amount analysis feature amount) obtained by the feature amount processing unit 53 is within a predetermined normal range. By determining whether or not the physical condition is normal, and the analysis unit 54 determines that the physical condition is not within the normal range, the determination reference feature amount stored in the reference feature amount storage unit 62 And the second analysis feature amount obtained by the feature amount processing unit 53 (analysis feature amount of the second feature amount), and the obtained difference and the user determined by the user determination unit 52 The physical condition is analyzed by comparing the determination threshold stored in the threshold storage unit 64 with the user of the identification information.

識別情報更新部55は、使用者判定部52で識別情報記憶部61に記憶された使用者識別情報の使用者であると判定された場合に、使用者判定部52で判定された使用者識別情報の使用者における、識別情報記憶部61に記憶されている使用者識別情報を、撮像部3で撮像した分析対象画像に基づいて更新して識別情報記憶部61に記憶するものである。   The identification information update unit 55 determines the user identification determined by the user determination unit 52 when the user determination unit 52 determines that the user is the user of the user identification information stored in the identification information storage unit 61. The user identification information stored in the identification information storage unit 61 for the information user is updated based on the analysis target image captured by the imaging unit 3 and stored in the identification information storage unit 61.

正常範囲調整部56は、使用者判定部52で判定された使用者識別情報の使用者における、過去身体状態情報記憶部63に記憶された過去身体状態情報に基づいて、正常範囲記憶部に記憶された正常範囲を調整するものである。   The normal range adjustment unit 56 stores in the normal range storage unit based on the past physical state information stored in the past physical state information storage unit 63 for the user of the user identification information determined by the user determination unit 52. The normal range is adjusted.

次に、本実施形態の動作について説明する。図5は、前記身体状態分析装置の動作を示すフローチャートである。図6は、図5に示すフローチャートにおける使用者の識別処理における各処理を示すフローチャートである。図7は、図6に示すフローチャートにおける使用者の過去身体状態情報の諸処理における各処理を示すフローチャートである。図8は、図5に示すフローチャートにおける特徴量の抽出処理における各処理を示すフローチャートである。図9は、図5に示すフローチャートの分析処理において、黒目部分に基づく分析処理の各処理を示すフローチャートである。図10は、図5に示すフローチャートの分析処理において、白目部分に基づく分析処理の各処理を示すフローチャートである。図11は、図5に示すフローチャートの分析処理において、頬部分に基づく分析処理の各処理を示すフローチャートである。図12は、図5に示すフローチャートにおける分析結果の処理における各処理を示すフローチャートである。   Next, the operation of this embodiment will be described. FIG. 5 is a flowchart showing the operation of the physical condition analyzer. FIG. 6 is a flowchart showing each process in the user identification process in the flowchart shown in FIG. FIG. 7 is a flowchart showing each process in the various processes of the user's past physical condition information in the flowchart shown in FIG. FIG. 8 is a flowchart showing each process in the feature amount extraction process in the flowchart shown in FIG. FIG. 9 is a flowchart showing each process of the analysis process based on the black eye part in the analysis process of the flowchart shown in FIG. FIG. 10 is a flowchart showing each process of the analysis process based on the white-eye portion in the analysis process of the flowchart shown in FIG. FIG. 11 is a flowchart showing each process of the analysis process based on the cheek portion in the analysis process of the flowchart shown in FIG. FIG. 12 is a flowchart showing each process in the analysis result process in the flowchart shown in FIG.

上記構成の身体状態分析装置Dでは、図略の電源スイッチのオン操作によって電源が投入されると、必要な各部の初期化を実行し、その稼働を始める。その制御処理プログラムの実行によって、制御処理部5には、制御部51、使用者判定部52、特徴量処理部53、分析部54および識別情報更新部55が機能的に構成される。初期設定では、制御処理部5は、照明部2(2−1、2−2)を点灯し、撮像部3によって背景画像を生成し、この背景画像の色補正用領域からその色を基準色として求め、この求めた基準色を記憶部6の基準色記憶部66に記憶する。   In the body condition analysis apparatus D having the above-described configuration, when power is turned on by turning on a power switch (not shown), necessary parts are initialized and started to operate. By executing the control processing program, the control processing unit 5 is functionally configured with a control unit 51, a user determination unit 52, a feature amount processing unit 53, an analysis unit 54, and an identification information update unit 55. In the initial setting, the control processing unit 5 turns on the illumination unit 2 (2-1, 2-2), generates a background image by the imaging unit 3, and sets the color from the color correction area of the background image as a reference color. And the obtained reference color is stored in the reference color storage unit 66 of the storage unit 6.

そして、一例では、上述したように、使用者Obは、身体状態分析装置Dと通信可能に端末装置PCを身体状態分析装置Dに接続し、この端末装置Dから、使用者名、基本属性情報および過去身体状態情報を入力し、端末装置PCに表示されるメッセージに促されてミラー1の前に立つと、撮像部3によって使用者Obの画像が生成され、この使用者Obの画像から顔画像が使用者識別情報として抽出される。そして、この入力された基本属性情報における眼球色の色調に応じた第1ないし第4判定閾値が設定され、肌の色に応じた第5判定閾値が設定される。これら使用者識別情報、過去身体状態情報および判定閾値それぞれは、記憶部6における識別情報記憶部61、過去身体状態情報記憶部63および閾値記憶部64それぞれに記憶される。本実施形態では、これら使用者名、基本属性情報、使用者識別情報、過去身体状態情報および判定閾値それぞれは、ベース情報テーブルTBに新たに生成されたレコードの各フィールド611、612、621、623、624に登録され、記憶部6に記憶される。なお、必要に応じて、過去身体状態情報は、電子カルテを管理するサーバ装置SVから、使用者名を検索キーに検索され、ダウンロードされ、記憶部6に記憶されても良い。そして、準備期間に求められた複数の前記所定の特徴量から、判定基準特徴量が求められ、この求めた判定基準特徴量が基準特徴量記憶部62に、本実施形態では、ベース情報テーブルTBの判定基準特徴量フィールド622に登録され、記憶部6に記憶される。   In one example, as described above, the user Ob connects the terminal device PC to the physical condition analyzer D so as to be communicable with the physical condition analyzer D. From the terminal device D, the user name and basic attribute information are connected. When the user is input in the past physical condition information and is prompted by a message displayed on the terminal device PC and stands in front of the mirror 1, an image of the user Ob is generated by the imaging unit 3, and the face of the user Ob is generated from the image of the user Ob. An image is extracted as user identification information. Then, first to fourth determination threshold values are set according to the color tone of the eyeball color in the input basic attribute information, and a fifth determination threshold value is set according to the skin color. These user identification information, past physical condition information, and determination threshold value are stored in the identification information storage unit 61, the past physical condition information storage unit 63, and the threshold storage unit 64 in the storage unit 6, respectively. In the present embodiment, the user name, basic attribute information, user identification information, past physical condition information, and determination threshold value are the fields 611, 612, 621, and 623 of the newly generated record in the base information table TB. , 624 and stored in the storage unit 6. If necessary, the past physical state information may be downloaded from the server device SV that manages the electronic medical record using the user name as a search key, downloaded, and stored in the storage unit 6. Then, a determination reference feature value is obtained from the plurality of predetermined feature values obtained during the preparation period, and the obtained determination reference feature value is stored in the reference feature value storage unit 62, in this embodiment, the base information table TB. Are registered in the determination criterion feature quantity field 622 and stored in the storage unit 6.

このように使用者Obにカスタマイズされた各情報が記憶部6に記憶されると、身体状態の分析が開始され、次のような動作によって、使用者Obの身体状態が日々のミラー1の自然な使用の際に、自動的に実施される。なお、身体状態分析装置Dは、電子カルテを管理する上述のサーバ装置SVと通信可能であるものとする。   When each piece of information customized for the user Ob is stored in the storage unit 6, an analysis of the physical state is started, and the physical state of the user Ob is changed to the natural state of the daily mirror 1 by the following operation. This is automatically done when using it. It is assumed that the body condition analysis device D can communicate with the above-described server device SV that manages the electronic medical record.

使用者Obがミラー1の前に行くと、例えば焦電式等の図略の人感センサによって使用者Obを検出すると、図5において、身体状態分析装置Dは、制御処理部5の制御部51によって、第1および第2照明部2−1、2−2を点灯する(S1)。   When the user Ob goes in front of the mirror 1, for example, when the user Ob is detected by an unillustrated human sensor such as a pyroelectric type, the body state analyzer D in FIG. 51, the 1st and 2nd illumination parts 2-1 and 2-2 are lighted (S1).

次に、身体状態分析装置Dは、制御処理部5の制御部51によって、分析対象画像の取得処理を実行する(S3)。より具体的には、制御部51は、撮像部3で撮像して画像を分析対象画像として生成する。これによって分析対象画像が取得される。第1および第2照明部2−1、2−2は、ミラー1の上方両端から使用者Obを照明するので、撮像部3で撮像した分析対象画像に写り込んだ使用者Obの画像には、影ができ難く、いつも同じ照明環境の安定した撮影環境で分析対象画像が生成できる。本実施形態では、色の変化によって病気の可能性を判定(病理診断)するので、このような安定した撮影環境は、好ましい。   Next, the body condition analyzer D performs an analysis target image acquisition process by the control unit 51 of the control processing unit 5 (S3). More specifically, the control unit 51 captures an image with the imaging unit 3 and generates an image as an analysis target image. As a result, an analysis target image is acquired. Since the first and second illumination units 2-1 and 2-2 illuminate the user Ob from both upper ends of the mirror 1, the image of the user Ob reflected in the analysis target image captured by the imaging unit 3 The image to be analyzed can be generated in a stable shooting environment with the same lighting environment that is difficult to shadow. In the present embodiment, since the possibility of illness is determined (pathological diagnosis) based on the color change, such a stable imaging environment is preferable.

次に、身体状態分析装置Dは、制御処理部5の使用者判定部52によって、使用者の認証処理を実行する。   Next, the body condition analysis apparatus D performs a user authentication process by the user determination unit 52 of the control processing unit 5.

より具体的には、図6において、使用者判定部52は、処理S3において撮像部3で撮像して取得した分析対象画像に基づいて公知の顔認証技術によって顔認証の処理(S501)を実行し、前記分析対象画像の使用者Obが識別情報記憶部61に記憶された使用者識別情報の使用者か否かを判定する(S502)。より詳しくは、使用者判定部52は、まず、処理S3において撮像部3で撮像して取得した分析対象画像から顔領域の画像(顔画像)を抽出する。次に、使用者判定部52は、この抽出した顔画像から、例えば目、鼻、両口端の各特徴点位置を求める。次に、使用者判定部52は、この求めた顔の各特徴点位置を用いて顔画像の位置および大きさを正規化して照合画像を生成する。そして、使用者判定部52は、この照合画像と、ベース情報テーブルTBにおける使用者識別情報フィールド621に登録されている使用者識別情報(登録画像)と照合し、前記照合画像にマッチ(一致)する使用者識別情報(登録画像)が存在するか否かを判定する。この判定の結果、前記照合画像にマッチ(一致)する使用者識別情報(登録画像)が存在しない場合(No)には、身体状態分析装置Dは、次に、制御処理部5によって、処理S503を実行する。一方、前記判定の結果、前記照合画像に一致する使用者識別情報(登録画像)が存在する場合(Yes)には、身体状態分析装置Dは、次に、制御処理部5によって、処理S504を実行する。   More specifically, in FIG. 6, the user determination unit 52 executes face authentication processing (S501) using a known face authentication technique based on the analysis target image captured and acquired by the imaging unit 3 in step S3. Then, it is determined whether or not the user Ob of the analysis target image is a user of the user identification information stored in the identification information storage unit 61 (S502). More specifically, the user determination unit 52 first extracts a face area image (face image) from the analysis target image captured and acquired by the imaging unit 3 in step S3. Next, the user determination unit 52 obtains the feature point positions of, for example, eyes, nose, and both mouth ends from the extracted face image. Next, the user determining unit 52 normalizes the position and size of the face image using the obtained feature point positions of the face, and generates a collation image. Then, the user determination unit 52 compares the collation image with the user identification information (registered image) registered in the user identification information field 621 in the base information table TB, and matches (matches) the collation image. It is determined whether or not user identification information (registered image) to be present exists. As a result of this determination, when there is no user identification information (registered image) that matches the matching image (No), the body condition analyzer D then performs a process S503 by the control processing unit 5. Execute. On the other hand, if there is user identification information (registered image) that matches the collation image as a result of the determination (Yes), the body condition analyzer D next performs the process S504 by the control processing unit 5. Run.

この処理S503では、身体状態分析装置Dは、制御処理部5によって、後述の処理S7で分析部54によって用いられる値として、一般用の第1ないし第5判定閾値を記憶部6から読み出して取得し、次に、処理S6を実行する。この一般用の第1ないし第5判定閾値は、複数のサンプルに基づいて予め適宜に設定されて用意され、前記各種の所定のデータの一つとして予め記憶部6に記憶される。   In this process S503, the physical condition analyzer D reads out and acquires the first to fifth determination threshold values for general use from the storage unit 6 as values used by the analysis unit 54 in the later-described process S7 by the control processing unit 5. Then, step S6 is executed. The first to fifth determination threshold values for general use are appropriately set and prepared in advance based on a plurality of samples, and are stored in the storage unit 6 in advance as one of the various predetermined data.

前記処理S504では、身体状態分析装置Dは、制御処理部5の識別情報更新部55によって、処理S502で前記照合画像に一致すると判定された、ベース情報テーブルTBの使用者識別情報フィールド621に登録されている使用者識別情報(登録画像)を、処理S3において撮像部3で撮像して取得した分析対象画像に基づいて更新し、次に、処理S505を実行した後に、処理S6を実行する。   In the process S504, the physical condition analyzer D is registered in the user identification information field 621 of the base information table TB determined by the identification information update unit 55 of the control processing unit 5 to match the collation image in the process S502. The user identification information (registered image) that has been updated is updated based on the analysis target image captured and acquired by the imaging unit 3 in the process S3. Next, after the process S505 is performed, the process S6 is performed.

この処理S505では、身体状態分析装置Dは、制御処理部5によって、使用者の過去身体状態情報の諸処理を実行し、次に、処理S6を実行する。   In this process S505, the physical condition analyzer D performs various processes of the user's past physical condition information by the control processing unit 5, and then executes a process S6.

より具体的には、使用者の過去身体状態情報の諸処理S505は、本実施形態では、例えば、図7に示す各処理が実行される。   More specifically, various processes shown in FIG. 7 are performed as various processes S505 of the user's past physical condition information in the present embodiment, for example.

図7において、次に、身体状態分析装置Dは、制御処理部5によって、処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、使用者名フィールド611、過去身体状態情報フィールド623および判定閾値フィールド624それぞれに登録されている、使用者名、過去身体状態情報および第1ないし第5判定閾値を記憶部6から読み出して取得する(S551)。   In FIG. 7, next, the physical condition analyzer D uses the user identification information (registered image) determined by the control processing unit 5 to match the collation image in step S502 as the user identification information in the base information table TB. Stores the user name, past physical condition information, and first to fifth determination threshold values registered in the user name field 611, the past physical condition information field 623, and the determination threshold value field 624, respectively, in the record registered in the field 621. The data is read from the unit 6 and acquired (S551).

次に、身体状態分析装置Dは、制御処理部5によって、電子カルテを管理するサーバ装置SVから、処理S551で取得した使用者名を検索キーに検索し、使用者の電子カルテをダウンロードし、取得する(S552)。   Next, the physical condition analysis device D searches the user name acquired in the process S551 from the server device SV that manages the electronic medical record using the search key by the control processing unit 5, and downloads the user's electronic medical record, Obtain (S552).

次に、身体状態分析装置Dは、制御処理部5によって、電子カルテが更新されているか否かを判定する(S553)。より具体的には、制御処理部5は、処理S551で取得した過去身体状態情報と処理S552で取得した電子カルテとを比較することによって、電子カルテが更新されているか否かを判定する。この判定の結果、制御処理部5は、両者に相違がなければ、電子カルテが更新されていないと判定し(No)、次に、処理S557を実行する。一方、前記判定の結果、制御処理部5は、両者に相違があれば、電子カルテが更新されていると判定し(Yes)、前記処理S552で取得した電子カルテの内容で、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける過去身体状態情報フィールド623に登録されている過去身体状態情報を更新、登録し、次に、処理S554を実行する。   Next, the body condition analyzer D determines whether or not the electronic medical record has been updated by the control processing unit 5 (S553). More specifically, the control processing unit 5 determines whether or not the electronic medical record has been updated by comparing the past physical condition information acquired in step S551 with the electronic medical record acquired in step S552. If the result of this determination is that there is no difference between them, the control processing unit 5 determines that the electronic medical record has not been updated (No), and then executes step S557. On the other hand, as a result of the determination, if there is a difference between the two, the control processing unit 5 determines that the electronic medical record has been updated (Yes), and the content of the electronic medical record acquired in the processing S552 is the processing S502. The past physical state information registered in the past physical state information field 623 in the record for registering the user identification information (registered image) determined to match the collation image in the user identification information field 621 of the base information table TB. Update and register, and then execute step S554.

この処理S554では、身体状態分析装置Dは、制御処理部5によって、治療中の病気は、何かを判定する。この判定の結果、治療中の病気が無い場合(No)には、制御処理部5は、次に、処理S555を実行し、一方、前記判定の結果、治療中の病気が有る場合(Yes)には、制御処理部5は、次に、処理S556を実行する。   In this process S554, the body condition analyzer D determines what the disease under treatment is by the control processing unit 5. If there is no disease under treatment as a result of this determination (No), the control processing unit 5 next executes step S555. On the other hand, as a result of the determination, there is a disease under treatment (Yes). Then, the control processing unit 5 next executes a process S556.

この処理S555では、治療中の病気がないので、制御処理部5は、記憶部6の正常範囲記憶部65に記憶されている正常範囲を読み込み、このデフォルト値で正常範囲を設定し、次に、処理S6を実行する。   In this process S555, since there is no disease under treatment, the control processing unit 5 reads the normal range stored in the normal range storage unit 65 of the storage unit 6, sets the normal range with this default value, and then Then, process S6 is executed.

この処理S556では、制御処理部5は、正常範囲調整部56によって、記憶部6の正常範囲記憶部65に記憶されている正常範囲を読み込み、このデフォルト値を治療中の病気に応じて調整し、この調整後の値で新たに正常範囲を設定し、次に、処理S6を実行する。より具体的には、正常範囲調整部565は、治療中の病気が、後述の処理S7で分析の対象となっている病気、あるいは、後述の処理S7で分析の対象となっている病気と合併して発症する病気である場合、その病気の正常範囲を所定割合だけ狭くし、この狭くした範囲を新たな正常範囲に設定する。例えば、治療中の病気が黄疸である場合には、本実施形態では、白目部分の色で黄疸の可能性が分析されるので、デフォルト値の第1正常範囲が所定割合(例えば5%や10%等)だけ狭くされ、この狭く調整された範囲が新たな第1正常範囲に設定される。また例えば、治療中の病気が高血圧である場合には、この病気の合併症で発症する可能性のある腎臓病の第3正常範囲が所定割合だけ狭くされ、新たな第3正常範囲に設定される。   In this process S556, the control processing unit 5 reads the normal range stored in the normal range storage unit 65 of the storage unit 6 by the normal range adjustment unit 56, and adjusts this default value according to the disease being treated. Then, a new normal range is set with the adjusted value, and then step S6 is executed. More specifically, the normal range adjustment unit 565 merges the disease under treatment with the disease that is the subject of analysis in the later-described processing S7 or the disease that is the subject of analysis in the later-described processing S7. If the disease develops, the normal range of the disease is narrowed by a predetermined ratio, and the narrowed range is set as a new normal range. For example, when the disease under treatment is jaundice, in the present embodiment, the possibility of jaundice is analyzed by the color of the white eye portion, so the first normal range of the default value is a predetermined ratio (for example, 5% or 10%). %) And the narrowly adjusted range is set as a new first normal range. Also, for example, when the disease being treated is hypertension, the third normal range of kidney disease that may develop as a complication of this disease is narrowed by a predetermined percentage and set to a new third normal range. The

一方、処理S557では、身体状態分析装置Dは、制御処理部5によって、治療の完了済みか否かを判定する。この判定は、例えば、電子カルテが治療完了の有無を表す治療完了フラグを備える場合には、処理S552で取得した電子カルテの治療完了フラグを参照し、治療完了フラグが有る場合(あるいは治療完了フラグが治療完了を示す「1」である場合)には、治療の完了と判定し、治療完了フラグが無い場合(あるいは治療完了フラグが治療完了では無いことを示す「0」である場合)には、治療の完了ではないと判定する。また例えば、この判定は、処方箋の発行状況を参照し、定期的に発行されていた処方箋の発行が停止している場合には、治療の完了と判定し、処方箋の発行が継続している場合には、治療の完了ではないと判定する。この判定の結果、治療の完了である場合(Yes)には、制御処理部5は、次に、処理S6を実行し、一方、前記判定の結果、治療の完了である場合(No)には、制御処理部5は、次に、処理S558を実行する。   On the other hand, in process S557, the body condition analyzer D determines whether or not the treatment has been completed by the control processing unit 5. For example, in the case where the electronic medical record includes a treatment completion flag indicating the presence or absence of treatment completion, the treatment completion flag of the electronic medical record acquired in step S552 is referred to, and the treatment completion flag is present (or treatment completion flag). Is “1” indicating the completion of treatment), it is determined that the treatment is complete, and when there is no treatment completion flag (or when the treatment completion flag is “0” indicating that the treatment is not complete). Determine that treatment is not complete. Also, for example, this determination refers to the prescription issuance status. If issuance of prescriptions that have been issued regularly has been stopped, it is determined that treatment has been completed, and prescription issuance continues. It is determined that the treatment is not completed. As a result of this determination, if the treatment is complete (Yes), the control processing unit 5 next executes the process S6. On the other hand, if the determination is that the treatment is complete (No) Next, the control processing unit 5 executes a process S558.

この処理S558では、身体状態分析装置Dは、制御処理部5によって、定期受診できているか否かを判定する。より具体的には、例えば、制御処理部5は、処理S552で取得した電子カルテにおける治療日(カルテの記載日、通院日)から平均通院間隔日数を求め、この求めた平均通院間隔日数に所定の定数(例えば1.3や1.5等)を乗算し、最終治療日にこの乗算結果を加算し、本日の日付が加算結果の日付を越えているか否かを判定する。この判定の結果、本日の日付が加算結果の日付を越えている場合には、制御処理部5は、定期受診できてないと判定し(No)、次に、処理S559を実行する。一方、前記判定の結果、本日の日付が加算結果の日付を越えていない場合には、制御処理部5は、定期受診できていると判定し(Yes)、次に、処理S6を実行する。   In this process S558, the physical condition analyzer D determines whether or not a regular checkup is possible by the control processing unit 5. More specifically, for example, the control processing unit 5 obtains the average visit interval days from the treatment date (the medical record description date, the visit date) in the electronic medical record acquired in the process S552, and determines the predetermined average visit interval days. Is multiplied by a constant (for example, 1.3 or 1.5), and this multiplication result is added to the final treatment date, and it is determined whether or not today's date exceeds the date of the addition result. As a result of this determination, if today's date exceeds the date of the addition result, the control processing unit 5 determines that regular checkup has not been made (No), and then executes step S559. On the other hand, as a result of the determination, if today's date does not exceed the date of the addition result, the control processing unit 5 determines that a regular checkup has been made (Yes), and then executes step S6.

この処理S559では、身体状態分析装置Dは、制御処理部5によって、例えば「通院してください。」等の定期受診の推奨の通知を所定時間の間だけ表示部4に表示し、処理S6を実行する。   In this process S559, the physical condition analyzer D displays a notification of a recommended regular check-up such as “please go to the hospital” on the display unit 4 for a predetermined time by the control processing unit 5, and performs the process S6. Run.

図5に戻って、この処理S6では、身体状態分析装置Dは、制御処理部5の特徴量処理部53によって、分析時特徴量を求める。より具体的には、特徴量処理部53は、処理S2において撮像部3で撮像した分析対象画像から前記所定の特徴量を分析時特徴量として求める。より詳しくは、特徴量処理部53は、処理S3において撮像部3で撮像した分析対象画像から前記所定の特徴量を求め、この求めた前記特徴量を、基準色記憶部66に記憶された基準色に基づいて補正した補正特徴量を前記分析時特徴量として求める。   Returning to FIG. 5, in this process S <b> 6, the body condition analysis apparatus D obtains a feature value at the time of analysis by the feature value processing unit 53 of the control processing unit 5. More specifically, the feature amount processing unit 53 obtains the predetermined feature amount as the analysis feature amount from the analysis target image captured by the imaging unit 3 in the process S2. More specifically, the feature amount processing unit 53 obtains the predetermined feature amount from the analysis target image captured by the imaging unit 3 in step S3, and the obtained feature amount is a reference stored in the reference color storage unit 66. A corrected feature amount corrected based on the color is obtained as the analysis feature amount.

本実施形態では、白目部分の色や黒目部分の色や頬部分の色に基づいて所定の病気の可能性を分析するので、一例では、図8において、まず、特徴量処理部53は、処理S3において撮像部3で撮像した分析対象画像から背景差分法によって人物領域を抽出する(S601)。次に、特徴量処理部53は、この抽出した人物領域から、例えば、楕円のハフ変換によって、あるいは、頭部のモデル(テンプレート)を用いたパターンマッチングによって、顔領域を抽出する(S602)。次に、特徴量処理部53は、目領域および頬領域を抽出するために、この抽出した顔領域の画像から、エッジフィルタでエッジを抽出してエッジ画像を生成し、この生成したエッジ画像を上下左右に4つに分割し、上下方向の中央位置またはこの中央位置よりやや上部に位置する水平方向に横長な左右一対の楕円形状を、例えば、楕円のハフ変換によって、あるいは、目のモデル(テンプレート)を用いたパターンマッチングによって、左右1対の目領域として抽出し、この抽出した目領域に対し下部一定領域を頬領域として抽出する(S603)。この抽出された頬領域の画像が分析対象画像における頬部分とされる。次に、特徴量処理部53は、この抽出した左右1対の目領域の少なくとも一方から、その画素値から白目領域と黒目領域とに分け、分析対象画像における白目領域の画像(白目画像、白目部分)と、分析対象画像における黒目領域の画像(黒目画像、黒目部分)とを抽出する(S604)。次に、特徴量処理部53は、白目部分、黒目部分および頬部分から各分析時特徴量を求める(S605)。より詳しくは、特徴量処理部53は、前記抽出した白目部分における赤成分を、例えば白目部分における各画素の各赤成分を平均することによって求め、前記抽出した白目部分における青成分を、例えば白目部分における各画素の各青成分を平均することによって求め、前記抽出した白目部分における緑成分を、例えば白目部分における各画素の各緑成分を平均することによって求める。これによって、白目部分の色(赤成分、青成分、緑成分)が白目部分に関する第1特徴量として求められ、白目部分の赤成分および青成分が白目部分に関する第2特徴量として求められる。同様に、特徴量処理部53は、前記抽出した黒目部分における赤成分を、例えば黒目部分における各画素の各赤成分を平均することによって求め、前記抽出した黒目部分における青成分を、例えば黒目部分における各画素の各青成分を平均することによって求め、前記抽出した黒目部分における緑成分を、例えば黒目部分における各画素の各緑成分を平均することによって求め、これらに基づいて黒目部分における明度を求める。これによって、黒目部分の色(赤成分、青成分、緑成分)が黒目部分に関する第1特徴量として求められ、黒目部分の明度が黒目部分に関する第2特徴量として求められる。同様に、特徴量処理部53は、前記抽出した頬部分における赤成分を、例えば頬部分における各画素の各赤成分を平均することによって求め、前記抽出した頬部分における青成分を、例えば頬部分における各画素の各青成分を平均することによって求め、前記抽出した頬部分における緑成分を、例えば頬部分における各画素の各緑成分を平均することによって求め、これらに基づいて頬部分における明度を求める。これによって、頬部分の色(赤成分、青成分、緑成分)が頬部分に関する第1特徴量として求められ、頬部分の明度が頬部分に関する第2特徴量として求められる。なお、左右1対の目領域の両方が用いられる場合には、左右それぞれの各目領域で、各赤成分、各青成分、各緑成分および各明度が求められ、赤成分、青成分、緑成分および明度それぞれで、その平均が求められ、各平均値が最終的な赤成分、青成分、緑成分および明度の各値とされればよい。次に、これら赤成分、青成分、緑成分および明度における色ズレを補正するために、特徴量処理部53は、処理S3において撮像部3で撮像した分析対象画像の色補正用領域の色を求め、この求めた色補正用領域の色と基準色記憶部66に記憶された基準色とに基づいて各成分の補正値を求める。そして、特徴量処理部53は、前記求めた白目部分における赤成分、青成分および緑成分、前記求めた黒目部分における赤成分、青成分、緑成分および明度、ならびに、前記求めた頬目部分における赤成分、青成分、緑成分および明度それぞれを各補正値で補正して、各分析時特徴量として補正後の白目部分の色、赤成分および緑成分、黒目部分の色および明度、ならびに、頬部分の色および明度を求める。これによって例えば経年劣化等による照明部2における照明光の変化に起因する色ズレを補正した、各分析時特徴量としての、白目部分の色、赤成分および緑成分、黒目部分の色および明度、ならびに、頬部分の色および明度が求められる。なお、上述では、明度自体が補正されたが、色ズレ補正後の赤成分、青成分および緑成分を用いることによって色ズレ補正後の明度が求められても良い。   In this embodiment, since the possibility of a predetermined disease is analyzed based on the color of the white eye part, the color of the black eye part, or the color of the cheek part, in one example, in FIG. In S3, a person region is extracted from the analysis target image captured by the imaging unit 3 by the background subtraction method (S601). Next, the feature amount processing unit 53 extracts a face region from the extracted person region by, for example, elliptical Hough transform or pattern matching using a head model (template) (S602). Next, in order to extract the eye area and the cheek area, the feature amount processing unit 53 extracts an edge from the extracted face area image by an edge filter to generate an edge image, and the generated edge image is Divided into four parts vertically and horizontally, or a pair of left and right ellipses that are horizontally long and located slightly above the center position, for example, by the Hough transform of the ellipse, or the eye model ( A pair of left and right eye regions are extracted by pattern matching using a template, and a lower fixed region is extracted as a cheek region with respect to the extracted eye regions (S603). The extracted cheek region image is the cheek portion in the analysis target image. Next, the feature amount processing unit 53 separates at least one of the extracted left and right pair of eye regions into a white eye region and a black eye region based on the pixel value, and the white eye region image (white eye image, white eye region) in the analysis target image. Part) and the image of the black eye region (black eye image, black eye part) in the analysis target image are extracted (S604). Next, the feature amount processing unit 53 obtains each analysis feature amount from the white eye portion, the black eye portion, and the cheek portion (S605). More specifically, the feature amount processing unit 53 obtains the red component in the extracted white eye portion by, for example, averaging each red component of each pixel in the white eye portion, and determines the blue component in the extracted white eye portion as, for example, the white eye The blue component of each pixel in the portion is obtained by averaging, and the green component in the extracted white-eye portion is obtained by, for example, averaging each green component of each pixel in the white-eye portion. As a result, the color of the white eye portion (red component, blue component, green component) is obtained as the first feature amount relating to the white eye portion, and the red component and the blue component of the white eye portion are obtained as the second feature amount relating to the white eye portion. Similarly, the feature amount processing unit 53 obtains the red component in the extracted black eye portion by, for example, averaging each red component of each pixel in the black eye portion, and calculates the blue component in the extracted black eye portion, for example, the black eye portion. The green component in the extracted black eye part is obtained by averaging the green component of each pixel in the black eye part, for example, and the lightness in the black eye part is calculated based on these. Ask. As a result, the color of the black eye part (red component, blue component, green component) is obtained as the first feature quantity relating to the black eye part, and the brightness of the black eye part is obtained as the second feature quantity relating to the black eye part. Similarly, the feature amount processing unit 53 obtains the red component in the extracted cheek portion by, for example, averaging each red component of each pixel in the cheek portion, and calculates the blue component in the extracted cheek portion, for example, the cheek portion. The green component in the extracted cheek part is obtained by averaging the green component of each pixel in the cheek part, for example, and the lightness in the cheek part is calculated based on these. Ask. Accordingly, the color of the cheek portion (red component, blue component, green component) is obtained as the first feature amount relating to the cheek portion, and the brightness of the cheek portion is obtained as the second feature amount relating to the cheek portion. If both the left and right eye regions are used, the red component, the blue component, the green component, and the lightness are obtained for each of the left and right eye regions. The average is calculated | required by each of a component and lightness, and each average value should just be made into each value of final red component, blue component, green component, and lightness. Next, in order to correct the color misregistration in the red component, blue component, green component, and brightness, the feature amount processing unit 53 changes the color of the color correction region of the analysis target image captured by the imaging unit 3 in step S3. The correction value of each component is obtained based on the obtained color of the color correction area and the reference color stored in the reference color storage unit 66. Then, the feature amount processing unit 53 determines the red component, the blue component, and the green component in the obtained white eye portion, the red component, the blue component, the green component, and the brightness in the obtained black eye portion, and the obtained cheek eye portion. Red component, blue component, green component, and brightness are corrected with each correction value, and the corrected white-eye color, red component and green component, black-eye color and brightness, and cheek Find the color and brightness of the part. Thereby, for example, the color of the white eye part, the red component and the green component, the color and brightness of the black eye part, as the characteristic amount at the time of analysis, which corrects the color shift caused by the change of the illumination light in the illumination unit 2 due to deterioration over time, In addition, the color and brightness of the cheek portion are required. In the above description, the brightness itself is corrected. However, the brightness after the color shift correction may be obtained by using the red component, the blue component, and the green component after the color shift correction.

図5に戻って、このような処理S6の実行後に、身体状態分析装置Dは、制御処理部5の分析部54によって、処理S5において使用者判定部52で判定された使用者識別情報の使用者における、基準特徴量記憶部62に記憶された判定基準特徴量と、処理S6において特徴量処理部53で求めた分析時特徴量とに基づいて、身体状態を分析する分析処理を実行する(S7)。   Returning to FIG. 5, after such processing S <b> 6 is performed, the body condition analyzer D uses the user identification information determined by the user determination unit 52 in the processing S <b> 5 by the analysis unit 54 of the control processing unit 5. Based on the determination criterion feature quantity stored in the reference feature quantity storage unit 62 and the analysis-time feature quantity obtained by the feature quantity processing unit 53 in step S6, an analysis process for analyzing the physical state is executed (step S6). S7).

本実施形態では、白目部分の色、黒目部分の色および頬部分の色に基づいて所定の病気の可能性を分析するので、一例では、前記黒目部分の色について、図9において、分析部54は、まず、前記処理S605で求めた第1分析時特徴量(第1特徴量の分析時特徴量)としての黒目部分の色(赤成分、青成分、緑成分)が第2正常範囲内であるか否かを判定する(S710)。この判定の結果、黒目部分の色が第2正常範囲内である場合(Yes)には、分析部54は、異常無しと判定し(S713)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。一方、前記判定の結果、黒目部分の色が第2正常範囲内ではない場合(No)には、分析部54は、次に、処理S711を実行する。   In this embodiment, since the possibility of a predetermined disease is analyzed based on the color of the white eye part, the color of the black eye part, and the color of the cheek part, in one example, the color of the black eye part is analyzed in FIG. First, the color (red component, blue component, green component) of the black eye as the first analysis feature amount (first feature analysis feature amount) obtained in step S605 is within the second normal range. It is determined whether or not there is (S710). As a result of this determination, when the color of the black eye portion is within the second normal range (Yes), the analysis unit 54 determines that there is no abnormality (S713), and the body condition analyzer D is controlled by the control processing unit 5. Next, the process S8 is executed. On the other hand, if the result of the determination is that the color of the black eye portion is not within the second normal range (No), the analysis unit 54 next executes step S711.

この処理S711では、分析部54は、前記処理S605で求めた第2分析時特徴量(第2特徴量の分析時特徴量)としての黒目部分における色の明度が高いか否かが判定される。より具体的には、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、判定基準特徴量フィールド622に登録されている白内障、翼状片用の判定基準特徴量が、記憶部6から読み出されて取得され、前記処理S605で求めた第2分析時特徴量としての黒目部分の色における明度から、この取得した白内障、翼状片用の判定基準特徴量を減算した第3減算結果が、前記処理S505で取得した第3判定閾値以上のプラス値であるか否かが判定される。この判定の結果、明度が高くない、すなわち、前記第3減算結果が前記第3判定閾値以上のプラス値ではない場合(No)には、分析部54は、白内障、翼状片のうちの少なくともいずれかの可能性の点で、異常無しと判定し、次に、処理S712を実行する。一方、前記判定の結果、明度が高い、すなわち、前記第3減算結果が前記第3判定閾値以上のプラス値である場合(Yes)には、白内障、翼状片のうちの少なくともいずれかの可能性が有ると判定し(S715)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。   In this process S711, the analysis unit 54 determines whether or not the lightness of the color in the black eye portion is high as the second analysis feature quantity (the second feature quantity analysis feature quantity) obtained in the process S605. . More specifically, the determination criterion feature field in the record for registering the user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. Based on the lightness in the color of the black eye portion as the second analysis time feature amount obtained by reading out and obtaining from the storage unit 6 the determination reference feature amount for cataract and pterygium registered in 622. Then, it is determined whether or not the acquired third subtraction result obtained by subtracting the acquired determination reference feature amount for cataract and pterygium is a positive value that is equal to or greater than the third determination threshold acquired in step S505. As a result of this determination, when the brightness is not high, that is, when the third subtraction result is not a positive value equal to or greater than the third determination threshold value (No), the analysis unit 54 is at least one of cataract and pterygium. In view of this possibility, it is determined that there is no abnormality, and then processing S712 is executed. On the other hand, when the lightness is high as a result of the determination, that is, when the third subtraction result is a positive value equal to or higher than the third determination threshold (Yes), there is a possibility of at least one of cataract and pterygium. (S715), the body condition analyzer D next executes the process S8 by the control processing unit 5.

この処理S712では、分析部54は、前記処理S605で求めた第2分析時特徴量(第2特徴量の分析時特徴量)としての黒目部分における色の明度が低いか否かが判定される。より具体的には、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、判定基準特徴量フィールド622に登録されている網膜出血等用の判定基準特徴量が、記憶部6から読み出されて取得され、前記処理S605で求めた第2分析時特徴量としての黒目部分の色における明度から、この取得した網膜出血等用の判定基準特徴量を減算した第4減算結果が、前記処理S505で取得した第4判定閾値以上のマイナス値であるか否かが判定される。この判定の結果、明度が低くない、すなわち、前記第4減算結果が前記第4判定閾値以上のマイナス値ではない場合(No)には、分析部54は、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性の点で、異常無しと判定し(S713)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。一方、前記判定の結果、明度が低い、すなわち、前記第4減算結果が前記第4判定閾値以上のマイナス値である場合(Yes)には、分析部54は、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性が有ると判定し(S714)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。   In this process S712, the analysis unit 54 determines whether or not the lightness of the color in the black eye portion is low as the second analysis feature quantity (the second feature quantity analysis feature quantity) obtained in the process S605. . More specifically, the determination criterion feature field in the record for registering the user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. From the lightness in the color of the black eye portion as the second analysis time feature amount obtained by reading out and obtaining the determination reference feature amount for retinal hemorrhage registered in 622 from the storage unit 6 and in the process S605, It is determined whether or not the fourth subtraction result obtained by subtracting the acquired determination criterion feature value for retinal hemorrhage is a negative value that is equal to or greater than the fourth determination threshold acquired in step S505. As a result of this determination, if the brightness is not low, that is, if the fourth subtraction result is not a negative value equal to or greater than the fourth determination threshold value (No), the analysis unit 54 performs retinal bleeding, retinitis pigmentosa, retina It is determined that there is no abnormality in at least one of the possibilities of choroidal atrophy, retinal choroiditis, optic atrophy and optic neuritis (S713), and the body condition analyzer D is then controlled by the control processing unit 5. Process S8 is executed. On the other hand, when the lightness is low as a result of the determination, that is, when the fourth subtraction result is a negative value that is equal to or greater than the fourth determination threshold (Yes), the analysis unit 54 performs retinal bleeding, retinitis pigmentosa, It is determined that there is a possibility of at least one of retinal choroidal atrophy, retinal choroiditis, optic nerve atrophy, and optic neuritis (S714), and the body condition analyzer D then performs process S8 by the control processing unit 5. Run.

そして、一例では、前記白目部分の色について、図10において、分析部54は、まず、前記処理S605で求めた第1分析時特徴量(第1特徴量の分析時特徴量)としての白目部分の色(赤成分、青成分、緑成分)が第1正常範囲内であるか否かを判定する(S720)。この判定の結果、白目部分の色が第1正常範囲内である場合(Yes)には、分析部54は、異常無しと判定し(S723)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。一方、前記判定の結果、白目部分の色が第1正常範囲内ではない場合(No)には、分析部54は、次に、処理S721を実行する。   In one example, with respect to the color of the white eye portion, in FIG. 10, the analysis unit 54 firstly uses the white eye portion as the first analysis feature amount (the first feature amount analysis feature amount) obtained in step S605. It is determined whether the colors (red component, blue component, green component) are within the first normal range (S720). If the result of this determination is that the color of the white-eye portion is within the first normal range (Yes), the analysis unit 54 determines that there is no abnormality (S723), and the body condition analyzer D is controlled by the control processing unit 5. Next, the process S8 is executed. On the other hand, if the result of the determination is that the color of the white eye portion is not within the first normal range (No), the analysis unit 54 next executes step S721.

この処理S721では、分析部54は、前記処理S605で求めた第2分析時特徴量(第2特徴量の分析時特徴量)としての白目部分の色における青成分が低いか否かが判定される。より具体的には、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、判定基準特徴量フィールド622に登録されている黄疸用の判定基準特徴量を記憶部6から読み出して取得し、前記処理S605で求めた第2分析時特徴量としての白目部分の色における青成分から、この取得した黄疸用の判定基準特徴量を減算した第1減算結果が、前記処理S505で取得した第1判定閾値以上のマイナス値であるか否かが判定される(S721)。この判定の結果、青成分が低くない、すなわち、前記第1減算結果が前記第1判定閾値以上のマイナス値ではない場合(No)には、分析部54は、黄疸の可能性の点で、異常無しと判定し、次に、処理S722を実行する。一方、前記判定の結果、青成分が低い、すなわち、前記第1減算結果が前記第1判定閾値以上のマイナス値である場合(Yes)には、分析部54は、黄疸の可能性が有ると判定し(S725)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。   In this process S721, the analysis unit 54 determines whether or not the blue component in the color of the white eye portion is low as the second analysis feature quantity (the second feature quantity analysis feature quantity) obtained in the process S605. The More specifically, the determination criterion feature field in the record for registering the user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. The determination reference feature value for jaundice registered in 622 is read out from the storage unit 6 and obtained, and the obtained jaundice is obtained from the blue component in the color of the white eye portion as the second analysis time feature value obtained in the processing S605. It is determined whether or not the first subtraction result obtained by subtracting the determination criterion feature value for use is a negative value that is equal to or greater than the first determination threshold acquired in step S505 (S721). As a result of this determination, when the blue component is not low, that is, when the first subtraction result is not a negative value equal to or higher than the first determination threshold value (No), the analysis unit 54 has the possibility of jaundice, It is determined that there is no abnormality, and then processing S722 is executed. On the other hand, if the blue component is low as a result of the determination, that is, if the first subtraction result is a negative value equal to or greater than the first determination threshold (Yes), the analysis unit 54 may have jaundice. Then, the body condition analyzer D performs the process S8 by the control processing unit 5 (S725).

前記処理S722では、分析部54は、前記処理S605で求めた第2分析時特徴量(第2特徴量の分析時特徴量)としての白目部分の色における赤成分が高いか否かが判定される。より具体的には、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、判定基準特徴量フィールド622に登録されている結膜炎用の判定基準特徴量を記憶部6から読み出して取得し、前記処理S605で求めた第2分析時特徴量としての白目部分の色における赤成分から、この取得した結膜炎用の判定基準特徴量を減算した第2減算結果が、前記処理S505で取得した第2判定閾値以上のプラス値であるか否かが判定される。この判定の結果、赤成分が高くない、すなわち、前記第2減算結果が前記第2判定閾値以上のプラス値ではない場合(No)には、分析部54は、結膜炎の可能性の点で、異常無しと判定し(S723)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。一方、前記判定の結果、赤成分が高い、すなわち、前記第2減算結果が前記第2判定閾値以上のプラス値である場合(Yes)には、分析部54は、結膜炎の可能性が有ると判定し(S724)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。   In the process S722, the analysis unit 54 determines whether or not the red component in the color of the white eye portion is high as the second analysis time feature amount (the second feature amount analysis feature amount) obtained in the process S605. The More specifically, the determination criterion feature field in the record for registering the user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. The determination criteria feature quantity for conjunctivitis registered in 622 is read out and acquired from the storage unit 6, and the acquired conjunctivitis is obtained from the red component in the white eye color as the second analysis feature quantity obtained in the processing S 605. It is determined whether or not the second subtraction result obtained by subtracting the determination criterion feature value for use is a positive value that is equal to or greater than the second determination threshold acquired in step S505. As a result of this determination, if the red component is not high, that is, if the second subtraction result is not a positive value equal to or greater than the second determination threshold (No), the analysis unit 54 is in terms of the possibility of conjunctivitis, It is determined that there is no abnormality (S723), and the body condition analyzer D next executes the process S8 by the control processing unit 5. On the other hand, as a result of the determination, when the red component is high, that is, when the second subtraction result is a positive value equal to or greater than the second determination threshold (Yes), the analysis unit 54 has the possibility of conjunctivitis. Then, the physical condition analyzer D executes the process S8 by the control processing unit 5 (S724).

さらに、一例では、前記頬部分の色について、図11において、分析部54は、まず、前記処理S605で求めた第1分析時特徴量(第1特徴量の分析時特徴量)としての頬部分の色(赤成分、青成分、緑成分)が第3正常範囲内であるか否かを判定する(S730)。この判定の結果、頬部分の色が第3正常範囲内である場合(Yes)には、分析部54は、異常無しと判定し(S732)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。一方、前記判定の結果、頬部分の色が第3正常範囲内ではない場合(No)には、分析部54は、次に、処理S731を実行する。   Furthermore, in one example, with respect to the color of the cheek portion, in FIG. 11, the analysis unit 54 firstly uses the cheek portion as the first analysis feature quantity (first feature quantity analysis feature quantity) obtained in step S605. It is determined whether the colors (red component, blue component, green component) are within the third normal range (S730). As a result of this determination, when the color of the cheek portion is within the third normal range (Yes), the analysis unit 54 determines that there is no abnormality (S732), and the body condition analyzer D is controlled by the control processing unit 5. Next, step S8 is executed. On the other hand, if the result of the determination is that the color of the cheek portion is not within the third normal range (No), the analysis unit 54 next executes step S731.

この処理S731では、分析部54は、前記処理S605で求めた第2分析時特徴量(第2特徴量の分析時特徴量)としての頬部分の色における明度が低いか否かが判定される。より具体的には、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、判定基準特徴量フィールド622に登録されている腎臓病用の判定基準特徴量を記憶部6から読み出して取得し、前記処理S605で求めた第2分析時特徴量としての頬部分の色における明度から、この取得した黄疸用の判定基準特徴量を減算した第5減算結果が、前記処理S505で取得した第5判定閾値以上のマイナス値であるか否かが判定される。この判定の結果、明度が低くない、すなわち、前記第5減算結果が前記第5判定閾値以上のマイナス値ではない場合(No)には、分析部54は、腎臓病の可能性の点で、異常無しと判定し、次に、処理S732を実行する。一方、前記判定の結果、明度が低い、すなわち、前記第5減算結果が前記第5判定閾値以上のマイナス値である場合(Yes)には、分析部54は、腎臓病の可能性が有ると判定し(S733)、身体状態分析装置Dは、制御処理部5によって、次に、処理S8を実行する。   In this process S731, the analysis unit 54 determines whether or not the lightness in the color of the cheek portion as the second analysis feature quantity (the second feature quantity analysis feature quantity) obtained in the process S605 is low. . More specifically, the determination criterion feature field in the record for registering the user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. The determination criterion feature value for kidney disease registered in 622 is read out and acquired from the storage unit 6, and this acquired jaundice is determined from the brightness in the color of the cheek portion as the second analysis time feature value obtained in the processing S 605. It is determined whether or not the fifth subtraction result obtained by subtracting the determination criterion feature value for use is a negative value that is equal to or greater than the fifth determination threshold value acquired in step S505. As a result of this determination, if the lightness is not low, that is, if the fifth subtraction result is not a negative value equal to or higher than the fifth determination threshold (No), the analysis unit 54 is in terms of the possibility of kidney disease, It is determined that there is no abnormality, and then step S732 is executed. On the other hand, if the brightness is low as a result of the determination, that is, if the fifth subtraction result is a negative value that is equal to or greater than the fifth determination threshold (Yes), the analysis unit 54 determines that there is a possibility of kidney disease. Then, the physical condition analyzer D performs the process S8 by the control processing unit 5 next.

図5に戻って、処理S8では、身体状態分析装置Dは、制御処理部5によって、前記処理S7で何らかの病気の可能性があると判定されたか否かを判定する。本実施形態では、制御処理部5は、白内障および翼状片のうちの少なくともいずれかの可能性、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性、黄疸の可能性、結膜炎の可能性、ならびに、腎臓病の可能性、のうちの少なくともいずれかが可能性有りと判定されたか否かを判定する。この判定の結果、白内障および翼状片のうちの少なくともいずれかの可能性、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性、黄疸の可能性、結膜炎の可能性、ならびに、腎臓病の可能性の全てが無いと判定されている場合(No)には、身体状態分析装置Dは、本処理を終了し、一方、前記判定の結果、白内障および翼状片のうちの少なくともいずれかの可能性、網膜出血、網膜色素変性症、網膜脈絡膜萎縮、網膜脈絡膜炎、視神経萎縮および視神経炎のうちの少なくともいずれかの可能性、黄疸の可能性、結膜炎の可能性、ならびに、腎臓病の可能性、のうちの少なくともいずれか1つが可能性有りと判定されている場合(Yes)には、身体状態分析装置Dは、制御処理部5によって、分析結果の処理を実行し(S9)、本処理を終了する。   Returning to FIG. 5, in process S <b> 8, the body condition analyzer D determines whether or not the control processing unit 5 determines that there is a possibility of some disease in the process S <b> 7. In the present embodiment, the control processing unit 5 includes at least one of the possibility of cataract and pterygium, retinal hemorrhage, retinitis pigmentosa, retinal choroid atrophy, retinal choroiditis, optic atrophy and optic neuritis. It is determined whether at least one of any of the possibilities, the possibility of jaundice, the possibility of conjunctivitis, and the possibility of kidney disease has been determined to be possible. As a result of this determination, the possibility of at least one of cataract and pterygium, the possibility of at least one of retinal hemorrhage, retinitis pigmentosa, retinal choroid atrophy, retinal choroiditis, optic atrophy and optic neuritis, When it is determined that all of the possibility of jaundice, the possibility of conjunctivitis, and the possibility of kidney disease are determined (No), the body condition analyzer D ends the process, while the determination As a result, the possibility of at least one of cataract and pterygium, possibility of retinal hemorrhage, retinitis pigmentosa, retinal choroidal atrophy, retinal choroiditis, optic atrophy and optic neuritis, jaundice If at least one of the possibility, the possibility of conjunctivitis, and the possibility of kidney disease is determined to be possible (Yes), the body condition analyzer Is the control processing unit 5 executes the processing of the analysis result (S9), the process ends.

この分析結果の処理S9では、身体状態分析装置Dは、制御処理部5によって、分析結果等を記憶し、必要に応じた分析結果の表示を実行する。より具体的には、図12において、制御処理部5は、分析結果等を記憶部6に記憶する(S901)。より詳しくは、制御処理部5は、前記処理S502で前記照合画像に一致すると判定された使用者識別情報(登録画像)をベース情報テーブルTBの使用者識別情報フィールド621に登録するレコードにおける、過去身体状態情報フィールド623に分析結果を追加して登録する。これによって今般の分析結果が記憶部6に記憶(記録)される。   In the analysis result processing S9, the body condition analyzer D stores the analysis result and the like by the control processing unit 5 and displays the analysis result as necessary. More specifically, in FIG. 12, the control processing unit 5 stores the analysis result and the like in the storage unit 6 (S901). More specifically, the control processing unit 5 records past user identification information (registered image) determined to match the collation image in the processing S502 in the user identification information field 621 of the base information table TB. An analysis result is added and registered in the physical condition information field 623. As a result, the current analysis result is stored (recorded) in the storage unit 6.

次に、制御処理部5は、前記処理S554の判定結果に基づいて、処理S7における分析結果に含まれる病名全てが治療中の病名か否かを判定する。この判定の結果、病名全てが治療中である場合(Yes)には、制御処理部5は、処理を終了する。一方、病名全てが治療中ではない場合(No)には、制御処理部5は、分析結果を表示部4に表示し、処理を終了する。ここで、表示部4には、好ましくは、分析結果から、治療中の病名を除いた残余の分析結果が表示されて良いが、分析結果の全てが表示部4に表示されても良い。このように表示部4は、前記分析部で分析された身体状態の分析結果を外部に出力する出力部の一例に相当する。なお、必要に応じて、処理S7の分析結果は、通信IF部7から外部の機器へ出力されても良い。この場合、通信IF部7は、前記分析部で分析された身体状態の分析結果を外部に出力する出力部の他の一例に相当する。   Next, based on the determination result of the process S554, the control processing unit 5 determines whether or not all the disease names included in the analysis result in the process S7 are the names of the diseases being treated. If all the disease names are being treated as a result of this determination (Yes), the control processing unit 5 ends the process. On the other hand, when all the disease names are not being treated (No), the control processing unit 5 displays the analysis result on the display unit 4 and ends the processing. Here, the display unit 4 may preferably display the remaining analysis result excluding the name of the disease being treated from the analysis result, but all the analysis result may be displayed on the display unit 4. As described above, the display unit 4 corresponds to an example of an output unit that outputs the analysis result of the physical state analyzed by the analysis unit to the outside. Note that the analysis result of the process S7 may be output from the communication IF unit 7 to an external device as necessary. In this case, the communication IF unit 7 corresponds to another example of an output unit that outputs the analysis result of the body state analyzed by the analysis unit to the outside.

以上説明したように、本実施形態における身体状態分析装置Dおよびこれに実装された身体状態測定方法は、ミラー1に設けられた撮像部3で、ミラー1の前方を撮像することによって分析対象画像を生成し、この分析対象画像に基づいて、識別情報記憶部61に記憶された使用者識別情報の使用者Obか否かを判定し、この判定の結果、識別情報記憶部61に記憶された使用者識別情報の使用者Obであると判定された場合に、この判定された使用者識別情報の使用者Obにおける、判定基準特徴量と、前記分析対象画像に基づいて求められた分析時特徴量とに基づいて、身体状態を分析し、その分析結果を外部に出力する。したがって、上記身体状態分析装置Dおよび身体状態分析方法は、ミラー1に設けられた撮像部3で、ミラー1の前方を撮像することによって分析対象画像を生成するので、例えば、洗顔、歯磨き、メイクアップ、ヘアセット、コンタクトレンズの取付け、その取外し等の日常生活における行動の中でミラー1を見る自然な動作の際に意識することなく、身体状態を分析でき、その分析結果の出力を参照することで、前記自然な動作の際に、日々の身体状態をチェックできる。そして、上記身体状態分析装置Dおよび身体状態分析方法は、その身体状態の分析の際に、識別情報記憶部61に記憶された使用者識別情報の使用者Obか否かを判定し、この判定された使用者識別情報の使用者Obにおける、判定基準特徴量と分析時特徴量とに基づいて、身体状態を分析するので、当該身体状態分析装置Dおよび身体状態分析方法が複数の使用者によって使用される場合でも、当該使用者Obの判定基準特徴量で身体状態を分析するから、より適正に身体状態を分析できる。   As described above, the body state analysis device D and the body state measurement method mounted thereon according to the present embodiment are analyzed images by imaging the front of the mirror 1 with the imaging unit 3 provided in the mirror 1. Based on the analysis target image, it is determined whether or not the user Ob of the user identification information stored in the identification information storage unit 61. As a result of this determination, the user identification information is stored in the identification information storage unit 61. When it is determined that the user is the user Ob of the user identification information, the analysis characteristic obtained from the determination reference feature amount and the analysis target image in the user Ob of the determined user identification information Based on the quantity, the body condition is analyzed and the analysis result is output to the outside. Therefore, in the body condition analysis apparatus D and the body condition analysis method, the image to be analyzed is generated by imaging the front of the mirror 1 with the imaging unit 3 provided in the mirror 1, and thus, for example, face washing, tooth brushing, makeup The body condition can be analyzed without being aware of the natural movement of looking at the mirror 1 during daily activities such as up, hair set, contact lens attachment, and removal, and refer to the output of the analysis result. Thus, the daily physical condition can be checked during the natural movement. Then, the body condition analysis apparatus D and the body condition analysis method determine whether or not the user is the user Ob of the user identification information stored in the identification information storage unit 61 when analyzing the body condition. Since the body state is analyzed based on the determination criterion feature amount and the analysis time feature amount in the user Ob of the user identification information that has been obtained, the body state analyzing apparatus D and the body state analyzing method are performed by a plurality of users. Even when it is used, the physical state is analyzed based on the determination criterion feature quantity of the user Ob, so that the physical state can be analyzed more appropriately.

上記身体状態分析装置Dおよび身体状態分析方法は、識別情報記憶部61に記憶されている使用者識別情報を、撮像部3で撮像した分析対象画像に基づいて更新して識別情報記憶部61に記憶するので、使用者Obの容貌が変化しても、より適切に使用者Obを判定できる。したがって、当該使用者Obの判定基準特徴量で身体状態が分析されるから、上記身体状態分析装置および身体状態分析方法は、より適正に身体状態を分析できる。   In the body condition analysis device D and the body condition analysis method, the user identification information stored in the identification information storage unit 61 is updated based on the analysis target image captured by the imaging unit 3 and stored in the identification information storage unit 61. Since it memorize | stores, even if the appearance of user Ob changes, user Ob can be determined more appropriately. Therefore, since the body state is analyzed based on the determination criterion feature amount of the user Ob, the body state analysis apparatus and the body state analysis method can analyze the body state more appropriately.

上記身体状態分析装置Dおよび身体状態分析方法は、使用者における、身体状態の分析に用いる判定閾値を記憶し、この使用者の判定閾値でその身体状態を分析する。したがって、上記身体状態分析装置Dおよび身体状態分析方法は、使用者個々人に応じて判定閾値をカスタマイズでき、より適正に身体状態を分析できる。   The body condition analysis apparatus D and the body condition analysis method store a determination threshold value used for analyzing the body condition of the user, and analyze the body condition using the determination threshold value of the user. Therefore, the body condition analyzer D and the body condition analysis method can customize the determination threshold according to the individual user, and can analyze the body condition more appropriately.

上記身体状態分析装置Dおよび身体状態分析方法は、使用者判定部52で判定された使用者識別情報の使用者における過去身体状態情報に基づいて、正常範囲を調整する。したがって、上記身体状態分析装置Dおよび身体状態分析方法は、使用者個々人の過去身体状態情報を考慮することで、より適正に使用者が正常範囲内であるか否かを判定できる。   The body condition analyzer D and the body condition analysis method adjust the normal range based on the past body condition information of the user of the user identification information determined by the user determination unit 52. Therefore, the body condition analysis apparatus D and the body condition analysis method can determine whether or not the user is within the normal range more appropriately by considering the past body condition information of each user.

上記身体状態分析装置Dおよび身体状態分析方法は、使用者が正常範囲内である否かを判定した上で、前記正常範囲内ではない場合に、身体状態を分析する。したがって、上記身体状態分析装置および身体状態分析方法は、正常範囲内である場合に、身体状態を分析する処理をスキップでき、一方、2段階で解析するので、より適正に身体状態を分析できる。   The body state analysis device D and the body state analysis method analyze the body state when it is not within the normal range after determining whether or not the user is within the normal range. Therefore, the body state analysis apparatus and the body state analysis method can skip the process of analyzing the body state when it is within the normal range, and can analyze the body state more appropriately because the analysis is performed in two stages.

なお、上述の実施形態では、前記所定の特徴量は、白目部分の色や黒目部分の色や頬部分の色であったが、これに限定されるものではなく、病理診断に用いられる他の諸量であって良い。例えば、上述に代え、あるいは、上述に加えて、前記第1特徴量が頬部分の色である場合において、前記第2特徴量は、黄疸の可能性を好適に分析できることから、頬部分の色における青成分(色相の青成分)であり、肝硬変の可能性を好適に分析できることから、頬部分の色における明度であっても良い。頬部分の色における青成分において、第2分析時特徴量(第2特徴量の分析時特徴量)から判定基準特徴量を減算した第6減算結果が所定の第6判定閾値以上のマイナス値である場合に、黄疸の可能性が有ると判定される。頬部分の色における明度において、第2分析時特徴量から判定基準特徴量を減算した第7減算結果が所定の第7判定閾値以上のマイナス値である場合に、肝硬変の可能性が有ると判定される。これら第6および第7判定閾値は、上述の第1ないし第5判定閾値と同様に、肌色の違いに応じた複数の設定値が複数のサンプルから適宜にそれぞれ設定される。この黄疸の可能性や、肝硬変の可能性を分析する場合においても、第1ないし第3正常範囲と同様な正常範囲(第4正常範囲)が設けられても良い。さらに、この第4正常範囲は、過去身体状態情報に基づくだけでなく、例えば色黒や色白等に応じて調整されても良い。または、これら上述に代え、あるいは、これら上述に加えて、骨粗鬆症の可能性を好適に分析できることから、前記特徴量は、目の高さ位置であっても良い。目の高さ位置において、分析時特徴量から判定基準特徴量を減算した第8減算結果が所定の第8判定閾値以上のマイナス値である場合に、骨粗鬆症の可能性が有ると判定される。第8判定閾値は、その設定値が複数のサンプルから適宜に設定され、例えば1cmや2cmや3cm等の数センチに設定される。   In the above-described embodiment, the predetermined feature amount is the color of the white eye portion, the color of the black eye portion, or the color of the cheek portion, but is not limited to this, and is used for other pathological diagnosis. It may be various quantities. For example, instead of the above, or in addition to the above, in the case where the first feature amount is the color of the cheek portion, the second feature amount can suitably analyze the possibility of jaundice. Since it is a blue component (a blue component of hue) and the possibility of cirrhosis can be analyzed suitably, the lightness in the color of the cheek portion may be used. In the blue component in the cheek color, the sixth subtraction result obtained by subtracting the determination reference feature amount from the second analysis feature amount (analysis feature amount of the second feature amount) is a negative value greater than or equal to a predetermined sixth determination threshold value. In some cases, it is determined that there is a possibility of jaundice. It is determined that there is a possibility of cirrhosis when the seventh subtraction result obtained by subtracting the determination reference feature amount from the second analysis feature amount is a negative value that is equal to or greater than a predetermined seventh determination threshold value in lightness in the cheek color. Is done. As for the sixth and seventh determination thresholds, a plurality of setting values corresponding to the difference in skin color are appropriately set from a plurality of samples, similarly to the first to fifth determination thresholds described above. Even when analyzing the possibility of jaundice and the possibility of cirrhosis, a normal range (fourth normal range) similar to the first to third normal ranges may be provided. Further, the fourth normal range is not only based on the past physical condition information, but may be adjusted according to, for example, color black or white. Alternatively, in addition to or in addition to the above, since the possibility of osteoporosis can be analyzed appropriately, the feature amount may be the eye height position. It is determined that there is a possibility of osteoporosis when the eighth subtraction result obtained by subtracting the determination reference feature value from the analysis feature value at the eye height position is a negative value equal to or greater than a predetermined eighth determination threshold value. The setting value of the eighth determination threshold is appropriately set from a plurality of samples, and is set to several centimeters such as 1 cm, 2 cm, and 3 cm, for example.

また、上述の実施形態において、身体状態分析装置Dは、図1に破線で示すように、撮像部3で撮像した複数の分析対象画像から複数の前記特徴量を求め、この求めた前記複数の特徴量の平均値を前記判定基準特徴量として求め、この求めた前記判定基準特徴量を基準特徴量記憶部62に記憶する判定基準特徴量生成部57を、制御処理部5に機能的にさらに備えても良い。例えば、判定基準特徴量生成部57は、上述の処理S505を実行する前に、または、上述の処理S505を実行した後に、処理S3において撮像部3で撮像した分析対象画像から前記特徴量を求め、この求めた前記特徴量と、使用者判定部52で判定された使用者識別情報の使用者Obにおける、基準特徴量記憶部62に記憶された判定基準特徴量との平均値を求め、この求めた平均値で基準特徴量記憶部62に記憶されていた判定基準特徴量を更新し記憶する。これによれば、使用者個々人の日々の変化に応じて判定基準特徴量が微調整され、より適正に身体状態が分析できる。また、前記準備期間中における判定基準特徴量の生成を、この判定基準特徴量生成部57が実施しても良い。   Moreover, in the above-mentioned embodiment, as shown with the broken line in FIG. 1, the body condition analyzer D calculates | requires several said feature-value from the some analysis object image imaged by the imaging part 3, and the said some obtained | required these some The control processing unit 5 is further functionally provided with a determination reference feature amount generation unit 57 that obtains an average value of feature amounts as the determination reference feature amount and stores the obtained determination reference feature amount in the reference feature amount storage unit 62. You may prepare. For example, the determination criterion feature value generation unit 57 obtains the feature value from the analysis target image captured by the imaging unit 3 in the process S3 before the process S505 described above or after the process S505 described above. Then, an average value of the obtained feature amount and the determination reference feature amount stored in the reference feature amount storage unit 62 in the user Ob of the user identification information determined by the user determination unit 52 is obtained. The determination reference feature quantity stored in the reference feature quantity storage unit 62 is updated and stored with the obtained average value. According to this, the criterion characteristic amount is finely adjusted according to the daily change of each individual user, and the physical state can be analyzed more appropriately. Further, the determination reference feature quantity generation unit 57 may generate the determination reference feature quantity during the preparation period.

また、上述の実施形態において、身体状態分析装置Dに端末装置PCを通信可能に接続しておき、処理S502の判定の結果、前記照合画像に一致する使用者識別情報(登録画像)が存在しない場合(No)に、身体状態分析装置Dは、新規に使用者を登録する処理を、処理S503の実行前に、実施しても良い。この新規に使用者を登録する処理では、まず、身体状態分析装置Dは、制御処理部5によって、新規登録するか否かのメッセージを端末装置PCに表示させ、返信を待機する。端末装置PCの返信が新規登録しないを意味する場合には、制御処理部5は、次に、処理S503を実行し、一方、端末装置PCの返信が新規登録するを意味する場合には、制御処理部5は、処理S3において撮像部3で撮像して取得した分析対象画像に基づいて使用者識別情報(照合画像)を生成し、使用者名、基本属性情報および過去身体状態情報の入力を促すメッセージを端末装置PCに表示させ、返信を待機する。この返信を受信すると、制御処理部5は、ベース情報テーブルTBに、新たなレコードを生成し、この新たに生成したレコードにおける使用者名フィールド611、基本属性情報フィールド612、使用者識別情報フィールド621および過去身体状態情報フィールド623それぞれに、使用者名、基本属性情報、使用者識別情報(照合画像)および過去身体状態情報それぞれを登録する。制御処理部5は、この基本属性情報に応じた第5判定閾値を前記新たに生成された判定閾値フィールド624に登録する。なお、過去身体状態情報は、上述と同様に、電子カルテを管理するサーバ装置SVから、使用者名を検索キーに検索され、ダウンロードされ、過去身体状態情報フィールド623に登録されても良い。そして、判定基準特徴量を生成する所定の準備期間が開始され、制御処理部5は、次に、処理S503を実行する。そして、前記所定の準備期間が経過すると、制御処理部5は、この準備期間中に求められた複数の前記所定の特徴量の平均値を判定基準特徴量として求め、これを、前記使用者識別情報を使用者識別情報フィールド621に登録するレコード、あるいは、前記使用者名を使用者名フィールド611に登録するレコードにおける判定基準特徴量フィールド622に登録する。このように新規に使用者を登録する処理が実行される。   In the above-described embodiment, the terminal apparatus PC is communicably connected to the body condition analyzer D, and as a result of the determination in step S502, there is no user identification information (registered image) that matches the collation image. In the case (No), the body condition analyzer D may perform a process of newly registering a user before the execution of the process S503. In the process of newly registering a user, first, the body condition analysis apparatus D causes the control processing unit 5 to display a message as to whether or not to newly register on the terminal device PC, and waits for a reply. If the reply of the terminal device PC means that new registration is not performed, the control processing unit 5 next executes step S503. On the other hand, if the reply of the terminal device PC means that new registration is performed, control is performed. The processing unit 5 generates user identification information (collation image) based on the analysis target image captured and acquired by the imaging unit 3 in step S3, and inputs the user name, basic attribute information, and past physical condition information. A prompt message is displayed on the terminal device PC, and a reply is waited for. Upon receiving this reply, the control processing unit 5 generates a new record in the base information table TB, and a user name field 611, basic attribute information field 612, and user identification information field 621 in the newly generated record. The user name, basic attribute information, user identification information (collation image), and past physical condition information are registered in the past physical condition information field 623, respectively. The control processing unit 5 registers the fifth determination threshold corresponding to the basic attribute information in the newly generated determination threshold field 624. The past physical condition information may be retrieved from the server device SV that manages the electronic medical record using the user name as a search key, downloaded, and registered in the past physical condition information field 623, as described above. And the predetermined preparation period which produces | generates a determination reference | standard feature-value is started, and the control process part 5 performs process S503 next. Then, when the predetermined preparation period has elapsed, the control processing unit 5 obtains an average value of the plurality of predetermined feature amounts obtained during the preparation period as a determination reference feature amount, which is determined as the user identification. A record for registering information in the user identification information field 621 or a record for registering the user name in the user name field 611 is registered in the determination criterion feature field 622. In this way, a process for newly registering a user is executed.

本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および/または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。   In order to express the present invention, the present invention has been properly and fully described through the embodiments with reference to the drawings. However, those skilled in the art can easily change and / or improve the above-described embodiments. It should be recognized that this is possible. Therefore, unless the modifications or improvements implemented by those skilled in the art are at a level that departs from the scope of the claims recited in the claims, the modifications or improvements are not covered by the claims. To be construed as inclusive.

D 身体状態分析装置
1 ミラー
2(2−1、2−2) 照明部
3 撮像部
4 表示部
5 制御処理部
6 記憶部
7 通信インターフェース部(通信IF部)
51 制御部
52 使用者判定部
53 特徴量処理部
54 分析部
55 識別情報更新部
56 正常範囲調整部
57 判定基準特徴量生成部
61 識別情報記憶部
62 基準特徴量記憶部
63 過去身体状態情報記憶部
64 閾値記憶部
65 正常範囲記憶部
66 基準色記憶部
D Body condition analyzer 1 Mirror 2 (2-1, 2-2) Illuminating unit 3 Imaging unit 4 Display unit 5 Control processing unit 6 Storage unit 7 Communication interface unit (communication IF unit)
51 Control Unit 52 User Determination Unit 53 Feature Amount Processing Unit 54 Analysis Unit 55 Identification Information Update Unit 56 Normal Range Adjustment Unit 57 Determination Criteria Feature Amount Generation Unit 61 Identification Information Storage Unit 62 Reference Feature Amount Storage Unit 63 Past Physical State Information Storage Unit 64 threshold storage unit 65 normal range storage unit 66 reference color storage unit

Claims (6)

ミラーと、
前記ミラーの前方を撮像して画像を分析対象画像として生成する撮像部と、
使用者を特定し識別するための使用者識別情報を記憶する識別情報記憶部と、
前記撮像部で撮像した分析対象画像に基づいて前記識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定する使用者判定部と、
前記使用者における、病理診断に用いる所定の特徴量であって身体状態を分析する際の判定基準となる前記特徴量を判定基準特徴量として記憶する基準特徴量記憶部と、
前記撮像部で撮像した分析対象画像から前記特徴量を分析時特徴量として求める特徴量処理部と、
前記使用者判定部で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定部で判定された使用者識別情報の使用者における、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた前記分析時特徴量とに基づいて、身体状態を分析する分析部と、
前記分析部で分析された身体状態の分析結果を外部に出力する出力部とを備える、
身体状態分析装置。
Mirror,
An imaging unit that images the front of the mirror and generates an image as an analysis target image;
An identification information storage unit for storing user identification information for identifying and identifying a user;
A user determination unit that determines whether the user is the user of the user identification information stored in the identification information storage unit based on the analysis target image captured by the imaging unit;
A reference feature amount storage unit that stores the feature amount that is a predetermined feature amount used for pathological diagnosis in the user and that serves as a determination reference when analyzing a physical state, as a determination reference feature amount;
A feature amount processing unit for obtaining the feature amount as an analysis-time feature amount from an analysis target image captured by the imaging unit;
When it is determined that the user is a user of the user identification information stored in the identification information storage unit by the user determination unit, in the user of the user identification information determined by the user determination unit, An analysis unit that analyzes a physical state based on the determination criterion feature amount stored in the reference feature amount storage unit and the analysis-time feature amount obtained by the feature amount processing unit;
An output unit for outputting the analysis result of the physical state analyzed by the analysis unit to the outside,
Body condition analyzer.
前記使用者識別情報は、前記使用者の顔を写し込んだ顔画像であり、
前記使用者判定部は、顔認証技術によって、前記撮像部で撮像した分析対象画像に基づいて前記識別情報記憶部に記憶された使用者識別情報の使用者か否かを判定し、
前記使用者判定部で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定部で判定された前記使用者識別情報の使用者における、前記識別情報記憶部に記憶されている使用者識別情報を、前記撮像部で撮像した分析対象画像に基づいて更新して前記識別情報記憶部に記憶する識別情報更新部をさらに備える、
請求項1に記載の身体状態分析装置。
The user identification information is a face image in which the user's face is copied,
The user determination unit determines whether or not the user is a user of the user identification information stored in the identification information storage unit based on an analysis target image captured by the imaging unit by using a face authentication technique.
When it is determined that the user is a user of the user identification information stored in the identification information storage unit by the user determination unit, in the user of the user identification information determined by the user determination unit, An identification information updating unit that updates the user identification information stored in the identification information storage unit based on the analysis target image captured by the imaging unit and stores the updated information in the identification information storage unit;
The body condition analyzer according to claim 1.
前記使用者における、身体状態の分析に用いる判定閾値を記憶する閾値記憶部をさらに備え、
前記分析部は、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた分析時特徴量との差を求め、この求めた差と、前記使用者判定部で判定された使用者識別情報の使用者における、前記閾値記憶部に記憶された判定閾値と、を比較することによって、身体状態を分析する、
請求項1または請求項2に記載の身体状態分析装置。
A threshold storage unit that stores a determination threshold used for analyzing the physical condition of the user is further provided,
The analysis unit obtains a difference between the determination reference feature amount stored in the reference feature amount storage unit and an analysis feature amount obtained by the feature amount processing unit, and the obtained difference and the user determination Analyzing the physical state by comparing the determination threshold stored in the threshold storage unit in the user of the user identification information determined by the unit;
The body condition analysis apparatus according to claim 1 or 2.
前記分析部は、前記特徴量処理部で求めた前記分析時特徴量が所定の正常範囲内であるか否かを判定することによって、前記身体状態が正常であるか否かを判定し、
前記使用者における、カルテの内容を表す電子カルテ情報、および、前記使用者における、健康診断の結果を表す健康診断結果情報のうちの少なくとも一方を過去身体状態情報として記憶する過去身体状態情報記憶部と、
前記使用者判定部で判定された使用者識別情報の使用者における、前記過去身体状態情報記憶部に記憶された過去身体状態情報に基づいて、前記正常範囲を調整する正常範囲調整部とをさらに備える、
請求項1または請求項2に記載の身体状態分析装置。
The analysis unit determines whether the physical condition is normal by determining whether the analysis-time feature value obtained by the feature value processing unit is within a predetermined normal range,
A past physical condition information storage unit that stores at least one of electronic medical record information representing the contents of a medical chart in the user and health check result information representing a result of a health check in the user as past physical condition information When,
A normal range adjustment unit that adjusts the normal range based on past physical state information stored in the past physical state information storage unit for the user of the user identification information determined by the user determination unit; Prepare
The body condition analysis apparatus according to claim 1 or 2.
前記特徴量は、第1特徴量と、前記第1特徴量の成分である第2特徴量とを備え、
前記特徴量処理部は、前記第1および第2特徴量それぞれを第1および第2分析時特徴量それぞれとして求め、
前記分析部は、前記特徴量処理部で求めた前記第1分析時特徴量が所定の正常範囲内であるか否かを判定することによって、前記身体状態が正常であるか否かを判定し、
前記分析部は、前記正常範囲内ではないと判定した場合に、前記基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理部で求めた第2分析時特徴量との差を求め、この求めた差と、前記使用者判定部で判定された使用者識別情報の使用者における、前記閾値記憶部に記憶された判定閾値と、を比較することによって、身体状態を分析する、
請求項3を引用する請求項4に記載の身体状態分析装置。
The feature amount includes a first feature amount and a second feature amount that is a component of the first feature amount,
The feature amount processing unit obtains the first and second feature amounts as first and second analysis feature amounts, respectively.
The analysis unit determines whether or not the physical state is normal by determining whether or not the first analysis feature amount obtained by the feature amount processing unit is within a predetermined normal range. ,
When the analysis unit determines that it is not within the normal range, the determination reference feature amount stored in the reference feature amount storage unit and the second analysis feature amount obtained by the feature amount processing unit A physical condition is analyzed by determining a difference and comparing the determined difference with a determination threshold value stored in the threshold value storage unit in the user of the user identification information determined by the user determination unit. To
The body condition analysis apparatus according to claim 4, which refers to claim 3.
ミラーに設けられた撮像部によって、前記ミラーの前方を撮像して画像を分析対象画像として生成する撮像工程と、
前記撮像工程で撮像した分析対象画像に基づいて、使用者を特定し識別するための使用者識別情報を記憶する識別情報記憶部に記憶された前記使用者識別情報の使用者か否かを判定する使用者判定工程と、
前記撮像工程で撮像した分析対象画像から、病理診断に用いる所定の特徴量を分析時特徴量として求める特徴量処理工程と、
前記使用者判定工程で前記識別情報記憶部に記憶された使用者識別情報の使用者であると判定された場合に、前記使用者判定工程で判定された使用者識別情報の使用者における、身体状態を分析する際の判定基準となる前記特徴量を判定基準特徴量として記憶する基準特徴量記憶部に記憶された前記判定基準特徴量と、前記特徴量処理工程で求めた前記分析時特徴量とに基づいて、身体状態を分析する分析工程と、
前記分析工程で分析された身体状態の分析結果を外部に出力する出力工程とを備える、
身体状態分析方法。
An imaging step of imaging the front of the mirror and generating an image as an analysis target image by an imaging unit provided in the mirror;
Based on the analysis target image captured in the imaging step, it is determined whether or not the user is the user of the user identification information stored in the identification information storage unit that stores user identification information for identifying and identifying the user. A user determination process to perform,
A feature amount processing step for obtaining a predetermined feature amount used for pathological diagnosis as a feature amount during analysis from the analysis target image captured in the imaging step,
When it is determined that the user is the user of the user identification information stored in the identification information storage unit in the user determination step, the user's body of the user identification information determined in the user determination step The determination reference feature quantity stored in a reference feature quantity storage unit that stores the feature quantity as a determination reference feature quantity when analyzing the state, and the analysis feature quantity obtained in the feature quantity processing step Based on the analysis process of analyzing the physical state,
An output step of outputting the analysis result of the physical condition analyzed in the analysis step to the outside,
Body condition analysis method.
JP2017088364A 2017-04-27 2017-04-27 Physical condition analyzer and the program Active JP7056008B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017088364A JP7056008B2 (en) 2017-04-27 2017-04-27 Physical condition analyzer and the program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017088364A JP7056008B2 (en) 2017-04-27 2017-04-27 Physical condition analyzer and the program

Publications (2)

Publication Number Publication Date
JP2018183509A true JP2018183509A (en) 2018-11-22
JP7056008B2 JP7056008B2 (en) 2022-04-19

Family

ID=64357227

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017088364A Active JP7056008B2 (en) 2017-04-27 2017-04-27 Physical condition analyzer and the program

Country Status (1)

Country Link
JP (1) JP7056008B2 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009153609A (en) * 2007-12-25 2009-07-16 Panasonic Electric Works Co Ltd Health management system
JP2012010955A (en) * 2010-06-30 2012-01-19 Terumo Corp Health condition monitoring device
JP2012130520A (en) * 2010-12-21 2012-07-12 Shimizu Corp Healthcare sanitary room
JP2013081601A (en) * 2011-10-07 2013-05-09 Topcon Corp Ophthalmic information processing system, ophthalmic information processing server, and ophthalmic information processing method
US20140121540A1 (en) * 2012-05-09 2014-05-01 Aliphcom System and method for monitoring the health of a user
JP2014180305A (en) * 2013-03-18 2014-09-29 Funai Electric Co Ltd Information terminal device
WO2016163019A1 (en) * 2015-04-10 2016-10-13 株式会社日立製作所 Biological information analyzing system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009153609A (en) * 2007-12-25 2009-07-16 Panasonic Electric Works Co Ltd Health management system
JP2012010955A (en) * 2010-06-30 2012-01-19 Terumo Corp Health condition monitoring device
JP2012130520A (en) * 2010-12-21 2012-07-12 Shimizu Corp Healthcare sanitary room
JP2013081601A (en) * 2011-10-07 2013-05-09 Topcon Corp Ophthalmic information processing system, ophthalmic information processing server, and ophthalmic information processing method
US20140121540A1 (en) * 2012-05-09 2014-05-01 Aliphcom System and method for monitoring the health of a user
JP2014180305A (en) * 2013-03-18 2014-09-29 Funai Electric Co Ltd Information terminal device
WO2016163019A1 (en) * 2015-04-10 2016-10-13 株式会社日立製作所 Biological information analyzing system

Also Published As

Publication number Publication date
JP7056008B2 (en) 2022-04-19

Similar Documents

Publication Publication Date Title
CN102458220B (en) Shape discrimination vision assessment and the system of tracking
KR102420100B1 (en) Electronic apparatus for providing health status information, method for controlling the same, and computer-readable storage medium
KR101998595B1 (en) Method and Apparatus for jaundice diagnosis based on an image
US10945637B2 (en) Image based jaundice diagnosing method and apparatus and image based jaundice diagnosis assisting apparatus
KR102469720B1 (en) Electronic device and method for determining hyperemia grade of eye using the same
CN109286748A (en) The method of mobile system and eye imaging
JP2014180305A (en) Information terminal device
CN109661668B (en) Image processing method and system for iris recognition
CN104837404B (en) The medical supply or system of hemoglobin level are measured during accident using camera-projector system
KR101789166B1 (en) Method and Apparatus for jaundice diagnosis based on an image, Assisting Apparatus for jaundice diagnosis based on an image
EP3434172B1 (en) Eyesight examination method, eyesight examination device, and downloader server for storing program of eyesight examination method
US20200065609A1 (en) System And Method For Correcting Color Of Digital Image Based On The Human Sclera And Pupil
TWI718142B (en) Display apparatus and non-transitory computer readable medium
KR20220068330A (en) User personalized recommendation method based on skin diagnosis and appatratus thereof
WO2007125794A1 (en) Data measuring device and data measuring method
Czajka Influence of iris template aging on recognition reliability
KR20200084383A (en) Method for utilizing genetic information and electronic device thereof
JP2018183509A (en) Body condition analysis apparatus and method
WO2022201379A1 (en) Control device, computer program, and non-transitory computer-readable medium
CN111753628B (en) Training eye tracking model
WO2015170720A1 (en) Image recognition device and image recognition method
JP2012014650A (en) Mental/physical condition control apparatus
CN113631094A (en) System, device, method, and computer program for determining physical and mental states
CN111210438A (en) Mirror
JP2021010652A (en) Information processing device, evaluation method, and information processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200402

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210413

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210914

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211021

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220321

R150 Certificate of patent or registration of utility model

Ref document number: 7056008

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150