JP2024019863A - 健康情報評価システム及び健康情報評価方法 - Google Patents

Abstract

【課題】生体組織が水中にあっても水の影響を受けることなく評価することが可能な健康情報評価システム及び健康情報評価方法を提供する。【解決手段】ユーザの生体組織を含む画像を取得する取得手段と、前記取得手段により取得された画像に基づくスペクトル画像を取得するスペクトル取得手段と、前記スペクトル取得手段により取得されたスペクトル画像に基づき、前記ユーザの健康情報を評価する評価手段とを備えることを特徴とする。【選択図】図１

Description

本発明は、健康情報評価システム及び健康情報評価方法に関する。

従来からユーザの生体組織に基づいて、ユーザの健康情報を評価することが行われている。例えば大腸がん検診において、ユーザの生体組織である便に基づいて、大腸がんの検診を行う場合がある。このとき、便から直接採取し容器へ入れること、２日分採取すること、気温の高い時期は冷蔵保存が必要であること、検診時にしか検査できないこと、分析の際に特殊機器を要すること等の理由により、検査の準備や検査、分析に手間を要する。このために検査の実施率が下がり大腸がんの早期発見の機会を逸する可能性がある。このため、簡易的に実施できる生体組織検査の技術が注目されている。

簡易的に実施できる生体組織検査の方法として、例えば特許文献１に開示されている人体排泄物の解析方法がある。

特許文献１では、人体排泄物が便器内に置かれている間、１以上の光センサを用いて便器からの光を受け取り、解析することによって、赤血球の成分による光吸収を示す１以上のスペクトル成分を受光内で検出し、人体排泄物内に血液が存在すると判定する方法が開示されている。

特許６７５８３０８号公報

しかしながら、特許文献１に開示されている人体排泄物の解析方法では、人体排泄物が便器内に置かれていることを前提としている。このため、便が水中にある場合、又は便が下痢の状態では検出ができないという問題点があった。

そこで本発明は、上述した問題点を解決するために導出されたものであり、その目的とするところは、生体組織が水中にあっても水の影響を受けることなく評価することが可能な健康情報評価システム及び健康情報評価方法を提供することにある。

第１発明に係る健康情報評価システムは、ユーザの生体組織を含む画像を取得する取得手段と、前記取得手段により取得された画像に基づくスペクトル画像を取得するスペクトル取得手段と、前記スペクトル取得手段により取得されたスペクトル画像に基づき、前記ユーザの健康情報を評価する評価手段とを備えることを特徴とする。

第２発明に係る健康情報評価システムは、第１発明において、前記評価手段は、前記スペクトル取得手段により取得されたスペクトル画像に基づき、所定の波長範囲に含まれる特定波長を正規化波長とし、所定の波長範囲に含まれる特定波長を評価波長として選択し、前記正規化波長と前記評価波長との間において、前記正規化波長と前記評価波長との分光強度の差に基づいて前記ユーザの健康情報を評価することを特徴とする。

第３発明に係る健康情報評価システムは、第２発明において、前記評価手段は、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１正規化波長とし、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１評価波長として選択することを特徴とする。

第４発明に係る健康情報評価システムは、第１発明において、前記評価手段は、予め取得された参照用スペクトル画像と健康情報とからなるデータセットを学習データとして用い、入力を前記参照用スペクトル画像とし、出力を前記健康情報として、機械学習により生成された評価モデルを用いて、前記スペクトル取得手段により取得されたスペクトル画像に基づき、前記ユーザの健康状態を評価することを特徴とする。

第５発明に係る健康情報評価システムは、第１発明において、前記スペクトル取得手段は、取得した前記スペクトル画像から、予め取得された生体組織の波長を示す基準波長との差分が閾値以下となる波長を抽出し、抽出した前記波長を示すスペクトル画像を取得することを特徴とする。

第６発明に係る健康情報評価システムは、第１発明において、前記スペクトル取得手段は、予め取得された参照用スペクトル画像と生体組織を示すスペクトル画像とからなるデータセットを学習データとして用い、入力を前記参照用スペクトル画像とし、出力を前記生体組織を示すスペクトル画像として、機械学習により生成された抽出モデルを用いて、取得した前記スペクトル画像に基づいて、前記生体組織を示すスペクトル画像を取得することを特徴とする。

第７発明に係る健康情報評価システムは、第１発明において、前記取得手段は、前記生体組織に照射される光を含む光源画像をさらに取得し、前記スペクトル取得手段は、前記取得手段により取得された前記光源画像に対する前記画像の相対反射率に基づくスペクトル画像を取得することを特徴とする。

第８発明に係る健康情報評価システムは、第７発明において、前記取得手段は、前記光源画像を撮像したときの撮像条件を示す撮像条件情報を取得し、取得した撮像条件情報に応じて、前記画像を補正することを特徴とする。

第９発明に係る健康情報評価システムは、第１発明において、前記生体組織に２以上の波長を含む光を照射する照射手段をさらに備え、前記取得手段は、前記照射手段により前記２以上の各波長の光が照射された生体組織を含む画像をそれぞれ取得し、前記スペクトル取得手段は、前記取得手段により取得されたそれぞれの画像に基づくスペクトル画像をそれぞれ取得し、前記評価手段は、前記スペクトル取得手段により取得されたそれぞれのスペクトル画像に基づき、前記ユーザの健康状態を評価することを特徴とする。

第１０発明に係る健康情報評価システムは、第１発明において、前記取得手段は、前記ユーザの状態毎にそれぞれ異なる生体情報を含む画像をそれぞれ取得し、前記スペクトル取得手段は、前記取得手段により取得されたそれぞれの画像に基づくスペクトル画像をそれぞれ取得し、前記評価手段は、前記スペクトル取得手段により取得されたそれぞれのスペクトル画像に基づき、前記ユーザの健康状態を評価することを特徴とする。

第１１発明に係る健康情報評価システムは、第１発明において、前記取得手段は、前記ユーザに関するユーザ情報をさらに取得し、前記評価手段は、前記スペクトル取得手段により取得されたスペクトル画像と前記取得手段により取得されたユーザ情報とに基づき、前記ユーザの健康状態を評価することを特徴とする。

第１２発明に係る健康情報評価方法は、ユーザの生体組織を含む画像を取得する取得ステップと、前記取得ステップにより取得された画像に基づくスペクトル画像を取得するスペクトル取得ステップと、前記スペクトル取得ステップにより取得されたスペクトル画像に基づき、前記ユーザの健康情報を評価する評価ステップとをコンピュータに実行させることを特徴とする。

第１発明～第１２発明によれば、健康情報評価システム及び健康情報評価方法は、スペクトル画像に基づき、ユーザの健康情報を評価する。これにより、生体組織が水中にあっても水の影響を受けることなくユーザの健康情報を評価することができる。

特に、第２発明によれば、正規化波長と評価波長との分光強度の差に基づいてユーザの健康情報を評価する。これにより、撮像されたスペクトル画像の特徴を分離することができる。このため、より高精度にユーザの健康情報を評価することができる。

特に、第３発明によれば、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１正規化波長とし、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１評価波長として選択する。これにより、第１正規化波長と第１評価波長とをそれぞれ適した周波数帯の波長を利用できるため、より正確に評価することが可能となる。

特に、第４発明によれば、評価モデルを用いて、スペクトル画像に基づき、ユーザの健康情報を評価する。これにより、機械学習により高精度にユーザの健康情報を評価することが可能となる。

特に、第５発明によれば、画像から、予め取得された生体組織の波長を示す基準波長との差分が閾値以下となる波長を抽出し、抽出した波長を示すスペクトル画像を取得する。これにより、スペクトル画像に含まれる生体組織のみを抽出し、その他のノイズを排除することが可能となるため、より高精度にユーザの健康情報の評価が可能となる。

特に、第６発明によれば、抽出モデルを用いて、スペクトル画像に基づいて、生体組織を示すスペクトル画像を取得する。これにより、スペクトル画像に含まれる生体組織のみを抽出し、その他のノイズを排除することが可能となるため、より高精度にユーザの健康情報の評価が可能となる。

第７発明によれば、光源画像に対する画像の相対反射率に基づくスペクトル画像を取得する。これにより、光源画像を基準としてスペクトル画像を取得するため、ノイズを排除した画像を用いることが可能となる。

第８発明によれば、撮像条件情報を取得し、取得した撮像条件情報に応じて、画像を補正する。これにより、撮影時の光量等の条件を補正することが可能となり、ノイズを排除した画像を用いることが可能となる。

第９発明によれば、それぞれのスペクトル画像の比較に基づき、ユーザの健康情報を評価する。これにより、各波長の光源を用いた場合のスペクトル画像の特徴を考慮することが可能となる。このため、より高精度にユーザの健康情報を評価することができる。

第１０発明によれば、それぞれのスペクトル画像に基づき、ユーザの健康情報を評価する。これにより、ユーザの状態毎のスペクトル画像の変化を考慮することが可能となる。このため、より高精度にユーザの健康情報を評価することができる。

第１１発明によれば、スペクトル画像とユーザ情報とに基づき、ユーザの健康情報を評価する。これにより、ユーザの情報を考慮してユーザの健康情報を評価することが可能となる。

図１は、本実施形態における健康情報評価システムの構成の一例を示す模式図である。 図２（ａ）は、本実施形態における健康情報評価装置の構成の一例を示す模式図であり、図２（ｂ）は、本実施形態における健康情報評価装置の機能の一例を示す模式図である。 図３は、本実施形態における健康情報評価システムの動作のフローチャートの一例を示す図である。 図４（ａ）は、本実施形態における５００ｎｍ～５５０ｎｍの波長の光を照射した場合のスペクトル画像の一例を示す図であり、図４（ｂ）は、本実施形態における５４０ｎｍ～６００ｎｍの波長の光を照射した場合のスペクトル画像の一例を示す図であり、図４（ｃ）は、本実施形態における６００ｎｍ～７５０ｎｍの波長の光を照射した場合のスペクトル画像の一例を示す図であり、図４（ｄ）は、本実施形態における生体組織のスペクトル画像の一例を示す図である。 図５は、本実施形態における抽出モデルの一例を示す図である。 図６は、波長毎のスペクトル強度の一例を示すグラフである。 図７は、本実施形態における評価モデルの一例を示す図である。 図８は、本実施形態におけるユーザ情報を考慮した評価モデルの一例を示す図である。

以下、本発明を適用した実施形態における健康情報評価システムの一例について、図面を用いて説明する。

図１は、健康情報評価システム１００の構成の一例を示す模式図である。健康情報評価システム１００は、例えば図１に示すように、健康情報評価装置１と、サーバ３と、撮像装置５と照明器具６とを有するユーザ端末２とが公共通信網４を介して接続される。また、健康情報評価システム１００は、公共通信網４を介することなく接続された、健康情報評価装置１と撮像装置５とのみを備えていてもよい。

サーバ３は、健康情報評価装置１及びユーザ端末２から送信された画像等の各種データを記憶する記憶媒体である。また、サーバ３は、必要に応じて記憶した各種データを健康情報評価装置１及びユーザ端末２に送信する。サーバ３は、例えば健康情報評価装置１の備える機能のうち、少なくとも一部の機能を備えてもよく、例えば健康情報評価装置１の代わりに少なくとも一部の処理を行ってもよい。

公共通信網４は、例えば健康情報評価装置１が通信回路を介して接続されるインターネット網等である。公共通信網４は、いわゆる光ファイバ通信網で構成されてもよい。また、公共通信網４は、有線通信網のほか、無線通信網等の公知の通信技術で実現してもよい。

ユーザ端末２は、例えば健康情報評価システム１００を用いたサービスのユーザ等が保有し、公共通信網４を介して健康情報評価装置１と接続される。ユーザ端末２は、例えばデータベースを生成する電子機器を示してもよい。ユーザ端末２は、例えばパーソナルコンピュータや、タブレット端末等の電子機器が用いられる。ユーザ端末２は、例えば健康情報評価装置１の備える機能のうち、少なくとも一部の機能を備えてもよい。ユーザ端末２は、ユーザに健康情報の評価結果を提示できる図示しないディスプレイ、又はスピーカを備えていてもよい。

照明器具６は、撮像装置５によるユーザの生体組織を含む画像を撮像する際に、生体組織７を照らす任意の照明器具である。照明器具６は、例えばＬＥＤ（Light Emitting Diode）であってもよい。照明器具６は、任意の波長の光を照射してもよい。また、照明器具６は、２以上の波長を含む光を照射してもよい。例えば照明器具６は、５１５ｎｍ、５９５ｎｍ、７３０ｎｍの３波長の光をそれぞれ照射が可能な照明器具であってもよい。また、照明器具６は、５００ｎｍ～５５０ｎｍ、５４０ｎｍ～６００ｎｍ、６００ｎｍ～７５０ｎｍのうちの何れかの３波長の光をそれぞれ照射が可能な照明器具であってもよい。また、照明器具６は、９００ｎｍ～１３００ｎｍの任意の波長の光と、１３００ｎｍ～１７００ｎｍの任意の波長の光とを照射できる照明器具であってもよい。また、照明器具６は、９８０ｎｍ及び１３６０ｎｍ、９８０ｎｍ及び１４００ｎｍ、１２００ｎｍ及び１３８０ｎｍ、又は１２００ｎｍ及び１６５０ｎｍのうちの何れかの組み合わせの波長の光が照射可能な照明器具であってもよい。また、照明器具６は、９５０ｎｍ～１０００ｎｍ、１０５０ｎｍ～１１００ｎｍ、１３５０ｎｍ～１４５０ｎｍのうちの何れかの３波長の光がそれぞれ照射された皮膚の画像を取得してもよい。また、照明器具６は、１１５０ｎｍ～１２５０ｎｍ、１３５０ｎｍ～１４５０ｎｍ、１６００ｎｍ～１７００ｎｍのうちの何れかの３波長の光がそれぞれ照射された皮膚の画像を取得してもよい。また、照明器具６は、例えばユーザの生体組織である便に光を照射するために便器に備えられてもよい。かかる場合。照明器具６は、撮像装置５と共に便器に取り外しができるアタッチメント器具として便器に電池と共に設置されてもよい。また、照明器具６は、撮像装置５と共に便器のウォシュレットのノズルに取り付けられてもよい。また、かかる場合、照明器具６と撮像装置５とはそれぞれ異なるノズルに設けられてもよい。また、照明器具６は、撮像装置５と共に便器のウォシュレットのノズルに取り付けられた場合、ユーザがボタンを押すことで作動するようにしてもよい。これにより、ユーザの意志により健康情報評価システム１００を利用することが可能となるので、ユーザのプライバシーの保護が可能となる。また、照明器具６は、撮像装置５と共に便座に取り付けられてもよい。かかる場合、便座をとりかえることにより、便器に照明器具６を取り付けることができる。また、照明器具６は、撮像装置５と共に便器に組み込まれてもよい。また、照明器具６は、撮像装置５と共にスマートフォン、眼鏡型携帯等の外部の電子機器に取り付けられてもよい。また、照明器具６は、撮像装置５と共に懐中電灯等に取り付けられてもよい。また、照明器具６は、撮像装置５と共に便器がある部屋の照明として取り付けられてもよい。また、照明器具６は、撮像装置５と共に壁や天井に埋め込まれてもよい。また、照明器具６は、撮像装置５と共にディスプレイ等に取り付けられてもよい。また、照明器具６は、撮像装置５と共にユーザの口腔から体内に挿入できるカプセル等に取り付けられてもよい。

撮像装置５は、ユーザの生体組織を撮像して画像及びスペクトル画像を生成する公知のカメラである。撮像装置５として、例えばＲＧＢカメラ、マルチスペクトルカメラ、ターゲットスペクトルカメラ、ハイパースペクトルカメラ等が用いられてもよい。また、撮像装置５は、特定波長の光の強度を示すモノクロが画像を撮像するカメラであってもよい。撮像装置５は、例えば特定波長の光の強度を測定する受光センサであってもよい。撮像装置５は、例えば動画を撮影するビデオカメラであってもよく、健康情報評価装置１に内蔵されてもよい。撮像装置５がスペクトルビデオカメラの場合は、例えば撮像された動画の一部からスペクトル画像が抽出されてもよい。撮像装置５は、撮像した画像をユーザ端末２に出力する。また、撮像装置５は、ユーザ端末２を介することなく、公共通信網４を介して、健康情報評価装置１に撮像した画像を出力してもよい。また、撮像装置５は、ユーザのスマートフォンやスマートグラスに取り付けられてもよい。

生体組織７は、ユーザの生体組織であり、例えばユーザの排泄物である。また、生体組織７は、例えばユーザの便、尿、血尿、蛋白尿、糖尿、痰、血液、汗、唾液等であってもよい。また、生体組織は、例えばユーザの顔、腕等の任意の部位の皮膚であってもよい。また、ユーザからテープ等を用いて剥離させた皮膚であってもよい。また、ユーザは、人間に限らず、牛や豚、犬等の動物であってもよい。

健康情報評価装置１は、ユーザ端末２から出力された画像及びスペクトル画像に基づいて、それぞれ処理を行う。健康情報評価装置１は、例えばパーソナルコンピュータ（ＰＣ）等の電子機器が用いられるほか、例えばスマートフォン、タブレット型端末、ウェアラブル端末、ＩｏＴ（Internet of Things）デバイス等の電子機器、Ｒａｓｐｂｅｒｒｙ Ｐｉ（登録商標）等のシングルボードコンピュータが用いられてもよく、例えば撮像装置５が内蔵されてもよい。

健康情報評価装置１は、例えば撮像装置５から出力された生体組織を含む画像を取得し、取得した画像に基づく、スペクトル画像を取得し、取得したスペクトル画像に基づき、ユーザの健康情報を評価する。

次に図２を参照して、本実施形態における健康情報評価装置１の一例を説明する。図２（ａ）は、本実施形態における健康情報評価装置１の構成の一例を示す模式図であり、図２（ｂ）は、本実施形態における健康情報評価装置１の機能の一例を示す模式図である。

健康情報評価装置１は、例えば図２（ａ）に示すように、筐体１０と、ＣＰＵ（Central Processing Unit）１０１と、ＲＯＭ（Read Only Memory）１０２と、ＲＡＭ（Random Access Memory）１０３と、保存部１０４と、Ｉ／Ｆ１０５～１０７とを備える。ＣＰＵ１０１と、ＲＯＭ１０２と、ＲＡＭ１０３と、保存部１０４と、Ｉ／Ｆ１０５～１０７とは、内部バス１１０により接続される。

ＣＰＵ１０１は、健康情報評価装置１全体を制御する。ＲＯＭ１０２は、ＣＰＵ１０１の動作コードを格納する。ＲＡＭ１０３は、ＣＰＵ１０１の動作時に使用される作業領域である。保存部１０４は、画像やスペクトル画像、抽出モデル及び評価モデル等の各種情報が保存される。保存部１０４は、例えばＨＤＤ（Hard Disk Drive）の他、ＳＳＤ（Solid State Drive）やＳＤカード、ｍｉｎｉＳＤカード等のデータ保存装置が用いられる。なお、例えば健康情報評価装置１は、図示しないＧＰＵ（Graphics Processing Unit）を有してもよい。

Ｉ／Ｆ１０５は、公共通信網４を介して各種情報の送受信を行うためのインターフェースである。Ｉ／Ｆ１０６は、入力部１０８との情報の送受信を行うためのインターフェースである。入力部１０８として、例えばキーボードが用いられ、健康情報評価装置１を利用するユーザ等は、入力部１０８を介して、各種情報又は健康情報評価装置１の制御コマンド等を入力する。Ｉ／Ｆ１０７は、表示部１０９との各種情報の送受信を行うためのインターフェースである。表示部１０９は、保存部１０４に保存された評価結果等の各種情報、または健康情報評価装置１の処理状況等を出力する。表示部１０９として、ディスプレイが用いられ、例えばタッチパネル式でもよい。

保存部１０４は、例えば撮像装置５から取得した画像及びスペクトル画像が記憶されるほか、スペクトル画像等に関連する情報、健康情報の評価に用いられるアルゴリズム、抽出モデル及び評価モデル等が記憶される。

表示部１０９は、各種情報を表示する。表示部１０９は、例えば評価結果、画像等を表示する。

図２（ｂ）は、健康情報評価装置１の機能の一例を示す模式図である。健康情報評価装置１は、取得部１１と、画像処理部１２と、評価部１３と、記憶部１４と、出力部１５と、変換部１６と、抽出部１７と、診断部１８とを備える。なお、図２（ｂ）に示した取得部１１と、画像処理部１２と、評価部１３と、記憶部１４と、出力部１５と、変換部１６と、抽出部１７と、診断部１８は、ＣＰＵ１０１が、ＲＡＭ１０３を作業領域として、保存部１０４等に保存されたプログラムを実行することにより実現され、例えば人工知能により制御されてもよい。

取得部１１は、画像及びスペクトル画像を取得する。取得部１１は、撮像装置５が撮像した画像を、ユーザ端末２を介して取得する他、例えば健康情報評価装置１に内蔵された撮像装置５から、画像及びスペクトル画像を取得するようにしてもよい。また、サーバ３等から公共通信網４を介して画像及びスペクトル画像を取得してもよい。なお、取得部１１が各種情報を取得する頻度、及び周期は、任意である。また、取得部１１は、ユーザの状態に関する状態情報を取得してもよい。また、取得部１１は、ユーザに関するユーザ情報を取得してもよい。

画像処理部１２は、取得部１１により取得された画像に補正等の処理を行う。

変換部１６は、画像処理部１２により処理された画像に基づいて、スペクトル画像を取得する。かかる場合、例えば変換部１６は、画像を、画像に含まれるスペクトルを示すスペクトル画像に変換する。

抽出部１７は、変換部１６により取得されたスペクトル画像から、生体組織を示すスペクトル画像を抽出する。

評価部１３は、抽出部１７により抽出されたスペクトル画像に基づき、健康情報を評価する。

診断部１８は、評価部１３により評価された健康情報に基づき、ユーザの健康状態を診断する。

記憶部１４は、保存部１０４に保存された各種情報を必要に応じて取り出す。記憶部１４は、取得部１１と、画像処理部１２と、評価部１３と、変換部１６と、抽出部１７と、診断部１８とにより取得又は出力された各種情報を、保存部１０４に保存する。

出力部１５は、各種情報を出力する。出力部１５は、Ｉ／Ｆ１０７を介して表示部１０９に評価結果を送信する。

次に、本実施形態における健康情報評価システム１００の動作の一例について説明する。図３は、本実施形態における健康情報評価システム１００の動作の一例を示すフローチャートである。

まず、ステップＳ１１０において、取得部１１は、生体組織を含む画像を取得する。かかる場合、例えば撮像装置５により撮像された画像を公共通信網４を介して取得してもよい。また、撮像装置５により、画像を撮像するとき、照明器具６を用いて生体組織に光を照射してもよいがこの限りではなく、照明器具６を用いることなく画像を撮像してもよい。また、例えばサーバ３に記憶されている生体組織を含む画像を、公共通信網４を介して取得してもよい。取得部１１は、撮像装置５により撮像された画像を、Ｉ／Ｆ１０５を介して取得してもよい。取得部１１は、例えば記憶部１４を介して、画像を保存部１０４に保存する。

また、ステップＳ１１０において、取得部１１は、２以上の各波長の光が照射された生体組織を含む画像をそれぞれ取得してもよい。かかる場合、例えば取得部１１は、照明器具６により、５１５ｎｍ、５９５ｎｍ、７３０ｎｍの３波長の光がそれぞれ照射された生体組織の画像をそれぞれ取得してもよい。また、ステップＳ１１０において、取得部１１は、５００ｎｍ～５５０ｎｍ、５４０ｎｍ～６００ｎｍ、６００ｎｍ～７５０ｎｍのうちの何れかの３波長の光がそれぞれ照射された生体組織の画像をそれぞれ取得してもよい。また、ステップＳ１１０において、取得部１１は、各波長の強度を示すモノクロ画像を取得してもよい。また、取得部１１は、２以上の各波長の光が照射された生体組織を撮像し、１の波長の光が照射された生体組織の画像を取得してもよい。かかる場合、例えば５００ｎｍ～５５０ｎｍの波長が含まれる光を照射した生体組織を撮像し、５１５ｎｍの波長の光のみを抽出した画像を取得してもよい。例えば取得部１１は、照明器具６により、９００ｎｍ～１３００ｎｍの任意の波長の光と、１３００ｎｍ～１７００ｎｍの任意の波長の光とがそれぞれ照射された皮膚の画像をそれぞれ取得してもよい。また、ステップＳ１１０において、取得部１１は、９８０ｎｍ及び１３６０ｎｍ、９８０ｎｍ及び１４００ｎｍ、１２００ｎｍ及び１３８０ｎｍ、又は１２００ｎｍ及び１６５０ｎｍのうちの何れかの組み合わせの波長の光が照射された皮膚の画像をそれぞれ取得してもよい。また、照明器具６は、撮像対象となる生体組織の情報に基づいて、生体組織に照射する光の、予め生体情報に紐づけられた波長を決定してもよい。また、ステップＳ１１０において、取得部１１は、皮膚に含まれる水分情報を評価する場合、９５０ｎｍ～１０００ｎｍ、１０５０ｎｍ～１１００ｎｍ、１３５０ｎｍ～１４５０ｎｍのうちの何れかの３波長の光がそれぞれ照射された皮膚の画像を取得してもよい。また、取得部１１は、皮膚に含まれる皮脂情報を評価する場合、１１５０ｎｍ～１２５０ｎｍ、１３５０ｎｍ～１４５０ｎｍ、１６００ｎｍ～１７００ｎｍのうちの何れかの３波長の光がそれぞれ照射された皮膚の画像を取得してもよい。

また、ステップＳ１１０において、取得部１１は、ユーザの状態に関する状態情報と、ユーザの状態毎にそれぞれ異なる生体組織を含む画像をそれぞれ取得してもよい。状態情報は、ユーザの状態に関する情報であり、例えばユーザの健康、病気、疾患、疾患の経過、体調等に関する情報である。かかる場合、例えばステップＳ１１０において、ユーザが健康な状態の場合の生体組織を含む画像と、ユーザが病気の場合の生体組織を含む画像とをそれぞれ取得してもよい。

また、ステップＳ１１０において、取得部１１は、２以上の時点におけるユーザのそれぞれ異なる生体組織を含む画像をそれぞれ取得してもよい。かかる場合、例えばステップＳ１１０において、ある時点におけるユーザの生体組織を含む画像と、日時が異なる時点におけるユーザの生体組織を含む画像とをそれぞれ取得してもよい。

また、ステップＳ１１０において、取得部１１は、ユーザに関するユーザ情報を取得してもよい。ユーザ情報は、ユーザに関する情報であり、例えばユーザの状態情報、年齢、性別、持病等に関する情報である。

次に、ステップＳ１２０において、画像処理部１２は、ステップＳ１１０において、取得部１１により取得された画像に補正等の処理を行う。画像処理部１２は、例えば画像を平滑化する。かかる場合、まず画像処理部１２は、例えばミディアンフィルタ、ガウシアンフィルタ、移動平均、Ｓａｖｉｔｚｋｙ－Ｇｏｌａｙ法等を用いて、画像を平滑化する。また、画像処理部１２は、例えば画像を平滑化し、平滑化された画像と平滑化される前の画像に基づいて、ラプラシアンフィルタ（２階微分）、アンシャープ方式等を用いて、画像を先鋭化してもよい。かかる場合、画像処理部１２は、例えば平滑化された画像と平滑化される前の画像との差分を算出し、差分を大きくするように画像を先鋭化する。平滑化は、画像をぼかすことであり、例えば画像の画素値の変化を小さくする処理である。先鋭化は、例えば画像の画素値の変化を大きくする処理である。

次に、ステップＳ１３０において、変換部１６は、画像処理部１２より処理された画像に基づく、スペクトル画像を取得する。ステップＳ１３０において、変換部１６は、例えば図４に示すようなスペクトル画像を取得する。変換部１６は、例えば生体組織に照射される光を含む光源画像に対する画像の相対反射率に基づくスペクトル画像を取得する。生体組織に照射される光は、ステップＳ１１０において、画像を撮像するときに生体組織に照射した光、又は同等の波長の光である。また、ステップＳ１３０において、変換部１６は、例えば白板を撮像した白板画像に対する画像の相対反射率に基づくスペクトル画像を取得する。白板は、一定の反射率を要する基準板である。これにより照明光源の変動によらず、生体組織およびその他構成物の相対反射率を算出し、比較することができる。

また、ステップＳ１３０において、変換部１６は、ステップＳ１１０において取得部１１が取得したそれぞれの画像をそれぞれスペクトル画像に変換してもよい。例えば、ステップＳ１３０において、変換部１６は、ステップＳ１１０において取得部１１が取得した５００ｎｍ～５５０ｎｍ、５４０ｎｍ～６００ｎｍ、６００ｎｍ～７５０ｎｍのうちの何れかの３波長の光がそれぞれ照射された生体組織の画像をそれぞれ、図４（ａ）、図４（ｂ）、図４（ｃ）に示すようなスペクトル画像に変換してもよい。

また、ステップＳ１３０において、変換部１６は、光源画像又は白板画像を撮像するときの条件である撮像条件と、生体組織を撮像するときの撮像条件とに基づいて、画像を補正してもよい。撮像条件は、例えば撮像するときのゲイン、露光時間、明るさ等である。例えば、変換部１６は、光源画像又は白板画像を撮像するときの照明器具６の光強度と、ステップＳ１１０において取得した画像を撮像するときの照明器具６の光強度の差に基づいて、画像のゲイン及び露光時間を補正する。

次に、ステップＳ１４０において、抽出部１７は、ステップＳ１３０において取得したスペクトル画像から生体組織を示す図４（ｄ）に示すようなスペクトル画像を抽出する。例えば抽出部１７は、スペクトル画像から、予め取得された生体組織の波長を示す基準波長との差分が閾値以下となる波長を抽出し、抽出した波長を示すスペクトル画像を取得する。例えば抽出部１７は、ＳＡＭ（Spectral Angle Mapper）法等を用いて、予め取得された生体組織の波長を示す基準波長と近似するスペクトルを抽出する。基準波長は、例えば３８０ｎｍ～９００ｎｍの波長範囲内から選択した任意の波長である。これにより、画像に含まれる生体組織のみを抽出し、ノイズを排除することが可能となる。

また、ステップＳ１４０において、抽出部１７は、ステップＳ１３０において取得したスペクトル画像から生体組織に含まれる対象物を示すスペクトル画像を抽出してもよい。対象物は、生体組織に含まれるユーザの健康状態を評価するための組織物である。例えば、生体組織が尿である場合、対象物は、ユーザの健康状態である血尿、蛋白尿、糖尿を評価するための血液、蛋白質、糖等であってもよい。また、例えば、生体組織が痰である場合、対象物は、ユーザの健康状態である細菌判別を評価するためのグラム染色された細菌等であってもよい。また、例えば、生体組織が便である場合、対象物は、ユーザの健康状態を評価するための便に含まれる血色素量であってもよい。

また、ステップＳ１４０において、抽出部１７は、予め取得された参照用スペクトル画像と生体組織を示すスペクトル画像とからなるデータセットを学習データとして用い、入力を参照用スペクトル画像とし、出力を生体組織示すスペクトル画像として、機械学習により生成された抽出モデルを用いて、ステップＳ１３０により取得されたスペクトル画像に基づいて、生体組織を示すスペクトル画像を抽出してもよい。

抽出モデルの生成方法として、例えばニューラルネットワークをモデルとした機械学習を用いて、抽出モデルを生成してもよい。抽出モデルは、例えばＣＮＮ（Convolution Neural Network）等のニューラルネットワークをモデルとした機械学習を用いて生成されるほか、任意のモデルが用いられてもよい。また、抽出モデルの生成方法として、例えば線形判別、サポートベクターマシン、ｋ－近傍法、ランダムフォレスト、ディープラーニング等を用いて、抽出モデルを生成してもよい。

かかる場合、抽出モデルには、例えば図５のように、入力データである参照用スペクトル画像と出力データである生体組織を示すスペクトル画像との間における連関度を有する連関性が記憶される。連関度は、入力データと出力データとの繋がりの度合いを示しており、例えば連関度が高いほど各データの繋がりが強いと判断することができる。連関度は、例えば百分率等の３値以上又は３段階以上で示されるほか、２値又は２段階で示されてもよい。また、参照用スペクトル画像は、予め取得した学習データに用いるための生体組織のスペクトル画像である。また、生体組織を示すスペクトル画像は、ステップＳ１４０と同様の方法で取得したスペクトル画像であってもよい。生体組織を示すスペクトル画像は、例えば生体組織を含むスペクトル画像から、ＳＡＭ法等を用いて、予め取得された生体組織の波長を示す基準波長と近似するスペクトルを抽出したスペクトル画像であってもよい。

例えば連関性は、複数の入力データ、対、複数の出力データの間における繋がりの度合いにより構築される。連関性は、機械学習の過程で適宜更新され、例えば複数の入力データ、及び複数の出力データに基づいて最適化された関数を用いた分類器を示す。なお、連関性は、例えば各データの間における繋がりの度合いを示す複数の連関度を有してもよい。連関度は、例えばデータベースがニューラルネットワークで構築される場合、重み変数に対応させることができる。連関性は、例えば図５に示すように、複数の入力データと、複数の出力データとの間における繋がりの度合いを示してもよい。この場合、連関性を用いることで、図５の「スペクトル画像Ａ」～「スペクトル画像Ｃ」のそれぞれの入力データに対し、「生体組織スペクトル画像Ａ」～「生体組織スペクトル画像Ｃ」の複数の出力データとの関係の度合いを紐づけて記憶させることができる。このため、例えば連関性を介して、１つの出力データに対して、複数の入力データを紐づけることができる。これにより、入力データに対して多角的な出力データの選択を実現することができる。

連関性は、例えば各入力データと、各出力データとをそれぞれ紐づける複数の連関度を有する。連関度は、例えば百分率、１０段階、又は５段階等の３段階以上で示され、例えば線の特徴（例えば太さ等）で示される。例えば、入力データに含まれる「スペクトル画像Ａ」は、出力データに含まれる「生体組織スペクトル画像Ａ」との間の連関度ＡＡ「７３％」を示し、出力データに含まれる「生体組織スペクトル画像Ｂ」との間の連関度ＡＢ「１２％」を示す。すなわち、「連関度」は、各データ間における繋がりの度合いを示しており、例えば連関度が高いほど、各データの繋がりが強いことを示す。

このような図５に示す３段階以上の連関度を予め取得しておく。つまり実際の解の判別を行う上で、入力データと、出力データとの何れが採用、評価されたか、過去のデータセットを蓄積しておき、これらを分析、解析することで図５に示す連関度を作り上げておく。

例えば、過去において「スペクトル画像Ｂ」という入力データに対して、「生体組織スペクトル画像Ｂ」が最も適合性が高いと判断され、評価されたものとする。このようなデータセットを集めて分析することにより、入力データと出力データとの連関度が強くなる。

この分析、解析は人工知能により行うようにしてもよい。かかる場合には、例え「スペクトル画像Ｂ」という入力データに対して、「生体組織スペクトル画像Ｂ」が推定される事例が多い場合には、この「スペクトル画像Ｂ」と「生体組織スペクトル画像Ｂ」とにつながる連関度をより高く設定する。

また、この連関度は、人工知能におけるニューラルネットワークのノードで構成されるものであってもよい。即ち、このニューラルネットワークのノードが出力に対する重み付け係数が、上述した連関度に対応することとなる。またニューラルネットワークに限らず、人工知能を構成するあらゆる意思決定因子で構成されるものであってもよい。

また、抽出モデルは、入力データと出力データとの間に少なくとも１以上の隠れ層が設けられ、機械学習させるようにしてもよい。入力データ又は隠れ層データの何れか一方又は両方において上述した連関度が設定され、これが各データの重み付けとなり、これに基づいて出力の選択が行われる。そして、この連関度がある閾値を超えた場合に、その出力を選択するようにしてもよい。また、抽出モデルには、例えば入力データである参照用スペクトル画像と出力データである対象物を示すスペクトル画像との間における連関度を有する連関性が記憶されてもよい。

このような連関度が、人工知能でいうところの学習済みデータとなる。このような学習済みデータを作った後に、実際にこれから新たにスペクトル画像から生体組織を示すスペクトル画像の推定を行うこととなる。かかる場合には、ステップＳ１３０により取得されたスペクトル画像に対する生体組織を示すスペクトル画像を新たに取得する。推定の際には、例えば予め取得した図５に示す連関度を参照する。例えば、新たに取得した画像が「スペクトル画像Ａ」と同一かこれに類似するものである場合には、連関度を介して「生体組織スペクトル画像Ａ」との間の連関度ＡＡ「７３％」、「生体組織スペクトル画像Ｂ」との間の連関度ＡＢ「１２％」で関連付けられている。この場合には、連関度の最も高い「生体組織スペクトル画像Ａ」を最適解として選択する。但し、最も連関度の高いものを最適解として選択することは必須ではなく、連関度は低いものの連関性そのものは認められる「生体組織スペクトル画像Ｂ」を最適解として選択するようにしてもよい。また、これ以外に矢印が繋がっていない出力解を選択してもよいことは勿論であり、連関度に基づくものであれば、その他いかなる優先順位で選択されるものであってもよい。

このような連関度を参照することにより、スペクトル画像が、入力データと同一又は類似である場合のほか、非類似である場合においても、入力データに適した出力データを定量的に選択することができる。

次に、ステップＳ１５０において、評価部１３は、ステップＳ１４０により抽出された生体組織を示すスペクトル画像に基づいて、ユーザの健康情報を評価する。

健康情報は、例えばユーザの健康状態である。健康状態は、健康の度合いを示す情報であり、例えば病気や、健康を示す指数等の値である。また、健康状態は、病気の確率等であってもよい。また、健康情報は、ユーザの生体組織に含まれる対象物に関する情報である。健康情報は、例えばユーザの尿に含まれる血液、蛋白質、糖等の含有量であってもよい。また、健康情報は、例えばユーザの痰に含まれるグラム染色された細菌のスペクトルに関する情報であってもよい。また、健康情報は、例えばユーザの便に含まれる血液に関する情報であってもよい。また、健康情報は、皮膚に含まれる成分情報であってもよい。

成分情報は、皮膚に含まれる成分に関する情報である。成分情報は、例えば皮膚の水分と皮脂とを示す情報を含む。皮膚の水分と皮脂とを示す情報は、例えば水分情報と皮脂情報とを含む。水分情報は、皮膚に含まれる水分に関する情報であり、例えば単位体積当たりの水分量等を示す情報である。皮脂情報は、皮膚に含まれる皮脂に関する情報であり、例えば単位体積当たりの皮脂量等を示す情報である。

ステップＳ１５０において、例えば評価部１３は、生体組織を示すスペクトル画像に基づき、所定の波長範囲に含まれる特定波長を正規化波長とし、所定の波長範囲に含まれる特定波長を評価波長として選択し、正規化波長と評価波長との間において、正規化波長と評価波長との分光強度の差に基づいてユーザの健康情報を評価する。正規化波長は、例えば光のムラや影等、条件が異なっていた場合においても、それらの影響を軽減して、健康情報を評価するために正規化される対象となる波長である。評価波長は、正規化波長を正規化するための評価用の波長である。

図６は、スペクトル画像が示す複数のスペクトルグラフである。図６は、縦軸を光の強度、横軸を波長［ｎｍ］とするグラフである。複数のスペクトルグラフの実線、破線の各々は、例えば撮像された各画像のスペクトルに対応する。評価部１３は、例えば５００ｎｍ～５６０ｎｍの周波数帯に含まれる特定波長を第１正規化波長とし、５４０～６００ｎｍの周波数帯に含まれる特定波長を第１評価波長として選択する。評価部１３は、例えば５３０ｎｍを第１正規化波長とし、５７０ｎｍを第１評価波長としてもよい。

評価部１３は、このようなスペクトルグラフに含まれる波長を特定波長とし、正規化波長、及び評価波長として選択する。評価部１３は、各スペクトルグラフ間のスペクトル強度の差分値が最も大きくなる波長を特定波長としてもよい。また、評価部１３は、各スペクトルグラフ上で凸のピークが形成されている特異点を特定波長として特定するようにしてもよい。また、評価部１３は、回帰分析、総当たり解析、機械学習等を用いた学習済みモデルを用いた解析により、特定波長を選択してもよい。

ここで、例えば正規化波長及び評価波長は、１点で特定してもよいし、複数を特定してもよい。また、これらの正規化波長及び評価波長を中心とした波長範囲を設定するようにしてもよい。波長範囲は、例えば正規化波長及び評価波長の差が±１０ｎｍとなる波長幅等のように、予め設定した所定の波長範囲で構成されてもよい。このため、仮に正規化波長が７８０ｎｍであり、波長範囲が±１０ｎｍであれば、実際にスペクトルデータを評価する範囲は、７７０～７９０ｎｍとなる。かかる場合、正規化波長及び評価波長の決め方としては、例えば各波長の範囲の中心の波長を特定波長としてもよい。

評価部１３は、例えば正規化波長と評価波長との分光強度の差によるスペクトル変化により健康情報を算出する。かかる場合、正規化波長と評価波長との分光強度の和で正規化することにより、例えば光のムラや影等、条件が異なっていた場合においても、それらの影響を軽減して、健康情報を比較可能にすることができる。これらの健康情報の算出は、例えば公知のスペクトル計測手法、スペクトル解析技法（例えば「ＮＤＳＩ：normalized difference spectral index、正規化分光反射指数」）等により次式により求める。「Ｉ_λ」は、例えば「λ_ｎｍ」の分光強度となり、正規化波長は「λ２」、評価波長は「λ１」として求められる。

評価部１３は、例えば保存部１０４に保存された出力用フォーマット等の形式データを用いて、評価結果を生成する。評価部１３は、例えば記憶部１４を介して、評価結果を保存部１０４に保存する。

また、ステップＳ１５０において、評価部１３は、ステップＳ１１０により取得された複数の画像に基づくそれぞれのスペクトル画像の比較に基づき、ユーザの健康情報を評価してもよい。かかる場合、例えばステップＳ１１０により５１５ｎｍ、５９５ｎｍ、７３０ｎｍの３波長の光がそれぞれ照射された生体組織の画像をそれぞれ取得した場合、５１５ｎｍを第１正規化波長とし、５９５ｎｍを第１評価波長とし、数１の式を用いて第１正規化分光反射指数と、７３０ｎｍを第２正規化波長とし、５９５ｎｍを第２評価波長とし、数１の式を用いて第２正規化分光反射指数とを算出し、第１正規化分光反射指数と第２正規化分光反射指数とに基づいて、ユーザの健康情報を評価してもよい。かかる場合、例えば第１正規化分光反射指数と第２正規化分光反射指数との平均に基づいて、ユーザの健康情報を評価してもよい。

また、ステップＳ１５０において、３波長を用いて正規化分光反射指数を算出してもよい。かかる場合、例えば、５００ｎｍ～５５０ｎｍ、５４０ｎｍ～６００ｎｍ、６００ｎｍ～７５０ｎｍのうちの何れかの３波長を用いて正規化分光反射指数を算出してもよい。例えば５００ｎｍ～５５０ｎｍに含まれる波長をλ１、５４０ｎｍ～６００ｎｍに含まれる波長をλ２、６００ｎｍ～７５０ｎｍに含まれる波長をλ３とすると、下記の数２、数３の何れかを用いて正規化分光反射指数を算出してもよい。

また、ステップＳ１５０において、評価部１３は、ステップＳ１１０により２以上の時点におけるユーザのそれぞれ異なる生体組織を含む画像を取得した場合、ステップＳ１３０により変換されたスペクトル画像の正規化分光反射指数に基づいてユーザの健康情報を評価してもよい。

また、ステップＳ１５０において、評価部１３は、ステップＳ１１０によりユーザの状態毎にそれぞれ異なる生体組織を含む画像を取得した場合、ステップＳ１３０により変換されたスペクトル画像の正規化分光反射指数に基づいてユーザの健康情報を評価してもよい。

また、ステップＳ１５０において、評価部１３は、予め取得された参照用スペクトル画像と健康情報の評価とからなるデータセットを学習データとして用い、入力を参照用スペクトル画像とし、出力を健康情報の評価として、機械学習により生成された評価モデルを用いて、スペクトル画像に基づき、ユーザの健康情報を評価してもよい。参照用スペクトル画像は、評価モデルの学習データとして用いるスペクトル画像であり、例えば予め取得された生体組織を示すスペクトル画像であるが、これに限らず、生体組織を示すスペクトルを含む任意の画像を用いてもよい。健康情報の評価は、例えば健康情報を示すスペクトルである健康情報スペクトルを示すスペクトル画像である。また、健康情報の評価は、例えば健康の度合いを示す健康レベルであってもよい。また、健康情報の評価は、ステップＳ１５０と同様の方法で取得した健康情報の評価の結果又は健康情報を示すスペクトル画像であってもよい。つまり健康情報の評価は、スペクトル画像に基づき、所定の波長範囲に含まれる特定波長を正規化波長とし、所定の波長範囲に含まれる特定波長を評価波長として選択し、正規化波長と評価波長との間において、正規化波長と評価波長との分光強度の差により健康レベルを算出し、算出した健康レベルに基づいて、取得された健康情報を示すスペクトル画像であってもよい。

評価モデルの生成方法として、例えばニューラルネットワークをモデルとした機械学習を用いて、評価モデルを生成してもよい。評価モデルは、例えばＣＮＮ（Convolution Neural Network）等のニューラルネットワークをモデルとした機械学習を用いて生成されるほか、任意のモデルが用いられてもよい。

かかる場合、評価モデルには、例えば図７のように、入力データである参照用スペクトル画像と出力データである健康情報の評価との間における連関度を有する連関性が記憶される。

また、評価モデルは、入力データと出力データとの間に少なくとも１以上の隠れ層が設けられ、機械学習させるようにしてもよい。入力データ又は隠れ層データの何れか一方又は両方において上述した連関度が設定され、これが各データの重み付けとなり、これに基づいて出力の選択が行われる。そして、この連関度がある閾値を超えた場合に、その出力を選択するようにしてもよい。

このような学習済みデータを作った後に、実際にこれから新たにスペクトル画像から健康情報の評価の推定を行うこととなる。かかる場合には、ステップＳ１４０において抽出したスペクトル画像に対する健康情報の評価を新たに取得する。

このような連関度を参照することにより、スペクトル画像が、入力データと同一又は類似である場合のほか、非類似である場合においても、入力データに適した出力データを定量的に選択することができる。

また、ステップＳ１５０において、評価部１３は、ステップＳ１４０により抽出された成分スペクトル画像に基づいて、皮膚に含まれる成分情報を評価する。例えば評価部１３は、成分スペクトル画像に基づき、所定の波長範囲に含まれる特定波長を正規化波長とし、所定の波長範囲に含まれる特定波長を評価波長として選択し、正規化波長と評価波長との間において、正規化波長と評価波長との分光強度の差に基づいて成分情報を評価する。正規化波長は、例えば光のムラや影等、条件が異なっていた場合においても、それらの影響を軽減して、成分情報を評価するために正規化される対象となる波長である。評価波長は、正規化波長を正規化するための評価用の波長である。

成分情報は、皮膚に含まれる成分に関する情報である。成分情報は、例えば皮膚の水分と皮脂とを示す情報を含む。皮膚の水分と皮脂とを示す情報は、例えば水分情報と皮脂情報とを含む。水分情報は、皮膚に含まれる水分に関する情報であり、例えば単位体積当たりの水分量等を示す情報である。皮脂情報は、皮膚に含まれる皮脂に関する情報であり、例えば単位体積当たりの皮脂量等を示す情報である。

また、ステップＳ１５０において、ステップＳ１４０により抽出したスペクトル画像とステップＳ１１０により取得したユーザ情報とに基づき、ユーザの健康情報を評価してもよい。かかる場合、評価部１３は、図８に示すような、予め取得された参照用スペクトル画像及び参照用ユーザ情報と健康情報とからなるデータセットを学習データとして用い、入力を参照用スペクトル画像及び参照用ユーザ情報とし、出力を健康情報として、機械学習により生成された評価モデルを用いて、スペクトル画像とユーザ情報とに基づき、ユーザの健康情報を評価してもよい。参照用スペクトル画像は、評価モデルの学習データとして用いるスペクトル画像である。参照用ユーザ情報は、評価モデルの学習データとして用いるユーザ情報である。

かかる場合、評価モデルには、例えば図８のように、入力データである参照用スペクトル画像及び参照用ユーザ情報と出力データである健康情報との間における連関度を有する連関性が記憶される。

また、評価モデルは、入力データと出力データとの間に少なくとも１以上の隠れ層が設けられ、機械学習させるようにしてもよい。入力データ又は隠れ層データの何れか一方又は両方において上述した連関度が設定され、これが各データの重み付けとなり、これに基づいて出力の選択が行われる。そして、この連関度がある閾値を超えた場合に、その出力を選択するようにしてもよい。

このような学習済みデータを作った後に、実際にこれから新たにステップＳ１４０により抽出したスペクトル画像とステップＳ１１０により取得したユーザ情報とに基づき、ユーザの健康情報を評価することとなる。

このような連関度を参照することにより、スペクトル画像が、入力データと同一又は類似である場合のほか、非類似である場合においても、入力データに適した出力データを定量的に選択することができる。

次に、ステップＳ１６０において、ステップＳ１５０により評価した健康情報に基づき、ユーザの健康状態を診断する。かかる場合、例えば健康情報と健康状態とが紐づけられた対応表を予め取得しておき、ステップＳ１６０において、対応表を参照し、ステップＳ１５０により評価された健康情報に基づき、ユーザの健康状態を診断してもよい。例えばステップＳ１６０において、ステップＳ１５０により評価した健康情報に含まれるユーザの便の血色素量に基づき、ユーザの健康状態である大腸がんのリスクを診断する。

また、診断部１８は、予め取得された参照用水分情報及び参照用皮脂情報と健康状態とからなるデータセットを学習データとして用い、入力を参照用水分情報及び参照用皮脂情報とし、出力を健康状態として、機械学習により生成された診断モデルを用いて、水分情報と皮脂情報とに基づき、ユーザの健康情報をしてもよい。参照用水分情報は、診断モデルの学習データとして用いる水分情報である。参照用皮脂情報は、診断モデルの学習データとして用いる皮脂情報である。

診断モデルの生成方法として、例えばニューラルネットワークをモデルとした機械学習を用いて、診断モデルを生成してもよい。診断モデルは、例えばＣＮＮ（Convolution Neural Network）等のニューラルネットワークをモデルとした機械学習を用いて生成されるほか、任意のモデルが用いられてもよい。

かかる場合、診断モデルには、例えば入力データである参照用水分情報及び参照用皮脂情報と出力データである健康状態との間における連関度を有する連関性が記憶される。

また、診断モデルは、入力データと出力データとの間に少なくとも１以上の隠れ層が設けられ、機械学習させるようにしてもよい。入力データ又は隠れ層データの何れか一方又は両方において上述した連関度が設定され、これが各データの重み付けとなり、これに基づいて出力の選択が行われる。そして、この連関度がある閾値を超えた場合に、その出力を選択するようにしてもよい。

このような学習済みデータを作った後に、実際にこれから新たにステップＳ１５０により評価した成分情報に含まれる水分情報と皮脂情報とに基づき、ユーザの健康状態を診断することとなる。

このような連関度を参照することにより、水分情報及び皮脂情報が、入力データと同一又は類似である場合のほか、非類似である場合においても、入力データに適した出力データを定量的に選択することができる。

次に、出力部１５により評価結果及び診断結果が出力される。出力部１５は、評価結果及び診断結果を表示部１０９等に出力する。また、出力部１５は、公共通信網４を介して、評価結果及び診断結果をユーザ端末２に出力してもよい。

これにより、本実施形態における健康情報評価装置１の動作が終了する。これにより、生体組織が水中にあっても水の影響を受けることなくユーザの健康情報を評価することができる。

本発明の実施形態を説明したが、この実施形態は例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１ ：健康情報評価装置
２ ：ユーザ端末
３ ：サーバ
４ ：公共通信網
５ ：撮像装置
６ ：照明器具
７ ：生体組織
１０ ：筐体
１１ ：取得部
１２ ：画像処理部
１３ ：評価部
１４ ：記憶部
１５ ：出力部
１６ ：変換部
１７ ：抽出部
１８ ：診断部
１００ ：健康情報評価システム
１０１ ：ＣＰＵ
１０２ ：ＲＯＭ
１０３ ：ＲＡＭ
１０４ ：保存部
１０５ ：Ｉ／Ｆ
１０６ ：Ｉ／Ｆ
１０７ ：Ｉ／Ｆ
１０８ ：入力部
１０９ ：表示部
１１０ ：内部バス

Claims (12)

1. ユーザの生体組織を含む画像を取得する取得手段と、
   前記取得手段により取得された画像に基づくスペクトル画像を取得するスペクトル取得手段と、
   前記スペクトル取得手段により取得されたスペクトル画像に基づき、前記ユーザの健康情報を評価する評価手段とを備えること
   を特徴とする健康情報評価システム。
2. 前記評価手段は、前記スペクトル取得手段により取得されたスペクトル画像に基づき、所定の波長範囲に含まれる特定波長を正規化波長とし、所定の波長範囲に含まれる特定波長を評価波長として選択し、前記正規化波長と前記評価波長との間において、前記正規化波長と前記評価波長との分光強度の差に基づいて前記ユーザの健康情報を評価すること
   を特徴とする請求項１に記載の健康情報評価システム。
3. 前記評価手段は、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１正規化波長とし、４００ｎｍ～１７００ｎｍの周波数帯に含まれる特定波長を第１評価波長として選択すること
   を特徴とする請求項２に記載の健康情報評価システム。
4. 前記評価手段は、予め取得された参照用スペクトル画像と健康情報とからなるデータセットを学習データとして用い、入力を前記参照用スペクトル画像とし、出力を前記健康情報として、機械学習により生成された評価モデルを用いて、前記スペクトル取得手段により取得されたスペクトル画像に基づき、前記ユーザの健康状態を評価すること
   を特徴とする請求項１に記載の健康情報評価システム。
5. 前記スペクトル取得手段は、取得した前記スペクトル画像から、予め取得された生体組織の波長を示す基準波長との差分が閾値以下となる波長を抽出し、抽出した前記波長を示すスペクトル画像を取得すること
   を特徴とする請求項１に記載の健康情報評価システム。
6. 前記スペクトル取得手段は、予め取得された参照用スペクトル画像と生体組織を示すスペクトル画像とからなるデータセットを学習データとして用い、入力を前記参照用スペクトル画像とし、出力を前記生体組織を示すスペクトル画像として、機械学習により生成された抽出モデルを用いて、取得した前記スペクトル画像に基づいて、前記生体組織を示すスペクトル画像を取得すること
   を特徴とする請求項１に記載の健康情報評価システム。
7. 前記取得手段は、前記生体組織に照射される光を含む光源画像をさらに取得し、
   前記スペクトル取得手段は、前記取得手段により取得された前記光源画像に対する前記画像の相対反射率に基づくスペクトル画像を取得すること
   を特徴とする請求項１に記載の健康情報評価システム。
8. 前記取得手段は、前記光源画像を撮像したときの撮像条件を示す撮像条件情報を取得し、取得した撮像条件情報に応じて、前記画像を補正すること
   を特徴とする請求項７に記載の健康情報評価システム。
9. 前記生体組織に２以上の波長を含む光を照射する照射手段をさらに備え、
   前記取得手段は、前記照射手段により前記２以上の各波長の光が照射された生体組織を含む画像をそれぞれ取得し、
   前記スペクトル取得手段は、前記取得手段により取得されたそれぞれの画像に基づくスペクトル画像をそれぞれ取得し、
   前記評価手段は、前記スペクトル取得手段により取得されたそれぞれのスペクトル画像に基づき、前記ユーザの健康状態を評価すること
   を特徴とする請求項１に記載の健康情報評価システム。
10. 前記取得手段は、前記ユーザの状態毎にそれぞれ異なる生体情報を含む画像をそれぞれ取得し、
    前記スペクトル取得手段は、前記取得手段により取得されたそれぞれの画像に基づくスペクトル画像をそれぞれ取得し、
    前記評価手段は、前記スペクトル取得手段により取得されたそれぞれのスペクトル画像に基づき、前記ユーザの健康状態を評価すること
    を特徴とする請求項１に記載の健康情報評価システム。
11. 前記取得手段は、前記ユーザに関するユーザ情報をさらに取得し、
    前記評価手段は、前記スペクトル取得手段により取得されたスペクトル画像と前記取得手段により取得されたユーザ情報とに基づき、前記ユーザの健康状態を評価すること
    を特徴とする請求項１に記載の健康情報評価システム。
12. ユーザの生体組織を含む画像を取得する取得ステップと、
    前記取得ステップにより取得された画像に基づくスペクトル画像を取得するスペクトル取得ステップと、
    前記スペクトル取得ステップにより取得されたスペクトル画像に基づき、前記ユーザの健康情報を評価する評価ステップとをコンピュータに実行させること
    を特徴とする健康情報評価方法。

Images