JP6390458B2 - 情報処理装置、情報処理システム及び情報処理方法並びに情報処理用プログラム - Google Patents

Description

本発明は、情報処理装置、情報処理システム及び情報処理方法並びに情報処理用プログラムの技術分野に属する。より詳細には、舌の表面の状態を認識するための情報処理装置及び情報処理方法、当該情報処理装置を含む情報処理システム並びに当該情報処理装置用のプログラムの技術分野に属する。

近年のいわゆる健康志向に鑑み、人の健康状態を外部から客観的に検出又は認識し得る方法の開発が進められている。そして、このような方法に関連する従来技術として、下記特許文献１に記載されている方法がある。

下記特許文献１に記載されている方法では、体の部位（主に舌）の画像情報に基づき、総合的な健康度の判定を行う構成とされている。より具体的に特許文献１に記載の方法では、デジタルスチルカメラで撮影された舌の画像から、舌の色、舌の形状、例えば舌の周縁部の歯痕、舌表面の裂紋及び舌表面の苔の色等の九種類の特徴量の情報と、予め設定されている健康体基準サンプルと、の間の数学的なマハラノビス距離を求め、その値が健康度を求めるための尺度とされている。

特許第４４８７５３５号

しかしながら、上記特許文献１記載の方法によると、上記マハラノビス距離を用いて数学的に求めた健康度が増減等の変化をした場合に、その変化に影響を与えた（つまり当該変化の原因となった）特徴量が何であるかが判りづらく、結果的に健康管理のためのフィードバック（すなわち、上記原因の明確化）がし難いという問題点があった。

また上記特許文献１記載の方法では、既定の健康体基準サンプルとの比較を用いて健康度の尺度を得ているが、当該健康体基準サンプルを具体的にどのようにして取得するかについては言及がなく、結果として、何をもって「健康」と判断するかについての基準が不明確となり、上記特許文献１記載の方法による判断結果が意味をなさなくなる場合もあるという問題点もある。

そこで本発明は、上記の各問題点に鑑みて為されたもので、その課題の一例は、医学的知見に基づいた舌の特徴をより的確且つ簡易な方法により認識することができると共に、これにより、より的確且つ迅速に舌の状態（換言すれば、その舌を持つ人の健康状態）を認識することが可能な情報処理装置及び情報処理方法、当該情報処理装置を含む情報処理システム並びに当該情報処理装置用のプログラムを提供することにある。

上記の課題を解決するために、請求項１に記載の発明は、舌の表面を撮像して得られた表面情報を取得するインターフェース等の取得手段と、前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する画像処理部等の算出手段と、前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する健康度判定部等の生成手段と、各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力制御部等の出力手段と、を備える。

上記の課題を解決するために、請求項７に記載の発明は、請求項１から請求項６のいずれか一項に記載の情報処理装置と、前記表面を撮像して前記表面情報を生成し、前記取得手段に出力するカメラ等の撮像装置と、前記出力手段からの出力結果を提示するディスプレイ等の提示装置と、を備える。

上記の課題を解決するために、請求項８に記載の発明は、舌の表面を撮像して得られた表面情報を取得する取得工程と、前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する算出工程と、前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する生成工程と、各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力工程と、を含む。

上記の課題を解決するために、請求項９に記載の発明は、舌の表面を撮像して得られた表面情報を取得するインターフェース等の取得手段を備える情報処理装置に含まれるコンピュータを、前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する算出手段、前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する生成手段、及び、各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力手段、として機能させる。

請求項１又は請求項７乃至請求項９のいずれか一項に記載の発明によれば、舌の表面を撮像して得られた表面情報に基づいて特徴情報を算出し、その算出された特徴情報に対して、分割表面ごとの既定の重み付けをそれぞれ行い、重み付け特徴情報を生成して分割表面ごとに出力する。よって、舌の表面に相当する表面情報を取得するのみで医学的知見に基づいた舌の特徴を認識することができる。また、舌の表面の部位ごとに医学的知見に基づいた重み付けを行った各部位の特徴を認識することができるので、より的確且つ迅速に、舌の状態（換言すれば、その舌を持つ人の健康状態）を認識することができる。

上記の課題を解決するために、請求項２に記載の発明は、請求項１に記載の情報処理装置において、各前記出力された重み付け特徴情報を加算して加算情報を生成する健康度判定部等の加算手段と、前記生成された加算情報に基づき、前記舌に基づいた健康度を示す健康度情報を、前記医学的知見に基づいて予め設定された算出手法により算出する健康度判定部等の健康度算出手段と、を更に備え、前記出力手段は、前記算出された健康度情報を出力するように構成される。

請求項２に記載の発明によれば、請求項１に記載の作用に加えて、各重み付け特徴情報を加算した加算情報に基づいて健康度情報を算出して出力するので、舌の部位ごとの特徴に基づく具体的な健康度を認識することができる。

上記の課題を解決するために、請求項３に記載の発明は、請求項１又は請求項２に記載の情報処理装置において、前記表面は前記舌の表側の表面であり、各前記部位は、当該表側の表面における先端部位、舌根部位及び側部位の少なくともいずれかであるように構成される。

請求項３に記載の発明によれば、請求項１又は請求項２に記載の発明の作用に加えて、表面が舌の表側の表面であり、各部位が、当該表側の表面における先端部位、舌根部位及び側部位の少なくともいずれかに特定されているので、処理負担の軽減を図りながら、舌の表側の状態の特徴を的確に認識することができる。

上記の課題を解決するために、請求項４に記載の発明は、請求項３に記載の情報処理装置において、前記特徴は、各前記分割表面における表面形状、色及び外縁部形状のいずれかであり、前記算出手段は、当該いずれかを示す前記特徴情報をそれぞれ算出するように構成される。

請求項４に記載の発明によれば、請求項３に記載の発明の作用に加えて、分割表面としての特徴が舌の表側の表面形状、色及び外縁部形状のいずれかであり、当該いずれかを示す特徴情報がそれぞれ算出されるので、舌の表側の表面の状態を医学的知見に基づいて的確に認識することができる。

上記の課題を解決するために、請求項５に記載の発明は、請求項１又は請求項２に記載の情報処理装置において、前記表面は前記舌の裏側の表面であり、各前記部位は、長手方向の分割線により当該裏側の表面を左右二つに分割した各分割部位の少なくともいずれかであるように構成される。

請求項５に記載の発明によれば、請求項１又は請求項２に記載の発明の作用に加えて、表面が舌の裏側の表面であり、各部位が、長手方向の分割線により当該裏側の表面を左右二つに分割した各分割部位の少なくともいずれかに特定されているので、処理負担の軽減を図りながら、舌の裏側の状態の特徴を的確に認識することができる。

上記の課題を解決するために、請求項６に記載の発明は、請求項５に記載の情報処理装置において、前記特徴は、各前記分割表面における表面形状、色、外縁部形状及び舌深静脈の形状のいずれかであり、前記算出手段は、当該いずれかを示す前記特徴情報をそれぞれ算出するように構成される。

請求項６に記載の発明によれば、請求項５に記載の発明の作用に加えて、分割表面としての特徴が舌の裏側の表面形状、色、外縁部形状及び舌深静脈の形状のいずれかであり、当該いずれかを示す特徴情報がそれぞれ算出されるので、舌の裏側の表面の状態を医学的知見に基づいて的確に認識することができる。

本発明によれば、舌の表面を撮像して得られた表面情報に基づいて特徴情報を算出し、その算出された特徴情報に対して、分割表面ごとの既定の重み付けをそれぞれ行い、重み付け特徴情報を生成して分割表面ごとに出力する。従って、舌の表面に相当する表面情報を取得するのみで医学的知見に基づいた舌の特徴を認識することができる。

また、舌の表面の部位ごとに医学的知見に基づいた重み付けを行った各部位の特徴を認識することができるので、より的確且つ迅速に、舌の状態（換言すれば、その舌を持つ人の健康状態）を認識することができる。

第１実施形態に係る健康度判定システムの概要構成を示すブロック図である。 第１実施形態に係る健康度判定処理を示すフローチャートである。 第１実施形態に係る舌画像を例示する図であり、（ａ）は当該舌画像を含む画像を例示する図であり、（ｂ）は当該舌画像を例示する図である。 第１実施形態に係る特徴の抽出処理を例示する図であり、（ａ）は元の舌画像の例であり、（ｂ）は形状特徴の抽出を例示する図であり、（ｃ）及び（ｄ）は色特徴の抽出をそれぞれ例示する図である。 第１実施形態に係る舌画像の分割状態を例示する図である。 第１実施形態に係る部位ごとの評価点を例示する図である。 第１実施形態に係る重み付け処理等を例示する図であり、（ａ）は重み付け前の評価点を例示する図であり、（ｂ）は重み付け後の評価点を例示する図であり、（ｃ）は重み付け後の評価点の合計を例示する図であり、（ｄ）は実施形態に係る健康レベルの値を例示する図である。 第１実施形態に係る健康度の表示状態を例示する図である。 第２実施形態に係る健康度の判定を例示する図であり、（ａ）は第２実施形態に係る舌の裏側の画像の例を示す図であり、（ｂ）は当該裏側の画像の分割状態を例示する図である。

次に、本発明を実施するための形態について、図面に基づいて説明する。なお以下に説明する各実施形態は、被験者の健康度を当該被験者の舌の状態に基づいて判定し、その判定結果を当該被験者又はその担当医師等に提示する健康度判定システムに対して、本発明を適用した場合の実施の形態である。

（Ｉ）第１実施形態
初めに、本発明に係る第１実施形態について、図１乃至図８を用いて説明する。なお、図１は第１実施形態に係る健康度判定システムの概要構成を示すブロック図であり、図２は第１実施形態に係る健康度判定処理を示すフローチャートであり、図３は第１実施形態に係る舌画像を例示する図である。また、図４は第１実施形態に係る特徴の抽出処理を例示する図であり、図５は第１実施形態に係る舌画像の分割状態を例示する図であり、図６は第１実施形態に係る部位ごとの評価点を例示する図である。更に、図７は第１実施形態に係る重み付け処理等を例示する図であり、図８は第１実施形態に係る健康度の表示状態を例示する図である。

図１に示すように、第１実施形態に係る健康度判定システムＳＳは、例えば従来と同様のデジタルスチルカメラ等からなり且つ本発明に係る「撮像装置」の一例としてのカメラＣと、当該カメラＣに接続された第１実施形態に係る健康度判定装置Ｓと、により構成されている。そして、当該カメラＣにより被験者の舌を撮像して得られた舌画像を健康度判定装置Ｓにより分析し、その分析結果を用いて当該被験者の健康度を健康度判定装置Ｓにおいて判定して提示する。なお以下の説明において、被験者の舌を撮像して得られた舌画像を、単に「舌画像」と称する。

そして第１実施形態に係る健康度判定装置Ｓは、図１に示すように、インターフェース１と、ＣＰＵ、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等からなる処理部２と、液晶ディスプレイ等からなり且つ本発明に係る「提示装置」の一例としてのディスプレイ３と、キーボード及びマウス等からなる操作部４と、例えばハードディスク等からなる記録部５と、により構成されている。このとき健康度判定装置Ｓは、具体的には例えばパーソナルコンピュータ等により構成される。

一方処理部２は、画像登録部２０と、画像処理部２１と、健康度判定部２２と、出力制御部２３と、により構成されている。このとき、上記画像登録部２０、画像処理部２１、健康度判定部２２及び出力制御部２３は、例えば処理部２を構成するハードウェアロジック回路により構成されていてもよいし、或いは、後述する第１実施形態に係る健康度判定処理を示すフローチャートに相当するプログラムを処理部２のＣＰＵが読み出して実行することにより、ソフトウェア的に実行されるものであってもよい。このとき当該プログラムは、処理部２を構成する上記ＲＯＭ内に予め記録されていてもよいし、必要に応じて、例えばインターネット等のネットワークを介して取得してもよい。

更に、上記インターフェース１が本発明に係る「取得手段」の一例に相当し、上記画像処理部２１が本発明に係る「算出手段」の一例に相当し、上記健康度判定部２２が本発明に係る「生成手段」の一例、「加算手段」の一例及び「健康度算出手段」の一例にそれぞれ相当し、上記出力制御部２３が本発明に係る「出力手段」の一例に相当する。

上記の構成において健康度判定装置Ｓのインターフェース１は、後述するように被験者の舌がカメラＣにより撮像されると、その舌画像に相当する舌画像情報をカメラＣから取得して処理部２の画像登録部２０に出力する。次に画像登録部２０は、出力されてきた舌画像情報を、例えば被験者又は担当医師等を他の者から識別するための識別情報に関連付けて、記録部５に記録（登録）する。なお以下の説明において、上記被験者又はその担当医師等を、単に「被験者等」と称する。

次に画像処理部２１は、上記舌画像情報に対して第１実施形態に係る特徴の抽出を行い、当該抽出した特徴に相当する特徴情報を生成して健康度判定部２２に出力する。これにより健康度判定部２２は、上記特徴情報に基づき、第１実施形態に係る健康度判定処理を用いて舌画像を用いた被験者の健康度を判定し、当該判定結果を出力制御部２３に出力する。

ここで、上記特徴とは、第１実施形態に係る舌画像に相当する舌の状態を、「形状」、「色」及び「外縁部」の各観点からそれぞれ特徴付けたものである。より具体的に例えば、舌の表側の表面における「キズ」、「隆起」又は「点」等の有無を上記形状の特徴とし、また舌の表側の表面の色としての「色調」や「薄紅色」、「赤色」、「黒色」等を上記色の特徴とし、更に舌の外縁部の形状（より具体的には、「歯の痕」、「キズ」又は「点」の有無等）を上記外縁部の特徴とする。なお、上記特徴等及び健康度の判定方法等については、後ほど詳述する。

その後出力制御部２３は、上記健康度判定部２２から出力された判定結果に基づき、当該判定結果を被験者等に提示（表示）するための表示画面を生成し、当該表示画面に相当する情報をディスプレイ３に表示して、当該判定結果の表示を行う。

次に、第１実施形態に係る健康度判定処理について、具体的に図１乃至図８を用いて説明する。

即ち図２に示すように、第１実施形態に係る健康度判定処理は、例えば、使用者たる担当医師等が健康度判定装置Ｓの操作部４を用いて、当該健康度判定処理の実行を指示する操作を行った場合等に開始される。そして当該健康度判定処理が開始されると、先ずカメラＣを用いて、被験者の舌の表側の表面を含む画像が撮像される（ステップＳ１）。

ここで、上記ステップＳ１により撮像される画像は、例えば図３（ａ）に例示するような被験者の舌Ｔを含む画像Ｇである。なお図２（ａ）に示す例では、後ほど舌Ｔのみを抽出して上記舌画像とするためのマーカＭ１乃至マーカＭ４が付加されているが、上記ステップＳ１の段階では当該マーカＭ１等が付加されていることは必須の事項ではない。

上記ステップＳ１により舌画像を含む画像が撮像されたら、次に処理部２の画像登録部２０は、インターフェース１を介して当該画像に相当する画像情報を取得し、これを一時的に記録部５に不揮発性に記録する（ステップＳ２）。このとき画像登録部２０は、当該画像情報を、それに対応する上記識別情報に関連付けて記録部５に記録（登録）する。

次に処理部２の画像処理部２１は、例えば操作部４における操作に基づき、記録部５に記録されている画像情報を読み出し、更に例えば上記マーカＭ１等を参照することにより、カメラＣから取得された画像Ｇから、舌Ｔのみを含む上記舌画像を抽出する（ステップＳ３）。このステップＳ３の処理の結果、例えば図３（ｂ）に例示するような、舌Ｔを含む舌画像ＴＧが得られる。なおステップＳ３の処理における舌画像ＴＧの抽出に当たっては、上記マーカＭ１等を用いる方法の他、従来の手法を任意に用いて舌画像ＴＧを抽出するように構成することができる。

次に処理部２の画像処理部２１は、上記舌画像ＴＧに相当する舌画像情報に基づき、舌Ｔにおける形状の特徴の抽出処理（ステップＳ４０）、色の特徴の抽出処理（ステップＳ４１）及び外縁部の特徴の抽出処理（ステップＳ４２）を、それぞれ行い、各抽出結果を健康度判定部２２に出力する。

より具体的に画像処理部２１は、上記ステップＳ４０に係る形状の特徴の抽出処理として、舌Ｔの表側の表面における「キズ」又は「点」の有無を検出する。このとき、図４（ａ）に例示する舌Ｔを含む舌画像ＴＧが得られた場合、ステップＳ４０に係る形状の特徴の抽出処理では、例えば図４（ｂ）に例示するようなキズが、例えば従来のいわゆるエッジ検出法等を用いてクラックＣＲとして抽出される。

また画像処理部２１は、上記ステップＳ４１に係る色の徴量の抽出処理として、舌Ｔの表側の表面に対して例えば色クラスタリング処理を施し、例えば図４（ｃ）に例示するように舌苔に関する色情報を抽出すると共に、例えば図４（ｄ）に例示するように、舌画像ＴＧ中の舌Ｔの部分を所定の大きさの区画に分割し、舌Ｔとして平均的な色情報（例えば、上記「色調」や「薄紅色」、「赤色」、「黒色」等の色を示す色情報）を検出する。この図４（ｄ）に例示するような色の特徴の抽出処理を行うのは、舌Ｔにおいて周囲よりも極端に色が変化している部分を抽出するためである。

更に画像処理部２１は、上記ステップＳ４２に係る外縁部の特徴の抽出処理として、当該外縁部における上記「歯の痕」、「キズ」又は「点」の有無を、例えば上記エッジ検出法等を用いて検出する。

次に健康度判定部２２は、上記ステップＳ４０乃至ステップＳ４２に係る各抽出結果を取得したら、当該各抽出結果に基づき、舌Ｔにおける形状の健康度の算出処理（ステップＳ５０）、色の健康度の算出処理（ステップＳ５１）及び外縁部の健康度の算出処理（ステップＳ５２）を、それぞれ行う。

ここで健康度判定部２２は、図５に例示するように舌Ｔを六つに分割した部位を舌画像ＴＧから抽出し、これら各部位ごとに、上記特徴の検出、並びにその検出結果を用いた上記各健康度の算出処理を行う。このとき図５に例示するように、第１部位Ｉは舌Ｔの先端を含む部位であり、第２部位IIは舌Ｔの舌根を含む部位であり、第３部位IIIは舌Ｔの先端左外縁部を含む部位である。また、第４部位IVは舌Ｔの先端右外縁部を含む部位であり、第５部位Ｖは舌Ｔの舌根左外縁部を含む部位であり、第６部位VIは舌Ｔの舌根右外縁部を含む部位である。なお、第１実施形態に係る上記部位の分け方は、例えば、本発明の基礎となる医学的知見に基づいて予め設定されるのであり、図５に例示した分け方に限られるものではなく、種々の医学的知見に対応して様々に変更し得るものである。

そして健康度判定部２２は、第１部位Ｉについての色の健康度として図６に例示するように、舌Ｔの先端が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該先端が赤色であると検出された場合は上記点数として例えば「−１点」を設定し、当該先端が黒色であると検出された場合は上記点数として例えば「−２点」を設定する。また健康度判定部２２は、第１部位Ｉについての形状の健康度として図６に例示するように、舌Ｔの先端にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該先端に点としてのクラックＣＲがあれば例えば「−１点」を設定する（ステップＳ５０及びステップＳ５１）。

更に健康度判定部２２は、第２部位IIについての色の健康度として図６に例示するように、舌Ｔの舌根が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該舌根が赤色又は白色であると検出された場合は上記点数として例えば「−１点」を設定し、当該舌根が黒色であると検出された場合は上記点数として例えば「−２点」を設定する。また健康度判定部２２は、第２部位IIについての形状の健康度として図６に例示するように、舌Ｔの舌根にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該舌根に点としてのクラックＣＲがあれば例えば「−１点」を設定する（ステップＳ５０及びステップＳ５１）。

更にまた健康度判定部２２は、第３部位IIIについての色の健康度として図６に例示するように、舌Ｔの先端左外縁部が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該先端左外縁部が薄紅色以外の色であると検出された場合は上記点数として例えば「−１点」を設定する。また健康度判定部２２は、第３部位IIIについての形状の健康度として図６に例示するように、舌Ｔの先端左外縁部にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該先端左外縁部に点又は歯の痕としてのクラックＣＲがあれば例えばそれぞれ「−１点」を設定する（ステップＳ５０乃至ステップＳ５２）。

更に健康度判定部２２は、第４部位IVについての色の健康度として図６に例示するように、舌Ｔの先端右外縁部が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該先端右外縁部が薄紅色以外の色であると検出された場合は上記点数として例えば「−１点」を設定する。また健康度判定部２２は、第４部位IVについての形状の健康度として図６に例示するように、舌Ｔの先端右外縁部にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該先端右外縁部に点又は歯の痕としてのクラックＣＲがあれば例えばそれぞれ「−１点」を設定する（ステップＳ５０乃至ステップＳ５２）。

更にまた健康度判定部２２は、第５部位Ｖについての色の健康度として図６に例示するように、舌Ｔの舌根左外縁部が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該舌根左外縁部が赤色であると検出された場合は上記点数として例えば「−１点」を設定し、当該舌根左外縁部が黒色であると検出された場合は上記点数として例えば「−２点」を設定する。また健康度判定部２２は、第５部位Ｖについての形状の健康度として図６に例示するように、舌Ｔの舌根左外縁部にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該舌根左外縁部に点としてのクラックＣＲがあれば例えば「−１点」を設定する（ステップＳ５０及びステップＳ５１）。

最後に健康度判定部２２は、第６部位VIについての色の健康度として図６に例示するように、舌Ｔの舌根右外縁部が薄紅色であると検出された場合はその健康度を示す点数として例えば「０点」を設定し、当該舌根右外縁部が赤色であると検出された場合は上記点数として例えば「−１点」を設定し、当該舌根右外縁部が黒色であると検出された場合は上記点数として例えば「−２点」を設定する。また健康度判定部２２は、第６部位VIについての形状の健康度として図６に例示するように、舌Ｔの舌根右外縁部にキズとしてのクラックＣＲ（図４（ｂ）参照）があれば例えば「−２点」を設定し、当該舌根右外縁部に点としてのクラックＣＲがあれば例えば「−１点」を設定する（ステップＳ５０及びステップＳ５１）。

なお、第１実施形態に係る上記の健康度の評価点の設定方法は、最初に異常な（即ち健康ではない）状態を定義付け、その定義された異常な状態が検出された場合に、当該異常の程度に相当する点数だけ減点していく、いわゆる減点法による設定方法である。

ここで図６は、三つのサンプル（サンプルＡ乃至サンプルＣ）について、上記の健康度の算出処理の結果としての評価点を例示するものである。なお図６におけるハッチング部は、その部位について評価の対象とはならない項目を示す。更に図６に例示するサンプルＡ乃至サンプルＣについては、同一の被験者についての異なった時期に撮像された舌画像ＴＧに基づく各サンプルである場合もあるし、異なる被験者について撮像された舌画像ＴＧに基づく各サンプルであってもよい。

例えば図６に例示するサンプルＡにおいては、第１部位Ｉの色が赤色であったため当該第１部位Ｉの色の健康度が−１点となっている一方、第１部位Ｉにはキズ等のクラックＣＲがなかったため、結果として、第１部位Ｉとしての健康度の評価点が−１点となっている。これに対し、サンプルＡの第４部位IVでは、歯の痕としてのクラックＣＲが検出されたが、それ以外のクラックＣＲはなく、更に色も薄紅色であったため、結果として、第４部位IVとしての健康度の評価点も−１点となっている。以下同様に、図６に例示するサンプルＢでは、第１部位Ｉについて色が赤色であったため−１点となり、第２部位IIについて色が赤又は白であり且つキズとしてのクラックＣＲが検出されたため合計−３点となり、第５部位Ｖについて点としてのクラックＣＲが検出されたため−１点となり、第６部位VIについてキズとしてのクラックＣＲが検出されたため−１点となっている。更に、図６に例示するサンプルＣでは、第１部位Ｉについて色が赤色であり且つ点としてのクラックＣＲが検出されたため合計−２点となり、第２部位IIについて色が赤又は白であったため−１点となり、第３部位III及び第４部位IVについてそれぞれ歯の痕としてのクラックＣＲが検出されたため各−１点となり、第５部位Ｖ及び第６部位VIについてそれぞれ点としてのクラックＣＲが検出されたため各−１点となっている。

図６に例示するように部位ごとの評価点が算出されたら、次に健康度判定部２２は、当該算出された評価点について、上記部位ごとに重み付けを行い、最終的な部位ごとの健康度を算出する（ステップＳ６）。即ち健康度判定部２２は、例えば図６に例示する各サンプルについて図７（ａ）に例示する評価点であった場合、上記第１部位Ｉ乃至第６部位VIそれぞれの重み付けの比を、例えば図７（ｂ）に例示するように順に「３：３：１：１：１：１」とする。この重み付けの程度は、本発明の基礎となる医学的知見に基づいて予め設定される。そして健康度判定部２２は、例えば図７（ａ）に例示する評価点に対して図７（ｂ）に例示する重み付けを行い、その結果として図７（ｂ）に例示するような重み付け後の評価点を部位ごとに算出する（ステップＳ６）。その後健康度判定部２２は、図７（ｂ）に例示する重み付け後の評価点をサンプルごとに加算することにより、最高点を減点なしの０点とし、最低点を各部位の全てについての最低の評価点の合計である−５０点とする、図７（ｃ）に例示するサンプルごとの重み付け後の評価値の合計を算出する。図７（ｃ）に例示する場合は、サンプルＡの重み付け後の評価値の合計が−４点であり、サンプルＢの重み付け後の評価値の合計が−１４点であり、サンプルＣの重み付け後の評価値の合計が−１３点であることになる。

その後健康度判定部２２は、表示により被験者等に提示する健康度の算出を行う。このとき、例えば図７（ｃ）に例示する評価値の合計が得られている場合に、健康度判定部２２は、最高点を１００点とし、最低点を０点とする第１実施形態に係る健康度を、以下の式（１）により算出し、その算出結果としての健康度情報を出力制御部２３に出力する（ステップＳ７）。

健康度＝１００×〔１−｛重み付け後の評価値の合計の絶対値／（最高点−最低点）｝〕
…（１）
このとき、例えばサンプルＡの場合、図７（ｃ）の例示を引用すれば、上記重み付け後の評価値の合計の絶対値が「４」点となり、上記最高点が０点となり、最低点が−５０点であるから、これらを上記式（１）に当て嵌めると、サンプルＡとしての健康度は、図７（ｄ）に例示するように「９２点」となる。以下、サンプルＢ及びサンプルＣとしても同様に式（１）を用いると、サンプルＢとしての健康度及びサンプルＣとして健康度は、それぞれ、「７２点」と「７４点」となることが判る。

その後出力制御部２３は、健康度判定部２２から出力された健康度情報に基づき、例えば図８に例示するような表示画面を生成してディスプレイ３に出力し、第１実施形態に係る健康度判定処理の結果として被験者等に提示させる（ステップＳ８）。このとき図８に例示する場合は、図７（ｄ）に例示した健康度の値に加えて、図７（ｂ）に例示した重み付け後の評価値が部位ごとかつサンプルごとに、いわゆるレーダーチャートとして見易く表示される。なお図８に例示するレーダーチャートでは、各評価値の基準（「−２」、「−６」等の尺度）も合わせて表示されている。

その後処理部２は、健康度判定装置Ｓとしての電源スイッチがオフとされたか、或いは操作部４において既定の終了操作が実行されたこと等を検出することにより、第１実施形態に係る健康度判定処理を終了するか否かを判定する（ステップＳ９）。ステップＳ９の判定において引き続き当該健康度判定処理を実行する場合（ステップＳ９；ＮＯ）、処理部２は上記ステップＳ１に戻って上述してきた健康度判定処理を繰り返す。一方ステップＳ９の判定において当該健康度判定処理を終了する場合（ステップＳ９；ＹＥＳ）、処理部２はそのまま当該健康度判定処理を終了する。

以上説明したように、第１実施形態に係る健康度判定処理によれば、舌Ｔの表側の表面を撮像して得られた舌画像情報に基づいて健康の観点から見た特徴を抽出し（図２ステップＳ４０乃至ステップＳ４２参照）、その抽出された特徴に対して、舌Ｔの部位ごとの既定の重み付けをそれぞれ行い（図２ステップＳ６参照）、その結果を部位ごとに表示する（図２ステップＳ８、図８参照）。よって、舌Ｔの表面を撮像するのみで医学的知見に基づいた舌Ｔの特徴を認識することができる。また、舌Ｔの表面の部位ごとに医学的知見に基づいた重み付けを行ったそれらの特徴を認識することができるので、より的確且つ迅速に、舌Ｔの状態（換言すれば、その舌を持つ人の健康状態）を認識することができる。

また、各重み付け後の評価点の加算結果に基づいて健康度を算出して表示するので、舌Ｔの部位ごとの特徴に基づく具体的な健康度を認識することができる。

更に、舌Ｔの表側の評価の対象が、その先端、舌根及び外縁部であるので、評価の対象を特定する（先端等の部位に限る）ことで健康度判定装置Ｓとしての処理負担の軽減を図りながら、舌Ｔの表側の状態の特徴を的確に認識することができる。

更にまた、舌Ｔの各部位としての特徴が、その形状、色及び外縁部のいずれかであるので、舌Ｔの表側の表面の状態を医学的知見に基づいて的確に認識することができる。

（II）第２実施形態
次に、本発明に係る他の実施形態である第２実施形態について、図９を用いて説明する。なお図９は、第２実施形態に係る健康度の判定を例示する図である。

上述してきた第１実施形態に係る健康度判定処理では、被験者の舌Ｔの表側をカメラＣで撮像した舌画像ＴＧを用いて、当該被験者の健康状態を評価した。これに対して、以下に説明する第２実施形態では、舌Ｔの裏側をカメラＣで撮像した舌画像ＴＧを用いて、当該被験者の健康状態を評価する。なお以下の説明において、舌Ｔの裏側を撮像した舌画像を、単に「裏側の舌画像」と称する。

また、第２実施形態に係る健康度判定システムのハードウェア的な構成は、基本的に第１実施形態に係る健康度判定システムＳＳのハードウェア的な構成と同一である。よって以下の第２実施形態では、第１実施形態に係る健康度判定システムＳＳと同様の部材番号を用いて、当該健康度判定システムＳＳと異なる部分及び処理のみについて、第２実施形態に係る健康度判定システムを説明する。

第２実施形態に係る健康度判定システムによる健康度判定処理においてカメラＣを用いて撮像されるのは、図９（ａ）に例示するような、舌Ｔの裏側（表面）である。そして当該裏側の舌画像ＴＧについての分割方法は、図９（ｂ）に例示するように、舌Ｔの裏側の向かって左側全体に当たる第１部位Ｉａと、舌Ｔの裏側の向かって右側全体に当たる第２部位IIａと、の二つの部位とされる。これら第１部位Ｉａ及び第２部位IIａは、舌Ｔの裏側の長手方向にある舌深静脈ＶＰをそれぞれに含むように、予め設定され分割された部位である。

そして第２実施形態に係る健康度判定処理において画像処理部２１は、上記裏側の舌画像ＴＧに相当する舌画像情報に対してその特徴の抽出を行い、当該抽出した特徴に相当する特徴情報を生成して健康度判定部２２に出力する。

ここで第２実施形態に係る上記特徴とは、裏側の舌画像ＴＧに相当する舌Ｔの状態を、「形状」、「色」、「外縁部」及び「舌深静脈ＶＰ」の各観点からそれぞれ特徴付ける。より具体的に例えば、舌Ｔの裏側の表面における「キズ」、「隆起」又は「点」等の有無を上記形状の特徴とし、また当該裏側の表面の色としての「色調」や「色模様」等を上記色の特徴とし、当該裏側の外縁部の形状（より具体的には、「歯の痕」、「キズ」又は「点」の有無等）を上記外縁部の特徴とし、更に舌Ｔの舌深静脈ＶＰの「幅及び長さ」、「蛇行の有無」、「静脈瘤の有無」、「怒張の有無」及び「左右の差の有無」等を上記舌深静脈ＶＰの特徴とする。

そして健康度判定部２２は、上記各特徴について、第１実施形態に係る健康度判定処理と同様に、評価点の算出処理、重み付け処理及び加算処理を実行し、更にその結果を用いた健康度の算出処理及び表示処理を実行する。

以上説明したように、第２実施形態に係る健康度判定処理によれば、第１実施形態に係る健康度判定処理と同様に、舌Ｔの表面を撮像するのみで医学的知見に基づいた舌Ｔの特徴を認識することができると共に、より的確且つ迅速に、舌Ｔを持つ人の健康状態を認識することができる。

また、舌Ｔの裏側（の表面）が、その長手方向の分割線により左右二つに分割された第１部位Ｉａ及び第２部位IIａであるので、評価の対象の部位を特定する（限定する）ことで健康度判定装置Ｓとしての処理負担の軽減を図りながら、舌Ｔの裏側の状態の特徴を的確に認識することができる。

また、当該各部位としての特徴が、その形状、色、外縁部及び舌深静脈ＶＰの形状等のいずれかであるので、舌Ｔの裏側の表面の状態を医学的知見に基づいて的確に認識することができる。

なお上述した各実施形態における健康度の評価点の設定方法は、上述したように減点法によるものであったが、これ以外に、最初に正常な（即ち健康な）状態を定義付け、その定義された正常な状態が検出された場合に、当該正常の程度に相当する点数だけ加算していく、いわゆる加算法による設定方法であってもよい。

また上述した各実施形態では、図８に例示するレーダーチャート及びサンプルごとの評価点の合計値を表示したが、これ以外に、レーダーチャート、又はサンプルごとの評価点の合計値のいずれか一つのみでもよい。

更に、時系列的にサンプルを記録部５に蓄積して分析の対象とすることで、より効果的な健康度の判定を行うこともできる。

更にまた、各実施形態に係る舌画像ＴＧの部位の分割方法及び評価点の設定方法の詳細は、医学的知見に基づいているものであれば、各実施形態に係る分割方法等以外にも採用し得るものである。

以上それぞれ説明したように、本発明は健康度を判定して被験者等に提示する健康度判定システムの分野に利用することが可能であり、特に舌画像ＴＧを取得して当該健康度を判定する健康度判定システムの分野に適用すれば特に顕著な効果が得られる。

１ インターフェース
２ 処理部
３ ディスプレイ
４ 操作部
５ 記録部
２０ 画像登録部
２１ 画像処理部
２２ 健康度判定部
２３ 出力制御部
ＳＳ 健康度判定システム
Ｓ 健康度判定装置
Ｃ カメラ
Ｔ 舌
Ｇ 画像
ＴＧ 舌画像
Ｍ１、Ｍ２、Ｍ３、Ｍ４ マーカ
ＣＲ クラック
Ｉ、Ｉａ 第１部位
II、IIａ 第２部位
III 第３部位
IV 第４部位
Ｖ 第５部位
VI 第６部位

Claims (9)

1. 舌の表面を撮像して得られた表面情報を取得する取得手段と、
   前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する算出手段と、
   前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する生成手段と、
   各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力手段と、
   を備えることを特徴とする情報処理装置。
2. 請求項１に記載の情報処理装置において、
   各前記出力された重み付け特徴情報を加算して加算情報を生成する加算手段と、
   前記生成された加算情報に基づき、前記舌に基づいた健康度を示す健康度情報を、前記医学的知見に基づいて予め設定された算出手法により算出する健康度算出手段と、
   を更に備え、
   前記出力手段は、前記算出された健康度情報を出力することを特徴とする情報処理装置。
3. 請求項１又は請求項２に記載の情報処理装置において、
   前記表面は前記舌の表側の表面であり、
   各前記部位は、当該表側の表面における先端部位、舌根部位及び側部位の少なくともいずれかであることを特徴とする情報処理装置。
4. 請求項３に記載の情報処理装置において、
   前記特徴は、各前記分割表面における表面形状、色及び外縁部形状のいずれかであり、
   前記算出手段は、当該いずれかを示す前記特徴情報をそれぞれ算出することを特徴とする情報処理装置。
5. 請求項１又は請求項２に記載の情報処理装置において、
   前記表面は前記舌の裏側の表面であり、
   各前記部位は、長手方向の分割線により当該裏側の表面を左右二つに分割した各分割部位の少なくともいずれかであることを特徴とする情報処理装置。
6. 請求項５に記載の情報処理装置において、
   前記特徴は、各前記分割表面における表面形状、色、外縁部形状及び舌深静脈の形状のいずれかであり、
   前記算出手段は、当該いずれかを示す前記特徴情報をそれぞれ算出することを特徴とする情報処理装置。
7. 請求項１から請求項６のいずれか一項に記載の情報処理装置と、
   前記表面を撮像して前記表面情報を生成し、前記取得手段に出力する撮像装置と、
   前記出力手段からの出力結果を提示する提示装置と、
   を備えることを特徴とする情報処理システム。
8. 舌の表面を撮像して得られた表面情報を取得する取得工程と、
   前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する算出工程と、
   前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する生成工程と、
   各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力工程と、
   を含むことを特徴とする情報処理方法。
9. 舌の表面を撮像して得られた表面情報を取得する取得手段を備える情報処理装置に含まれるコンピュータを、
   前記取得された表面情報に基づき、医学的知見に基づいた前記表面の特徴を示す特徴情報を算出する算出手段、
   前記算出された特徴情報に対して、前記医学的知見に基づいて予め設定された部位に前記表面を分割した分割表面ごとに、当該医学的知見に対応して予め設定された重み付けをそれぞれ行い、当該分割表面ごとの重み付け特徴情報をそれぞれ生成する生成手段、及び、
   各前記生成された重み付け特徴情報を、前記分割表面ごとに出力する出力手段、
   として機能させることを特徴とする情報処理用プログラム。