JP2015090506A

JP2015090506A - 健康管理装置および健康管理方法

Info

Publication number: JP2015090506A
Application number: JP2013229139A
Authority: JP
Inventors: 尾崎　貴志; Takashi Ozaki; 貴志尾崎
Original assignee: Nippon Telegraph and Telephone Corp; Nippon Telegraph and Telephone West Corp
Current assignee: Nippon Telegraph and Telephone Corp; Nippon Telegraph and Telephone West Corp
Priority date: 2013-11-05
Filing date: 2013-11-05
Publication date: 2015-05-11

Abstract

【課題】ヘルスケアデバイスで測定した健康データを容易に登録するとともに、当該健康データとメンタル状態のデータとを関連付けて登録する。【解決手段】健康管理装置１であって、ヘルスケアデバイスの測定データを含む音声データを受信する受信手段１１と、前記音声データを音声認識することで前記測定データを取得し、記憶手段に格納する測定データ取得手段１２と、前記音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶手段に格納するメンタル解析手段１３と、を備える。【選択図】図１

Description

本発明は、ユーザの健康に関する情報を収集し、管理する健康管理装置および健康管理方法に関する。

日常の健康状態を管理し、病気の予防を行うことで医療費の低減を図ることが求められている。例えば、体重計や血圧計などのヘルスケアデバイスを用いて身体的な健康状態を把握すること、また、アンケートや脳波診断によるメンタルな健康状態を把握することが行われている。特許文献１には、被験者である人間の感情をより正確に検出するための感情検出技術が記載されている。

特開2002-91482号公報

従来では、体重、血圧などの健康状態の管理と、メンタル状態の管理とは、別々の実施されている。すなわち、ユーザは、体重計や血圧計などのヘルスケアデバイスを用いて健康データを測定することとは別に、メンタル状態を取得するための検査などを行う必要があり、測定および検査に時間を要するとともに手間がかかる。また、別々に取得した健康データとメンタル状態のデータとを、紐付けて登録し管理することは行われていない。

また、ヘルスケアデバイスで測定した健康データまたはメンタル状態のデータを、コンピュータに登録しようとする場合、簡単な入力インタフェースが少なく、ユーザのデータ登録作業の負荷が大きいという問題がある。また、ヘルスケアデバイスが通信機能を備えることで、測定したデータをコンピュータに送信することも考えられるが、全てのヘルスケアデバイスが通信機能を備えているわけではない。

本発明は、上記事情に鑑みてなされたものであり、本発明の目的は、ヘルスケアデバイスで測定した健康データを容易に登録するとともに、当該健康データとメンタル状態のデータとを関連付けて登録することにある。

上記目的を達成するため、第１の本発明は、健康管理装置であって、ヘルスケアデバイスの測定データを含む音声データを受信する受信手段と、前記音声データを音声認識することで前記測定データを取得し、記憶手段に格納する測定データ取得手段と、前記音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶手段に格納するメンタル解析手段と、を備えることを要旨とする。

上記健康管理装置において、前記受信手段は、体型画像データを受信し、前記体型画像データを画像解析して体型データを生成し、前記測定データおよび前記メンタルデータと関連付けて前記記憶手段に格納する体型データ解析手段を、さらに有することを要旨とする。

上記健康管理装置において、前記受信手段は、ユーザが無意識に発した音声を含む生活音の音声データを受信し、前記メンタル解析手段は、前記生活音の音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶手段に格納することを要旨とする。

上記健康管理装置において、前記測定データ取得手段は、所定の推定語を用いて前記測定データのデータ種別を決定することを要旨とする。

第２の本発明は、健康管理装置が行う健康管理方法であって、ヘルスケアデバイスの測定データを含む音声データを受信する受信ステップと、前記音声データを音声認識することで前記測定データを取得し、記憶部に格納する測定データ取得ステップと、前記音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶部に格納するメンタル解析ステップと、を行うことを要旨とする。

本発明によれば、ヘルスケアデバイスで測定した健康データを容易に登録するとともに、当該健康データとメンタル状態のデータとを関連付けて登録することができる。

本実施形態の一例を示す健康管理システムの全体構成図である。健康管理サーバの構成を示す機能ブロック図である。音声データの解析および登録処理を示すシーケンス図である。変換テーブルの一例を示す図である。メンタルデータのレーダチャートの一例を示す図である。健康データテーブルのデータ項目の一例を示す図である。音声データの解析および登録処理を示すフローチャートである。生活音の音声データを用いたメンタル解析処理を示すシーケンス図である。メンタル解析で数値化された抑うつ度の推移の一例を示すグラフである。体型画像データの解析・登録処理を示すシーケンス図である。自身の体型をカメラで撮影するユーザの一例を示す図である。体型データ等の閲覧処理を示すシーケンス図である。体型データ等の比較結果の一例を示す図である。体型画像データから取得される体勢データ等と、音声データから取得される測定データおよびメンタルデータを時系列に表した図である。

以下、本発明の実施の形態について、図面を参照して説明する。

図１は、本実施形態における健康管理システムの全体構成図である。本実施形態の健康管理システムは、健康管理サーバ１（健康管理装置）と、ＷＥＢサーバ２と、ユーザが使用する通信端末３と、マイク（音声集音装置）４と、カメラ（赤外線センサ）５と、少なくとも１つのヘルスケアデバイス（健康機器）６とを備える。

健康管理サーバ１は、ＷＥＢサーバ２を介して通信端末３から送信される音声データまたは画像データを解析し、解析結果を蓄積することでユーザの健康を管理する。ＷＥＢサーバ２は、通信端末３からのリクエストをネットワークを介して受け付け、当該要求を健康管理サーバ１に送信するとともに、健康管理サーバ１からのレスポンスをネットワークを介して通信端末３に送信する。

通信端末３は、例えば、ホームゲートウェイ、セットトップボックス、ＰＣ、スマートフォンなどの、通信機能を備える装置である。マイク４は、入力インタフェースの１つであって、ユーザの音声を集音し、通信端末３に出力する。ユーザは、ヘルスケアデバイス６を用いて測定した健康情報を音声によりマイク４に入力する。また、ユーザはマイク４を携帯することで、日常の生活音をマイク４に入力する。カメラ５は、入力インタフェースの１つであって、ユーザの全身の撮像し、２次元および３次元の体型画像データを通信端末３に出力する。ユーザは、カメラ５の前に立ち、自身を撮影する。

ヘルスケアデバイス６は、例えば、万歩計、体組成計（体重、体脂肪率、筋肉量、基礎代謝などの測定機器）、血圧計、脈拍計、血糖値計などの健康を維持・増進を支援するための機器である。

図２は、健康管理サーバ１の構成を示すブロック図である。図示する健康管理サーバ１は、データ受信部１１と、測定データ取得部１２と、メンタル解析部１３と、体型解析部１４と、音声ＤＢ１５と、体型画像ＤＢ１６と、健康データテーブル１７と、メンタル解析結果ＤＢ１８とを備える。

データ受信部１１は、通信端末３から送信された、ヘルスケアデバイス６の測定データを含む音声データを受信するとともに、ユーザが無意識に発した音声を含む生活音の音声データを受信する。また、データ受信部１１は、通信端末３から送信された、体型画像データを受信する。

測定データ取得部１２は、受信した音声データを音声認識することで、ユーザが音声により入力したヘルスケアデバイス６の測定データを取得し、健康データテーブル１７に格納する。メンタル解析部１３は、受信した音声データを解析してメンタルデータを生成し、測定データと関連付けて健康データテーブル１７に格納する。

体型解析部１４は、通信端末３から送信された体型画像データを画像解析して体型データを生成し、測定データおよびメンタルデータと関連付けて健康データテーブル１７に格納する。

音声ＤＢ１５には、通信端末３から送信された音声データが格納される。体型画像ＤＢ１６には、通信端末３から送信された体型画像データが格納される。健康データテーブル１７には、測定データ、メンタルデータ、体型データ等が記憶される。メンタル解析結果ＤＢ１８には、メンタルデータを用いて生成したレーダチャートが格納される。

上記説明した健康管理サーバ１は、例えば、ＣＰＵと、メモリと、ＨＤＤ等の外部記憶装置などを備えた汎用的なコンピュータシステムを用いることができる。このコンピュータシステムにおいて、ＣＰＵがメモリ上にロードされた健康管理サーバ１のプログラムを実行することにより、健康管理サーバ１の各機能が実現される。また、健康管理サーバ１のプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ−ＲＯＭなどのコンピュータ読取り可能な記録媒体に記憶することも、ネットワークを介して配信することもできる。なお、健康管理サーバ１は、複数のサーバ（例えば、解析サーバとＤＢサーバなど）から構成されるシステムであってよい。

次に、本実施形態の処理について説明する。

図３は、マイクにより入力された音声データの解析および登録処理を示すシーケンス図である。ユーザは、任意のタイミングで少なくとも１つのヘルスケアデバイス６を用いて健康情報（健康状態）を測定し、測定結果を音声で通信端末３に入力する。

まず、ユーザは、ヘルスケアデバイス６を用いて自身の健康情報を測定または取得する（Ｓ１１）。健康情報は、例えば、ヘルスケアデバイス６が万歩計の場合は歩数、ヘルスケアデバイス６が体組成計の場合は、体重、体脂肪率、筋肉量、基礎代謝などである。

そして、ユーザは、健康情報の測定データ（測定値など）を、マイク４を用いて音声により通信端末３に入力する。マイク４は、ユーザの発話を集音し、音声データとして通信端末３に入力する（Ｓ１２）。

通信端末３は、マイク４から入力された音声データを自身の記憶装置に一旦保存するとともに、当該音声データを健康管理サーバ１に送信する（Ｓ１３）。健康管理サーバ１のデータ受信部１１は、通信端末３から送信された音声データを、ＷＥＢサーバ２を介して受信し、音声ＤＢ１５に記憶する（Ｓ１４）。なお、通信端末３は、音声データを送信する際に、健康管理サーバ１側のデータ転送またはデータ登録などの規格に応じて規格の変更（例えば、Ａ規格→Ｂ規格）を行うこととしてもよい。これにより、複数規格の対応が可能となり、健康管理サーバ１の音声ＤＢ１５への登録を容易にすることができる。

そして、健康管理サーバ１の測定データ取得部１２は、音声ＤＢ１５に記憶された音声データを音声認識し、ユーザが音声により入力したヘルスケアデバイス６の測定データに変換する（Ｓ１５）。具体的には、（１）音声データを音声認識して文字データに変換し、（２）変換した文字データからデータ種別を決定し、（３）変換した文字データから不要な単語などのデータを削除する。

（２）のデータ種別の決定については、（１）で変換した文字データに含まれる推定語（キーワード）、レンジ（数値範囲）などを用いて、測定データのデータ種別（例えば、体重、血圧など）を決定する。なお、本実施形態では、（２）および（３）の処理を行うために、例えば図４に示すような変換テーブルを健康管理サーバ１内の記憶部（不図示）にあらかじめ保持し、当該変換テーブルを用いて行うものとする。

図４に示す変換テーブルは、測定データのデータ種別毎に、推定語、除去部分、レンジ、除去アルゴリズムが設定されている。測定データ取得部１２は、（２）については、推定語を用いてデータ種別を選択し、また、（３）については選択したデータ種別の削除部分に設定された内容に応じて、文字データから不要な部分を削除する。また、測定データ取得部１２は、選択したデータ種別のレンジおよび削除アルゴリズムを用いて、データを精査し、異常値については登録しないようにしてもよい。

例えば、ユーザが入力した音声データから変換された文字データが「５６．６ｋｇ」の場合、測定データ取得部１２は、変換テーブルを参照して、文字データに含まれる「ｋｇ」が推定語として設定されている「体重」をデータ種別として決定する。そして、測定データ取得部１２は、データ種別が「体重」の削除部分を参照し、数字以外の「ｋｇ」を削除した「５６．６」とする。このように、測定データ取得部１２は、音声データからデータ種別「体重」と、測定値「５６．６」とを含む測定データを取得する。

そして、測定データ取得部１２は、測定データを通信端末３に送信し、通信端末３は、測定データをディスプレイに表示する（Ｓ１６）。ユーザは、表示された測定データが正しいか否かを確認し（Ｓ１７）、正しい場合、登録指示を通信端末３に入力する（Ｓ１８）。通信端末３は、ユーザから登録指示を受け付けると、当該登録指示を健康管理サーバ１に送信する（Ｓ１９）。健康管理サーバ１の測定データ取得部１２は、登録指示を受信すると、Ｓ１５で変換した測定データを健康データテーブル１７に登録する（Ｓ２０）。

また、健康管理サーバ１のメンタル解析部１３は、Ｓ１４で音声ＤＢ１５に登録された音声データを解析して、メンタルデータを取得する（Ｓ２１）。本実施形態では、メンタル解析部１３は、（１）音声データの強度、テンポ、抑揚などの特徴点（特徴量の変化）を抽出し、（２）抽出した各特徴点から感情（例えば、抑うつ度、積極性、ストレス度、神経質、怒り、悲しみ、喜びなど）を解析し、（３）解析した感情状況を数値化する。なお、音声データを用いてユーザのメンタル状態を解析する手法については、例えば非特許文献１に記載されている。

そして、メンタル解析部１３は、解析したメンタルデータを通信端末３に送信し、通信端末３は、送信されたメンタルデータをディスプレイに表示する（Ｓ２２）。ユーザは、表示されたメンタルデータを確認し（Ｓ２３）、登録指示を通信端末３に入力する（Ｓ２４）。通信端末３は、ユーザから登録指示を受け付けると、当該登録指示を健康管理サーバ１に送信する（Ｓ２５）。

健康管理サーバ１のメンタル解析部１３は、登録指示を受信すると、Ｓ２１で解析したメンタルデータを、Ｓ２０で登録した測定データと関連付けて健康データテーブル１７に登録する（Ｓ２６）。なお、メンタル解析部１３は、メンタルデータを通信端末３に送信・表示する際に、例えば図５に示すように、メンタルデータの各感情の数値を用いてレーダチャートを生成し、通信端末３に送信することとしてもよい。なお、レーダチャートを生成した場合、メンタル解析部１３は、当該レーダチャートをメンタル解析結果ＤＢ１８に記憶する。

図６は、健康データテーブル１７のデータ項目の一例を示す図である。図示する健康データテーブル１７のデータ項目には、Ｓ１３で音声データともに通信端末３から送信されるユーザＩＤと、当該音声データを受信した日付および時刻と、当該音声データのファイルＩＤ（または、音声ＤＢ１５の格納場所・アドレスなど）と、Ｓ１３で音声データともに通信端末３から送信されるヘルスケアデバイス６による測定日時と、Ｓ１５で音声データから変換したデータ種別および測定値（測定データ）と、Ｓ２１で解析され数値化されたメンタルデータとを有する。

なお、図示する健康データテーブルには、後述する体型画像データのファイルＩＤと、体型データと、体勢データと、表情データと、顔色データのデータ項目を有するが、図３に示す音声データを用いた処理では、これらのデータ項目は設定されずスペースのままである。

図３に示す処理により、１つの音声データからＳ１５の測定データを取得できるとともに、Ｓ２１のメンタル解析を実現することができる。また、ヘルスケアデバイス６により測定した健康情報の測定データとメンタルデータとを関連付けて、時間情報とともに時系列に健康データテーブル１７に登録することで、当該健康データテーブル１７を用いてユーザの健康状態とメンタル状態の推移を管理することができるとともに、より高い精度で疾病の予兆を検出することができる。

図７は、図３に示す処理をフローチャートで表したものである。なお、図７では、図３で説明した測定データおよびメンタルデータのユーザへの確認処理（Ｓ１６〜Ｓ１９、Ｓ２２〜Ｓ２５）は省略している。

ユーザは、マイク４の電源をオンにし（Ｓ１０１）、録音スイッチを押下する（Ｓ１０２）。そして、ユーザは、所定のヘルスケアデバイス６を用いて測定した健康情報の測定データを音声でマイク４に入力する（Ｓ１０３）。これにより、マイク４は、ユーザの音声データを通信端末３に出力する。そして、ユーザは、音声入力が終了すると、録音停止スイッチを押下する（Ｓ１０４）。通信端末３は、出力される音声データを当該通信端末３の記憶装置に保存し、録音停止スイッチが押下されたタイミングで記憶装置に保存した音声データを健康管理サーバ１に送信する（Ｓ１０５）。

健康管理サーバ１のデータ受信部１１は、音声データを受信し（Ｓ１０６）、音声ＤＢ１５に格納する（Ｓ１０７）。そして、健康管理サーバ１の測定データ取得部１２は、音声ＤＢ１５に格納された音声データをテキスト変換し（Ｓ１０８）、測定データとして健康データテーブル１７に登録するとともに（Ｓ１０９）、当該音声データを用いてメンタル解析し（Ｓ１１０）、メンタルデータを健康データテーブル１７に登録する（Ｓ１１１）。

次に、ユーザの生活音の音声データを用いたメンタル解析について説明する。

図８は、マイク４を常時オンにしていることで、ユーザの生活音を収集し、当該生活音の音声データを用いたメンタル解析処理を示すシーケンス図である。

マイク４は、ユーザの発話や、ユーザが発するため息、不平の声などの日常においてユーザが発する音声データ（生活音）を常時集音し、音声データとして通信端末３に出力する（Ｓ３１）。

通信端末３は、マイク４から入力された音声データを当該通信端末３の記憶装置に蓄積し、所定のタイミング（例えば、１回／１時間など）で蓄積した音声データを健康管理サーバ１に送信する（Ｓ３２）。なお、通信端末３は、音声データを送信する際に、健康管理サーバ１側のデータ転送またはデータ登録などの規格に応じて規格の変更を行うこととしてもよい。

健康管理サーバ１のデータ受信部１１は、通信端末３から送信された音声データを音声ＤＢ１５に格納する（Ｓ３３）。そして、健康管理サーバ１のメンタル解析部１３は、生活音の音声データを解析し、メンタルデータを取得する（Ｓ３４）。なお、Ｓ３４のメンタル解析処理については、図３のＳ２１と同様と同様であるため、ここでは説明を省略する。そして、メンタル解析部１３は、解析したメンタルデータを通信端末３に送信し、通信端末３は、送信されたメンタルデータをディスプレイに表示する（Ｓ３５）。ユーザは、表示されたメンタルデータを確認し（Ｓ３６）、登録指示を通信端末３に入力する（Ｓ３７）。通信端末３は、ユーザから登録指示を受け付けると、当該登録指示を健康管理サーバ１に送信する（Ｓ３８）。

健康管理サーバ１のメンタル解析部１３は、登録指示を受信すると、Ｓ３４で解析したメンタルデータを健康データテーブル１７に登録する（Ｓ３９）。なお、図８に示す本処理では、健康データテーブル１７（図６参照）において、ユーザＩＤ、日付、時刻、メンタルデータが設定される。メンタルデータとともにユーザＩＤを健康データテーブル１７に登録することで、図３の処理で登録される測定データおよびメンタルデータとを、図８で登録されるメンタルデータとは、関連付けて健康データテーブル１７に登録されることになる。

図３で説明した健康情報の測定データを音声で入力したタイミングだけでなく、日常の生活音の音声データを解析し、メンタルデータを取得することにより、実際のユーザの状態に即した高い精度でのメンタル解析を実現することができる。また、日常の生活音のメンタルデータを日付および時刻の時間情報とともに健康データテーブル１７に登録することで、ユーザのメンタル状態およびその推移を時系列に管理することができ、疾病の予兆および原因把握を検出することができる。

図９は、メンタル解析により数値化された感情の１つである抑うつ度の推移の一例を示すグラフである。図９（ａ）は、図３に示すヘルスケアデバイス６で健康情報を測定し、測定データを健康管理サーバ１に送信した際の音声データのみを用いてメンタル解析を行った場合の抑うつ度の推移を示すものである。この場合、データ取得のために一旦平静状態となるため、実際から落ちた形でのデータ把握となる。また、測定データの音声入力の際に、ユーザが意図的に声を変えて入力した場合、解析精度が低下する恐れがある。

これに対し、図９（ｂ）に示すように、日常の生活音の音声データを常時収集し、メンタル解析を行うことで、無意識にユーザが発したため息やネガティブ発言などを検知し、平静状態にならない形での高い精度でのメンタル状態およびその原因となる要因を把握することができる。このように、ユーザが測定データを音声入力するタイミングだけでなく、常時、ユーザが発する音声を収集して解析し、時間情報とともに蓄積しておくことで、実態に即した高い精度でのメンタル解析を実現し、またその原因把握にも活用することができる。

次に、カメラ５で撮影した体型画像データの解析および登録処理について説明する。

図１０は、体型画像データの解析・登録処理を示すシーケンス図である。ユーザは、例えば、図１１に示すように、カメラ５の前に立ち、自分の全身の画像を撮影する。カメラ５は、ユーザを撮像し、２次元および３次元の体型画像データとして通信端末３に出力または送信する（Ｓ５１）。

通信端末３は、カメラ５から入力された体型画像データを当該通信端末３の記憶装置に記憶し、健康管理サーバ１に送信する（Ｓ５２）。健康管理サーバ１のデータ受信部１１は、通信端末３から送信された体型画像データを体型画像ＤＢ１６に記憶する（Ｓ５３）。なお、通信端末３は、体型画像データを送信する際に、健康管理サーバ１側のデータ転送またはデータ登録などの規格に応じて規格の変更を行うこととしてもよい。

そして、健康管理サーバ１の体型解析部１４は、体型画像ＤＢ１６に記憶された体型画像データを画像解析し、体型データ、体勢データ、表情データ、顔色データなどを取得する（Ｓ５４）。体型データは、例えば腹部などの所定の部分のサイズを数値化したものである。体勢データは、前後および左右の歪みを示すデータである。表情データおよび顔色データは、体型画像データの顔の領域の画像データを画像解析して検出した表情および顔色を示すデータである。

そして、体型解析部１４は、解析した体型データ、体勢データ、表情データ、顔色データ（以下、「体型データ等」）を通信端末３に送信し、通信端末３は、送信された体型データ等をディスプレイに表示する（Ｓ５５）。ユーザは、表示された体型データ等を確認し（Ｓ５６）、登録指示を通信端末３に入力する（Ｓ５７）。通信端末３は、ユーザから登録指示を受け付けると、当該登録指示を健康管理サーバ１に送信する（Ｓ５８）。

健康管理サーバ１の体型解析部１４は、登録指示を受信すると、Ｓ５４で解析した体型データ等を健康データテーブル１７に登録する（Ｓ５９）。なお、図１０に示す本処理では、健康データテーブル１７（図６参照）において、Ｓ１３で体型画像データともに通信端末３から送信されるユーザＩＤと、当該体型画像データを受信した日付および時刻と、体型画像データのファイルＩＤ（または、体型画像ＤＢ１６の格納場所・アドレスなど）と、体型データと、体勢データと、表情データと、顔色データとが設定される。体型データ等とともにユーザＩＤを健康データテーブル１７に登録することで、図３および図８の処理で登録される測定データおよびメンタルデータと、図１０で登録される体型データ等とは、関連付けて健康データテーブル１７に登録されることになる。

次に、体型データ等の閲覧処理について説明する。

図１２は、体型データ等の閲覧処理を示すシーケンス図である。ユーザは、体型データ等の閲覧指示を通信端末３に入力する（Ｓ７１）。閲覧指示には、最新の体型データ等との比較対象の体型データ等が指定されているものとする。比較対象の体型データ等については、体型データ等の登録日付を指定する場合だけでなく、例えば、１ヶ月前、半年前、１年前などの時期を指定することとしてもよい。

通信端末３は、ユーザが入力した閲覧指示を健康管理サーバ１に送信する（Ｓ７２）。健康管理サーバ１のデータ受信部１１は、通信端末３から送信された閲覧指示を受信する。そして、健康管理サーバ１の体型解析部１４は、最新の体型データ等と、比較対象の体型データ等を健康データテーブル１７から読み出し（Ｓ７３）、両者のデータを比較する（Ｓ７４）。

そして、体型解析部１４は、体型データ等の比較結果を通信端末３に送信し、通信端末３は、送信された比較結果をディスプレイに表示する（Ｓ７５）。ユーザは、表示された比較結果を閲覧する（Ｓ７６）。

図１３は、通信端末３に表示される比較結果の一例を示すものである。図示する例では、９月２８日のデータと、その１ヶ月前の８月２８日のデータとの比較結果を示したものでる。図１３（ａ）は、腹部の体型データ、前後および左右の歪みを示す体勢データ、顔色データ、表情データの比較結果を示している。なお、体型データおよび体勢データの比較結果は、図１３（ｂ）に示すように、体型画像データから抽出される所定のポイントの３次元座標を用いで算出することができる。

また、体型解析部１４は、体型画像ＤＢ１６から対象の体型画像データをそれぞれ読み出し、図１３（ｃ）に示すようにこれらの体型画像データを並べて、図１３（ａ）の比較結果とともに通信端末３に送信し、表示させることとしてもよい。

図１４は、カメラ５を用いて入力される体型画像データから取得される体勢データおよび顔色データと、マイク４を用いて入力される音声データから取得される測定データ（ここでは、脈拍）およびメンタルデータ（ここでは、抑うつ度）を、時系列に表したものである。このように、健康情報の測定データおよびメンタルデータだけでなく、表情や体の歪み、俯き加減などを一元的に管理することで、より正確なユーザの状態を把握することができる。これにより、疾病の原因の把握や、表情・体勢による更なる精度の高い情報を収集することができる。

以上説明した本実施形態では、マイク５から入力された音声データを用いて、ヘルスケアデバイス６で測定した健康情報（測定データ）およびメンタルデータを健康管理サーバ１に登録し管理する。このように、本実施形態では、健康情報の登録を音声入力したタイミングで、測定データを取得できるとともに、メンタル解析を実現することができるため、一度の対応で健康情報とメンタルデータを登録でき、ユーザの利便性を向上させることができる。また、ヘルスケアデバイス６により測定した健康情報の測定データとメンタルデータとを関連付けて、時間情報とともに時系列に健康データテーブルに登録することで、ユーザの健康状態とメンタル状態の推移を管理し、より高い精度で疾病の予兆を検出することができる。

また、本実施形態では、ユーザは、音声でヘルスケアデバイス６の測定データを入力できるため、ユーザのデータ登録作業の負荷を軽減することができる。また、本実施形態では、健康管理サーバ１の変換テーブルに推定語（キーワード）などを設定しておくことで、音声データから不要なデータを自動的に削除するとともに、データ種別を選択して測定データを登録する。これによりユーザは、最低限の入力操作で簡易にデータ登録を行うことができる。また、音声入力でデータ登録が可能なため、通信機能を有する新たなヘルスケアデバイス６を購入することなく、容易にデータ登録を行うことができる。

また、本実施形態では、日常の生活音の音声データを用いて、メンタル解析を行うことで、実際のユーザの状態に即した高い精度でのメンタル解析を実現でき、その推移を時系列の管理することができる。

また、本実施形態では、音声データの解析だけでなく、カメラで撮影した体型画像データから体型データ等を取得し、健康管理サーバ１に登録し管理する。このように、音声での健康情報およびメンタル情報とともに、体型データ等を一元的に健康管理サーバ１で管理することで、メンタル状態の変化の契機となる身体情報の変化を確認でき、事前の不全の予兆把握が可能となる。

また、本実施形態では、ヘルスケアデバイス６、マイク４およびカメラ５により入力された音声データおよび体型画像データを用いて、健康情報の測定データ、メンタルデータおよび体型データ等が取得できるため、医師の診断を受けることなく、日常生活において健康管理を実現することができる。

なお、本発明は上記実施形態に限定されるものではなく、その要旨の範囲内で数々の変
形が可能である。例えば、健康管理サーバ１は、各種の閾値を記憶した閾値記憶部を有し、音声データから取得される測定データおよびメンタルデータや、体型画像データから取得される体型データ等が閾値を超えた場合は、通信端末３に警告情報を送信することとしてもよい。

また、健康管理サーバ１は、認証処理部を備え、ユーザまたは通信端末３の認証処置を行うこととしてもよい。

また、健康管理サーバ１は、マイク４やカメラ５の異常時の音の特徴を解析し、異常状態を通信端末３に警告することとしてもよい。

１：健康管理サーバ
１１：データ受信部
１２：測定データ取得部
１３：メンタル解析部
１４：体型解析部
１５：音声ＤＢ
１６：体型画像ＤＢ
１７：健康データテーブル
１８：メンタル解析結果ＤＢ
２：ＷＥＢサーバ
３：通信端末
４：マイク
５：カメラ
６：ヘルスケアデバイス

Claims

健康管理装置であって、
ヘルスケアデバイスの測定データを含む音声データを受信する受信手段と、
前記音声データを音声認識することで前記測定データを取得し、記憶手段に格納する測定データ取得手段と、
前記音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶手段に格納するメンタル解析手段と、を備えること
を特徴とする健康管理装置。
請求項１記載の健康管理装置であって、
前記受信手段は、体型画像データを受信し、
前記体型画像データを画像解析して体型データを生成し、前記測定データおよび前記メンタルデータと関連付けて前記記憶手段に格納する体型データ解析手段を、さらに有すること
を特徴とする健康管理装置。
請求項１または請求項２記載の健康管理装置であって、
前記受信手段は、ユーザが無意識に発した音声を含む生活音の音声データを受信し、
前記メンタル解析手段は、前記生活音の音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶手段に格納すること
を特徴とする健康管理装置。
請求項１から３のいずれか１項に記載の健康管理装置であって、
前記測定データ取得手段は、所定の推定語を用いて前記測定データのデータ種別を決定すること
を特徴とする健康管理装置。
健康管理装置が行う健康管理方法であって、
ヘルスケアデバイスの測定データを含む音声データを受信する受信ステップと、
前記音声データを音声認識することで前記測定データを取得し、記憶部に格納する測定データ取得ステップと、
前記音声データを解析してメンタルデータを生成し、前記測定データと関連付けて前記記憶部に格納するメンタル解析ステップと、を行うこと
を特徴とする健康管理方法。