JP6083661B1 - 健康管理サーバおよび健康管理サーバ制御方法並びに健康管理プログラム - Google Patents

Abstract

健康管理対象者の食事や健康状態から適切なアドバイスメッセージを生成して、健康管理のカリキュラム実行のモチベーションを向上させることができる健康管理サーバを提供する。本発明は、健康管理対象者が保有する端末とネットワークを介して接続された健康管理サーバであって、撮像部が送信する画像情報または文例情報を受信する受信部と、画像情報または前記文例情報を受け付ける受付部とを備え、画像情報が、健康管理対象者が摂取した食事である場合において、健康管理サーバは、さらに、食事の種類を認識する画像認識部と、食事の栄養素を分析する分析部と、分析結果を、画像情報または文例情報として端末に送信する送信部とを備える。

Description

本発明は、健康管理サーバおよび健康管理サーバ制御方法並びに健康管理プログラムに関し、特に栄養素摂取量を分析可能な健康管理サーバおよび健康管理サーバ制御方法並びに健康管理プログラムに関する。

近年、ダイエットやメタボリックシンドロームの予防などの健康意識の高まりを受けて、専門家の指導を受ける健康指導サービスが普及している。また、IT化に伴い、専門家とクライアントが直接対面することなく、オンライン上で健康指導サービスを受けるケースが増加している。

このような健康指導サービスにおいて、専門家は、オンライン端末からクライアントが摂取した食事や現在の健康状態などを確認し、当該確認結果に基づいて指導のためのメッセージを作成し、クライアントのオンライン端末にメッセージを送る必要がある。

このようなメッセージの作成および送信技術として、例えば、特許文献１には、クライアントが、自らの体況情報等をインターネット等を経由して、通知、報告、伝達、送信をすることができ、治療医療関係者と当該体況情報を常時共有することができるシステムが開示されている。また、この技術には、体況が一定のしきい値を超えた場合には警戒メッセージを表示するように構成されている。

また、特許文献２には、画像に含まれる食事部分を特定し、特定した食事部分に含まれる複数の画素値に基づいて、食事部分の画像を解析する解析技術が開示されている。

特開２０１４−０３２４４０号公報 特開２０１２−２１２２４９号公報

しかしながら、特許文献１記載の発明では、被験者（クライアント）がコメント欄に入力した日記やコメント等の内容に対して、当該クライアントを担当する医療・健康管理者が必要に応じて当該コメントに応答するメッセージを、当該クライアントに対して送信している。これによって、クライアントと医療・健康管理者の間でコミュニケーションが図られている。

また、特許文献１記載の発明には、予め回答パターン、サイクル、頻度が設定されており、医療・健康管理者によって決められたパターンの回答がクライアントにメッセージとして送信されているに過ぎない。このため、特許文献２記載の発明では、ユーザの判断が介在しないため健康指導サービスのユーザによる使用意識が低下するだけではなく、意に沿わない文例が表示される可能性があるため使用継続性に乏しいという問題がある。

また、特許文献２記載の発明は食事情報の画像解析方法が開示されているに過ぎず、画像解析した食事情報の栄養素の分析に関する言及はない。

そこで、本発明は、上記問題に鑑みてなされたものであり、指導のためのメッセージの作成および送信にあたって、クライアントの食事や健康状態から、専門家のアドバイスメッセージを作成するにあたり標準化および効率化を図ることができる。さらに、本発明は、クライアントにとって負担とならない、理解性および使用継続性のあるアドバイスを提供する支援ができるサーバを提供することを目的とする。

本発明に係る健康管理サーバは、健康管理対象者が保有する端末とネットワークを介して接続された健康管理サーバであって、端末に設置された撮像部が送信する画像情報または端末が送信する文例情報を受信する受信部と、画像情報または文例情報を受け付ける受付部とを備え、撮像部が取得した画像情報が、健康管理対象者が摂取した食事である場合において、健康管理サーバは、さらに、食事の種類を認識する画像認識部と、食事の特徴を抽出し、該特徴に基づいて、食事の栄養素を分析する分析部と、分析部によって分析した分析結果を、画像情報または文例情報として端末に送信する送信部とを備える。

さらに、本発明に係る健康管理サーバにおいて、健康管理サーバは、さらに、複数の食事と栄養素を対応付けて記憶する記憶部を備え、分析部は、健康管理対象者が摂取した食事の摂取量と栄養素に基づき、健康管理対象者が摂取した食事の栄養素摂取量を算出するものであってもよい。

さらに、本発明に係る健康管理サーバにおいて、記憶部は、健康管理対象者が摂取した食事の栄養素を記憶することが可能であり、分析部は、記憶した過去の栄養素の累積および傾向を分析しグラフとして前記端末の表示部に出力するものであってもよい。

さらに、本発明に係る健康管理サーバにおいて、記憶部は、健康管理対象者が選択する健康管理のカリキュラム情報を複数記憶するものであって、分析部は、分析結果に応じて、端末に対して送信すべき、他の推奨される健康管理のカリキュラム情報を選択するものであってもよい。

さらに、本発明に係る健康管理サーバにおいて、受信部は、さらに、専門家が端末に対して送信すべきものとして、複数のイラストまたは複数の文例の中からイラストまたは文例を選択する選択情報を受け付けるものであって、受付部は、前記分析結果に基づき、複数のイラストまたは複数の文例の中から推奨されるイラストまたは文例を選択する選択情報を受け付けるものであってもよい。

さらに、本発明に係る健康管理サーバにおいて、受信部は、予めグルーピングされた複数の端末から送信された画像情報またはメッセージ情報を受信するものであって、記健康管理サーバは、受付部が１以上のイラストを選択情報として受け付けた際に、該選択情報に基づいて、複数の文例から推奨すべき１以上の文例を生成する生成部を備え、受付部は、グルーピングされた複数の端末に対して送信すべき、複数のイラストまたは複数の文例の中からイラストまたは文例を選択情報として受け付けるものであって、記生成部は、選択されたイラストと、同一または類似もしくは相対するイラストを、所定の時間内に送信した前記グループピングされた端末を特定し、該特定した端末を保有する健康管理対象者を比較対象者として判定し、複数の文例から推奨すべき１以上の文例を生成する際に、比較対象者に関する情報を、表示部に表示出力するものでものであってもよい。

本発明に係る健康管理サーバ制御方法は、健康管理対象者が保有する端末とネットワークを介して接続された健康管理サーバ制御方法であって、端末に設置された撮像部によって画像情報を取得する撮像ステップが送信する画像情報または前記端末が送信する文例情報を受信する受信ステップと、画像情報または前記文例情報を受け付ける受付ステップとを備え、撮像ステップが取得した画像情報が、健康管理対象者が摂取した食事である場合において、健康管理サーバは、さらに、食事の種類を認識する画像認識ステップと、食事の特徴を抽出し、該特徴に基づいて、食事の栄養素を分析する分析ステップと、分析ステップによって分析した分析結果を、画像情報または文例情報として端末に送信する送信ステップとを含むものである。

本発明に係る健康管理プログラムは、健康管理対象者が保有する端末とネットワークを介して接続された健康管理プログラムであって、コンピュータに、端末に設置された撮像部によって画像情報を取得する撮像機能が送信する画像情報または端末が送信する文例情報を受信する受信機能と、画像情報または前記文例情報を受け付ける受付機能とを備え、撮像機能が取得した画像情報が、健康管理対象者が摂取した食事である場合において、健康管理サーバは、さらに、食事の種類を認識する画像認識機能と、食事の特徴を抽出し、該特徴に基づいて、前記食事の栄養素を分析する分析機能と、分析機能によって分析した分析結果を、画像情報または文例情報として前記端末に送信する送信機能とを含むものである。

本発明によれば、専門家のアドバイスメッセージの作成において、健康管理対象者の食事や健康状態を分析し、推薦すべきアドバイスメッセージを専門家に送信することができる。また、専門家のアドバイスメッセージ作成および送信において、健康管理対象者が日々の健康管理において、理解に負担のないイラストを一次的に送ることで理解への導入を促すことができる。その後、食事の分析結果などに基づき、文章でのアドバイスメッセージを送ることで、理解性および使用継続性のあるオンライン上での健康指導サービスを提供することができる。そして、健康管理対象者の食事や健康状態から健康管理指導に伴うアドバイスメッセージを送ることで、健康管理対象者の健康状態を改善させることができるオンライン上での健康指導サービスを提供することができる。さらに、本発明によれば、適切なタイミングで適切なアドバイスメッセージを健康管理対象者が保有する端末に送信することができる。

したがって、専門家のアドバイスメッセージ作成および送信において、健康管理対象者が日々の健康管理において、理解に負担のないイラストを一次的に送ることで理解への導入を促し、その後、食事の分析結果などに基づき、文章でのアドバイスメッセージを送ることで、理解性および使用継続性のあるオンライン上での健康指導サービスを提供することができる。

健康管理システムのシステム構成を示すシステム図 健康管理サーバの機能構成を示すブロック図 ユーザ端末の表示部に表示される食事画像の例を示す図 人工知能を備えるサーバの動作の一例を示すフローチャート 健康管理対象者が摂取した食事の栄養素摂取量の累積データを示す図表 健康管理対象者が摂取した食事の栄養素の種類および摂取量を示す図表 記憶部１５０に記憶されているイラストとメッセージの対応付けの情報５００の例を示すデータ概念図 専門家のユーザ端末に表示される表示例を示す模式図

以下、本発明の一実施態様について、図面を参照しながら説明する。
<実施の形態>
＜概要＞

図１は、健康管理システムのシステム構成を示すシステム図である。

図１に示すように、健康管理システムは、健康管理サーバ１００、複数のユーザ端末２００、３００を含む。健康管理サーバ１００は、ネットワーク４００を介してユーザ端末２００およびユーザ端末３００と接続される。なお、図１において、説明を簡単にするために、ユーザ端末は２台だけ示してあるが、これ以上存在してもよいことは言うまでもない。また、ユーザ端末２００およびユーザ端末３００双方の具体的な機器は、図示のように、携帯端末およびパーソナルコンピュータ（ＰＣ）に限定されず、例えば、スマートフォン、タブレット端末、その他の電子機器であってもよい。

ここで、例えば、ユーザ端末２００は、健康管理対象者が保有する端末を示しているとし、また、ユーザ端末３００は、専門家が保有する端末を示しているとする。そして、健康管理対象者自身が摂取した食事を撮影し、ユーザ端末２００から当該撮影した食事の画像を健康管理サーバ１００に送信する。

健康管理サーバ１００は、当該食事の画像を受信すると、ユーザ端末３００に表示出力する。専門家は、表示出力された当該画像から、健康管理対象者に送信すべきメッセージとしての文例を決定する。当該決定は、例えば、専門家が、表示出力された当該画像から、健康管理対象者に送信すべきイラストを複数のイラストの中から選択することによって行う。そして、専門家は、当該抽出された文例から、健康管理対象者に送信すべき文例を選択し、当該選択情報を受け付けることによって、ユーザ端末２００に対し、当該選択された文例を送信するように構成してもよい。また、健康管理サーバ１００が当該選択情報を受けることによって、当該選択されたイラストに基づいて、予め記憶されているイラストと文例の対応付けから、専門家に推奨すべき文例を複数抽出するように構成してもよい。

ここで、文例とは、専門家からのアドバイスメッセージ、警告、評価、健康管理対象者が行うダイエットおよび生活習慣活動行動に効果のあるお勧めのタスク、および、健康管理対象者の投稿、質問などが該当する。また、画像は、健康管理対象者自身が摂取した食事の他に、身体情報に関するデータ表、分析結果データ、健康管理サーバ１００がアドバイスメッセージとともに、または別に送信するイラストなどが該当する。

専門家がユーザ端末３００で当該送信された複数の文例を含む文例情報からアドバイスメッセージを作成し、当該アドバイスメッセージを、イラストとともに、または別に、ユーザ端末２００に送信することで、健康管理対象者に健康管理のための指導を行うように構成してもよい。なお、当該指導は、健康管理者毎に個別で行ってもよいし、健康管理対象者をグルーピングして、当該グループ単位で指導してもよい。ここで、グルーピングとは、複数の健康管理対象者を対象に、グループ指導を行うための組分けをいう。

＜構成＞
以下、サーバ１００、ユーザ端末２００およびユーザ端末３００の構成について説明する。図２は、サーバ１００、ユーザ端末２００およびユーザ端末３００の機能構成を示すブロック図である。

図２に示すように、ユーザ端末２００は、表示部２１０と、撮像部２２０とを含んで構成される。

表示部２１０は、液晶画面などによって構成されており、各種画像情報および文例情報を表示出力する。なお、表示部２１０は、表示画面上に配置されるタッチパネルを有するように構成されてもよい。表示部２００には、例えば、健康管理サーバ１００またはユーザ端末３００から送信されるイラストとしての画像情報、文例情報（アドバイスメッセージ、警告、評価など）が表示される。また、ユーザ端末２００がユーザ端末３００に対して送信する食事画像としての画像情報または文例情報（専門家に対する質問、要望など）が表示される。ユーザ端末３００の表示部３１０は、ユーザ端末２００の表示部２１０の構成と基本的に同じであるため、説明を割愛する。

撮像部２２０は食事画像を撮影し、撮影した食事画像を画像データとして取得する。当該取得した画像データはユーザ端末２００に内蔵されているメモリ（不図示）に記憶される。撮像部２２０は、例えば、ユーザ端末２００に設けられているカメラである。以下の説明において、撮像部２２０はカメラとして説明する。

カメラ２２０で撮像される画像は、例えば、健康管理対象者が摂取した食事である。メモリに記憶された食事画像の画像データは、ネットワーク４００を介して健康管理サーバ１００に送信される。なお、ユーザ端末３００は健康管理サーバ１００を経由して健康管理対象者が摂取した食事画像を画像データとして受け取ることができる。当該受け取った画像データは、健康管理サーバ１００を経由して表示部３１０に表示出力される。

また、サーバ１００は、受信部１１０と、受付部１２０と、画像認識部１３０と、分析部１４０と、記憶部１５０、送信部１６０とを含んで構成される。

受信部１１０は、ネットワーク４００を介して、ユーザ端末２００およびユーザ端末３００から送信された画像情報および文例情報を受信する。当該送受信における通信は、有線、無線のいずれでもよく、また、互いの通信が実行できるのであれば、どのような通信プロトコルを用いてもよい。

受付部１２０は、ユーザ端末２００またはユーザ端末３００に対して送信すべきものとして画像情報および文例情報を受け付ける機能を有する。

画像認識部１３０は、受付部１２０ら出力された食事画像としての画像データから、食事画像の性質を示す色調、色彩、形状などの特徴の度合いを示す特徴量を抽出し、特定の画像のみを認識する機能を有する。

また、画像認識部１３０における食事画像の認識方法は、例えば、（１）カメラ２２０で撮像した画像が健康管理対象者が摂取した食事である場合、食事画像の中から、食事部分と食器、箸、背景などの食事以外の部分を、色調、色彩、形状に基づき分類し、食事部分のみを抽出し、食事の種類および食材を認識する。あるいは、（２）当該画像の中から食器、箸、背景など食事部分以外の部分を除き、ごはん、味噌汁、魚などの食事部分を特定する。あるいは、（３）カメラ２２０で撮像された画像の特徴（色調、色彩、形状など）から、予め、記憶されている特定の食事画像と撮像された食事画像を比較し、記憶されている食事画像を認識した場合に、認識した食事画像の特定を行ってもよい。

画像認識部１３０が複数の食事画像を認識した場合は、複数の食事画像を特定することができるように構成してもよい。食事画像の記憶は、画像認識部１３０にて行ってもよいし、後述する記憶部１５０にて行ってもよい。画像認識部１３０は、食事画像の特徴点を算出し、当該算出結果に基づいて、マッチングする画像を検索し、マッチングさせることで、食事画像を特定する。

画像認識部１３０は、健康管理対象者のユーザ端末２００がグルーピングされている場合には、同一または類似もしくは相対する食事画像を所定の時間内に送信した同じくグルーピングされている端末を保有する健康管理対象者を比較対象者として判定するように構成してもよい。また、ここで、比較対象者とは、同じグループに所属する他の健康管理対象者であって、類似する食生活を送っている者、あるいは、類似の身体情報を有する者を、健康管理対象者自身の身体情報と掛け合わせて比較するための健康管理対象者をいう。具体的には、ほぼ同じ時間帯に同一または類似の食事画像を送信している他の健康管理対象者、または類似の身体情報を有する者を比較対象者と判定する。当該判定により、起床時間、睡眠時間、食事や仕事などのライフスタイルがほぼ同一と認められる場合に比較対象者と認定する。

分析部１４０は、画像認識部１３０にて抽出した色調、色彩、形状などの食事画像の特徴に基づき、該食事画像に含有される栄養素を分析する。分析部１４０は、画像認識部１３０で認識した健康管理対象者が摂取した食事の種類や内容に基づき、当該食事に含まれている栄養素および摂取量（摂取カロリーなど）を分析し、当該分析結果をイラストとともに、または別にアドバイスメッセージ情報として出力する。なお、分析結果の出力は、健康管理サーバ１００が別個に生成部（不図示）を備えることによって、生成部が分析結果を出力するように構成してもよい。

また、分析方法は、例えば、（１）画像認識部１３０にて特定した食事画像の特徴に基づき、摂取カロリー、栄養素の種類、量を自動で算出するようにプログラミングされていてもよい。あるいは、（２）専門家が画像認識部１３０によって特定された食事の種類および内容をユーザ端末３００の表示部３１０から確認することにより、ユーザ端末３００から健康管理サーバ１００に当該食事の種類および内容を入力し、その入力結果に基づき、分析部１４０が摂取カロリー、栄養素の種類、量を算出するように構成してもよい。

以上のような分析方法により、食事の種類に基づく摂取カロリー、各栄養素の種類、量などが決定するため、分析部１４０は、当該分析結果をグラフなどの画像データや数値データなどとして出力するように構成されている。なお、分析には、健康管理対象者は、食事の量のデータを食事画像とともに健康管理サーバ１００に送信しておくことが好ましい。これによって、より正確に、食事の摂取カロリー、栄養素の種類、量を分析することができる。

なお、上記のように、健康管理対象者のユーザ端末２００がグルーピングされている場合には、比較対象者に共通に摂取された食事の構成を分析することもできる。これによって、類似する身体情報の比較対象者と自分が摂取した栄養素の量を比較することにより、自分の食事内容を見直したり、比較対象者をライバルと認識することにより、健康管理対象者に、運動行動のモチベーションを高まらせることができる。

記憶部１５０は、複数の食事情報と、複数の食事の栄養素情報などを対応付けて記憶する。また、記憶部１５０は、ユーザ端末２００から送信される健康管理対象者が摂取した食事画像が、順次記憶されるように構成されている。また、記憶部１５０は、過去に健康管理対象者が摂取した食事画像が、健康管理対象者の身体情報と、食事の摂取時間と、各食材の栄養素と、分析結果とを対応付けて記憶する。記憶部１５０は、典型的には、ＨＤＤ（Hard Disc Drive）、ＳＳＤ（Solid State Drive）、フラッシュメモリなど各種の記録媒体により実現される。

送信部１６０は、健康管理対象者から送信された食事画像に基づく分析結果をイラスト、アドバイスメッセージ、警告、評価としてユーザ端末２００に送信し、また、当該イラスト、アドバイスメッセージ、警告、評価を、ユーザ端末３００に送信する機能を有する。当該送信における通信は、受信部１１０と同じである。

また、ユーザ端末３００は、表示部３１０を含んで構成される。表示部３１０は、ネットワーク４００を介して、健康管理サーバ１００と通信し、健康管理サーバ１００から受信した、健康管理対象者のユーザ端末２００から送信された食事画像または投稿や質問などのメッセージ情報、および分析結果を表示出力する。また、表示部３１０は、健康管理サーバ１００を経由して、ユーザ端末２００から送信された画像情報またはメッセージ情報の過去の使用履歴情報を表示出力する。

また、表示部３１０は、健康管理対象者がグルーピングされている場合、かつ、比較対象者が判定されている場合には、当該比較対象者に関する情報を表示出力する。例えば、「○○さんが現在のライバルです」といった様に表示出力する。さらに、表示部３１０は、当該比較対象者の表示出力と併せて、当該比較対象者に所定の時間内に送信したイラスト、アドバイスメッセージ、警告、評価が特定された場合には、当該特定されたイラスト、アドバイスメッセージ、警告、評価に関する情報を表示出力する。具体的には、対象の文例の直下などに「ライバルの○○さんに△△情報が送信されました」といった様に表示出力する。以上が、健康管理サーバ１００、ユーザ端末２００およびユーザ端末３００の機能構成についての説明である。

次に、図３を用いて、カメラ２２０が取得する食事画像について説明する。図３は、ユーザ端末２００の表示部２１０に表示される食事画像の例を示す図である。例えば、図３に例示するように、カメラ２２０は、食事画像として、ごはん、味噌汁、魚、豆類などの食事部分と、食器、箸、背景などの食事部分以外の部分とが映った食事画像を取得する。その後、ユーザ端末２００は、内蔵メモリに当該食事画像を記憶するとともに、取得した食事画像をユーザ端末３００に送信する。ユーザ端末２００の表示部２１０に表示された食事画像は、健康管理サーバ１００を経由してユーザ端末３００に送信するように構成してもよいし、直接ユーザ端末３００に送信するように構成してもよい。

＜動作＞
図４を用いて、本発明の一実施の形態に係る健康管理サーバ１００の動作を説明する。 図４は、健康管理サーバ１００の動作を示すフローチャートである。

受信部１１０は、健康管理対象者のユーザ端末２００から送られてきた食事画像を受信する（ステップＳ１１）。受信部１１０は、当該受信した画像情報またはメッセージ情報を受付部１２０に伝達する。なお、受信部１１０は、専門家および健康管理対象者の各種メッセージ情報も受信する。

受付部１２０は、健康管理対象者が送信した食事画像を受け付ける（ステップＳ１２）。受信部１１０で受信した食事情報を、健康管理サーバ１００の受付部１２０にて受け付ける。受付部１２０は、当該受け付けた食事画像を画像認識部１３０に伝達する。なお、受付部１２０は、受信部１１０から送信された専門家および健康管理対象者の各種メッセージ情報も受け付ける。

画像認識部１３０は、受付部１２０から送信された食事画像から食事の種類を認識する（ステップＳ１３）。具体的には、画像の性質を示す色調、色彩、形状などの特徴の度合いを示す食事画像の特徴量を抽出し（ステップＳ１４）、特定の画像のみを認識する。より詳細には、図３に示される食事画像の中から、食事部分と食器、箸、背景などの食事以外の部分を、色調、色彩、形状に基づき分類し、食事部分のみを抽出し、食事の種類および食材を認識する。なお、食事の種類の認識方法が、これに限定されないのは上述した通りである。画像認識部１３０は、当該認識した食事画像を分析部１４０に伝達する。

分析部１４０は、食事画像から認識される食事の種類に基づき、当該食事に含まれる栄養素を分析する（ステップＳ１５）。具体的には、画像認識部１３０にて特定した食事画像の特徴に基づき、摂取カロリー、栄養素の種類、量を算出する。ここで、分析１４０は、画像認識部１３０によって認識された食事の種類に基づき、当該食事に対応する栄養素および摂取量を自動で算出できるように構成されている。なお、当該分析方法が、これに限定されないのは上述した通りである。

そして分析部１４０は、栄養素および摂取量の算出結果に基づき、グラフを作成する（ステップＳ１６）。例えば、本発明に係る一実施形態では、健康管理者が摂取した栄養素の摂取量を示すグラフを例示している。分析部１４０は、当該認識した食事画像を受付部１２０に伝達する。なお、当該グラフの作成は、健康管理サーバ１００が別途備える生成部（不図示）が実行してもよい。

受付部１２０は、健康管理対象者に送信するグラフを受け付ける（ステップＳ１７）。なお、専門家が保有するユーザ端末３００にも、健康管理サーバ１００を経由して、あるいは直接グラフが送信されるように構成してもよい。また、ユーザ端末３００は、健康管理サーバ１００を経由して、あるいは直接ユーザ端末２００に対し当該グラフとともに、アドバイスメッセージや警告などの文例情報を送信できるように構成してもよい。受付部１２０は、受け付けたグラフ、文例情報を送信部１６０に伝達する。

送信部１６０は、送信すべきものとしてグラフおよび文例情報をユーザ端末２００に送信し、また、当該グラフおよび当該文例情報をユーザ端末３００に送信する（ステップＳ１８）。当該グラフの送信と、当該文例情報の送信は、同期してもよいし、非同期であってもよい。また、ユーザ端末２００およびユーザ端末３００に、当該グラフおよび当該文例情報が同期して送信されてもよいし、非同期で送信されてもよい。以上が、健康管理サーバ１００の動作についての説明である。

続いて、図５を用いて、健康管理対象者のユーザ端末２００および専門家のユーザ端末３００に表示される、画像情報としてのグラフの表示態様を説明する。

図５は、健康管理対象者が摂取した食事の栄養素摂取量の累積データを示す図表である。横軸は日にちを示し、縦軸は栄養素の摂取量を示す。本発明の一実施形態では、栄養素の摂取量をカロリー（ｋｃａｌ）として表す。ユーザ端末２００の表示部２１０およびユーザ端末３００の表示部３１０には、１日に摂取した総カロリー値が累積してグラフとして表示出力される。棒グラフにより１日毎の摂取カロリーの傾向を認識できるとともに、カロリーの累積データを曲線グラフとして表示することにより、身体情報が類似するライバルとなり得る比較対象者のグラフ傾向と対比することができる。このように、ライバルの分析結果情報を送信することで、健康管理対象者は運動行動のモチベーションを高めることができる。なお、健康管理対象者の身体情報に応じて、１日の目標とする摂取カロリーを設定しておき、目標カロリーを超えた場合に警告音を発するように構成してもよい。当該警告音は、例えば、図示しない健康管理サーバ１００に別置される警告音通知部によって行うように構成してもよい。あるいは、目標摂取カロリーを超える日の棒グラフの色彩を変えて警告を促すように構成してもよい。

なお、図５においては、１日毎の摂取カロリーを累積する場合を例示して説明したが、本発明はこれに限定されない。１週間または２週間を一単位として摂取カロリーを算出し図５に示すようなグラフを作成するように構成してもよい。あるいは、朝食、昼食、夕食時の摂取カロリーを対比できるようにグラフ表示してもよい。あるいは、摂取カロリーの数値データを表として表示するように構成してもよい。

次に、図６を用いて、健康管理対象者のユーザ端末２００および専門家のユーザ端末３００に表示される、画像情報としてのグラフの別の表示態様を説明する。

図６は、健康管理対象者が摂取した食事の栄養素の種類および摂取量を示す図表としてレーダチャートを示す。黒丸（●印）は実際の摂取カロリーを示し、白丸（○印）は摂取カロリーの目標値を示す。健康管理対象者が摂取した食事の摂取量（総摂取カロリー量）が表示されるとともに、塩分量、炭水化物量、たんぱく質量、脂質量、カルシウム量、鉄分量、各種ビタミン量など食事に含まれている栄養素量を、含有栄養素毎にレーダチャートとして表示出力することができる。なお、当該レーダチャートは、例えば、１週間分のデータを１日おきに併記するように構成してもよい。これにより、健康管理者は自己の摂取カロリー状態を容易に認識することができ、専門家は当該レーダチャートの結果から、適切なアドバイスメッセージや警告を送ることができるという効果を奏する。これによって、専門家は健康管理対象者に対し、より適切な健康管理の指導を行うことができる。例えば、専門家は健康管理者（○○さん）に対し、「○○さん、鉄分が不足しているため、レバーを取るようにしましょう。」とか、あるいは「○○さん、ビタミンＡを過剰摂取しているため、玄米や煮干しをもっと食べるように心掛けましょう。」などのメッセージを送信する。

なお、過去の分析結果に基づくグラフは、記憶部１５０に蓄積されており、健康管理者または専門家はいつでも当該グラフを、それぞれのユーザ端末２００、ユーザ端末３００に表示出力することができる。

次に、図７を用いて、専門家が当該分析結果に基づくグラフから、健康管理者に送信するアドバイスメッセージや警告としての文例の送信方法を例示して説明する。図７は、記憶部１５０に記憶されているイラストと文例の対応付けの情報５００の例を示すデータ概念図である。

文例の送信方法は、例えば、専門家が、表示出力された当該イラストから、健康管理対象者に送信すべきイラストを複数のイラストの中から選択することによって行う。健康管理サーバ１００が当該選択情報を受けることによって、当該選択されたイラストに基づいて、予め記憶されているイラストとアドバイスメッセージ、警告としての文例の対応付けから、専門家に推奨すべき文例を複数抽出するように構成してもよい。そして、専門家は、当該抽出された文例から、健康管理対象者に送信すべき文例を選択し、当該選択情報を受け付けることによって、ユーザ端末３００に対し、当該選択された文例を送信するように構成してもよい。

図７に示すように、対応付け情報５００は、イラスト情報５０１と、アドバイスメッセージ、警告としての文例情報５０２と、過去の使用履歴５０３の使用頻度５０４と、過去の使用履歴５０３の最終使用日時５０５とが対応付けられた情報である。対応付け情報５００は、選択されたイラストと対応付けられているアドバイスメッセージ、警告を特定し得る情報であればどのような情報であってもよく、これ以外の情報を含んでもよいことは言うまでもない。例えば、「緑黄食野菜足りません」というイラストが選択された場合、当該選択されたイラスト情報に対応付けられている、「野菜を多くとりましょう。」「特に緑黄食野菜が足りません。」「たんぱく質と野菜をバランスよくとりましょう。」「外食のメニューを選ぶ際にも、野菜をとるようにしましょう。」といった文例（アドバイスメッセージ、警告）５０２と過去の使用履歴５０３が抽出される。ここで、過去の使用履歴５０３は、使用頻度５０４と最終使用日時のいずれか一方でも、両方対応付けられていてもよい。また、イラスト情報は、具体的には、ＧＩＦ（Graphic Interchange Format）データ、ＪＰＥＧ（Joint Photographic Experts Group）データなどの静止画、ＭＰＥＧ（Moving Picture Experts Group）データなどの動画であってもよい。また、最終使用日時は、日時を示すものであれば、どのような形で表現されてもよく、例えば、ISO 8601で規定されている、年＝YYYY（4桁の数字。グレゴリオ暦）、月＝MM（2桁の数字。以降同じ）、日＝DD、時＝hh、分＝mm、秒＝ssとした、基本表記YYYYMMDDThhmmssまたは、拡張表記YYYY-MM-DDThh:mm:ssを用いることが考えられる。

次に、上述したように、専門家が、健康管理対象者に送信すべきイラストを複数のイラストの中から選択することによって専門家の負担を軽減しつつ、健康管理対象者に対し適切なアドバイスメッセージ、警告としての文例を選択する場合の一連の表示態様について説明する。

図８は、専門家のユーザ端末３００に表示される表示例を示す模式図である。例えば、左上の「野菜が足りません！」と表記されているイラストを選択すると、右上の当該イラストに対応付けられている複数の文例がリスト表示でその使用頻度と併せて、表示出力される。また、当該表示出力されたアドバイスメッセージ、警告のうち、例えば「肉ばかりでなく、野菜を増やすようにしましょう。」といった文例を選択すると、専門家のアドバイスメッセージ作成のためのテキストボックスに、当該文例に「○○さん、ご投稿ありがとうございます。」といった枕詞を付与して、「○○さん、ご投稿ありがとうございます。肉ばかりでなく、野菜を増やすようにしましょう。」と表示出力される。なお、当該枕言葉は、健康管理対象者毎、または、健康管理対象者共通で予め設定されている文言であれば、どの様な内容でもよく、また、当該付与がないように構成してもよい。

以上が、健康管理サーバ１００が提供する専門家が健康管理対象者がら送信された食事画像に基づき、健康管理の指導を行う健康管理サービスの一実施形態である。

＜その他＞
（１）本発明に係るサービスとして、健康指導サービスを取りあげているが、本発明は当該事業以外の事業においても用いることができる。特に、人の心理や精神への働きかけを用いる事業（例えば、人のモチベーションを上げるため、アドバイスを行う事業）、福祉（例えば、専門家が地域のコミュニティの福祉に対して遠隔でアドバイスする場合など）、教育などの事業において用いることができる。
（２）本発明に係るサービスに適用される端末として、携帯端末、ＰＣを利用する場合について説明したが、本発明はこれに限定されない。例えば、ウェアラブル端末を利用するように構成してもよい。健康管理対象者が身につけて持ち歩くことができるため、いつでも、どこでもサービスを利用することができるという利便性を有する。これにより、健康管理者自身のライフスタイルをリアルタイムでサーバに送信することができるため、より適切なアドバイスメッセージを受け取ることが可能になる。
（３）本発明に係るサービスとして、健康管理サーバ１００が、複数のイラストの中から質問に対する回答やアドバイスメッセージなどを送る際に参考となるイラストの選択を行い、これを専門家が保有するユーザ端末３００送信するように構成を例示して説明した。そして、専門家が、当該選択されたイラストに基づいて、予め記憶されているイラストと文例の対応付けから、健康管理対象者に推奨すべき文例を専門家自身が抽出するように構成する場合を例示して説明したが、本発明はこれに限定されない。例えば、人工知能部１５０を備える健康管理サーバ１００が、適切な文例を自動で生成するように構成してもよい。

１００ 健康管理サーバ
１１０ 受信部
１２０ 受付部
１３０ 画像認識部
１４０ 分析部
１５０ 記憶部
１６０ 送信部
２００ ユーザ端末（健康管理対象者）
２１０ 表示部
２２０ 撮像部（カメラ）
３００ ユーザ端末（専門家）
３１０ 表示部
４００ ネットワーク

Claims (6)

1. 健康管理対象者が保有する端末とネットワークを介して接続された健康管理サーバであって、
   前記端末に設置された撮像部が送信する画像情報または前記端末が送信する文例情報を受信する受信部と、
   前記画像情報または前記文例情報を受け付ける受付部とを備え、
   前記撮像部が取得した画像情報が、前記健康管理対象者が摂取した食事である場合において、
   前記健康管理サーバは、さらに、
   前記食事の種類を認識する画像認識部と、
   前記食事の特徴を抽出し、該特徴に基づいて、前記食事の栄養素を分析する分析部と、
   前記分析部によって分析した分析結果を、画像情報または文例情報として前記端末に送信する送信部とを備え、
   前記受信部は、さらに、専門家が前記端末に対して送信すべきものとして、複数のイラストまたは複数の文例の中からイラストまたは文例を選択する選択情報を受け付けるとともに、予めグルーピングされた複数の端末から送信された画像情報またはメッセージ情報を受信するものであって、
   前記受付部は、前記分析結果に基づき、前記グルーピングされた複数の端末に対して送信すべき、前記複数のイラストまたは前記複数の文例の中からイラストまたは文例を選択情報として受け付け、
   前記健康管理サーバは、さらに、
   前記受付部が１以上のイラストを選択情報として受け付けた際に、該選択情報に基づいて、前記複数の文例から推奨すべき１以上の文例を生成する生成部を備え、
   前記生成部は、前記選択されたイラストと、同一または類似もしくは相対するイラストを、所定の時間内に送信した前記グループピングされた端末を特定し、該特定した端末を保有する健康管理対象者を比較対象者として判定し、
   前記複数の文例から推奨すべき１以上の文例を生成する際に、前記比較対象者に関する情報を、前記端末の表示部に表示出力することを特徴とする健康管理サーバ。
2. 前記健康管理サーバは、さらに、
   複数の食事と栄養素を対応付けて記憶する記憶部を備え、
   前記分析部は、
   前記健康管理対象者が摂取した食事の摂取量と前記栄養素に基づき、前記健康管理対象者が摂取した食事の栄養素摂取量を算出することを特徴とする請求項１記載の健康管理サーバ。
3. 前記記憶部は、前記健康管理対象者が摂取した食事の栄養素を記憶することが可能であり、
   前記分析部は、
   記憶した過去の栄養素の累積および傾向を分析しグラフとして前記端末の表示部に出力することを特徴とする請求項２記載の健康管理サーバ。
4. 前記記憶部は、前記健康管理対象者が選択する健康管理のカリキュラム情報を複数記憶するものであって、
   前記分析部は、
   前記分析結果に応じて、前記端末に対して送信すべき、他の推奨される健康管理のカリキュラム情報を選択することを特徴とする請求項３記載の健康管理サーバ。
5. 健康管理対象者が保有する端末とネットワークを介して接続された健康管理サーバ制御方法であって、
   前記端末に設置された撮像部によって画像情報を取得する撮像ステップが送信する画像情報または前記端末が送信する文例情報を受信する受信ステップと、
   前記画像情報または前記文例情報を受け付ける受付ステップとを備え、
   前記撮像ステップが取得した画像情報が、前記健康管理対象者が摂取した食事である場合において、
   前記健康管理サーバ制御方法は、さらに、
   前記食事の種類を認識する画像認識ステップと、
   前記食事の特徴を抽出し、該特徴に基づいて、前記食事の栄養素を分析する分析ステップと、
   前記分析ステップによって分析した分析結果を、画像情報または文例情報として前記端末に送信する送信ステップとを含み、
   前記受信ステップにおいて、さらに、専門家が前記端末に対して送信すべきものとして、複数のイラストまたは複数の文例の中からイラストまたは文例を選択する選択情報を受け付けるとともに、予めグルーピングされた複数の端末から送信された画像情報またはメッセージ情報を受信し、
   前記受付ステップにおいて、前記分析結果に基づき、前記グルーピングされた複数の端末に対して送信すべき、前記複数のイラストまたは前記複数の文例の中からイラストまたは文例を選択情報として受け付け、
   前記健康管理サーバ制御方法は、さらに、
   前記受付ステップにおいて１以上のイラストを選択情報として受け付けた際に、該選択情報に基づいて、前記複数の文例から推奨すべき１以上の文例を生成する生成ステップを含み、
   前記生成ステップにおいて、前記選択されたイラストと、同一または類似もしくは相対するイラストを、所定の時間内に送信した前記グループピングされた端末を特定し、該特定した端末を保有する健康管理対象者を比較対象者として判定し、
   前記複数の文例から推奨すべき１以上の文例を生成する際に、前記比較対象者に関する情報を、前記端末の表示部に表示出力することを特徴とする健康管理サーバ制御方法。
6. 健康管理対象者が保有する端末とネットワークを介して接続された健康管理プログラムであって、
   コンピュータに、
   前記端末に設置された撮像部によって画像情報を取得する撮像機能が送信する画像情報または前記端末が送信する文例情報を受信する受信機能と、
   前記画像情報または前記文例情報を受け付ける受付機能とを実現させ、
   前記撮像機能が取得した画像情報が、前記健康管理対象者が摂取した食事である場合において、
   前記健康管理プログラムは、さらに、
   前記コンピュータに、
   前記食事の種類を認識する画像認識機能と、
   前記食事の特徴を抽出し、該特徴に基づいて、前記食事の栄養素を分析する分析機能と、
   前記分析機能によって分析した分析結果を、画像情報または文例情報として前記端末に送信する送信機能とを実現させ、
   前記受信機能において、さらに、専門家が前記端末に対して送信すべきものとして、複数のイラストまたは複数の文例の中からイラストまたは文例を選択する選択情報を受け付けるとともに、予めグルーピングされた複数の端末から送信された画像情報またはメッセージ情報を受信し、
   前記受付機能において、前記分析結果に基づき、前記グルーピングされた複数の端末に対して送信すべき、前記複数のイラストまたは前記複数の文例の中からイラストまたは文例を選択情報として受け付け、
   前記健康管理プログラムは、さらに、
   前記コンピュータに、
   前記受付機能において１以上のイラストを選択情報として受け付けた際に、該選択情報に基づいて、前記複数の文例から推奨すべき１以上の文例を生成する生成機能を実現させ、
   前記生成機能において、前記選択されたイラストと、同一または類似もしくは相対するイラストを、所定の時間内に送信した前記グループピングされた端末を特定し、該特定した端末を保有する健康管理対象者を比較対象者として判定し、
   前記複数の文例から推奨すべき１以上の文例を生成する際に、前記比較対象者に関する情報を、前記端末の表示部に表示出力することを特徴とする健康管理プログラム。

Images