JP2016139319A - Health management device and health management program - Google Patents

Health management device and health management program Download PDF

Info

Publication number
JP2016139319A
JP2016139319A JP2015014482A JP2015014482A JP2016139319A JP 2016139319 A JP2016139319 A JP 2016139319A JP 2015014482 A JP2015014482 A JP 2015014482A JP 2015014482 A JP2015014482 A JP 2015014482A JP 2016139319 A JP2016139319 A JP 2016139319A
Authority
JP
Japan
Prior art keywords
terminal device
user
health management
store
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015014482A
Other languages
Japanese (ja)
Other versions
JP6468590B2 (en
Inventor
温子 國定
Atsuko Kunisada
温子 國定
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2015014482A priority Critical patent/JP6468590B2/en
Publication of JP2016139319A publication Critical patent/JP2016139319A/en
Application granted granted Critical
Publication of JP6468590B2 publication Critical patent/JP6468590B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a health management device and health management program that can appropriately manage an amount of consumption of calories of an individual and caloric intake thereof by grasping a behavior of the individual.SOLUTION: A health management device comprises: a terminal location information acquisition unit 212 that acquires terminal location information indicative of a location of terminal devices to be operated by users; an operation signal acquisition unit 212 that acquires an operation signal indicative of a signal corresponding to the operation of the user; a determination unit 214 that selects menu information on a cooking on the basis of the operation signal acquired by the operation signal acquisition unit, and determines a shop capable of providing the cooking to be indicated in the menu information; and a determination unit 218 that determines whether the user operating the terminal device is present in the shop on the basis of both of shop location information indicative of a location of the shop determined determination unit and the terminal location information acquired by the terminal location information acquisition unit.SELECTED DRAWING: Figure 4

Description

本発明は、健康管理装置、および健康管理プログラムに関する。   The present invention relates to a health management device and a health management program.

個人のカロリーの消費量に応じて、個人が摂取すべき料理のメニューを提案したり、提案した料理のメニューを提供可能な飲食店を提案したりすることで、個人のカロリーの消費量と摂取量とを適切に管理する技術が知られている(例えば特許文献1参照)。   Depending on the individual's calorie consumption, the individual's calorie consumption and intake can be proposed by proposing a menu of dishes that the individual should consume or suggesting a restaurant that can provide the menu of the proposed dish A technique for appropriately managing the amount is known (for example, see Patent Document 1).

特開2010−160754号公報JP 2010-160754 A

しかしながら、従来の技術では、実際に個人が提案された料理のメニューを摂取したのか、或いは提案された飲食店に行ったのかなど、個人の行動を把握することができない場合があった。
本発明は、このような事情を考慮してなされたものであり、個人の行動を把握することで個人のカロリーの消費量と摂取量とを適切に管理することができる健康管理装置、および健康管理プログラムを提供することを目的とする。
However, in the conventional technology, there are cases where it is impossible to grasp the individual behavior such as whether the individual actually ingested the proposed menu of the dish or whether he / she went to the proposed restaurant.
The present invention has been made in consideration of such circumstances, and a health management device capable of appropriately managing a person's calorie consumption and intake by grasping an individual's behavior, and health The purpose is to provide a management program.

本発明は、ユーザが操作する端末装置の位置を示す端末位置情報を取得する端末位置情報取得部と、前記ユーザの操作に応じた信号を示す操作信号を取得する操作信号取得部と、前記操作信号取得部により取得された操作信号に基づいて料理のメニュー情報を選択し、前記メニュー情報に示される料理を提供可能な店舗を決定する決定部と、前記決定部により決定された店舗の位置を示す店舗位置情報と、前記端末位置情報取得部により取得された端末位置情報との双方に基づいて、前記端末装置を操作するユーザが前記店舗に居るか否かを判定する判定部とを備える健康管理装置である。   The present invention provides a terminal position information acquisition unit that acquires terminal position information indicating a position of a terminal device operated by a user, an operation signal acquisition unit that acquires an operation signal indicating a signal according to the user's operation, and the operation Based on the operation signal acquired by the signal acquisition unit, the menu information of the dish is selected, a determination unit that determines a store that can provide the dish indicated in the menu information, and the position of the store determined by the determination unit A health unit comprising: a determination unit that determines whether a user operating the terminal device is in the store based on both the store location information shown and the terminal location information acquired by the terminal location information acquisition unit It is a management device.

本発明によれば、個人の行動を把握することで個人のカロリーの消費量と摂取量とを適切に管理することができる健康管理装置、および健康管理プログラムを提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the health management apparatus and health management program which can manage an individual's calorie consumption and intake appropriately by grasping | ascertaining an individual's action can be provided.

第1実施形態における健康管理装置200を含む健康管理システム1の構成の一例を示す図である。It is a figure which shows an example of a structure of the health management system 1 containing the health management apparatus 200 in 1st Embodiment. 第1実施形態における端末装置100の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of the terminal device 100 in 1st Embodiment. 第1実施形態における端末装置100のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the terminal device 100 in 1st Embodiment. 第1実施形態における健康管理装置200の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of the health management apparatus 200 in 1st Embodiment. 第1実施形態における健康管理装置200のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the health management apparatus 200 in 1st Embodiment. カロリー量対応テーブルの一例を示す図である。It is a figure which shows an example of a calorie amount correspondence table. 第1実施形態における健康管理装置200により行われる処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process performed by the health management apparatus 200 in 1st Embodiment.

以下、図面を参照し、本発明の健康管理装置、および健康管理プログラムの実施形態について説明する。
(第1実施形態)
図1は、第1実施形態における健康管理装置200を含む健康管理システム1の構成の一例を示す図である。本実施形態における健康管理システム1において、端末装置100−1〜100−nと健康管理装置200とは、ネットワークNWを介して互いに接続される。ネットワークNWは、LAN(Local Area Network)、WAN(Wide Area Network)、インターネット等である。以下、端末装置100−1〜100−nを特に区別しない場合、単に「端末装置100」と記載する。
Hereinafter, embodiments of a health management device and a health management program of the present invention will be described with reference to the drawings.
(First embodiment)
FIG. 1 is a diagram illustrating an example of a configuration of a health management system 1 including a health management device 200 according to the first embodiment. In the health management system 1 in the present embodiment, the terminal devices 100-1 to 100-n and the health management device 200 are connected to each other via a network NW. The network NW is a LAN (Local Area Network), a WAN (Wide Area Network), the Internet, or the like. Hereinafter, when the terminal devices 100-1 to 100-n are not particularly distinguished, they are simply referred to as “terminal device 100”.

端末装置100は、例えば、ユーザ(使用者)の操作入力を受け付けるスマートフォン、タブレット等である。   The terminal device 100 is, for example, a smartphone, a tablet, or the like that receives a user (user) operation input.

健康管理装置200は、端末装置100から種々の情報を収集し、収集した情報に基づいて、ユーザの健康を改善、或いは維持するために、ユーザがとるべき行動の指針を決定する。ユーザがとるべき行動とは、例えば、適切なカロリー量(熱量)の食事を摂取することである。健康管理装置200は、決定した行動の指針を示す情報をユーザが操作する端末装置100に送信する。   The health management device 200 collects various types of information from the terminal device 100, and determines a guideline for actions to be taken by the user in order to improve or maintain the health of the user based on the collected information. The action to be taken by the user is, for example, ingesting a meal having an appropriate calorie amount (heat amount). The health management device 200 transmits information indicating the determined action guidelines to the terminal device 100 operated by the user.

以下、図2および図3を参照して第1実施形態における端末装置100の構成を説明する。図2は、第1実施形態における端末装置100の機能構成の一例を示す図である。また、図3は、第1実施形態における端末装置100のハードウェア構成の一例を示す図である。端末装置100は、アンテナ102と、変調/復調部104と、AD/DA変換部106と、カメラ108と、入力部110と、出力部112と、インターフェース部114と、制御部130と、記憶部150とを備える。例えば、ハードウェア構成同士は、内部バスIBを介して互いに接続される。   Hereinafter, the configuration of the terminal device 100 according to the first embodiment will be described with reference to FIGS. 2 and 3. FIG. 2 is a diagram illustrating an example of a functional configuration of the terminal device 100 according to the first embodiment. FIG. 3 is a diagram illustrating an example of a hardware configuration of the terminal device 100 according to the first embodiment. The terminal device 100 includes an antenna 102, a modulation / demodulation unit 104, an AD / DA conversion unit 106, a camera 108, an input unit 110, an output unit 112, an interface unit 114, a control unit 130, and a storage unit. 150. For example, the hardware configurations are connected to each other via the internal bus IB.

アンテナ102は、例えば、GPS(Global Positioning System;全地球測位網)衛星から送信される電波(所謂航法メッセージ)を受信する。例えば、電波は、L1帯やL2帯の周波数によって変調された電波である。なお、アンテナ102は、GLONASS(Global Navigation Satellite System)の衛星から電波を受信してもよいし、Galileoや、Compass等の衛星から電波を受信してもよい。   The antenna 102 receives a radio wave (a so-called navigation message) transmitted from, for example, a GPS (Global Positioning System) satellite. For example, the radio wave is a radio wave modulated by a frequency in the L1 band or L2 band. The antenna 102 may receive radio waves from a GLONASS (Global Navigation Satellite System) satellite, or may receive radio waves from a satellite such as Galileo or Compass.

また、アンテナ102は、他装置から送信される電波を受信する。また、アンテナ102は、変調/復調部104により変調された信号に基づいた電波を外部に送信する。他装置は、例えば、無線基地局、ルータやプロキシサーバ等の通信中継装置、他の端末装置100、健康管理装置200のうち一部または全部である。なお、本装置は、GPS用のアンテナと、上記の通信用のアンテナとをそれぞれ備えてもよい。   The antenna 102 receives radio waves transmitted from other devices. The antenna 102 transmits a radio wave based on the signal modulated by the modulation / demodulation unit 104 to the outside. The other device is, for example, a part or all of a wireless base station, a communication relay device such as a router or a proxy server, another terminal device 100, and a health management device 200. The apparatus may include a GPS antenna and the communication antenna.

変調/復調部104は、アンテナ102により受信された信号をダウンコンバートした後に復調して、このアナログ信号をAD/DA変換部106に入力する。また、変調/復調部104は、自装置内で生成されAD/DA変換部106によりアナログ信号に変換された信号を変調し、アップコンバートしてアンテナ102に出力する。   The modulation / demodulation unit 104 demodulates the signal received by the antenna 102 and demodulates the signal, and inputs the analog signal to the AD / DA conversion unit 106. Also, the modulation / demodulation unit 104 modulates a signal generated in the own device and converted into an analog signal by the AD / DA conversion unit 106, up-converts the signal, and outputs the result to the antenna 102.

入力部110は、ユーザの操作を受け付けて、操作に応じた信号を生成する。入力部110は、例えば、タッチパネル、キーボード、マウスである。端末装置100を操作するユーザは、例えば、運動時に消費した消費カロリー量を計測し、計測した消費カロリー量を入力部110に入力する。例えば、ランニング、エアロバイク、自転車等の運動の場合は、距離や時間に応じて消費カロリー量を計算してもよい。また、ウェイトトレーニングの場合は、ウェイトの大きさや時間に応じて消費カロリー量を計算してもよい。また、ユーザは、1日の総消費カロリー量を計算し、入力部110に入力してもよい。上述した運動の消費カロリー量は、心拍や脈拍等のバイタルサインを計測するウェアラブル装置から得てもよい。   The input unit 110 receives a user operation and generates a signal corresponding to the operation. The input unit 110 is, for example, a touch panel, a keyboard, or a mouse. A user who operates the terminal device 100 measures, for example, the amount of calories consumed during exercise, and inputs the measured amount of calories consumed to the input unit 110. For example, in the case of exercise such as running, exercise bike, or bicycle, the calorie consumption may be calculated according to distance or time. In the case of weight training, the calorie consumption may be calculated according to the weight size and time. In addition, the user may calculate the total calorie consumption per day and input it to the input unit 110. The calorie consumption amount of the exercise described above may be obtained from a wearable device that measures vital signs such as heartbeat and pulse.

また、ユーザは、例えば、食事ごとに摂取したカロリー量(以下、「摂取カロリー量」と称する)を入力部110に入力してもよい。例えば、ユーザは、朝食や昼食時の摂取カロリー量を入力部110に入力する。摂取カロリー量は、例えば、スーパーマーケット等の食料品売店から購入した品物の包装に記載されている値であってもよいし、料理のレシピごとに設定される公知の値であってもよい。   In addition, the user may input, for example, the calorie amount taken for each meal (hereinafter referred to as “calorie intake amount”) to the input unit 110. For example, the user inputs the calorie intake at breakfast or lunch into the input unit 110. The amount of calorie intake may be, for example, a value described in the packaging of an item purchased from a grocery store such as a supermarket, or may be a known value set for each cooking recipe.

出力部112は、入力された信号に基づいた画像を表示する。出力部112は、液晶ディスプレイ、有機EL(Electroluminescence)ディスプレイ等である。なお、出力部112は、入力部110の機能を有するタッチパネルであってもよい。   The output unit 112 displays an image based on the input signal. The output unit 112 is a liquid crystal display, an organic EL (Electroluminescence) display, or the like. Note that the output unit 112 may be a touch panel having the function of the input unit 110.

インターフェース部114は、例えば、ハードウェアインターフェースやユーザインターフェース、ソフトウェアインターフェースを含む。例えば、ハードウェアインターフェースは、ネットワークNWに接続される。   The interface unit 114 includes, for example, a hardware interface, a user interface, and a software interface. For example, the hardware interface is connected to the network NW.

制御部130は、取得部132と、測位演算部134と、出力制御部136とを備える。制御部130の上記機能部材のうち一部または全部は、CPU116が記憶部150に記憶されたプログラムを実行することにより機能するソフトウェア機能部である。   The control unit 130 includes an acquisition unit 132, a positioning calculation unit 134, and an output control unit 136. A part or all of the functional members of the control unit 130 is a software function unit that functions when the CPU 116 executes a program stored in the storage unit 150.

取得部132は、入力部110によって受け付けられたユーザの操作を示す信号を取得する。また、取得部132は、アンテナ102を介して受信した信号を取得してもよい。また、取得部132は、カメラ108によって撮像された画像を取得してもよい。また、取得部132は、他装置からインターフェース部114に接続のネットワークNWを介して、種々の情報を受信してもよい。取得部132は、取得した各種情報を、後述する記憶部150に記憶させる。   The acquisition unit 132 acquires a signal indicating the user operation received by the input unit 110. The acquisition unit 132 may acquire a signal received via the antenna 102. The acquisition unit 132 may acquire an image captured by the camera 108. The acquisition unit 132 may receive various types of information from other devices via the network NW connected to the interface unit 114. The acquisition unit 132 stores the acquired various types of information in the storage unit 150 described later.

測位演算部134は、衛星測位システムの衛星から取得した信号に基づいて、自装置の地上における位置を演算する。なおこの際、測位演算部134は、無線基地局から基地局の位置情報を取得した場合、この基地局の位置情報を用いて自装置の位置を取得してもよい。   The positioning calculation unit 134 calculates the position of the own device on the ground based on the signal acquired from the satellite of the satellite positioning system. At this time, when the position calculation unit 134 acquires the position information of the base station from the radio base station, the position calculation unit 134 may acquire the position of the own device using the position information of the base station.

出力制御部136は、取得部132によって取得された情報に基づいて、出力部112を制御する。出力制御部136は、例えば、他装置から入力された情報に基づいた画像を表示するように出力部112を制御する。また、出力制御部136は、測位演算部134による演算結果の位置情報(以下、「端末位置情報」と称する)を、アンテナ102を介して他装置へ送信するように制御してもよい。また、出力制御部136は、カメラ108によって撮像された画像を示す情報(以下、「撮像画像」と称する)を、アンテナ102を介して他装置へ送信するように制御してもよい。   The output control unit 136 controls the output unit 112 based on the information acquired by the acquisition unit 132. For example, the output control unit 136 controls the output unit 112 to display an image based on information input from another device. Further, the output control unit 136 may perform control so as to transmit the position information (hereinafter referred to as “terminal position information”) of the calculation result by the positioning calculation unit 134 to another device via the antenna 102. Further, the output control unit 136 may perform control so that information indicating an image captured by the camera 108 (hereinafter referred to as “captured image”) is transmitted to another apparatus via the antenna 102.

記憶部150は、ROM(Read Only Memory)150−1や、フラッシュメモリ、HDD(Hard Disk Drive)等の不揮発性の記憶媒体(非一時的な記憶媒体)、またはRAM(Random Access Memory)150−2やレジスタ等の揮発性の記憶媒体を有する。なお、フラッシュメモリ、HDD等は、補助記憶部150−3に相当する。   The storage unit 150 includes a ROM (Read Only Memory) 150-1, a nonvolatile storage medium (non-temporary storage medium) such as a flash memory, an HDD (Hard Disk Drive), or a RAM (Random Access Memory) 150-. 2 and a volatile storage medium such as a register. Note that the flash memory, the HDD, and the like correspond to the auxiliary storage unit 150-3.

以下、図4および図5を参照して第1実施形態における健康管理装置200の構成を説明する。図4は、第1実施形態における健康管理装置200の機能構成の一例を示す図である。また、図5は、第1実施形態における健康管理装置200のハードウェア構成の一例を示す図である。第1実施形態における健康管理装置200は、入力部202と、出力部204と、インターフェース部206と、制御部210と、記憶部230と、通信部240とを備える。これら機能部は、ハードウェア構成の場合、内部バスIBを介して互いに接続される。   Hereinafter, the configuration of the health management apparatus 200 according to the first embodiment will be described with reference to FIGS. 4 and 5. FIG. 4 is a diagram illustrating an example of a functional configuration of the health management device 200 according to the first embodiment. FIG. 5 is a diagram illustrating an example of a hardware configuration of the health management device 200 according to the first embodiment. The health management device 200 according to the first embodiment includes an input unit 202, an output unit 204, an interface unit 206, a control unit 210, a storage unit 230, and a communication unit 240. In the case of a hardware configuration, these functional units are connected to each other via an internal bus IB.

入力部202は、ユーザの操作を受け付けて、受け付けた操作に応じた操作信号を生成する。例えば、入力部202は、タッチパネル、キーボード、マウスを含む。   The input unit 202 receives a user operation, and generates an operation signal corresponding to the received operation. For example, the input unit 202 includes a touch panel, a keyboard, and a mouse.

出力部204は、入力された信号に基づいた画像を表示する。出力部204は、液晶ディスプレイ、有機ELディスプレイ等である。なお、出力部204は、入力部202の機能を有するタッチパネルであってもよい。   The output unit 204 displays an image based on the input signal. The output unit 204 is a liquid crystal display, an organic EL display, or the like. Note that the output unit 204 may be a touch panel having the function of the input unit 202.

インターフェース部206は、例えば、ハードウェアインターフェースやユーザインターフェース、ソフトウェアインターフェースを含む。例えば、ハードウェアインターフェースは、ネットワークNWに接続される。   The interface unit 206 includes, for example, a hardware interface, a user interface, and a software interface. For example, the hardware interface is connected to the network NW.

通信部240は、インターフェース部206を接続されるネットワークNWを介して、他の装置と通信を行う。   The communication unit 240 communicates with other devices via the network NW to which the interface unit 206 is connected.

制御部210は、取得部212と、決定部214と、画像処理部216と、判定部218と、通信制御部220とを備える。制御部210の機能部のうち一部または全部は、CPU208等のプロセッサ(コンピュータ)が記憶部230に記憶されたプログラムを実行することにより機能するソフトウェア機能部である。また、制御部210の機能部のうち一部または全部は、ハードウェア機能部であってもよい。   The control unit 210 includes an acquisition unit 212, a determination unit 214, an image processing unit 216, a determination unit 218, and a communication control unit 220. Part or all of the functional units of the control unit 210 is a software functional unit that functions when a processor (computer) such as the CPU 208 executes a program stored in the storage unit 230. Also, some or all of the functional units of the control unit 210 may be hardware functional units.

取得部212は、端末装置100から出力される情報を取得する。この情報は、消費カロリー量と、摂取カロリー量と、撮像画像と、端末位置情報とを含む。取得部212は、取得した種々の情報を記憶部230に記憶させる。取得部212は、例えば、取得した撮像画像を、取得した時刻と対応付けて記憶部230に記憶させる。取得部212は、さらに「端末位置情報取得部」および「操作信号取得部」として機能する。   The acquisition unit 212 acquires information output from the terminal device 100. This information includes calorie consumption, calorie intake, captured images, and terminal location information. The acquisition unit 212 stores various acquired information in the storage unit 230. For example, the acquisition unit 212 stores the acquired captured image in the storage unit 230 in association with the acquired time. The acquisition unit 212 further functions as a “terminal position information acquisition unit” and an “operation signal acquisition unit”.

決定部214は、取得部212によって取得された情報のうち、運動の消費カロリー量と、食事の摂取カロリー量と、予め記憶部230に記憶させた適正カロリー量とに基づいて、ユーザが摂取すべきカロリー量を算出する。適正カロリー量とは、例えば、成人の一日に必要なカロリー量である。本実施形態において、例えば、ユーザが夕食を摂取する予定の時刻(例えば19時)までの消費カロリー量の総計と朝食および昼食の摂取カロリー量とが端末装置100に入力された場合、決定部214は、適正カロリー量から、端末装置100に入力された総消費カロリー量および朝食および昼食の摂取カロリー量との差を減算した値を、ユーザが摂取すべきカロリー量(以下、「摂取可能カロリー量」と称する)として算出する。   Of the information acquired by the acquisition unit 212, the determination unit 214 consumes the amount of calories consumed by exercise, the amount of calories consumed in the meal, and the appropriate amount of calories stored in the storage unit 230 in advance. Calculate the calorie content. The appropriate calorie amount is, for example, the calorie amount necessary for an adult day. In the present embodiment, for example, when the total amount of calories consumed until the time when the user plans to eat dinner (for example, 19:00) and the amount of calories consumed for breakfast and lunch are input to the terminal device 100, the determination unit 214 Is a value obtained by subtracting the difference between the total calorie consumption input to the terminal device 100 and the calorie intake amount for breakfast and lunch from the appropriate calorie amount, and the calorie amount that the user should ingest (hereinafter referred to as “the calorie intake amount”). ").

決定部214は、算出した摂取可能カロリー量と、予め記憶部230に記憶させたカロリー量対応テーブルとに基づいて、ユーザに推奨する料理のメニュー(以下、「推奨メニュー」と称する)と、推奨メニューを提供可能な店舗とを決定する。推奨メニューは、ユーザの健康を改善、或いは維持するために摂取すべき料理のメニューを示す。上記の例の場合、決定部214は、ユーザの夕食時のメニューとして、消費カロリー量が多いユーザにはカロリー量の多いメニューを決定し、消費カロリーの少ないユーザには、カロリー量の少ないメニューを決定する。   The determination unit 214 recommends a menu of dishes recommended for the user (hereinafter referred to as “recommended menu”) based on the calculated caloric intake amount and the calorie amount correspondence table stored in the storage unit 230 in advance. Determine which stores can offer the menu. The recommended menu indicates a menu of dishes that should be consumed to improve or maintain the health of the user. In the case of the above example, the determination unit 214 determines a menu with a large amount of calories for a user with a large amount of calories consumed, and a menu with a small amount of calories for a user with a small amount of calories consumed as a menu for the user's dinner decide.

図6は、カロリー量対応テーブルの一例を示す図である。カロリー量対応テーブルは、例えば、摂取可能カロリー量に対して推奨メニューを示す推奨メニュー情報が対応付けられている。カロリー量対応テーブル内の推奨メニュー情報には、推奨メニューを提供可能な店舗の情報が対応付けられている。推奨メニュー情報に対応付けられた店舗には、当該店舗の位置を示す情報(以下、「店舗位置情報」と称する)が対応付けられている。店舗位置情報は、例えば、住所や緯度経度である。本実施形態のカロリー量対応テーブルにおいて、摂取可能カロリー量には、複数の推奨メニュー情報が対応付けられていてもよいし、推奨メニュー情報には、複数の店舗情報が対応付けられていてもよい。この場合、決定部214は、算出した摂取可能カロリー量に対して、複数の推奨メニューや複数の店舗を決定してもよい。また、決定部214は、例えば、適正カロリー量から過剰な(或いは不足した)消費カロリー量を端末装置100から継続して取得した場合、料理の栄養を考慮したメニューを提供してもよい。例えば、消費カロリー量が不足気味のユーザには、摂取するカロリー量を抑えるために、野菜や魚介類等のメニューを提供してもよい。図6の例において、摂取可能カロリー量[kcal]は500であり、推奨メニュー情報は、XとYとの2種類であり、その推奨メニューXの店舗情報はA店舗とB店舗とを含み、A店舗の店舗位置情報はxx市yy丁目zz番地である。   FIG. 6 is a diagram illustrating an example of the calorie amount correspondence table. In the calorie content correspondence table, for example, recommended menu information indicating a recommended menu is associated with the ingestible calorie content. The recommended menu information in the calorie amount correspondence table is associated with information on stores that can provide the recommended menu. Information indicating the location of the store (hereinafter referred to as “store location information”) is associated with the store associated with the recommended menu information. The store position information is, for example, an address or latitude / longitude. In the calorie amount correspondence table of the present embodiment, a plurality of recommended menu information may be associated with the ingestible calorie amount, and a plurality of store information may be associated with the recommended menu information. . In this case, the determination unit 214 may determine a plurality of recommended menus and a plurality of stores for the calculated ingestible calorie amount. Moreover, the determination part 214 may provide the menu which considered the nutrition of cooking, for example, when the excess calorie consumption from the appropriate calorie quantity is acquired continuously from the terminal device 100. For example, menus such as vegetables and seafood may be provided to users who are short on calorie consumption in order to reduce the amount of calories consumed. In the example of FIG. 6, the ingestible calorie amount [kcal] is 500, the recommended menu information includes two types of X and Y, and the store information of the recommended menu X includes A store and B store, Store location information of A store is xx city yy chome zz address.

画像処理部216は、ネットワークNWを介して取得部212によって取得された撮像画像に対して、種々の画像処理を行う。画像処理部216は、例えば、取得部212によって取得された撮像画像が料理を撮像した画像である場合、画像上における食材の形状や、輪郭、色等の特徴量を当該撮像画像から抽出する。形状や輪郭の特徴量は、例えば、HOG(Histogram of Oriented Gradients)やSIFT(ScaleInvariant Feature Transform)等の手法を用いて画素の輝度勾配をヒストグラム化し抽出される。また、色の特徴量は、例えば、撮像画像の画素をRGBヒストグラム化やHSVヒストグラム化し抽出される。また、画像処理部216は、上述した特徴量の他に、模様や質感の特徴量を抽出してもよい。模様や質感の特徴量は、例えば、撮像画像の画素を色コリログラム化し抽出される。   The image processing unit 216 performs various image processing on the captured image acquired by the acquisition unit 212 via the network NW. For example, when the captured image acquired by the acquisition unit 212 is an image of cooking, the image processing unit 216 extracts a feature amount such as the shape, contour, and color of the food on the image from the captured image. The feature quantity of the shape and contour is extracted by histogramizing the luminance gradient of the pixel using a technique such as HOG (Histogram of Oriented Gradients) or SIFT (Scale Invariant Feature Transform). Further, the color feature amount is extracted, for example, by converting the pixels of the captured image into an RGB histogram or an HSV histogram. Further, the image processing unit 216 may extract a pattern or texture feature amount in addition to the above-described feature amount. The feature amount of the pattern or texture is extracted, for example, by converting the pixels of the captured image into a color correlogram.

画像処理部216は、抽出した撮像画像の特徴量と、予め記憶部230に記憶させた見本となる画像(以下、「見本画像」と称する)の特徴量とに基づいて、見本画像に対する撮像画像の類似度を算出する。見本画像は、推奨メニューに示される料理の画像である。類似度は、ユークリッド距離などの特徴量同士の距離を演算したり、特徴量同士の内積を求めたりすることにより求められる。画像処理部216は、比較対象となる撮像画像を複数の領域にそれぞれ分割し、各々の領域の代表色や平均色の値を比較することで、色に関する類似度を算出することができる。これによって、例えば、「画像の中央が赤い」画像同士の類似度が高く算出される。また、画像処理部216は、輪郭の抽出を行い、色情報と同様に分割された領域のどこに輪郭が位置するかを比較したり、高次局所自己相関特徴(HLAC)のように形状の自己相関性に着目した特徴量で位置に依存しない特徴量を使って比較したりすることで、形状に関する類似度を算出することができる。また、画像処理部216は、上述した算出方法と同様に、抽出した模様や質感の特徴量を用いて類似度を算出してもよい。   The image processing unit 216 captures an image of the sample image based on the extracted feature amount of the captured image and the feature amount of the sample image (hereinafter referred to as “sample image”) stored in the storage unit 230 in advance. The similarity is calculated. The sample image is an image of a dish shown in the recommended menu. The degree of similarity can be obtained by calculating the distance between feature quantities such as the Euclidean distance or by calculating the inner product of the feature quantities. The image processing unit 216 can calculate the degree of similarity regarding colors by dividing each captured image to be compared into a plurality of regions and comparing the representative color and average color value of each region. Thereby, for example, the similarity between the images “the center of the image is red” is calculated to be high. In addition, the image processing unit 216 extracts the contour, compares the position where the contour is located in the divided area in the same manner as the color information, and compares the shape with the self-correlation feature (HLAC). By comparing using feature amounts that do not depend on position among feature amounts that focus on the correlation, it is possible to calculate the similarity regarding the shape. Further, the image processing unit 216 may calculate the degree of similarity using the extracted feature amount of the pattern or texture in the same manner as the calculation method described above.

また、画像処理部216は、複数の撮像画像から種々の特徴量を抽出し、撮像画像間の類似度を算出してもよい。撮像画像間の類似度は、上述した撮像画像と見本画像とにおける類似度の算出方法と同様に算出される。   Further, the image processing unit 216 may extract various feature amounts from a plurality of captured images and calculate the similarity between the captured images. The similarity between the captured images is calculated in the same manner as the above-described method for calculating the similarity between the captured image and the sample image.

判定部218は、取得部212により取得された店舗の店舗位置情報と、端末装置100の端末位置情報とに基づいて、端末装置100を操作するユーザが当該店舗に居るか否かを判定する。判定部218は、例えば、店舗位置情報と端末位置情報とが一致する場合、ユーザが当該店舗に居ると判定し、店舗位置情報と端末位置情報とが一致しない場合、ユーザが当該店舗に居ないと判定する。   Based on the store location information of the store acquired by the acquisition unit 212 and the terminal location information of the terminal device 100, the determination unit 218 determines whether or not the user who operates the terminal device 100 is in the store. For example, when the store position information and the terminal position information match, the determination unit 218 determines that the user is at the store, and when the store position information and the terminal position information do not match, the user is not at the store. Is determined.

また、判定部218は、画像処理部216により算出された見本画像に対する撮像画像の類似度に基づいて、撮像画像に示される料理が推奨メニューの料理と同じものであるか否かを判定する。判定部218は、例えば、類似度が所定値よりも大きい場合、撮像画像に示される料理が推奨メニューの料理と同じものであると判定し、類似度が所定値よりも小さい場合、撮像画像に示される料理が推奨メニューの料理と異なるものであると判定する。   Further, the determination unit 218 determines whether the dish shown in the captured image is the same as the recommended menu dish based on the similarity of the captured image to the sample image calculated by the image processing unit 216. For example, when the similarity is larger than a predetermined value, the determination unit 218 determines that the dish shown in the captured image is the same as the recommended menu dish, and when the similarity is smaller than the predetermined value, It is determined that the displayed dish is different from the recommended menu dish.

また、判定部218は、画像処理部216により算出された撮像画像間の類似度に基づいて、ユーザが撮像画像に示される料理を摂取したか否かを判定する。本実施形態において、例えば、ユーザは、端末装置100を使用して、食事を行う前に料理を撮像し、食事後に料理が盛り付けられていた食器を撮像する。すなわち、健康管理装置200は、端末装置100から時系列に異なる複数の撮像画像を取得する。画像処理部216は、食事前後の撮像画像上において、Harris作用素やSUSAN作用素などの特徴点抽出方法を用いて食器の特徴点を抽出する。画像処理部216は、例えば、抽出した特徴点に対してパターンマッチングを行い、食器の認識処理を行う。これによって、判定部218は、料理が完食された状態の撮像画像と、食事前の料理が盛り付けられた状態の撮像画像との両画像上において食器が同一であると判定する。これによって、判定部218は、複数の撮像画像のうち、同一の食器の撮像画像を特定する。   Further, the determination unit 218 determines whether the user has ingested the dish indicated in the captured image based on the similarity between the captured images calculated by the image processing unit 216. In the present embodiment, for example, the user uses the terminal device 100 to capture an image of a dish before eating, and an image of the tableware on which the dish is served after the meal. That is, the health management device 200 acquires a plurality of captured images that are different in time series from the terminal device 100. The image processing unit 216 extracts feature points of tableware on captured images before and after a meal using a feature point extraction method such as a Harris operator or a SUSAN operator. For example, the image processing unit 216 performs pattern matching on the extracted feature points and performs tableware recognition processing. Accordingly, the determination unit 218 determines that the dishes are the same on both the captured image in the state where the dish is completely eaten and the captured image in the state where the dish before the meal is served. Thereby, the determination unit 218 specifies a captured image of the same tableware among the plurality of captured images.

画像処理部216は、食器が同一であると判定した撮像画像間において、類似度を算出する。これによって、判定部218は、異なる複数の撮像画像から抽出された所定の特徴点が同一で、且つ類似度が所定値よりも低い場合、ユーザが撮像画像に示される料理を摂取したと判定することができる。   The image processing unit 216 calculates a similarity between captured images determined to have the same tableware. Accordingly, the determination unit 218 determines that the user has ingested the dish indicated in the captured image when the predetermined feature points extracted from the plurality of different captured images are the same and the similarity is lower than the predetermined value. be able to.

通信制御部220は、決定部214によって決定された推奨メニューおよび推奨メニューを提供可能な店舗の情報と、料理の撮像画像の送信を要求する要求情報との双方を端末装置100に送信するように通信部240を制御する。   The communication control unit 220 transmits both the recommended menu determined by the determination unit 214 and information on a store that can provide the recommended menu and request information for requesting transmission of a captured image of the dish to the terminal device 100. The communication unit 240 is controlled.

また、通信制御部220は、判定部218の判定結果に応じて、種々の情報を端末装置100に送信するように通信部240を制御する。通信制御部220は、例えば、判定部218により「ユーザが店舗に居る」と判定された場合、端末装置100に、健康を維持または改善するといった目標が達成された旨を示す情報を送信するように通信部240を制御する。また、通信制御部220は、例えば、判定部218により「ユーザが店舗に居ない」と判定された場合、端末装置100に、健康を維持または改善するといった目標が達成されていない旨を示す情報を送信するように通信部240を制御する。   Further, the communication control unit 220 controls the communication unit 240 to transmit various information to the terminal device 100 according to the determination result of the determination unit 218. For example, when the determination unit 218 determines that “the user is in the store”, the communication control unit 220 transmits information indicating that the goal of maintaining or improving health has been achieved to the terminal device 100. The communication unit 240 is controlled. Further, for example, when the determination unit 218 determines that “the user is not in the store”, the communication control unit 220 indicates to the terminal device 100 that information indicating that the goal of maintaining or improving health has not been achieved. The communication unit 240 is controlled to transmit.

また、通信制御部220は、例えば、判定部218により「特定した料理が推奨メニューに示される料理と同じである」と判定された場合、端末装置100に、健康を維持または改善するといった目標が達成された旨を示す情報を送信するように通信部240を制御する。また、通信制御部220は、例えば、判定部218により「特定した料理が推奨メニューに示される料理と異なる」と判定された場合、端末装置100に、健康を維持または改善するといった目標が達成されていない旨を示す情報を送信するように通信部240を制御する。   In addition, for example, when the determination unit 218 determines that “the identified dish is the same as the dish shown in the recommended menu”, the communication control unit 220 has a goal of maintaining or improving health in the terminal device 100. The communication unit 240 is controlled to transmit information indicating that it has been achieved. Further, for example, when the determination unit 218 determines that “the identified dish is different from the dish shown in the recommended menu”, the communication control unit 220 achieves the goal of maintaining or improving health in the terminal device 100. The communication unit 240 is controlled so as to transmit information indicating that it has not been transmitted.

図7は、第1実施形態における健康管理装置200により行われる処理の一例を示すフローチャートである。本実施形態における健康管理装置200は、例えば、所定周期で本フローチャートの処理を行う。
まず、健康管理装置200は、取得部212によって消費カロリー量が取得されたか否かを判定する(ステップS100)。健康管理装置200は、消費カロリー量が取得されていない場合(ステップS100;No)、本フローチャートの処理を終了する。決定部214は、消費カロリー量が取得された場合(ステップS100;Yes)、摂取可能カロリー量を算出し、算出した摂取可能カロリー量とカロリー量対応テーブルとに基づいて、推奨メニューおよび推奨メニューを提供可能な店舗を決定する(ステップS102)。
FIG. 7 is a flowchart illustrating an example of processing performed by the health management device 200 according to the first embodiment. For example, the health management apparatus 200 in the present embodiment performs the processing of the flowchart in a predetermined cycle.
First, the health management apparatus 200 determines whether or not the calorie consumption has been acquired by the acquisition unit 212 (step S100). If the calorie consumption is not acquired (step S100; No), the health management device 200 ends the process of this flowchart. When the calorie consumption is acquired (step S100; Yes), the determination unit 214 calculates the ingestible calorie amount, and determines the recommended menu and the recommended menu based on the calculated ingestible calorie amount and the calorie amount correspondence table. A store that can be provided is determined (step S102).

次に、通信制御部220は、決定した推奨メニューおよび店舗の情報と、料理の撮像画像の送信を要求する要求情報との双方を端末装置100に送信するように通信部240を制御する。これにより健康管理装置200は、当該情報を端末装置100に送信する(ステップS104)。これに対して、端末装置100側では、推奨メニューおよび推奨メニューを提供可能な店舗の情報に基づいた画像が表示される。この結果、ユーザは、自身が摂取すべき料理をどの店舗で摂取可能か認識することができる。   Next, the communication control unit 220 controls the communication unit 240 to transmit both the determined recommended menu and store information and request information for requesting transmission of a captured image of the dish to the terminal device 100. Thereby, the health management apparatus 200 transmits the information to the terminal apparatus 100 (step S104). On the other hand, on the terminal device 100 side, an image based on the recommended menu and information on a store that can provide the recommended menu is displayed. As a result, the user can recognize at which store the dish that the user should ingest can be ingested.

また、端末装置100は、撮像画像の送信を要求する要求情報に基づいた画像を出力部112(図2および図3)に表示させる。これによって、端末装置100は、ユーザに対して、料理の撮像画像を取得させることができる。健康管理装置200は、料理の撮像画像および端末位置情報が取得したか否かを判定する(ステップS106)。健康管理装置200は、料理の撮像画像および端末位置情報を取得しない場合(ステップS106;No)、端末装置100に目標が達成されていない旨を示す情報を通知する(ステップS108)。健康管理装置200は、料理の撮像画像および端末位置情報を取得した場合(ステップS106;Yes)、決定した店舗の店舗位置情報と、取得した端末位置情報とに基づいて、端末装置100を操作するユーザが当該店舗に居るか否かを判定する(ステップS110)。健康管理装置200は、端末装置100を操作するユーザが当該店舗に居ないと判定した場合(ステップS110;No)、端末装置100に目標が達成されていない旨を示す情報を通知する(ステップS108)。   In addition, the terminal device 100 causes the output unit 112 (FIGS. 2 and 3) to display an image based on request information for requesting transmission of a captured image. Thereby, the terminal device 100 can cause the user to acquire a captured image of the dish. The health management apparatus 200 determines whether or not the captured image of the dish and the terminal position information have been acquired (step S106). If the health management device 200 does not acquire the captured image of the dish and the terminal position information (step S106; No), the health management device 200 notifies the terminal device 100 of information indicating that the target has not been achieved (step S108). When the health management apparatus 200 acquires the captured image of the dish and the terminal position information (step S106; Yes), the health management apparatus 200 operates the terminal apparatus 100 based on the determined store position information of the store and the acquired terminal position information. It is determined whether or not the user is in the store (step S110). When it is determined that the user operating the terminal device 100 is not in the store (step S110; No), the health management device 200 notifies the terminal device 100 of information indicating that the goal has not been achieved (step S108). ).

健康管理装置200は、端末装置100を操作するユーザが当該店舗に居ると判定した場合(ステップS110;Yes)、取得した撮像画像に示される料理を特定し、特定した料理が推奨メニューに示される料理と同じか否かを判定する(ステップS112)。健康管理装置200は、特定した料理が推奨メニューに示される料理と異なる場合(ステップS112;No)、端末装置100に目標が達成されていない旨を示す情報を通知する(ステップS108)。健康管理装置200は、特定した料理が推奨メニューに示される料理と同じ場合(ステップS112;Yes)、端末装置100から料理の撮像画像を取得したか否かを判定する(ステップS114)。健康管理装置200は、料理の撮像画像を取得していない場合(ステップS114;No)、端末装置100に目標が達成されていない旨を示す情報を通知する(ステップS108)。   When it is determined that the user operating the terminal device 100 is in the store (step S110; Yes), the health management device 200 identifies the dish shown in the acquired captured image, and the identified dish is shown in the recommended menu. It is determined whether it is the same as cooking (step S112). When the identified dish is different from the dish shown in the recommended menu (step S112; No), the health management apparatus 200 notifies the terminal device 100 of information indicating that the target has not been achieved (step S108). If the identified dish is the same as the dish shown in the recommended menu (step S112; Yes), the health management apparatus 200 determines whether a captured image of the dish has been acquired from the terminal device 100 (step S114). When the health management device 200 has not acquired the captured image of the dish (step S114; No), the health management device 200 notifies the terminal device 100 of information indicating that the target has not been achieved (step S108).

健康管理装置200は、料理の撮像画像を取得した場合(ステップS114;Yes)、取得した撮像画像間の類似度に基づいて、ユーザが撮像画像に示される料理を摂取したか否かを判定する。すなわち、健康管理装置200は、ユーザが推奨メニューの料理を摂取したか否かを判定する(ステップS116)。健康管理装置200は、ユーザが推奨メニューの料理を摂取していない場合(ステップS116;No)、端末装置100に目標が達成されていない旨を示す情報を通知する(ステップS108)。健康管理装置200は、ユーザが推奨メニューの料理を摂取した場合(ステップS116;Yes)、端末装置100に目標が達成された旨を示す情報を通知する(ステップS118)。これによって、健康管理装置200は、本フローチャートの処理を終了する。   When the health management apparatus 200 acquires a captured image of a dish (step S114; Yes), the health management apparatus 200 determines whether the user has ingested the dish indicated in the captured image based on the similarity between the acquired captured images. . That is, the health management apparatus 200 determines whether the user has ingested the recommended menu dish (step S116). When the user has not ingested the recommended menu dish (step S116; No), the health management device 200 notifies the terminal device 100 of information indicating that the goal has not been achieved (step S108). When the user has ingested the recommended menu dish (step S116; Yes), the health management apparatus 200 notifies the terminal device 100 of information indicating that the goal has been achieved (step S118). As a result, the health management apparatus 200 ends the processing of this flowchart.

以上説明した第1実施形態における健康管理装置200によれば、ユーザの消費カロリー量に基づいてユーザの健康を改善、或いは維持するための推奨メニューを決定し、決定した推奨メニューをユーザに提供可能な店舗を決定する。健康管理装置200は、ユーザが操作する端末装置100の位置を示す端末位置情報と店舗の位置を示す店舗位置情報との双方に基づいて、端末装置100を操作するユーザが店舗に居るか否かを判定する。これによって、健康管理装置200は、推奨メニューを見たユーザの行動を把握することでユーザのカロリーの消費量と摂取量とを適切に管理することができる。   According to the health management device 200 in the first embodiment described above, it is possible to determine a recommended menu for improving or maintaining the user's health based on the user's calorie consumption, and to provide the determined recommended menu to the user The right store. The health management device 200 determines whether or not the user operating the terminal device 100 is in the store based on both the terminal location information indicating the location of the terminal device 100 operated by the user and the store location information indicating the location of the store. Determine. Thereby, the health management device 200 can appropriately manage the consumption and intake of the user's calories by grasping the behavior of the user who viewed the recommended menu.

また、第1実施形態における健康管理装置200によれば、ユーザが操作する端末装置100から時系列に異なる複数の撮像画像を取得し、取得した異なる複数の撮像画像から所定の特徴点を抽出するとともに、類似度を算出することにより、ユーザが、推奨メニューが示す料理を摂取したか否かを判定することができる。これによって、健康管理装置200は、推奨メニューを見たユーザの行動をさらに把握することができる。   Further, according to the health management device 200 in the first embodiment, a plurality of different captured images are acquired in time series from the terminal device 100 operated by the user, and predetermined feature points are extracted from the acquired plurality of different captured images. At the same time, by calculating the similarity, it is possible to determine whether the user has ingested the dish indicated by the recommended menu. Thereby, the health management device 200 can further grasp the user's behavior when viewing the recommended menu.

なお、上述した第1実施形態では、ユーザが、推奨メニューに応じた食事を自宅で作った場合に対応してもよい。この場合、ユーザは、作った食事を端末装置100を用いて撮像する。健康管理装置200は、ユーザが自作した食事の撮像画像を端末装置100から取得し、取得した撮像画像と見本画像との類似度を算出する。健康管理装置200は、算出したユーザ自作の食事の撮像画像と見本画像との類似度に基づいて、ユーザが推奨メニューの食事を摂取したか否かを判定してもよい。すなわち、健康管理装置200は、端末位置情報と店舗位置情報とが一致するか否かの判定処理を行わないものとしてもよい。   In addition, in 1st Embodiment mentioned above, you may respond | correspond when the user prepared the meal according to the recommended menu at home. In this case, the user images the prepared meal using the terminal device 100. The health management device 200 acquires a captured image of a meal that the user has created from the terminal device 100, and calculates the degree of similarity between the acquired captured image and the sample image. The health management device 200 may determine whether or not the user has ingested the meal of the recommended menu based on the similarity between the calculated captured image of the user's own meal and the sample image. That is, the health management apparatus 200 may not perform the determination process as to whether or not the terminal position information matches the store position information.

また、上述した第1実施形態における健康管理装置200は、端末位置情報と店舗位置情報が異なり、且つ店舗位置情報が示す店舗の情報がカロリー量対応テーブルに含まれる場合、当該店舗での推奨メニューを決定してもよい。これによって、健康管理装置200は、よりユーザに健康管理を促すことができる。   In addition, the health management device 200 according to the first embodiment described above has a recommended menu at the store when the terminal location information and the store location information are different and the store information indicated by the store location information is included in the calorie amount correspondence table. May be determined. As a result, the health management device 200 can further prompt the user for health management.

(第2実施形態)
以下、第2実施形態における健康管理装置200について説明する。第2実施形態の健康管理装置200では、取得部212および判定部218が第1実施形態と相違する。従って、係る相違点を中心に説明し、共通する部分についての説明は省略する。ここでは、第1実施形態との相違点として、取得部212および判定部218の処理について説明する。
(Second Embodiment)
Hereinafter, the health management apparatus 200 according to the second embodiment will be described. In the health management device 200 of the second embodiment, an acquisition unit 212 and a determination unit 218 are different from those of the first embodiment. Therefore, it demonstrates centering on such a difference and the description about a common part is abbreviate | omitted. Here, processing of the acquisition unit 212 and the determination unit 218 will be described as a difference from the first embodiment.

本実施形態では、例えば、ユーザが推奨メニューの料理を摂取し、端末装置100を用いて当該推奨メニューの料金を電子決済した場合について説明する。端末装置100は、電子決済によって生成された決済の情報(以下、「決済情報」と称する)を記憶部150に記憶させる。決済情報には、例えば、決済の日時や料理の名前、料理の金額等の情報が含まれる。   In the present embodiment, for example, a case will be described in which a user ingests a recommended menu dish and uses the terminal device 100 to electronically pay for the recommended menu fee. The terminal device 100 causes the storage unit 150 to store payment information generated by electronic payment (hereinafter referred to as “payment information”). The settlement information includes, for example, information such as the date and time of settlement, the name of the dish, and the amount of the dish.

取得部212は、端末装置100から決済情報を取得する。
判定部218は、決済情報に含まれる料理の名前や料理の金額等の情報から料理を特定し、特定した料理と推奨メニューの料理とが同じか否かを判定することにより、ユーザが推奨メニューの料理を摂取したか否かを判定する。
The acquisition unit 212 acquires payment information from the terminal device 100.
The determination unit 218 identifies the dish from information such as the name of the dish and the amount of the dish included in the payment information, and determines whether the identified dish is the same as the dish of the recommended menu, so that the user can select the recommended menu. Judge whether or not you have eaten.

また、第2実施形態における健康管理装置200は、店舗のキャッシュレジスターから発行されるレシート等を撮像した画像を取得することで、決済情報を生成してもよい。画像処理部216は、例えば、撮像画像上における文字やコードからユーザが摂取した料理を特定する。判定部218は、画像処理部216により特定された料理が推奨メニューの料理と対応しているか否かを判定することで、ユーザが推奨メニューの料理を摂取したか否かを判定する。これによって、健康管理装置200は、推奨メニューを見たユーザの行動をさらに把握することができる。   In addition, the health management device 200 according to the second embodiment may generate payment information by acquiring an image obtained by capturing a receipt or the like issued from a cash register in a store. For example, the image processing unit 216 identifies the food ingested by the user from characters and codes on the captured image. The determination unit 218 determines whether the user has ingested the recommended menu food by determining whether the food specified by the image processing unit 216 corresponds to the food of the recommended menu. Thereby, the health management device 200 can further grasp the user's behavior when viewing the recommended menu.

(第3実施形態)
以下、第3実施形態における健康管理装置200について説明する。第3実施形態の健康管理装置200では、通信制御部220が第1実施形態と相違する。従って、係る相違点を中心に説明し、共通する部分についての説明は省略する。ここでは、第1実施形態との相違点として、通信制御部220の処理について説明する。
(Third embodiment)
Hereinafter, the health management apparatus 200 according to the third embodiment will be described. In the health management device 200 of the third embodiment, the communication control unit 220 is different from that of the first embodiment. Therefore, it demonstrates centering on such a difference and the description about a common part is abbreviate | omitted. Here, the processing of the communication control unit 220 will be described as a difference from the first embodiment.

通信制御部220は、決定部214によって決定された推奨メニューおよび推奨メニューを提供可能な店舗の情報と、料理の撮像画像の送信を要求する要求情報との双方を端末装置100に送信するように通信部240を制御する。また、通信制御部220は、端末装置100において、推奨メニューおよび推奨メニューを提供可能な店舗の情報と要求情報との双方が常に表示されるような制御信号(以下、「ロック信号」と称する)を、端末装置100に送信するように通信部240を制御する。ロック信号は、上述した種々の情報を表示させるほかに、他の機能を制御する信号であってもよい。ロック信号は、例えば、緊急時に必要な通話やメール等の機能を除く一部の機能を制限する信号であってもよいし、全ての機能を制限する信号であってもよい。   The communication control unit 220 transmits both the recommended menu determined by the determination unit 214 and information on a store that can provide the recommended menu and request information for requesting transmission of a captured image of the dish to the terminal device 100. The communication unit 240 is controlled. In addition, the communication control unit 220 controls the terminal device 100 to display a recommended menu and both information on a store that can provide the recommended menu and request information (hereinafter referred to as “lock signal”). The communication unit 240 is controlled so as to be transmitted to the terminal device 100. The lock signal may be a signal for controlling other functions in addition to displaying the various information described above. The lock signal may be, for example, a signal that restricts some functions except functions such as a call and mail necessary in an emergency, or may be a signal that restricts all functions.

通信制御部220は、判定部218により「特定した料理が推奨メニューに示される料理と同じである」と判定された場合、ロック信号を無効にする信号(以下、「ロック解除信号」と称する)を端末装置100に送信するように通信部240を制御する。また、通信制御部220は、判定部218により「特定した料理が推奨メニューに示される料理と異なる」と判定された場合、健康を維持または改善するといった目標が達成されていない旨を示す情報を端末装置100に送信するように通信部240を制御する。この際、通信制御部220は、ロック解除信号を端末装置100に送信するように通信部240を制御しない。これによって、端末装置100は、ユーザが推奨メニューの料理を摂取するまで、ユーザの利便性を高める機能の一部または全部を制限し続ける。この結果、健康管理装置200は、健康管理を目的とした行動をユーザに促すことができる。   If the determination unit 218 determines that “the specified dish is the same as the dish shown in the recommended menu” by the determination unit 218, the communication control unit 220 invalidates the lock signal (hereinafter referred to as “unlock signal”). Is transmitted to the terminal device 100. The communication unit 240 is controlled. In addition, when the determination unit 218 determines that “the identified dish is different from the dish shown in the recommended menu”, the communication control unit 220 displays information indicating that the goal of maintaining or improving health has not been achieved. The communication unit 240 is controlled to transmit to the terminal device 100. At this time, the communication control unit 220 does not control the communication unit 240 so as to transmit the lock release signal to the terminal device 100. As a result, the terminal device 100 continues to restrict some or all of the functions that enhance the user's convenience until the user ingests the recommended menu dishes. As a result, the health management device 200 can prompt the user to take actions aimed at health management.

また、上述した第3実施形態において、通信制御部220は、ロック信号を端末装置100に送信するように通信部240を制御してから所定時間(例えば3時間)経過後に、ロック解除信号を端末装置100に送信するように通信部240を制御してもよい。   In the above-described third embodiment, the communication control unit 220 sends the lock release signal to the terminal after a predetermined time (for example, 3 hours) has elapsed since the communication unit 240 was controlled to transmit the lock signal to the terminal device 100. The communication unit 240 may be controlled to transmit to the apparatus 100.

以上説明した少なくとも一つの実施形態における健康管理装置200によれば、ユーザの消費カロリー量に基づいてユーザの健康を改善、或いは維持するための推奨メニューを決定し、決定した推奨メニューをユーザに提供可能な店舗を決定する。健康管理装置200は、ユーザが操作する端末装置100の位置を示す端末位置情報と店舗の位置を示す店舗位置情報との双方に基づいて、端末装置100を操作するユーザが店舗に居るか否かを判定する。これによって、健康管理装置200は、推奨メニューを見たユーザの行動を把握することでユーザのカロリーの消費量と摂取量とを適切に管理することができる。   According to the health management apparatus 200 in at least one embodiment described above, a recommended menu for improving or maintaining the health of the user is determined based on the calorie consumption of the user, and the determined recommended menu is provided to the user. Determine possible stores. The health management device 200 determines whether or not the user operating the terminal device 100 is in the store based on both the terminal location information indicating the location of the terminal device 100 operated by the user and the store location information indicating the location of the store. Determine. Thereby, the health management device 200 can appropriately manage the consumption and intake of the user's calories by grasping the behavior of the user who viewed the recommended menu.

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。   As mentioned above, although the form for implementing this invention was demonstrated using embodiment, this invention is not limited to such embodiment at all, In the range which does not deviate from the summary of this invention, various deformation | transformation and substitution Can be added.

なお、本発明は、次の態様でも実施可能である。
(1)ユーザの活動時に代謝される代謝量を示す代謝量情報を取得する代謝量情報取得部と、自装置の位置を演算して特定する測位演算部と、前記代謝量情報取得部により取得された代謝量情報と、前記測位演算部により演算され特定された位置を示す情報とを出力するように制御する出力制御部とを備える端末装置。
In addition, this invention can be implemented also in the following aspect.
(1) Obtained by a metabolic rate information acquisition unit that acquires metabolic rate information indicating the metabolic rate that is metabolized during a user's activity, a positioning calculation unit that calculates and identifies the position of the own device, and acquired by the metabolic rate information acquisition unit A terminal device comprising: an output control unit that performs control so as to output the metabolite information obtained and information indicating the position calculated and specified by the positioning calculation unit.

1‥健康管理システム、100、100−1〜100−n…端末装置、102…アンテナ、104…変調/復調部、106…AD/DA変換部、108…カメラ、110…入力部、112…出力部、130…制御部、132…取得部、134…測位演算部、136…出力制御部、150…記憶部、200…健康管理装置、202…入力部、204…出力部、210…制御部、212…取得部、214…決定部、216…画像処理部、218…判定部、220…通信制御部、230…記憶部、240…通信部、NW…ネットワーク DESCRIPTION OF SYMBOLS 1 ... Health management system, 100, 100-1-100-n ... Terminal device, 102 ... Antenna, 104 ... Modulation / demodulation part, 106 ... AD / DA conversion part, 108 ... Camera, 110 ... Input part, 112 ... Output , 130 ... control unit, 132 ... acquisition unit, 134 ... positioning calculation unit, 136 ... output control unit, 150 ... storage unit, 200 ... health management device, 202 ... input unit, 204 ... output unit, 210 ... control unit, 212 ... acquisition unit, 214 ... determination unit, 216 ... image processing unit, 218 ... determination unit, 220 ... communication control unit, 230 ... storage unit, 240 ... communication unit, NW ... network

Claims (5)

ユーザが操作する端末装置の位置を示す端末位置情報を取得する端末位置情報取得部と、
前記ユーザの操作に応じた信号を示す操作信号を取得する操作信号取得部と、
前記操作信号取得部により取得された操作信号に基づいて料理のメニュー情報を選択し、前記メニュー情報に示される料理を提供可能な店舗を決定する決定部と、
前記決定部により決定された店舗の位置を示す店舗位置情報と、前記端末位置情報取得部により取得された端末位置情報との双方に基づいて、前記端末装置を操作するユーザが前記店舗に居るか否かを判定する判定部と、
を備える健康管理装置。
A terminal position information acquisition unit for acquiring terminal position information indicating the position of the terminal device operated by the user;
An operation signal acquisition unit that acquires an operation signal indicating a signal corresponding to the operation of the user;
A determination unit that selects menu information of a dish based on the operation signal acquired by the operation signal acquisition unit, and determines a store that can provide the dish indicated in the menu information;
Whether the user operating the terminal device is in the store based on both the store location information indicating the location of the store determined by the determination unit and the terminal location information acquired by the terminal location information acquisition unit A determination unit for determining whether or not,
A health management device comprising:
前記操作信号取得部は、時系列に異なる複数の画像を取得し、
前記判定部は、前記操作信号取得部により取得された複数の画像間の類似度に基づいて、前記端末装置を操作するユーザが、前記決定部により選択された料理のメニューに示される料理を摂取したか否かを判定する、
請求項1記載の健康管理装置。
The operation signal acquisition unit acquires a plurality of different images in time series,
The determination unit, based on the similarity between the plurality of images acquired by the operation signal acquisition unit, the user operating the terminal device ingests the dish shown in the menu of the dish selected by the determination unit To determine whether or not
The health management device according to claim 1.
前記操作信号取得部は、前記決定部により決定された店舗において、前記端末装置を操作するユーザが前記料理のメニューに応じた決済を行った際に生成される決済情報を取得し、
前記判定部は、前記操作信号取得部により取得された決済情報に基づいて、前記端末装置を操作するユーザが、前記決定部により選択された料理のメニューに示される料理を摂取したか否かを判定する、
請求項1記載の健康管理装置。
The operation signal acquisition unit acquires payment information generated when a user operating the terminal device makes a payment according to the cooking menu at the store determined by the determination unit,
Based on the settlement information acquired by the operation signal acquisition unit, the determination unit determines whether the user operating the terminal device has ingested the dish shown in the menu of the dish selected by the determination unit. judge,
The health management device according to claim 1.
前記判定部により前記端末装置を操作するユーザが前記店舗に居ないと判定された場合、前記ユーザが操作する端末装置の機能の一部または全部を制限する制御信号を前記端末装置に出力する出力部を備え、
前記出力部は、所定時間経過後に前記制御信号を無効にさせる信号を前記端末装置に出力する、
請求項1から3のうちいずれか1項記載の健康管理装置。
When the determination unit determines that the user operating the terminal device is not in the store, an output that outputs to the terminal device a control signal that restricts some or all of the functions of the terminal device operated by the user Part
The output unit outputs a signal that invalidates the control signal after a predetermined time has elapsed to the terminal device.
The health management device according to any one of claims 1 to 3.
コンピュータに、
ユーザが操作する端末装置の位置を示す端末位置情報を取得する処理と、
前記ユーザの操作に応じた信号を示す操作信号を取得する処理と、
前記取得された操作信号に基づいて料理のメニュー情報を選択し、前記メニュー情報に示される料理を提供可能な店舗を決定する処理と、
前記決定された店舗の位置を示す店舗位置情報と、前記取得された端末位置情報との双方に基づいて、前記端末装置を操作するユーザが前記店舗に居るか否かを判定する処理と、
を実行させるための健康管理プログラム。
On the computer,
Processing for obtaining terminal position information indicating the position of the terminal device operated by the user;
A process of obtaining an operation signal indicating a signal corresponding to the user's operation;
A process of selecting menu information of a dish based on the acquired operation signal and determining a store that can provide the dish shown in the menu information;
A process of determining whether or not the user operating the terminal device is in the store based on both the store location information indicating the determined location of the store and the acquired terminal location information;
A health care program to make you run.
JP2015014482A 2015-01-28 2015-01-28 Health care device and health care program Expired - Fee Related JP6468590B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015014482A JP6468590B2 (en) 2015-01-28 2015-01-28 Health care device and health care program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015014482A JP6468590B2 (en) 2015-01-28 2015-01-28 Health care device and health care program

Publications (2)

Publication Number Publication Date
JP2016139319A true JP2016139319A (en) 2016-08-04
JP6468590B2 JP6468590B2 (en) 2019-02-13

Family

ID=56559276

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015014482A Expired - Fee Related JP6468590B2 (en) 2015-01-28 2015-01-28 Health care device and health care program

Country Status (1)

Country Link
JP (1) JP6468590B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020181491A (en) * 2019-04-26 2020-11-05 ソフトバンクグループ株式会社 System, program, and method
JP2020182609A (en) * 2019-05-01 2020-11-12 綾子 高橋 Electronic equipment
JP2021111260A (en) * 2020-01-15 2021-08-02 Necプラットフォームズ株式会社 Management device, management system, management method, and management program
JP2021189579A (en) * 2020-05-27 2021-12-13 株式会社おいしい健康 Information processing apparatus, method and program

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006252150A (en) * 2005-03-10 2006-09-21 Nec Fielding Ltd Health maintenance support system, and information processing system, user system, operation method and operation program used therein
JP2009245276A (en) * 2008-03-31 2009-10-22 Equos Research Co Ltd Information providing system and information providing program
JP2011221804A (en) * 2010-04-09 2011-11-04 Ntt Docomo Inc Information providing system, information providing server and information providing method
JP2012190338A (en) * 2011-03-11 2012-10-04 Kuniyoshi Kawai Daily life improvement system
JP2014071703A (en) * 2012-09-28 2014-04-21 Rakuten Inc Information processor, information processing method, and information processing program
JP2014132401A (en) * 2013-01-07 2014-07-17 Seiko Epson Corp Store introduction system, server device, terminal device, and store introduction method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006252150A (en) * 2005-03-10 2006-09-21 Nec Fielding Ltd Health maintenance support system, and information processing system, user system, operation method and operation program used therein
JP2009245276A (en) * 2008-03-31 2009-10-22 Equos Research Co Ltd Information providing system and information providing program
JP2011221804A (en) * 2010-04-09 2011-11-04 Ntt Docomo Inc Information providing system, information providing server and information providing method
JP2012190338A (en) * 2011-03-11 2012-10-04 Kuniyoshi Kawai Daily life improvement system
JP2014071703A (en) * 2012-09-28 2014-04-21 Rakuten Inc Information processor, information processing method, and information processing program
JP2014132401A (en) * 2013-01-07 2014-07-17 Seiko Epson Corp Store introduction system, server device, terminal device, and store introduction method

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020181491A (en) * 2019-04-26 2020-11-05 ソフトバンクグループ株式会社 System, program, and method
JP2020182609A (en) * 2019-05-01 2020-11-12 綾子 高橋 Electronic equipment
JP7385369B2 (en) 2019-05-01 2023-11-22 綾子 高橋 Electronic equipment, information processing methods and programs
JP2021111260A (en) * 2020-01-15 2021-08-02 Necプラットフォームズ株式会社 Management device, management system, management method, and management program
JP2021189579A (en) * 2020-05-27 2021-12-13 株式会社おいしい健康 Information processing apparatus, method and program

Also Published As

Publication number Publication date
JP6468590B2 (en) 2019-02-13

Similar Documents

Publication Publication Date Title
US20230005052A1 (en) Imagery and annotations
US9977980B2 (en) Food logging from images
Anthimopoulos et al. Computer vision-based carbohydrate estimation for type 1 patients with diabetes using smartphones
US20130105565A1 (en) Nutritional Information System
JP6468590B2 (en) Health care device and health care program
WO2013114638A1 (en) Image processing system, image processing device, image processing method, program, and information storage medium
US20120179665A1 (en) Health monitoring system
US9424495B1 (en) Digital food imaging analysis: system and method to analyze food consumption
JP6765916B2 (en) Health management device, health management system, and health management method
Jiang et al. Food nutrition visualization on Google glass: Design tradeoff and field evaluation
CN102214269A (en) Information processing apparatus, information outputting method and computer program storage device
CN107851183A (en) System and method for providing recipe
JP2011028382A (en) Nutrition management server and nutrition management method for managing nutrition component of meal for each user
US20200342977A1 (en) System, computer-readable storage medium, and method
US20190221134A1 (en) Meal Management System
Liang et al. CEP: calories estimation from food photos
Han et al. Automatic cloud detection for high spatial resolution multi-temporal images
CN111222569A (en) Method, device, electronic equipment and medium for identifying food
Akpa et al. Smartphone-based food weight and calorie estimation method for effective food journaling
JP2006171984A (en) Health information management method, health information management device, health information management system, and program
Fang et al. The use of co-occurrence patterns in single image based food portion estimation
KR20200036314A (en) Guide card for food information recognition, food information recognition system and method thereof
JP4989240B2 (en) Meal management support system
JP6083661B1 (en) Health management server, health management server control method, and health management program
JP2012146159A (en) Information processing apparatus, method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170925

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190110

R150 Certificate of patent or registration of utility model

Ref document number: 6468590

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees