JP7286093B2 - Eating Related Proposal Device and Eating Related Proposing System - Google Patents

Eating Related Proposal Device and Eating Related Proposing System Download PDF

Info

Publication number
JP7286093B2
JP7286093B2 JP2019234441A JP2019234441A JP7286093B2 JP 7286093 B2 JP7286093 B2 JP 7286093B2 JP 2019234441 A JP2019234441 A JP 2019234441A JP 2019234441 A JP2019234441 A JP 2019234441A JP 7286093 B2 JP7286093 B2 JP 7286093B2
Authority
JP
Japan
Prior art keywords
information
user
eating
unit
analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019234441A
Other languages
Japanese (ja)
Other versions
JP2021101872A (en
Inventor
嘉則 新井
利光 飯沼
冬樹 山田
英基 吉川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nihon University
J Morita Manufaturing Corp
Original Assignee
Nihon University
J Morita Manufaturing Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nihon University, J Morita Manufaturing Corp filed Critical Nihon University
Priority to JP2019234441A priority Critical patent/JP7286093B2/en
Publication of JP2021101872A publication Critical patent/JP2021101872A/en
Application granted granted Critical
Publication of JP7286093B2 publication Critical patent/JP7286093B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本開示は、摂食関連提案装置及び摂食関連提案システムに関する。 The present disclosure relates to an eating-related suggestion device and an eating-related suggestion system.

従来、ヒトを含む動物の口腔内に設けられた口腔内センサから得られた情報を用いて、当該動物の行動解析を行う装置が知られている(例えば特許文献1参照)。 2. Description of the Related Art Conventionally, there has been known a device that analyzes the behavior of an animal, including humans, using information obtained from an intraoral sensor provided in the oral cavity of the animal (see Patent Document 1, for example).

特開2012-191994号公報JP 2012-191994 A

しかしながら、上記特許文献1に記載の装置は、動物の行動解析を行うに留まっており、あるユーザについての解析結果を当該ユーザにフィードバックする観点において、改善の余地がある。また、仮に上記解析結果をユーザに閲覧可能にしたとしても、当該ユーザが当該解析結果を理解するために必要な専門知識を有さない場合には、当該ユーザは当該解析結果から有益な情報を得ることができない。 However, the device described in Patent Literature 1 only analyzes the behavior of animals, and there is room for improvement in terms of feeding back the analysis results of a certain user to the user. In addition, even if the above analysis results are made available to the user, if the user does not have the necessary expertise to understand the analysis results, the user may not be able to obtain useful information from the analysis results. can't get

そこで、本開示は、ユーザに有益な情報を適切に提供することができる摂食関連提案装置及び摂食関連提案システムを提供することを目的とする。 Accordingly, an object of the present disclosure is to provide an eating-related proposal device and an eating-related proposal system capable of appropriately providing useful information to a user.

本開示の一側面に係る摂食関連提案装置は、ユーザの摂食時の顎運動に関する顎運動情報を取得する取得部と、顎運動情報に基づいて、摂食時におけるユーザの摂食状況の解析結果を取得する解析部と、解析結果に基づいて、ユーザに対する摂食に関連する提案情報を生成する生成部と、生成部により生成された提案情報を出力する出力部と、を備える。 An eating-related proposal device according to an aspect of the present disclosure includes an acquisition unit that acquires jaw motion information related to jaw motion during eating by a user, and an acquisition unit that acquires jaw motion information related to jaw motion during eating by a user; An analysis unit that acquires an analysis result, a generation unit that generates suggestion information related to eating for the user based on the analysis result, and an output unit that outputs the suggestion information generated by the generation unit.

上記摂食関連提案装置では、ユーザの摂食時の顎運動の解析結果から、ユーザに対する摂食に関連する提案情報が生成及び出力される。これにより、解析結果に基づく摂食関連提案をユーザ等に適切に提示することが可能となる。従って、上記摂食関連提案装置によれば、ユーザに有益な情報を適切に提供することができる。 The eating-related proposal device generates and outputs the eating-related proposal information for the user from the analysis result of the jaw movement during eating of the user. As a result, it is possible to appropriately present a user or the like with an eating-related proposal based on the analysis result. Therefore, according to the eating-related proposal device, it is possible to appropriately provide useful information to the user.

生成部は、ユーザの摂食行動を改善するための改善提案を提案情報として生成してもよい。 The generator may generate an improvement proposal for improving the user's eating behavior as the proposal information.

取得部は、ユーザの健康状態のデータを更に取得し、生成部は、上記健康状態のデータにも基づいて、提案情報を生成してもよい。 The obtaining unit may further obtain health condition data of the user, and the generating unit may generate the proposal information based on the health condition data as well.

顎運動情報は、ユーザの摂食時の顎運動の時系列情報であり、解析結果は、摂食時にユーザが咀嚼したと推定される食べ物の属性を示す属性情報を含んでもよい。また、食べ物の属性は、食べ物の大きさ、硬さ、及び種類の少なくとも1つを含んでもよい。これにより、ユーザが摂取したと推定される食べ物の属性に応じた提案情報をユーザに提示することが可能となる。 The jaw movement information is time-series information of the jaw movement during eating by the user, and the analysis result may include attribute information indicating the attribute of the food that the user is supposed to masticate during eating. Also, the food attributes may include at least one of food size, hardness, and type. This makes it possible to present the user with suggested information according to the attributes of the food that the user is presumed to have ingested.

解析部は、顎運動情報から、一口分の顎運動を示す時系列情報である咀嚼情報を抽出し、機械学習により生成された解析モデルに咀嚼情報を入力し、解析モデルから出力される、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性を、属性情報として取得し、解析モデルは、ユーザについて取得された過去の一口分の顎運動を示す時系列情報である第1情報と過去の一口分の顎運動によりユーザが咀嚼した食べ物の属性を示す第2情報とを含む教師データを用いて機械学習された学習済みモデルであってもよい。これにより、ユーザの摂食時における顎運動の特徴を学習した解析モデルを用いて、簡易かつ精度良く解析結果(ユーザが咀嚼したと推定される食べ物の属性)を取得することができる。 The analysis unit extracts mastication information, which is time-series information indicating jaw movement for a single mouthful, from the jaw movement information, inputs the mastication information into an analysis model generated by machine learning, and outputs a mouthful from the analysis model. Attributes of food presumed to be masticated by the user by jaw movements are acquired as attribute information, and the analysis model is the first information, which is time-series information indicating past jaw movements acquired for the user. and the second information indicating the attribute of the food chewed by the user by the jaw movement of the past mouthful, and machine learning may be performed using teacher data. As a result, it is possible to easily and accurately acquire analysis results (attributes of food estimated to be masticated by the user) using an analysis model that has learned features of jaw movement during eating by the user.

解析部は、顎運動情報から、一口分の顎運動を示す時系列情報である咀嚼情報を抽出し、機械学習により生成された解析モデルに咀嚼情報を入力し、解析モデルから出力される、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性を、属性情報として取得し、解析モデルは、不特定のユーザについて取得された過去の一口分の顎運動を示す時系列情報である第1情報と過去の一口分の顎運動により不特定のユーザが咀嚼した食べ物の属性を示す第2情報とを含む教師データを用いて機械学習された学習済みモデルであってもよい。これにより、解析モデルを複数のユーザ間で共通化でき、解析モデルをユーザ毎に作成及び管理する必要がなくなるという利点がある。 The analysis unit extracts mastication information, which is time-series information indicating jaw movement for a single mouthful, from the jaw movement information, inputs the mastication information into an analysis model generated by machine learning, and outputs a mouthful from the analysis model. Attributes of food presumed to be chewed by the user by jaw movements are acquired as attribute information, and the analysis model is time-series information indicating the jaw movements of past mouthfuls acquired for unspecified users. It may be a learned model machine-learned using teacher data including the first information and the second information indicating attributes of food chewed by an unspecified user by jaw movements for past mouthfuls. As a result, there is an advantage that the analysis model can be shared among a plurality of users, and there is no need to create and manage the analysis model for each user.

解析部は、解析モデルに対してユーザの属性を示すプロファイル情報を更に入力し、解析モデルは、不特定のユーザのプロファイル情報を更に含む教師データを用いて機械学習された学習済みモデルであってもよい。ユーザの摂食時の顎運動は、ユーザの属性(例えば、性別、年代、健康状態等)によって異なると考えられる。従って、上記構成によれば、ユーザの属性を特徴量に含めることにより、ユーザが咀嚼したと推定される食べ物の属性をより精度良く取得することができる。 The analysis unit further inputs profile information indicating user attributes to the analysis model, and the analysis model is a learned model that has undergone machine learning using teacher data that further includes unspecified user profile information. good too. The user's jaw movement during eating is considered to differ depending on the user's attributes (eg, gender, age, health condition, etc.). Therefore, according to the above configuration, by including the attribute of the user in the feature amount, it is possible to obtain the attribute of the food that the user is estimated to have chewed with higher accuracy.

解析モデルは、第1情報のうち1回目の噛み動作に対応する顎運動を示す時系列情報である第1咀嚼情報に対応するデータと、第1情報のうち2回目の噛み動作に対応する顎運動を示す時系列情報である第2咀嚼情報に対応するデータと、第2情報とを含む教師データを用いて機械学習された学習済みモデルであり、解析部は、咀嚼情報から第1咀嚼情報と第2咀嚼情報とを抽出し、抽出された情報を解析モデルに入力することにより、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性を取得してもよい。特に1回目の噛み動作及び2回目の噛み動作に対応する顎運動には、咀嚼された食べ物の属性に応じた特徴が現れやすい。従って、上記構成によれば、1回目の噛み動作及び2回目の噛み動作に対応する顎運動を特徴量として用いて機械学習された解析モデルを用いることにより、ユーザが咀嚼したと推定される食べ物の属性をより精度良く取得することができる。 The analysis model includes data corresponding to the first masticatory information, which is time-series information indicating the jaw movement corresponding to the first chewing motion among the first information, and data corresponding to the second chewing motion among the first information. It is a learned model machine-learned using teacher data including the second information and data corresponding to the second mastication information, which is time-series information indicating movement, and the analysis unit extracts the first mastication information from the mastication information. and the second mastication information, and inputting the extracted information into the analysis model, the attribute of the food estimated to be masticated by the user by one mouthful of jaw movement may be obtained. In particular, the jaw movements corresponding to the first chewing motion and the second chewing motion are likely to exhibit characteristics according to the attributes of the masticated food. Therefore, according to the above configuration, by using the analysis model machine-learned using the jaw movements corresponding to the first chewing motion and the second chewing motion as feature amounts, the food estimated to be masticated by the user can be obtained. attributes can be obtained with higher accuracy.

上記摂食関連提案装置は、出力部により出力された提案情報を表示する表示部を更に備えてもよい。表示部に提案情報を表示させることにより、解析結果に応じた提案内容を適切にユーザ等に提示することができる。 The eating-related suggestion device may further include a display unit that displays the suggestion information output by the output unit. By displaying the proposal information on the display unit, it is possible to appropriately present the content of the proposal to the user or the like according to the analysis result.

出力部は、ユーザが所有する端末に提案情報を通知してもよい。上記構成によれば、例えば摂食関連提案装置がクラウド上のサーバ等である場合において、提案情報を適切にユーザに提示することができる。 The output unit may notify the terminal owned by the user of the proposal information. According to the above configuration, for example, when the eating-related proposal device is a server or the like on the cloud, the proposal information can be appropriately presented to the user.

出力部は、ユーザとは異なる他ユーザが所有する端末であって予め通知先として設定された該端末に提案情報を通知してもよい。上記構成によれば、他ユーザがユーザの摂食状況を把握することができる。これにより、例えばユーザの家族・近親者によるユーザの摂食状況の見守りを実現することができる。 The output unit may notify the proposed information to a terminal owned by another user different from the user and set in advance as a notification destination. According to the above configuration, other users can grasp the eating status of the user. As a result, for example, it is possible for the user's family/close relatives to watch over the user's eating situation.

解析結果は、摂食時においてユーザの口を開く大きさを示す開口量を含み、生成部は、開口量に基づいて、顎関節症の診断要否に関する情報を含む提案情報を生成してもよい。上記構成によれば、ユーザが摂食時に口を開く大きさに基づいて、顎関節症の疑いがあるユーザ等に対して早期の診断を促す提案を行うことができる。 The analysis result includes an amount of opening that indicates the size of the user's mouth that is opened when eating, and the generation unit generates proposal information including information on the necessity of diagnosing temporomandibular disorder based on the amount of opening. good. According to the above configuration, it is possible to make a proposal to prompt early diagnosis for a user suspected of having temporomandibular disorder based on the extent to which the user opens his/her mouth during eating.

本開示の一側面に係る摂食関連提案システムは、ユーザの摂食時の顎運動に関する顎運動情報を取得するためのセンサが設けられてユーザの下顎に装着される義歯と、センサにより取得された顎運動情報を解析する上記摂食関連提案装置と、を備える。上記摂食関連提案システムによれば、上述した摂食関連提案装置と同様の効果が奏される。 An eating-related proposal system according to one aspect of the present disclosure includes a denture that is provided with a sensor for acquiring jaw movement information related to jaw movement during eating of the user and is attached to the user's lower jaw; and the eating-related proposal device for analyzing the jaw movement information. According to the eating-related proposal system, the same effects as those of the eating-related proposal device described above can be obtained.

本開示によれば、ユーザに有益な情報を適切に提供することができる摂食関連提案装置及び摂食関連提案システムを提供することができる。 According to the present disclosure, it is possible to provide an eating-related proposal device and an eating-related proposal system capable of appropriately providing useful information to a user.

一実施形態に係る摂食関連提案システムの構成を示すブロック図である。It is a block diagram which shows the structure of the eating-related suggestion system which concerns on one Embodiment. 義歯及びベース装置の概略構成を示すブロック図である。It is a block diagram showing a schematic configuration of the denture and the base device. 解析モデルの概要を模式的に示す図である。FIG. 4 is a diagram schematically showing an outline of an analysis model; 提案モデルの概要を模式的に示す図である。It is a figure which shows the outline|summary of a proposal model typically. 解析部及び生成部の処理の一例を示す図である。It is a figure which shows an example of the process of an analysis part and a production|generation part. 咀嚼区間特定モジュールにより特定される咀嚼区間の一例を示す図である。FIG. 10 is a diagram showing an example of a mastication segment identified by a mastication segment identifying module; 一口分の咀嚼情報の一例を示す図である。It is a figure which shows an example of mastication information for one mouthful. 一口分の咀嚼情報における1回目及び2回目の噛み動作に対応する区間の一例を示す図である。FIG. 4 is a diagram showing an example of sections corresponding to first and second chewing motions in mastication information for one mouthful. (A)はアーモンドを咀嚼した場合のシミュレーション結果を示すグラフである。(B)はごはんを咀嚼した場合のシミュレーション結果を示すグラフである。(C)はいちごを咀嚼した場合のシミュレーション結果を示すグラフである。(A) is a graph showing simulation results when almonds are chewed. (B) is a graph showing simulation results when rice is chewed. (C) is a graph showing simulation results when chewing strawberries. 摂食関連提案システムの処理フローの一例を示す図である。It is a figure which shows an example of the processing flow of an eating-related suggestion system. 変形例に係る摂食関連提案システムの構成を示すブロック図である。It is a block diagram which shows the structure of the eating-related suggestion system which concerns on a modification. 変形例に係る解析モデルの概要を模式的に示す図である。It is a figure which shows typically the outline|summary of the analysis model which concerns on a modification. 変形例に係る摂食関連提案システムの構成を示すブロック図である。It is a block diagram which shows the structure of the eating-related suggestion system which concerns on a modification.

以下、本開示の実施形態について図面を参照しながら説明する。各図において同一又は相当の部分には同一の符号を付し、重複する説明を省略する。 Hereinafter, embodiments of the present disclosure will be described with reference to the drawings. In each figure, the same or corresponding parts are denoted by the same reference numerals, and redundant explanations are omitted.

[摂食関連提案システムの全体構成]
図1に示されるように、一実施形態に係る摂食関連提案システム1は、義歯2と、ベース装置3(保管装置)と、一実施形態に係る摂食関連提案装置であるユーザ端末4と、サーバ5と、を備える。義歯2は、義歯装着者(以下「ユーザ」)の下顎に装着される有床義歯である。義歯2は、ユーザの摂食時の顎運動に関する測定データ(顎運動情報)を取得する機能を有する。ベース装置3は、ユーザの下顎から取り外された義歯2を保管する装置である。ユーザ端末4は、当該ユーザによって利用される端末である。ユーザ端末4は、例えば、当該ユーザが所有するスマートフォン、タブレット等の携帯端末である。或いは、ユーザ端末4は、当該ユーザの自宅等に設置されるパーソナルコンピュータ等であってもよい。ユーザ端末4は、主に、義歯2が取得した測定データを解析する機能と、解析結果に基づいてユーザに対する摂食に関連する提案情報を生成する機能と、を有する。サーバ5は、ユーザ端末4が測定データを解析する際に利用する解析モデル及びユーザ端末4が提案情報を生成する際に利用する提案モデルを生成し、生成した解析モデル及び提案モデルをユーザ端末4に提供する装置である。
[Overall configuration of eating-related proposal system]
As shown in FIG. 1, an eating-related proposal system 1 according to one embodiment includes a denture 2, a base device 3 (storage device), and a user terminal 4, which is an eating-related proposal device according to one embodiment. , a server 5; The denture 2 is a plate denture that is attached to the lower jaw of a denture wearer (hereinafter "user"). The denture 2 has a function of acquiring measurement data (jaw movement information) relating to the jaw movement of the user during eating. The base device 3 is a device that stores the denture 2 removed from the user's lower jaw. The user terminal 4 is a terminal used by the user. The user terminal 4 is, for example, a mobile terminal such as a smart phone or tablet owned by the user. Alternatively, the user terminal 4 may be a personal computer or the like installed in the user's home or the like. The user terminal 4 mainly has a function of analyzing measurement data acquired by the denture 2 and a function of generating suggested information related to eating for the user based on the analysis results. The server 5 generates an analysis model used when the user terminal 4 analyzes measurement data and a proposal model used when the user terminal 4 generates proposal information, and sends the generated analysis model and proposal model to the user terminal 4. It is a device that provides

[義歯の構成]
図1に示されるように、義歯2は、ユーザの下顎に取り付けられる床部分2aと、床部分に対して着脱可能に設けられた歯部分2b(歯牙)と、を有している。また、図2に示されるように、義歯2には、センサ20が内蔵されている。センサ20は、例えば、図示しない基板上に実装されたプロセッサ(例えばCPU等)及びメモリ(例えば、ROM及びRAM等)等の回路によって構成される。センサ20は、センサ部21と、演算部22と、記憶部23と、通信部24と、電池25と、無線充電用アンテナ26と、を備える。1つの構成例として、演算部22は、図示しない基板上に実装されたプロセッサ(例えばCPU等)及びメモリ(例えば、ROM及びRAM等)等の回路によって構成され、記憶部23はメモリチップ等の電子的記憶要素等で構成される。
[Configuration of denture]
As shown in FIG. 1, the denture 2 has a base portion 2a attached to the user's lower jaw and tooth portions 2b (teeth) detachably provided on the base portion. Moreover, as shown in FIG. 2, the denture 2 has a built-in sensor 20 . The sensor 20 is configured by, for example, circuits such as a processor (for example, CPU) and memory (for example, ROM and RAM) mounted on a substrate (not shown). The sensor 20 includes a sensor section 21 , a calculation section 22 , a storage section 23 , a communication section 24 , a battery 25 and a wireless charging antenna 26 . As one configuration example, the calculation unit 22 is configured by circuits such as a processor (eg, CPU) and memory (eg, ROM and RAM) mounted on a substrate (not shown), and the storage unit 23 is a memory chip or the like. It consists of an electronic storage element or the like.

センサ部21は、ユーザの上下顎の動き又は下顎の動きを検出するための各種センサを含む。上下顎又は下顎の動きの検出には、上下顎又は下顎の運動の加速度及び角速度の少なくとも一方を検出するセンサ、すなわち加速度センサ及び角速度センサの少なくとも一方を用いることができる。上記加速度センサとしては、3軸方向の加速度を計測可能なセンサが好適である。また、下顎の動きには、単純な1軸回動以外の回動要素が混入することが多いので、上記角速度センサについても、3軸方向の角速度を計測可能なセンサが好適である。本実施形態では、センサ部21は、3軸方向(X軸方向、Y軸方向、及びZ軸方向)の各々の加速度を検出する加速度センサを含む。この場合、センサ部21により、ユーザの下顎の動き(顎運動)に応じた加速度が継続的に検出される。ただし、センサ部21の構成は上記に限られない。例えば、センサ部21は、上記加速度センサに代えて3軸方向の各々の角速度を検出する角速度センサ(ジャイロセンサ)を含んでもよいし、上記加速度センサ及び上記角速度センサの両方を含んでもよい。 The sensor unit 21 includes various sensors for detecting the movement of the upper and lower jaws of the user or the movement of the lower jaw. A sensor that detects at least one of the acceleration and angular velocity of the movement of the upper and lower jaws or the lower jaw, that is, at least one of an acceleration sensor and an angular velocity sensor can be used to detect the movement of the upper and lower jaws or the lower jaw. As the acceleration sensor, a sensor capable of measuring acceleration in three axial directions is suitable. In addition, since the movement of the mandible often involves rotation elements other than simple one-axis rotation, a sensor capable of measuring angular velocities in three-axis directions is also suitable for the angular velocity sensor. In this embodiment, the sensor unit 21 includes an acceleration sensor that detects acceleration in each of three axial directions (X-axis direction, Y-axis direction, and Z-axis direction). In this case, the sensor unit 21 continuously detects the acceleration according to the movement of the user's lower jaw (jaw movement). However, the configuration of the sensor unit 21 is not limited to the above. For example, the sensor unit 21 may include an angular velocity sensor (gyro sensor) that detects angular velocities in each of three axial directions instead of the acceleration sensor, or may include both the acceleration sensor and the angular velocity sensor.

演算部22は、センサ部21が継続的に取得する測定データ(本実施形態では、3軸方向の各々の加速度を示す3軸加速度データ)を取得し、当該測定データを記憶部23に保存する。本実施形態では、当該測定データは、ユーザの顎運動に応じた加速度(センサ部21が角速度センサを含む場合には角速度)の時間変化を示す時系列情報である。記憶部23は、例えば、上述したメモリによって構成される。ただし、測定データは、上記例に限られず、例えば顎運動の速度の時間変化を示す時系列情報であってもよい。また、演算部22は、タイムカウント機能を備えてもよい。例えば、演算部22をプロセッサ等で構成する場合、多くのプロセッサが備えるように、タイマ・カウンタを内蔵するように構成できる。このタイマ・カウンタを時系列情報の時刻割付に用いることができる。 The calculation unit 22 acquires measurement data continuously acquired by the sensor unit 21 (in this embodiment, triaxial acceleration data indicating acceleration in each of the three axial directions), and stores the measurement data in the storage unit 23. . In the present embodiment, the measurement data is time-series information indicating temporal changes in acceleration (angular velocity if the sensor unit 21 includes an angular velocity sensor) according to the user's jaw movement. The storage unit 23 is configured by, for example, the memory described above. However, the measurement data is not limited to the above example, and may be, for example, time-series information indicating changes over time in the speed of jaw movement. Moreover, the calculation unit 22 may have a time count function. For example, when the computing unit 22 is configured by a processor or the like, it can be configured to incorporate a timer/counter as many processors are equipped with. This timer/counter can be used for time allocation of time-series information.

演算部22は、例えば上述したタイマ・カウンタにより、センサ部21により取得された各時点の測定データに対して当該測定データの取得時刻を付加する。そして、演算部22は、取得時刻が付加された測定データを記憶部23に保存する。これにより、記憶部23には、各時点の測定データを取得時刻順に並べた時系列情報が記憶される。 The calculation unit 22 adds the acquisition time of the measurement data to the measurement data at each time point acquired by the sensor unit 21 by using, for example, the timer/counter described above. Then, the calculation unit 22 stores the measurement data to which the acquisition time is added in the storage unit 23 . As a result, the storage unit 23 stores time-series information in which the measurement data at each point in time are arranged in order of acquisition time.

また、義歯2がユーザの下顎から取り外され、ベース装置3に設けられた保管スペース34にセットされると、演算部22は、ベース装置3から送信される制御信号に応じた処理を実行する。例えば、演算部22は、記憶部23に保存された測定データを読み出して通信部24を介してベース装置3に送信したり、記憶部23に保存された測定データを消去したりする。 Also, when the denture 2 is removed from the user's lower jaw and set in the storage space 34 provided in the base device 3 , the calculation unit 22 executes processing according to the control signal transmitted from the base device 3 . For example, the calculation unit 22 reads out the measurement data stored in the storage unit 23 and transmits it to the base device 3 via the communication unit 24, or deletes the measurement data stored in the storage unit 23.

また、演算部22は、センサ部21の動作モードを以下のように制御してもよい。例えば、演算部22は、ユーザの摂食動作に応じた加速度のパターンを予め記憶しておく。このようなパターンは、例えば記憶部23に記憶されてもよい。そして、演算部22は、初期モードとして、サンプリングレートが比較的低い(すなわち、サンプリング周期が比較的長い)省電力モードでセンサ部21を動作させてもよい。また、演算部22は、センサ部21により継続的に取得される測定データを常時監視し、ユーザの摂食動作に応じた加速度のパターン(例えば、予め定められた閾値以上の加速度等)を検知したことをトリガとして、省電力モードよりもサンプリングレートが高い(すなわち、サンプリング周期が短い)データ取得モードでセンサ部21を動作させてもよい。その後、演算部22は、例えばユーザの摂食動作に応じた加速度のパターンが検知されなくなった時点から予め定められた設定時間(例えば30秒等)が経過したことをトリガとして、センサ部21の動作モードを再度省電力モードに切り替えてもよい。 Further, the calculation unit 22 may control the operation mode of the sensor unit 21 as follows. For example, the calculation unit 22 stores in advance an acceleration pattern according to the user's eating motion. Such patterns may be stored in the storage unit 23, for example. Then, the calculation unit 22 may operate the sensor unit 21 in a power saving mode with a relatively low sampling rate (that is, a relatively long sampling period) as the initial mode. In addition, the calculation unit 22 constantly monitors measurement data continuously acquired by the sensor unit 21, and detects an acceleration pattern (for example, acceleration equal to or greater than a predetermined threshold value) according to the user's eating action. The sensor unit 21 may be operated in a data acquisition mode with a higher sampling rate (that is, a shorter sampling period) than in the power saving mode, using the event as a trigger. After that, the calculation unit 22 detects the sensor unit 21 as a trigger when a predetermined set time (for example, 30 seconds or the like) has passed since the pattern of acceleration corresponding to the user's eating motion is no longer detected. The operation mode may be switched to the power saving mode again.

このように、ユーザの摂食時以外の期間におけるセンサ部21の動作モードを省電力モードに設定することにより、センサ部21の電力消費量を低減できる。その結果、ユーザが義歯2を長時間継続して装着する場合であっても、測定データを継続して取得することができる。また、ユーザの摂食時にはセンサ部21の動作モードをデータ取得モードに設定することにより、ユーザの摂食時におけるユーザの顎運動を示す精度の高い測定データを取得することができる。 In this way, by setting the operation mode of the sensor unit 21 to the power saving mode during periods other than when the user is eating, the power consumption of the sensor unit 21 can be reduced. As a result, even if the user wears the denture 2 continuously for a long time, it is possible to continuously acquire the measurement data. Further, by setting the operation mode of the sensor unit 21 to the data acquisition mode when the user eats, it is possible to acquire highly accurate measurement data indicating the jaw movement of the user when the user eats.

或いは、演算部22は、予めユーザの食事予定時間帯(例えば、朝食、昼食、おやつ、及び夕食の各々に対応する時間帯)を記憶しておき、当該食事予定時間帯以外の時間帯においてセンサ部21を省電力モードで動作させ、当該食事予定時間帯においてセンサ部21をデータ取得モードで動作させてもよい。このような動作モードの制御によっても、上述した効果と同様の効果が得られる。なお、食事予定時間に関する上記制御には、前述したタイマ・カウンタ等を利用することができる。 Alternatively, the computing unit 22 stores in advance the user's scheduled meal time zone (for example, the time zone corresponding to each of breakfast, lunch, snack, and dinner), and detects the sensor during a time zone other than the scheduled meal time zone. The unit 21 may be operated in the power saving mode, and the sensor unit 21 may be operated in the data acquisition mode during the scheduled meal time period. The same effects as those described above can also be obtained by such control of the operation mode. Note that the above-described timer/counter or the like can be used for the above-described control regarding the scheduled meal time.

通信部24は、義歯2がベース装置3の保管スペース34にセットされた状態で、無線通信によりベース装置3と通信する機能を有する。通信部24は、例えば情報送受信用のアンテナ等によって構成される。無線通信は、例えば、電波通信、光通信、及び音波通信等である。電波通信は、例えばBluetooth(登録商標)、Wi-Fi(登録商標)等を用いた通信である。光通信は、例えば可視光又は赤外線等を用いた通信である。音波通信は、例えば超音波等を用いた通信である。通信部24は、ベース装置3から制御信号を受信すると、当該制御信号を演算部22へと送信する。また、通信部24は、演算部22から測定データを受信すると、当該測定データをベース装置3へと送信する。 The communication unit 24 has a function of communicating with the base device 3 by wireless communication while the denture 2 is set in the storage space 34 of the base device 3 . The communication unit 24 is configured by, for example, an antenna for transmitting and receiving information. Wireless communication includes, for example, radio wave communication, optical communication, and sound wave communication. Radio wave communication is communication using, for example, Bluetooth (registered trademark), Wi-Fi (registered trademark), or the like. Optical communication is communication using, for example, visible light or infrared rays. Sound wave communication is communication using, for example, ultrasonic waves. Upon receiving the control signal from the base device 3 , the communication section 24 transmits the control signal to the calculation section 22 . Further, when receiving the measurement data from the calculation unit 22 , the communication unit 24 transmits the measurement data to the base device 3 .

電池25は、センサ部21、演算部22,及び記憶部23等に電力を供給する蓄電池である。無線充電用アンテナ26は、電池25を充電するための部品である。義歯2がベース装置3の保管スペース34にセットされた状態で、ベース装置3から無線充電用アンテナ26を介して電池25に電力が供給される。すなわち、電池25は、ワイヤレス充電によって充電される。このように、本実施形態の義歯2では、電池25を非接触で充電できるため、電池25を充電するための回路(充電端子)を義歯2の外部に露出させる必要がない。 The battery 25 is a storage battery that supplies electric power to the sensor section 21, the calculation section 22, the storage section 23, and the like. The wireless charging antenna 26 is a component for charging the battery 25 . With the denture 2 set in the storage space 34 of the base device 3 , power is supplied from the base device 3 to the battery 25 via the wireless charging antenna 26 . That is, the battery 25 is charged by wireless charging. Thus, in the denture 2 of this embodiment, the battery 25 can be charged in a non-contact manner, so there is no need to expose the circuit (charging terminal) for charging the battery 25 to the outside of the denture 2 .

通信部24によるベース装置3との通信動作は、電池25の充電動作と共に実行されてもよい。上述したように、本実施形態では、上記通信動作及び上記充電動作は、いずれも、義歯2がベース装置3の保管スペース34にセットされた状態で行われる。ここで、通信部24による通信動作は、上記いずれの無線通信方式を採用したとしても相応の電力を消費することになるが、通信動作と同時に充電動作が行われる場合には、通信動作に必要となる電力を適切に補うことができる。 The communication operation with the base device 3 by the communication unit 24 may be performed together with the charging operation of the battery 25 . As described above, in this embodiment, both the communication operation and the charging operation are performed while the denture 2 is set in the storage space 34 of the base device 3 . Here, the communication operation by the communication unit 24 consumes a certain amount of electric power regardless of which wireless communication method is adopted. can be appropriately compensated for.

上述したセンサ20が備える各部(特に交換頻度が高いセンサ部21及び電池25等)の少なくとも一部は、特定の歯部分2bに埋め込まれてもよい。この場合、センサ20が備える各部間の電気的な接続、すなわち、歯部分2bに埋め込まれた部分(例えば歯部分2bのうちの個別歯牙部2b1に埋め込まれた電池25)と他の部分(床部分2aに埋め込まれた部分又は他の歯部分2bに埋め込まれた部分)との電気的な接続は、例えば、歯部分2bと床部分2aとの境界部において確保されればよい。上記構成によれば、センサ20が備える各部の交換作業が容易となる。例えば、センサ部21が埋め込まれた歯部分2b(例えば個別歯牙部2b2)を床部分2aから取り外し、新しい歯部分2b(新しいセンサ部21を含む歯部分(個別歯牙部2b2))を床部分2aに装着するだけで、簡単にセンサ部21の交換を行うことが可能となる。 At least part of each part of the sensor 20 described above (especially the sensor part 21 and the battery 25, which are frequently replaced) may be embedded in a specific tooth portion 2b. In this case, the electrical connection between the parts provided in the sensor 20, that is, the part embedded in the tooth part 2b (for example, the battery 25 embedded in the individual tooth part 2b1 of the tooth part 2b) and the other part (floor The electrical connection with the portion embedded in the portion 2a or the portion embedded in another tooth portion 2b) may be ensured, for example, at the boundary between the tooth portion 2b and the floor portion 2a. According to the above configuration, replacement work of each part provided in the sensor 20 is facilitated. For example, the tooth portion 2b in which the sensor portion 21 is embedded (for example, the individual tooth portion 2b2) is removed from the floor portion 2a, and the new tooth portion 2b (the tooth portion including the new sensor portion 21 (individual tooth portion 2b2)) is replaced with the floor portion 2a. The sensor section 21 can be easily replaced by simply attaching it to the sensor.

[ベース装置の構成]
図2に示されるように、ベース装置3は、無線充電用アンテナ31(充電部)と、通信部32と、洗浄部33と、を備える。ベース装置3は、例えばユーザの自宅等に設けられる。ベース装置3の保管機能に着目した場合、ベース装置3は、更に義歯2を保管するための保管スペース34を備える。
[Configuration of base device]
As shown in FIG. 2 , the base device 3 includes a wireless charging antenna 31 (charging section), a communication section 32 and a cleaning section 33 . The base device 3 is provided, for example, at the user's home. Focusing on the storage function of the base device 3 , the base device 3 further comprises a storage space 34 for storing the denture 2 .

無線充電用アンテナ31は、義歯2がベース装置3の保管スペース34にセットされた状態で、当該義歯2の電池25をワイヤレス充電する。具体的には、無線充電用アンテナ31は、上述した無線充電用アンテナ26を介して、電池25に電力を供給する。無線充電用アンテナ31は、充電部を構成する。詳細には、無線充電用アンテナ31は、ベース装置3側の充電部31Aを構成し、無線充電用アンテナ26は、センサ20側の充電部26Aを構成する。充電部31A及び充電部26Aが、充電部CHを構成する。 The wireless charging antenna 31 wirelessly charges the battery 25 of the denture 2 while the denture 2 is set in the storage space 34 of the base device 3 . Specifically, the wireless charging antenna 31 supplies power to the battery 25 via the wireless charging antenna 26 described above. The wireless charging antenna 31 constitutes a charging section. Specifically, the wireless charging antenna 31 constitutes a charging section 31A on the base device 3 side, and the wireless charging antenna 26 constitutes a charging section 26A on the sensor 20 side. Charging section 31A and charging section 26A constitute charging section CH.

通信部32は、義歯2のセンサ20及びユーザ端末4と通信する機能を有する。具体的には、通信部32は、義歯2がベース装置3の保管スペース34にセットされた状態で、無線通信により当該義歯2の通信部24と通信する。また、通信部32は、有線通信又は無線通信により、ユーザ端末4と通信する。例えば、通信部32は、ユーザ端末4から測定データの要求を示す制御信号を受信すると、ベース装置3にセットされた義歯2の通信部24に対して当該制御信号を送信する。そして、通信部32は、通信部24から測定データを受信すると、当該測定データをユーザ端末4へと送信する。これにより、義歯2のセンサ20によって取得された測定データが、ベース装置3を介して、ユーザ端末4へと送信される。そして、ユーザ端末4において、当該測定データが解析され、解析結果に応じた提案情報が生成される。通信部32は、ベース装置3側の通信部であり、通信部24は、センサ20側の通信部である。通信部32及び通信部24が、通信部TRを構成する。 The communication unit 32 has a function of communicating with the sensor 20 of the denture 2 and the user terminal 4 . Specifically, the communication unit 32 communicates with the communication unit 24 of the denture 2 by wireless communication while the denture 2 is set in the storage space 34 of the base device 3 . Also, the communication unit 32 communicates with the user terminal 4 through wired communication or wireless communication. For example, upon receiving a control signal indicating a request for measurement data from the user terminal 4 , the communication section 32 transmits the control signal to the communication section 24 of the denture 2 set on the base device 3 . Then, upon receiving the measurement data from the communication unit 24 , the communication unit 32 transmits the measurement data to the user terminal 4 . Thereby, the measurement data acquired by the sensor 20 of the denture 2 is transmitted to the user terminal 4 via the base device 3 . Then, the user terminal 4 analyzes the measurement data and generates proposal information according to the analysis result. The communication unit 32 is a communication unit on the base device 3 side, and the communication unit 24 is a communication unit on the sensor 20 side. The communication section 32 and the communication section 24 constitute a communication section TR.

洗浄部33は、義歯2がベース装置3の保管スペース34にセットされた状態で、義歯2を洗浄する機能を有する。洗浄部33は、例えば、保管スペース34に専用の薬剤を含む液体を導入する処理、義歯2を当該液体に浸すことによって義歯2の表面を洗浄する処理、及び洗浄後に当該液体を保管スペース34から抜き取って義歯2を乾燥させる処理等を実行する。すなわち、保管スペース34は、義歯2を洗浄することが可能な洗浄スペースを兼ねている。 The cleaning unit 33 has a function of cleaning the denture 2 while the denture 2 is set in the storage space 34 of the base device 3 . The cleaning unit 33 performs, for example, a process of introducing a liquid containing a dedicated drug into the storage space 34, a process of cleaning the surface of the denture 2 by immersing the denture 2 in the liquid, and removing the liquid from the storage space 34 after cleaning. A process of extracting and drying the denture 2 is executed. That is, the storage space 34 also serves as a washing space in which the denture 2 can be washed.

以上説明したように、ベース装置3は、義歯2の保管、センサ20の充電、センサ20との通信(センサ20からの測定データの取得、演算部22への制御信号の伝達等)、及び義歯2の洗浄を行う機能を有している。これにより、ユーザは、例えば就寝前等に義歯2をユーザの下顎から取り外し、ベース装置3の保管スペース34に義歯2をセットするだけで、義歯2の保管、センサ20の充電、センサ20からの測定データの取得(及びユーザ端末4への送信)、及び義歯2の洗浄を行うことができる。このようなベース装置3によれば、ユーザに過度の負担をかけることなく、ユーザの日常生活における顎運動に関する測定データを取得することができる。 As described above, the base device 3 stores the denture 2, charges the sensor 20, communicates with the sensor 20 (acquisition of measurement data from the sensor 20, transmission of a control signal to the calculation unit 22, etc.), and denture 2 cleaning function. As a result, the user can store the denture 2, charge the sensor 20, and receive power from the sensor 20 simply by removing the denture 2 from the lower jaw of the user before going to bed, for example, and setting the denture 2 in the storage space 34 of the base device 3. Acquisition of measurement data (and transmission to the user terminal 4) and cleaning of the denture 2 can be performed. According to such a base device 3, it is possible to acquire measurement data relating to jaw movements in the user's daily life without imposing an excessive burden on the user.

上述したように、摂食関連提案システム1は、ユーザの摂食時の顎運動に関する顎運動情報を取得するためのセンサ20が設けられてユーザの下顎に装着される義歯2と、センサ20により取得された顎運動情報を解析する摂食関連提案装置(ユーザ端末4)と、を備える。摂食関連提案システム1は、ユーザの下顎から取り外された義歯2を保管するベース装置3を更に備え、ベース装置3は、センサ20と通信することによりセンサ20から顎運動情報を取得すると共に、摂食関連提案装置(ユーザ端末4)と通信することにより摂食関連提案装置(ユーザ端末4)に顎運動情報を送信する通信部32を有する。摂食関連提案システム1において、ベース装置3は、センサ20を充電する充電部(無線充電用アンテナ31からなる充電部31A)を更に有する。ベース装置3は、義歯2を洗浄する洗浄部33を更に有する。 As described above, the eating-related proposal system 1 includes the denture 2 that is provided with the sensor 20 for acquiring jaw motion information related to the jaw motion when the user eats and is attached to the user's lower jaw, and the sensor 20 and an eating-related proposal device (user terminal 4) that analyzes the acquired jaw movement information. The eating-related suggestion system 1 further includes a base device 3 that stores the denture 2 removed from the user's lower jaw, the base device 3 acquires jaw movement information from the sensor 20 by communicating with the sensor 20, and It has a communication unit 32 that transmits jaw movement information to the eating-related proposal device (user terminal 4) by communicating with the eating-related proposal device (user terminal 4). In the eating-related suggestion system 1, the base device 3 further has a charging section (charging section 31A including the wireless charging antenna 31) that charges the sensor 20. FIG. The base device 3 further has a cleaning section 33 for cleaning the denture 2 .

[ユーザ端末の構成]
図1に示されるように、ユーザ端末4は、取得部41と、解析部42(咀嚼情報取得部、推定部)と、解析モデル記憶部43と、生成部44と、提案モデル記憶部45と、出力部46と、表示部47と、を備える。ユーザ端末4は、プロセッサ(例えばCPU等)及びメモリ(例えば、ROM及びRAM等)等を備えるコンピュータ装置である。なお、ユーザ端末4は、センサ20の演算部22と同様に、タイマ・カウンタを備えてもよい。取得部41、解析部42、生成部44、出力部46、及び表示部47は、それぞれ回路によって構成されてもよく、プロセッサがそれらの回路の一部又は全部を構成してもよい。取得部41、解析部42、生成部44、出力部46、及び表示部47のそれぞれがプロセッサの一部又は全部を構成してもよく、各回路がメモリを含んでもよい。
[Configuration of user terminal]
As shown in FIG. 1, the user terminal 4 includes an acquisition unit 41, an analysis unit 42 (mastication information acquisition unit, estimation unit), an analysis model storage unit 43, a generation unit 44, and a proposed model storage unit 45. , an output unit 46 and a display unit 47 . The user terminal 4 is a computer device including a processor (such as CPU) and memory (such as ROM and RAM). It should be noted that the user terminal 4 may have a timer/counter in the same manner as the calculation unit 22 of the sensor 20 . The acquisition unit 41, the analysis unit 42, the generation unit 44, the output unit 46, and the display unit 47 may each be configured by a circuit, and the processor may configure part or all of these circuits. Each of the acquisition unit 41, the analysis unit 42, the generation unit 44, the output unit 46, and the display unit 47 may constitute part or all of the processor, and each circuit may include a memory.

取得部41は、ユーザの摂食時の顎運動に関する測定データを取得する。上述したように、取得部41は、義歯2のセンサ20において取得及び保存された測定データを、ベース装置3を介して取得する。ただし、取得部41が測定データを取得する方法は上記に限られない。例えば、取得部41は、ベース装置3を介さずに、センサ20(通信部24)と直接通信することによって、測定データを取得してもよい。 Acquisition unit 41 acquires measurement data relating to jaw movement during eating by the user. As described above, the acquisition unit 41 acquires the measurement data acquired and stored by the sensor 20 of the denture 2 via the base device 3 . However, the method by which the acquisition unit 41 acquires the measurement data is not limited to the above. For example, the acquisition unit 41 may acquire measurement data by directly communicating with the sensor 20 (communication unit 24) without going through the base device 3. FIG.

本実施形態では、測定データは、ユーザの下顎に装着される義歯2に設けられたセンサ20によって検出された3軸方向の各々の加速度の時間変化を示す時系列情報(3軸加速度データ)である。3軸加速度データは、センサ部21において所定のサンプリング周期で継続的に取得された各時刻の加速度のX軸成分、Y軸成分、及びZ軸成分を示す情報である。 In the present embodiment, the measurement data is time-series information (three-axis acceleration data) indicating temporal changes in acceleration in each of the three-axis directions detected by the sensor 20 provided on the denture 2 worn on the user's lower jaw. be. The triaxial acceleration data is information indicating the X-axis component, Y-axis component, and Z-axis component of the acceleration at each time continuously acquired in the sensor unit 21 at a predetermined sampling period.

例えば、ユーザが就寝中に義歯2をベース装置3の保管スペース34にセットする場合、取得部41は、毎晩、ユーザの就寝前の一日分(すなわち、ユーザが起床して義歯2を装着してから就寝前に義歯2を取り外すまでの期間)の測定データを取得することができる。ここで、取得部41は、センサ20の記憶部23に保存された全ての測定データ(すなわち、一日分のデータ)を取得してもよいし、センサ部21がデータ取得モード時に取得した測定データのみ(すなわち、ユーザの摂食時の測定データ)を取得してもよい。例えば、取得部41は、ベース装置3を介して、データ取得モード時に取得された測定データのみを要求する制御信号をセンサ20(演算部22)に送信し、データ取得モード時に取得された測定データのみをセンサ20から取得してもよい。後者によれば、後述する解析部42による解析に必要なデータ(すなわち、ユーザの摂食時の測定データ)のみを効率的に取得できる。このように不要な測定データの通信を省略することにより、データ通信量を削減できると共に解析に必要な測定データを短時間で取得することが可能となる。 For example, when the user sets the denture 2 in the storage space 34 of the base device 3 while the user is asleep, the acquisition unit 41 collects data for one day before the user goes to bed (that is, after the user wakes up and wears the denture 2). period until the denture 2 is removed before going to bed). Here, the acquisition unit 41 may acquire all the measurement data (that is, data for one day) stored in the storage unit 23 of the sensor 20, or may acquire the measurement data acquired by the sensor unit 21 in the data acquisition mode. Data only (ie, measurement data when the user eats) may be acquired. For example, the acquisition unit 41 transmits a control signal requesting only the measurement data acquired in the data acquisition mode to the sensor 20 (calculation unit 22) via the base device 3, and transmits the measurement data acquired in the data acquisition mode. may be obtained from the sensor 20 only. According to the latter, it is possible to efficiently acquire only data necessary for analysis by the analysis unit 42 (that is, data measured when the user eats). By omitting communication of unnecessary measurement data in this way, it is possible to reduce the amount of data communication and to acquire measurement data necessary for analysis in a short time.

取得部41は、ユーザの摂食時の顎運動の動きの測定データ以外のデータを更に取得するように構成されてもよい。例えば、取得部41は、後述するユーザの健康状態のデータ(ユーザの属性の一つ)を取得するように構成されてもよい。この場合、測定データに示される顎運動がユーザの疾患状態中に行われたこと等をデータとして把握することが可能となる。以下、上述したユーザの健康状態等を示すデータ(すなわち、摂食に関連する可能性はあるが、摂食時の顎運動の動きの測定データではないもの)を、間接的摂食関連データと表記する。間接的摂食関連データは、ユーザによって入力されてもよいし、ユーザ以外の者によって入力されてもよい。また、間接的摂食関連データは、ユーザの健康状態を測定するための機具、装置等と連動して取得されてもよい。例えば、取得部41は、体温計又は血圧計と連動してもよい。すなわち、取得部41は、ユーザが体温計又は血圧計を用いて体温又は血圧を測定した際に、当該測定の結果を当該体温計又は当該血圧計から自動的に間接的摂食関連データとして取得してもよい。また、取得部41は、ユーザの表情及び体動等を自動解析するユーザ観察装置と連動して、ユーザの精神状態に関する測定結果を当該ユーザ観察装置から間接的摂食関連データとして取得してもよい。 The acquisition unit 41 may be configured to further acquire data other than the measurement data of jaw movements during eating of the user. For example, the acquisition unit 41 may be configured to acquire health condition data of the user (one of attributes of the user), which will be described later. In this case, it is possible to grasp as data that the jaw movement indicated in the measurement data was performed during the user's disease state. Hereinafter, data indicating the user's health condition, etc. (that is, data that may be related to eating but is not measurement data of jaw movements during eating) is referred to as indirect eating-related data. write. Indirect feeding-related data may be entered by the user or by someone other than the user. Indirect eating-related data may also be acquired in conjunction with equipment, devices, etc. for measuring the user's health condition. For example, the acquisition unit 41 may be linked with a thermometer or a sphygmomanometer. That is, when the user measures body temperature or blood pressure using a thermometer or a sphygmomanometer, the acquisition unit 41 automatically acquires the result of the measurement from the thermometer or the sphygmomanometer as indirect eating-related data. good too. In addition, the acquisition unit 41 may work in conjunction with a user observation device that automatically analyzes the user's facial expression, body movement, etc., and acquires measurement results regarding the user's mental state from the user observation device as indirect eating-related data. good.

解析部42は、取得部41により取得された測定データに基づいて、摂食時におけるユーザの摂食状況の解析結果を取得する。本実施形態では、解析結果は、摂食時にユーザが咀嚼(摂取)したと推定される食べ物の属性を示す属性情報を含む。食べ物の属性とは、食べ物の大きさ、硬さ、及び種類の少なくとも1つを含む。食べ物の種類とは、例えばアーモンド、ごはん(米)、いちご等の食品を特定する情報である。本実施形態では、解析結果は、ユーザが咀嚼したと推定される食べ物の大きさ、硬さ、及び種類の全てを含む属性情報と、摂食時におけるユーザの咀嚼筋活動量の推定値と、を含む。また、解析結果は、上記以外にも、例えば統計的手法等を用いて測定データを分析することにより得られる種々の情報(例えば、一口毎の咀嚼回数、一口毎の咬合力、一口毎の姿勢(摂食時の頭部の姿勢)等の情報)を含み得る。なお、推定される食べ物の属性情報は、少なくとも硬さを含む情報であってもよい。詳しくは後述するが、咀嚼対象物の第1の噛み動作時及び第2の噛み動作時の下顎の動きの加速度及び/又は角速度の検出により、咀嚼対象物の硬さ属性が好適に推定される。咀嚼対象物の硬さが推定できることにより、より硬い食べ物を摂取することを勧めることを含む食生活改善提案を行うこと等が容易となる。 Based on the measurement data acquired by the acquisition unit 41, the analysis unit 42 acquires an analysis result of the eating state of the user at the time of eating. In this embodiment, the analysis result includes attribute information indicating the attribute of the food estimated to be masticated (ingested) by the user at the time of eating. Food attributes include at least one of size, hardness, and type of food. The type of food is information specifying food such as almonds, rice (rice), and strawberries. In this embodiment, the analysis results include attribute information including all of the size, hardness, and type of food that the user is estimated to have masticated, an estimated value of the user's masticatory muscle activity during eating, and including. In addition to the above, the analysis results may include various information obtained by analyzing measurement data using, for example, statistical methods (e.g., number of chews per bite, bite force per bite, posture per bite (information such as head posture when eating)). The estimated food attribute information may be information including at least hardness. Although the details will be described later, the hardness attribute of the object to be masticated is preferably estimated by detecting the acceleration and/or angular velocity of the movement of the mandible during the first chewing motion and the second chewing motion of the mastication object. . By estimating the hardness of the object to be masticated, it becomes easier to make suggestions for improving eating habits, including recommending the intake of harder foods.

解析部42は、解析モデル記憶部43に記憶された解析モデル(解析モデルM1)を用いることにより、測定データから上記解析結果の一部又は全部を取得する。本実施形態では、解析部42は、測定データからユーザの一口分の顎運動を示す時系列情報である咀嚼情報(図7及び図8に示される時系列データD1,D2)を抽出する。そして、解析部42は、一口分の咀嚼情報を解析モデルに入力し、解析モデルから出力される情報を上記解析結果の一部として取得する。本実施形態では、解析モデルから出力される情報は、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性(本実施形態では、食べ物の大きさ、硬さ、及び種類)を示す属性情報と、一口分の咀嚼筋活動量の推定値と、を含む。このような解析モデルの詳細については後述する。 The analysis unit 42 uses the analysis model (analysis model M1) stored in the analysis model storage unit 43 to obtain part or all of the analysis results from the measurement data. In this embodiment, the analysis unit 42 extracts mastication information (time-series data D1 and D2 shown in FIGS. 7 and 8), which is time-series information indicating the jaw movement of the user for one mouthful, from the measurement data. Then, the analysis unit 42 inputs mastication information for one mouthful into the analysis model, and acquires information output from the analysis model as part of the analysis result. In this embodiment, the information output from the analysis model indicates the attributes of the food (in this embodiment, the size, hardness, and type of food) estimated to be chewed by the user through jaw movements for a single mouthful. Contains attribute information and estimates of masticatory muscle activity for a single mouthful. Details of such an analysis model will be described later.

ここで、一口分の顎運動とは、ユーザが口腔内に一口分の食べ物を入れるために口を開き、当該食べ物を口に入れてから、次の食べ物を口腔内に入れるために再度口を開くまでの期間の顎運動である。或いは、通常、ユーザは、口腔内に一口分の食べ物を入れるために口を開き、当該食べ物を口に入れてから咀嚼し、嚥下を挟んで、次の食べ物を口腔内に入れるために再度口を開くので、一口分の顎運動を、口腔内に一口分の食べ物を入れるために口を開いてから、咀嚼が終了するまでの期間の顎運動としてもよい。すなわち、一口分の顎運動とは、一口分の食べ物を口腔内に入れた後、新たな食べ物を口に入れることなく当該一口分の食べ物を咀嚼する期間の顎運動である。一口分の顎運動を、一回の食事の間において、一口分の食べ物を咀嚼するために口を開いた後、次の食べ物を咀嚼するために口を開くまでの間の、当該口腔内に入れた一口分の食べ物の咀嚼開始から終了までの期間を少なくとも含む期間の顎運動と考えてもよい。一回の食事は通常一口分の食べ物の咀嚼が複数回繰り返されるので、上記のように定義することができる。咀嚼が終了してから顎運動が無くなった状態で一定時間が過ぎると咀嚼終了と判定するようにして、最後の一口分の顎運動の情報を処理できるようにしてもよい。また、一口分の顎運動を、一口分の食べ物を咀嚼するために口を開いた後、新たな食べ物を口に入れずに当該口腔内に入れた一口分の食べ物を嚥下するまでの咀嚼期間の顎運動と考えてもよい。 Here, the jaw movement for one bite means that the user opens the mouth to put a mouthful of food in the oral cavity, puts the food in the mouth, and then opens the mouth again to put the next food in the oral cavity. It is jaw movement during the period until it opens. Alternatively, the user usually opens the mouth to put a mouthful of food in the oral cavity, puts the food in the mouth, chews, swallows, and then opens the mouth again to put the next food in the oral cavity. Therefore, the jaw movement for a mouthful may be jaw movement during the period from opening the mouth to put a mouthful of food into the oral cavity until the end of chewing. That is, the jaw movement for a mouthful is jaw movement during the period of mastication of the mouthful of food without putting new food into the mouth after putting a mouthful of food into the oral cavity. Jaw movement for one mouthful is performed in the oral cavity between the opening of the mouth to chew one mouthful of food and the opening of the mouth to chew the next food during one meal. It may be considered as a jaw movement of a period including at least the period from the start to the end of mastication of a mouthful of food. A single meal can be defined as above, as it usually consists of multiple chewings of a mouthful of food. It is also possible to determine that mastication is completed when a certain period of time elapses after the end of mastication in a state in which there is no jaw movement, so that the jaw movement information for the last mouthful can be processed. In addition, the jaw movement for a single mouthful is defined as the mastication period from opening the mouth to masticate a single mouthful of food to swallowing the mouthful of food placed in the oral cavity without adding new food to the mouth. can be thought of as a jaw movement.

生成部44は、解析部42により取得された解析結果に基づいて、ユーザに対する摂食に関連する提案情報を生成する。提案情報は、例えば、食事内容に対するアドバイス(例えば咀嚼回数が少ない、ご飯を食べていない等の注意喚起)、最近の食事の傾向についての評価(標準的な食生活と比較した評価)、食生活をより良くするためのアドバイス(例えば、咀嚼回数を増やした方がよい、食事時刻を一定にした方がよい、食事時間を長くした方がよい、最近硬いものをあまり食べていないので、硬いものを摂取する頻度を増やした方がよい等の積極的な提案)等である。提案情報は、例えば、予め用意された複数のテンプレート(例えば提案内容に応じたテキストを含むデータ)から選択される一のテンプレートであってもよいし、いくつかのテンプレートを組み合わせたもの(すなわち、複合的な提案内容)であってもよい。食事内容に対するアドバイス又は食生活をより良くするためのアドバイスは、直接的により良い摂食行動をユーザに提案する摂食行動改善提案(直接的摂食行動改善提案)であるといえる。最近の食事の傾向についての評価も、評価が悪いときは良くなるように動機付ける作用があるので、間接的により良い摂食行動をユーザに促す摂食行動改善提案(間接的摂食行動改善提案)であるといえる。 The generation unit 44 generates suggestion information related to eating for the user based on the analysis result acquired by the analysis unit 42 . The suggested information includes, for example, advice on meal content (e.g., alerting people to chew less often, not eating rice, etc.), evaluation of recent dietary trends (evaluation compared to standard eating habits), and eating habits. (e.g., chewing more often, eating at regular times, eating longer, eating less hard foods recently positive proposals such as increasing the frequency of ingestion of The proposal information may be, for example, one template selected from a plurality of prepared templates (for example, data containing text according to the contents of the proposal), or a combination of several templates (i.e., It may be a composite proposal content). Advice on meal content or advice for improving eating habits can be said to be an eating behavior improvement proposal (direct eating behavior improvement proposal) that directly proposes better eating behavior to the user. An evaluation of recent dietary trends also has the effect of motivating people to improve their eating habits when the evaluation is poor, so proposals to improve eating behavior indirectly encourage the user to take better eating behaviors (indirect proposals to improve eating behavior). You can say that.

生成部44は、提案モデル記憶部45に記憶された提案モデル(提案モデルM2)を用いることにより、解析部42により取得された解析結果の一部又は全部から上記提案情報の一部又は全部を生成(取得)する。一例として、生成部44は、所定期間に対応する解析結果を提案モデルに入力し、提案モデルから出力される情報を上述した提案情報の一部として取得する。ここで、所定期間とは、例えば一食分の食事期間、一日分の食事期間(すなわち、朝食、昼食、おやつ、及び夕食を含む期間)等である。このような提案モデルの詳細については後述する。 The generating unit 44 uses the proposed model (proposed model M2) stored in the proposed model storage unit 45 to extract part or all of the above-described proposal information from part or all of the analysis results obtained by the analysis unit 42. Generate (obtain). As an example, the generation unit 44 inputs the analysis result corresponding to the predetermined period to the proposal model, and acquires information output from the proposal model as part of the above-described proposal information. Here, the predetermined period is, for example, a meal period for one meal, a meal period for one day (that is, a period including breakfast, lunch, snack, and dinner), or the like. The details of such a proposed model will be described later.

出力部46は、生成部44により生成された提案情報を出力する。本実施形態では、出力部46は、提案情報を表示部47に出力する。具体的には、出力部46は、提案情報の内容を画面に表示するための表示用データを生成し、当該表示用データを表示部47に出力する。 The output unit 46 outputs the proposal information generated by the generation unit 44 . In this embodiment, the output unit 46 outputs the proposal information to the display unit 47 . Specifically, the output unit 46 generates display data for displaying the contents of the proposal information on the screen, and outputs the display data to the display unit 47 .

表示部47は、提案情報を表示する。表示部47は、例えばユーザ端末4が備えるディスプレイ装置により構成される。表示部47は、出力部46から取得した表示用データを表示することにより、提案情報の内容をユーザに提示する。これにより、ユーザは、義歯2のセンサ20により取得された測定データの解析結果に応じた提案内容を確認することができる。 The display unit 47 displays proposal information. The display unit 47 is configured by, for example, a display device included in the user terminal 4 . The display unit 47 presents the content of the proposal information to the user by displaying the display data acquired from the output unit 46 . Thereby, the user can confirm the content of the proposal according to the analysis result of the measurement data acquired by the sensor 20 of the denture 2 .

以下に、取得部41、解析部42、解析モデル用教師データ記憶部52、解析モデル記憶部43、生成部44、及び出力部46の機械的構成例を述べる。取得部41は、測定データを取得するインターフェースからなる。測定データを加工する場合には、取得部41は、インターフェース及び回路からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。解析部42は、解析を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。解析を行うプログラムはメモリに記憶される電気的信号からなる。解析モデル用教師データ記憶部52はメモリからなる。解析モデル記憶部43はメモリからなる。生成部44は、生成を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。生成を行うプログラムはメモリに記憶される電気的信号からなる。出力部46は、出力を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。出力を行うプログラムはメモリに記憶される電気的信号からなる。 A mechanical configuration example of the acquisition unit 41, the analysis unit 42, the analysis model teaching data storage unit 52, the analysis model storage unit 43, the generation unit 44, and the output unit 46 will be described below. The acquisition unit 41 is composed of an interface for acquiring measurement data. When processing the measurement data, the acquisition unit 41 consists of an interface and a circuit. The circuitry may be part or all of the processor. The analysis unit 42 is composed of a program for analysis and a circuit for executing the program. The circuitry may be part or all of the processor. The program that performs the analysis consists of electrical signals stored in memory. The analytical model teaching data storage unit 52 is composed of a memory. The analysis model storage unit 43 consists of memory. The generating unit 44 includes a program for generating and a circuit for executing the program. The circuitry may be part or all of the processor. The generating program consists of electrical signals stored in memory. The output unit 46 includes a program for outputting and a circuit for executing the program. The circuitry may be part or all of the processor. The program that produces the output consists of electrical signals stored in memory.

[サーバの構成]
図1に示されるように、サーバ5は、上述した解析モデルを生成するための機能要素として、解析モデル用教師データ生成部51と、解析モデル用教師データ記憶部52と、解析モデル学習部53と、を備える。また、サーバ5は、上述した提案モデルを生成するための機能要素として、提案モデル用教師データ生成部54と、提案モデル用教師データ記憶部55と、提案モデル学習部56と、を備える。サーバ5は、プロセッサ(例えばCPU等)及びメモリ(例えば、ROM及びRAM等)等を備えるコンピュータ装置である。サーバ5は、例えばクラウド上に設けられた一以上の装置によって構成され得る。
[Server configuration]
As shown in FIG. 1, the server 5 includes an analysis model teacher data generation unit 51, an analysis model teacher data storage unit 52, and an analysis model learning unit 53 as functional elements for generating the above-described analysis model. And prepare. The server 5 also includes a proposed model teacher data generation unit 54, a proposed model teacher data storage unit 55, and a proposed model learning unit 56 as functional elements for generating the above-described proposed model. The server 5 is a computer device including a processor (such as a CPU) and memory (such as a ROM and a RAM). The server 5 may be composed of one or more devices provided on the cloud, for example.

解析モデル用教師データ生成部51は、解析モデルの学習のための教師データを生成する。解析モデル用教師データ記憶部52は、解析モデル用教師データ生成部51により生成された教師データを記憶する。解析モデル学習部53は、解析モデル用教師データ記憶部52に記憶された教師データを用いた機械学習を実行することにより、学習済みモデルである解析モデルを生成する。 The analytic model teaching data generation unit 51 generates teaching data for learning the analytic model. The analytical model teaching data storage unit 52 stores the teaching data generated by the analytical model teaching data generating unit 51 . The analytic model learning unit 53 generates an analytic model, which is a learned model, by executing machine learning using the teacher data stored in the analytic model teacher data storage unit 52 .

図3は、解析モデルの概要を模式的に示す図である。図3に示されるように、まず、解析モデル用教師データ生成部51は、ユーザについて取得された過去の一口分の顎運動を示す時系列情報である咀嚼情報(第1情報)と当該過去の一口分の顎運動に対応するユーザの実際の食事内容の情報とを含む教師データを複数セット生成する。ユーザの実際の食事内容の情報は、当該過去の一口分の顎運動によりユーザが実際に咀嚼した食べ物の属性(第2情報)を含む情報である。本実施形態では、実際の食事内容の情報として、当該過去の一口分の顎運動に対応する咀嚼筋活動量も含まれる。この咀嚼筋活動量は、ユーザの実際の食事の際に測定されたものである。なお、実際の食事内容の情報は、上記以外にも、摂食動作時の咬合力、頭部の姿勢等を測定した結果を含んでもよい。 FIG. 3 is a diagram schematically showing an overview of the analysis model. As shown in FIG. 3 , first, the analysis model teaching data generating unit 51 generates mastication information (first information), which is chronological information indicating jaw movements for a past mouthful acquired about the user, and the past mastication information. A plurality of sets of teacher data are generated including information on the user's actual meal content corresponding to the jaw movement for one mouthful. The information on the content of the user's actual meal is information including the attribute (second information) of the food that the user has actually masticated through the jaw movement for the past mouthful. In this embodiment, the information on the actual meal content also includes the amount of masticatory muscle activity corresponding to the jaw movement for the past mouthful. This amount of mastication muscle activity was measured when the user actually had a meal. In addition to the above, the information on the actual meal content may also include the results of measuring the occlusion force during the eating motion, the posture of the head, and the like.

このような教師データは、例えば、ユーザに様々な食べ物を食べてもらい、その際の測定データから抽出される一口毎の咀嚼情報とユーザの実際の食事内容とを対応付けることによって得ることができる。ただし、教師データの取得方法は上記に限られない。教師データは、例えば、ユーザの口元の映像を記録することができるスマートグラスをユーザに装着してもらい、当該スマートグラスでユーザの実際の食事の様子をロギングすることにより取得されてもよい。具体的には、義歯2のセンサ20により取得された測定データから食事中における一口毎の咀嚼情報を取得すると共に、スマートグラスによって取得された映像からユーザの実際の食事内容を把握する。そして、一口毎に、スマートグラスによって取得された映像から把握されるユーザの実際の食事内容と咀嚼情報とを対応付けることにより、上述した教師データを得ることができる。このように生成された教師データは、解析モデル用教師データ記憶部52に蓄積される。 Such training data can be obtained, for example, by having the user eat various foods and correlating chewing information for each mouthful extracted from measurement data at that time with the user's actual meal content. However, the method of acquiring teacher data is not limited to the above. The teacher data may be acquired by, for example, having the user wear smart glasses capable of recording an image of the user's mouth, and logging the user's actual eating behavior with the smart glasses. Specifically, mastication information for each mouthful during a meal is acquired from the measurement data acquired by the sensor 20 of the denture 2, and the user's actual meal content is grasped from the image acquired by the smart glasses. Then, by associating the user's actual meal content and mastication information grasped from the image acquired by the smart glasses for each mouthful, the above-described teacher data can be obtained. The teacher data generated in this manner is accumulated in the analytical model teacher data storage unit 52 .

続いて、解析モデル学習部53は、解析モデル用教師データ記憶部52に蓄積された教師データを用いた機械学習を実行することにより、学習済みモデルである解析モデルM1を生成する。解析モデル学習部53が実行する機械学習の手法は、特定の手法に限られず、例えば、SVM、ニューラルネットワーク、ディープラーニング等の様々な手法を用いることができる。例えば、解析モデルM1がニューラルネットワークによって構成される場合には、ニューラルネットワークの中間層のパラメータが教師データによってチューニングされた学習済みモデルが解析モデルM1として得られる。 Subsequently, the analytic model learning unit 53 generates an analytic model M1, which is a learned model, by executing machine learning using the teacher data accumulated in the analytic model teacher data storage unit 52 . The machine learning method executed by the analysis model learning unit 53 is not limited to a specific method, and various methods such as SVM, neural network, and deep learning can be used, for example. For example, when the analytical model M1 is configured by a neural network, a trained model in which the intermediate layer parameters of the neural network are tuned by teacher data is obtained as the analytical model M1.

このような機械学習により得られる解析モデルM1は、ユーザの一口分の咀嚼情報を入力して、当該一口分の咀嚼情報に対応するユーザの食事内容の推定結果を出力するように構成された学習済みモデルである。ここで、ユーザの食事内容の推定結果は、一口分の食べ物の大きさ、硬さ、及び種類のような食べ物の属性の推定結果と、一口分の咀嚼筋活動量の推定値と、を含む。解析モデル学習部53により生成された解析モデルM1は、サーバ5からユーザ端末4へと提供され、ユーザ端末4の解析モデル記憶部43に記憶される。 The analysis model M1 obtained by such machine learning is a learning system configured to input one mouthful of mastication information of the user and output an estimation result of the user's meal content corresponding to the one mouthful of mastication information. It is a finished model. Here, the estimation result of the content of the user's meal includes the estimation result of food attributes such as the size, hardness, and type of food for one mouthful, and the estimated value of masticatory muscle activity for one mouthful. . The analytical model M<b>1 generated by the analytical model learning unit 53 is provided from the server 5 to the user terminal 4 and stored in the analytical model storage unit 43 of the user terminal 4 .

提案モデル用教師データ生成部54は、提案モデルの学習のための教師データを生成する。提案モデル用教師データ記憶部55は、提案モデル用教師データ生成部54により生成された教師データを記憶する。提案モデル学習部56は、提案モデル用教師データ記憶部55に記憶された教師データを用いた機械学習を実行することにより、学習済みモデルである提案モデルを生成する。 The proposed model teaching data generating unit 54 generates teaching data for learning the proposed model. The proposed model teaching data storage unit 55 stores the teaching data generated by the proposed model teaching data generating unit 54 . The proposed model learning unit 56 generates a proposed model, which is a trained model, by executing machine learning using the teacher data stored in the proposed model teacher data storage unit 55 .

図4は、提案モデルの概要を模式的に示す図である。図4に示されるように、まず、提案モデル用教師データ生成部54は、ユーザについて取得された過去の所定期間に対応する解析結果と、当該解析結果に応じた摂食に関する提案情報とを含む教師データを複数セット生成する。ここでは一例として、所定期間は一食分(例えば、朝食等)の食事期間である。また、所定期間に対応する解析結果は、所定期間にユーザが咀嚼した食べ物の属性情報(大きさ、硬さ、及び種類)、所定期間における咀嚼筋活動量、所定期間における咀嚼回数の総数、所定期間における咬合力、所定期間における摂食動作時の頭部の姿勢等を含み得る。咬合力は実測されてもよいが、例えば性別、年齢、体格等に基づく標準的な平均値から解析されてもよい。すなわち、提案モデルに入力される所定期間に対応する解析結果は、上述した解析モデルM1を用いて得られる情報(ユーザが咀嚼したと推定される食べ物の属性情報及び咀嚼筋活動量の推定値等)だけでなく、解析モデルM1を用いずに統計的手法等によって得られる情報を含み得る。なお、頭部の姿勢は、センサ部21の検出結果に基づいて測定されてもよい。 FIG. 4 is a diagram schematically showing an overview of the proposed model. As shown in FIG. 4, first, the proposed model teaching data generating unit 54 includes analysis results corresponding to the past predetermined period acquired for the user, and proposal information regarding eating according to the analysis results. Generate multiple sets of training data. Here, as an example, the predetermined period is a meal period for one meal (for example, breakfast). Further, the analysis results corresponding to the predetermined period are the attribute information (size, hardness, and type) of the food chewed by the user during the predetermined period, the amount of masticatory muscle activity during the predetermined period, the total number of times of mastication during the predetermined period, the predetermined It may include biting force in a period, head posture during eating motion in a predetermined period, and the like. The occlusal force may be actually measured, but may also be analyzed from standard average values based on, for example, sex, age, build, and the like. That is, the analysis result corresponding to the predetermined period input to the proposed model is the information obtained using the above-described analysis model M1 (attribute information of the food presumed to be masticated by the user, estimated masticatory muscle activity, etc.). ) as well as information obtained by a statistical method or the like without using the analysis model M1. Note that the posture of the head may be measured based on the detection result of the sensor section 21 .

上記の教師データに含まれる摂食に関する提案情報は、上述した摂食行動改善提案であってもよい。或いは、提案情報は、例えば、上記過去の所定期間におけるユーザの健康状態(例えば、風邪、胃痛、頭痛等)に応じた提案情報であってもよい。提案モデル用教師データ生成部54により生成された教師データは、提案モデル用教師データ記憶部55に蓄積される。ユーザの健康状態は、ユーザの食事動作に反映されると考えられる。ユーザ毎に個人差があると考えられるものの、例えば、ユーザが風邪、胃痛等を患っているときは、食事量が普段よりも少なくなったり、摂取される食べ物に偏りが生じたり、咬合力が普段よりも小さくなったりする可能性がある。また、ユーザが頭痛を患っているときは、頭部の姿勢が普段よりも悪くなる(例えば斜めになっている)可能性もある。ユーザの健康状態には、広い意味ではユーザの精神状態も含まれ得る。これは、気が沈んでいるときには食欲が落ちたり、通常よりも幸福感に満ちている状態にあれば通常よりも食が進んだりする可能性があるからである。このように、ユーザの健康状態とユーザの食事動作との間には一定の相関関係があるといえる。このため、ユーザの健康状態に応じた提案情報(すなわち、ユーザの健康状態に基づいてユーザにとって有用と考えられる提案情報)とユーザの食事動作との間にも、一定の相関関係があるといえる。従って、上述した教師データに基づく機械学習によれば、所定期間に対応する解析結果を入力し、当該解析結果から推定されるユーザの健康状態に応じた提案情報を出力するように構成された提案モデルを生成することができる。提案の例としては、疾病が疑われる場合に、その原因をユーザに提示して適切なメニュー提案をすること、受診の勧告をすること等の治癒支援に関する提案等が考えられる。受診の勧告等は、摂食に関連して、ユーザをより良い健康状態に向かわせるための提案(健全化提案)である。 The suggestion information regarding eating included in the teacher data may be the above-mentioned eating behavior improvement suggestion. Alternatively, the suggestion information may be, for example, suggestion information according to the user's health condition (for example, cold, stomach ache, headache, etc.) during the predetermined period in the past. The teacher data generated by the proposed model teacher data generation unit 54 is accumulated in the proposed model teacher data storage unit 55 . The user's health condition is considered to be reflected in the user's eating behavior. Although it is considered that there are individual differences for each user, for example, when a user is suffering from a cold, stomach ache, etc., the amount of food eaten is less than usual, the food taken is uneven, and the bite force is reduced. It may be smaller than usual. Also, when the user is suffering from a headache, the head posture may be worse than usual (for example, slanted). A user's state of health may also include a user's mental state in a broad sense. This is because you may eat less when you're feeling down, or eat more when you're feeling happier than usual. Thus, it can be said that there is a certain correlation between the user's health condition and the user's eating behavior. For this reason, it can be said that there is a certain correlation between suggested information according to the user's health condition (that is, suggested information considered useful for the user based on the user's health condition) and the user's eating behavior. . Therefore, according to the above-described machine learning based on teacher data, a proposal configured to input an analysis result corresponding to a predetermined period and output proposal information according to the user's health condition estimated from the analysis result A model can be generated. Examples of suggestions include, when a disease is suspected, presenting the cause of the disease to the user and proposing an appropriate menu, and suggestions related to healing support such as recommending a doctor to see a doctor. A recommendation to see a doctor or the like is a proposal (health improvement proposal) related to eating to direct the user toward a better state of health.

続いて、提案モデル学習部56は、提案モデル用教師データ記憶部55に蓄積された教師データを用いた機械学習を実行することにより、学習済みモデルである提案モデルM2を生成する。提案モデル学習部56が実行する機械学習の手法は、特定の手法に限られず、例えば、SVM、ニューラルネットワーク、ディープラーニング等の様々な手法を用いることができる。例えば、提案モデルM2がニューラルネットワークによって構成される場合には、ニューラルネットワークの中間層のパラメータが教師データによってチューニングされた学習済みモデルが提案モデルM2として得られる。 Subsequently, the proposed model learning unit 56 generates the proposed model M2, which is a trained model, by executing machine learning using the teacher data accumulated in the proposed model teacher data storage unit 55 . The machine learning technique executed by the proposed model learning unit 56 is not limited to a specific technique, and various techniques such as SVM, neural network, and deep learning can be used, for example. For example, when the proposed model M2 is composed of a neural network, a trained model in which the intermediate layer parameters of the neural network are tuned by teacher data is obtained as the proposed model M2.

このような機械学習により得られる提案モデルM2は、ユーザの所定期間に対応する解析結果を入力して、当該解析結果に対応する提案情報を出力するように構成された学習済みモデルである。提案モデル学習部56により生成された提案モデルM2は、サーバ5からユーザ端末4へと提供され、ユーザ端末4の提案モデル記憶部45に記憶される。 The proposed model M2 obtained by such machine learning is a trained model configured to input the analysis result corresponding to the user's predetermined period and to output the proposal information corresponding to the analysis result. The proposed model M<b>2 generated by the proposed model learning unit 56 is provided from the server 5 to the user terminal 4 and stored in the proposed model storage unit 45 of the user terminal 4 .

以下に、解析モデル用教師データ生成部51、解析モデル学習部53、提案モデル用教師データ生成部54、提案モデル用教師データ記憶部55、及び提案モデル学習部56の機械的構成例を述べる。解析モデル用教師データ生成部51は、解析モデル用教師データ生成を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。解析モデル用教師データ生成を行うプログラムはメモリに記憶される電気的信号からなる。解析モデル学習部53は、解析モデル学習を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。解析モデル学習を行うプログラムはメモリに記憶される電気的信号からなる。提案モデル用教師データ生成部54は、提案モデル用教師データ生成を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。提案モデル用教師データ生成を行うプログラムはメモリに記憶される電気的信号からなる。提案モデル用教師データ記憶部55はメモリからなる。提案モデル学習部56は、提案モデル学習を行うプログラムと、当該プログラムを実行する回路と、からなる。当該回路は、プロセッサの一部又は全部によって構成されてもよい。提案モデル学習を行うプログラムはメモリに記憶される電気的信号からなる。 Mechanical configuration examples of the analytical model teacher data generator 51, the analytical model learner 53, the proposed model teacher data generator 54, the proposed model teacher data storage 55, and the proposed model learner 56 will be described below. The analytic model teaching data generating unit 51 includes a program for generating analytic model teaching data and a circuit for executing the program. The circuitry may be part or all of the processor. A program for generating analysis model training data consists of electrical signals stored in a memory. The analytical model learning unit 53 is composed of a program for performing analytical model learning and a circuit for executing the program. The circuitry may be part or all of the processor. A program for analytic model learning consists of electrical signals stored in memory. The proposed model teaching data generation unit 54 includes a program for generating proposed model teaching data and a circuit for executing the program. The circuitry may be part or all of the processor. A program for generating training data for the proposed model consists of electrical signals stored in memory. The proposed model teaching data storage unit 55 is composed of a memory. The proposed model learning unit 56 includes a program for performing proposed model learning and a circuit for executing the program. The circuitry may be part or all of the processor. A program for performing proposed model learning consists of electrical signals stored in memory.

[解析部及び生成部の処理]
図5~図8を参照して、解析部42及び生成部44の処理の一例について説明する。図5は、摂食時の測定データ(取得部41により取得された測定データ)から提案情報を生成するまでの処理フローの一例を示す図である。図5に示されるように、本実施形態では、解析部42は、咀嚼区間特定モジュール42aと、フィルタリング・演算モジュール42bと、解析モジュール42cと、を含む。また、生成部44は、提案モジュール44aを含む。これらのモジュールは、各種処理を実行するためのプログラム等によって構成されている。図5においては、解析モジュール42c中に解析モデルM1があるように図示されている。これは、解析モジュール42c中のメモリに解析モデルM1が格納されている場合、解析モデル記憶部43中の解析モデルM1にアクセスしにいく場合、解析モデル記憶部43から解析モデルM1を解析モジュール42c中のメモリに取り込む場合等、何らかの形で解析モデルM1を利用する構成を示している。
[Processing of analysis unit and generation unit]
An example of the processing of the analysis unit 42 and the generation unit 44 will be described with reference to FIGS. 5 to 8. FIG. FIG. 5 is a diagram showing an example of a processing flow up to generating proposal information from measurement data (measurement data acquired by the acquisition unit 41) during eating. As shown in FIG. 5, in the present embodiment, the analysis unit 42 includes a mastication segment identification module 42a, a filtering/calculation module 42b, and an analysis module 42c. The generator 44 also includes a proposal module 44a. These modules are composed of programs and the like for executing various processes. In FIG. 5, an analysis model M1 is shown in the analysis module 42c. When the analysis model M1 is stored in the memory of the analysis module 42c, and when accessing the analysis model M1 in the analysis model storage unit 43, the analysis model M1 is transferred from the analysis model storage unit 43 to the analysis module 42c. It shows a configuration in which the analysis model M1 is used in some form, such as when it is loaded into an internal memory.

[咀嚼区間特定モジュール]
まず、解析部42は、咀嚼区間特定モジュール42aにより、一定期間分(例えばユーザが起床後に義歯2を装着してから就寝前に義歯2を取り外すまでの一日分。ユーザの日常生活における、義歯2の装着から義歯2の取り外しまでの期間を義歯装着期間と呼んでもよい。)の測定データ(ここでは3軸加速度データ)から、一口毎の3軸加速度データを抽出する。具体的には、咀嚼区間特定モジュール42aは、測定データ中に含まれる一口毎の咀嚼区間(すなわち、ユーザが一口分の食べ物を口に入れて咀嚼動作を行っている区間)を特定する。一口毎の咀嚼区間中には、腔内で食べ物を粉砕するための複数回の噛み動作(咀嚼動作)が含まれる。そして、咀嚼区間特定モジュール42aは、特定された各咀嚼区間に対応する測定データを、一口分のデータとして抽出する。
[Mastication section identification module]
First, the analysis unit 42 uses the mastication segment identification module 42a to determine the amount of dentures for a certain period of time (for example, one day from when the user wears the dentures 2 after waking up to when they remove the dentures 2 before going to bed. The period from wearing the denture 2 to removing the denture 2 may be called a denture wearing period. Specifically, the mastication section identification module 42a identifies a mastication section for each mouthful included in the measurement data (that is, a section in which the user puts a mouthful of food in his mouth and performs a mastication action). During the chewing interval for each bite, multiple chewing motions (chewing motions) are included to break up the food in the cavity. Then, the mastication section identification module 42a extracts the measurement data corresponding to each identified mastication section as data for one mouthful.

図6は、咀嚼区間特定モジュール42aにより特定される咀嚼区間CSの一例を示す図である。図中のX、Y、Zは、それぞれX軸方向、Y軸方向、Z軸方向の加速度を示している。ここで、あるユーザの咀嚼時の顎運動のパターンは、食べ物の種類等に関わらずほぼ一定であることが知られている。このことを利用することにより、咀嚼区間特定モジュール42aは、例えば以下のようにして咀嚼区間を特定する。 FIG. 6 is a diagram showing an example of the mastication segment CS identified by the mastication segment identification module 42a. X, Y, and Z in the figure indicate the acceleration in the X-axis direction, the Y-axis direction, and the Z-axis direction, respectively. Here, it is known that a certain user's jaw movement pattern during mastication is almost constant regardless of the type of food. By utilizing this fact, the mastication segment identification module 42a identifies the mastication segment, for example, as follows.

まず、咀嚼区間特定モジュール42aは、予めユーザの咀嚼時の顎運動の周期(以下「顎運動周期」)を取得しておく。例えば、顎運動周期は、事前の予備測定(例えば、ユーザの咀嚼運動のビデオ観察等)に基づいて取得(算出)され得る。また、例えば、測定データ中においてユーザが咀嚼動作を行っていることが判明している区間がある場合には、当該区間において観測される周期的な運動成分を抽出することにより、当該運動成分の周期を上記顎運動周期として取得することができる。顎運動周期中には、実際に顎を動かす動作のほか、顎を動かさない維持動作が含まれることがある。以下では、顎運動周期中、顎を動かす動作を積極的顎運動と表し、顎を動かさない維持動作を消極的顎運動と表す。周期的な顎運動は、積極的顎運動からなる場合も、積極的顎運動と消極的顎運動との組合せからなる場合もあり得る。従って、前述の一口分の顎運動は、積極的顎運動からなる場合も、積極的顎運動と消極的顎運動との組合せからなる場合もあり得る。 First, the mastication section identification module 42a acquires in advance the period of jaw movement during mastication by the user (hereinafter referred to as "jaw movement period"). For example, the jaw movement period can be obtained (calculated) based on a preliminary measurement (eg, video observation of the user's chewing movement, etc.). Further, for example, if there is a section in the measurement data where it is known that the user is performing a chewing motion, by extracting the periodic motion component observed in that section, The period can be obtained as the jaw motion period. During the jaw movement cycle, in addition to the movement that actually moves the jaw, a maintenance movement that does not move the jaw may be included. In the following, the motion of moving the jaw during the jaw motion cycle is referred to as positive jaw motion, and the motion of maintaining the jaw without moving is referred to as negative jaw motion. Periodic jaw movements can consist of positive jaw movements or a combination of positive and passive jaw movements. Thus, the aforementioned mouthful jaw movements may consist of positive jaw movements or a combination of positive and negative jaw movements.

続いて、咀嚼区間特定モジュール42aは、測定データの中から、顎運動周期と一致又は類似する周期での周期的な運動成分が観測される区間を、咀嚼区間として特定する。例えば、咀嚼区間特定モジュール42aは、当該周期的な運動成分が予め定められた閾値時間(例えば数秒)以上続く区間を検出すると、当該検出された区間を咀嚼区間として特定する。そして、このように特定された咀嚼区間に対応する測定データが、一口分のデータとして抽出される。このような咀嚼区間特定モジュール42aの処理により、図6に示されるように、測定データ(ここでは3軸加速度データ)から、咀嚼区間CSが特定される。このようにして、測定データに含まれるユーザの食事期間(例えば、朝食、昼食、おやつ、夕食等の期間)毎に、一口毎の咀嚼区間CSが特定される。つまり、測定データに含まれる食事期間毎に、複数の咀嚼区間CSが特定される。そして、各咀嚼区間CSに含まれる測定データが、一口毎の3軸加速度データとして抽出される。咀嚼区間特定モジュール42aは、ユーザの顎運動のうち、咀嚼のための顎運動を抽出し、咀嚼の開始期を特定してもよい。また、咀嚼区間特定モジュール42aは、咀嚼が終了してから顎運動が無くなった状態で一定時間が過ぎると咀嚼終了と判定してもよい。そして、咀嚼区間特定モジュール42aは、1回分の食事の開始と終了とを区切って、1回分の食事の間を食事区間とし、食事区間中の咀嚼区間CSを特定してもよい。 Subsequently, the mastication segment identification module 42a identifies, as mastication segments, a segment in which a periodic motion component with a period matching or similar to the jaw motion cycle is observed from the measurement data. For example, when the mastication segment identification module 42a detects a segment in which the periodic motion component continues for a predetermined threshold time (for example, several seconds) or longer, the mastication segment identification module 42a identifies the detected segment as a mastication segment. Then, the measurement data corresponding to the mastication section specified in this way is extracted as data for one mouthful. By such processing of the mastication segment identification module 42a, as shown in FIG. 6, the mastication segment CS is identified from the measurement data (three-axis acceleration data in this case). In this way, the mastication section CS for each mouthful is specified for each meal period of the user (for example, period of breakfast, lunch, snack, dinner, etc.) included in the measurement data. That is, a plurality of mastication intervals CS are specified for each meal period included in the measurement data. Then, the measurement data included in each mastication section CS is extracted as triaxial acceleration data for each mouthful. The mastication section identification module 42a may extract jaw movements for mastication from among the user's jaw movements, and identify the initiation stage of mastication. Further, the mastication segment identification module 42a may determine that mastication is completed when a certain period of time elapses after the end of mastication with no jaw movement. Then, the mastication section specifying module 42a may separate the start and end of one meal, set the interval between one meal as a meal section, and specify the mastication section CS in the meal section.

[フィルタリング・演算モジュール]
次に、解析部42は、フィルタリング・演算モジュール42bにより、一口分の3軸加速度データに含まれるノイズ成分及び重力加速度の影響を除去する。本実施形態では、フィルタリング・演算モジュール42bは、例えばローパスフィルタによって一口分の3軸加速度データに含まれる高周波成分のノイズ除去を行うと共に、一口分の3軸加速度データについてオフセット補正を行う。オフセット補正とは、加速度センサにより取得される重力加速度による信号成分を除去する処理である。このように解析に悪影響を及ぼすおそれのあるノイズ成分を除去又は低減させる処理を「悪影響成分対抗処理」と呼んでもよい。フィルタリング・演算モジュール42bを悪影響成分対抗処理を行う「悪影響成分対抗モジュール」と呼んでもよい。
[Filtering/calculation module]
Next, the analysis unit 42 uses the filtering/calculation module 42b to remove the effects of noise components and gravitational acceleration contained in the three-axis acceleration data for one mouthful. In this embodiment, the filtering/calculation module 42b performs, for example, a low-pass filter to remove high-frequency components contained in the three-axis acceleration data for one mouthful, and performs offset correction on the three-axis acceleration data for one mouthful. Offset correction is processing for removing a signal component due to gravitational acceleration acquired by an acceleration sensor. Such processing for removing or reducing noise components that may adversely affect analysis may be referred to as “adverse component countermeasure processing”. The filtering/calculation module 42b may be called an "adverse effect component countering module" that performs adverse effect component countering processing.

図7に示されるように、フィルタリング・演算モジュール42bは、ノイズ除去及びオフセット補正がされた後の一口分の3軸加速度データに基づいて、加速度のノルムを示す時系列データD1を取得する。続いて、フィルタリング・演算モジュール42bは、加速度のノルムから重力加速度(1g)を減算し、減算結果を積分する。これにより、時系列データD2が得られる。時系列データD2は、ユーザの顎運動(下顎の角速度)に類似する波形データとなる。 As shown in FIG. 7, the filtering/calculation module 42b acquires time-series data D1 indicating the norm of acceleration based on the three-axis acceleration data for one mouthful after noise removal and offset correction. Subsequently, the filtering/calculation module 42b subtracts the gravitational acceleration (1 g) from the acceleration norm and integrates the subtraction result. Thereby, time-series data D2 is obtained. The time-series data D2 is waveform data similar to the user's jaw movement (angular velocity of the lower jaw).

時系列データD1,D2は、解析モデルM1に入力される一口分の咀嚼情報として用いられる。すなわち、解析部42は、上述した咀嚼区間特定モジュール42a及びフィルタリング・演算モジュール42bにより、取得部41により取得された測定データから、ユーザの一口分の顎運動を示す咀嚼情報である時系列データD1,D2を抽出する。上述したように、当該咀嚼情報(時系列データD1,D2)は、咀嚼区間特定モジュール42aにより特定された咀嚼区間CS毎に抽出される。 The time-series data D1 and D2 are used as mastication information for one mouthful input to the analysis model M1. That is, the analysis unit 42 extracts the time-series data D1, which is mastication information indicating the user's jaw movement for one mouthful, from the measurement data acquired by the acquisition unit 41 by the mastication segment identification module 42a and the filtering/calculation module 42b. , D2. As described above, the mastication information (time-series data D1, D2) is extracted for each mastication segment CS identified by the mastication segment identification module 42a.

時系列データD1,D2から、ユーザの開口の大きさ(すなわち、食べ物を噛むために上顎に対して下顎を開く大きさ)及び咬合運動(噛み動作)の情報を把握することができる。例えば、時系列データD1,D2の波形の特徴から、ユーザが大きく口を開いた状態(すなわち、上顎に対して下顎を離した状態)から、口を閉じて食べ物を噛み砕いた後、嚥下がなされ、次の一口分の食べ物を口内に入れるために再度口を大きく開くまでの区間を抽出することができる。当該区間は、1回の噛み動作(本実施形態では、口を一旦開いてから食べ物を噛み、次の噛み動作のために再度口を開く動作)が行われる区間である。 From the time-series data D1 and D2, information on the size of the user's mouth opening (that is, the size of opening the lower jaw with respect to the upper jaw for chewing food) and bite movement (biting movement) can be grasped. For example, from the characteristics of the waveforms of the time-series data D1 and D2, it can be seen that the user opens the mouth wide (that is, separates the lower jaw from the upper jaw), closes the mouth, chews food, and then swallows. , the interval until the mouth is opened wide again to put the next mouthful of food in the mouth can be extracted. This section is a section in which one chewing motion (in this embodiment, the mouth is once opened, the food is chewed, and the mouth is opened again for the next chewing motion).

図8は、時系列データD1,D2から抽出される1回目の噛み動作に対応する区間B1及び2回目の噛み動作に対応する区間B2を示す図である。このような1回目の噛み動作の咬合運動(区間B1におけるデータ)と2回目の噛み動作の咬合運動(区間B2におけるデータ)は、食べ物(咀嚼物)の種類(硬度、凝集性等から特定される食品の種類)、大きさ、及び咀嚼筋活動量との関連性が特に高い部分である。すなわち、区間B1,B2におけるデータは、食べ物の種類、大きさ、及び咀嚼筋活動量に応じた特徴が現れやすい部分である。 FIG. 8 is a diagram showing an interval B1 corresponding to the first biting motion and an interval B2 corresponding to the second biting motion extracted from the time-series data D1 and D2. The occlusal movement of the first chewing motion (data in interval B1) and the occlusal motion of the second chewing motion (data in interval B2) are specified from the type (hardness, cohesiveness, etc.) of the food (masticated material). type of food eaten), size, and masticatory muscle activity. In other words, the data in the sections B1 and B2 are portions in which features tend to appear according to the type and size of the food and the amount of masticatory muscle activity.

図9は、実際の人の咀嚼時の顎運動をシミュレーションしたロボットに義歯2を装着し、義歯2のセンサ20により得られたデータの一例を示している。ここでは、センサ20のセンサ部21は、3軸方向の加速度センサに加えて、下顎の基準ポイントを結ぶ軸の軸周りの下顎の回転運動の角速度を検出する角速度センサを備えている。このような角速度センサの具体例としては、下顎の左右下顎頭の運動論的顆頭点を結ぶ軸の軸周りの下顎の回転運動の角速度を検出する角速度センサが挙げられる。角速度センサとしては、3軸方向の角速度センサが好適に用いられる。ロボットを用いる場合は、いずれの箇所を基準ポイントにするか、設定しやすい。時系列データD3は、3軸方向の角速度センサにより取得されたデータから得られる角速度のノルムを積分することにより得られたデータである。すなわち、時系列データD3は、各時点における上顎に対する下顎の角度に対応するデータである。時系列データD4は、上述した時系列データD2に対応するデータ(すなわち、加速度のノルムから重力加速度を減算した結果を積分することにより得られたデータ)である。図9に示されるグラフにおいて、時系列データD3の値が小さい(下方にある)程、口の開き(上顎に対する下顎の開き)が大きいことを示している。なお、図5~図8の例では、解析部42は3軸加速度データのみから一口分の咀嚼情報(ここでは時系列データD1,D2)を取得したが、センサ部21が3軸方向の角速度センサを備える場合には、解析部42は上記時系列データD3に相当するデータを一口分の咀嚼情報として取得してもよい。 FIG. 9 shows an example of data obtained by the sensor 20 of the denture 2 when the denture 2 is attached to a robot that simulates the jaw movement during mastication of an actual person. Here, the sensor unit 21 of the sensor 20 includes an angular velocity sensor for detecting the angular velocity of rotational motion of the mandible around the axis connecting the reference points of the mandible in addition to the acceleration sensors in the three axial directions. A specific example of such an angular velocity sensor is an angular velocity sensor that detects the angular velocity of the rotational movement of the mandible about the axis connecting the kinematic condyle points of the left and right mandibular condyles of the mandible. As the angular velocity sensor, a triaxial angular velocity sensor is preferably used. When a robot is used, it is easy to set which point to use as the reference point. The time-series data D3 is data obtained by integrating the norms of angular velocities obtained from data obtained by angular velocity sensors in three axial directions. That is, the time-series data D3 is data corresponding to the angle of the lower jaw with respect to the upper jaw at each time point. The time-series data D4 is data corresponding to the above-described time-series data D2 (that is, data obtained by integrating the result of subtracting the gravitational acceleration from the acceleration norm). In the graph shown in FIG. 9, the smaller the value of the time-series data D3 (the lower the value), the larger the opening of the mouth (opening of the lower jaw with respect to the upper jaw). In the examples of FIGS. 5 to 8, the analysis unit 42 acquires mastication information for one mouthful (here, time-series data D1 and D2) only from the three-axis acceleration data, but the sensor unit 21 acquires angular velocity in three-axis directions. When a sensor is provided, the analysis unit 42 may acquire data corresponding to the time-series data D3 as mastication information for one mouthful.

図9の(A)は、アーモンドを咀嚼した場合のシミュレーション結果を示すグラフである。図9の(B)は、一口分のごはん(米)を咀嚼した場合のシミュレーション結果を示すグラフである。図9の(C)は、いちごを咀嚼した場合のシミュレーション結果を示すグラフである。ここで、それぞれの食べ物の物理的特徴は以下の通りである。
・アーモンド:比較的小さく、比較的硬い。
・ごはん:比較的小さく、比較的柔らかい。
・いちご:比較的大きく、比較的柔らかい。
FIG. 9A is a graph showing simulation results when almonds are chewed. (B) of FIG. 9 is a graph showing a simulation result when chewing a mouthful of rice (rice). (C) of FIG. 9 is a graph showing a simulation result when chewing a strawberry. Here, the physical characteristics of each food are as follows.
• Almonds: Relatively small and relatively hard.
・Rice: Relatively small and relatively soft.
・Strawberries: Relatively large and relatively soft.

図9に示されるように、時系列データD3,D4の全体波形において、食べ物間の差(すなわち、上記の物理的特徴の違いに応じた差)が現れている。特に、時系列データD3,D4のうち1回目の噛み動作(区間B1)及び2回目の噛み動作(区間B2)に対応する部分において、食べ物間の差が顕著に現れている。例えば、アーモンドについての2回目の噛み動作において、いったん顎の動きが止まった後にさらにかみ砕く動作の特徴が現れている。また、粘着性の高いごはんについては、単位時間当たりの咀嚼回数(噛み動作の回数)が他の2つと比較して多い。また、いちごについては、2回目以降の噛み動作における開口の大きさが比較的小さい。これは、食塊を舌で動かしながら食べているためと推測される。 As shown in FIG. 9, in the overall waveforms of the time-series data D3 and D4, differences between foods (that is, differences according to the differences in physical characteristics) appear. In particular, the difference between the foods is conspicuous in the portions corresponding to the first chewing motion (section B1) and the second chewing motion (section B2) in the time-series data D3 and D4. For example, in the second chewing motion of almonds, once the jaw stops moving, it is characterized by further chewing motion. In addition, the number of times of chewing per unit time (the number of times of chewing motion) is larger for highly sticky rice than for the other two. In addition, for strawberries, the size of the opening in the second and subsequent chewing motions is relatively small. This is presumed to be due to eating while moving the bolus with the tongue.

このように、ユーザの一口分の咀嚼情報には、咀嚼される食べ物の物理的特徴に応じた特徴が現れることがわかる。なお、咀嚼時の顎運動には個人差があると考えられるが、上述したようにユーザの過去の食事から得られた複数の教師データ(正解データ)を用いて解析モデルM1を学習させることにより、ユーザに特有の咀嚼時の顎運動の特徴に応じた解析モデルM1を得ることができると考えられる。 In this way, it can be seen that the user's mastication information for a single mouthful has characteristics corresponding to the physical characteristics of the food to be masticated. Although it is considered that there are individual differences in jaw movements during mastication, the analysis model M1 can be trained using a plurality of teacher data (correct data) obtained from the user's past meals as described above. , it is possible to obtain an analysis model M1 corresponding to the characteristics of jaw movements during mastication unique to the user.

解析モデルM1に対する入力データには、1回目の噛み動作に対応する顎運動を示す時系列情報(第1咀嚼情報)と2回目の噛み動作に対応する顎運動を示す時系列情報(第2咀嚼情報)とが含まれてもよい。第1咀嚼情報は、区間B1に含まれるデータであり、第2咀嚼情報は、区間B2に含まれるデータである。すなわち、解析モデルM1に対して、区間B1に含まれるデータが明示的に1回目の噛み動作に対応するデータとして入力されると共に、区間B2に含まれるデータが明示的に2回目の噛み動作に対応するデータとして入力されてもよい。この場合、上述した解析モデル用教師データ生成部51は、ユーザについて取得された過去の一口分の咀嚼情報のうちから1回目の噛み動作に対応するデータ(すなわち、第1咀嚼情報に対応する情報)と2回目の噛み動作に対応するデータ(すなわち、第2咀嚼情報に対応する情報)とを抽出し、抽出されたこれらのデータを解析モデル用の教師データに含めればよい。このように、好適には、教師データに1回目の噛み動作に対応するデータと2回目の噛み動作に対応するデータとを少なくとも含める。この場合、解析モデルM1は、第1咀嚼情報及び第2咀嚼情報に対する解析結果(例えばユーザが咀嚼したと推定される食べ物の属性情報、一口分の咀嚼筋活動量の推定値等)を出力するように学習される。1回目の噛み動作に対応するデータを「第1咀嚼情報解析教育データ」、2回目の噛み動作に対応するデータを「第2咀嚼情報解析教育データ」と呼んでもよい。 The input data for the analysis model M1 includes time-series information (first mastication information) indicating the jaw movement corresponding to the first chewing action and time-series information (second chewing information) indicating the jaw movement corresponding to the second chewing action. information) may be included. The first mastication information is data included in section B1, and the second mastication information is data included in section B2. That is, the data included in the interval B1 is explicitly input to the analysis model M1 as data corresponding to the first biting motion, and the data included in the interval B2 is explicitly input to the second biting motion. It may be entered as corresponding data. In this case, the above-described analysis model teaching data generating unit 51 generates data corresponding to the first chewing motion (that is, information corresponding to the first ) and data corresponding to the second chewing motion (that is, information corresponding to the second mastication information), and these extracted data are included in the training data for the analysis model. Thus, preferably, the teacher data includes at least data corresponding to the first biting motion and data corresponding to the second biting motion. In this case, the analysis model M1 outputs analysis results for the first mastication information and the second mastication information (for example, attribute information of food that the user is presumed to have chewed, an estimated value of masticatory muscle activity for one mouthful, etc.). is learned as The data corresponding to the first chewing motion may be called "first chewing information analysis training data", and the data corresponding to the second chewing motion may be called "second chewing information analysis training data".

[解析モジュール]
次に、解析部42は、解析モジュール42cにより、一口分の咀嚼情報から、上述した解析結果を取得する。解析部42は、解析モデル記憶部43に記憶された解析モデルM1に一口分の咀嚼情報を入力する。上述したように、解析モデルM1に入力される一口分の咀嚼情報には、咀嚼区間CSにおける時系列データD1,D2(以下「全体区間データ」)のみが含まれてもよいし、咀嚼区間CSのうち区間B1,B2に含まれる時系列データD1,D2(以下「特定区間データ」)のみが含まれてもよいし、全体区間データ及び特定区間データの両方が含まれてもよい。また、解析モデルM1に入力される一口分の咀嚼情報には、時系列データD1,D2のうちの一方のデータのみが含まれてもよい。また、上述したように、一口分の咀嚼情報に、上述した時系列データD3に対応する時系列データ(すなわち、下顎の角度を示すデータ)が含まれる場合には、解析モデルM1に入力される一口分の咀嚼情報に当該時系列データが含まれてもよい。なお、1回目の噛み動作と2回目の噛み動作に特に注目するのは、1回目の噛み動作と2回目の噛み動作とが咀嚼対象物の特徴を顕著に示すからであるが、他の任意の複数回数(n回目)までの噛み動作に注目してもよい。すなわち、1回目からn回目までの噛み動作に対応する咀嚼情報を、解析モデルM1に対する入力データとして用いてもよい。言うまでもないが、上記のn回は、咀嚼区間CS中の総噛み動作回数よりも小さい回数となるように設定される。
[Analysis module]
Next, the analysis module 42c of the analysis unit 42 acquires the above-described analysis result from the mastication information for one mouthful. The analysis unit 42 inputs mastication information for one mouthful into the analysis model M1 stored in the analysis model storage unit 43 . As described above, the mastication information for a single mouthful input to the analysis model M1 may include only the time-series data D1 and D2 in the mastication section CS (hereinafter referred to as "whole section data"). Among them, only the time-series data D1 and D2 included in the intervals B1 and B2 (hereinafter “specific interval data”) may be included, or both the entire interval data and the specific interval data may be included. Further, the mastication information for one mouthful input to the analysis model M1 may include only one of the time-series data D1 and D2. Further, as described above, when the mastication information for one mouthful includes time-series data corresponding to the time-series data D3 (that is, data indicating the angle of the mandible), it is input to the analysis model M1. The chronological data may be included in the mastication information for one mouthful. The reason why the first and second chewing motions are particularly noted is that the first and second chewing motions clearly show the characteristics of the object to be masticated. You may pay attention to the biting motion up to a plurality of times (n-th time). That is, mastication information corresponding to the first to n-th chewing motions may be used as input data for the analysis model M1. Needless to say, the n number of times is set to be smaller than the total number of chewing motions during the mastication section CS.

そして、解析部42は、解析モジュール42cにより、解析モデルM1から出力される、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性(本実施形態では、食べ物の大きさ、硬さ、及び種類)を、上述した属性情報として取得する。すなわち、解析部42(解析モジュール42c)は、解析モデルM1を用いて属性の推定を実行する。解析モデルM1から出力される食べ物の属性情報を「推定属性情報」、咀嚼したと推定される食べ物の属性を「推定属性」と呼んでもよい。また、本実施形態のように、解析モデルM1は、上記食べ物の属性と共に、一口分の咀嚼筋活動量の推定値を出力してもよい。また、解析モデルM1は、上記以外の情報を更に出力するように構成されていてもよい。 Then, the analysis unit 42 uses the analysis module 42c to determine the attributes of the food estimated to be masticated by the user by the jaw movement for one mouthful (in this embodiment, the size and hardness of the food), which are output from the analysis model M1. , and type) are acquired as the attribute information described above. That is, the analysis unit 42 (analysis module 42c) performs attribute estimation using the analysis model M1. The attribute information of the food output from the analysis model M1 may be called "estimated attribute information", and the attribute of the food estimated to be masticated may be called "estimated attribute". Further, as in the present embodiment, the analysis model M1 may output an estimated value of the amount of masticatory muscle activity for one mouthful along with the attribute of the food. Also, the analysis model M1 may be configured to output information other than the above.

また、解析部42は、解析モデルM1を用いずに得られる情報を、解析結果の一部として取得してもよい。解析モデルM1を用いずに得られる情報は、例えば、一口毎の咬合力、一口毎の姿勢(摂食動作時におけるユーザの頭部の姿勢)等の情報である。解析モデルM1を用いずに情報を得る方法としては、例えば統計的手法等を用いて測定データを分析すること、センサ部21を当該情報を取得するために用いること等がある。 Further, the analysis unit 42 may acquire information obtained without using the analysis model M1 as part of the analysis result. Information obtained without using the analysis model M1 is, for example, information such as bite force for each bite and posture for each bite (posture of the user's head during eating). Methods for obtaining information without using the analysis model M1 include, for example, analyzing measurement data using a statistical method or the like, using the sensor unit 21 to obtain the information, and the like.

例えば、摂食動作時におけるユーザの頭部の姿勢は、3軸加速度データから導出することができる。具体的には、解析部42は、予め以下の手順によって、3軸加速度データからユーザの頭部の姿勢(顔の向き)を推定するための推定式を導出しておく。
1.互いに直交する第1方向、第2方向、及び第3方向の各々を向くように義歯2を静止させる。
2.第1方向を向くように義歯2を静止させたときにセンサ部21の加速度センサにより測定された3軸方向の第1加速度データ、第2方向を向くように義歯2を静止させたときにセンサ部21の加速度センサにより測定された3軸方向の第2加速度データ、及び第3方向を向くように義歯2を静止させたときにセンサ部21の加速度センサにより測定された3軸方向の第3加速度データを取得する。
3.3通りの義歯2の向き(第1方向、第2方向、第3方向)とそれぞれの向きに対応する3軸加速度データ(第1加速度データ、第2加速度データ、第3加速度データ)との関係に基づいて、ユーザの頭部(下顎を含む)が静止した任意の状態に対応する3軸加速度データからユーザの頭部の姿勢を推定するための計算式を導出する。
For example, the pose of the user's head during an eating motion can be derived from the 3-axis acceleration data. Specifically, the analysis unit 42 derives an estimation formula for estimating the orientation of the user's head (orientation of the face) from the triaxial acceleration data in advance according to the following procedure.
1. The denture 2 is rested so as to face each of the first direction, the second direction and the third direction which are orthogonal to each other.
2. First acceleration data in three axial directions measured by the acceleration sensor of the sensor unit 21 when the denture 2 is stationary so as to face the first direction, sensor when the denture 2 is stationary so as to face the second direction 2nd acceleration data in three axial directions measured by the acceleration sensor of the part 21, and third acceleration data in three axial directions measured by the acceleration sensor of the sensor part 21 when the denture 2 is held stationary so as to face the third direction. Get acceleration data.
3. Three directions of the denture 2 (first direction, second direction, third direction) and three-axis acceleration data corresponding to each direction (first acceleration data, second acceleration data, third acceleration data) and Based on the relationship, a calculation formula for estimating the posture of the user's head is derived from the three-axis acceleration data corresponding to an arbitrary state in which the user's head (including the lower jaw) is stationary.

そして、解析部42は、時系列データD1,D2のうちユーザが瞬間的に静止している状態(例えば、上の歯と下の歯とをかみ合わせた咬合時)の3軸加速度データと上記計算式とに基づいて、ユーザの頭部の姿勢を推定(算出)することができる。 Then, the analysis unit 42 extracts the three-axis acceleration data of the time-series data D1 and D2 when the user is momentarily stationary (for example, when the upper teeth and the lower teeth are engaged) and the above calculations. The posture of the user's head can be estimated (calculated) based on the equations.

解析部42は、所定期間(本実施形態では、一食分の食時間)に含まれる全ての咀嚼情報に対して、上述したように、解析モデルM1及び/又は統計的手法等を用いることにより、所定期間に対応する解析結果(すなわち、所定期間に含まれる各咀嚼区間CSに対応する解析結果を集約した情報)を取得することができる。 The analysis unit 42 uses the analysis model M1 and/or the statistical method, etc., as described above, for all mastication information included in a predetermined period (in this embodiment, the eating time for one meal), It is possible to acquire the analysis result corresponding to the predetermined period (that is, the information obtained by collecting the analysis results corresponding to each mastication section CS included in the predetermined period).

[提案モジュール]
次に、生成部44は、提案モジュール44aにより、所定期間に対応する解析結果の一部又は全部を提案モデルM2に入力する。これにより、生成部44は、提案モデルM2から出力される情報を提案情報として取得する。また、生成部44は、提案モデルM2を用いずに、上記所定期間に対応する解析結果を統計的手法等を用いて分析することにより、一食分の量、栄養バランス、咀嚼回数、食事時間、咬合力等の情報を取得し、取得された情報と予め定められた提案生成ルールとに基づいて、提案情報を生成してもよい。例えば、生成部44は、一食分の量について予め好ましい範囲を定めておき、上記解析結果から得られた一食分の量(推定値)が当該範囲外である場合に、一食分の量を当該範囲に収めるように促す提案情報を生成してもよい。例えば、生成部44は、一食分の量(推定値)が当該範囲よりも少ない場合には、予め用意されたテンプレート情報のうちから「もう少し食事量を増やしましょう。」といったテキストデータを抽出し、当該テキストデータを提案情報として生成してもよい。上述した提案生成ルールは、このようなルールを予め規定した情報である。なお、提案情報は、音声データであってもよい。例えば、出力部46としてスピーカーのような音発生器が設けられる場合、提案情報は、音声データとして出力されてもよい。上述した「もう少し食事量を増やしましょう。」といった提案は、食事量に関する改善提案の例であり、「最近柔らかい食べ物に偏っているので、硬い食べ物も食べましょう。」又は「最近硬い食べ物に偏っているので柔らかい食べ物も食べましょう。」といった提案は、食物の質に関する改善提案の例である。この場合の食物の質に関する改善提案は、詳細には食物の硬軟に関する改善提案である。出力される提案情報は、このような食事量に関する改善提案及び食物の質に関する改善提案の少なくとも1つを含むことが好ましい。
[Proposed module]
Next, the generation unit 44 inputs part or all of the analysis results corresponding to the predetermined period to the proposal model M2 by the proposal module 44a. Thereby, the generation unit 44 acquires the information output from the proposed model M2 as the proposed information. In addition, the generation unit 44 analyzes the analysis results corresponding to the predetermined period using a statistical method or the like, without using the proposed model M2, to obtain the amount of one meal, the nutritional balance, the number of times of mastication, the meal time, Information such as bite force may be acquired, and proposal information may be generated based on the acquired information and a predetermined proposal generation rule. For example, the generating unit 44 predetermines a preferable range for the amount for one meal, and if the amount for one meal (estimated value) obtained from the analysis result is outside the range, the amount for one meal is set to the relevant range. Suggestion information may be generated to prompt the user to stay within the range. For example, when the amount (estimated value) for one meal is less than the range, the generation unit 44 extracts text data such as "Let's eat a little more" from template information prepared in advance. , the text data may be generated as the proposal information. The proposal generation rule described above is information that defines such a rule in advance. Note that the proposal information may be audio data. For example, if a sound generator such as a speaker is provided as the output unit 46, the suggested information may be output as audio data. The above suggestions such as "Let's eat a little more." Suggestions such as “Because you are biased, eat soft foods as well” are examples of suggestions for improving food quality. In this case, the suggestions for improving food quality are, in particular, suggestions for improving hardness of food. The output suggestion information preferably includes at least one of such improvement suggestions for meal amount and food quality improvement suggestions.

また、生成部44により生成される提案情報は、上述した内容の情報に加えて、解析結果に対する統計的処理等によって把握された情報、過去のユーザの食事(解析結果から把握された情報)の履歴等、ユーザにとって有用と考えられる種々の情報を含んでもよい。下表に、生成部44により生成される提案情報(表示項目)の一例を示す。

Figure 0007286093000001
Further, the proposal information generated by the generating unit 44 includes, in addition to the above-described information, information grasped by statistical processing of the analysis results, past meals of the user (information grasped from the analysis results). Various information that may be useful to the user, such as history, may be included. An example of the proposal information (display items) generated by the generation unit 44 is shown in the table below.
Figure 0007286093000001

[摂食関連提案システムの処理フロー]
図10は、摂食関連提案システム1の処理フローの一例を示す図である。図10に示されるように、まず、義歯2がユーザによって装着される(ステップS1)。そして、ユーザが、義歯2を装着したまま日常生活を実施する(ステップS2)。日常生活には、ユーザが食べ物を摂取する食事期間が含まれる。これにより、義歯2のセンサ20において、食事期間におけるユーザの顎運動情報(本実施形態では、センサ部21により取得される3軸加速度データ及び/又は3軸角速度データ)が測定データとして取得及び保存される。ユーザは、例えば就寝前等のタイミングで、義歯2をユーザの下顎から取り外して、ベース装置3の保管スペース34に入れる(ステップS3)。
[Processing Flow of Eating Related Proposal System]
FIG. 10 is a diagram showing an example of the processing flow of the eating-related proposal system 1. As shown in FIG. As shown in FIG. 10, the user first wears the denture 2 (step S1). Then, the user carries out daily life while wearing the denture 2 (step S2). Daily life includes eating periods during which the user consumes food. As a result, the sensor 20 of the denture 2 acquires and stores the user's jaw movement information (in this embodiment, triaxial acceleration data and/or triaxial angular velocity data acquired by the sensor unit 21) during the meal period as measurement data. be done. The user removes the denture 2 from the user's lower jaw and puts it in the storage space 34 of the base device 3 at a timing such as before going to bed (step S3).

続いて、ベース装置3は、通信部32により義歯2のセンサ20から測定データを取得する。また、ベース装置3は、無線充電用アンテナ31によりセンサ20を充電すると共に、洗浄部33により義歯2を洗浄する(ステップS4)。ユーザは、ステップS4の処理が完了した後(例えば、起床後等のタイミング)に、義歯2をベース装置3から取り出し(ステップS5)、再度義歯2を装着する(ステップS1)。一方、ベース装置3は、ステップS4において保管スペース34に義歯2がセットされた状態で取得した測定データを、ユーザ端末4に送信する(ステップS6)。 Subsequently, the base device 3 acquires measurement data from the sensor 20 of the denture 2 through the communication unit 32 . The base device 3 also charges the sensor 20 with the wireless charging antenna 31 and cleans the denture 2 with the cleaning unit 33 (step S4). After the processing of step S4 is completed (for example, after waking up), the user takes out the denture 2 from the base device 3 (step S5), and puts on the denture 2 again (step S1). On the other hand, the base device 3 transmits the measurement data acquired with the denture 2 set in the storage space 34 in step S4 to the user terminal 4 (step S6).

続いて、ユーザ端末4において、取得部41が、ベース装置3から測定データを取得する(ステップS7)。続いて、解析部42が、測定データを解析する(ステップS8)。具体的には、図5に示されるように、解析部42は、咀嚼区間特定モジュール42aにより一口毎の咀嚼区間CS(図6参照)を特定し、フィルタリング・演算モジュール42bにより咀嚼区間CS毎にノイズ除去等を行う。これにより、一口毎の咀嚼情報(本実施形態では一例として、時系列データD1,D2)が得られる。そして、解析部42は、解析モジュール42cにより、一口毎の咀嚼情報から一口毎の解析結果を取得する。解析結果は、解析モデルM1を用いて得られる情報を含んでいるが、解析モデルM1を用いずに得られる情報を更に含んでもよい。本実施形態では、解析モデルM1を用いて得られる情報は、一口毎のユーザが咀嚼したと推定される食べ物の属性と一口毎の咀嚼筋活動量の推定値とを含む。解析モデルM1を用いずに得られる情報は、一口毎の咀嚼情報に対する統計的手法等により得られる情報であり、例えば、一口毎の咀嚼回数、一口毎の咬合力、一口毎の姿勢(摂食時の頭部の姿勢)等の情報である。 Subsequently, in the user terminal 4, the acquisition unit 41 acquires the measurement data from the base device 3 (step S7). Subsequently, the analysis unit 42 analyzes the measurement data (step S8). Specifically, as shown in FIG. 5, the analysis unit 42 uses the mastication segment identification module 42a to identify the mastication segment CS (see FIG. 6) for each mouthful, and the filtering/calculation module 42b identifies each mastication segment CS. Remove noise, etc. As a result, mastication information for each mouthful (time-series data D1 and D2 as an example in this embodiment) is obtained. Then, the analysis module 42c of the analysis unit 42 acquires an analysis result for each mouthful from the mastication information for each mouthful. The analysis result includes information obtained using the analysis model M1, but may further include information obtained without using the analysis model M1. In this embodiment, the information obtained using the analysis model M1 includes the attribute of the food estimated to be chewed by the user for each bite and the estimated value of the masticatory muscle activity for each bite. Information obtained without using the analysis model M1 is information obtained by a statistical method or the like for mastication information for each bite. posture of the head at the time) and the like.

続いて、生成部44が、解析部42による解析結果に基づいて、上述したような提案情報を生成する(ステップS9)。続いて、出力部46が、生成部44により生成された提案情報を出力する(ステップS10)。本実施形態では、出力部46は、表示用データを表示部47に出力する。表示部47は、出力部46から取得した表示用データ(提案情報)を表示する(ステップS11)。これにより、提案情報がユーザに提示される。提案情報は、義歯2を装着するユーザのみに提示されてもよいし、義歯2を装着するユーザに関係する者、例えば義歯2を装着するユーザの家族、主治医、担当医師等にも提示されてよい。或いは、提案情報は、義歯2を装着するユーザに関係する者のみに提示されてもよい。 Subsequently, the generation unit 44 generates proposal information as described above based on the analysis result by the analysis unit 42 (step S9). Subsequently, the output unit 46 outputs the proposal information generated by the generation unit 44 (step S10). In this embodiment, the output unit 46 outputs display data to the display unit 47 . The display unit 47 displays the display data (proposed information) acquired from the output unit 46 (step S11). Thereby, the proposal information is presented to the user. The proposal information may be presented only to the user who wears the denture 2, or may be presented to people related to the user who wears the denture 2, such as the family of the user who wears the denture 2, the attending physician, and the attending physician. good. Alternatively, the suggested information may be presented only to those associated with the user wearing the denture 2 .

[作用効果]
ユーザ端末4(摂食関連提案装置)は、取得部41と、解析部42と、生成部44と、出力部46と、を備える。また、摂食関連提案システム1は、義歯2と、センサ20により取得された測定データを解析する摂食関連提案装置としてのユーザ端末4と、を備える。このような摂食関連提案システム1及びユーザ端末4では、ユーザの摂食時の顎運動の解析結果から、ユーザに対する摂食に関連する提案情報が生成及び出力される。これにより、解析結果に基づく摂食関連提案をユーザ等に適切に提示することが可能となる。従って、摂食関連提案システム1及びユーザ端末4によれば、ユーザに有益な情報を適切に提供することができる。
[Effect]
The user terminal 4 (eating-related proposal device) includes an acquisition unit 41 , an analysis unit 42 , a generation unit 44 , and an output unit 46 . The eating-related proposal system 1 also includes a false tooth 2 and a user terminal 4 as an eating-related proposal device that analyzes measurement data acquired by the sensor 20 . The eating-related proposal system 1 and the user terminal 4 generate and output proposal information related to eating for the user from the analysis result of the jaw movement during eating of the user. As a result, it is possible to appropriately present a user or the like with an eating-related proposal based on the analysis result. Therefore, according to the eating-related proposal system 1 and the user terminal 4, useful information can be appropriately provided to the user.

また、本実施形態では、測定データの解析、提案情報の生成、及び提案情報の表示がローカル(すなわち、ユーザ端末4上)で行われるため、ユーザに対してリアルタイムでのフィードバック(提案情報の提示)が可能となる。また、例えば測定データを解析するためのサーバ(例えばクラウドサービスを提供するデータセンター等に設置された装置)に測定データを送信したり、当該サーバに解析処理を実行させたりする必要がない。このため、通信負荷及び上記サーバの処理負荷等を抑えることができる。 In addition, in the present embodiment, since measurement data analysis, proposal information generation, and proposal information display are performed locally (that is, on the user terminal 4), real-time feedback (presentation of proposal information) is provided to the user. ) becomes possible. In addition, for example, there is no need to transmit the measurement data to a server for analyzing the measurement data (for example, a device installed in a data center that provides a cloud service) or cause the server to perform analysis processing. Therefore, the communication load, the processing load of the server, and the like can be suppressed.

また、測定データ(顎運動情報)は、ユーザの下顎に装着される義歯2に設けられたセンサ20によって検出された3軸方向の加速度及び3軸方向の角速度の少なくとも一方の時間変化を示す情報を含んでいる。本実施形態では、測定データは、3軸方向の加速度の時間変化を示す情報(3軸加速度データ)である。この構成によれば、ユーザが摂食時を含む日常生活時に装着する義歯2に設けられたセンサ20を利用することにより、ユーザに過度の負担をかけることなく、センサ20により検出された加速度及び/又は角速度の時間変化を示す情報を測定データとして適切に取得することができる。例えば、従来、咀嚼筋活動量の測定は、ユーザの腔内ではなく外側の皮膚に電極を取り付けて測定されているが、本実施形態では、義歯2に設けられたセンサ20を利用することにより、このような電極の取り付けを不要にすることができる。 Also, the measurement data (jaw movement information) is information indicating changes over time in at least one of three-axis direction acceleration and three-axis direction angular velocities detected by the sensor 20 provided on the denture 2 attached to the user's lower jaw. contains. In the present embodiment, the measurement data is information (three-axis acceleration data) indicating temporal changes in acceleration in three-axis directions. According to this configuration, by using the sensor 20 provided in the denture 2 worn by the user during daily life including eating, the acceleration and / Or the information which shows the time change of angular velocity can be acquired appropriately as measurement data. For example, conventionally, the amount of masticatory muscle activity is measured by attaching electrodes to the user's outer skin instead of inside the cavity, but in this embodiment, by using the sensor 20 provided on the denture 2 , the attachment of such electrodes can be dispensed with.

また、測定データは、ユーザの摂食時の顎運動の時系列情報であり、解析部42による解析結果は、摂食時にユーザが咀嚼したと推定される食べ物の属性を示す属性情報を含んでいる。本実施形態では、食べ物の属性は、食べ物の大きさ、硬さ、及び種類である。これにより、ユーザが摂取したと推定される食べ物の属性に応じた提案情報をユーザに提示することが可能となる。 Also, the measurement data is time-series information of jaw movement during eating by the user, and the analysis result by the analysis unit 42 includes attribute information indicating the attribute of the food estimated to be masticated by the user during eating. there is In this embodiment, the attributes of food are size, hardness, and type of food. This makes it possible to present the user with suggested information according to the attributes of the food that the user is presumed to have ingested.

また、解析部42は、測定データから、一口分の顎運動を示す時系列情報である咀嚼情報(本実施形態では時系列データD1,D2)を抽出する。そして、解析部42は、機械学習により生成された解析モデルM1に咀嚼情報を入力し、解析モデルM1から出力される、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性を、属性情報として取得する。解析モデルM1は、ユーザについて取得された過去の一口分の顎運動を示す時系列情報である咀嚼情報(第1情報)と当該過去の一口分の顎運動によりユーザが咀嚼した食べ物の属性を示す情報(第2情報)とを含む教師データを用いて機械学習された学習済みモデルである。上記構成により、ユーザに特有の摂食時における顎運動の特徴を学習した解析モデルM1を用いて、簡易かつ精度良く解析結果(ユーザが咀嚼したと推定される食べ物の属性)を取得することができる。なお、本実施形態では一例として、解析モデルM1は、上記食べ物の属性に加えて、一口分の咀嚼筋活動量の推定値も出力するように構成されている。すなわち、解析モデルM1は、上記過去の一口分の咀嚼筋活動量を更に含む教師データを用いて機械学習された学習済みモデルである。つまり、解析モデルM1の出力対象及び解析部42の取得対象は、食べ物の属性情報のみでもよいが、食べ物の属性情報と上述の一口分の咀嚼筋活動量の推定値とを更に含んでもよい。解析部42が一口分の咀嚼筋活動量の推定値も取得する場合、教師データは第2情報として一口分の咀嚼筋活動量も含むように構成される。 The analysis unit 42 also extracts mastication information (time-series data D1 and D2 in this embodiment), which is time-series information indicating jaw movements for one mouthful, from the measurement data. Then, the analysis unit 42 inputs the mastication information into the analysis model M1 generated by machine learning, and the attribute of the food that is estimated to be chewed by the user by jaw movement for one mouthful, which is output from the analysis model M1, is Acquired as attribute information. The analysis model M1 shows mastication information (first information), which is chronological information indicating a past mouthful of jaw movement acquired for the user, and attributes of food chewed by the user through the past mouthful of jaw movement. It is a trained model machine-learned using teacher data including information (second information). With the above configuration, it is possible to easily and accurately acquire analysis results (attributes of food presumed to be masticated by the user) using the analysis model M1 that has learned the features of jaw movement during eating unique to the user. can. In this embodiment, as an example, the analysis model M1 is configured to output an estimated value of the amount of masticatory muscle activity for one mouthful in addition to the attributes of the food. That is, the analysis model M1 is a learned model that has been machine-learned using teacher data that further includes the amount of masticatory muscle activity for the past mouthful. In other words, the output target of the analysis model M1 and the acquisition target of the analysis unit 42 may be only the attribute information of the food, but may further include the attribute information of the food and the estimated value of the masticatory muscle activity amount for one mouthful. When the analysis unit 42 also acquires the estimated value of the masticatory muscle activity amount for one mouthful, the teacher data is configured to include the masticatory muscle activity amount for one mouthful as the second information.

また、上述したように、解析モデルM1は、上記第1情報のうち1回目の噛み動作に対応する顎運動を示す時系列情報である第1咀嚼情報(本実施形態では、図8における区間B1におけるデータ)と、上記第1情報のうち2回目の噛み動作に対応する顎運動を示す時系列情報である第2咀嚼情報(本実施形態では、図8における区間B2におけるデータ)と、上記第2情報とを含む教師データを用いて機械学習された学習済みモデルであってもよい。解析部42は、咀嚼情報から第1咀嚼情報に対応する情報と第2咀嚼情報に対応する情報とを抽出し、抽出された情報を解析モデルM1に入力することにより、一口分の顎運動によりユーザが咀嚼したと推定される食べ物の属性を取得してもよい。特に1回目の噛み動作及び2回目の噛み動作に対応する顎運動には、咀嚼された食べ物の属性に応じた特徴が現れやすい。従って、上記構成によれば、1回目の噛み動作及び2回目の噛み動作に対応する顎運動を特徴量として用いて機械学習された解析モデルM1を用いることにより、ユーザが咀嚼したと推定される食べ物の属性をより精度良く取得することができる。 Further, as described above, the analysis model M1 is the first mastication information (in this embodiment, the first mastication information (interval B1 in FIG. 8 data in section B2 in FIG. 8); It may be a learned model that has been machine-learned using teacher data containing two pieces of information. The analysis unit 42 extracts the information corresponding to the first mastication information and the information corresponding to the second mastication information from the mastication information, and inputs the extracted information to the analysis model M1. Attributes of food presumed to be chewed by the user may be obtained. In particular, the jaw movements corresponding to the first chewing motion and the second chewing motion are likely to exhibit characteristics according to the attributes of the masticated food. Therefore, according to the above configuration, it is estimated that the user masticates by using the analysis model M1 machine-learned using the jaw movements corresponding to the first chewing motion and the second chewing motion as feature amounts. Food attributes can be acquired more accurately.

また、ユーザ端末4は、出力部46により出力された提案情報を表示する表示部47を備えている。表示部47に提案情報(例えば、上記表1に示した表示項目に対応する情報の一部又は全部)を表示させることにより、解析結果に応じた提案内容を適切にユーザに提示することができる。 The user terminal 4 also includes a display section 47 that displays the proposal information output by the output section 46 . By displaying the proposal information (for example, part or all of the information corresponding to the display items shown in Table 1 above) on the display unit 47, it is possible to appropriately present the user with the proposal content according to the analysis result. .

また、摂食関連提案システム1は、ユーザの下顎から取り外された義歯2を保管するベース装置3を備える。そして、ベース装置3は、センサ20と通信することによりセンサ20から測定データを取得すると共に、ユーザ端末4と通信することによりユーザ端末4に当該測定データを送信する通信部32を有する。上記構成によれば、ユーザは義歯2をベース装置3にセットするだけで、測定データがベース装置3からユーザ端末4へと自動的に送信される。これにより、義歯2に設けられたセンサ20からの測定データの取得(吸い上げ)に関して、ユーザの利便性を高めることができる。 The eating-related suggestion system 1 also includes a base device 3 that stores the denture 2 removed from the user's lower jaw. The base device 3 has a communication unit 32 that acquires measurement data from the sensor 20 by communicating with the sensor 20 and that transmits the measurement data to the user terminal 4 by communicating with the user terminal 4 . According to the above configuration, the user simply sets the denture 2 on the base device 3 , and the measurement data is automatically transmitted from the base device 3 to the user terminal 4 . Thereby, the user's convenience can be improved regarding acquisition (sucking) of measurement data from the sensor 20 provided in the denture 2 .

また、ベース装置3は、センサ20を充電する無線充電用アンテナ31を更に有する。上記構成によれば、通信部32による通信と共に無線充電用アンテナ31による充電を実施することができる。これにより、通信部32による通信動作中に消費されるセンサの電力を適切に補うことができる。 The base device 3 also has a wireless charging antenna 31 for charging the sensor 20 . According to the above configuration, it is possible to perform communication by the communication unit 32 and charging by the wireless charging antenna 31 . As a result, the power consumed by the sensor during the communication operation of the communication unit 32 can be compensated appropriately.

また、ベース装置3は、義歯2を洗浄する洗浄部33を更に有する。上記構成によれば、ユーザは義歯2をベース装置3にセットするだけで、ユーザ端末4への測定データの送信と義歯2の洗浄とを合わせて行うことができる。これにより、ユーザの利便性を高めることができる。 Moreover, the base device 3 further has a cleaning section 33 for cleaning the denture 2 . According to the above configuration, the user can transmit the measurement data to the user terminal 4 and clean the denture 2 only by setting the denture 2 on the base device 3 . Thereby, user convenience can be improved.

[変形例]
以上、本開示の一実施形態について説明したが、本開示は、上述した実施形態に限定されるものではない。
[Modification]
An embodiment of the present disclosure has been described above, but the present disclosure is not limited to the above-described embodiment.

例えば、上記実施形態では、義歯2を装着するユーザの端末(ユーザ端末4)が摂食関連提案装置として構成されたが、摂食関連提案装置は、ユーザ端末4とは異なる端末上に構成されてもよい。例えば、上述した摂食関連提案装置(ユーザ端末4)は、ユーザの主治医の端末(例えば病院内の端末等)であってもよい。この場合、ベース装置3は、病院内に設けられてもよい。この場合、ユーザが定期的に病院を受診する際に、義歯2をベース装置3にセットすることにより、主治医の端末に測定データを吸い上げることができる。また、診察時において、主治医は、端末上で測定データの解析結果と解析結果に応じた提案情報とを参照しながら、ユーザに摂食に関するアドバイス等を行うことができる。なお、ユーザ端末4とは異なる端末からの提示対象は、主治医のほか、ユーザの家族、担当医師等も考えられる。 For example, in the above embodiment, the terminal of the user wearing the denture 2 (the user terminal 4) is configured as the eating-related suggestion device, but the eating-related suggestion device is configured on a terminal different from the user terminal 4. may For example, the eating-related proposal device (user terminal 4) described above may be a terminal of the user's attending physician (for example, a terminal in a hospital, etc.). In this case, the base device 3 may be provided within the hospital. In this case, when the user regularly visits a hospital, by setting the denture 2 on the base device 3, the measurement data can be downloaded to the terminal of the attending physician. Also, at the time of medical examination, the attending physician can give advice on eating to the user while referring to the analysis result of the measurement data and the proposal information corresponding to the analysis result on the terminal. Note that the presentation target from a terminal different from the user terminal 4 may be the family of the user, the doctor in charge, etc., in addition to the attending physician.

また、図11に示される変形例に係る摂食関連提案システム1Aのように、上述した摂食関連提案装置(ユーザ端末4)の機能はサーバ上に構成されてもよい。摂食関連提案システム1Aは、ユーザ端末4及びサーバ5の代わりにユーザ端末4A及びサーバ5Aを備える点で、摂食関連提案システム1と相違している。具体的には、摂食関連提案システム1Aでは、ユーザ端末4が備えていた機能の一部(取得部41、解析部42、解析モデル記憶部43、生成部44、及び提案モデル記憶部45)をサーバ5Aが備えている。サーバ5Aは、出力部46Aを備えている。ユーザ端末4Aは、表示部47と同様の表示部47Aを備えている。 Moreover, like the eating-related proposal system 1A according to the modification shown in FIG. 11, the function of the above-described eating-related proposal device (user terminal 4) may be configured on a server. The eating-related proposal system 1A is different from the eating-related proposal system 1 in that it includes a user terminal 4A and a server 5A instead of the user terminal 4 and the server 5 . Specifically, in the eating-related proposal system 1A, some functions of the user terminal 4 (acquisition unit 41, analysis unit 42, analysis model storage unit 43, generation unit 44, and proposal model storage unit 45) is provided by the server 5A. The server 5A has an output unit 46A. The user terminal 4A has a display section 47A similar to the display section 47. FIG.

ユーザ端末4Aは、ベース装置3から測定データを取得すると、当該測定データに対する解析処理を自装置では実施することなく、当該測定データをサーバ5Aに送信するように構成されている。サーバ5Aは、上述したユーザ端末4と同様に、測定データの解析と、解析結果に基づく提案情報の生成と、を実行するように構成されている。 The user terminal 4A is configured to, when acquiring measurement data from the base device 3, transmit the measurement data to the server 5A without executing analysis processing on the measurement data by itself. The server 5A, like the user terminal 4 described above, is configured to analyze measurement data and generate proposal information based on the analysis results.

出力部46Aは、義歯2を装着するユーザが所有するユーザ端末4Aに提案情報を通知してもよい。これにより、ユーザ端末4Aの表示部47Aに、出力部46Aから通知された提案情報が表示される。上記構成によれば、本変形例のように摂食関連提案装置が例えばクラウド上のサーバ5Aとして構成される場合において、提案情報を適切にユーザに提示することができる。 The output unit 46A may notify the user terminal 4A owned by the user wearing the denture 2 of the proposal information. As a result, the proposal information notified from the output unit 46A is displayed on the display unit 47A of the user terminal 4A. According to the above configuration, when the eating-related proposal device is configured as, for example, the server 5A on the cloud as in this modified example, the proposal information can be appropriately presented to the user.

また、出力部46Aは、義歯2を装着するユーザとは異なる他ユーザが所有する端末であって予め通知先として設定された端末にも提案情報を通知してもよい。例えば、サーバ5Aは、ユーザ毎に、当該ユーザに関連付けられる他ユーザの連絡先(例えばメールアドレス等)を予め登録及び保存しておけばよい。本変形例では、端末4B及び端末4Cが通知先として設定されている。端末4Bは、ユーザの家族又は近親者である他ユーザが所有する端末である。端末4Cは、ユーザの主治医である他ユーザが所有する端末である。これにより、端末4Bの表示部47B及び端末4Cの表示部47Cの各々に、出力部46Aから通知された提案情報が表示される。上記構成によれば、他ユーザがユーザの摂食状況を把握することができる。これにより、ユーザの家族・近親者、主治医等によるユーザの摂食状況の見守りを実現することができる。 In addition, the output unit 46A may also notify a terminal, which is owned by another user who is different from the user who wears the denture 2 and is set in advance as a notification destination, of the proposal information. For example, the server 5A may preliminarily register and store contact information (e.g., e-mail address, etc.) of other users associated with the user for each user. In this modification, terminals 4B and 4C are set as notification destinations. The terminal 4B is owned by another user who is a family member or close relative of the user. The terminal 4C is a terminal owned by another user who is the user's attending physician. As a result, the proposal information notified from the output unit 46A is displayed on each of the display unit 47B of the terminal 4B and the display unit 47C of the terminal 4C. According to the above configuration, other users can grasp the eating status of the user. This makes it possible for the user's family/close relatives, attending physician, or the like to monitor the user's eating condition.

なお、ユーザが義歯2を長期間付けたままにしてしまうことも考えられる。この場合、サーバ5Aによる測定データの解析及び提案情報の生成が実行されず、ユーザの家族・近親者、主治医等への提案情報の通知が行われないため、上記の見守りが適切に実現されない。そこで、例えばサーバ5A(例えば出力部46A)は、あるユーザについての提案情報が生成されない状態が予め定められた期間以上継続した場合に、当該ユーザに対して予め関連付けられた他ユーザの端末4B,4Cにその旨を通知してもよい。また、このような通知は、ベース装置3又はユーザ端末4Aによって行われてもよい。例えば、ベース装置3は、義歯2がベース装置3の保管スペース34に前回セットされて通信、充電、及び洗浄等が実施されてから、義歯2がベース装置3の保管スペース34にセットされない状態が予め定められた期間以上経過した場合に、他ユーザの端末4B,4Cにその旨を通知してもよい。同様に、ユーザ端末4Aは、ベース装置3から測定データを取得できない状態が予め定められた期間以上継続した場合に、他ユーザの端末4B,4Cにその旨を通知してもよい。また、ユーザ端末4Aは、ユーザに対して義歯2をベース装置3にセットすることを促すための通知情報を、表示部47Aに表示してもよい。 It is also conceivable that the user may leave the denture 2 on for a long period of time. In this case, the analysis of the measurement data and the generation of the proposal information by the server 5A are not executed, and the notification of the proposal information to the user's family/close relatives, attending physician, etc. is not performed. Therefore, for example, the server 5A (for example, the output unit 46A), when a state in which no proposal information is generated for a certain user continues for a predetermined period or longer, the other user's terminal 4B, which is associated with the user in advance, 4C may be notified accordingly. Such notification may also be made by the base device 3 or the user terminal 4A. For example, the base device 3 may be in a state where the denture 2 is not set in the storage space 34 of the base device 3 after the denture 2 has been previously set in the storage space 34 of the base device 3 and communication, charging, cleaning, etc. have been performed. When a predetermined period of time or more has elapsed, the terminals 4B and 4C of the other users may be notified to that effect. Similarly, when the user terminal 4A cannot acquire measurement data from the base device 3 for a predetermined period or longer, the user terminal 4A may notify the terminals 4B and 4C of other users to that effect. Further, the user terminal 4A may display notification information for prompting the user to set the denture 2 on the base device 3 on the display unit 47A.

また、上記実施形態では、解析モデルM1はユーザ毎に用意された。すなわち、解析モデルM1は、解析対象となるユーザが過去に行った摂食動作から得られた教師データのみを基づいて生成された。しかし、解析モデルM1は、不特定のユーザ(義歯2と同様にセンサが設けられた義歯を装着したユーザ)について取得された過去の一口分の顎運動を示す咀嚼情報(第1情報)と過去の一口分の顎運動により当該不特定のユーザが咀嚼した食べ物の属性(第2情報)とを含む教師データを用いて機械学習された学習済みモデルであってもよい。つまり、解析モデルM1の学習のために用いられる教師データは、不特定の複数のユーザが過去に行った摂食動作から得られたものであってもよい。不特定の複数のユーザが過去に行った摂食動作から教師データを得た場合、あるユーザが解析対象になったときに、第1情報中、最も当該ユーザにあてはまる第2情報に対応した解析結果を出力するように学習されてもよい。この場合、解析モデルM1を複数のユーザ間で共通化できる。これにより、解析モデルM1をユーザ毎に作成及び管理する必要がなくなるという利点がある。また、上記実施形態のように解析モデルM1をユーザ毎に用意する場合と比較して、解析モデルM1のための教師データを収集し易いという利点もある。 Further, in the above embodiment, the analysis model M1 is prepared for each user. That is, the analysis model M1 is generated based only on teacher data obtained from past eating actions of the user to be analyzed. However, the analysis model M1 is based on mastication information (first information) indicating past jaw movements acquired for an unspecified user (a user wearing a denture provided with a sensor similar to the denture 2) and past It may be a learned model machine-learned using teacher data including the attribute (second information) of the food chewed by the unspecified user by the jaw movement of one mouthful. In other words, the teacher data used for learning the analysis model M1 may be obtained from the eating actions performed by a plurality of unspecified users in the past. When teacher data is obtained from past eating actions performed by a plurality of unspecified users, when a certain user becomes an analysis target, analysis corresponding to the second information that most applies to the user among the first information. It may be trained to output results. In this case, the analysis model M1 can be shared among a plurality of users. This has the advantage of eliminating the need to create and manage the analysis model M1 for each user. In addition, compared to the case where the analysis model M1 is prepared for each user as in the above embodiment, there is also the advantage that it is easier to collect teacher data for the analysis model M1.

更に、図12に示されるように、解析モデルM1は、不特定のユーザの属性を示すユーザプロファイルを更に含む教師データを用いて機械学習された学習済みモデルであってもよい。この場合、解析部42は、解析モデルM1に対してユーザ(解析対象となるユーザ)の属性を示すユーザプロファイル(プロファイル情報)を更に入力するように構成される。ここで、ユーザの属性は、例えば、性別、年齢(又は年代)、健康状態等である。ユーザの摂食時の顎運動は、このようなユーザの属性によって異なると考えられる。従って、上記構成によれば、ユーザの属性を特徴量に含めることにより、ユーザが咀嚼したと推定される食べ物の属性をより精度良く取得することができる。 Furthermore, as shown in FIG. 12, the analytical model M1 may be a learned model that has been machine-learned using teacher data that further includes a user profile that indicates unspecified user attributes. In this case, the analysis unit 42 is configured to further input a user profile (profile information) indicating the attributes of the user (the user to be analyzed) to the analysis model M1. Here, the attributes of the user are, for example, sex, age (or generation), health condition, and the like. It is conceivable that the user's jaw movement during eating differs depending on such attributes of the user. Therefore, according to the above configuration, by including the attribute of the user in the feature amount, it is possible to obtain the attribute of the food that the user is estimated to have chewed with higher accuracy.

また、解析結果は、摂食時においてユーザの口を開く大きさを示す開口量を含んでもよい。このような開口量は、例えば上述した咀嚼情報(図9の時系列データD3)の波形から把握することができる。そして、生成部44は、開口量に基づいて、顎関節症の診断要否に関する情報を含む提案情報を生成してもよい。例えば、生成部44は、所定期間(例えば、一日分)に対応する解析結果から、当該所定期間におけるユーザの開口量の最大値(或いは平均値等)を取得し、当該最大値と予め定められた閾値とを比較する。そして、生成部44は、当該最大値が閾値よりも小さい場合に、顎関節症の疑いがあると判断し、顎関節症の診断を促す提案情報を生成してもよい。このような構成によれば、ユーザが摂食時に口を開く大きさに基づいて、顎関節症の疑いがあるユーザ等に対して早期の診断を促す提案を行うことができる。 The analysis result may also include an opening amount indicating the size of the user's mouth that is opened during eating. Such an opening amount can be grasped, for example, from the waveform of the mastication information (time-series data D3 in FIG. 9) described above. Then, the generation unit 44 may generate proposal information including information regarding the necessity of temporomandibular disorder diagnosis based on the amount of the mouth opening. For example, the generation unit 44 obtains the maximum value (or average value, etc.) of the user's mouth opening amount in the predetermined period from the analysis result corresponding to the predetermined period (for example, one day), and determines the maximum value in advance. and the specified threshold. Then, when the maximum value is smaller than the threshold, the generation unit 44 may determine that temporomandibular disorder is suspected and generate proposal information prompting diagnosis of temporomandibular disorder. According to such a configuration, it is possible to make a proposal to prompt early diagnosis for a user who is suspected of having temporomandibular disorder based on the size of the user's mouth opening during eating.

また、生成部44は、予めユーザの普段の食事量に関する情報を保持しておき、所定期間に対応する解析結果(主に一口毎に推定される食べ物の大きさ)から当該所定期間におけるユーザの総食事量を算出し、当該総食事量と上記普段の食事量とを比較し、比較結果に応じた提案情報を生成してもよい。例えば、生成部44は、上記総食事量が上記普段の食事量よりも予め定められた閾値以上少ないときには、食事量を上げるように促す提案情報を生成するか、胃又は腸の疾患の疑いがあると判断して、胃又は腸の調子を確認するように促す提案情報を生成してもよい。或いは、生成部44は、上記総食事量が上記普段の食事量よりも予め定められた閾値以上多いときには、食べ過ぎと判断して、食事量を抑えるように促す提案情報を生成してもよい。 In addition, the generating unit 44 holds information about the user's usual meal amount in advance, and based on the analysis result (mainly the size of food estimated for each bite) corresponding to the predetermined period, A total meal amount may be calculated, the total meal amount may be compared with the usual meal amount, and proposal information may be generated according to the comparison result. For example, when the total amount of meals is less than the usual amount of meals by a predetermined threshold or more, the generating unit 44 generates suggestion information to prompt an increase in the amount of meals, or generates information suggesting that a stomach or intestinal disease is suspected. It may be determined that there is, and suggestion information may be generated prompting to check the condition of the stomach or intestines. Alternatively, when the total meal amount is greater than the usual meal amount by a predetermined threshold or more, the generating unit 44 may determine that the person is overeating, and may generate suggestion information to encourage the user to reduce the meal amount. .

また、例えばユーザが総義歯を装着する場合等には、上顎に装着される義歯にも、上述した下顎に装着される義歯2のセンサ20と同様のセンサが設けられてもよい。そして、取得部41により取得される測定データは、センサ20によって検出される測定データ(以下「下顎測定データ」)と共に、ユーザの上顎に装着される義歯に設けられたセンサによって検出される、3軸方向の加速度及び3軸方向の角速度の少なくとも一方の時間変化を示す情報(以下「上顎測定データ」)を含んでもよい。例えば、ユーザが車、電車等の乗り物に乗車している際に、当該乗り物からの振動成分がセンサ20により検出されてしまい、ユーザの摂食時の顎運動であると誤検出されるおそれがある。また、ユーザが乗り物に乗車している際に食事を行った場合には、ユーザの摂食時の顎運動に乗り物からの振動成分がノイズとして混入してしまうことになる。一方、上記構成によれば、解析部42は、ユーザの下顎に装着される義歯2に設けられたセンサ20の検出結果だけでなく、ユーザの上顎に装着される義歯に設けられたセンサの検出結果を利用して解析を行うことができる。これにより、例えば、解析部42は、上顎のセンサの検出結果(すなわち、上顎測定データ)に対する下顎のセンサの検出結果(すなわち、下顎測定データ)の相対値を得ることにより、乗り物からの振動成分(すなわち、上顎のセンサ及び下顎のセンサの両方に共通して含まれる成分)をキャンセルすることができる。その結果、上述した問題を解消することができる。 Further, for example, when the user wears full dentures, the dentures worn on the upper jaw may also be provided with sensors similar to the sensor 20 of the dentures 2 worn on the lower jaw. Then, the measurement data acquired by the acquisition unit 41 is detected by a sensor provided on the denture attached to the user's upper jaw together with the measurement data detected by the sensor 20 (hereinafter referred to as "lower jaw measurement data"). It may also include information indicating temporal changes in at least one of axial acceleration and angular velocity in three axial directions (hereinafter, “upper jaw measurement data”). For example, when the user is riding in a vehicle such as a car or train, the vibration component from the vehicle may be detected by the sensor 20, and may be erroneously detected as the user's jaw movement during eating. be. Moreover, when the user eats while riding in a vehicle, the vibration component from the vehicle will be mixed as noise in the jaw movement of the user during eating. On the other hand, according to the above configuration, the analysis unit 42 detects not only the detection result of the sensor 20 provided on the denture 2 attached to the user's lower jaw, but also the sensor provided on the denture attached to the user's upper jaw. Analysis can be performed using the results. Thereby, for example, the analysis unit 42 obtains the relative value of the detection result of the lower jaw sensor (that is, the lower jaw measurement data) with respect to the detection result of the upper jaw sensor (that is, the upper jaw measurement data), thereby obtaining the vibration component from the vehicle. (that is, components that are common to both the maxillary sensor and the mandibular sensor) can be cancelled. As a result, the problems described above can be resolved.

また、図13に示される変形例に係る摂食関連提案システム1Bのように、摂食関連提案システム1Bは、図1に示されるユーザ端末4にサーバ5の機能を付加したユーザ用デバイス4Dを摂食関連提案装置として備えることにより、サーバを省略してもよい。ユーザ用デバイス4Dは、例えばユーザの自宅等に独立して設けられてもよい。或いは、ユーザ用デバイス4Dは、図11に示される端末4Bと同様の端末4E、図11に示される端末4Cと同様の端末4F等に対して、電話線及びインターネット回線等の任意の通信ネットワークを経由して情報(例えば、出力部46により出力される情報)を通知可能とされてもよい。ユーザ用デバイス4D、端末4E、及び端末4Fが備える各機能は、上述したユーザ端末4、サーバ5、端末4B、及び端末4Cが備える各機能と同様であるため、詳細な説明を省略する。ユーザ用デバイス4Dが端末4E及び端末4Fと接続される場合、提案情報及び警告等をユーザの関係者(例えば、家族、主治医等)に適切に通知することが可能となる。特に、ユーザの関係者がユーザと別居している場合において、ユーザに生じた不具合の早期発見及び早期対応が可能となる。 Also, like the eating-related proposal system 1B according to the modified example shown in FIG. The server may be omitted by providing it as an eating-related proposal device. The user device 4D may be provided independently, for example, in the user's home or the like. Alternatively, the user device 4D connects to a terminal 4E similar to the terminal 4B shown in FIG. 11, a terminal 4F similar to the terminal 4C shown in FIG. Information (for example, information output by the output unit 46) may be notified via. Since the functions of the user device 4D, the terminal 4E, and the terminal 4F are the same as the functions of the user terminal 4, the server 5, the terminal 4B, and the terminal 4C, detailed description thereof will be omitted. When the user device 4D is connected to the terminal 4E and the terminal 4F, it is possible to appropriately notify the related parties of the user (for example, family members, attending physicians, etc.) of suggested information, warnings, and the like. In particular, when the user's related parties live separately from the user, early detection and early handling of problems occurring in the user are possible.

1,1A,1B…摂食関連提案システム、2…義歯、3…ベース装置、4…ユーザ端末(摂食関連提案装置)、4A…ユーザ端末、4B,4C…端末、4D…ユーザ用デバイス(摂食関連提案装置)、5…サーバ、5A…サーバ(摂食関連提案装置)、20…センサ、31…無線充電用アンテナ(充電部)、32…通信部、33…洗浄部、41…取得部、42…解析部、44…生成部、46,46A…出力部、47,47A,47B,47C…表示部、CS…咀嚼区間、M1…解析モデル、M2…提案モデル。 1, 1A, 1B ... eating-related proposal system, 2 ... denture, 3 ... base device, 4 ... user terminal (eating-related proposal device), 4A ... user terminal, 4B, 4C ... terminal, 4D ... device for user ( Eating-related proposal device), 5 Server, 5A Server (Eating-related proposal device), 20 Sensor, 31 Wireless charging antenna (charging unit), 32 Communication unit, 33 Washing unit, 41 Acquisition Section 42...Analysis part 44...Generation part 46, 46A...Output part 47, 47A, 47B, 47C...Display part CS...Mastication section M1...Analysis model M2...Proposal model.

Claims (12)

ユーザの摂食時の顎運動の時系列情報である顎運動情報を取得する取得部と、
前記顎運動情報に基づいて、前記摂食時に前記ユーザが咀嚼したと推定される食べ物の属性を示す属性情報を含む解析結果を取得する解析部と、
前記解析結果に基づいて、前記ユーザの食事内容に対するアドバイス、前記ユーザの食事の傾向についての評価、及び前記ユーザの食生活をより良くするためのアドバイスの少なくともいずれかを含む提案情報を生成する生成部と、
前記生成部により生成された前記提案情報を出力する出力部と、
を備え
前記解析部は、
前記顎運動情報から、一口分の顎運動を示す時系列情報である咀嚼情報を抽出し、
機械学習により生成された解析モデルに前記咀嚼情報を入力し、前記解析モデルから出力される、前記一口分の顎運動により前記ユーザが咀嚼したと推定される食べ物の属性を、前記属性情報として取得し、
前記解析モデルは、前記ユーザについて取得された過去の一口分の顎運動を示す時系列情報である第1情報と前記過去の一口分の顎運動により前記ユーザが咀嚼した食べ物の属性を示す第2情報とを含む教師データを用いて機械学習された学習済みモデルである、摂食関連提案装置。
an acquisition unit that acquires jaw movement information , which is time-series information of jaw movement during eating by a user;
an analysis unit that acquires an analysis result including attribute information indicating an attribute of the food estimated to be chewed by the user at the time of eating, based on the jaw movement information;
Based on the analysis result, generation of proposal information including at least one of advice on the user's dietary content, evaluation of the user's dietary tendency, and advice for improving the user's dietary habits. Department and
an output unit that outputs the proposal information generated by the generation unit;
with
The analysis unit is
extracting mastication information, which is chronological information indicating jaw movements for a mouthful, from the jaw movement information;
The mastication information is input to an analysis model generated by machine learning, and the attribute of the food estimated to be chewed by the user by the jaw movement for the mouthful is output from the analysis model as the attribute information. death,
The analysis model includes first information, which is time-series information indicating a past mouthful of jaw movement acquired for the user, and second information, which is time-series information indicating the past mouthful of jaw movement acquired for the user, and second information indicating attributes of food chewed by the user by the past mouthful of jaw movement. An eating-related proposal device , which is a trained model machine-learned using teacher data including information .
ユーザの摂食時の顎運動の時系列情報である顎運動情報を取得する取得部と、 an acquisition unit that acquires jaw movement information, which is time-series information of jaw movement during eating by a user;
前記顎運動情報に基づいて、前記摂食時に前記ユーザが咀嚼したと推定される食べ物の属性を示す属性情報を含む解析結果を取得する解析部と、 an analysis unit that acquires an analysis result including attribute information indicating an attribute of the food estimated to be chewed by the user at the time of eating, based on the jaw movement information;
前記解析結果に基づいて、前記ユーザの食事内容に対するアドバイス、前記ユーザの食事の傾向についての評価、及び前記ユーザの食生活をより良くするためのアドバイスの少なくともいずれかを含む提案情報を生成する生成部と、 Based on the analysis result, generation of proposal information including at least one of advice on the user's dietary content, evaluation of the user's dietary tendency, and advice for improving the user's dietary habits. Department and
前記生成部により生成された前記提案情報を出力する出力部と、 an output unit that outputs the proposal information generated by the generation unit;
を備え、with
前記解析部は、 The analysis unit is
前記顎運動情報から、一口分の顎運動を示す時系列情報である咀嚼情報を抽出し、 extracting mastication information, which is chronological information indicating jaw movements for a mouthful, from the jaw movement information;
機械学習により生成された解析モデルに前記咀嚼情報を入力し、前記解析モデルから出力される、前記一口分の顎運動により前記ユーザが咀嚼したと推定される食べ物の属性を、前記属性情報として取得し、 The mastication information is input to an analysis model generated by machine learning, and the attribute of the food estimated to be chewed by the user by the jaw movement for the mouthful is output from the analysis model as the attribute information. death,
前記解析モデルは、不特定のユーザについて取得された過去の一口分の顎運動を示す時系列情報である第1情報と前記過去の一口分の顎運動により前記不特定のユーザが咀嚼した食べ物の属性を示す第2情報とを含む教師データを用いて機械学習された学習済みモデルである、摂食関連提案装置。 The analysis model includes first information, which is time-series information indicating a past mouthful of jaw movement acquired for an unspecified user, and information on food masticated by the unspecified user by the past mouthful of jaw movement. an eating-related proposal device, which is a learned model machine-learned using teacher data including second information indicating an attribute;
前記解析部は、前記解析モデルに対して前記ユーザの属性を示すプロファイル情報を更に入力し、 The analysis unit further inputs profile information indicating attributes of the user to the analysis model,
前記解析モデルは、前記不特定のユーザのプロファイル情報を更に含む前記教師データを用いて機械学習された学習済みモデルである、請求項2に記載の摂食関連提案装置。 3. The eating-related proposal device according to claim 2, wherein said analysis model is a learned model machine-learned using said teacher data further including profile information of said unspecified user.
前記取得部は、前記ユーザの健康状態のデータを更に取得し、
前記生成部は、前記健康状態のデータにも基づいて、前記提案情報を生成する、請求項1~3のいずれか一項に記載の摂食関連提案装置。
The acquisition unit further acquires data on the health condition of the user,
The eating-related proposal device according to any one of claims 1 to 3 , wherein said generating unit generates said proposal information also based on said health condition data.
前記食べ物の属性は、食べ物の大きさ、硬さ、及び種類の少なくとも1つを含む、請求項1~4のいずれか一項に記載の摂食関連提案装置。 The eating-related proposal device according to any one of claims 1 to 4 , wherein the food attributes include at least one of food size, hardness, and type. 前記解析モデルは、前記第1情報のうち1回目の噛み動作に対応する顎運動を示す時系列情報である第1咀嚼情報に対応するデータと、前記第1情報のうち2回目の噛み動作に対応する顎運動を示す時系列情報である第2咀嚼情報に対応するデータと、前記第2情報とを含む教師データを用いて機械学習された学習済みモデルであり、
前記解析部は、前記咀嚼情報から前記第1咀嚼情報と前記第2咀嚼情報とを抽出し、抽出された情報を前記解析モデルに入力することにより、前記一口分の顎運動により前記ユーザが咀嚼したと推定される食べ物の属性を取得する、請求項1~5のいずれか一項に記載の摂食関連提案装置。
The analysis model includes data corresponding to first mastication information, which is time-series information indicating a jaw movement corresponding to a first chewing motion among the first information, and data corresponding to the second chewing motion among the first information. A learned model machine-learned using teacher data including data corresponding to second mastication information, which is time-series information indicating corresponding jaw movements, and the second information,
The analysis unit extracts the first mastication information and the second mastication information from the mastication information, and inputs the extracted information to the analysis model so that the user masticates by the jaw movement for the mouthful. The eating-related proposal device according to any one of claims 1 to 5 , which acquires the attribute of the food estimated to have been eaten.
前記解析モデルは、前記第1情報のうち1回目からn回目(n≧3)までの各々の噛み動作に対応する前記第1咀嚼情報から第n咀嚼情報までのデータを含む前記教師データを用いて機械学習された学習済みモデルであり、 The analysis model uses the teacher data including data from the first mastication information to the n-th mastication information corresponding to each of the first to n-th (n≧3) chewing motions in the first information. is a trained model that has been machine-learned using
前記解析部は、前記咀嚼情報から、前記第1咀嚼情報から前記第n咀嚼情報までの各々の情報を抽出し、抽出された情報を前記解析モデルに入力することにより、前記一口分の顎運動により前記ユーザが咀嚼したと推定される食べ物の属性を取得する、請求項6に記載の摂食関連提案装置。 The analysis unit extracts each piece of information from the first mastication information to the n-th mastication information from the mastication information, and inputs the extracted information to the analysis model to perform jaw movement for the mouthful. 7. The eating-related proposal device according to claim 6, which acquires the attributes of food presumed to be chewed by said user.
前記出力部により出力された前記提案情報を表示する表示部を更に備える、請求項1~のいずれか一項に記載の摂食関連提案装置。 The eating-related proposal device according to any one of claims 1 to 7 , further comprising a display unit for displaying said proposal information output by said output unit. 前記出力部は、前記ユーザが所有する端末に前記提案情報を通知する、請求項1~のいずれか一項に記載の摂食関連提案装置。 The eating-related proposal device according to any one of claims 1 to 8 , wherein said output unit notifies a terminal owned by said user of said proposal information. 前記出力部は、前記ユーザとは異なる他ユーザが所有する端末であって予め通知先として設定された該端末に前記提案情報を通知する、請求項1~のいずれか一項に記載の摂食関連提案装置。 The input unit according to any one of claims 1 to 9 , wherein the output unit notifies the proposed information to a terminal owned by another user different from the user and set in advance as a notification destination. Meal-related suggestion device. ユーザの摂食時の顎運動に関する顎運動情報を取得する取得部と、 an acquisition unit that acquires jaw motion information related to jaw motion during eating by a user;
前記顎運動情報に基づいて、前記摂食時において前記ユーザの口を開く大きさを示す開口量を取得する解析部と、 an analysis unit that acquires, based on the jaw movement information, an opening amount that indicates the size of the mouth of the user that is opened during eating;
前記開口量に基づいて、顎関節症の診断要否に関する情報を生成する生成部と、 a generation unit that generates information regarding the necessity of diagnosing temporomandibular disorder based on the opening amount;
前記生成部により生成された前記顎関節症の診断要否に関する情報を出力する出力部と、 an output unit for outputting information on whether or not to diagnose the temporomandibular disorder generated by the generation unit;
を備える、摂食関連提案装置。A feeding-related suggestion device comprising:
ユーザの摂食時の顎運動に関する顎運動情報を取得するためのセンサが設けられて前記ユーザの下顎に装着される義歯と、
前記センサにより取得された前記顎運動情報を解析する請求項1~11のいずれか一項に記載の摂食関連提案装置と、を備える、摂食関連提案システム。
a denture that is attached to the user's lower jaw and that is provided with a sensor for acquiring jaw movement information regarding the user's jaw movement during eating;
An eating-related proposal system, comprising: the eating-related proposal device according to any one of claims 1 to 11 , which analyzes the jaw movement information acquired by the sensor.
JP2019234441A 2019-12-25 2019-12-25 Eating Related Proposal Device and Eating Related Proposing System Active JP7286093B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019234441A JP7286093B2 (en) 2019-12-25 2019-12-25 Eating Related Proposal Device and Eating Related Proposing System

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019234441A JP7286093B2 (en) 2019-12-25 2019-12-25 Eating Related Proposal Device and Eating Related Proposing System

Publications (2)

Publication Number Publication Date
JP2021101872A JP2021101872A (en) 2021-07-15
JP7286093B2 true JP7286093B2 (en) 2023-06-05

Family

ID=76755511

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019234441A Active JP7286093B2 (en) 2019-12-25 2019-12-25 Eating Related Proposal Device and Eating Related Proposing System

Country Status (1)

Country Link
JP (1) JP7286093B2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004057585A (en) 2002-07-30 2004-02-26 Hamamatsu Photonics Kk Mastication monitoring device
JP2004113315A (en) 2002-09-25 2004-04-15 Nisca Corp Mastication frequency counter and health management system using the mastication frequency counter
JP2010142285A (en) 2008-12-16 2010-07-01 Yoshida Dental Mfg Co Ltd System and apparatus for tracking lower anterior tooth part movement and temporomandibular joint noise analyzer
JP2012191994A (en) 2011-03-15 2012-10-11 Japan Science & Technology Agency Apparatus and program of analyzing behavior, and information detecting device
JP2015208634A (en) 2014-04-30 2015-11-24 シャープ株式会社 Wearable measurement device and measurement method
JP2016093476A (en) 2014-11-10 2016-05-26 国立研究開発法人産業技術総合研究所 Manducation feeling feedback device
JP2016159096A (en) 2015-03-05 2016-09-05 シャープ株式会社 Meal support device, meal support system, computer program and meal support method
JP2019184528A (en) 2018-04-16 2019-10-24 長谷川香料株式会社 Analysis and prediction methods for flavor preference of food and drink

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004057585A (en) 2002-07-30 2004-02-26 Hamamatsu Photonics Kk Mastication monitoring device
JP2004113315A (en) 2002-09-25 2004-04-15 Nisca Corp Mastication frequency counter and health management system using the mastication frequency counter
JP2010142285A (en) 2008-12-16 2010-07-01 Yoshida Dental Mfg Co Ltd System and apparatus for tracking lower anterior tooth part movement and temporomandibular joint noise analyzer
JP2012191994A (en) 2011-03-15 2012-10-11 Japan Science & Technology Agency Apparatus and program of analyzing behavior, and information detecting device
JP2015208634A (en) 2014-04-30 2015-11-24 シャープ株式会社 Wearable measurement device and measurement method
JP2016093476A (en) 2014-11-10 2016-05-26 国立研究開発法人産業技術総合研究所 Manducation feeling feedback device
JP2016159096A (en) 2015-03-05 2016-09-05 シャープ株式会社 Meal support device, meal support system, computer program and meal support method
JP2019184528A (en) 2018-04-16 2019-10-24 長谷川香料株式会社 Analysis and prediction methods for flavor preference of food and drink

Also Published As

Publication number Publication date
JP2021101872A (en) 2021-07-15

Similar Documents

Publication Publication Date Title
EP3148435B1 (en) System for monitoring health related information for individuals
CN109068983B (en) Method and apparatus for tracking food intake and other behaviors and providing relevant feedback
JP2022506115A (en) Automatic detection of physical behavior events and adjustment of corresponding drug administration system
CN109887568B (en) Health management system based on doctor&#39;s advice
US9946844B2 (en) Systems and methods for monitoring patient medication adherence
US20060183980A1 (en) Mental and physical health status monitoring, analyze and automatic follow up methods and its application on clothing
Schiboni et al. Automatic dietary monitoring using wearable accessories
CN108852283A (en) Sleep scoring based on physiologic information
EP3656343B1 (en) Wearable apparatus attaching on tooth and the sensing device fixing at tooth
JP2022024098A (en) Support system for health life expectancy extension
JP7113387B2 (en) Method of operating treatment and examination system, treatment and examination program of treatment and examination system, and its storage medium
WO2021070472A1 (en) Information processing device, information processing system, and information processing method
JP2016131604A (en) Biological information measurement system, biological information measurement device, and biological information measurement method
CA3186796A1 (en) Wearable infection monitor
Fontana et al. Evaluation of chewing and swallowing sensors for monitoring ingestive behavior
CN114616627A (en) Automatic detection of physical behavioral events and corresponding adjustment of medication dispensing systems
US20220323189A1 (en) Jaw movement analysis system
Wang et al. Enhancing nutrition care through real-time, sensor-based capture of eating occasions: A scoping review
WO2018128056A1 (en) User terminal device
JP7286093B2 (en) Eating Related Proposal Device and Eating Related Proposing System
JP7395423B2 (en) Lifestyle monitoring device, system, program, and method capable of providing information related to meals, sleep, and exercise
WO2023234317A1 (en) Information processing system, information processing method, program, and recording medium
CA3016315C (en) Systems and methods for monitoring patient medication adherence
Tychkov et al. Multichannel System For Receiving/Transmitting The Main Indicators Of human Health During Extreme Situations
Lawo et al. An open, ubiquitous and adaptive chronic disease management platform

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230104

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230303

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230516

R150 Certificate of patent or registration of utility model

Ref document number: 7286093

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150