JP2023144678A - Information providing apparatus, information providing system, information providing method, and program - Google Patents
Information providing apparatus, information providing system, information providing method, and program Download PDFInfo
- Publication number
- JP2023144678A JP2023144678A JP2022051779A JP2022051779A JP2023144678A JP 2023144678 A JP2023144678 A JP 2023144678A JP 2022051779 A JP2022051779 A JP 2022051779A JP 2022051779 A JP2022051779 A JP 2022051779A JP 2023144678 A JP2023144678 A JP 2023144678A
- Authority
- JP
- Japan
- Prior art keywords
- information
- candidates
- image
- unit
- priority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 26
- 238000000605 extraction Methods 0.000 claims abstract description 18
- 235000013305 food Nutrition 0.000 claims description 49
- 238000004891 communication Methods 0.000 claims description 34
- 238000010411 cooking Methods 0.000 claims description 24
- 239000000284 extract Substances 0.000 claims description 12
- 230000010365 information processing Effects 0.000 abstract 1
- 238000012545 processing Methods 0.000 description 25
- 235000013194 Lyophyllum decastes Nutrition 0.000 description 12
- 240000005856 Lyophyllum decastes Species 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000010191 image analysis Methods 0.000 description 11
- 230000015654 memory Effects 0.000 description 10
- 241000238557 Decapoda Species 0.000 description 7
- 235000015277 pork Nutrition 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 239000000470 constituent Substances 0.000 description 5
- 241000251468 Actinopterygii Species 0.000 description 4
- 235000005911 diet Nutrition 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 235000012054 meals Nutrition 0.000 description 4
- 230000000378 dietary effect Effects 0.000 description 3
- 235000015097 nutrients Nutrition 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 241000287828 Gallus gallus Species 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 235000021152 breakfast Nutrition 0.000 description 1
- 230000037213 diet Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 235000004280 healthy diet Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本開示は、情報提供装置、情報提供システム、情報提供方法、及び、プログラムに関する。 The present disclosure relates to an information providing device, an information providing system, an information providing method, and a program.
特許文献1には、画像の特徴を分析することにより料理名を特定し、特定された料理名を履歴情報として記録し、ユーザからの要求が入力された場合に、履歴情報に基づいて、ユーザに料理を推薦する装置が開示されている。
本開示は、画像に含まれる料理の候補を精度よく決定できる情報提供装置等を提供する。 The present disclosure provides an information providing device and the like that can accurately determine food candidates included in an image.
本開示の一態様に係る情報提供装置は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得する取得部と、前記画像に含まれる料理を抽出する抽出部と、前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定する決定部と、前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部と、を備える。 An information providing device according to an aspect of the present disclosure includes an acquisition unit that acquires an image and viewing history information including recipe information indicating recipes for one or more dishes viewed by a user, and extracts dishes included in the image. an extraction unit that determines one or more candidates for the dish included in the image and a priority of each of the one or more candidates based on the viewing history information; and an output unit that outputs information regarding a candidate with a high priority among the one or more candidates based on the priority.
また、本開示の一態様に係る情報提供システムは、上記記載の情報提供装置と、端末と、を備え、前記端末は、料理を撮影することで前記画像を生成する撮影部と、前記画像を前記情報提供装置に送信するための通信部と、を備える。 Further, an information providing system according to an aspect of the present disclosure includes the information providing device described above and a terminal, and the terminal includes a photographing unit that generates the image by photographing a dish, and a photographing unit that generates the image by photographing a dish. A communication unit for transmitting data to the information providing device.
また、本開示の一態様に係る情報提供方法は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得し、前記画像に含まれる料理を抽出し、前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定し、前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する。 Further, an information providing method according to an aspect of the present disclosure acquires an image and browsing history information including recipe information indicating recipes for one or more dishes viewed by a user, and extracts dishes included in the image. , determine one or more candidates for the dish included in the image and a priority of each of the one or more candidates based on the viewing history information, and determine the priority of each of the one or more candidates based on the priority of each of the one or more candidates. Information regarding a candidate with a high priority among one or more candidates is output with priority.
また、本開示の一態様に係るプログラムは、前記情報提供方法をコンピュータに実行させるためのプログラムである。 Further, a program according to one aspect of the present disclosure is a program for causing a computer to execute the information providing method.
なお、これらの包括的又は具体的な態様は、システム、方法、集積回路、コンピュータプログラム又はコンピュータ読み取り可能なCD-ROM等の非一時的な記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。 Note that these general or specific aspects may be realized by a system, a method, an integrated circuit, a computer program, or a non-transitory recording medium such as a computer-readable CD-ROM. It may be realized by any combination of a circuit, a computer program, and a recording medium.
本開示によれば、画像に含まれる料理の候補を精度よく決定できる情報提供装置等を提供できる。 According to the present disclosure, it is possible to provide an information providing device and the like that can accurately determine food candidates included in an image.
(本開示に至った経緯)
従来、画像の特徴を分析する、つまり、画像解析を行うことにより当該画像に含まれる(写る)料理を特定する装置がある。例えば、管理栄養士等の管理者が、あるユーザの食事についてのアドバイス等をユーザから遠隔で行う場合に、ユーザが自身の食事を撮影することで生成された画像を管理栄養士等が用いる装置に送信する。そこで、管理者が用いる装置に、画像に含まれる料理を特定する装置が用いられることで、当該装置が、例えば、特定した料理名をディスプレイ等の表示装置に表示することで、管理者は、ユーザが何を食べたのかを簡単に把握できる。管理者は、例えば、ユーザの性別及び健康状態等のユーザの属性を考慮して当該ユーザが健康に良い食事を行っているか等を判断し、食事に対する評価等をユーザに通知することで、ユーザに対して食事指導を行う。
(The circumstances that led to this disclosure)
2. Description of the Related Art Conventionally, there is an apparatus that analyzes the characteristics of an image, that is, performs image analysis to identify a dish included in (pictured in) the image. For example, when an administrator such as a registered dietitian remotely gives advice about a user's diet, the user takes a picture of his or her own meal and sends the image generated by the user to a device used by the registered dietitian. do. Therefore, by using a device used by an administrator to identify a dish included in an image, the device can display the name of the identified dish on a display device such as a display, and the administrator can Easily track what the user has eaten. For example, the administrator considers the user's attributes such as the user's gender and health condition to determine whether the user is eating a healthy diet, and notifies the user of the user's evaluation of the meal. Provide dietary guidance to
上記のように画像解析を行う装置には、画像解析によって画像に含まれる料理を精度よく特定することが求められる。しかしながら、特徴が似ている類似料理が他に存在するような指定料理を特定するような場合には、画像解析の結果である料理の候補を出力させると、当該指定料理ではなく類似料理が料理の候補が出力される等、間違えた料理の候補が出力される問題がある。 A device that performs image analysis as described above is required to accurately identify dishes included in an image through image analysis. However, when specifying a specified dish for which there are other similar dishes with similar characteristics, outputting a candidate dish as a result of image analysis may result in a similar dish being served instead of the specified dish. There is a problem where the wrong dish candidates are output, such as when the wrong dish candidates are output.
このような問題を鑑み、本願発明者らは、本開示に係る情報提供装置を創作するに至った。 In view of such problems, the inventors of the present application have created an information providing device according to the present disclosure.
以下では、本開示の実施の形態について、図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、いずれも本開示の一具体例を示すものである。したがって、以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置及び接続形態、ステップ及びステップの順序等は、一例であり、本開示を限定する趣旨ではない。よって、以下の実施の形態における構成要素のうち、本開示の独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 Below, embodiments of the present disclosure will be described in detail using the drawings. Note that the embodiments described below each represent a specific example of the present disclosure. Therefore, the numerical values, shapes, materials, components, arrangement and connection forms of the components, steps and order of steps, etc. shown in the following embodiments are merely examples, and are not intended to limit the present disclosure. Therefore, among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims of the present disclosure will be described as arbitrary constituent elements.
また、各図は、模式図であり、必ずしも厳密に図示されたものではない。また、各図において、同じ構成部材については同じ符号を付している。 Furthermore, each figure is a schematic diagram and is not necessarily strictly illustrated. Moreover, in each figure, the same reference numerals are attached to the same constituent members.
(実施の形態)
[構成]
図1は、実施の形態に係る情報提供システム300の概要を説明するための図である。
(Embodiment)
[composition]
FIG. 1 is a diagram for explaining an overview of an
情報提供システム300は、画像解析することで、画像に含まれる、ユーザが食した料理を特定するためのシステムである。情報提供システム300は、例えば、ユーザを管理する管理者が、当該ユーザが食した料理について評価するために用いられる。
The
情報提供システム300は、情報提供装置100と、端末200と、を備える。
The
情報提供装置100は、端末200と通信するための通信インターフェースと、通知装置320、及び、入力装置330が接続されるコネクタと、情報提供装置100の各種処理を制御するプロセッサと、当該プロセッサが実行する制御プログラムが記憶されたメモリと、を備えるコンピュータである。本実施の形態では、情報提供装置100は、パーソナルコンピュータであり、例えば、マウス及び/又はキーボード等の任意のユーザインターフェースで実現される入力装置330を介して管理者によって操作される。
The
端末200は、情報提供装置100、通知装置320、及び、入力装置330と通信するための通信インターフェースと、端末200の各種処理を制御するプロセッサと、当該プロセッサが実行する制御プログラムが記憶されたメモリと、を備えるコンピュータである。本実施の形態では、端末200は、スマートフォンであり、例えば、端末200が備えるタッチパネルディスプレイが操作されることでユーザに操作される。
The
ユーザは、例えば、端末200を用いて料理を撮影する。端末200は、料理を撮影することで生成した画像(画像情報)を、ネットワーク310を介して情報提供装置100に送信する。
For example, the user uses the
情報提供装置100は、端末200からユーザの食事を含む画像を取得し、取得した画像に含まれる料理の候補を決定し、当該料理の候補を示す候補情報を管理者に通知する。具体的には、情報提供装置100は、候補情報を通知装置320に出力することで、通知装置320に候補情報を通知させる。さらに、情報提供装置100は、料理の候補の中から特定の候補を示す管理者からの指示を受け付け、指示された料理の候補に関する情報である料理情報を管理者に通知する。具体的には、情報提供装置100は、料理情報を通知装置320に出力することで、通知装置320に料理情報を通知させる。
The
通知装置320は、例えば、候補情報及び料理情報を画像で表示するディスプレイである。通知装置320は、例えば、候補情報及び料理情報を音声で発するアンプ及びスピーカ等により実現されてもよい。
The
なお、情報提供装置100及び端末200は、それぞれ、パーソナルコンピュータ、タブレット端末、スマートフォン等で実現されてもよい。
Note that the
図2は、実施の形態に係る情報提供システム300の構成を示すブロック図である。
FIG. 2 is a block diagram showing the configuration of the
情報提供装置100は、通信部110と、取得部120と、抽出部130と、決定部140と、出力部150と、記憶部160と、を備える。
The
通信部110は、端末200と通信するための通信インターフェースである。通信部110は、有線通信するための通信線が接続されるコネクタ等により実現されてもよいし、無線通信するためのアンテナ及び無線通信回路等により実現されてもよい。
取得部120は、画像と、閲覧履歴情報とを取得する処理部である。例えば、取得部120は、通信部110を介して端末200から画像と閲覧履歴情報とを取得する。
The
閲覧履歴情報は、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む情報である。 The browsing history information is information including recipe information indicating recipes for one or more dishes that the user has viewed.
なお、閲覧履歴情報は、記憶部160に記憶されていてもよい。この場合、取得部120は、記憶部160から閲覧履歴情報を取得してもよい。
Note that the viewing history information may be stored in the
抽出部130は、画像に含まれる料理を抽出する処理部である。例えば、抽出部130は、パターンマッチング等の手法により当該画像を画像解析することで、当該画像に写る料理(料理画像)を抽出する。
The
図3は、実施の形態に係る抽出部130の処理を説明するための図である。
FIG. 3 is a diagram for explaining the processing of the
例えば、取得部120が画像340を取得したとする。抽出部130は、画像340を画像解析することで、画像に含まれる料理画像を抽出する。図3に示す例では、抽出部130は、画像340から、料理画像M1と、料理画像M2と、料理画像M3と、料理画像M4と、料理画像M5と、料理画像M6と、料理画像M7と、を抽出する。抽出部130は、抽出した料理画像M1~M7のそれぞれを画像解析することにより、料理画像M1~M7のそれぞれに含まれる料理を推定する。これにより、抽出部130は、画像340に含まれる料理を抽出する。
For example, assume that the
決定部140は、閲覧履歴情報に基づいて、画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する処理部である。例えば、決定部140は、抽出部130が抽出した料理が何である可能性が高いかを示す確度を算出する。
The determining
決定部140は、例えば、抽出部130が抽出した料理画像M5について画像解析等を行うことにより、鶏の唐揚げ、エビフライ、天ぷら、とんかつ、コロッケ、及び、魚のフライを料理画像M5に含まれる料理の候補として決定する。さらに、決定部140は、例えば、料理画像M5について画像解析等を行うことにより、決定したそれぞれの候補について、鶏の唐揚げである確度(可能性)が30%、エビフライである確度が20%、天ぷらである確度が30%、とんかつである確度が5%、コロッケである確度が14%、魚のフライである確度が1%のように、それぞれの確度を算出する。
For example, the determining
決定部140は、さらに、算出した確度を、閲覧履歴情報を用いて補正する。例えば、ユーザがインターネット等を用いて、鶏の唐揚げのレシピと、エビフライのレシピと、とんかつのレシピと、を過去に閲覧していたとする。言い換えると、閲覧履歴情報に、鶏の唐揚げのレシピと、エビフライのレシピと、とんかつのレシピと、を過去にユーザが閲覧したことを示す情報が含まれていたとする。この場合、決定部140は、例えば、抽出部130が抽出した料理画像M5に含まれる料理である可能性があると算出した、鶏の唐揚げと、エビフライと、とんかつとのそれぞれの確度が相対的に上がるように、それぞれの確度を補正する。例えば、決定部140は、それぞれの料理の候補の確度を、鶏の唐揚げが35%、エビフライが25%、天ぷらが20%、とんかつが10%、コロッケが9%、魚のフライが1%のように補正する。
The determining
さらに、決定部140は、例えば、算出した確度に基づいて、複数の料理の候補の優先度を決定する。例えば、決定部140は、算出した確度が高い順に複数の料理の候補の優先度を決定する。決定部140は、例えば、値が低い程優先度が高いとすると、鶏の唐揚げの優先度を1、エビフライの優先度を2、天ぷらの優先度を3、とんかつの優先度を4、コロッケの優先度を5、魚のフライの優先度を6のようにそれぞれの料理の候補の優先度を決定する。
Further, the determining
これにより、決定部140は、抽出部130が抽出した料理の候補と、料理の候補の優先度とを示す候補情報を生成する。
Thereby, the determining
なお、閲覧履歴情報に基づいて決定部140が料理の候補の優先度をどのように決定(変更)するのかは、予め任意に定められてよく、特に限定されない。例えば、決定部140は、ユーザに閲覧されたレシピの料理の候補の確度を数%上げるように補正し、且つ、ユーザに閲覧されていないレシピの料理の候補の確度を数%下げるように補正してもよい。或いは、例えば、決定部140は、ユーザに閲覧されていないレシピの料理の候補の優先度に対して、ユーザに閲覧されたレシピの料理の候補の優先度が全て高くなるように、料理の候補の優先度を補正してもよい。
Note that how the determining
なお、決定部140は、閲覧履歴情報とユーザの属性を示す属性情報、及び、前記ユーザの状態を示す状態情報の少なくとも一方を含む付帯情報とに基づいて、1以上の候補それぞれの優先度を決定してもよい。
Note that the determining
付帯情報とは、ユーザに関する情報である。本実施の形態では、付帯情報は、属性情報及び/又は状態情報を含む情報である。 Additional information is information regarding the user. In this embodiment, the supplementary information is information including attribute information and/or status information.
属性情報は、例えば、ユーザの年齢、ユーザの性別、ユーザの身長及び体重等の体格、ユーザの1日の運動量等を示す生活習慣、ユーザの病気の有無等の健康状態、ユーザの住む地域等を示す情報である。 Attribute information includes, for example, the user's age, the user's gender, the user's physique such as height and weight, the user's lifestyle habits such as the amount of daily exercise, the user's health status such as the presence or absence of illness, the region where the user lives, etc. This is information indicating.
状態情報とは、例えば、ユーザの行動等の状態を示す情報であって、外食したか否かを示す情報(より具体的には、画像に含まれる料理が外食によるものか否かを示す情報)、時間帯(より具体的には、画像に含まれる料理が撮影された時間帯、つまり、朝食か夕食か等を示す情報)等を示す情報である。 Status information is, for example, information indicating the status of the user's behavior, and information indicating whether the user has eaten out (more specifically, information indicating whether the food included in the image was eaten out). ), time zone (more specifically, information indicating the time zone in which the food included in the image was photographed, that is, whether it is breakfast or dinner, etc.).
取得部120は、例えば、通信部110を介して端末200から付帯情報を取得し、記憶部160に記憶させる。
For example, the
決定部140は、例えば、ユーザの属性が男性である場合、鶏の唐揚げ等の揚げ物の料理の候補の確度(優先度)が高くなるように、料理の候補の優先度を決定する。また、例えば、決定部140は、ユーザの属性情報が、画像に含まれる料理が外食中に撮影されることで生成されたものであることを示す場合、画像に含まれる料理が外食中に撮影されることで生成されたものではない場合と比較して、閲覧履歴情報が優先度に与える影響が低くなるように、つまり、閲覧履歴情報に含まれるレシピ情報が示すレシピの料理の優先度の上げ幅が小さくなるように、料理の候補を決定する。
For example, when the user's attribute is male, the determining
例えば、決定部140は、上記の通り、算出した確度を、閲覧履歴情報を用いて補正する。例えば、ユーザがインターネット等を用いて、鶏の唐揚げのレシピを過去に閲覧していたとする。この場合、決定部140は、例えば、画像解析により鶏の唐揚げの確度が30%だったとき、閲覧履歴情報に基づいて、鶏の唐揚げの確度を35%に補正する。ここで、付帯情報に、画像に含まれる料理が外食によるものであることを示す情報が含まれる場合には、決定部140は、例えば、画像解析により鶏の唐揚げの確度が30%だったとき、閲覧履歴情報及び付帯情報に基づいて、鶏の唐揚げの確度を33%に補正する。
For example, as described above, the determining
例えば、取得部120は、通信部110を介して端末200から付帯情報を取得する。付帯情報は、記憶部160に記憶されていてもよい。この場合、取得部120は、記憶部160から付帯情報を取得してもよい。また、付帯情報は、画像毎に紐付けられていてもよい。これにより、例えば、決定部140は、付帯情報に基づいて画像に含まれる料理が外食中に撮影されることで生成されたものであるか否かを判定し、判定結果に応じて料理の候補の優先度を決定できる。
For example, the
また、閲覧履歴情報は、1以上の料理のレシピのそれぞれがユーザに閲覧されたタイミングを示すタイミング情報を含んでもよい。この場合、決定部140は、1以上の候補の中から、1以上の料理のレシピのうち、撮影部240が料理を撮影することで画像を生成したタイミングから所定の期間内にユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、1以上の候補それぞれの優先度を決定してもよい。
The viewing history information may also include timing information indicating the timing at which each of the one or more cooking recipes was viewed by the user. In this case, the determining
タイミング情報は、例えば、ユーザがレシピを閲覧した日時を示す情報である。決定部140は、例えば、抽出部130が抽出した料理の候補を決定する場合に、料理が撮影されたタイミング(言い換えると、当該料理を含む画像が生成されたタイミング)に対してレシピが閲覧されたタイミングが古すぎる場合、当該レシピについては料理の候補の優先度の決定には考慮しない。
The timing information is, for example, information indicating the date and time when the user viewed the recipe. For example, when determining the candidate for the dish extracted by the
なお、所定の期間は、予め任意に定められてよく、特に限定されない。所定の期間を示す情報は、例えば、記憶部160に予め記憶される。
Note that the predetermined period may be arbitrarily determined in advance and is not particularly limited. Information indicating the predetermined period is stored in advance in the
また、決定部140が決定する料理の候補は、1つでもよいし、2以上でもよい。例えば、決定部140は、料理の候補として1つを決定した場合、閲覧履歴情報に基づいて、当該1つの候補の確度を補正し、当該確度を優先度として決定してもよい。或いは、決定部140は、画像解析の結果に基づいて1つの候補を決定し、閲覧履歴情報に基づいて、当該1つの候補とは異なる他の1以上の候補をさらに決定してもよい。
Further, the number of food candidates determined by the determining
出力部150は、決定部140が決定した1以上の候補それぞれの優先度に基づいて、1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する処理部である。出力部150は、例えば、通知装置320に候補情報を出力することで、候補情報を管理者に通知する。
The
図4は、実施の形態に係る候補情報の具体例を示す図である。 FIG. 4 is a diagram showing a specific example of candidate information according to the embodiment.
図4に示すように、例えば、通知装置320は、候補情報として、1以上の候補を、優先度が高い順に上から表示する。図4に示す例は、候補1から順に優先度が高い場合に表示される料理の候補を示す。
As shown in FIG. 4, for example, the
なお、優先して出力することとは、例えば、図4に示すように優先度の高い順に上から複数の候補を通知装置320に表示させることでもよいし、通知装置320が音声を出力する装置である場合には、例えば、優先度の高い順に音声で候補を通知装置320に出力させることでもよい。或いは、例えば、優先して出力することとは、優先度の高い任意の数の候補を出力することでもよい。
Note that outputting with priority may mean, for example, displaying a plurality of candidates on the
また、候補に関する情報とは、例えば、候補を示す料理名(料理メニュー)を示す情報である。候補に関する情報には、優先度を示す情報、及び/又は、当該候補の栄養素等を示す情報が含まれていてもよい。 Further, the information regarding the candidates is, for example, information indicating the name of the dish (cooking menu) indicating the candidate. The information regarding the candidate may include information indicating the priority and/or information indicating the nutrients of the candidate.
管理者は、例えば、入力装置330を操作することで、通知装置320によって通知された1以上の候補の中から適切な候補を選択する。
For example, by operating the
また、例えば、出力部150は、選択された料理に関する料理情報を出力する。出力部150は、例えば、通知装置320に料理情報を出力することで、料理情報を管理者に通知する。
Further, for example, the
料理情報は、例えば、料理の栄養素に関する栄養量情報等である。これにより、管理者は、ユーザに食事指導をするために必要な情報を簡単に把握できる。 The cooking information is, for example, nutrient amount information regarding the nutrients of the dish. This allows the administrator to easily grasp the information necessary to provide dietary guidance to the user.
なお、候補情報は、端末200に送信され、ユーザに通知されてもよい。例えば、ユーザは、端末200を操作することで、候補情報が示す1以上の候補の中から1つの候補を選択してもよい。端末200は、選択された1つの候補を示す情報を情報提供装置100に送信してもよい。
Note that the candidate information may be transmitted to the terminal 200 and notified to the user. For example, the user may select one candidate from one or more candidates indicated by the candidate information by operating the terminal 200. The terminal 200 may transmit information indicating one selected candidate to the
また、例えば、候補情報に1つの候補のみが含まれる場合、当該1つの候補と、正しいか否かを管理者(又はユーザ)に問い合わせる旨を示す情報が通知装置320(又は端末200)によって通知されてもよい。 Further, for example, when the candidate information includes only one candidate, the notification device 320 (or terminal 200) notifies the one candidate and information indicating that the administrator (or user) is to be inquired as to whether or not the candidate is correct. may be done.
取得部120、抽出部130、決定部140、及び、出力部150の各処理部は、メモリと、当該メモリに記憶された制御プログラムと、当該制御プログラムを実行するCPU(Central Processing Unit)等のプロセッサとから実現される。また、これらの処理部は、1つのメモリ及び1つのプロセッサから実現されてもよいし、互いに異なる又は任意の組み合わせで複数のメモリ及び複数のプロセッサによって実現されてもよい。また、これらの処理部は、例えば、専用の電子回路等により実現されてもよい。
Each of the processing units including the
記憶部160は、決定部140が料理の候補を決定するための複数の料理メニュー(料理名)を示す情報、及び、閲覧履歴情報等の情報提供装置100が用いる情報が記憶される記憶装置である。記憶部160は、例えば、HDD(Hard Disk Drive)、又は、フラッシュメモリ等により実現される。
The
なお、記憶部160に記憶される情報は、例えば、入力装置330等が管理者に操作させることによって、任意に内容の変更がなされてもよい。
Note that the content of the information stored in the
端末200は、通信部210と、制御部220と、記憶部230と、撮影部240と、操作部250と、表示部260と、を備える。
The terminal 200 includes a
通信部210は、情報提供装置100と通信するための通信インターフェースである。本実施の形態では、通信部210は、無線通信するためのアンテナ及び無線通信回路等により実現される。端末200が例えばパーソナルコンピュータである場合には、通信部210は、有線通信するための通信線が接続されるコネクタ等により実現されてもよい。
The
制御部220は、端末200が実行する各種処理を行う処理部である。制御部220は、例えば、メモリと、当該メモリに記憶された制御プログラムと、当該制御プログラムを実行するCPU等のプロセッサとから実現される。
The
記憶部230は、端末200が用いる情報が記憶される記憶装置である。記憶部230は、例えば、HDD、又は、フラッシュメモリ等により実現される。
The
撮影部240は、料理を撮影することで当該料理を含む画像を生成するカメラである。制御部220は、撮影部240によって生成された画像を、通信部210を介して情報提供装置100に送信する。
The photographing unit 240 is a camera that generates an image including the food by photographing the food. The
なお、制御部220は、当該画像を、例えば当該画像が生成された日時を示す日時情報と紐付けて記憶部230に記憶させてもよい。また、制御部220は、複数の画像を例えばそれぞれに紐付けられた日時情報、並びに、ユーザの氏名等のユーザを固有に示すユーザ名情報及びユーザに関する付帯情報等を含むユーザ情報とともに通信部210を介して情報提供装置100に送信してもよい。
Note that the
操作部250は、ユーザの操作を受け付けるユーザインターフェースである。例えば、制御部220は、操作部250が撮影部240を動作させる入力を受け付けた場合に、撮影部240に料理を撮影させる。また、制御部220は、例えば、操作部250が、ユーザ情報を受け付けた場合に、ユーザ情報を記憶部230に記憶させたり、ユーザ情報を通信部210を介して情報提供装置100に送信する。また、例えば、制御部220は、ユーザがインターネット等を利用して料理のレシピを閲覧した場合に、閲覧履歴情報を記憶部230に記憶させたり、閲覧履歴情報を通信部210を介して情報提供装置100に送信する。本実施の形態では、操作部250は、表示部260とともにタッチパネルディスプレイとして実現される。
The
表示部260は、画像を表示するディスプレイである。管理者は、例えば、料理情報を確認して、ユーザに対して食事指導を行う。具体的に例えば、管理者は、入力装置330を操作して、ユーザの食事の良し悪し、又は、改善点等を示す通知情報を作成し、情報提供装置100に当該通知情報を端末200へ送信させる。制御部220は、通信部210を介して通知情報を取得した場合に、表示部260に通知情報を表示させる。
The display unit 260 is a display that displays images. For example, the administrator checks the cooking information and provides dietary guidance to the user. Specifically, for example, the administrator operates the
なお、操作部250及び表示部260は、通知装置320及び入力装置330のように別体で実現されてもよい。
Note that the
また、例えば、情報提供装置100は、料理情報及び付帯情報に基づいて、画像に含まれる料理に対する評価を行い、評価結果を通知情報として端末200に送信してもよい。
Further, for example, the
[処理手順]
続いて、情報提供装置100及び情報提供システム300が実行する処理手順について説明する。
[Processing procedure]
Next, processing procedures executed by the
<情報提供装置>
図5は、実施の形態に係る情報提供装置100の処理手順を示すフローチャートである。
<Information provision device>
FIG. 5 is a flowchart showing the processing procedure of the
まず、取得部120は、例えば、画像とレシピ情報を含む閲覧履歴情報とを取得する(S110)。取得部120は、例えば、通信部110を介して端末200から画像と閲覧履歴情報とを取得する。
First, the
なお、例えば、記憶部160に画像及び閲覧履歴情報が記憶されている場合には、取得部120は、記憶部160から画像及び閲覧履歴情報を取得してもよい。
Note that, for example, if images and viewing history information are stored in the
次に、抽出部130は、画像に含まれる料理を抽出する(S120)。
Next, the
次に、決定部140は、閲覧履歴情報に基づいて、抽出部130が抽出した料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する(S130)。
Next, the determining
次に、出力部150は、決定部140が決定した1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。
Next, the
<情報提供システム>
図6は、実施の形態に係る情報提供システム300の処理手順を示すシーケンス図である。なお、図6に示す情報提供装置100の処理手順では、図5に示す情報提供装置100の処理手順に対して一具体例を追加及び/又は変更して説明している。
<Information provision system>
FIG. 6 is a sequence diagram showing the processing procedure of the
まず、端末200は、例えばユーザの入力を操作部250で受け付けることで付帯情報を取得する(S210)。例えば、制御部220は、操作部250を介して受け付けた付帯情報を記憶部230に記憶させる。
First, the terminal 200 acquires supplementary information by receiving, for example, a user's input through the operation unit 250 (S210). For example, the
次に、端末200は、例えばユーザの入力を操作部250で受け付けることで閲覧履歴情報を取得する(S220)。例えば、制御部220は、操作部250を介して受け付けた閲覧履歴情報を記憶部230に記憶させる。
Next, the terminal 200 obtains viewing history information by receiving, for example, a user's input through the operation unit 250 (S220). For example, the
次に、端末200は、ユーザに操作されて料理を撮影することで、当該料理を含む画像を生成する(S230)。例えば、制御部220は、撮影部240によって生成された画像を記憶部230に記憶させる。
Next, the terminal 200 is operated by the user to take a picture of the dish, thereby generating an image including the dish (S230). For example, the
次に、端末200は、ユーザから画像等の情報の送信指示を受け付けた場合、画像、閲覧履歴情報、及び、付帯情報を情報提供装置100に送信する(S240)。 Next, when the terminal 200 receives an instruction to send information such as an image from the user, the terminal 200 sends the image, viewing history information, and supplementary information to the information providing device 100 (S240).
なお、端末200は、画像、閲覧履歴情報、及び、付帯情報をそれぞれ異なるタイミングで情報提供装置100に送信してもよい。
Note that the terminal 200 may transmit the image, viewing history information, and supplementary information to the
取得部120は、例えば、通信部110を介して端末200から画像と、閲覧履歴情報と、付帯情報とを取得する(S111)。
For example, the
次に、抽出部130は、画像に含まれる料理を抽出する(S120)。
Next, the
次に、決定部140は、閲覧履歴情報と付帯情報とに基づいて、抽出部130が抽出した料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する(S131)。
Next, the determining
次に、出力部150は、決定部140が決定した1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。
Next, the
次に、例えば情報提供装置100は、入力装置330を介して管理者からの入力を受け付けることで、通知情報を生成する(S150)。
Next, for example, the
次に、例えば情報提供装置100は、生成した通知情報を端末200に送信する(S160)。
Next, for example, the
次に、制御部220は、通知情報を通信部210を介して情報提供装置100から受信した場合、当該通知情報を表示部260に表示させる(S250)。
Next, when the
[効果等]
以上のように、実施の形態に係る情報提供装置100は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得する取得部120と、当該画像に含まれる料理を抽出する抽出部130と、閲覧履歴情報に基づいて、当該画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する決定部140と、当該1以上の候補それぞれの優先度に基づいて、当該1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部150と、を備える。
[Effects etc.]
As described above, the
これによれば、画像解析結果だけでなく、レシピ情報に基づいて、候補の優先度が決定される。したがって、画像から分かるような見た目による判断だけでなく、ユーザの過去の行動が料理の候補の優先度の決定に反映され得る。そのため、画像に含まれる料理の候補を精度よく決定できる。 According to this, the priority of candidates is determined based not only on the image analysis result but also on the recipe information. Therefore, in addition to the judgment based on the appearance as seen from the image, the user's past actions can be reflected in determining the priority of the food candidates. Therefore, food candidates included in the image can be determined with high accuracy.
また、例えば、取得部120は、さらに、ユーザの属性を示す属性情報、及び、前記ユーザの状態を示す状態情報の少なくとも一方を含む付帯情報を取得する。また、例えば、決定部140は、閲覧履歴情報と属性情報とに基づいて、当該1以上の候補それぞれの優先度を決定する。
Furthermore, for example, the
これによれば、さらに付帯情報に基づいて、候補の優先度が決定される。したがって、画像から分かるような見た目による判断だけでなく、付帯情報、つまり、ユーザの特徴及び/又は個性等が料理の候補の優先度の決定に反映され得る。そのため、画像に含まれる料理の候補をさらに精度よく決定できる。 According to this, the priority of the candidates is further determined based on the supplementary information. Therefore, in addition to the judgment based on the appearance as seen from the image, additional information such as the user's characteristics and/or personality can be reflected in determining the priority of the food candidates. Therefore, food candidates included in the image can be determined with higher accuracy.
また、例えば、閲覧履歴情報は、1以上の料理のレシピのそれぞれがユーザに閲覧されたタイミングを示すタイミング情報を含む。また、例えば、決定部140は、1以上の候補の中から、1以上の料理のレシピのうち、撮影部240が料理を撮影することで画像を生成したタイミングから所定の期間内にユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、当該1以上の候補それぞれの優先度を決定する。
Further, for example, the viewing history information includes timing information indicating the timing at which each of one or more cooking recipes was viewed by the user. For example, the determining
これによれば、所定の期間が適切に設定されることで、例えば料理が撮影されたタイミングに対してユーザが非常に古くに閲覧された料理のレシピ等の、当該料理の候補の優先度を決定するにはあまり影響がないと考えられ得るレシピ情報を適切に排除できる。言い換えると、タイミング情報を用いられることで、当該料理の候補の優先度を決定するために影響が大きいと考えられ得るレシピ情報を適切に選択して優先度が決定され得る。そのため、画像に含まれる料理の候補をさらに精度よく決定できる。 According to this, by appropriately setting a predetermined period, the priority of a candidate for a dish, such as a recipe for a dish that was viewed very long ago by the user relative to the timing when the dish was photographed, can be prioritized. Recipe information that may be considered to have little influence on decisions can be appropriately excluded. In other words, by using the timing information, the priority can be determined by appropriately selecting recipe information that can be considered to have a large influence on determining the priority of the candidate for the dish. Therefore, food candidates included in the image can be determined with higher accuracy.
また、実施の形態に係る情報提供システム300は、情報提供装置100と、端末200と、を備え、端末200は、料理を撮影することで画像を生成する撮影部240と、当該画像を情報提供装置100に送信するための通信部210と、を備える。
Further, the
また、実施の形態に係る情報提供方法は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得し(S110)、当該画像に含まれる料理を抽出し(S120)、閲覧履歴情報に基づいて、当該画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定し(S130)、当該1以上の候補それぞれの優先度に基づいて、当該1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。 Further, the information providing method according to the embodiment acquires an image and viewing history information including recipe information indicating recipes for one or more dishes viewed by the user (S110), and extracts dishes included in the image. (S120), determines one or more candidates for the dish included in the image and the priority of each of the one or more candidates (S130), and determines the priority of each of the one or more candidates based on the viewing history information. Based on the priority, information regarding a candidate with a high priority among the one or more candidates is output with priority (S140).
また、実施の形態に係るプログラムは、実施の形態に係る情報提供方法をコンピュータに実行させるためのプログラムである。 Further, the program according to the embodiment is a program for causing a computer to execute the information providing method according to the embodiment.
これらによれば、上記情報提供装置100と同様の効果を奏する。
According to these, effects similar to those of the
(その他の実施の形態)
以上、本開示に係る情報提供装置等について、実施の形態に基づいて説明したが、本開示は、上記実施の形態に限定されるものではない。
(Other embodiments)
Although the information providing apparatus and the like according to the present disclosure have been described above based on the embodiments, the present disclosure is not limited to the above embodiments.
例えば、情報提供システム300は、複数の機器により実現されてもよいし、1つの機器で実現されてもよい。具体的には、上記実施の形態では、情報提供システム300は、情報提供装置100と、端末200と、を備える例を示したが、本開示に係る情報提供システムは、情報端末等の単一の装置として実現されてもよいし、複数の装置によって実現されてもよい。例えば、情報提供システムは、クライアントサーバシステムとして実現されてもよい。情報提供システムが複数の装置によって実現される場合、上記実施の形態で説明された情報提供システムが備える構成要素は、複数の装置にどのように振り分けられてもよい。
For example, the
また、例えば、上記実施の形態において、特定の処理部が実行する処理を別の処理部が実行してもよい。また、複数の処理の順序が変更されてもよいし、複数の処理が並行して実行されてもよい。 Further, for example, in the above embodiments, the processing executed by a specific processing unit may be executed by another processing unit. Further, the order of the plurality of processes may be changed, or the plurality of processes may be executed in parallel.
また、例えば、上記実施の形態において、情報提供装置100が備える取得部120、抽出部130等の処理部の構成要素の全部又は一部は、専用のハードウェアで構成されてもよく、或いは、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPU(Central Processing Unit)又はプロセッサ等のプログラム実行部が、HDD又は半導体メモリ等の記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
Further, for example, in the above embodiment, all or part of the components of the processing unit such as the
また、例えば、上記処理部の構成要素は、1つ又は複数の電子回路で構成されてもよい。1つ又は複数の電子回路は、それぞれ、汎用的な回路でもよいし、専用の回路でもよい。 Further, for example, the constituent elements of the processing section may be composed of one or more electronic circuits. Each of the one or more electronic circuits may be a general-purpose circuit or a dedicated circuit.
1つ又は複数の電子回路には、例えば、半導体装置、IC(Integrated Circuit)又はLSI(Large Scale Integration)等が含まれてもよい。IC又はLSIは、1つのチップに集積されてもよく、複数のチップに集積されてもよい。ここでは、IC又はLSIと呼んでいるが、集積の度合いによって呼び方が変わり、システムLSI、VLSI(Very Large Scale Integration)、又は、ULSI(Ultra Large Scale Integration)と呼ばれるかもしれない。また、LSIの製造後にプログラムされるFPGA(Field Programmable Gate Array)も同じ目的で使うことができる。 The one or more electronic circuits may include, for example, a semiconductor device, an IC (Integrated Circuit), an LSI (Large Scale Integration), or the like. An IC or LSI may be integrated into one chip or into multiple chips. Here, it is called an IC or LSI, but the name changes depending on the degree of integration, and may be called a system LSI, VLSI (Very Large Scale Integration), or ULSI (Ultra Large Scale Integration). Furthermore, an FPGA (Field Programmable Gate Array) that is programmed after the LSI is manufactured can also be used for the same purpose.
また、本開示の全般的又は具体的な態様は、システム、装置、方法、集積回路又はコンピュータプログラムで実現されてもよい。或いは、当該コンピュータプログラムが記憶された光学ディスク、HDD若しくは半導体メモリ等のコンピュータ読み取り可能な非一時的な記録媒体で実現されてもよい。また、システム、装置、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。 Additionally, general or specific aspects of the present disclosure may be implemented in a system, apparatus, method, integrated circuit, or computer program product. Alternatively, the computer program may be implemented in a non-transitory computer-readable recording medium such as an optical disk, HDD, or semiconductor memory. Further, the present invention may be realized by any combination of a system, an apparatus, a method, an integrated circuit, a computer program, and a recording medium.
その他、本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本開示の範囲内に含まれる。 In addition, various modifications that can be thought of by those skilled in the art to this embodiment, and forms constructed by combining components of different embodiments are also within the scope of the present disclosure, as long as they do not depart from the spirit of the present disclosure. included.
本開示は、端末と通信するコンピュータ等に適用できる。 The present disclosure can be applied to computers and the like that communicate with terminals.
100 情報提供装置
110、210 通信部
120 取得部
130 抽出部
140 決定部
150 出力部
160、230 記憶部
200 端末
220 制御部
240 撮影部
250 操作部
260 表示部
300 情報提供システム
310 ネットワーク
320 通知装置
330 入力装置
340 画像
M1、M2、M3、M4、M5、M6、M7 料理画像
100
Claims (6)
前記画像に含まれる料理を抽出する抽出部と、
前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定する決定部と、
前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部と、を備える
情報提供装置。 an acquisition unit that acquires images and viewing history information including recipe information indicating recipes for one or more dishes viewed by the user;
an extraction unit that extracts dishes included in the image;
a determining unit that determines one or more candidates for dishes included in the image and a priority of each of the one or more candidates, based on the viewing history information;
An information providing apparatus, comprising: an output unit that outputs information regarding a candidate with a high priority among the one or more candidates based on the priority of each of the one or more candidates.
前記決定部は、前記閲覧履歴情報と前記付帯情報とに基づいて、前記1以上の候補それぞれの優先度を決定する
請求項1に記載の情報提供装置。 The acquisition unit further acquires additional information including at least one of attribute information indicating an attribute of the user and status information indicating a status of the user,
The information providing device according to claim 1, wherein the determining unit determines the priority of each of the one or more candidates based on the viewing history information and the supplementary information.
前記決定部は、前記1以上の候補の中から、前記1以上の料理のレシピのうち、撮影部が料理を撮影することで前記画像を生成したタイミングから所定の期間内に前記ユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、前記1以上の候補それぞれの優先度を決定する
請求項1又は2に記載の情報提供装置。 The viewing history information includes timing information indicating when each of the one or more cooking recipes was viewed by the user,
The determining unit selects recipes for the one or more dishes from among the one or more candidates that have been viewed by the user within a predetermined period from the timing when the image capturing unit generated the image by photographing the dish. The information providing device according to claim 1 or 2, wherein the priority of each of the one or more candidates is determined so as to increase the priority of the food candidates created by the food recipe.
端末と、を備え、
前記端末は、
料理を撮影することで前記画像を生成する撮影部と、
前記画像を前記情報提供装置に送信するための通信部と、を備える
情報提供システム。 The information providing device according to any one of claims 1 to 3;
comprising a terminal and
The terminal is
a photographing unit that generates the image by photographing the food;
An information providing system, comprising: a communication unit for transmitting the image to the information providing device.
前記画像に含まれる料理を抽出し、
前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定し、
前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する
情報提供方法。 Obtaining an image and browsing history information including recipe information indicating recipes for one or more dishes viewed by the user;
extracting the dishes included in the image;
determining one or more candidates for dishes included in the image and a priority of each of the one or more candidates based on the viewing history information;
An information providing method, wherein information regarding a candidate with a high priority among the one or more candidates is output with priority based on the priority of each of the one or more candidates.
プログラム。 A program for a computer to execute the information providing method according to claim 5.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022051779A JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022051779A JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023144678A true JP2023144678A (en) | 2023-10-11 |
JP7478961B2 JP7478961B2 (en) | 2024-05-08 |
Family
ID=88253159
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022051779A Active JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7478961B2 (en) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5927147B2 (en) | 2013-07-12 | 2016-05-25 | 東芝テック株式会社 | Product recognition apparatus and product recognition program |
CN113892110A (en) | 2019-03-28 | 2022-01-04 | 皇家飞利浦有限公司 | Image-based dish recognition device and method |
-
2022
- 2022-03-28 JP JP2022051779A patent/JP7478961B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP7478961B2 (en) | 2024-05-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10803315B2 (en) | Electronic device and method for processing information associated with food | |
CN111480202B (en) | Apparatus and method for personalized meal plan generation | |
US20170358020A1 (en) | Informed food selection in a particular eating environment | |
KR20170073589A (en) | System and computer method for visually guiding a user to a current interest | |
US20200342977A1 (en) | System, computer-readable storage medium, and method | |
US20220093234A1 (en) | Systems, methods and devices for monitoring, evaluating and presenting health related information, including recommendations | |
JP6652627B1 (en) | System, device, method, and program for proposing menus | |
CN107851183A (en) | System and method for providing recipe | |
CN108121974A (en) | A kind of display module structure and terminal device | |
US11176378B2 (en) | Image processing device, image processing method,program, and recording medium | |
CN112163006A (en) | Information processing method and device, electronic equipment and storage medium | |
JP2017059101A (en) | Image processing device, image processing method, program, and recording medium | |
JP6422173B1 (en) | SEARCH DEVICE, SEARCH METHOD, AND SEARCH PROGRAM | |
KR20170006313A (en) | Device and method for providing food distributing information | |
JP2018049584A (en) | Meal size estimation program, meal size estimation method, and meal size estimation apparatus | |
JP7361358B2 (en) | Recipe extraction device, recipe extraction method, and program | |
JP2023144678A (en) | Information providing apparatus, information providing system, information providing method, and program | |
JP6083661B1 (en) | Health management server, health management server control method, and health management program | |
US20200092484A1 (en) | Image display control apparatus, image display control method, program, and recording medium | |
JPWO2020039813A1 (en) | Health management support device, health management support method, health management support terminal, and program | |
KR20190048922A (en) | Smart table and controlling method thereof | |
WO2023162822A1 (en) | Information provision device, information provision system, information provision method, and program | |
US11210829B2 (en) | Image processing device, image processing method, program, and recording medium | |
KR20220052046A (en) | Method and Apparatus of Analyzing Eating Habits by User | |
CN113220995A (en) | Dish making method and device, electronic equipment and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240123 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240304 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240319 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240408 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7478961 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |