JP7478961B2 - Information provision device, information provision system, information provision method, and program - Google Patents
Information provision device, information provision system, information provision method, and program Download PDFInfo
- Publication number
- JP7478961B2 JP7478961B2 JP2022051779A JP2022051779A JP7478961B2 JP 7478961 B2 JP7478961 B2 JP 7478961B2 JP 2022051779 A JP2022051779 A JP 2022051779A JP 2022051779 A JP2022051779 A JP 2022051779A JP 7478961 B2 JP7478961 B2 JP 7478961B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- unit
- priority
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 27
- 235000013305 food Nutrition 0.000 claims description 40
- 238000004891 communication Methods 0.000 claims description 34
- 238000000605 extraction Methods 0.000 claims description 24
- 239000000284 extract Substances 0.000 claims description 10
- 238000012545 processing Methods 0.000 description 23
- 230000015654 memory Effects 0.000 description 15
- 235000013194 Lyophyllum decastes Nutrition 0.000 description 13
- 240000005856 Lyophyllum decastes Species 0.000 description 13
- 238000010191 image analysis Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 241000238557 Decapoda Species 0.000 description 7
- 238000010411 cooking Methods 0.000 description 7
- 235000015277 pork Nutrition 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 235000005911 diet Nutrition 0.000 description 5
- 241000251468 Actinopterygii Species 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 230000000378 dietary effect Effects 0.000 description 3
- 235000012054 meals Nutrition 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000037213 diet Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 235000015097 nutrients Nutrition 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 235000021152 breakfast Nutrition 0.000 description 1
- 235000004280 healthy diet Nutrition 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本開示は、情報提供装置、情報提供システム、情報提供方法、及び、プログラムに関する。 This disclosure relates to an information providing device, an information providing system, an information providing method, and a program.
特許文献1には、画像の特徴を分析することにより料理名を特定し、特定された料理名を履歴情報として記録し、ユーザからの要求が入力された場合に、履歴情報に基づいて、ユーザに料理を推薦する装置が開示されている。
本開示は、画像に含まれる料理の候補を精度よく決定できる情報提供装置等を提供する。 This disclosure provides an information providing device and the like that can accurately determine candidate dishes contained in an image.
本開示の一態様に係る情報提供装置は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得する取得部と、前記画像に含まれる料理を抽出する抽出部と、前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定する決定部と、前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部と、を備える。 An information providing device according to one aspect of the present disclosure includes an acquisition unit that acquires an image and browsing history information including recipe information indicating recipes for one or more dishes viewed by a user, an extraction unit that extracts dishes included in the image, a determination unit that determines one or more candidates for dishes included in the image and a priority of each of the one or more candidates based on the browsing history information, and an output unit that preferentially outputs information regarding a candidate with a higher priority among the one or more candidates based on the priority of each of the one or more candidates.
また、本開示の一態様に係る情報提供システムは、上記記載の情報提供装置と、端末と、を備え、前記端末は、料理を撮影することで前記画像を生成する撮影部と、前記画像を前記情報提供装置に送信するための通信部と、を備える。 An information provision system according to one aspect of the present disclosure includes the information provision device described above and a terminal, and the terminal includes a photographing unit that photographs a dish to generate the image, and a communication unit that transmits the image to the information provision device.
また、本開示の一態様に係る情報提供方法は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得し、前記画像に含まれる料理を抽出し、前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定し、前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する。 An information provision method according to one aspect of the present disclosure obtains an image and browsing history information including recipe information indicating recipes for one or more dishes viewed by a user, extracts dishes included in the image, determines one or more candidates for the dishes included in the image and a priority for each of the one or more candidates based on the browsing history information, and preferentially outputs information regarding candidates with higher priority among the one or more candidates based on the priority for each of the one or more candidates.
また、本開示の一態様に係るプログラムは、前記情報提供方法をコンピュータに実行させるためのプログラムである。 In addition, a program according to one aspect of the present disclosure is a program for causing a computer to execute the information provision method.
なお、これらの包括的又は具体的な態様は、システム、方法、集積回路、コンピュータプログラム又はコンピュータ読み取り可能なCD-ROM等の非一時的な記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。 These comprehensive or specific aspects may be realized by a system, a method, an integrated circuit, a computer program, or a non-transitory recording medium such as a computer-readable CD-ROM, or may be realized by any combination of a system, a method, an integrated circuit, a computer program, and a recording medium.
本開示によれば、画像に含まれる料理の候補を精度よく決定できる情報提供装置等を提供できる。 According to the present disclosure, it is possible to provide an information providing device etc. that can accurately determine candidate dishes contained in an image.
(本開示に至った経緯)
従来、画像の特徴を分析する、つまり、画像解析を行うことにより当該画像に含まれる(写る)料理を特定する装置がある。例えば、管理栄養士等の管理者が、あるユーザの食事についてのアドバイス等をユーザから遠隔で行う場合に、ユーザが自身の食事を撮影することで生成された画像を管理栄養士等が用いる装置に送信する。そこで、管理者が用いる装置に、画像に含まれる料理を特定する装置が用いられることで、当該装置が、例えば、特定した料理名をディスプレイ等の表示装置に表示することで、管理者は、ユーザが何を食べたのかを簡単に把握できる。管理者は、例えば、ユーザの性別及び健康状態等のユーザの属性を考慮して当該ユーザが健康に良い食事を行っているか等を判断し、食事に対する評価等をユーザに通知することで、ユーザに対して食事指導を行う。
(Background to this disclosure)
Conventionally, there is a device that identifies the food contained in (shown in) an image by analyzing the characteristics of the image, that is, by performing image analysis. For example, when an administrator such as a registered dietitian remotely gives advice on a user's diet from the user, the user takes a picture of his or her meal and sends the image to a device used by the registered dietitian. In this case, a device that identifies the food contained in the image is used in the device used by the administrator, and the device displays the identified food name on a display device such as a display, so that the administrator can easily understand what the user has eaten. The administrator determines whether the user is eating a healthy diet, for example, by taking into account the user's attributes such as the user's sex and health condition, and provides dietary guidance to the user by notifying the user of an evaluation of the diet.
上記のように画像解析を行う装置には、画像解析によって画像に含まれる料理を精度よく特定することが求められる。しかしながら、特徴が似ている類似料理が他に存在するような指定料理を特定するような場合には、画像解析の結果である料理の候補を出力させると、当該指定料理ではなく類似料理が料理の候補が出力される等、間違えた料理の候補が出力される問題がある。 As described above, devices that perform image analysis are required to accurately identify the food contained in an image through image analysis. However, when identifying a specified food when there are other similar foods with similar characteristics, there is a problem in that the wrong food candidate is output when outputting food candidates that are the result of image analysis, such as outputting a similar food candidate instead of the specified food.
このような問題を鑑み、本願発明者らは、本開示に係る情報提供装置を創作するに至った。 In consideration of these problems, the inventors of the present application have come up with the creation of the information providing device disclosed herein.
以下では、本開示の実施の形態について、図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、いずれも本開示の一具体例を示すものである。したがって、以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置及び接続形態、ステップ及びステップの順序等は、一例であり、本開示を限定する趣旨ではない。よって、以下の実施の形態における構成要素のうち、本開示の独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 The following describes in detail the embodiments of the present disclosure with reference to the drawings. Note that each of the embodiments described below shows a specific example of the present disclosure. Therefore, the numerical values, shapes, materials, components, the arrangement and connection of the components, steps and the order of steps shown in the following embodiments are merely examples and are not intended to limit the present disclosure. Therefore, among the components in the following embodiments, components that are not described in the independent claims of the present disclosure are described as optional components.
また、各図は、模式図であり、必ずしも厳密に図示されたものではない。また、各図において、同じ構成部材については同じ符号を付している。 The figures are schematic diagrams and are not necessarily precise illustrations. In each figure, the same components are given the same reference numerals.
(実施の形態)
[構成]
図1は、実施の形態に係る情報提供システム300の概要を説明するための図である。
(Embodiment)
[composition]
FIG. 1 is a diagram for explaining an overview of an
情報提供システム300は、画像解析することで、画像に含まれる、ユーザが食した料理を特定するためのシステムである。情報提供システム300は、例えば、ユーザを管理する管理者が、当該ユーザが食した料理について評価するために用いられる。
The
情報提供システム300は、情報提供装置100と、端末200と、を備える。
The
情報提供装置100は、端末200と通信するための通信インターフェースと、通知装置320、及び、入力装置330が接続されるコネクタと、情報提供装置100の各種処理を制御するプロセッサと、当該プロセッサが実行する制御プログラムが記憶されたメモリと、を備えるコンピュータである。本実施の形態では、情報提供装置100は、パーソナルコンピュータであり、例えば、マウス及び/又はキーボード等の任意のユーザインターフェースで実現される入力装置330を介して管理者によって操作される。
The
端末200は、情報提供装置100、通知装置320、及び、入力装置330と通信するための通信インターフェースと、端末200の各種処理を制御するプロセッサと、当該プロセッサが実行する制御プログラムが記憶されたメモリと、を備えるコンピュータである。本実施の形態では、端末200は、スマートフォンであり、例えば、端末200が備えるタッチパネルディスプレイが操作されることでユーザに操作される。
The
ユーザは、例えば、端末200を用いて料理を撮影する。端末200は、料理を撮影することで生成した画像(画像情報)を、ネットワーク310を介して情報提供装置100に送信する。
For example, the user photographs a dish using the
情報提供装置100は、端末200からユーザの食事を含む画像を取得し、取得した画像に含まれる料理の候補を決定し、当該料理の候補を示す候補情報を管理者に通知する。具体的には、情報提供装置100は、候補情報を通知装置320に出力することで、通知装置320に候補情報を通知させる。さらに、情報提供装置100は、料理の候補の中から特定の候補を示す管理者からの指示を受け付け、指示された料理の候補に関する情報である料理情報を管理者に通知する。具体的には、情報提供装置100は、料理情報を通知装置320に出力することで、通知装置320に料理情報を通知させる。
The
通知装置320は、例えば、候補情報及び料理情報を画像で表示するディスプレイである。通知装置320は、例えば、候補情報及び料理情報を音声で発するアンプ及びスピーカ等により実現されてもよい。
The
なお、情報提供装置100及び端末200は、それぞれ、パーソナルコンピュータ、タブレット端末、スマートフォン等で実現されてもよい。
The
図2は、実施の形態に係る情報提供システム300の構成を示すブロック図である。
Figure 2 is a block diagram showing the configuration of an
情報提供装置100は、通信部110と、取得部120と、抽出部130と、決定部140と、出力部150と、記憶部160と、を備える。
The
通信部110は、端末200と通信するための通信インターフェースである。通信部110は、有線通信するための通信線が接続されるコネクタ等により実現されてもよいし、無線通信するためのアンテナ及び無線通信回路等により実現されてもよい。
The
取得部120は、画像と、閲覧履歴情報とを取得する処理部である。例えば、取得部120は、通信部110を介して端末200から画像と閲覧履歴情報とを取得する。
The
閲覧履歴情報は、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む情報である。 The browsing history information includes recipe information that indicates one or more recipes that the user has viewed.
なお、閲覧履歴情報は、記憶部160に記憶されていてもよい。この場合、取得部120は、記憶部160から閲覧履歴情報を取得してもよい。
The browsing history information may be stored in the
抽出部130は、画像に含まれる料理を抽出する処理部である。例えば、抽出部130は、パターンマッチング等の手法により当該画像を画像解析することで、当該画像に写る料理(料理画像)を抽出する。
The
図3は、実施の形態に係る抽出部130の処理を説明するための図である。
Figure 3 is a diagram for explaining the processing of the
例えば、取得部120が画像340を取得したとする。抽出部130は、画像340を画像解析することで、画像に含まれる料理画像を抽出する。図3に示す例では、抽出部130は、画像340から、料理画像M1と、料理画像M2と、料理画像M3と、料理画像M4と、料理画像M5と、料理画像M6と、料理画像M7と、を抽出する。抽出部130は、抽出した料理画像M1~M7のそれぞれを画像解析することにより、料理画像M1~M7のそれぞれに含まれる料理を推定する。これにより、抽出部130は、画像340に含まれる料理を抽出する。
For example, suppose that the
決定部140は、閲覧履歴情報に基づいて、画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する処理部である。例えば、決定部140は、抽出部130が抽出した料理が何である可能性が高いかを示す確度を算出する。
The
決定部140は、例えば、抽出部130が抽出した料理画像M5について画像解析等を行うことにより、鶏の唐揚げ、エビフライ、天ぷら、とんかつ、コロッケ、及び、魚のフライを料理画像M5に含まれる料理の候補として決定する。さらに、決定部140は、例えば、料理画像M5について画像解析等を行うことにより、決定したそれぞれの候補について、鶏の唐揚げである確度(可能性)が30%、エビフライである確度が20%、天ぷらである確度が30%、とんかつである確度が5%、コロッケである確度が14%、魚のフライである確度が1%のように、それぞれの確度を算出する。
For example, the
決定部140は、さらに、算出した確度を、閲覧履歴情報を用いて補正する。例えば、ユーザがインターネット等を用いて、鶏の唐揚げのレシピと、エビフライのレシピと、とんかつのレシピと、を過去に閲覧していたとする。言い換えると、閲覧履歴情報に、鶏の唐揚げのレシピと、エビフライのレシピと、とんかつのレシピと、を過去にユーザが閲覧したことを示す情報が含まれていたとする。この場合、決定部140は、例えば、抽出部130が抽出した料理画像M5に含まれる料理である可能性があると算出した、鶏の唐揚げと、エビフライと、とんかつとのそれぞれの確度が相対的に上がるように、それぞれの確度を補正する。例えば、決定部140は、それぞれの料理の候補の確度を、鶏の唐揚げが35%、エビフライが25%、天ぷらが20%、とんかつが10%、コロッケが9%、魚のフライが1%のように補正する。
The
さらに、決定部140は、例えば、算出した確度に基づいて、複数の料理の候補の優先度を決定する。例えば、決定部140は、算出した確度が高い順に複数の料理の候補の優先度を決定する。決定部140は、例えば、値が低い程優先度が高いとすると、鶏の唐揚げの優先度を1、エビフライの優先度を2、天ぷらの優先度を3、とんかつの優先度を4、コロッケの優先度を5、魚のフライの優先度を6のようにそれぞれの料理の候補の優先度を決定する。
Furthermore, the
これにより、決定部140は、抽出部130が抽出した料理の候補と、料理の候補の優先度とを示す候補情報を生成する。
As a result, the
なお、閲覧履歴情報に基づいて決定部140が料理の候補の優先度をどのように決定(変更)するのかは、予め任意に定められてよく、特に限定されない。例えば、決定部140は、ユーザに閲覧されたレシピの料理の候補の確度を数%上げるように補正し、且つ、ユーザに閲覧されていないレシピの料理の候補の確度を数%下げるように補正してもよい。或いは、例えば、決定部140は、ユーザに閲覧されていないレシピの料理の候補の優先度に対して、ユーザに閲覧されたレシピの料理の候補の優先度が全て高くなるように、料理の候補の優先度を補正してもよい。
How the
なお、決定部140は、閲覧履歴情報とユーザの属性を示す属性情報、及び、前記ユーザの状態を示す状態情報の少なくとも一方を含む付帯情報とに基づいて、1以上の候補それぞれの優先度を決定してもよい。
In addition, the
付帯情報とは、ユーザに関する情報である。本実施の形態では、付帯情報は、属性情報及び/又は状態情報を含む情報である。 Additional information is information about a user. In this embodiment, the additional information is information that includes attribute information and/or status information.
属性情報は、例えば、ユーザの年齢、ユーザの性別、ユーザの身長及び体重等の体格、ユーザの1日の運動量等を示す生活習慣、ユーザの病気の有無等の健康状態、ユーザの住む地域等を示す情報である。 The attribute information is, for example, information indicating the user's age, the user's sex, the user's physical build such as height and weight, the user's lifestyle habits indicating the amount of exercise the user does each day, the user's health condition such as whether or not the user has an illness, the area where the user lives, etc.
状態情報とは、例えば、ユーザの行動等の状態を示す情報であって、外食したか否かを示す情報(より具体的には、画像に含まれる料理が外食によるものか否かを示す情報)、時間帯(より具体的には、画像に含まれる料理が撮影された時間帯、つまり、朝食か夕食か等を示す情報)等を示す情報である。 Status information is, for example, information that indicates the state of the user's behavior, etc., such as information indicating whether or not they ate out (more specifically, information indicating whether or not the food in the image was eaten out), the time of day (more specifically, information indicating the time of day when the food in the image was photographed, i.e., whether it was breakfast or dinner, etc.), etc.
取得部120は、例えば、通信部110を介して端末200から付帯情報を取得し、記憶部160に記憶させる。
The
決定部140は、例えば、ユーザの属性が男性である場合、鶏の唐揚げ等の揚げ物の料理の候補の確度(優先度)が高くなるように、料理の候補の優先度を決定する。また、例えば、決定部140は、ユーザの属性情報が、画像に含まれる料理が外食中に撮影されることで生成されたものであることを示す場合、画像に含まれる料理が外食中に撮影されることで生成されたものではない場合と比較して、閲覧履歴情報が優先度に与える影響が低くなるように、つまり、閲覧履歴情報に含まれるレシピ情報が示すレシピの料理の優先度の上げ幅が小さくなるように、料理の候補を決定する。
For example, when the user's attribute is male, the
例えば、決定部140は、上記の通り、算出した確度を、閲覧履歴情報を用いて補正する。例えば、ユーザがインターネット等を用いて、鶏の唐揚げのレシピを過去に閲覧していたとする。この場合、決定部140は、例えば、画像解析により鶏の唐揚げの確度が30%だったとき、閲覧履歴情報に基づいて、鶏の唐揚げの確度を35%に補正する。ここで、付帯情報に、画像に含まれる料理が外食によるものであることを示す情報が含まれる場合には、決定部140は、例えば、画像解析により鶏の唐揚げの確度が30%だったとき、閲覧履歴情報及び付帯情報に基づいて、鶏の唐揚げの確度を33%に補正する。
For example, the
例えば、取得部120は、通信部110を介して端末200から付帯情報を取得する。付帯情報は、記憶部160に記憶されていてもよい。この場合、取得部120は、記憶部160から付帯情報を取得してもよい。また、付帯情報は、画像毎に紐付けられていてもよい。これにより、例えば、決定部140は、付帯情報に基づいて画像に含まれる料理が外食中に撮影されることで生成されたものであるか否かを判定し、判定結果に応じて料理の候補の優先度を決定できる。
For example, the
また、閲覧履歴情報は、1以上の料理のレシピのそれぞれがユーザに閲覧されたタイミングを示すタイミング情報を含んでもよい。この場合、決定部140は、1以上の候補の中から、1以上の料理のレシピのうち、撮影部240が料理を撮影することで画像を生成したタイミングから所定の期間内にユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、1以上の候補それぞれの優先度を決定してもよい。
The browsing history information may also include timing information indicating the timing at which each of the one or more recipes was viewed by the user. In this case, the
タイミング情報は、例えば、ユーザがレシピを閲覧した日時を示す情報である。決定部140は、例えば、抽出部130が抽出した料理の候補を決定する場合に、料理が撮影されたタイミング(言い換えると、当該料理を含む画像が生成されたタイミング)に対してレシピが閲覧されたタイミングが古すぎる場合、当該レシピについては料理の候補の優先度の決定には考慮しない。
The timing information is, for example, information indicating the date and time when the user viewed the recipe. For example, when determining the candidate dishes extracted by the
なお、所定の期間は、予め任意に定められてよく、特に限定されない。所定の期間を示す情報は、例えば、記憶部160に予め記憶される。
The predetermined period may be determined arbitrarily in advance and is not particularly limited. Information indicating the predetermined period is stored in advance in the
また、決定部140が決定する料理の候補は、1つでもよいし、2以上でもよい。例えば、決定部140は、料理の候補として1つを決定した場合、閲覧履歴情報に基づいて、当該1つの候補の確度を補正し、当該確度を優先度として決定してもよい。或いは、決定部140は、画像解析の結果に基づいて1つの候補を決定し、閲覧履歴情報に基づいて、当該1つの候補とは異なる他の1以上の候補をさらに決定してもよい。
The number of dish candidates determined by the
出力部150は、決定部140が決定した1以上の候補それぞれの優先度に基づいて、1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する処理部である。出力部150は、例えば、通知装置320に候補情報を出力することで、候補情報を管理者に通知する。
The
図4は、実施の形態に係る候補情報の具体例を示す図である。 Figure 4 shows a specific example of candidate information related to the embodiment.
図4に示すように、例えば、通知装置320は、候補情報として、1以上の候補を、優先度が高い順に上から表示する。図4に示す例は、候補1から順に優先度が高い場合に表示される料理の候補を示す。
As shown in FIG. 4, for example, the
なお、優先して出力することとは、例えば、図4に示すように優先度の高い順に上から複数の候補を通知装置320に表示させることでもよいし、通知装置320が音声を出力する装置である場合には、例えば、優先度の高い順に音声で候補を通知装置320に出力させることでもよい。或いは、例えば、優先して出力することとは、優先度の高い任意の数の候補を出力することでもよい。
Note that outputting with priority may mean, for example, displaying multiple candidates on the
また、候補に関する情報とは、例えば、候補を示す料理名(料理メニュー)を示す情報である。候補に関する情報には、優先度を示す情報、及び/又は、当該候補の栄養素等を示す情報が含まれていてもよい。 Information about the candidates is, for example, information indicating the name of the dish (dish menu) that indicates the candidate. Information about the candidates may include information indicating the priority and/or information indicating the nutrients, etc., of the candidate.
管理者は、例えば、入力装置330を操作することで、通知装置320によって通知された1以上の候補の中から適切な候補を選択する。
The administrator, for example, operates the
また、例えば、出力部150は、選択された料理に関する料理情報を出力する。出力部150は、例えば、通知装置320に料理情報を出力することで、料理情報を管理者に通知する。
For example, the
料理情報は、例えば、料理の栄養素に関する栄養量情報等である。これにより、管理者は、ユーザに食事指導をするために必要な情報を簡単に把握できる。 The food information is, for example, nutritional information about the nutrients in the food. This allows the administrator to easily grasp the information necessary to provide dietary advice to the user.
なお、候補情報は、端末200に送信され、ユーザに通知されてもよい。例えば、ユーザは、端末200を操作することで、候補情報が示す1以上の候補の中から1つの候補を選択してもよい。端末200は、選択された1つの候補を示す情報を情報提供装置100に送信してもよい。
The candidate information may be transmitted to the terminal 200 and notified to the user. For example, the user may operate the terminal 200 to select one candidate from one or more candidates indicated by the candidate information. The terminal 200 may transmit information indicating the selected candidate to the
また、例えば、候補情報に1つの候補のみが含まれる場合、当該1つの候補と、正しいか否かを管理者(又はユーザ)に問い合わせる旨を示す情報が通知装置320(又は端末200)によって通知されてもよい。 Also, for example, if the candidate information includes only one candidate, the notification device 320 (or the terminal 200) may notify the administrator (or the user) of the candidate and information indicating whether the candidate is correct or not.
取得部120、抽出部130、決定部140、及び、出力部150の各処理部は、メモリと、当該メモリに記憶された制御プログラムと、当該制御プログラムを実行するCPU(Central Processing Unit)等のプロセッサとから実現される。また、これらの処理部は、1つのメモリ及び1つのプロセッサから実現されてもよいし、互いに異なる又は任意の組み合わせで複数のメモリ及び複数のプロセッサによって実現されてもよい。また、これらの処理部は、例えば、専用の電子回路等により実現されてもよい。
Each of the processing units, ie, the
記憶部160は、決定部140が料理の候補を決定するための複数の料理メニュー(料理名)を示す情報、及び、閲覧履歴情報等の情報提供装置100が用いる情報が記憶される記憶装置である。記憶部160は、例えば、HDD(Hard Disk Drive)、又は、フラッシュメモリ等により実現される。
The
なお、記憶部160に記憶される情報は、例えば、入力装置330等が管理者に操作させることによって、任意に内容の変更がなされてもよい。
The information stored in the
端末200は、通信部210と、制御部220と、記憶部230と、撮影部240と、操作部250と、表示部260と、を備える。
The terminal 200 includes a
通信部210は、情報提供装置100と通信するための通信インターフェースである。本実施の形態では、通信部210は、無線通信するためのアンテナ及び無線通信回路等により実現される。端末200が例えばパーソナルコンピュータである場合には、通信部210は、有線通信するための通信線が接続されるコネクタ等により実現されてもよい。
The
制御部220は、端末200が実行する各種処理を行う処理部である。制御部220は、例えば、メモリと、当該メモリに記憶された制御プログラムと、当該制御プログラムを実行するCPU等のプロセッサとから実現される。
The
記憶部230は、端末200が用いる情報が記憶される記憶装置である。記憶部230は、例えば、HDD、又は、フラッシュメモリ等により実現される。
The
撮影部240は、料理を撮影することで当該料理を含む画像を生成するカメラである。制御部220は、撮影部240によって生成された画像を、通信部210を介して情報提供装置100に送信する。
The photographing unit 240 is a camera that photographs a dish to generate an image including the dish. The
なお、制御部220は、当該画像を、例えば当該画像が生成された日時を示す日時情報と紐付けて記憶部230に記憶させてもよい。また、制御部220は、複数の画像を例えばそれぞれに紐付けられた日時情報、並びに、ユーザの氏名等のユーザを固有に示すユーザ名情報及びユーザに関する付帯情報等を含むユーザ情報とともに通信部210を介して情報提供装置100に送信してもよい。
The
操作部250は、ユーザの操作を受け付けるユーザインターフェースである。例えば、制御部220は、操作部250が撮影部240を動作させる入力を受け付けた場合に、撮影部240に料理を撮影させる。また、制御部220は、例えば、操作部250が、ユーザ情報を受け付けた場合に、ユーザ情報を記憶部230に記憶させたり、ユーザ情報を通信部210を介して情報提供装置100に送信する。また、例えば、制御部220は、ユーザがインターネット等を利用して料理のレシピを閲覧した場合に、閲覧履歴情報を記憶部230に記憶させたり、閲覧履歴情報を通信部210を介して情報提供装置100に送信する。本実施の形態では、操作部250は、表示部260とともにタッチパネルディスプレイとして実現される。
The
表示部260は、画像を表示するディスプレイである。管理者は、例えば、料理情報を確認して、ユーザに対して食事指導を行う。具体的に例えば、管理者は、入力装置330を操作して、ユーザの食事の良し悪し、又は、改善点等を示す通知情報を作成し、情報提供装置100に当該通知情報を端末200へ送信させる。制御部220は、通信部210を介して通知情報を取得した場合に、表示部260に通知情報を表示させる。
The display unit 260 is a display that displays images. The administrator, for example, checks the cooking information and provides dietary advice to the user. Specifically, for example, the administrator operates the
なお、操作部250及び表示部260は、通知装置320及び入力装置330のように別体で実現されてもよい。
The
また、例えば、情報提供装置100は、料理情報及び付帯情報に基づいて、画像に含まれる料理に対する評価を行い、評価結果を通知情報として端末200に送信してもよい。
For example, the
[処理手順]
続いて、情報提供装置100及び情報提供システム300が実行する処理手順について説明する。
[Processing Procedure]
Next, a process performed by the
<情報提供装置>
図5は、実施の形態に係る情報提供装置100の処理手順を示すフローチャートである。
<Information Providing Device>
FIG. 5 is a flowchart showing a processing procedure of the
まず、取得部120は、例えば、画像とレシピ情報を含む閲覧履歴情報とを取得する(S110)。取得部120は、例えば、通信部110を介して端末200から画像と閲覧履歴情報とを取得する。
First, the
なお、例えば、記憶部160に画像及び閲覧履歴情報が記憶されている場合には、取得部120は、記憶部160から画像及び閲覧履歴情報を取得してもよい。
For example, if images and browsing history information are stored in the
次に、抽出部130は、画像に含まれる料理を抽出する(S120)。
Next, the
次に、決定部140は、閲覧履歴情報に基づいて、抽出部130が抽出した料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する(S130)。
Next, the
次に、出力部150は、決定部140が決定した1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。
Next, the
<情報提供システム>
図6は、実施の形態に係る情報提供システム300の処理手順を示すシーケンス図である。なお、図6に示す情報提供装置100の処理手順では、図5に示す情報提供装置100の処理手順に対して一具体例を追加及び/又は変更して説明している。
<Information provision system>
Fig. 6 is a sequence diagram showing a processing procedure of the
まず、端末200は、例えばユーザの入力を操作部250で受け付けることで付帯情報を取得する(S210)。例えば、制御部220は、操作部250を介して受け付けた付帯情報を記憶部230に記憶させる。
First, the terminal 200 acquires additional information, for example, by receiving a user's input via the operation unit 250 (S210). For example, the
次に、端末200は、例えばユーザの入力を操作部250で受け付けることで閲覧履歴情報を取得する(S220)。例えば、制御部220は、操作部250を介して受け付けた閲覧履歴情報を記憶部230に記憶させる。
Next, the terminal 200 acquires browsing history information, for example, by receiving a user input via the operation unit 250 (S220). For example, the
次に、端末200は、ユーザに操作されて料理を撮影することで、当該料理を含む画像を生成する(S230)。例えば、制御部220は、撮影部240によって生成された画像を記憶部230に記憶させる。
Next, the terminal 200 generates an image including the food by photographing the food in response to a user's operation (S230). For example, the
次に、端末200は、ユーザから画像等の情報の送信指示を受け付けた場合、画像、閲覧履歴情報、及び、付帯情報を情報提供装置100に送信する(S240)。 Next, when the terminal 200 receives an instruction from the user to transmit information such as an image, it transmits the image, browsing history information, and additional information to the information providing device 100 (S240).
なお、端末200は、画像、閲覧履歴情報、及び、付帯情報をそれぞれ異なるタイミングで情報提供装置100に送信してもよい。
The terminal 200 may transmit the image, the browsing history information, and the additional information to the
取得部120は、例えば、通信部110を介して端末200から画像と、閲覧履歴情報と、付帯情報とを取得する(S111)。
The
次に、抽出部130は、画像に含まれる料理を抽出する(S120)。
Next, the
次に、決定部140は、閲覧履歴情報と付帯情報とに基づいて、抽出部130が抽出した料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する(S131)。
Next, the
次に、出力部150は、決定部140が決定した1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。
Next, the
次に、例えば情報提供装置100は、入力装置330を介して管理者からの入力を受け付けることで、通知情報を生成する(S150)。
Next, for example, the
次に、例えば情報提供装置100は、生成した通知情報を端末200に送信する(S160)。
Next, for example, the
次に、制御部220は、通知情報を通信部210を介して情報提供装置100から受信した場合、当該通知情報を表示部260に表示させる(S250)。
Next, when the
[効果等]
以上のように、実施の形態に係る情報提供装置100は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得する取得部120と、当該画像に含まれる料理を抽出する抽出部130と、閲覧履歴情報に基づいて、当該画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定する決定部140と、当該1以上の候補それぞれの優先度に基づいて、当該1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部150と、を備える。
[Effects, etc.]
As described above, the
これによれば、画像解析結果だけでなく、レシピ情報に基づいて、候補の優先度が決定される。したがって、画像から分かるような見た目による判断だけでなく、ユーザの過去の行動が料理の候補の優先度の決定に反映され得る。そのため、画像に含まれる料理の候補を精度よく決定できる。 This allows the priority of candidates to be determined based on recipe information, not just image analysis results. Therefore, the user's past behavior can be reflected in determining the priority of candidate dishes, not just based on appearance as can be seen from the image. This allows the candidate dishes contained in the image to be determined with high accuracy.
また、例えば、取得部120は、さらに、ユーザの属性を示す属性情報、及び、前記ユーザの状態を示す状態情報の少なくとも一方を含む付帯情報を取得する。また、例えば、決定部140は、閲覧履歴情報と属性情報とに基づいて、当該1以上の候補それぞれの優先度を決定する。
For example, the
これによれば、さらに付帯情報に基づいて、候補の優先度が決定される。したがって、画像から分かるような見た目による判断だけでなく、付帯情報、つまり、ユーザの特徴及び/又は個性等が料理の候補の優先度の決定に反映され得る。そのため、画像に含まれる料理の候補をさらに精度よく決定できる。 This allows the priority of the candidates to be determined further based on the accompanying information. Therefore, in addition to judging based on appearance as can be seen from the image, the accompanying information, i.e., the characteristics and/or personality of the user, can be reflected in determining the priority of the candidate dishes. This allows the candidate dishes included in the image to be determined with even greater accuracy.
また、例えば、閲覧履歴情報は、1以上の料理のレシピのそれぞれがユーザに閲覧されたタイミングを示すタイミング情報を含む。また、例えば、決定部140は、1以上の候補の中から、1以上の料理のレシピのうち、撮影部240が料理を撮影することで画像を生成したタイミングから所定の期間内にユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、当該1以上の候補それぞれの優先度を決定する。
For example, the browsing history information also includes timing information indicating the timing at which each of the one or more recipes was viewed by the user. For example, the
これによれば、所定の期間が適切に設定されることで、例えば料理が撮影されたタイミングに対してユーザが非常に古くに閲覧された料理のレシピ等の、当該料理の候補の優先度を決定するにはあまり影響がないと考えられ得るレシピ情報を適切に排除できる。言い換えると、タイミング情報を用いられることで、当該料理の候補の優先度を決定するために影響が大きいと考えられ得るレシピ情報を適切に選択して優先度が決定され得る。そのため、画像に含まれる料理の候補をさらに精度よく決定できる。 By appropriately setting the specified period, it is possible to appropriately eliminate recipe information that may not have much influence on determining the priority of the candidate dishes, such as a recipe for a dish that was viewed by the user a very long time ago relative to the timing when the dish was photographed. In other words, by using timing information, recipe information that may have a large influence on determining the priority of the candidate dishes can be appropriately selected and the priority determined. This makes it possible to more accurately determine the candidate dishes included in the image.
また、実施の形態に係る情報提供システム300は、情報提供装置100と、端末200と、を備え、端末200は、料理を撮影することで画像を生成する撮影部240と、当該画像を情報提供装置100に送信するための通信部210と、を備える。
The
また、実施の形態に係る情報提供方法は、画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得し(S110)、当該画像に含まれる料理を抽出し(S120)、閲覧履歴情報に基づいて、当該画像に含まれる料理の1以上の候補と、当該1以上の候補それぞれの優先度とを決定し(S130)、当該1以上の候補それぞれの優先度に基づいて、当該1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する(S140)。 In addition, the information provision method according to the embodiment acquires an image and browsing history information including recipe information showing recipes for one or more dishes viewed by the user (S110), extracts dishes included in the image (S120), determines one or more candidates for the dishes included in the image and a priority for each of the one or more candidates based on the browsing history information (S130), and preferentially outputs information relating to candidates with higher priority among the one or more candidates based on the priority for each of the one or more candidates (S140).
また、実施の形態に係るプログラムは、実施の形態に係る情報提供方法をコンピュータに実行させるためのプログラムである。 The program according to the embodiment is a program for causing a computer to execute the information provision method according to the embodiment.
これらによれば、上記情報提供装置100と同様の効果を奏する。
These provide the same effects as the
(その他の実施の形態)
以上、本開示に係る情報提供装置等について、実施の形態に基づいて説明したが、本開示は、上記実施の形態に限定されるものではない。
(Other embodiments)
While the information providing device and the like according to the present disclosure have been described above based on the embodiments, the present disclosure is not limited to the above-described embodiments.
例えば、情報提供システム300は、複数の機器により実現されてもよいし、1つの機器で実現されてもよい。具体的には、上記実施の形態では、情報提供システム300は、情報提供装置100と、端末200と、を備える例を示したが、本開示に係る情報提供システムは、情報端末等の単一の装置として実現されてもよいし、複数の装置によって実現されてもよい。例えば、情報提供システムは、クライアントサーバシステムとして実現されてもよい。情報提供システムが複数の装置によって実現される場合、上記実施の形態で説明された情報提供システムが備える構成要素は、複数の装置にどのように振り分けられてもよい。
For example, the
また、例えば、上記実施の形態において、特定の処理部が実行する処理を別の処理部が実行してもよい。また、複数の処理の順序が変更されてもよいし、複数の処理が並行して実行されてもよい。 For example, in the above embodiment, the processing performed by a specific processing unit may be executed by another processing unit. Also, the order of multiple processes may be changed, or multiple processes may be executed in parallel.
また、例えば、上記実施の形態において、情報提供装置100が備える取得部120、抽出部130等の処理部の構成要素の全部又は一部は、専用のハードウェアで構成されてもよく、或いは、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPU(Central Processing Unit)又はプロセッサ等のプログラム実行部が、HDD又は半導体メモリ等の記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
In addition, for example, in the above embodiment, all or part of the components of the processing units such as the
また、例えば、上記処理部の構成要素は、1つ又は複数の電子回路で構成されてもよい。1つ又は複数の電子回路は、それぞれ、汎用的な回路でもよいし、専用の回路でもよい。 Furthermore, for example, the components of the processing unit may be composed of one or more electronic circuits. Each of the one or more electronic circuits may be a general-purpose circuit or a dedicated circuit.
1つ又は複数の電子回路には、例えば、半導体装置、IC(Integrated Circuit)又はLSI(Large Scale Integration)等が含まれてもよい。IC又はLSIは、1つのチップに集積されてもよく、複数のチップに集積されてもよい。ここでは、IC又はLSIと呼んでいるが、集積の度合いによって呼び方が変わり、システムLSI、VLSI(Very Large Scale Integration)、又は、ULSI(Ultra Large Scale Integration)と呼ばれるかもしれない。また、LSIの製造後にプログラムされるFPGA(Field Programmable Gate Array)も同じ目的で使うことができる。 The one or more electronic circuits may include, for example, a semiconductor device, an integrated circuit (IC), or a large scale integration (LSI). The IC or LSI may be integrated into one chip or into multiple chips. Here, we refer to it as an IC or an LSI, but depending on the degree of integration, it may be called a system LSI, a very large scale integration (VLSI), or an ultra large scale integration (ULSI). Also, a field programmable gate array (FPGA) that is programmed after the LSI is manufactured can be used for the same purpose.
また、本開示の全般的又は具体的な態様は、システム、装置、方法、集積回路又はコンピュータプログラムで実現されてもよい。或いは、当該コンピュータプログラムが記憶された光学ディスク、HDD若しくは半導体メモリ等のコンピュータ読み取り可能な非一時的な記録媒体で実現されてもよい。また、システム、装置、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。 The general or specific aspects of the present disclosure may be realized as a system, an apparatus, a method, an integrated circuit, or a computer program. Alternatively, the invention may be realized as a computer-readable non-transitory recording medium, such as an optical disk, a HDD, or a semiconductor memory, on which the computer program is stored. The invention may also be realized as any combination of a system, an apparatus, a method, an integrated circuit, a computer program, and a recording medium.
その他、本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本開示の範囲内に含まれる。 In addition, various modifications conceivable by those skilled in the art to this embodiment and configurations constructed by combining components of different embodiments are also included within the scope of this disclosure, so long as they do not deviate from the spirit of this disclosure.
本開示は、端末と通信するコンピュータ等に適用できる。 This disclosure can be applied to computers and other devices that communicate with terminals.
100 情報提供装置
110、210 通信部
120 取得部
130 抽出部
140 決定部
150 出力部
160、230 記憶部
200 端末
220 制御部
240 撮影部
250 操作部
260 表示部
300 情報提供システム
310 ネットワーク
320 通知装置
330 入力装置
340 画像
M1、M2、M3、M4、M5、M6、M7 料理画像
REFERENCE SIGNS
Claims (6)
前記画像に含まれる料理を抽出する抽出部と、
前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定する決定部と、
前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する出力部と、を備える
情報提供装置。 an acquisition unit that acquires images and browsing history information including recipe information indicating one or more recipes of dishes that the user has browsed;
An extraction unit that extracts a dish included in the image;
A determination unit that determines one or more candidates for a dish included in the image and a priority of each of the one or more candidates based on the browsing history information;
an output unit that outputs information relating to a candidate with a high priority among the one or more candidates based on a priority of each of the one or more candidates.
前記決定部は、前記閲覧履歴情報と前記付帯情報とに基づいて、前記1以上の候補それぞれの優先度を決定する
請求項1に記載の情報提供装置。 The acquisition unit further acquires supplementary information including at least one of attribute information indicating an attribute of the user and status information indicating a status of the user;
The information providing device according to claim 1 , wherein the determining unit determines a priority of each of the one or more candidates based on the browsing history information and the additional information.
前記決定部は、前記1以上の候補の中から、前記1以上の料理のレシピのうち、撮影部が料理を撮影することで前記画像を生成したタイミングから所定の期間内に前記ユーザが閲覧した料理のレシピで作成される料理の候補の優先度を上げるように、前記1以上の候補それぞれの優先度を決定する
請求項1又は2に記載の情報提供装置。 The browsing history information includes timing information indicating a time when each of the one or more recipes was viewed by the user,
The information providing device according to claim 1 or 2, wherein the determination unit determines a priority of each of the one or more candidates so as to increase the priority of a candidate dish that is created using a recipe for a dish that the user has viewed within a predetermined period of time from the time when the image was generated by a photographing unit of the dish, among the one or more candidates.
端末と、を備え、
前記端末は、
料理を撮影することで前記画像を生成する撮影部と、
前記画像を前記情報提供装置に送信するための通信部と、を備える
情報提供システム。 An information providing device according to any one of claims 1 to 3;
A terminal,
The terminal includes:
An image capturing unit that captures an image of a dish to generate the image;
a communication unit for transmitting the image to the information providing device.
画像と、ユーザが閲覧した1以上の料理のレシピを示すレシピ情報を含む閲覧履歴情報とを取得し、
前記画像に含まれる料理を抽出し、
前記閲覧履歴情報に基づいて、前記画像に含まれる料理の1以上の候補と、前記1以上の候補それぞれの優先度とを決定し、
前記1以上の候補それぞれの優先度に基づいて、前記1以上の候補のうちの優先度の高い候補に関する情報を優先して出力する
情報提供方法。 The computer
Acquire the image and browsing history information including recipe information indicating one or more recipes of dishes browsed by the user;
Extracting the food contained in the image;
determining one or more candidates for a dish included in the image and a priority of each of the one or more candidates based on the browsing history information;
an information providing method for preferentially outputting information about a candidate having a higher priority among the one or more candidates based on a priority of each of the one or more candidates.
プログラム。 A program for causing a computer to execute the information providing method according to claim 5.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022051779A JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022051779A JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023144678A JP2023144678A (en) | 2023-10-11 |
JP7478961B2 true JP7478961B2 (en) | 2024-05-08 |
Family
ID=88253159
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022051779A Active JP7478961B2 (en) | 2022-03-28 | 2022-03-28 | Information provision device, information provision system, information provision method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7478961B2 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015018506A (en) | 2013-07-12 | 2015-01-29 | 東芝テック株式会社 | Commodity recognition device and commodity recognition program |
WO2020193391A1 (en) | 2019-03-28 | 2020-10-01 | Koninklijke Philips N.V. | An apparatus and method for performing image-based dish recognition |
-
2022
- 2022-03-28 JP JP2022051779A patent/JP7478961B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015018506A (en) | 2013-07-12 | 2015-01-29 | 東芝テック株式会社 | Commodity recognition device and commodity recognition program |
WO2020193391A1 (en) | 2019-03-28 | 2020-10-01 | Koninklijke Philips N.V. | An apparatus and method for performing image-based dish recognition |
Also Published As
Publication number | Publication date |
---|---|
JP2023144678A (en) | 2023-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Hassannejad et al. | Automatic diet monitoring: a review of computer vision and wearable sensor-based methods | |
US20200066181A1 (en) | Generating Personalized Food Recommendations from Different Food Sources | |
US9008390B2 (en) | Similar case searching apparatus, relevance database generating apparatus, similar case searching method, and relevance database generating method | |
CN109426834B (en) | Information processing apparatus, information processing method, and information processing system | |
JP2020181491A (en) | System, program, and method | |
US20220121705A1 (en) | Multi-Resolution Color-Based Image Search | |
CN107851183A (en) | System and method for providing recipe | |
US11176378B2 (en) | Image processing device, image processing method,program, and recording medium | |
Sudo et al. | Machine learning–based screening of healthy meals from image analysis: System development and pilot study | |
JP7478961B2 (en) | Information provision device, information provision system, information provision method, and program | |
JP2018049584A (en) | Meal size estimation program, meal size estimation method, and meal size estimation apparatus | |
JP2013029877A (en) | Data management system, data management method and program | |
JP7361358B2 (en) | Recipe extraction device, recipe extraction method, and program | |
KR102553562B1 (en) | Apparatus and method for predicting risk of breast cancer | |
KR20220052046A (en) | Method and Apparatus of Analyzing Eating Habits by User | |
US11210829B2 (en) | Image processing device, image processing method, program, and recording medium | |
US20200092484A1 (en) | Image display control apparatus, image display control method, program, and recording medium | |
WO2023162822A1 (en) | Information provision device, information provision system, information provision method, and program | |
EP3948650A1 (en) | An apparatus and method for performing image-based dish recognition | |
KR102632213B1 (en) | Nft registration system and method of recipe | |
KR20180110754A (en) | Method for providing food information based on food suitability and apparatus using the method | |
WO2024122536A1 (en) | Postprandial hyperglycemia type determination device, postprandial hyperglycemia type determination method, and program | |
EP4235560A1 (en) | Food information input method and apparatus | |
KR102354702B1 (en) | Urine test method using deep learning | |
US20240145068A1 (en) | Medical image analysis platform and associated methods |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240123 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240304 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240319 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240408 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7478961 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |