JP2023119226A - 飲食品情報提供方法 - Google Patents

Abstract

【課題】飲食品店で提供される飲食品についての詳細な情報をユーザに提供する飲食品情報提供方法を提供する。【解決手段】飲食品情報を提供するシステム１において、管理サーバ１０は、飲食品店が展示している飲食品それぞれの食品模型を撮影した画像と、その食品模型が模している飲食品を識別する飲食品ＩＤを付した画像を学習データとした機械学習により学習済みモデルを生成し、飲食品毎に飲食品情報を飲食品ＩＤと関連付けたデータベースとして記憶しておく。そして、飲食品店で展示されている食品模型をユーザ端末３０のカメラで撮影したユーザ撮影画像を、インターネットＮを介して学習済みモデルに入力することにより、撮影対象の食品模型に対応すると推定される飲食品ＩＤを学習済みモデルから出力させ、出力された飲食品ＩＤに関連付けられている飲食品情報をデータベースから抽出してユーザ端末３０に提供する。【選択図】図１

Description

本発明は、レストラン等の飲食品店で提供される飲食品に関する情報をユーザに提供するための飲食品情報提供方法に関するものである。

近年、飲食品に対して安全性や安心感を求める人が増えている。そのため、レストラン等の飲食品店で提供される飲食品について、その材料（食材）や産地を知りたいという要請がある。また、食物アレルギー疾患を有している人にとっては、アレルギー症状を引き起こす原因となるアレルゲンが飲食品に含まれているか否かの情報は、非常に重要である。また、宗教上の理由により、特定の食材を食べることができなかったり、所定の処理・調理を経た飲食品しか許容されていなかったりする人もあり、そのような人にとっては、飲食品店で提供される飲食品がその条件を満たしているかどうかの情報は、非常に重要である。

しかしながら、飲食品店で提供される飲食品に関して、上記のような詳細な情報を得ることは難しいのが実情である。

そこで、本発明は、上記の実情に鑑み、飲食品店で提供される飲食品についての詳細な情報を、ユーザに提供することができる飲食品情報提供方法の提供を、課題とするものである。

上記の課題を解決するため、本発明にかかる飲食品情報提供方法は、
「飲食品店は、提供する複数種類の飲食品それぞれの外観を非食材料で模した複数種類の食品模型を展示しており、
前記食品模型それぞれをカメラで撮影した静止画像に、その食品模型が模している前記飲食品を識別する飲食品ＩＤを付した画像を学習データとした機械学習により、学習済みモデルを生成しておくと共に、
前記飲食品ごとに、その飲食品に使用されている材料の少なくとも種類を示す食材情報、及び、前記材料に含有されているアレルゲンに関するアレルゲン情報の少なくとも何れかを含む飲食品情報を、前記飲食品ＩＤと関連付けたデータベースとして店舗サーバに記憶させておき、
前記飲食品店で展示されている前記食品模型の一つを、ユーザが携帯するユーザ端末が備えているカメラで撮影したユーザ撮影画像を、インターネットを介して前記学習済みモデルに入力することにより、前記ユーザ撮影画像の撮影対象である前記食品模型が模している前記飲食品に対応すると推定される前記飲食品ＩＤを、前記学習済みモデルから出力させ、
出力された前記飲食品ＩＤに関連付けられている前記飲食品情報を前記データベースから抽出し、前記店舗サーバを介して前記ユーザに提供する」ものである。

「飲食品店」としては、レストラン、喫茶店、複合商業施設のフードコートなどの飲食店を、例示することができる。また、菓子店、百貨店やスーパーの食料品売り場では、例えば、商品（飲食品）の外観からは分からない内部の様子を示すために、食品模型を展示していることがあるが、そのような店舗も本発明の「飲食品店」に該当する。つまり、飲食品を提供・販売する店舗であって、食品模型を展示している店舗は、本発明の「飲食品店」に該当する。なお、「飲食品に使用されている材料の少なくとも種類を示す食材情報」には、材料の種類に加えて、材料の産地に関する情報を含めることができる。

本方法によれば、飲食品店で展示されている食品模型をユーザ端末のカメラで撮影したユーザ撮影画像を、インターネットを介して学習済みモデルに入力するだけで、ユーザは店舗サーバを介して、食材情報及びアレルゲン情報の少なくとも何れかである飲食品情報の提供を、受けることができる。これらの飲食品情報は、従来の飲食品店では取得しにくかった情報であり、飲食品に高い安全性、安心感を求めるユーザの要請にかなっている。

また、従来でも、料理（飲食品）の材料等に関する情報を付記したメニュー（献立表）を店内に備えているレストラン等は存在したところ、入店後に自分が望む飲食品がないことが分かったとしても、注文をすることなく飲食品店を出てくることを躊躇する人も多かった。これに対し、本発明の飲食品情報提供方法によれば、飲食品店の店頭に食品模型が展示されている場合に、飲食品店で提供される飲食品に関する詳細な飲食品情報を、店外で得ることができる。

また、飲食品の特定のために食品模型を撮影するという作業は、ユーザにとって、文字入力によって情報を検索するような作業などと比べて、楽しく且つ斬新な作業である。そのため、ユーザの興味を引きやすく、有益な情報を楽しみながら取得できる利点がある。

以上のように、本発明によれば、飲食品店で提供される飲食品についての詳細な情報を、ユーザに提供することができる飲食品情報提供方法を、提供することができる。

本発明の一実施形態である飲食品情報提供方法を使用する飲食品情報提供システムの概略構成図である。 食品模型をユーザ端末のカメラで撮影したユーザ撮影画像の送信に関する説明図である。 候補飲食品情報を表示したユーザ端末の画面の説明図である。 ユーザ端末の飲食品情報選択画面の説明図である。 食材情報を表示したユーザ端末の画面の説明図である。 アレルゲンの一覧表を表示したユーザ端末の画面の説明図である。 図１とは異なる構成の飲食品情報提供システムの概略構成図である。

以下、本発明の一実施形態である飲食品情報提供方法、及び、この方法を使用する飲食品情報提供システム１について、図面を用いて説明する。飲食品情報提供システム１（以下、単に「システム１」と称することがある）は、図１に示すように、システム運営者が管理する管理サーバ１０と、レストラン等の飲食品店の端末、或いは、このシステム１に関する作業を飲食品店から委託された代理店やサービス請負業者である代理者が使用する端末である店舗側端末２０と、飲食品店の利用を考慮しているユーザが携帯しているユーザ端末３０と、を備えている。管理サーバ１０、店舗側端末２０、及び、ユーザ端末３０は、インターネットＮを介して接続されている。

管理サーバ１０は、主記憶装置及び補助記憶装置からなる記憶装置と、プロセッサと、インターネットＮを介して通信を行う通信装置と、を主に具備するコンピュータである。管理サーバ１０の記憶装置には、システム管理手段としてコンピュータを機能させるプログラムが記憶されている。管理サーバ１０は、システム１の全体を管理するための総合管理サーバ１１と、飲食品店ごとに割り当てられた店舗サーバ１２と、機械学習及び画像認識のための学習サーバ１３とを備えており、システム管理手段は、総合管理サーバ１１における情報処理を行う総合管理手段と、店舗サーバ１２ごとに情報処理を行う個別管理手段と、学習サーバ１３における情報処理を行う学習管理手段と、を備えている。

ユーザ端末３０は、スマートフォンやタブレット端末に例示される携帯型端末であり、主記憶装置及び補助記憶装置からなる記憶装置と、プロセッサと、インターネットＮを介して通信を行う通信装置と、画面表示を指やスタイラスペンで押すことにより入力を行うことができるモニタと、カメラと、を備えている。

店舗側端末２０は、携帯型端末であっても、デスクトップパソコンなどの非携帯型端末であってもよい。携帯型端末である場合は、上記のユーザ端末３０と同一の構成とすることができる。非携帯型端末の場合は、主記憶装置及び補助記憶装置からなる記憶装置と、プロセッサと、インターネットＮを介して通信を行う通信装置と、モニタやプリンタ等の出力装置と、キーボードやポインティングデバイス等の入力装置と、を備える構成とすることができる。

次に、本実施形態の飲食品情報提供方法における処理の流れを説明する。

＜飲食品店登録、ＵＲＬの割り当て＞
まず、このシステム１を利用したい飲食品店（契約申請者）またはその代理者は、管理サーバ１０が運営しているＷＥＢサイトにアクセスする。このときのＷＥＢサイトは、総合管理サーバ１１が提供しているＷＥＢサイトである。このＷＥＢサイトの画面にて、飲食品店の名称、住所、電話番号、電子メールアドレス、ログインアカウント、ログインパスワード、その飲食品店に関する情報を管理する担当者名など、契約申請者に関する情報を入力することにより、契約の申請を行う。

申請を受けた総合管理サーバ１１の総合管理手段は、この飲食品店に店舗ＩＤを付与し、入力された上記の情報とこの店舗ＩＤとを関連付けたデータベースを、店舗基本データベースとして、記憶装置における総合管理サーバ１１用の記憶領域に記憶する。その際、総合管理手段は、店舗サーバ１２をひとつ複製し、この飲食品店に割り当てる。店舗サーバ１２の個別管理手段は、その飲食品店の担当者に接続させる店舗管理ＷＥＢサイトと、その飲食品店を利用しようとしているユーザに接続させるユーザ向けＷＥＢサイトを、それぞれ提供するための手段を有しており、これらのＷＥＢサイトそれぞれにＵＲＬが割り当てられる。総合管理手段は、これらのＷＥＢサイトそれぞれのＵＲＬを、店舗ＩＤと関連付けて店舗基本データベースに記憶する。店舗基本データベースには、店舗の住所に加え、店舗の所在地の緯度・経度情報を含めることができる。

総合管理手段は、新規契約者である飲食品店の電子メールアドレス宛に、店舗管理ＷＥＢサイトのＵＲＬを通知する。店舗管理ＷＥＢサイトは、飲食品店ごとに個別に割り当てられたＷＥＢサイトであるため、このシステム１の契約者であっても、他の飲食品店の店舗管理ＷＥＢサイトには接続することができない。

＜飲食品情報の登録＞
各飲食品店またはその代理者の担当者は、通知されたＵＲＬで自己に割り当てられた店舗管理ＷＥＢサイトにアクセスし、ログインアカウント、ログインパスワードを入力することによりログインする。店舗管理ＷＥＢサイトの画面には、飲食品情報管理表が表示されるため、そこに飲食品情報を入力する。飲食品情報は、その飲食品店で提供される飲食品ごとに登録される飲食品単位情報と、その飲食品店の全体に関して登録される店舗単位情報とがある。

飲食品単位情報としては、飲食品の名称（メニューに記載されている料理の名称、或いは販売される商品の名称）、その名称のふり仮名を含む飲食品基本情報（１）、飲食品に使用されている材料の種類、及びその材料の産地を含む食材情報（２）、飲食品に使用されている材料が含有しているアレルゲンに関するアレルゲン情報（３）、を挙げることができる。

飲食品基本情報（１）には、その飲食品の実物をカメラで撮影した画像である実物画像８０ｄ、その飲食品の総カロリー、その飲食品に関して店舗側が用意した説明文、を含めることができる。食材情報（２）には、その飲食品がハラルフード（イスラム教で食べることが許されている食物）に該当するかなど、特定の宗教で許容されている食物に該当するか否かの情報を含めることができる。アレルゲン情報（３）は、表示を義務付けるアレルゲンと表示を推奨するアレルゲンに分けることができ、それぞれ予め設定された項目から選択式に入力する形式とすることができる。

また、飲食品単位情報には、その飲食品が調理されている様子を撮影した動画像など、その飲食品に関する動画情報（４）を含めることができる。（１）～（４）に例示される飲食品単位情報は、店舗ＩＤ、及び、その飲食品店で提供される飲食品ごとに付与される飲食品ＩＤと関連付けられたデータベースとして、管理サーバ１０の記憶装置において店舗サーバ１２用の記憶領域に記憶される。

店舗単位情報としては、その飲食品店で提供される飲食品を、注文数の多い順に並べたランキング情報（５）、飲食品が調理される厨房の様子や、飲食品の提供が行われる客席の様子を撮影した静止画像や動画像による飲食品提供環境情報（６）、を挙げることができる。店舗単位情報は、店舗ＩＤと関連付けられたデータベースとして、店舗サーバ１２用の記憶領域に記憶される。

＜食品模型を撮影した画像の機械学習＞
システム１の契約者である飲食品店は、その飲食品店で提供される飲食品について、その外観や断面を樹脂などの非食材料で模した食品模型を有しており、店頭の陳列棚に食品模型を展示している。或いは、システム１の契約に当たり、新たに食品模型を製造する。例えば、飲食品である料理の複数について、主菜の外観が近似している場合は、副菜の種類や配置を異ならせるなどによって、料理全体として外観上の相違を大きくした上で、これを模した食品模型を製造することが望ましい。

各飲食品店またはその代理者は、その飲食品店で提供される飲食品ごとに、それを模した食品模型をカメラで撮影し、静止画像を取得する。食品模型の静止画像は、機械学習のための教師画像とするものである。教師画像としては、その飲食品店の店頭に設置された陳列棚の前に立った撮影者が、陳列棚にある食品模型を撮影した場合と同等の条件で撮影された画像に加え、周囲の明るさ等の撮影条件が異なる複数種類の教師画像を取得することが望ましい。また、ある食品模型の教師画像として、撮影する角度が少しずつ相違する複数種類の教師画像や、撮影対象である食品模型の画像が静止画像の全範囲に占める割合や位置が、少しずつ相違する複数種類の教師画像を取得することが望ましい。

飲食品店側の担当者は、その飲食品店に割り当てられている店舗管理ＷＥＢサイトに店舗側端末２０から接続し、機械学習登録用のページで、学習用データと検証用データの作成及び登録を行う。学習用データは、上記の教師画像に、その撮影対象の食品模型が模している飲食品の飲食品ＩＤを付したものである。検証用データは、飲食品ＩＤが付されていない教師画像である。店舗側端末２０から教師画像を店舗管理ＷＥＢサイトに送信し、機械学習登録用のページ上で、教師画像を飲食品ＩＤと関連付けて学習用データとする作業、及び、教師画像を飲食品ＩＤと関連付けることなく検証用データとする作業を行うことにより、学習用データを複数含む学習用データファイル、及び、検証用データを複数含む検証用データファイルが、それぞれ作成される。この作業を、飲食品ごとに行う。すなわち、学習用データファイル及び検証用データファイルは、飲食品ＩＤと関連付けて作成される。上述したように、個々の検証用データには飲食品ＩＤが付されていないが、検証用データファイルは飲食品ＩＤと関連付けられている。

その後、店舗管理ＷＥＢサイトの画面において、機械学習の開始を指示するボタンを押すと、学習用データファイル及び検証用データファイルが、店舗ＩＤと共に学習サーバ１３に送信され、学習サーバ１３用の記憶領域に記憶される。

学習サーバ１３の学習管理手段は、飲食品ＩＤが付された教師画像である学習データを使用し、ニューラルネットワークによる機械学習を所定時間行い、学習済みモデルを生成する。更に、生成された学習済みモデルに、飲食品ＩＤが付されていない検証用データを入力することにより、推定される飲食品ＩＤを出力させ、出力された飲食品ＩＤが正しい飲食品ＩＤ（検証用データファイルが関連付けられている飲食品ＩＤ）となる確率が高まるように、ニューロン間の重み係数が調整される。

このようにして生成された学習済みモデルは、学習用データファイル及び検証用データファイルに関連付けられていた店舗ＩＤと関連付けられて、学習サーバ１３用の記憶領域に記憶される。

＜ユーザによるシステム利用＞
ある飲食品店を利用するかどうか思案中のユーザは、店頭に設置された食品模型の陳列棚を見るのが一般的である。陳列棚には、食品模型をユーザ端末３０のカメラで撮影すると、その飲食品についての情報が得られる旨の説明と共に、管理サーバ１０が提供するＷＥＢサイトのＵＲＬをコード化した二次元コードが表示されている。ユーザは、その二次元コードをユーザ端末３０のカメラで撮影することにより、管理サーバ１０が提供しているＷＥＢサイトに接続することができる。二次元コードに、店舗ＩＤの情報が含まれている場合は、この店舗ＩＤを参照して、その店舗ＩＤが付与されている店舗サーバ１２が提供しているユーザ向けＷＥＢサイトを、ユーザ端末３０で閲覧できる状態となる。

或いは、ユーザは、種々のアプリケーションソフトをダウンロードさせるＷＥＢサイトを介して、管理サーバ１０が提供しているＷＥＢサイトに接続するためのアプリケーションソフトを、ダウンロードすることができる。また或いは、ユーザは、検索エンジンを使用することにより、管理サーバ１０が提供しているＷＥＢサイトに接続することができる。

店頭に表示された二次元コードに、管理サーバ１０が提供しているＷＥＢサイトのＵＲＬに関する情報しか含まれておらず、ユーザが利用しようか思案している店舗に関する情報が含まれていない場合や、種々のアプリケーションソフトをダウンロードさせるＷＥＢサイトから管理サーバ１０が提供しているＷＥＢサイトに接続するためのアプリケーションソフトをダウンロードしたために、ユーザが利用しようか思案している店舗に関する情報が含まれていない場合、或いは、検索エンジンを使用した検索によって管理サーバ１０が提供しているＷＥＢサイトに接続したことにより、ユーザが利用しようか思案している店舗に関する情報が含まれていない場合は、管理サーバ１０が提供しているＷＥＢサイトにおいて利用可能な店舗のリストを表示させ、その中からユーザが利用しようか思案している店舗を選択することができる。これにより、ユーザが利用しようか思案している店舗のユーザ向けＷＥＢサイトが、ユーザ端末３０で閲覧できる状態となる。或いは、ユーザ端末３０からの了承の入力に基づき、ユーザ端末３０がその時点で所在している経度・緯度に関する現在位置情報が、ユーザ端末３０から管理サーバ１０に送信されるものとすることができる。その場合、総合管理手段は、システム１の契約者である飲食品店それぞれの店舗基本データベースにおける経度・緯度情報と、ユーザ端末３０から送信された現在位置情報とを対比することにより、ユーザが利用しようか思案している飲食品店を特定し、その飲食品店に割り当てられた店舗サーバ１２が提供しているユーザ向けＷＥＢサイトを、ユーザ端末３０で閲覧できる状態とする。

ユーザ向けＷＥＢサイトでは、まず、ユーザ撮影画像８１ｄの送信を受け付けるための撮像送信用画面５１が表示される（図２を参照）。ユーザは、ユーザ端末３０が備えているカメラを食品模型８１の陳列棚９０に向け、撮像送信用画面５１において撮影対象をおさめるための範囲枠６１の内部に、注文することを考慮している飲食品を模した食品模型８１の全体が含まれるようにし、「撮影画像の送信」ボタン７１を押す。これにより、食品模型８１のユーザ撮影画像８１ｄが店舗サーバ１２に送信され、店舗ＩＤと関連付けられたユーザ撮影画像データベースとして、店舗サーバ１２用の記憶領域に記憶される。

また、ユーザ撮影画像８１ｄは、店舗ＩＤが付された状態で店舗サーバ１２から学習サーバ１３に送信され、学習サーバ１３において画像認識処理に供される。この画像認識処理は、ユーザ撮影画像８１ｄに付された店舗ＩＤと関連付けられた学習済みモデルに、ユーザ撮影画像８１ｄを入力することにより、そのユーザ撮影画像８１ｄの撮影対象である食品模型８１が模していると推定される飲食品の飲食品ＩＤを、学習済みモデルから出力させる処理である。学習済みモデルからは、ユーザ撮影画像８１ｄが対応していると推定される確率の高い順に、複数の飲食品ＩＤが出力される。ここでは、三つの飲食品ＩＤが出力される場合を例示する。

学習済みモデルから出力された飲食品ＩＤは、確率が高い順に付された順位ＩＤと共に店舗サーバ１２に送信される。個別管理手段は飲食品基本情報（１）のデータベースを参照して、飲食品ＩＤと関連付けられた飲食品の名称を抽出し、ユーザ向けＷＥＢサイトの画面に、ユーザが撮影した食品模型８１に対応する確率の高い順に、第１位から第３位まで飲食品名を表示した候補飲食品情報５２を表示させる（図３参照）。候補飲食品情報５２において各飲食品名は、その飲食品を選択できる飲食品選択ボタン７２に表示されている。また、候補飲食品情報５２が表示された画面には、ユーザ端末３０から送信されたユーザ撮影画像８１ｄを、共に表示させることができる。ここでは、ユーザ撮影画像８１ｄの撮影対象が、名称が「ＤＸハンバーグ」である飲食品の食品模型８１である確率が９９％と最も高いとして、第１位の飲食品選択ボタン７２にその名称が表示され、名称が「デミグラスハンバーグ」である飲食品の食品模型８１である確率が９７％と二番目に高いとして、第２位の飲食品選択ボタン７２にその名称が表示され、名称が「チーズハンバーグ」である確率が６７％と三番目に高いとして、第３位の飲食品選択ボタン７２にその名称が表示されている場合を例示している。

このように、複数の飲食品をリストアップすることにより、ユーザが本当に飲食したい飲食品を選択することができる。なお、ユーザ撮影画像８１ｄの撮影対象は、ほとんどの場合は第１位の飲食品選択ボタン７２にその名称が表示された飲食品であるとも考えられるが、このように複数の飲食品をリストアップすることにより、実際に食品模型８１を撮影した飲食品以外にもユーザの注意・興味が向けられるため、注文する飲食品を吟味することができる。

ユーザが、注文を考慮している飲食品の名称が表示された飲食品選択ボタン７２を選択し、これを押すと、その飲食品名の表示６２と共に、飲食品情報の種類を選択するための情報選択ボタン７３を複数備える飲食品情報選択画面５３が表示される（図４を参照）。ここでは、情報選択ボタン７３として、飲食品単位情報である食材情報（２）、アレルゲン情報（３）、及び動画情報（４）をそれぞれ選択するための情報選択ボタン７３ａ，７３ｂ，７３ｃが表示されている場合を例示している。また、ここでは、飲食品名の表示６２と共に、その飲食品の実物画像８０ｄが画面に表示されている場合を例示している。このような表示は、上述したように、飲食品基本情報（１）のデータベースに、飲食品の実物画像８０ｄのデータが飲食品ＩＤと関連付けられて記憶されている場合に可能である。

このような飲食品情報選択画面５３において、食材情報（２）の提供を選択するための情報選択ボタン７３ａを押すと、食材情報（２）のデータベースから、選択された飲食品の飲食品ＩＤと関連付けられた食材情報が抽出され、その飲食品に使用されている材料の種類と、その材料の産地が表示される。このとき、飲食品基本情報（１）のデータベースに、飲食品の実物画像８０ｄのデータが飲食品ＩＤと関連付けられて記憶されていると共に、食材情報（２）のデータベースにおいて、飲食品の実物画像８０ｄにおける材料の位置を示す座標が各材料と対応させて記憶されている場合は、図５に示すように、飲食品の実物画像８０ｄに重ね合わせて、各材料の位置に、材料ごとの食材情報である個別食材情報５４を表示させることができる。

なお、食材情報（２）のデータベースにおいて、飲食品の実物画像８０ｄおける材料の位置を示す座標を、各材料と対応させて記憶させる処理は、食材情報（２）の登録時、飲食品に使用されている材料に関する情報を入力するための入力用画面に、飲食品の実物画像８０ｄを表示させておき、材料の名称を入力する操作ごとに、飲食品の実物画像８０ｄにおいてその材料に該当する点をポインティングデバイスで特定し、その座標を関連付けることにより、行うことができる。

また、飲食品情報選択画面５３において、アレルゲン情報（３）の提供を選択するための情報選択ボタン７３ｂを押すと、アレルゲン情報（３）のデータベースから、選択された飲食品の飲食品ＩＤと関連付けられたアレルゲン情報が抽出され、その飲食品に含まれているアレルゲンの一覧表５５が表示される（図６を参照）。この表示は、アレルゲンの一覧表５５のみが画面表示されるものであってもよいが、ここでは、飲食品の実物画像８０ｄに重ね合わせて、アレルゲンの一覧表５５が表示される場合を例示している。また、ここでは、飲食品の実物画像８０ｄに重ね合わせて、アレルゲンの一覧表５５に加え、飲食品の名称を表示する飲食品名称画像６５や、キャラクター画像６６が表示される場合を例示している。

飲食品名称画像６５やキャラクター画像６６は、動画像とすることができる。また、キャラクターの発する言葉が、吹き出しの中に表示されたり、ユーザ端末３０の備えるスピーカーを介して音声出力されたりする設定とすることができる。このような飲食品名称画像６５やキャラクター画像６６のデザイン、及びキャラクターの発する言葉の文言は、予めシステム運営者側で、それぞれ複数種類を用意して管理サーバ１０にデータベースとして記憶させておくことができる。店舗側の担当者は、飲食品情報を登録するために店舗側端末２０から管理サーバ１０に接続した際に、好みのキャラクター画像６６等を選択することができる。選択されたキャラクター画像６６等は、店舗ＩＤと関連付けられたデータベースとして店舗サーバ１２用の記憶領域に記憶され、個別管理手段はこのデータベースを参照して、ユーザ向けＷＥＢサイトの表示画面を生成する。

更に、飲食品情報選択画面５３において、動画情報（４）の提供を選択するための情報選択ボタン７３ｃを押すと、動画情報（４）のデータベースから、選択された飲食品の飲食品ＩＤと関連付けられた動画情報が抽出され、その飲食品を調理している様子が撮影された動画像が再生される。

以上のように、本実施形態の飲食品情報提供方法によれば、ユーザ端末３０で管理サーバ１０に接続した後で、飲食品店の陳列棚９０の食品模型８１をユーザ端末３０のカメラで撮影するだけで、食材情報やアレルゲン情報を含む飲食品情報の提供を受けることができる。これらの飲食品情報は、従来の飲食品店では取得しにくかった情報であり、飲食品に高い安全性、安心感を求めるユーザの要請にかなっている。

また、従来でも、飲食品の材料等に関する情報を付記したメニューを店内に備えているレストラン等は存在したが、入店後に自分が望む飲食品がないことが分かったとしても、注文をすることなく飲食品店を出てくることを躊躇する人も多かった。これに対し、本実施形態の飲食品情報提供方法によれば、飲食品店で提供される飲食品に関する詳細な飲食品情報を、店外で得ることができる。

また、飲食品の特定のために食品模型８１を撮影するという作業は、ユーザにとって、文字入力によって情報を検索するような作業などと比べて、楽しく且つ斬新な作業である。そのため、ユーザの興味を引きやすく、有益な情報を楽しみながら取得できる利点がある。

加えて、ユーザ端末３０で管理サーバ１０に接続し、ユーザ向けＷＥＢサイトを閲覧する形式で飲食品情報の提供を受けるため、管理サーバ１０が提供するＷＥＢサイトに接続するためのアプリケーションのダウンロードが必要な場合はあるとしても、飲食品情報を提供するというメインのサービスの提供を受けるためのアプリケーションを、ユーザ端末３０にダウンロードする必要がない。そのため、ユーザが気楽にシステム１を利用できる利点がある。

以上、本発明について好適な実施形態を挙げて説明したが、本発明は上記の実施形態に限定されるものではなく、以下に示すように、本発明の要旨を逸脱しない範囲において、種々の改良及び設計の変更が可能である。

例えば、クッキーを使用して、ユーザがシステム１を利用した履歴を、管理サーバ１０側で把握することができる。ユーザがシステム１を利用した日時、利用した回数、利用した飲食品店、ユーザ撮影画像８１ｄの対象とした食品模型８１などの情報を、管理サーバ１０を管理するシステム運営者が把握し、把握した情報を解析して飲食品店側に提供することにより、飲食品店による飲食品の提供サービスを、ユーザの要請により沿うものとするための検討をすることができる。その場合、管理サーバ１０が提供しているＷＥＢサイトに、ユーザがユーザ端末３０から最初に接続した際に、年齢層や性別などユーザの属性に関する情報を入力してもらい、それをクッキーファイルに含めることにより、ユーザの属性ごとに、飲食品店を利用する時間帯、利用される飲食品店の種類、飲食品に関する嗜好や興味などを、解析することができる。なお、ユーザがユーザ端末３０のＷＥＢブラウザにおいてクッキーを削除した場合は、そのユーザが次に管理サーバ１０が提供しているＷＥＢサイトに接続した際に、改めて属性に関する情報の入力を求めることができる。

また、ユーザが実際に飲食品店で飲食品を注文した場合に、その情報をユーザ端末３０から管理サーバ１０に送信することにより、店舗サーバ１２からユーザ端末３０にクーポンを発行したり、ユーザに役立つ情報が送信されたりする構成とすることができる。加えて、そのユーザが撮影した食品模型８１が模している飲食品と、実際に注文した飲食品との関係を店舗サーバ１２で記録し、集計・解析することにより、飲食品店の事業に関する有益な情報とすることができる。

また上記では、飲食品情報選択画面５３で選択できる飲食品情報が、食材情報（２）、アレルゲン情報（３）、及び、動画情報（４）という飲食品単位情報のみである場合を例示した。これに限定されず、飲食品基本情報（１）に含まれる飲食品の総カロリーや、飲食品に関して飲食品店が用意した説明文を、選択できる飲食品単位情報に含めることができる。更に、飲食品単位情報に加えて、店舗単位情報であるランキング情報（５）や飲食品提供環境情報（６）を、選択できる構成とすることができる。

また、上記では、ユーザ向けＷＥＢサイトの使用言語、すなわち、ユーザ端末３０の画面に表示される言語が日本語である場合を、図を用いて例示したが、ユーザの選択により英語など他の言語が表示される構成とすることができる。日本を訪れる外国人には、飲食品店の店頭に展示された食品模型８１に興味を持つ人が非常に多い。また、外国人は日本の飲食品店で提供される飲食品に詳しくないことが多く、飲食品情報の必要性も高い。そのため、ユーザ向けＷＥＢサイトの画面表示を、日本語以外の言語で表示させることができる構成とすることにより、外国人にとって興味深い方法で、彼らにとって必要かつ有益な飲食品情報を提供することができる。

加えて、上記では、学習サーバ１３が管理サーバ１０に含まれる場合を例示した。これに限定されず、図７に示すように、学習サーバ４０が管理サーバ１０とは別個のサーバであってインターネットＮを介して接続されており、管理サーバ１０のシステム管理手段と学習サーバ４０の学習管理手段との間でデータを送受信することにより、連携して機械学習及び画像認識の処理が行われる構成のシステム１ｂとすることができる。

なお、「飲食品店で提供される飲食品」は飲食品店の店内で飲食する、いわゆるイートインためのものに限定されない。飲食品店で展示されている食品模型に対応する飲食品であれば、テイクアウト対象の飲食品も「飲食品店で提供される飲食品」に含まれる。

１ 管理サーバ
１１ 総合管理サーバ
１２ 店舗サーバ
１３，４０ 学習サーバ
８１ 食品模型
８１ｄ ユーザ撮影画像
Ｎ インターネット

Claims (1)

1. 飲食品店は、提供する複数種類の飲食品それぞれの外観を非食材料で模した複数種類の食品模型を展示しており、
   前記食品模型それぞれをカメラで撮影した静止画像に、その食品模型が模している前記飲食品を識別する飲食品ＩＤを付した画像を学習データとした機械学習により、学習済みモデルを生成しておくと共に、
   前記飲食品ごとに、その飲食品に使用されている材料の少なくとも種類を示す食材情報、及び、前記材料に含有されているアレルゲンに関するアレルゲン情報の少なくとも何れかを含む飲食品情報を、前記飲食品ＩＤと関連付けたデータベースとして店舗サーバに記憶させておき、
   前記飲食品店で展示されている前記食品模型の一つを、ユーザが携帯するユーザ端末が備えているカメラで撮影したユーザ撮影画像を、インターネットを介して前記学習済みモデルに入力することにより、前記ユーザ撮影画像の撮影対象である前記食品模型が模している前記飲食品に対応すると推定される前記飲食品ＩＤを、前記学習済みモデルから出力させ、
   出力された前記飲食品ＩＤに関連付けられている前記飲食品情報を、前記店舗サーバを介して前記ユーザに提供する
   ことを特徴とする飲食品情報提供方法。

Images