JP6704082B1 - 調理支援装置、調理支援システム、調理支援方法及び調理支援プログラム - Google Patents

Abstract

【課題】調理者の調理環境と、選択されたレシピとに基づき、調理環境に応じた適切な調理支援を可能とし、利便性の向上を図る。【解決手段】調理支援システム１０において、サーバ１０１（調理支援装置）は、レシピ情報を記憶する記憶部１１２と、ユーザの調理環境情報を所定の装置から取得する調理環境情報取得部１１３と、記憶されたレシピ情報の中からユーザが指定したレシピ情報を選択するレシピ選択部１１４と、取得した調理環境情報に応じて、選択されたレシピ情報に基づく調理手順の指示情報を生成する指示情報生成部１１５と、を備える。【選択図】図１

Description

本開示は、調理支援装置、調理支援システム、調理支援方法及び調理支援プログラムに関する。

近年、調理のレシピ情報をインターネット等のネットワークを介してユーザに提供するサービスが増えている。

例えば、特許文献１には、複数の献立（レシピ）の中から選択されたレシピについての調理手順に関連する調理関連情報をディスプレイに表示することにより、レシピに関する調理手順が不慣れな調理者（ユーザ）であっても適切に調理手順を行えるようにした調理支援装置が開示されている。

具体的には、調理者が、予定する調理内容の段階情報及び予定する調理内容の区別情報を含む調理進行判別情報を確認して、複数のレシピについての調理手順を並行して進める上で好適な調理内容を順次定めるようにしながら、その調理内容に対する調理手順を行う。これにより、調理者の調理に関する習熟度によって、複数のレシピに対する調理の終了時点が大きく異なることを抑制しつつ、複数のレシピに対する調理手順を良好に行うことができるようになっている。

特開２０１４−２１１８０２号公報

ところで、上述した従来技術は、調理工程に応じて、使用するコンロやグリル等の調理装置における火力調整や加熱時間等を自動制御可能なものであるが、コンロの数，フライパンの数，キッチンの広さ等の調理環境に関する条件を設定するものではない。

そうした調理環境に関する条件は、調理対象のレシピで想定された工程（手順）の適切な実行の可否を、大きく左右する可能性がある。つまり、レシピ内容やその難易度と調理者との相性等とは別に、よく勘案すべき条件が存在するのである。

一方で、上述の調理環境に関する条件は、調理者にとっては日常環境に関するもので、正確かつ網羅的に認識している類いのものではない。そのため、そうした条件に関する情報を、調理者から得て活用することは容易でない。調理者にとっても、自身で機器情報等の入力することが必要となれば煩雑である。結局のところ、正確な調理環境の情報が取得できないおそれにもつながる。

このため、調理環境に応じて適切な調理支援を行うことが難しく、利便性に欠ける問題がある。また、調理者の経験値（すなわち、習熟度）によっては、元々のレシピで想定された時間で調理できない問題がある。さらに、調理環境によっては、レシピで想定された工程通りに作業できない問題もある。

そこで、本開示は、上述した事情に鑑みてなされたもので、ユーザの調理環境と、選択されたレシピとに基づき、調理環境に応じた調理支援を可能とし、調理の効率化の向上を図ることができる調理支援装置、調理支援システム、調理支援方法及び調理支援プログラムを提供することを目的とする。

上記の課題を解決するために、本開示の調理支援装置は、レシピ情報を記憶する記憶部と、ユーザの調理環境情報を所定の装置から取得する調理環境情報取得部と、前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するレシピ選択部と、前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成する指示情報生成部と、を備える。

また、本開示の調理支援システムは、レシピ情報を記憶する記憶部と、ユーザの調理環境情報を所定の装置から取得する調理環境情報取得部と、ユーザが操作を行う入力部と、前記レシピ情報の中から前記ユーザが前記入力部で指定したレシピ情報を選択するレシピ選択部と、前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成する指示情報生成部と、前記生成された指示情報を表示する表示部と、を備える。

また、本開示の調理支援方法は、レシピ情報を保持する情報処理装置が、ユーザの調理環境情報を所定の装置から取得するステップと、前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するステップと、前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成するステップと、を実行する。

また、本開示の調理支援プログラムは、レシピ情報を保持する情報処理装置に、ユーザの調理環境情報を所定の装置から取得するステップと、前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するステップと、前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成するステップと、を実行させる。

本開示の調理支援装置、調理支援システム、調理支援方法及び調理支援プログラムによれば、ユーザの調理環境と、選択されたレシピとに基づき、調理環境に応じた調理支援を可能とし、調理の効率化の向上を図ることができる。

第１の実施形態に係る調理支援システムの構成を示す概略ブロック図である。 第１の実施形態に係る調理手段リストの例を示す図である。 第１の実施形態に係る仕様情報の例を示す図である。 第１の実施形態に係る調理器具の入力画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理器具の入力画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理道具の入力画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理道具の入力画面を含むユーザ端末の正面図である。 第１の実施形態に係るレシピ使用履歴の例を示す図である。 第１の実施形態に係る取得情報の例を示す図である。 第１の実施形態に係る使用材料の表示画面を含むユーザ端末の正面図である。 第１の実施形態に係る選択したレシピの調理手順の指示情報を示す表示画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理開始後の指示情報を示す表示画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理環境情報に基づく調理手順の指示情報を示す表示画面を含むユーザ端末の正面図である。 第１の実施形態に係る調理支援システムの動作について説明するためのフローチャートである。 第２の実施形態に係る調理支援システムの構成を示す概略ブロック図である。 第２の実施形態に係る選択したレシピの各手順の表示画面を含むユーザ端末の正面図である。 第２の実施形態に係る調理支援システムの動作について説明するためのフローチャートである。 実施形態に係るコンピュータの構成を示す概略ブロック図である。

以下、本実施形態について説明する。なお、以下に説明する本実施形態は、特許請求の範囲に記載された本開示の内容を不当に限定するものではない。また本実施形態で説明される構成の全てが、本開示の必須構成要件であるとは限らない。

（第１の実施形態）
＜構成＞
まず、図１を用いて第１の実施形態におけるユーザ端末２０１からの操作により、調理環境に応じた調理手順の指示情報を生成するサーバ１０１を含む、調理支援システム１０の構成及びその概要について説明する。なお、図１は、本実施形態の調理支援システム１０のブロック図である。

本実施形態の調理支援システム１０は、図１に示すように、サーバ１０１と、ユーザ端末２０１と、調理機器３０１とが、例えばインターネットやＬＡＮ等のネットワークＮＷに接続可能に構成されている。

サーバ１０１は、本開示における調理支援装置を構成する装置であり、コンピュータやメインフレーム等の情報処理装置で構成される。サーバ１０１とネットワークＮＷ間の接続は、有線でもよいし無線でもよい。サーバ１０１は、サーバ通信部１１１、記憶部１１２、調理環境情報取得部１１３、レシピ選択部１１４、指示情報生成部１１５とから構成される。

サーバ通信部１１１は、ネットワークＮＷを介してユーザ端末２０１及び調理機器３０１と通信を行う通信インタフェースである。サーバ通信部１１１は、ユーザ端末２０１や調理機器３０１から送信される調理環境情報やレシピ選択情報を受信する。また、サーバ通信部１１１は、ユーザ端末２０１へレシピ情報や、調理指示情報を送信する。

記憶部１１２は、レシピ情報を記憶する。レシピ情報は、料理を作るための情報であって、材料と調理工程とを含むレシピを示す情報である。レシピ情報は、画像とテキストから構成されるコンテンツであってもよいし、動画であってもよい。サーバ１０１が配信するレシピ情報は、ユーザ（投稿者又は閲覧者）によって投稿されてもよいし、サービス提供事業者によって投稿されてもよい。

また、記憶部１１２は、調理環境情報取得部１１３が取得する、ユーザの調理環境情報を記憶する。なお、調理環境情報は、ユーザのＩＤ情報と紐づけられて記憶される。また、記憶部１１２は、調理環境情報が示す調理器具や調理道具の特性情報すなわち仕様情報（以下特性情報）を記憶する。なお、本発明における調理手段は、調理器具と調理道具の概念を含むものとする。

調理器具の特性情報は、例えばガスコンロの熱量や、電子レンジのワット数等の情報である。また、調理道具の特性情報は、お鍋の容積や、熱容量等の情報である。なお、こうした特性情報は、調理機器３０１の仕様情報３２０から取得してもよいし、メーカーが提供する規格情報を用いてもよいし、複数のユーザが使用した調理器具や調理道具の過去の使用実績情報から、機械学習（ＡＩ）を用いて推定してもよい。

調理環境情報取得部１１３は、ユーザ端末２０１や調理機器３０１から送信された調理環境情報をユーザのＩＤ情報と紐づけて記憶部１１２に記憶する。調理環境情報は、調理器具や調理道具の種類及や数量の情報である。なお、調理環境情報取得部１１３は、ユーザ端末２０１が撮影し送信してきた、当該ユーザのキッチンの画像データに対して、適宜な画像解析、画像認識等のアルゴリズムを適用し、調理環境情報を生成するとしてもよい。

なお、上述の調理環境情報取得部１１３は、記憶部１１２で保持する調理器具や調理道具（調理手段）の情報をユーザ端末２０１に送信して出力させ、そのユーザによる当該調理手段の保有有無の回答を取得することで、調理環境情報を取得するとしてもよい。

ユーザ端末２０１で出力させる上述の情報は、サーバ１０１が記憶部１１２で予め保持する調理手段のリスト（図２の調理手段リスト１１２１）を想定できる。このリストは、例えば各調理手段のメーカーＷＥＢサイトから取得し、マージしてリスト化し生成するとしてもよい。

また、調理環境情報取得部１１３は、記憶部１１２で予め保持する、上述のユーザに関するレシピ使用履歴の情報を参照し、当該ユーザが過去に使用ないし検索したレシピ情報から、当該レシピ情報で使用される調理手段の情報を抽出することで、調理環境情報を取得するとしてもよい。

また、調理環境情報取得部１１３は、上述のユーザのキッチンに関する撮影データを、ユーザ端末２０１（の撮像部２１４）から取得し、この撮影データに基づいて、当該ユーザが所有する調理手段およびキッチンの広さの少なくともいずれかの情報を含む調理環境情報を取得するとしてもよい。

また、調理環境情報取得部１１３は、ネットワークＮＷを介して通信可能な、上述のユーザの調理手段すなわち調理機器３０１から、当該調理機器３０１の情報を含む調理環境情報を取得するとしてもよい。

また、調理環境情報取得部１１３は、調理機器３０１やユーザ端末２０１から得た、調理手段の情報が含む、当該調理手段のメーカーに関する情報（例：メーカーＷＥＢサイトのＵＲＬ、メーカー名など）を参照し、そのメーカーのサーバ装置（前述のＵＲＬでアクセス）から、該当調理手段の仕様情報を含む調理環境情報を取得するとしてもよい。

また、調理環境情報取得部１１３は、ユーザ端末２０１で選択されたレシピ情報で規定されている調理手段のうち、当該ユーザの保有する調理手段で代替可能なものを、上述の仕様情報に基づいて特定し、当該ユーザの調理手段の情報を調理環境情報とするとしてもよい。

例えば、レシピ情報で規定されている調理手段が「５００ワットの電子レンジ」であったところ、ユーザは「５００ワットの電子レンジ」を保有していない状況であったが、「５００ワット」での調理モードが選択可能であることが仕様情報から特定できる「１２００ワットの電子レンジ」を保有している場合、この「１２００ワットの電子レンジ」の情報を、「５００ワットの電子レンジ」の代替手段として調理環境情報として採用する。

レシピ選択部１１４は、ユーザ端末２０１から送信されたレシピ選択情報に基づいて、記憶部１１２からレシピ情報を選択する。

指示情報生成部１１５は、記憶部１１２に記憶されたユーザの調理環境情報と、ユーザが指定したレシピ情報から、当該レシピ情報に対応する調理手順の指示情報を生成する。具体的には、調理環境情報が示す調理器具や調理道具の種類及や数量の情報に基づいて、レシピ情報が示すレシピにおける各調理手順を、適宜な調理器具や調理道具に割り当て、指示情報を生成する。また、複数の調理手順を平行して作業を行うように指示情報を生成する。

また、指示情報生成部１１５は、記憶部１１２に記憶されている特性情報を使用することで、調理の時間をレシピ情報の時間から変更して指示情報として生成することができる。例えば、レシピ情報において、５００ワットの電子レンジで３分と指示されているものを、ユーザが１２００ワットの電子レンジを使用している場合には、１分３０秒で調理できるように時間を変更して指示情報とすることができる。

ユーザ端末２０１は、サーバ１０１から送信される情報を表示する。また、ユーザ端末２０１は、サーバ１０１へ情報を送信することができる。

ユーザ端末２０１は、スマートフォン、携帯電話、ＰＨＳ、コンピュータ、ＰＤＡ、腕時計、スマートウォッチ、ヘッドマウントディスプレイ、画像生成装置等の情報処理装置であり、インターネット（ＷＡＮ）、ＬＡＮなどのネットワークＮＷを介してサーバ１０１に接続可能な装置である。なお、ユーザ端末２０１とサーバ１０１間の接続は、有線でもよいし無線でもよい。

また、ユーザ端末２０１は、インストールされた専用のアプリケーションソフトウェアによってサーバ１０１にアクセスしてもよい。また、サーバ１０１や、別途サーバ(不図示)が提供する動作環境（ＡＰＩ（アプリケーションプログラミングインタフェース）、プラットフォーム等）を利用してサーバ１０１にアクセスしてもよい。

端末通信部２１１は、ネットワークＮＷを介してサーバ１０１と通信を行う通信インタフェースである。端末通信部２１１は、サーバ１０１から送信される調理指示情報を受信する。また、端末通信部２１１は、サーバ１０１へ調理環境情報やレシピ選択情報を送信する。

入力部２１２は、ユーザが、ユーザ端末２０１に対して操作を行うための入力装置である。入力部２１２は、物理的なキーボード等のスイッチによる入力装置でもよいし、表示部２１３と一体となって、タッチパネルとして構成されていてもよい。

表示部２１３は、ユーザ端末２０１で情報の表示を行うための画像装置であり、液晶（ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ））や有機ＥＬ素子等により構成される。

調理機器３０１は、電子レンジやオーブンレンジ、炊飯器などといった調理機器である。ただし、この場合の調理機器３０１は、通信部３１１及び記憶部３１２を備えており、インターネット（ＷＡＮ）、ＬＡＮなどのネットワークＮＷを介してサーバ１０１と通信可能であるとする。

そのため、記憶部３１２で保持する、当該調理機器３０１の仕様情報３２０（図３参照）を、通信部３１１を介してサーバ１０１へ送信可能である。なお、調理機器３０１とサーバ１０１間の接続は、有線でもよいし無線でもよい。

通信部３１１は、ネットワークＮＷを介してサーバ１０１と通信を行う通信インタフェースである。通信部３１１は、サーバ１０１から送信される調理環境情報の取得要求を受信する。また、通信部３１１は、サーバ１０１に向けて、仕様情報３２０を調理環境情報として送信する。

＜ユーザ端末表示画面について＞
本開示の実施形態に係る、サーバ１０１を用いてユーザに調理支援を行う際の、ユーザ端末２０１の表示画面について、図２から図７を用いて説明する。

＜＜調理環境情報の取得＞＞
まず、調理環境情報をユーザ端末２０１から取得する手順について説明する。調理環境情報とは、ユーザが使用する調理器具や調理道具に関する情報である。図４は、ユーザ端末２０１において、調理器具の保有有無について回答を受け付けるための画面Ｇ１０である。ここで受け付ける保有有無に関する回答は、キッチンの広さ、コンロの種類、コンロの口数、炊飯器や電子レンジ等の有無や、それらの型式に関するものである。なお、調理器具の情報には、キッチンのレイアウトの情報を含んでいてもよい。

図４の画面Ｇ１０では、ユーザが、調理環境に関する各項目Ｇ１０１と、その選択をするプルダウンＧ１０２とが、列挙されている。項目Ｇ１０１としては、例えば、ガスコンロ、電気コンロ、炊飯器、オーブンレンジ、電子レンジ、オーブントースター、ブレンダー、ミキサー、といった調理器具に対応したものが含まれる。

ユーザは、こうした調理器具のうち、その有無の選択対象を指定するチェックボックスＧ１０３でチェックを入れる。また、当該項目の調理器具の有無について、上述のプルダウンＧ１０２を操作し指定する。なお、ガスコンロについては、その口数が、調理に際して同時並行で進めうる加熱動作の数に対応するため、有無のみならず口数の選択用のプルダウンとなっている。また、キッチンの広さについても、その面積のサイズ感を選択するプルダウンが配置されている。

或いは、図５の画面Ｇ２０に示すように、各調理器具の有無ではなく、対象となる調理器具の型式をプルダウンＧ２０２で選択させるとしてもよい。その場合、ユーザは、自身が保有している調理器具のうち、例えば炊飯器に関して型式「ＡＢ−１００Ｃ」をプルダウンＧ２０２で選択し、また、電子レンジに関して型式「ＤＲ５００Ｗ」を選択し、同様に、オーブントースターに関して型式「ＯＴ−２００Ｘ」を選択する。また、このユーザは、ブレンダーを保有しているものの、型式はわからないため「不明」を選択する。

このように、自身の保有する調理器具に関する選択動作を行ったユーザは、例えば、所定の確認ボタン（不図示）をクリックする。一方、これを受けたユーザ端末２０１は、当該ユーザが調理器具の保有有無に関して選択を完了したと認識し、調理道具の保有有無に関する選択画面（図６の画面Ｇ３０）に遷移させる。

図６及び図７は、ユーザが、ユーザ端末２０１を用いて調理道具の有無やその数を選択するための画面Ｇ３０、Ｇ４０をそれぞれ示す図である。調理道具の情報とは、フライパンやお鍋、包丁といった調理道具それぞれの有無や数量に関する情報である。

調理器具に関する選択を受け付ける画面（図４、図５）と同様、調理道具の保有有無について回答を受け付けるための画面Ｇ３０では、各調理道具に関する各項目Ｇ３０１と、その選択をするプルダウンＧ３０２とが、列挙されている。項目Ｇ３０１としては、例えば、フライパン、鍋、中華鍋、土鍋、圧力鍋、寸胴鍋、せいろ、包丁、さしみ包丁、キッチンはさみ、といった調理道具に対応したものが含まれる。

ユーザは、こうした調理道具のうち、その有無の選択対象を指定するチェックボックスＧ３０３でチェックを入れる。また、当該項目の調理道具の有無について、上述のプルダウンＧ３０２を操作し指定する。

或いは、図７の画面Ｇ４０に示すように、各調理道具の有無ではなく、対象となる調理道具の数をプルダウンＧ４０２で選択させるとしてもよい。その場合、ユーザは、自身が保有している調理道具のうち、例えばフライパンに関して、その保有数「１」を、鍋に関して、その保有数「２」を、圧力鍋に関して、その保有数「１」を、包丁に関して、その保有数「２」を、キッチンはさみに関して、その保有数「１」を、それぞれプルダウンＧ４０２で選択する。

このように、自身の保有する調理道具に関する選択動作を行ったユーザは、例えば、所定の確認ボタン（不図示）をクリックする。一方、これを受けたユーザ端末２０１は、当該ユーザが調理道具の保有有無や数に関して選択を完了したと認識し、調理手段に関する選択内容が確定する。ユーザ端末２０１は、確定した入力内容を調理環境情報としてサーバ１０１へ送信する。

また、調理環境情報取得部１１３は、例えば、記憶部１１２が保持するレシピ使用履歴１１２２（図８参照）を参照し、ユーザが過去に使用ないし検索したレシピ情報から、当該レシピ情報を用いた調理に使用される調理手段の情報を抽出することで、調理環境情報を取得するとしてもよい。例えば図８におけるレシピ使用履歴１１２２のうち、ユーザＩＤ「００００１」が使用したレシピ「ｒ００１１５」の内容「出力５００Ｗの電子レンジを３分間・・・」から、「５００Ｗ」及び「電子レンジ」の各語彙を抽出し、これらを調理環境情報とする。この時、調理環境情報取得部１１３は、文章中から調理手段に対応する語彙を特定するための辞書を、予め保持しているものとする。

また、調理環境情報取得部１１３は、ユーザのキッチンに関する撮影データをユーザ端末２０１の撮像部２１４から取得し、その撮影データに基づいて、当該ユーザが所有する調理器具ないし調理道具、およびキッチンの広さの少なくともいずれかの情報を、調理環境情報として取得するとしてもよい。

この場合、調理環境情報取得部１１３は、上述の撮影データを入力として、画像認識エンジンに与えることで、当該撮影データ中に含まれる被写体のうち調理器具や調理道具を特定する。勿論、上述の画像認識エンジンは、調理器具や調理道具の認識に関して適宜な学習を行って必要な認識精度で被写体を特定可能なものとする。

また、画像認識エンジンは、撮影データから、例えばキッチン空間中の柱や天井の各頂点を特定し、各頂点間の寸法を算定することで、当該キッチンの広さを推定する機能を有しているものとする。

また、調理環境情報取得部１１３は、ネットワークＮＷを介して通信可能である、上述の調理機器３０１から、当該調理機器３０１の仕様情報３２０を調理環境情報として取得する。調理環境情報取得部１１３は、こうして得たキッチンの撮影データや調理機器３０１の仕様情報３２０などを、取得情報１１２３（図９参照）として記憶部１１２に格納しておく。

なお、調理環境情報取得部１１３は、上述の調理機器３０１（調理器具）から当該調理機器３０１のメーカーに関する情報、例えばメーカーＷＥＢサイトのＵＲＬを取得し、このＵＲＬをアクセス先として、当該メーカーのサーバ装置に対し、当該調理機器３０１の仕様情報の取得要求を通知して、調理環境情報として仕様情報を取得するとしてもよい。

＜＜調理手順の指示情報の表示＞＞
次に、ユーザが選択したレシピに対して、ユーザの調理環境情報に応じた調理支援の指示情報を表示する表示画面について説明する。図１０は、ユーザ端末２０１にユーザが選択したレシピである「自宅でできる海の幸フルコース〇〇」で使用する材料が表示された画面Ｇ５０である。ユーザ端末２０１は、この画面Ｇ５０とは異なる他の画面が表示されている場合でもユーザの操作に基づいて当該画面Ｇ５０に戻って表示することができる。そのため、ユーザはいつでも材料を確認することができる。

図１１は、ユーザ端末２０１に、ユーザが選択したレシピの作り方の手順が表示された画面Ｇ６０である。作り方の手順は、ユーザの調理器具や調理道具毎に、どの時間に各調理器具や調理道具を使用して調理を行うかを示すものである。

この作り方の手順は、レシピを選択したユーザの調理環境情報に基づいて、レシピの調理手順を、時間に応じて調理器具や調理道具に割り当て生成される指示情報である。具体的には、図１１は、ユーザの調理手段が、「まな板、フライパン、お鍋１、お鍋２、電子レンジ」である調理環境情報に基づいて、ユーザが選択したレシピの調理手順の指示情報を示している。

この指示情報の画面は、まな板は調理開始から２分程度使用し、まな板で加工した食材をお鍋２に移し、２分から２４分頃まで煮込む手順を示す。また、まな板を８分から１０分の間使用し、加工した食材をフライパンに移して焼く手順を示す。さらに、まな板を１６分から１８分の間使用し、加工した食材をフライパンに移し、先に焼いた食材に合わせて焼く手順を示す。また、お鍋１は１５分から使用し、フライパンで焼きあがった食材をお鍋１に移して煮込む手順を示す。電子レンジは、お鍋１で煮込んだ食材を２８分から３２分の間加熱する手順を示す。そして、加熱後にお鍋２で煮込んだ食材を合わせる手順を示す。

図１２は、ユーザ端末２０１に、調理開始後の指示情報を示された画面Ｇ７０であり、具体的手順が表示されている。現在の時間は点線で示すタイムバーで示されており、図１２は調理開始から１３分経過していることを示している。また、画面Ｇ７０の下部には、当該タイムバーで示す時間における調理手順の具体的な指示情報が表示される。この時間は、フライパンとお鍋２が同時に調理を行っている状態である。フライパンは、お鍋２の調理開始後の１０分から調理を開始しているため、フライパンを用いた調理手順が表示されている。タイムバーは、ユーザが任意に動かすことが可能であり、過去や先の調理手順を見ることができる。このように、ユーザの調理環境に合わせて複数の調理手順を並列して表示し、ユーザの調理支援を行うことができる。

次に、図１３は、ユーザの調理道具が、「まな板、フライパン、お鍋、電子レンジ」である調理環境情報に基づいて、ユーザが選択したレシピの調理手順の指示情報を示している画面Ｇ８０であり、具体的手順が表示されている。

図１１、図１２で示す調理環境情報（お鍋が２つ）と異なり、お鍋が１つである場合の調理手順の指示情報について示すものである。すなわち、この場合お鍋を使う調理手順は順次行う必要があるため、図１２のお鍋１で行っていた調理手順を、２４分頃から調理を行う指示情報とし、それに伴いまな板、フライパンの調理手順も１８分頃から開始する指示情報とされている。このように、１つのレシピを選択した場合であっても、ユーザの調理環境情報に合わせた調理手順の指示情報を表示することができる。

＜処理の流れ＞
次に、本開示の第１の実施形態に係る調理支援システム１０の動作について、図１４に示すフローチャートと、ユーザ端末２０１の表示画面を示す図４〜図７等を参照しながら説明する。図１４のフローチャートは、サーバ１０１とユーザ端末２０１ないし調理機器３０１の各動作の関連状態を示している。

ステップＳ１０１において、ユーザ端末２０１は、ユーザからの調理環境情報の選択を受け付ける。具体的には、図４〜図７で示すように、ユーザが、ユーザ端末２０１を用いて、調理環境情報である調理器具や調理道具の有無を入力部２１２から入力し、これをユーザ端末２０１が取得することとなる。ユーザ端末２０１における、調理環境情報取得の詳細については、既に述べた通りである。

ステップＳ１０２において、ユーザ端末２０１は、ステップＳ１０１で選択された調理環境情報をサーバ１０１に送信する。具体的には、ユーザ端末２０１は、ユーザから選択を受け付けた調理環境情報を、端末通信部２１１を介してネットワークＮＷに送信する。

なお、図１４の例では、ユーザ端末２０１が調理環境情報を取得し、これをサーバ１０１に送信する形態となっているが、調理機器３０１が、その仕様情報３２０を、要求に応じて或いは所定タイミングの到来をもってサーバ１０１に配信するとしてもよい。

ステップＳ１０３において、サーバ１０１は、ステップＳ１０２でユーザ端末２０１から送信された調理環境情報を受信し、これを記憶部１１２に格納する。具体的には、サーバ１０１は、サーバ通信部１１１が受信した調理環境情報を、ユーザ端末２０１を使用するユーザＩＤと紐づけて記憶部１１２に記憶する。

ステップＳ１０４において、ユーザ端末２０１は、ユーザからのレシピ選択情報の入力を受け付ける。具体的には、サーバ１０１から提供される複数のレシピ情報を選択可能に表示させ、ユーザ所望のレシピ情報の選択を入力部２１２で受け付ける。

ステップＳ１０５において、ユーザ端末２０１は、ステップＳ１０４で得たレシピ選択情報をサーバ１０１に送信する。具体的には、ユーザ端末２０１は、レシピ選択情報を、端末通信部２１１を介してネットワークＮＷに送信する。

ステップＳ１０６において、サーバ１０１のレシピ選択部１１４は、上述のレシピ選択情報に基づいて、ユーザが選択したレシピ情報を記憶部１１２から読み出す。

ステップＳ１０７において、サーバ１０１の指示情報生成部１１５は、上述のユーザの調理環境情報である調理器具や調理道具の種類や数と、ユーザが選択したレシピ情報とから、当該レシピ情報に対応する調理手順の指示情報を生成する。また、ユーザが使用する、調理器具や調理道具の特性情報すなわち仕様情報を使用することで、調理の時間をレシピ情報の時間から変更して指示情報として生成することができる。

なお、調理環境情報取得部１１３は、ユーザの選択したレシピ情報で規定されている調理手段のうち、当該ユーザの保有する調理手段で代替可能なものを、例えば取得情報１１２３に基づいて特定し、当該ユーザの調理手段の情報を調理環境情報とするとしてもよい。

ステップＳ１０８において、サーバ１０１は、指示情報が完了するまでステップＳ１１１までの間のループを行う。ユーザ端末２０１も、このループに連動して動作が継続する。

ステップＳ１０９において、サーバ通信部１１１は、ステップＳ１０７で生成した指示情報をユーザ端末２０１に送信する。

ステップＳ１１０において、ユーザ端末２０１は、サーバ１０１から送信された指示情報を受信し、これを表示する。具体的には、端末通信部２１１が受信した指示情報を、表示部２１３にて表示する。表示部２１３で表示される画面の内容は、図１１で説明した、ユーザが選択したレシピの作り方の手順や、調理開始後は、図１２で説明したタイムバーに対応する具体的手順である。時間の経過や、ユーザの入力操作によって表示内容が変わる。なお、ユーザ端末２０１は、指示情報の表示を行うとともに、調理状況の取得を行ってもよい。

ステップＳ１１１において、サーバ１０１は、指示情報が完了するまでステップＳ１０８までの間のループを行う。

以上のように、本開示の第１の実施形態に係るサーバ（調理支援装置）１０１は、ユーザが選択した調理環境情報に応じて、ユーザが指定したレシピ情報に基づく調理手順の指示情報を生成し、ユーザ端末２０１で指示情報の表示することで調理支援を行うことができる。ユーザは、ユーザ端末２０１に表示される調理手順の指示情報に従い調理を行うことで、ユーザの調理環境に合わせ複数の調理手順を並行して調理を行うことが可能となり調理を効率的に行うことができる。

また、ユーザ端末２０１は、指示情報の表示を行うとともに、調理状況の取得を行ってもよい。例えば、ユーザ端末２０１のマイク部から調理中の音声を取得し、指示された調理手順が終了したかどうかを音声から判別し、終了と判別された場合、当該調理手順が完了したという調理状況をサーバ１０１に送信してもよい。また、各調理器具がセンサ及び通信機能を備え、調理状況をサーバ１０１に送信してもよい。調理状況からユーザが、指示情報の時間通りに調理手順を終わらせたかどうかを知ることができる。時間通り又は時間より早く調理手順を終わらせている場合、ユーザは調理の手際が良いと推定され、ユーザＩＤに紐づけられる習熟度の値が高くなるようにしてもよい。指示情報生成部は、ユーザの習熟度が高い場合、ユーザの習熟度が低い場合に比較して、調理手順の指示情報の時間を短く設定し、より手際よく、効率よく調理ができるように指示情報の生成を行ってもよい。

（第２の実施形態）
次に、本開示の第２の実施形態について説明する。第２の実施形態は、２人のユーザＡ、ユーザＢが調理を共同で行うものである。図１５にて示すように、第１の実施形態のユーザ端末２０１が、ユーザ端末２０１a、ユーザ端末２０１ｂの２台となっている点が構成として異なるが、第１の実施形態と同様の構成の部分についての説明は省略する。ユーザＡが使用するのはユーザ端末２０１ａであり、ユーザＢが使用するのはユーザ端末２０１ｂである。

＜ユーザ端末表示画面について＞
図１６に示す画面Ｇ９０は、ユーザ端末２０１ａ及びユーザ端末２０１ｂに表示されるユーザが選択したレシピの作り方の手順であり、どの時間に各調理器具や調理道具を使用して調理を行うかを示すものである。また、この画面Ｇ９０は、調理開始後の指示情報を示された画面であり、具体的手順が表示されている。

ユーザの調理道具が、「まな板、フライパン、お鍋１、お鍋２、電子レンジ」である調理環境情報に基づいて、ユーザＡが選択したレシピの調理手順の指示情報を示している。この指示情報の画面は、まな板はユーザＡが調理開始から２分程度使用し、まな板で加工した食材をお鍋２に移し、ユーザＢが２分から２４分頃まで煮込む手順を示す。また、ユーザＡがまな板を８分から１０分の間使用し、ユーザＢが加工した食材をフライパンに移して焼く手順を示す。さらに、ユーザＡがまな板を１６分から１８分の間使用し、ユーザＢが加工した食材をフライパンに移し、先に焼いた食材に合わせて焼く手順を示す。また、ユーザＢがお鍋１を１５分から使用し、フライパンで焼きあがった食材をお鍋１に移して煮込む手順を示す。ユーザＡが、電子レンジにてお鍋１で煮込んだ食材を２８分から３２分の間加熱する手順を示す。そして、ユーザＡが、加熱後にお鍋２で煮込んだ食材を合わせる手順を示す。

現在の時間は点線で示すタイムバーで示されており、図１６の例では、調理開始から１３分経過していることを示している。また、画面Ｇ９０の下部には、当該タイムバーで示す時間における調理手順の具体的な指示情報が表示される。この時間にユーザＡがお鍋２で調理を行う手順と、ユーザＢがフライパンで調理を行う手順が表示されている。タイムバーは、ユーザが任意に動かすことが可能であり、過去や先の調理手順を見ることができる。

このように、ユーザの調理環境に合わせて複数の調理手順を並列して表示し、ユーザの調理支援を行うことができる。このように、ユーザＡとユーザＢに対して調理手順の担当を割り当て、それぞれのユーザに対して指示情報を生成し、表示される。

＜処理の流れ＞
次に、本開示の第２の実施形態に係る調理支援システム２０の動作について、図１７に示すフローチャートと、ユーザ端末２０１の表示画面を示す図１６を参照しながら説明する。図１７のフローチャートは、サーバ１０１とユーザ端末２０１ａ、ユーザ端末２０１ｂの各動作の関連状態を示している。

ステップＳ２０１において、ユーザ端末２０１ａは、ユーザからの調理環境情報の選択を受け付ける。具体的には、ユーザ端末２０１ａは、ユーザが選択した調理環境情報である、調理器具及び調理道具の情報を受け付ける。

ステップＳ２０２において、ユーザ端末２０１ａは、ステップＳ２０１で受け付けた調理環境情報をサーバ１０１に送信する。具体的には、ユーザ端末２０１ａは、調理環境情報を、端末通信部２１１を介してネットワークＮＷに送信する。

ステップＳ２０３において、サーバ１０１は、ステップＳ２０２で送信された調理環境情報を受信し、これを記憶部１１２に格納する。具体的には、サーバ通信部１１１が受信した調理環境情報を、ユーザ端末２０１を使用するユーザＩＤと紐づけて記憶部１１２に記憶する。

ステップＳ２０４において、ユーザ端末２０１ａは、ユーザからのレシピ選択情報の入力を受け付ける。具体的には、ユーザ端末２０１ａは、サーバ１０１から提供される複数のレシピ情報のうち、ユーザが所望するレシピ情報の選択を、入力部２１２で受け付ける。

ステップＳ２０５において、ユーザ端末２０１ａは、ステップＳ２０４で選択されたレシピ選択情報をサーバ１０１に送信する。具体的には、ユーザ端末２０１ａは、レシピ選択情報を、端末通信部２１１を介してネットワークＮＷに送信する。

ステップＳ２０６において、サーバ１０１のレシピ選択部１１４は、ステップＳ２０５で送信されたレシピ選択情報に基づいて、対応するレシピ情報を記憶部１１２から読み出す。

ステップＳ２０７において、サーバ１０１の指示情報生成部１１５は、上述のユーザの調理環境情報である調理器具や調理道具の種類や数と、ユーザが選択したレシピ情報とから、当該レシピ情報に対応する調理手順の指示情報を生成する。指示情報は、ユーザＡ及びユーザＢのそれぞれに対する指示が生成される。また、ユーザが使用する、調理器具や調理道具の特性情報を使用することで、調理の時間をレシピ情報の時間から変更して指示情報として生成することができる。

ステップＳ２０８において、サーバ１０１は、指示情報が完了するまでステップＳ２１４までの間のループを行う。ユーザ端末２０１も、このループに連動して動作が継続する。

ステップＳ２０９において、サーバ通信部１１１は、ステップＳ２０７で生成された指示情報をユーザ端末２０１ａとユーザ端末２０１ｂに送信する。

ステップＳ２１０において、ユーザ端末２０１ａは、サーバ１０１から送信された指示情報を表示する。具体的には、端末通信部２１１が受信した指示情報を、表示部２１３で表示を行う。表示部２１３で表示される画面の内容は、図１２で説明したタイムバーに対応する具体的手順である。同様に、ステップＳ２１１において、ユーザ端末２０１ｂは、サーバ１０１から送信された指示情報を表示する。

ステップＳ２１２において、ユーザ端末２０１ａは、指示情報の表示を行うとともに、調理状況の送信を行う。例えば、ユーザ端末２０１ａのマイク部から調理中の音声を取得し、指示された調理手順が終了したかどうかを音声から判別し、終了と判別された場合、当該調理手順が完了したという調理状況をサーバ１０１に送信する。なお、各調理器具がセンサ及び通信機能を備え、調理状況をサーバ１０１に送信してもよい。同様に、Ｓ２１３において、ユーザ端末２０１ｂは、指示情報の表示を行うとともに、調理状況の送信を行う。サーバ１０１は、送信された調理状況から、指示された調理手順が時間通りに終了しているかを認識することができる。

ステップＳ２１４において、サーバ１０１は、指示情報が完了するまでステップＳ２０８までの間のループを行う。

以上のように、本開示の第２の実施形態に係るサーバ（調理支援装置）１０１は、ユーザの調理環境情報に応じて、ユーザが指定したレシピ情報に基づく調理手順の指示情報を生成し、ユーザ端末２０１ａとユーザ端末２０１ｂにおいて指示情報の表示することで調理支援を行うことができる。ユーザＡとユーザＢは、ユーザ端末２０１ａ及びユーザ端末２０１ｂに表示される調理手順の指示情報に従い調理を行うことで、各ユーザが調理手順を分担しながら調理手順を並行して調理を行うことが可能となり調理を効率的に行うことができる。

また、ユーザ端末２０１ａとユーザ端末２０１ｂは、それぞれユーザＡ用の指示情報と、ユーザＢ用の指示情報の別々の指示情報の表示を行ってもよい。

また、調理状況から、ユーザＡとユーザＢが、それぞれ指示情報の時間通りに調理手順を終わらせたかどうかを知ることができる。そのため、指示情報の時間と、実際の調理時間の差異をポイント化し、調理完了までの両者のポイントの合計（調理達成状態に関する情報）として算出してもよい。ポイントの合計の優劣により、ユーザＡとユーザＢの調理作業の手際を判定し両者に通知をすることで、調理に遊戯性を持たせることができる。

なお、本実施形態では調理を行うユーザをユーザＡとユーザＢの２人としたが、２人以上であってもかまわない。

（プログラム）
図１８は、コンピュータ８０１の構成を示す概略ブロック図である。コンピュータ８０１は、ＣＰＵ８０２、主記憶装置８０３、補助記憶装置８０４、インタフェース８０５を備える。

ここで、実施形態に係るサーバ１０１を構成する各機能を実現するためのプログラムの詳細について説明する。

サーバ１０１は、コンピュータ８０１に実装される。そして、サーバ１０１の各構成要素の動作は、プログラムの形式で補助記憶装置８０４に記憶されている。ＣＰＵ８０２は、プログラムを補助記憶装置８０４から読み出して主記憶装置８０３に展開し、当該プログラムに従って上記処理を実行する。また、ＣＰＵ８０２は、プログラムに従って、上述した記憶部に対応する記憶領域を主記憶装置８０３に確保する。

当該プログラムは、具体的には、コンピュータ８０１において、レシピ情報を記憶するステップと、ユーザの調理環境情報の選択を受け付けるステップと、記憶されたレシピ情報の中からユーザが指定したレシピ情報を選択するステップと、ユーザ選択を受けて取得した調理環境情報に応じて、選択されたレシピ情報に基づく調理手順の指示情報を生成するステップと、をコンピュータによって実現するプログラムである。

なお、補助記憶装置８０４は、一時的でない有形の媒体の一例である。一時的でない有形の媒体の他の例としては、インタフェース８０５を介して接続される磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等が挙げられる。また、このプログラムがネットワークＮＷを介してコンピュータ８０１に配信される場合、配信を受けたコンピュータ８０１が当該プログラムを主記憶装置８０３に展開し、上記処理を実行してもよい。

また、当該プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、当該プログラムは、前述した機能を補助記憶装置８０４に既に記憶されている他のプログラムとの組み合わせで実現するもの、いわゆる差分ファイル（差分プログラム）
であってもよい。

以上、本開示のいくつかの実施形態を説明したが、これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものとする。

１０、２０ 調理支援システム
１０１ サーバ
１１１ サーバ通信部
１１２ 記憶部
１１３ 調理環境情報取得部
１１４ レシピ選択部
１１５ 指示情報生成部
２０１ ユーザ端末
２１１ 端末通信部
２１２ 入力部
２１３ 表示部
３０１ 調理機器
３１１ 通信部
３１２ 記憶部
３２０ 仕様情報
８０１ コンピュータ
８０２ ＣＰＵ
８０３ 主記憶装置
８０４ 補助記憶装置
８０５ インタフェース

Claims (14)

1. レシピ情報を記憶する記憶部と、
   ユーザのキッチンに関する撮影データを撮像装置から取得し、前記撮影データに基づいて、前記ユーザが所有する調理手段および前記キッチンの広さの少なくともいずれかの情報を含む調理環境情報を取得する調理環境情報取得部と、
   前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するレシピ選択部と、
   前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成する指示情報生成部と、
   を備える調理支援装置。
2. 前記調理環境情報取得部は、前記記憶部で保持する調理手段の情報を出力し、前記ユーザによる当該調理手段の保有有無の回答を取得することで、前記調理環境情報を取得する、請求項１に記載の調理支援装置。
3. 前記調理環境情報取得部は、前記ユーザに関するレシピ使用履歴の情報を前記記憶部にて参照し、前記ユーザが過去に使用ないし検索したレシピ情報から、当該レシピ情報を用いた調理に使用される調理手段の情報を抽出することで、前記調理環境情報を取得する、請求項１に記載の調理支援装置。
4. 前記調理環境情報取得部は、ネットワークを介して通信可能な、前記ユーザの調理手段から、当該調理手段の情報を含む前記調理環境情報を取得する、請求項１に記載の調理支援装置。
5. 前記調理環境情報取得部は、前記調理手段の情報が含む、当該調理手段のメーカーに関する情報を参照し、前記メーカーのサーバ装置から、前記調理手段の仕様情報を含む前記調理環境情報を取得する、請求項４に記載の調理支援装置。
6. 前記調理環境情報取得部は、前記選択されたレシピ情報で規定されている調理手段のうち、前記ユーザの保有する調理手段で代替可能なものを、前記仕様情報に基づいて特定し、当該ユーザの調理手段の情報を前記調理環境情報とする、請求項５に記載の調理支援装置。
7. 前記調理環境情報は、前記ユーザの保有する調理手段の種類及び数量の少なくともいずれかの情報が含まれる、請求項１に記載の調理支援装置。
8. 前記レシピ情報は、調理工程ごとに使用する調理手段が紐づけられて前記記憶部に記憶され、
   前記指示情報生成部は、前記取得した調理環境情報と、前記選択されたレシピ情報において必要とする前記調理手段と、前記取得した調理環境情報と、から前記指示情報を生成する請求項１に記載の調理支援装置。
9. 前記指示情報生成部は、前記ユーザの過去の調理状況に応じて定められる習熟度に基づいて、前記指示情報を生成する請求項１から８のいずれか一項に記載の調理支援装置。
10. 前記指示情報生成部は、調理を行うユーザが複数の場合、前記複数のユーザに対しての調理手順の担当の割り当てを行うことで前記指示情報を生成する請求項１から９のいずれか一項に記載の調理支援装置。
11. 前記指示情報生成部は、複数のユーザの調理状況から、前記複数のユーザの調理達成状態に関する情報を算出する請求項１０に記載の調理支援装置。
12. レシピ情報を記憶する記憶部と、
    ユーザのキッチンに関する撮影データを撮像装置から取得し、前記撮影データに基づいて、前記ユーザが所有する調理手段および前記キッチンの広さの少なくともいずれかの情報を含む調理環境情報を取得する調理環境情報取得部と、
    ユーザが操作を行う入力部と、
    前記レシピ情報の中から前記ユーザが前記入力部で指定したレシピ情報を選択するレシピ選択部と、
    前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成する指示情報生成部と、
    前記生成された指示情報を表示する表示部と、
    を備える調理支援システム。
13. レシピ情報を保持する情報処理装置が、
    ユーザのキッチンに関する撮影データを撮像装置から取得し、前記撮影データに基づいて、前記ユーザが所有する調理手段および前記キッチンの広さの少なくともいずれかの情報を含む調理環境情報を取得するステップと、
    前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するステップと、
    前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成するステップと、
    を実行する調理支援方法。
14. レシピ情報を保持する情報処理装置に、
    ユーザのキッチンに関する撮影データを撮像装置から取得し、前記撮影データに基づいて、前記ユーザが所有する調理手段および前記キッチンの広さの少なくともいずれかの情報を含む調理環境情報を取得するステップと、
    前記レシピ情報の中から前記ユーザが指定したレシピ情報を選択するステップと、
    前記取得した調理環境情報に応じて、前記選択されたレシピ情報に基づく調理手順の指示情報を生成するステップと、
    を実行させる調理支援プログラム。