JP6427766B2 - 画像と調理情報を関連付ける制御方法、装置及びプログラム - Google Patents

Description

本発明は、画像と調理情報を関連付ける制御方法、装置及びプログラムに関する。

近年、ユーザが調理した料理を、第三者へ共有する目的のために、インターネット上で運営されている、料理やレシピに関するコミュニティサイトなどへの投稿が盛んに行われている。

また、料理方法や使用した食材を料理レシピに反映して各家庭内で保存するとともに、保存した料理レシピを共有して第三者が検索可能なシステムが提案されている（特許文献１）。

特開２００６−１４６３４９号公報

従来、ユーザが調理した料理をコミュニティサイトなどへ投稿する際に、自らが調理して撮影した料理の静止画や動画の選択操作と、調理に使用した際の、温度設定や調理時間などの調理機器に関する情報（調理情報）の入力操作を、別々に入力する必要があった。

また、特許文献１に記載のようなシステムを利用する場合であっても、調理情報を含む料理のレシピをユーザが入力する必要があった。

なぜなら、ユーザが保有する調理機器で調理した料理であっても、出来上がった料理と調理情報には関係性を持たせていないため、このような面倒な操作が必要となっていたからである。

また、例えばユーザが数日後に、気に入った料理のレシピを投稿したいと考えた場合に、予め撮影しておいた料理の画像から、投稿する料理の画像を選択した際に対応する調理情報（例えば、電子レンジに関して、６００ワット、５分３０秒など）を忘れてしまうことや、誤った調理情報を入力する可能性があった。

さらに、誤って入力した調理情報であっても、対象の調理機器で設定できないような明らかな間違いではない場合は、第三者は間違いであることに気づくことができず、誤った調理情報が公開され続ける可能性があった。

さらに、調理した調理機器自体を識別するための識別情報を誤って入力してしまうと、閲覧する第三者は、どのような調理機器で調理した料理かわからなくなる可能性があった。

本発明はこのような課題を解決するためのものであり、本発明は、撮影された画像と調理機器の調理方法とを関連付ける制御方法であって、調理を行うために調理機器の制御を行う調理制御ステップと、前記調理制御ステップにおける調理機器の調理情報を取得する調理情報取得ステップと、前記調理機器の状態に応じて、撮影の要求を行う撮影要求ステ
ップと、前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、を備えたことを特徴とする画像と調理情報とを関連付ける制御方法である。

これによれば、調理機器の適切な調理のタイミングで、撮影した料理の写真や動画の画像と、調理機器の調理情報を自動的に関連付けることができるので、従来は関係性を持たせられていなかった料理と調理の関係を、料理画像と調理情報の関係として、自動的に保持することができるようになる。

また、料理画像と調理情報が関連付けられることで、例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、料理画像を選択することで、料理画像に関連付けられている調理機器の調理情報を抽出することができるので、投稿する料理に対しての調理機器の調理情報を自動的に付加して投稿することができるようになる。このため、容易に調理機器の調理情報を投稿することができるようになり、投稿の際の記載間違いを防ぐことができるようになる。

本発明の実施の形態における調理システム１０００の全体構成を示す図 本発明の実施の形態における調理システム１０００の各構成を示すブロック図 本発明の実施の形態における関連付け情報の構成の一例を示す図 本発明の実施の形態における表示部が表示する撮影確認画面の一例を示す図 本発明の実施の形態における調理システム１０００のシーケンス図 本発明の実施の形態における調理完了後に撮影要求の判断を行う場合のフロー図 本発明の実施の形態における調理情報の内容に応じて撮影要求の判断を行う場合のフロー図 本発明の実施の形態における画像情報と調理機器１００の識別情報等を関連付けた一例を示す図 本発明の実施の形態における調理機器２０００の全体構成を示す図 本発明の実施の形態における調理機器２０００の構成を示すブロック図 本発明の実施の形態における調理機器２０００のシーケンスを示す図 本発明の実施の形態における調理システム３０００の全体構成を示す図 本発明の実施の形態における調理システム４０００の全体構成を示す図 本発明の実施の形態における調理システム４０００の構成を示すブロック図 本発明の実施の形態における調理システム４０００のシーケンスを示す図 本発明の実施の形態における調理システム４０００の調理レシピ表示画面の一例を示す図 本発明の実施の形態における調理システム４０００の撮影確認の画面の一例を示す図 本発明の実施の形態における調理システム４０００の投稿後の画面の一例を示す図

本発明の第１の実施形態は、撮影された画像と調理機器の調理方法とを関連付ける制御方法であって、調理を行うために調理機器の制御を行う調理制御ステップと、前記調理制御ステップにおける調理機器の調理情報を取得する調理情報取得ステップと、前記調理機
器の状態に応じて、撮影の要求を行う撮影要求ステップと、前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、を備えた画像と調理情報とを関連付ける制御方法である。

これによれば、調理機器の適切な調理のタイミングで、撮影した料理の写真や動画の画像と、調理機器の調理情報を自動的に関連付けることができるので、従来は関係性を持たせていなかった料理と調理の関係を、料理画像と調理情報の関係として、自動的に保持することができるようになる。

また、料理画像と調理情報が関連付けられることで、例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、料理画像を選択することで、料理画像に関連付けられている調理機器の調理情報を抽出することができるので、投稿する料理に対しての調理機器の調理情報を自動的に付加して投稿することができるようになる。

このため、容易に調理機器の調理情報を投稿することができるようになり、投稿の際の記載間違いを防ぐことができるようになる。

本発明の第２の実施形態は、第１の実施形態において、前記調理機器を識別するための識別情報を取得する識別情報取得ステップを備え、前記関連付けステップは、前記画像と、前記調理情報と、さらに前記識別情報取得ステップで取得した識別情報と、を関連付ける、画像と調理情報とを関連付ける制御方法である。

これによれば、ユーザが所有している調理機器の機器を識別する識別情報（例えば、調理機器の機種名や型番や品番や名称など）を、料理画像と調理情報に関連付けすることができる。

このため、例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、料理画像を選択するだけで、料理画像に関連付けられている調理機器の調理情報と識別情報を抽出でき、例えば型番といった識別情報と調理情報も自動的に入力することができる。

また、料理画像に対してユーザが調理した調理機器の型番を間違いなく第三者へ伝えることができるようになる。

本発明の第３の実施形態は、第１又は第２の実施形態において、前記撮影要求ステップは、調理が完了したタイミングで要求を行う、画像と調理情報とを関連付ける制御方法である。

これによれば、調理機器の調理が完了したタイミングで撮影した料理の画像と、調理機器の調理情報や識別情報を関連付けることができるようになる。このため、完成した出来立ての料理の画像に関連付けを行うことで、どのような料理であったかがわかりやすく、投稿の際に選択する可能性の高い画像に対して、調理情報を関連付けすることができるようになる。

本発明の第４の実施形態は、第１〜第３の実施形態において、前記撮影要求ステップは、調理が正常に完了した場合は撮影要求を行い、調理を中止した場合には撮影要求を行わない、画像と調理情報とを関連付ける制御方法である。

これによれば、調理が未完了な場合は、調理が中止されたとして画像の撮影及び調理情報の関連付けを行わないようにすることができるので、不要となる画像や関連付けの情報を削減することができ、ユーザへの利便性を高めると共に、記憶に必要なメモリの節約を行うことができる。

本発明の第５の実施形態は、第１〜第４の実施形態において、前記撮影要求ステップは、前記調理情報の内容により撮影が必要な場合は撮影要求を行い、撮影が不要な場合は撮影要求を行わない、画像と調理情報とを関連付ける制御方法である。

これによれば、撮影が不要な場合は、画像の撮影及び調理情報の関連付けを行わないようにすることができるので、不要となる画像や関連付けの情報を削減することができ、ユーザへの利便性を高めると共に、記憶に必要なメモリの節約を行うことができる。

本発明の第６の実施形態は、第１〜第５の実施形態において、前記カメラ制御ステップにて撮影を行う際に、ユーザに撮影実施の確認を行う撮影確認ステップを備える、画像と調理情報とを関連付ける制御方法である。

これによれば、撮影実施の前にユーザへの確認を行うことで、料理を画像として記録しておくべきものであるかをユーザが事前に判断することができるようになる。また、画像を撮影する前に、料理の向きや角度や周りの明るさなどユーザが撮影の状態を確認し調整することができるので、ユーザにとってより写りの良い画像を残すことができるようになる。

本発明の第７の実施形態は、第１〜第６の実施形態において、前記関連付けステップは、撮影した画像内に前記調理情報を含めるように関連付ける画像と調理情報とを関連付ける制御方法である。

これによれば、撮影した画像内に調理情報を含めるように関連付けすることによって、例えば、画像をそのまま投稿するだけで、コミュニティサイトや閲覧する第三者は画像内に含まれる調理情報を参照することができるようになる。また、２次利用などで同じ画像をさらに別のサイトなどにコピーを行った場合でも、画像データをコピーするだけで、調理情報も自動的に付随してコピーすることができるようになるので、付加価値を備えた利便性の高い料理画像とすることができる。

本発明の第８の実施形態は、画像と調理情報とを関連付ける装置であり、調理を行うために調理機器の制御をする調理制御手段と、前記調理制御手段の設定内容を記憶する調理情報記憶手段と、前記調理制御手段によって調理を行う調理手段と、前記調理制御手段又は前記調理情報から、前記調理機器の状態に応じて、前記調理機器で調理した料理の画像を撮影するようにカメラの制御を行うカメラ制御手段と、撮影を行うカメラと、前記カメラで撮影した画像を記憶する記録手段と、前記記録手段に記録した画像と、前記調理情報記憶手段に記録した調理情報の関連付け情報を記憶する関連付け情報記憶手段と、を備えた、画像と調理情報とを関連付ける装置である。

これによれば、調理機器で調理を行うだけで、調理機器で調理した際の料理の画像と調理情報を、自動的に関連付けて保存することができるようになるので、インターネット上の料理のコミュニティサイトへ頻繁に投稿するユーザなどにとって簡易で利便性の高い装置を提供することができるようになる。

本発明の第９の実施形態は、コンピュータに画像と調理情報とを関連付けるように実行させるためのプログラムであり、調理を行うために調理機器の制御を行う調理制御ステッ
プと、前記調理制御ステップにおける調理機器の調理情報を取得する調理情報取得ステップと、前記調理機器の状態に応じて、撮影の要求を行う撮影要求ステップと、前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、をコンピュータに実行させるプログラムである。

これによれば、調理機器で調理を行うだけで、調理機器で調理した際の料理の画像と調理情報を、自動的に関連付けて保存することができるようになるので、インターネット上の料理のコミュニティサイトへ頻繁に投稿するユーザなどにとって簡易で利便性の高い装置を提供することができるようになる。

以下、本発明に係る実施形態について図面を用いて説明する。各図において同一の符号を付した構成は、同一の構成であることを示しその説明を省略する。なお、これらの実施の形態によって本発明が限定されるものではない。

図１は、本発明の調理情報の関連付け方法の実施例を示す調理システム１０００の全体構成を示す図である。

調理システム１０００は、調理機器１００、情報端末２００、およびカメラ３００を備えている。

なお、図１においては、調理機器１００と情報端末２００とカメラ３００は、それぞれ独立した構成としての例を示している。しかしながら、本発明はこの例に限定されず、調理機器１００に情報端末２００の構成が包含される場合や、情報端末２００にカメラ３００の構成が包含される場合や、調理機器１００に情報端末２００とカメラ３００の構成が包含される場合であっても同様の効果を得ることができる。

調理機器１００は、例えば、電子レンジ、炊飯器、ＩＨクッキングヒーター、トースター、コンロ、グリル、オーブン、ミキサー、コーヒーメーカ等の調理機能を有する機器である。

図２は、本発明の実施の形態における調理機器１００、情報端末２００、およびカメラ３００それぞれの構成を示すブロック図である。

まず、調理機器１００は、入力部１１０、制御部１２０、調理情報記憶部１３０、調理部１４０、および通信部１５０を有している。

入力部１１０は、調理機器１００の制御を行うための調理内容をユーザが入力するためのもの装置であり、例えば、調理の温度や時間を選択するためのダイヤルキーやボタンである。他にも、タッチパネルによる入力や、音声による入力などにより入力する構成としてもよい。

また、外部の通信端末からネットワークを介して、例えば通信部１５０を入力部１１０の代用として調理情報を受信する構成とすることもできる。

ここで調理情報とは、調理機器１００が調理を行うための機器の制御内容である。

例えば、調理機器が電子レンジであれば、調理方法（レンジ、オーブン、スチーム、グリルなど）、調理温度、調理時間といったなどの調理する際に調理機器へ入力する情報で
ある。或いは、調理機器が炊飯器であれば、炊飯コース、お米の種類といった、ユーザが調理機器に対して入力する情報である。

また、調理機器１００が予め備えている自動調理を選択するための調理番号や、調理機器１００が調理情報として取り込み可能な料理を作成するためのレシピ等もこの調理情報に含まれている。

制御部１２０（調理制御ステップ、調理情報取得ステップ、調理制御手段）は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のようなマイクロプロセッサからなり、入力部１１０、調理情報記憶部１３０、調理部１４０、および通信部１５０といった各回路の制御を司る。

また、入力部１１０から入力された調理情報に基づいて調理機器１００の調理部１４０の制御を行う。

制御部１２０は、図示しない例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）に記憶されているプログラムに従って動作し、調理機器の調理状態をセンシングするためのセンサ（図示せず）などの検知結果に基づいてヒータなどの調理部１４０を制御する。

調理情報記憶部１３０（調理情報記憶手段）は、例えばフラッシュメモリのような不揮発性メモリからなり、入力部１１０で入力された調理情報等を記憶する。また、制御部１２０の制御プログラムを調理情報記憶部１３０に記憶する構成としても良い。

調理部１４０（調理手段）は、調理を行う部分であり、例えば調理機器１００が電子レンジであればマイクロ波を発生するマグネトロンであり、調理機器１００が炊飯器であれば米を加熱するヒータ等である。

通信部１５０は、情報端末２００と通信を行う部分の通信手段であり、例えば赤外線通信、特定小電力無線、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、無線タグ、または、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、等の無線通信或いは、シリアルケーブル、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）などの有線を用いて通信を行う。

次に、情報端末２００について説明する。情報端末２００は、通信部２１０、制御部２２０、関連付け情報記憶部２３０、表示部２４０、および入力部２５０を有している。

通信部２１０は、調理機器１００の通信部１５０と通信を行う部分であり、通信部１５０の通信方式に対応する通信方式により通信を行う。

制御部２２０（撮影要求ステップ、関連付けステップ）は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のようなマイクロプロセッサからなり、通信部２１０、制御部２２０、関連付け情報記憶部２３０、表示部２４０、等の各回路の制御を司る。

また、制御部２２０は、入力部２５０からの入力や、通信部２１０が調理機器１００から取得した調理情報と、後述するカメラ３００の通信部３１０から取得した画像情報を関連付け、関連付け情報記憶部２３０に記憶する。

関連付け情報記憶部２３０（関連付け情報記憶手段）は、調理機器１００から取得した
調理情報と、カメラ３００から取得した画像情報を関連付けて記憶する。

ここで、関連付け情報記憶部２３０に記憶される情報についてより具体的に説明する。

関連付け情報とは、例えば図３に示すように、画像のファイル名と、調理機器１００を制御する際の調理情報といった互いに関連付けられた情報である。

画像情報としては、ここではファイル名を例に挙げているが、画像ファイルの保存位置を特定するためのファイルパスを含む情報や、保存したカメラ３００の機器を特定するためのカメラを識別する情報、画像ファイルを特定するための情報等を含む構成としても構わない。

他にも、画像そのものに調理情報を対応付けて記憶しても構わない。

また、画像そのものに保存しておく際には、画像ファイルのフォーマットとして、例えばＥＸＩＦ（Ｅｘｃｈａｎｇｅａｂｌｅ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）ファイルフォーマットを利用することで、ＥＸＩＦファイルフォーマット内に画像に関する情報を記録することが可能であるので、調理情報を含めるように保存することで、画像データ内だけで関連付けを行うようにすることができる。

このように画像内に調理情報を保存しておくことで、例えば、画像をそのまま投稿するだけで、コミュニティサイトや閲覧する第三者は画像内に含まれる調理情報を必要となる際に参照することができるようになるので、関連付けを意識せず利用することが可能になる。

また、２次利用などで同じ画像をさらに別のサイトなどにコピーを行った場合でも、画像データをコピーするだけで、調理情報も自動的に付随してコピーすることができるようになるので、より利便性を高めることができるようになる。

なお、画像に調理情報を含める構成としては、ＥＸＩＦファイルフォーマット以外の別のフォーマットを利用することや、著作権保護などで利用されている電子透かしの技術を利用して画像自体に直接埋め込むようにしても構わない。

表示部２４０は、カメラ３００にて料理を撮影する際に、ユーザに撮影の問い合わせの表示を行うための、例えば液晶パネルや有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）などのディスプレイ装置である。

例えば、図４に示すようにカメラ３００の撮影予定の画像をカメラ３００の通信部３１０から、情報端末２００の通信部２１０を介して表示部２４０に表示することで、ユーザに撮影の可否や撮影時の状態を分かりやすく伝えることができる。

入力部２５０は、ユーザがカメラ３００にて料理を撮影する際に、撮影許可の問い合わせの応答操作を行う際に使用される。

例えば、図４に示すように「ＯＫ」と「キャンセル」を選択肢として用意することで、ユーザが撮影を必要であると判断したときのみ「ＯＫ」を選択して撮影するように構成することができる。

なお、本実施の形態においては、入力部２５０が、表示部２４０にタッチパネルとして組み込まれているものとして説明するが、表示部２４０と入力部２５０は別々に構成され
ていてもよい。

次に、カメラ３００は、通信部３１０、制御部３２０、カメラ部３３０、および記録部３４０を有している。

通信部３１０は、情報端末２００の通信部２１０との通信手段であり、通信部２１０の通信方式と対応する通信方式を用いて実現される。

なお、本発明はこの例に限定されず、調理機器１００の通信部１５０が、カメラ３００の通信部３１０の通信を中継するように構成しても構わない。他にも、カメラ３００の通信部３１０が、調理機器１００の通信部１５０を中継して、情報端末２００の通信部２１０と通信するように構成しても構わない。

すなわち、通信部１５０、通信部２１０，通信部３１０は相互に通信できるように構成できればよい。

制御部３２０（カメラ制御ステップ、カメラ制御手段）は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のようなマイクロプロセッサからなり、通信部３１０、カメラ部３３０、および記録部３４０に対する制御、ならびに、通信部３１０を介して要求される撮影要求によりカメラ部３３０のカメラの撮影を行い、記録部３４０へ記憶を行う。

さらに、撮影した画像情報又は画像を、通信部３１０を介して、情報端末２００へ伝える制御を行うことも可能である。

カメラ部３３０（カメラ）は、静止画もしくは動画である画像を撮影するためのカメラである。制御部３２０からの制御により、撮影のタイミングで静止画もしくは動画を撮影し、記録部３４０へ記憶する。なお、記録部３４０へ記憶する代わりに通信部３１０を介して、例えば、情報端末２００の関連付け情報記憶部２３０へ記憶するようにしても構わない。

記録部３４０（記録手段）は、カメラ部３３０で撮影した静止画もしくは動画の記憶を行う。

例えば、ＳＤカード（登録商標）のような不揮発性メモリへ記憶することで、電源の供給が切れても画像を保持しつづけることが可能である。また、カメラで撮影する画像は、静止画とすることでコミュニティサイトなどへ投稿しやすい状態にすることができ、動画とすることで第三者が見る際に料理の出来具合をよりリアルに伝えるようにすることができる。

次に、本実施の形態における調理システム１０００の動作について説明する。図５は、本発明の実施の形態における調理システム１０００の通信シーケンスを示すである。

まず、調理機器１００の入力部１１０にて、調理機器１００で調理するための調理情報となる入力をユーザから受け付ける（Ｓ５０１ステップ）。

例えば、調理機器が電子レンジであれば、調理方法（レンジ、オーブン、スチーム、グリルなど）、調理温度、調理時間などの調理するために必要な情報が入力部１１０で入力される。

ここで、調理情報を直接入力する構成やことや、調理情報の元となる料理番号など、調理機器１００の調理部１４０を制御するための調理情報に変換可能な情報を入力であればよい。

制御部１２０は、入力部１１０より入力した情報にもとづき、調理情報として調理情報記憶部１３０に記憶する。（調理情報取得ステップ）（Ｓ５０２ステップ）
また、制御部１２０は、調理情報にもとづき、調理部１４０の調理制御を行う。（調理制御ステップ）（Ｓ５０３ステップ）
さらに、制御部１２０は、通信部１５０を介して、情報端末２００の通信部２１０へ、調理機器１００の制御状態や、調理情報を伝達する。（Ｓ５０４ステップ）
ここで、調理機器１００の制御状態とは、調理開始、調理中、調理完了、調理時間、調理残時間、温度などのセンサ値などであり調理機器１００の機器の制御の状態を伝える情報である。

制御部２２０は、通信部２１０を介して取得した調理情報を関連付け情報記憶部２３０に、関連付けを行うために保持しておく。（Ｓ５０５ステップ）
なお、本実施例では、関連付け情報記憶部２３０に調理情報をそのまま記憶するよう例として記載しているが、調理機器１００の調理情報として認識するための識別番号を、調理機器１００及び情報端末２００それぞれに保持して、その識別番号を関連付け情報記憶部に記憶しておくことで、関連付け情報の情報量を削減するように構成することもできる。

次に、制御部２２０は、通信部２１０を介して取得した調理機器１００の制御部１２０の制御状態や、調理情報から、調理機器の状態に応じて、どのタイミングで撮影するか指示を出すための撮影要求の判断を行う。（Ｓ５０６ステップ）
ここで、調理機器の状態としては、制御部１２０の制御状態を利用することによって、例えば、調理開始時や、調理完了時、また、調理途中に電子レンジであれば、スチームからレンジ加熱など制御を切り替えるタイミングや、調理機器１００のドアの開閉などのユーザ操作を把握することができる。

また、調理機器１００の状態としては、調理情報を利用することによって、調理に要する時間に応じて、例えば１０分割して等間隔に一定時間ごとに撮影の要求を行うなど、調理情報に応じた要求を行うことができる。

他にも、調理情報がハンバーグやケーキなど料理を把握できる自動調理の場合であれば、調理機器１００に自動調理のレシピ毎に撮影の要求のタイミングを予め組み込んでおくようにすることで、料理に合わせた要求を行うように構成することも可能である。

例えば、ケーキであれば調理内容から焼き上げ後に熱を取って、仕上げる工程を加味して、調理完了１時間後に撮影要求を出すなど、ユーザが撮影する適当なタイミングを推測して構成しておくようにすることができる。

このように、撮影の要求のタイミングは、調理中の状態や、出来上がる料理の状態が変化すると推測されるタイミングで撮影要求を行うことで、ユーザが後から撮影した料理画像を見て、投稿に利用しやすくなる画像として利用できるようになる。

また、動画で撮影する場合は、調理開始前に撮影開始の要求を行い、調理完了後に撮影停止の要求を行うことで、調理中の内容を記録することができるようになる。さらに、調理中のユーザの調理機器１００への操作のタイミングで、例えば、動画に撮影要求のタイミングでチャプターを入れることで、第三者へ共有する際に、変化のタイミングを把握し
やすくシーンを切り替えることができるので閲覧しやすい画像とすることができるようになる。

ここで、ステップＳ５０６内の動作フローの一例として、図６を用いて、調理完了のタイミングで撮影要求の判断を行う流れについて説明する。

制御部２２０は、通信部２１０を介して調理機器１００の制御部１２０が送信した制御状態を取得する。（Ｓ６０１ステップ）
次に、制御部２２０は、取得した制御状態から調理機器１００が調理完了であるか判断を行う。（Ｓ６０２ステップ）
例えば、制御状態が「運転中」から「停止」に変化した場合は、調理が完了したと判断することができる。他にも、調理機器１００の制御部１２０が調理完了の信号情報を送信するように構成している場合は、調理完了の信号情報を取得することで、調理が完了したことを判断することができる。

調理が完了したと判断した場合は、制御部２２０は撮影要求の判断となる。（Ｓ６０３ステップ）
このような動作フローにより、調理完了後の撮影の判断を行うことができる。調理完了後のタイミングは、出来立ての料理である可能性が高いため、より有用な画像として保存しておくことができるタイミングである。

また、調理が正常に完了した場合のみ撮影の判断を行い、調理機器１００の調理をキャンセルなどで途中に止めた場合は、撮影の判断を行わないように判断することで、調理が完了していない料理は撮影しないようすることができるようになる。

調理が正常に完了したかどうかの判断としては、制御部１２０からの制御キャンセルの情報を取得することや、調理情報として予定していた時間よりも短い時間で運転が停止した場合にキャンセルとして扱うことで判断することができる。

次に、ステップＳ５０６内の動作フローのもう一つの例として、図７を用いて、調理情報の内容から撮影要求の判断を行う流れについて説明する。

ステップＳ７０１では、ステップＳ６０１と同様に、制御部２２０は、通信部２１０を介して調理機器１００の制御部１２０が送信した制御状態を取得する。（Ｓ７０１ステップ）
次に、ステップＳ７０２では、ステップＳ６０２同様に、制御部２２０は、取得した制御状態から調理機器１００が調理完了であるか判断を行う。（Ｓ７０２ステップ）
調理が完了したと判断した場合は、さらに、制御部２２０は調理情報から撮影が必要であるか判断を行う。（Ｓ７０３ステップ）例えば、調理機器１００が電子レンジの場合、調理情報が「あたため」であった場合は、一度調理を行った料理をあたためていると判断することができるので、撮影要求を行わないように判断する。

また、調理情報が自動調理の「ハンバーグ」であれば、ハンバーグの料理を調理していると判断することができるので、撮影要求を行うように判断する。（Ｓ７０４ステップ）
このような動作フローにより、調理情報の内容によって撮影の判断を行うことができる。調理情報によって、料理を再度あたためるのみの場合は、撮影を行わないようにすることで、同じ料理を何度も撮影することを回避することができるようになる。

図５の動作フローに戻って説明をする。ステップＳ５０６の撮影要求の判断処理によって、撮影すると判断する場合は、制御部２２０は、表示部２４０及び入力部２５０を制御
して撮影確認の表示を行う。（Ｓ５０７ステップ）
例えば、図３に示すように、通信部２１０を介して、カメラ３００のカメラ部３３０からの画像を取得することにより、表示部２４０にカメラ部３３０の画像を映しながら撮影の可否を問い合わせることで、入力部２５０からの「ＯＫ」あるいは「キャンセル」の入力応答を待つ。応答が「ＯＫ」であれば、ステップＳ５０８に遷移し、「キャンセル」であれば、関連付けを行わないと判断し動作フローの流れを中止する。

なお、本実施の例では、ユーザに撮影前に確認するフローとして動作の流れを説明しているが、電子レンジなどのように出来上がる料理の位置が固定の調理機器であれば、ユーザ確認せずに自動的にカメラ３００で撮影を行うように構成することで、確認する手間を省くように構成することもできる。

制御部２２０は、通信部２１０を介して、カメラ３００へ撮影の要求情報を送信する。（撮影要求ステップ）（ステップＳ５０８ステップ）
撮影の要求情報は、カメラ３００のプロトコルとして予め決めておいたカメラ３００の撮影を実施するための制御情報である。

カメラ３００の制御部３２０は、通信部３１０を介して情報端末２００からの撮影要求を受信することで、カメラ部３３０を制御して撮影を行い記録部３４０に画像を記録する。（Ｓ５０９ステップ）
カメラ３００の撮影後に、制御部３２０は、通信部３１０を介して情報端末２００へ、画像情報を送信する。（Ｓ５１０ステップ）
情報端末２００の制御部２２０は、通信部２１０から画像情報を受け取り、Ｓ５０５にて関連付け情報記憶部２３０に予め保存しておいた調理情報と関連付ける。（Ｓ５１１ステップ）
例えば、図２に示すように、画像情報と調理情報を対にして記憶しておくことで関連付けることができる。

このような動作フローによって、調理機器１００の適切な調理のタイミングで、カメラ３００で撮影した料理の写真や動画の画像と、調理機器１００の調理情報を自動的に関連付けることができるので、従来は関係性を持たせられていなかった料理と調理の関係を、料理画像と調理情報の関係として、自動的に保持することができるようになる。

料理画像と調理情報が関連付けられることで、例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、過去に調理した関連付け情報記憶部２３０に関連付けられた料理画像を選択することで、料理画像に関連付けられている調理機器１００の調理情報を抽出することができるので、投稿する料理画像に対して調理機器１００の調理情報を自動的に付加して投稿することができるようになる。

このため、ユーザは投稿する際に、容易に調理機器１００の調理情報を投稿することができ、投稿の際の記載間違いを防ぐことができるようになる。

なお、本動作フローの説明では、調理情報と画像情報を関連付けるまでの説明を行ったが、続いて自動的に、情報端末２００の通信部２１０を介して、インターネットに接続し、予め登録しておいた投稿サイトへ画像及び調理情報を投稿するように構成することも可能である。

また、さらに、調理機器１００の制御部１２０は、調理機器１００を識別するための識別情報を、例えば制御部１２０の動作するプログラムを構成するメモリに予め記録させておくことで、制御部１２０は、前記ステップＳ５０４にて、制御情報及び調理情報と共に
、識別情報を情報端末２００へ送信する。（識別情報取得ステップ）
ステップ５０５にて調理情報と共に識別情報を、情報端末２００の関連付け情報記憶部２３０に記憶しておくことで、調理機器１００の識別情報を料理画像と関連付けるように記憶しておくことができるようになる。（図８）
このような動作フローによって、識別情報を取得し関連付け情報として記憶しておくことで、ユーザが所有している調理機器１００の機器を識別する識別情報（例えば、調理機器の機種名や型番や品番や名称など）を、料理画像と調理情報と関連付けすることができる。

このため、例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、料理画像を選択するだけで、料理画像に関連付けられている調理機器１００の調理情報及び調理機器の識別情報を抽出することができ、例えば調理機器１００の型番と調理情報等を自動的に入力することができる。

このため、料理画像に対してユーザが調理した調理機器の型番を間違いなく第三者へ伝えることができるようになる。

他にも、同様に日時やカメラ３００を識別するための識別情報を料理画像に関連付けておく構成とすることで、料理画像を検索する際や、コミュニティへ投稿する際により便利に利用することができるようになる。

次に、図９を用いて別の構成である関連付け方法及び装置を備えた実施例を説明する。

図９は、本発明の調理情報の関連付け方法及び装置の実施例を示す調理機器２０００の全体図である。調理機器２０００は、調理機器１００と情報端末２００とカメラ３００が一体となる構成である。

図１０は、本発明の実施の形態における調理機器２０００の構成を示すブロック図である。

前述の実施例である調理システム１０００の調理機器１００、情報端末２００、カメラ３００の構成を包含し、同一の符号を付した構成は、同一の構成である。

なお、括弧内に符号を複数併記している構成は、調理システム１０００では複数に分かれていた構成を１つにまとめていることを示している。例えば、制御部４２０は、制御部１２０、制御部２２０、制御部３２０を包含した機能を有して構成する。

また、動作の流れについても図１１に示すように各通信部でのやり取りが制御部４２０内で行われるようになり、その他のフローについては同様とすることができる。

なお、本実施例本例では、調理情報記憶部１３０と関連付け情報記憶部２３０にそれぞれ調理情報を記憶しているが、関連付け情報記憶部が調理情報記憶部１３０を包含するようにして、記憶するためのメモリを節約することができる。

このように構成することで、調理機器２０００内で制御状態、調理情報、識別情報、および画像情報又は画像を直接やり取りすることができるので、制御部を１つにして通信部を省くなどより単純な構成とすることができるので、安価に提供することができるようになる。また、ユーザにとっても調理機器２０００のみを購入するだけでよく、より導入しやすい装置とすることができる。

他にも、図１２に示すように調理機器１００と情報端末２００を組み合わせた機器５００と、カメラ３００とで構成する調理システム３０００や、図１３に示すように、カメラ付きの携帯端末のように情報端末２００とカメラ３００を組み合わせた情報端末６００と、調理機器１００とで構成する調理システム４０００で構成することでも関連付けを行う同様の効果を得ることができる。

ここで、図１３に記載の調理機器１００と情報端末６００で構成した場合の動作フローの一例として、ユーザが情報端末内に表示されているレシピを選択し、調理後に撮影を行い、画像と調理情報の関連付けを行い、コミュニティサイトへ投稿するまでの流れを、図１４の構成図及び、図１５の動作フローの図を用いて説明する。

情報端末６００は、例えば図１５に示すように、表示部２４０に調理内容であるレシピの表示及び、入力部２５０で調理機器１００の制御を行うための調理設定の入力受付を行う。（Ｓ１５０１ステップ）
入力部２５０で調理設定の入力を受け付けると、制御部２２０にて調理機器１００を制御するための調理情報を生成する。（Ｓ１５０２ステップ）
制御部２２０は、生成した調理情報を通信部２１０を介して、調理機器１００へ送信する。（Ｓ１５０３ステップ）
調理機器１００の制御部１２０は、通信部１５０を介して取得した調理情報にもとづき、調理部１４０の調理の制御を行う。（Ｓ１５０４ステップ）
制御部１２０は、調理機器１００の制御状態を、通信部１５０を介して、情報端末６００へ送信する。（Ｓ１５０５ステップ）
情報端末６００の制御部２２０は、前記ステップＳ５０５同様に、調理情報を関連付け情報記憶部２３０に保持する。（Ｓ１５０６ステップ）
次に、制御部２２０は、前記ステップＳ５０６同様に、通信部２１０を介して取得した調理機器１００の制御部１２０の制御状態や調理情報から、調理機器の状態に応じて、どのタイミングで撮影するか指示を出すための撮影要求の判断を行う。（Ｓ１５０７ステップ）
ステップＳ１５０７の撮影要求の判断処理によって、撮影すると判断する場合は、制御部２２０は、表示部２４０及び入力部２５０を制御して撮影確認の表示を行う。（Ｓ１５０８ステップ）
例えば、図１７に示すように、情報端末６００のカメラ部３３０を調理した料理に向けて撮影可能な状態にするようにユーザに促す。

情報端末２００は、入力部２５０から「ＯＫ」の入力を受け付けると、制御部２２０にて、カメラ部３３０を制御して撮影を行い記録部３４０に画像を記録する。（Ｓ１５０９ステップ）
情報端末２００の制御部２２０は、撮影した画像情報と、Ｓ１５０６にて関連付け情報記憶部２３０に予め保存しておいた調理情報とを関連付ける。（Ｓ１５１０ステップ）
さらに、情報端末２００の制御部２２０は、通信部２１０を介して、予め設定しておいたインターネット上のレシピのコミュニティサイトに自動的に投稿を行う。（図１８）（Ｓ１５１１ステップ）
なお、インターネット上のサイトへ自動的に投稿するには、ユーザＩＤやパスワードなどの各種ネットワークに接続するための手続きが必要であるが、一般的なサイトとの通信であるとして、ここでは説明を省略する。

このように構成することで、一般的に普及しているカメラ付きの携帯電話やスマートフォンと同様の構成である情報端末６００及び、ネットワーク接続可能な調理機器１００を用いることで、料理画像と調理情報を関連付けすることができるようになるので、ユーザは調理機器１００のみを購入することで、ユーザが既に保有している情報端末を利用して
、同等の効果を得る構成とすることができるようになる。

次に、調理情報の関連付けを行う制御プログラムについて説明する。

調理情報の関連付けを行う制御プログラムは、料理を作るために調理機器の制御をする調理制御ステップと、前記調理制御ステップの制御の設定内容である調理機器の調理情報を取得する調理情報取得ステップと、前記調理制御ステップ、又は前記調理情報から、前記調理機器の状態に応じて、画像の撮影が必要なタイミングで撮影の要求を行う撮影要求ステップと、前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、を実行させる。

これによれば、この制御プログラムを動作させることで、調理機器の適切な調理のタイミングで、撮影した料理の写真や動画の画像と、調理機器の調理情報を自動的に関連付けることができるようになる。

例えば、インターネット上のコミュニティサイトへ料理画像を投稿する際に、料理画像を選択するだけで、料理画像に関連付けられている調理機器の調理情報を抽出することができるので、投稿する料理に対しての調理機器の調理情報を自動的に投稿することができるようになる。

このため、ユーザは投稿する際に、過去に料理した画像を選択することだけで、容易に調理機器の調理情報を投稿することができ、さらに投稿の際の記載間違いを防ぐことができるようになる。また、制御プログラムを更新することによって、コミュニティサイトのサービスに応じて、自動的にサイトへ投稿するように変更することが可能である。

なお、発明を実施するための形態の項においてなされた具体的な実施態様又は実施例は、あくまでも、本発明の技術内容を明らかにするものであって、そのような具体例にのみ限定して狭義に解釈されるべきものではなく、本発明の精神と次に記載する特許請求事項との範囲内で、種々変更して実施することができるものである。

本発明は、特に、撮影した料理の画像をインターネット上の共有サイトへ投稿する際等に有用である。

１００、５００．２０００ 調理機器
１１０、２５０ 入力部
１２０、２２０、３２０、４２０ 制御部
１３０ 調理情報記憶部
１４０ 調理部
１５０、２１０、３１０ 通信部
２００、６００ 情報端末
２３０ 関連付け情報記憶部
２４０ 表示部
３００ カメラ
３３０ カメラ部
３４０ 記録部
１０００，３０００、４０００ 調理システム

Claims (9)

1. 撮影された画像と調理機器の調理方法を関連付ける制御方法であって、
   
   調理を行うために調理機器の制御を行う調理制御ステップと、
   前記調理制御ステップにおける調理機器の調理情報を取得する調理情報取得ステップと、
   前記調理機器の状態に応じて、撮影の要求を行う撮影要求ステップと、
   前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、
   前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、
   を備えた画像と調理情報を関連付ける制御方法。
   
2. 前記調理機器を識別するための識別情報を取得する識別情報取得ステップを備え、
   前記関連付けステップは、前記画像と、前記調理情報と、さらに前記識別情報取得ステップで取得した識別情報と、を関連付ける、
   請求項１に記載の画像と調理情報を関連付ける制御方法。
3. 前記撮影要求ステップは、調理が完了したタイミングで要求を行う、請求項１〜２に記載の画像と調理情報を関連付ける制御方法。
4. 前記撮影要求ステップは、調理が正常に完了した場合は撮影要求を行い、調理を中止した場合には撮影要求を行わない、請求項１〜３に記載の画像と調理情報を関連付ける制御方法。
   
5. 前記撮影要求ステップは、前記調理情報の内容により撮影が必要な場合は撮影要求を行い、撮影が不要な場合は撮影要求を行わない、請求項１〜４に記載の画像と調理情報を関連付ける制御方法。
6. 前記カメラ制御ステップにて撮影を行う際に、ユーザに撮影実施の確認を行う撮影確認ステップを備える、請求項１〜５に記載の画像と調理情報を関連付ける制御方法。
   
7. 前記関連付けステップは、撮影した画像内に前記調理情報を含めるように関連付ける、請求項１〜６に記載の画像と調理情報を関連付ける制御方法。
   
8. 画像と調理情報を関連付ける装置であり、
   調理を行うために調理機器の制御をする調理制御手段と、
   前記調理制御手段の設定内容を記憶する調理情報記憶手段と、
   前記調理制御手段によって調理を行う調理手段と、
   前記調理制御手段又は前記調理情報から、前記調理機器の状態に応じて、
   前記調理機器で調理した料理の画像を撮影するようにカメラの制御を行うカメラ制御手段と、
   撮影を行うカメラと、
   前記カメラで撮影した画像を記憶する記録手段と、
   前記記録手段に記録した画像と、前記調理情報記憶手段に記録した調理情報の関連付け
   情報を記憶する関連付け情報記憶手段と、を備えた、画像と調理情報を関連付ける装置。
9. コンピュータに画像と調理情報を関連付けるように実行させるためのプログラムであり、
   調理を行うために調理機器の制御を行う調理制御ステップと、
   前記調理制御ステップにおける調理機器の調理情報を取得する調理情報取得ステップと、
   前記調理機器の状態に応じて、撮影の要求を行う撮影要求ステップと、
   前記撮影要求ステップの要求を受けて、前記調理機器で作った料理の画像を撮影するためのカメラの制御を行うカメラ制御ステップと、
   前記カメラ制御ステップで撮影した画像と、前記調理情報取得ステップで取得した調理情報を関連付ける関連付けステップと、をコンピュータに実行させるプログラム。

Images